Как информационная энтропия связана с понятием термодинамической энтропии?

Информационная энтропия связана с понятием термодинамической энтропии тем, что их формулы подобны. 1 Термодинамическая энтропия пропорциональна логарифму возможных физических состояний, а количество информации пропорционально логарифму возможных исходов события. 1

Например, Бриллюэн связал термодинамическую энтропию с информационной энтропией соотношением: ∆S ≥ ∆I, где ∆I — информация, полученная в результате измерения, проведённого посредством какого-то прибора, а ∆S — рост энтропии термодинамического состояния прибора в результате этого измерения. 2

Также информационную и термодинамическую энтропии связывает предел Ландауэра — минимальное количество энергии, необходимой для стирания одного бита информации. 1