このコメントスレッドは「誰もエントロピーを本当に理解していない」という証拠の一つだね。私の基本的な理解はこんな感じ:熱力学では、膨大な数のマイクロ状態や動的変数を、2〜3の測定可能なマクロ状態変数で説明するんだ。(例えば、理想気体のN, V, Eとか。)そのマクロ状態変数のダイナミクスを考えると、(第一近似、つまり熱力学的限界で)それらはシステムのエントロピー関数S(E, N, V)の形にだけ依存することがわかるんだ。もし他のマクロ状態変数、例えばエネルギーの分散σ²(E)や重心mを測定したら、新しい「エントロピー」S(E, N, V, σ²(E), m)に依存する新しい動的関係を作れるよ。1000個の変数を追加したり、100万個、例えば画像のすべてのピクセルまで、基本的には熱力学的限界の仮定が成り立たなくなるまでできる。得られるS関数は、マージナライズしているすべての変数が残りの変数間の関係にどのように寄与しているかを捉えるんだ。これが「不完全な知識」を表す意味なんだ。エントロピーの依存性はマクロ状態変数間の関係に数学的に現れるんだ。彼らは、この関数を通じてしか結びつけられないんだよ。これが機能するのはかなり驚きだね!いくつかの仮定に依存しているけど(凸性や因子分解可能性など)、ほとんどの、あるいはすべての平衡熱力学スケールのシステムに適用されるんだ。理想気体の場合、古典力学、古典確率、量子力学のシステムの記述は、この大規模なマージナリゼーションの下で同じS(N, V, E)関数に収束するんだ。彼らの基盤となる多様体構造の最も「ズームアウト」した視点は同じになるから、みんな同じことを説明しているんだ。(粒子のサイズのような一見明白なことが重要でないのは驚きだね。非漸近的なダイナミクスは、エネルギーが入る「スロット」の情報理論にだけ依存することがわかる。)これらすべては熱力学的限界における制限手続きの産物のように見えるけど、もしかしたらこれがもっと「リアル」なものかもしれない。特定しにくい量子デコヒーレンスが、これが非常に鋭い第一近似の限界で真実であるだけでなく、実際に物理的に真実であることにつながるかもしれない。最近はこの分野について追いついてないけど、重力にどう適用するかは全くわからないな。