The solution of the Hopfield model with Gaussian patterns

技術的要約：ガウス型パターンを用いたホップフィールド・モデルの解

問題提起
本論文は、ガウス型パターンを持つホップフィールド・モデルにおける自由エネルギー（クエンチされた圧力）の熱力学的極限の厳密な導出に取り組んでいる。このモデルでは、$N$ 個のイジング・スピンが $M = \alpha N$ 個の格納されたパターン $\xi^\mu \in \mathbb{R}^N$ を介して相互作用する。Amit, Gutfreund, and Sompolinsky (AGS) によるレプリカ理論は、常磁性、スピングラス、および想起（リトリーバル）相を含む相図を予測しているが、数学的な厳密な結果は、歴史的にレプリカ対称性の領域（小さな負荷 $\alpha$ または高温 $T$）またはアニールド（焼きなまし）領域に限定されていた。根本的な障害は、ホップフィールド・ハミルトニアンのハバード・ストラトノビッチ表現における非凸性にあった。これは、可視的なイジング・スピンと連続的なガウス型隠れユニットとの間の二部グラフ・システムを記述している。標準的な補間技術（Guerra–Toninelli）やマルチ・スピーシーズ理論は、この二部構造に特有のオーバーラップの積によって破綻する凸性条件に依存している。さらに、これらの制限された領域外における熱力学的極限の存在も確立されていなかった。

手法
著者らは、以下の3段階のメカニズムを通じて、大 $N$ 極限におけるクエンチされた圧力を導出している：

1. ハバード・ストラトノビッチ変換: モデルを、$N$ 個のイジング・スピンと $M$ 個のガウス型隠れユニットからなる二部グラフ・システムへと写像する。相互作用はガウス変数に対して線形である。
2. 動径分解とラプラス原理: $\mathbb{R}^M$ におけるガウス・ベクトルは、ランダムな半径 $s$ と、球面上における一様な方向 $\tau$ に分解できることを著者は指摘している。半径 $s$ は、ガウス・ノルムの分布から導かれるエントロピー的コスト $I_\alpha(s)$ を持つ熱力学変数として機能する。分配関数は、有効結合 $\gamma = \beta s^2$ を持つイジング・球面モデルの半径 $s$ に関する積分として表現される。ラプラス原理を適用することで、自由エネルギーが半径 $s$ に関する変分原理（$s$ に関する上限）に収束することが示される。
3. 混合モデルの解法: 得られたイジング・球面モデル（ガウス結合を持つ）は、Mourrat によって開発されたハミルトン・ヤコビ・アプローチを用いて解かれる。この手法は、自由エネルギーを仮想的な時間（結合強度）とパリス・オーダー・パラメーターの関数として扱う。二部モデルの共分散は凸ではないため、解は標準的なパリス変分原理ではなく、共役変数（オーバーラップ）に関する上限（supremum）とパリス・オーダー・パラメーターに関する下限（infimum）を含む**ホップ公式（Hopf formula）**となる。

主な貢献と結果

• 熱力学的極限の存在: 本論文は、すべての負荷 $\alpha > 0$ および温度 $T > 0$ に対して、自由エネルギーが定義された変分原理にほとんど確実に、かつ期待値において収束することを証明している。
• 明示的な変分原理: 極限圧力 $P(\alpha, \beta)$ は次のように与えられる：
  $$P(\alpha, \beta) = \sup_{s>0} \left\{ \phi_\alpha(\beta s^2) - I_\alpha(s) \right\}$$
  ここで、$\phi_\alpha$ は混合イジング・球面モデルの圧力であり、$I_\alpha(s)$ は半径の相対エントロピー・コストである。
• 熱力学変数（半径）: 隠れ層の半径（隠れユニットの経験的分散）が熱力学変数として特定されている。論文では、この半径に関する状態方程式を導出し、$s^2=1$ に対するエントロピー的嗜好と、より大きな揺らぎに対するエネルギー的駆動力がいかに均衡するかを示している。
• 厳密な相図:
  • アニールド領域: $T \ge T_g = 1 + \sqrt{\alpha}$ のとき、モデルはアニールド（自由エネルギーがアニールド自由エネルギーに等しい）となる。
  • グラス（ガラス）領域: $T < T_g$ において、圧力はアニールド値よりも厳密に小さくなる。$T_g$ における遷移は、アニールド領域の厳密な境界として特定されている。
  • 想起相の不在: ガウス型パターンにおいて、正の負荷がある場合、対称なギブス測度における想起相が存在しないことが（対称性の議論を通じて）確認されている。
• レプリカ対称性と AGS 理論:
  • 変分原理を定数パスに制限することで、AGS のレプリカ対称な汎関数が厳密な上界として回収される。
  • 本論文は、AGS スピングラス解が一意的であることを証明している。
  • レプリカ対称性の破れ (RSB): $T < T_g$ では、レプリカ対称な解は不安定である。不安定性の条件は、シャーロット・カーン・モデル (SK model) のゼロ磁場 de Almeida–Thouless (AT) 条件と正確に一致する。したがって、スピングラス相全体がレプリカ対称性を破っており、AGS 自由エネルギーはこの領域において厳密な上界となる。

意義
本論文は、すべての温度において有効な上界として、AGS 汎関数を仮定なしに導出した最初の研究である。ハミルトン・ヤコビ／ホップ公式の枠組みを利用し、隠れ層の半径を熱力学変数として導入することで、ホップ・モデルにおける非凸性の長年の問題を解決した。このアプローチは、レプリカ対称性が破れる低温度のスピングラス相を含む全相図へと、厳密な結果を成功裏に拡張している。本研究は、ホップ・モデルにおける AGS 解の不安定性が SK モデルにおける AT 不安定性と構造的に等価であることを確立し、ガウス型パターンに対するモデルの熱力学を完全かつ厳密に特徴付けている。