すべての人に一次情報を
ディープ・マンバモデルでは、最初に入力されるトークンが特別な動きを示し、以降のトークンを同じ方向へ引き寄せることが判明しました。この現象はトークンの集団化と注意の“シンク”として知られています。
研究者は高次元不変ボックスと鋭い出口時間の議論からなる新しい解析枠組みを構築しました。この枠組みはシンプレックスの符号確定性を再構築し、トークン軌道の指数的収束速度を明示的に算出します。
シミュレーションでは、最初のトークンが座標単位ベクトル(±e_d)に収束し、その位置に後続トークンが引き寄せられる様子が観察されました。また、単純化したMamba‑2ブロックで多数実験すると、90%以上のケースで最初のトークンが単一非ゼロ要素を持つ状態に収束し、同様に注目先が定まりました。




解析は連続時間極限と漸近挙動に限定され、実際の離散化された大規模マンサ実装への適用には追加研究が必要です。