情報科学 › LLM アーキテクチャ › スケーリングと文脈

出力は受容野の中の入力だけの関数

補題 4.3(「スケーリングと文脈」§4) ・ ✓公理まで証明済み

上の形の層を LL 個重ねたとき、各 ℓ≤L\ell \le L と各 ii について、hi(ℓ)\boldsymbol{h}^{(\ell)}_i は (xj)j∈Rℓ(i)(\boldsymbol{x}_j)_{j \in R_\ell(i)} だけの関数です。すなわち、Rℓ(i)R_\ell(i) に入らない位置の入力をどう変えても hi(ℓ)\boldsymbol{h}^{(\ell)}_i は変わりません。

本文で読む(証明と前後の説明)→

閉包の状態

✓ 公理まで証明済み

証明が使う定理を 前提 としてたどると、Rikai の中の証明だけで定義・公理(物理では基本仮定)までつながっています(前提の定理類 2 件、定義なども含めて 3 件)。

印の意味: ✓公理まで証明済み ・ △証明あり(閉包未完)・ ※主張のみ。テーマごとの集計は 閉包の状況。

前提をたどる 証明が使う定理・定義(直接 1 件)

▸ を開くと、その項目の証明が使う前提が出ます。深い先は各項目のページでたどれます。

これを使っている定理 証明で参照している 2 件