情報科学 › LLM アーキテクチャ › 埋め込みと位置符号化

正弦波位置符号化の内積とノルム

命題 4.3(「埋め込みと位置符号化」§4) ・ ✓公理まで証明済み

任意の実数 p,qp, q について

⟨PE(p),PE(q)⟩=∑i=0d/2−1cos⁡(ωi(p−q)),∥PE(p)∥2=d2\langle \mathrm{PE}(p), \mathrm{PE}(q) \rangle = \sum_{i=0}^{d/2-1} \cos\big(\omega_i (p - q)\big), \qquad \|\mathrm{PE}(p)\|^2 = \frac{d}{2}

が成り立つ。とくに内積は相対位置 p−qp - q だけの関数である。

本文で読む(証明と前後の説明)→

閉包の状態

✓ 公理まで証明済み

証明が使う定理を 前提 としてたどると、Rikai の中の証明だけで定義・公理(物理では基本仮定)までつながっています(前提の定理類 44 件、定義なども含めて 57 件)。

印の意味: ✓公理まで証明済み ・ △証明あり(閉包未完)・ ※主張のみ。テーマごとの集計は 閉包の状況。

前提をたどる 証明が使う定理・定義(直接 1 件)

▸ を開くと、その項目の証明が使う前提が出ます。深い先は各項目のページでたどれます。

これを使っている定理 証明で参照している 1 件

関連するノック 3 問