情報科学 › AI時代の生存戦略 › AI時代のITエンジニアの生存戦略

pass@k

定義 4.4(「AI時代のITエンジニアの生存戦略」§4)

1 つの課題に対してモデルから kk 個の解を独立に標本抽出し、そのうち少なくとも 1 つが検証に合格する確率を pass@k と呼びます [5]。1 回あたりの合格確率を qq、各標本が独立であるとすると

pass@k=1−(1−q)k\mathrm{pass}@k = 1 - (1-q)^k

です(pass@1=q\mathrm{pass}@1 = q)。

本文で読む(前後の説明と例)→

閉包の状態

定義

定義は閉包の起点です(証明を要しません)。

印の意味: ✓公理まで証明済み ・ △証明あり(閉包未完)・ ※主張のみ。テーマごとの集計は 閉包の状況。

これを使っている定理

証明で明示的に参照している定理は、まだありません。

関連するノック 2 問