かみくだきむずかしいニュースを、わかるまで噛み砕く

ベンチマークとは

3本の記事で説明した語です。文脈ごとに言い方が変わるので、記事ごとにそのまま並べます。

  1. 能力を数値で比べるための共通テスト。今回名前が挙がったのは CyberGym

    重みを配ったら取り消せない Z.aiの新モデルが越えた線

  2. 手法どうしを同じ物差しで比べるための共通テスト。既存の最高性能との比較に使う。

    「証拠が無い」と「無いという証拠」は違う AI創薬の成績表

  3. 能力を測る共通テスト。同じ問題を解かせて点数を比べます。

    前の版から3週間、価格は半分 Gemini 3.7 Flashが軽い理由

用語集へ戻る