配分を変えて試す:テスト時計算を手元で測るステップ|チュートリアル
チュートリアル / モデル・学習

配分を変えて試す:テスト時計算を手元で測るステップ

計算を増やす前に、どの問いに効くのかを見極める必要があります。やさしい問いと手強い問いを用意し、候補の数と見直しの回数を変えて、正答と待ち時間を記録するところまでを5つの手順に分けます。

対象用語:Test-Time Compute(テスト時計算)形式:手順+確認ポイント更新:2026年10月31日
手

手順

  1. 測る課題を10問そろえる

    正解が決まっている課題を10問用意します。やさしい課題を5問、手強い課題を5問に分けます。正解を機械的に確かめられない課題は、この測定から外します。

    確認ポイント:10問の正解と、やさしい・手強いの区分を書いたか
  2. 比べる進め方を2つに絞る

    1つは答えだけを出す進め方、もう1つは候補を3つ出して1つ選ぶ進め方です。2つに絞るのは、差が出た理由を後から説明しやすくするためです。使うモデルと指示文は、2つの進め方で同じにします。

    確認ポイント:2つの進め方の違いを1行で説明できるか
  3. 同じ条件で10問を解かせる

    それぞれの進め方で、10問を続けて解かせます。1問ごとに、正誤と応答までの時間を記録します。時間は、画面の時計ではなく、測った時刻の差として残します。

    確認ポイント:20件の正誤と時間を記録したか
  4. 区分ごとに差を見る

    やさしい5問と手強い5問に分けて、正答の数と時間の中央値を並べます。手強い側だけ改善し、やさしい側が変わらないなら、配分を分ける価値があります。両方とも変わらない場合は、検証の基準が弱い可能性を疑います。

    確認ポイント:区分ごとの差を表にしたか
  5. 配分の決まりを1枚にまとめる

    測定の結果から、どの条件で候補を増やすかを決めます。決まりは、判定の条件、候補の数、見直しの回数の3つで書きます。あわせて、1件あたりの待ち時間の上限も決めます。決まりは、次に測ったときの比較の基準になります。

    確認ポイント:判定の条件と上限を書き残したか
Q

つまずきポイント

手強い課題でも差が出ない
検証の基準が答えの正しさを捉えていない可能性があります。正解を機械的に確かめられる課題に限って、もう一度測ります。それでも差が出ない場合は、候補の数を5つに増やして比べます。
待ち時間が上限を超えた
候補の数を減らすか、見直しの回数を1回に固定します。上限を超えた件数と、そのときの課題の区分を記録しておくと、次回の配分の判断に使えます。
あわせて読みたい:用語の意味から確認したい場合は 用語一覧、基礎から順に学ぶ場合は チュートリアル「はじめての LLM 活用」、コピーして使える例文は プロンプト集、実際に使う道具は AI ツール一覧 をご覧ください。

用語の詳細を確認する

Test-Time Compute(テスト時計算) の定義・仕組み・出典・プロンプト集はこちら。

Test-Time Compute(テスト時計算) のページを開く →

AIクローラーの主要運営者

  • Yandexクローラー39種
  • Googleクローラー32種
  • Baiduクローラー10種
  • Amazonクローラー8種
  • Metaクローラー8種
  • OpenAIクローラー6種
  • Anthropicクローラー6種
  • Microsoftクローラー6種
  • ByteDanceクローラー4種
  • Mistral AIクローラー3種
  • Awarioクローラー3種
  • Semrushクローラー3種

運営者109社をすべて見る →

週1回・無料

AEO診断・AIクローラー最新情報を、
週1回お届け

AI Botの仕様変更やAEO対策のノウハウ、よくあるトラブル事例を編集部が厳選しメール配信。いつでも配信停止可能です。

  • 新Bot・仕様変更AIクローラーに新しいBotが追加されたとき、判定仕様が変わったときの速報
  • 障害事例と対処AEO診断で多い障害事例と、その対処方法を実例で解説
  • AEO活用術Web制作会社・SEO担当者向けのAEO活用テクニック

登録により 利用規約に同意したとみなされます。確認メールのリンクを押すと登録が完了します。

My-Best.AI|AIツール比較・ランキング・おすすめ最新AI情報
Logo