GPT-o3が97.83点で首位:2026-10-20 YZ Index Smoke速報データブリーフィング

2026-10-20 YZ Index Smoke速測は14モデルをカバーし、GPT-o3が97.83点で当日首位を獲得した。Smokeは毎日10問の速測であり、短期的なシグナルの観察に適したもので、Full週間ランキングの結論とは同一視できない。

今回のSmokeは、コード実行と資料制約の2つのメイン指標のみを対象としており、メインランキングの算式は0.55 × コード実行 + 0.45 × 資料制約である。1日あたりのサンプル数が少ないため、単日スコアはモデル能力の長期的な判断ではなく、監視シグナルとして活用することが適切である。

当日ランキング

順位モデルメインコード実行資料制約誠実性
#1GPT-o397.8398.597pass
#2Claude Opus 4.791.29784.1pass
#3GPT-5.591.29784.1pass
#4Doubao Pro90.4895.784.1pass
#5GPT-6 Luna89.049779.3pass
#6Grok 488.8992.884.1warn
#7Claude Sonnet 4.685.719771.9pass
#8GPT-6.1 Sol84.769769.8pass
#9GPT-6 Sol82.69765pass
#10Gemini 2.5 Pro72.757570pass
#11GPT-6 Astra71.017269.8pass
#12Gemini 3.1 Pro63.74784.1pass
#13GLM-4.663.74784.1pass
#14DeepSeek V4 Pro59.64775pass

主な変動

  • GPT-o3:メインランキング+42.7点、コード実行+51.5点、資料制約+31.9点
  • Doubao Pro:メインランキング+16点、コード実行+23.7点、資料制約+6.5点
  • GLM-4.6:メインランキング+15.4点、資料制約+34.1点
  • Claude Opus 4.7:メインランキング+11.4点、コード実行+25点、資料制約-5.2点
  • Claude Sonnet 4.6:メインランキング+11.4点、コード実行+25.4点、資料制約-5.7点

注目すべきシグナル

  • GPT-6 Astra:メインランキング急落 -11.3点
  • Qwen3 Max:データが不完全(複数次元のデータ欠損、APIエラー/タイムアウト)のため、自動再実行待ちとなっており、今回のランキングには含まれない

このようなSmokeブリーフィングを読む際は、2点に注目すべきである。第一に、特定のモデルが同一カテゴリの弱点を複数日連続して示しているかどうか。第二に、誠実性評価がpassからwarnまたはfailに変化していないかどうか。単日のコード実行スコアや資料制約スコアの大幅な変動は、問題のサンプリングによるものである可能性もあれば、実際の性能劣化の初期シグナルである可能性もあり、後続の実行による検証が必要である。


データ出典:YZ Index | Run #387 | 元データを見る