Claude Opus 4.7が95.19点で首位:2026-08-03 Smokeクイックテストデータ速報

2026-08-03のYZ Index Smokeクイックテストは11モデルを対象とし、Claude Opus 4.7が95.19点で当日首位となった。Smokeは毎日10問のクイックテストであり、短期シグナルの観測に適しているが、週次Fullランキングの結論とは同等ではない。

今回のSmokeテストはコード実行と資料制約の2つのメイン指標のみをカバーしており、メインスコアの算式は0.55 × コード実行 + 0.45 × 資料制約である。1日あたりのサンプル数が少ないため、単日スコアはモニタリングシグナルとして参照するものであり、モデルの能力に対する長期的な結論としては適さない。

当日ランキング

順位モデルメインコード実行資料制約誠実性
#1Claude Opus 4.795.1910089.3pass
#2Grok 489.3197.978.8pass
#3Gemini 2.5 Pro78.598.753.8pass
#4GPT-5.574.7583.364.3pass
#5GPT-o374.7583.364.3pass
#6GLM-4.672.2558.389.3pass
#7DeepSeek V4 Pro70.197564.3pass
#8Claude Sonnet 4.662.965078.8pass
#9Gemini 3.1 Pro60.6257.664.3pass
#10Qwen3 Max58.947539.3pass
#11Doubao Pro55.8957.653.8pass

データ解説

本日のSmokeクイックテストでは、Claude Opus 4.7がメインスコア95.19で首位となり、コード実行100・資料制約89.3の組み合わせが優位性をもたらした。Grok 4はそれに続きメインスコア89.31、コード実行97.9・資料制約78.8を記録。Gemini 2.5 Proはコード実行98.7を達成したものの資料制約は53.8にとどまり、メインスコアは78.5となった。GLM-4.6は資料制約89.3・コード実行58.3の組み合わせでメインスコア72.25を記録しており、上位モデルが0.55×コード実行+0.45×資料制約の算式のもとで異なるウェイトバランスを示す結果となった。

複数モデルで顕著な下落が見られた。Doubao Proはメインスコアが40.8点低下し、コード実行は36.4点、資料制約は46.2点それぞれ低下した。Qwen3 Maxはメインスコアが37.2点低下し、コード実行22点・資料制約55.7点の低下を記録。Gemini 3.1 Proはメインスコアが33.8点低下し、コード実行36.4点・資料制約30.7点それぞれ低下した。これらの変動は単日小サンプルのサンプリング誤差に起因する可能性もあるが、実際の性能劣化を反映している可能性もあり、同条件での再実行による確認が必要である。

Claude Sonnet 4.6とDeepSeek V4 Proもそれぞれメインスコアが31.5点・24.3点低下し、コード実行・資料制約ともに下落した。全体の構造としては誠実性passの記録を維持している。Smokeは小サンプルの単日シグナルであり、現時点のデータはあくまで参考として提供されるものであり、長期的な推論の根拠とはならない。

主な変動

  • Doubao Pro:メインスコア40.8点低下、コード実行-36.4点、資料制約-46.2点
  • Qwen3 Max:メインスコア37.2点低下、コード実行-22点、資料制約-55.7点
  • Gemini 3.1 Pro:メインスコア33.8点低下、コード実行-36.4点、資料制約-30.7点
  • Claude Sonnet 4.6:メインスコア31.5点低下、コード実行-44点、資料制約-16.2点
  • DeepSeek V4 Pro:メインスコア24.3点低下、コード実行-19点、資料制約-30.7点、誠実性warn→pass

注目すべきシグナル

  • 今回は公表すべき異常シグナルは確認されなかった。

このようなSmoke速報を読む際は、主に2点に着目すべきである。第一に、特定のモデルが複数日にわたって同種の弱点を継続的に露呈しているかどうか。第二に、誠実性評価がpassからwarnまたはfailに移行しているかどうか。単日のコード実行・資料制約スコアの大幅な変動は、問題のサンプリングに起因する場合もあれば、実際の性能劣化の初期シグナルである場合もあり、その後の再実行による検証が必要である。


データ出典:YZ Index | Run #258 | 元データを見る