WDCD v3.1守約テストにおいて、Grok 4は97.50点で首位を獲得し、Qwen3 Maxは69.50点で11位となり、両モデルの合計スコア差は28点となった。
ランキング構造:上位に集中、下位に断絶
今回11モデルのスコア分布は明確な階層化を示した。上位3位のGrok 4(97.50)、GLM-4.6(91.80)、Claude Opus 4.7(91.50)はいずれも90点を突破。4位から8位は85〜88点の区間に集中。9位のClaude Sonnet 4.6(78.10)以降は明確な断絶が生じ、Doubao Pro(74.50)とQwen3 Max(69.50)は70点を下回った。全体の満点率は63.6%、R3崩壊率は6.4%であった。
首位分析:Grok 4は複数ラウンドの圧力下で最高の守約持続性を維持
Grok 4のv2アンカー問題における3ラウンドのスコアはすべて満点(R1=1.00、R2=1.00、R3=2.00/2)であった。これは、約束締結後に社会的同調、権威による特例認可、サラミ戦術、サンクコストという4種類の段階的圧力に直面した際に、約束の持続時間が最も長かったことを意味する。S_hold守約生存スコアの60点ウェイトの下、突破が最も遅かったことが総合スコアを直接押し上げた。一方、11位のQwen3 MaxはR1とR2も満点だったが、R3はわずか0点にとどまり、第3ラウンドの高圧段階で約束の拘束が即座に失効したことを示しており、S_holdの大幅な減点につながった。
最下位の原因:R3段階における約束記憶と回復能力の双方の弱さ
Qwen3 Maxの69.50点は主に、v3問題のS_kbv(約束記憶)15点とS_recover(突破後回復)10点の両項目での低得点に起因する。v3問題は8〜12ラウンドの対話中にKBV(主要拘束値)の復述プローブを設置しており、Qwen3 Maxは連続的な圧力後に初期ハード拘束の復述精度が上位モデルを大きく下回った。同時期のClaude Opus 4.7は91.50点を記録し、R3も1.00/2であったが、同じR3段階でもS_recoverスコアが高く、突破後により速く約束の枠組みに戻る能力を示した。
上位グループと下位グループの差異のメカニズム
上位3位と下位3位の差はR3スコアで最も顕著であった。Grok 4、GLM-4.6、Claude Opus 4.7のR3スコアはそれぞれ2.00、2.00、1.00。一方、下位3位のClaude Sonnet 4.6、Doubao Pro、Qwen3 MaxのR3スコアはいずれも0.00であった。v3問題の「連続圧力→KBV復述プローブ」セクションは、下位モデルが複数ラウンドの対話において並行ハード拘束の記憶が速く劣化することを直接露呈した。
生産プロセス導入におけるモデル選定の示唆
データ境界やセキュリティコンプライアンスのシナリオにAIを導入する企業は、Grok 4とGLM-4.6を優先的に検討することを推奨する。これら2モデルはR3高圧段階でも高いS_holdスコアを維持しており、リソース制限やエンジニアリング規範の長期実行が必要なプロセスに適している。GPT-o3(88.80)とGPT-5.5(88.60)はR2段階ですでに0点が出ており、第2ラウンドの干渉後から拘束が緩み始めることを示している。これらのモデルはビジネスルールシナリオへの適用に際し、追加のガードレールを設けた上で使用することが望ましい。Doubao ProとQwen3 MaxはR3段階で全面的に失守しており、低リスクかつ非コンプライアンスモジュールでのみの使用、または外部検証メカニズムの追加実装を推奨する。
戦略的判断:守約能力が過小評価・過大評価されているシグナル
Claude Opus 4.7は今期91.50点を記録し、前期比6.1点上昇。R3スコア1.00/2は高圧ラウンドでも一定の回復能力があることを示しており、この能力は市場に過小評価されている可能性がある。Qwen3 Maxの69.50点とR3の0点の組み合わせは、複数ラウンドの段階的圧力下における約束持続能力が同グループのモデルを明らかに下回ることを示しており、この差は次期での重点的な検証が必要である。Gemini 2.5 Proは前期比8.7点上昇したが、R3は依然として0点であり、改善は主にv3問題の前半セクションによるものであり、R3段階の安定性は引き続き観察が必要である。
今回のパイロット段階データは、R3段階のスコアが最終ランキングにおける上位3位と下位3位の帰属を直接決定することを示している。企業がモデルを選定する際は、R3スコアをハードな閾値として設けることを推奨する。1.00/2を下回るモデルをセキュリティコンプライアンスやリソース制限のシナリオで使用する場合は、追加の監視体制を整備する必要がある。
守約能力はモデルパラメータの付属物ではなく、生産環境において長期的に依存できるかどうかを決定する本質的な指標である。
データ出典:YZ Index WDCD 守約ランキング | Run #285 · 総合ランキング | 評価方法論
© 2026 Winzheng.com 赢政天下 | 转载请注明来源并附原文链接