守约测试 に関するニュース

レビュー

WDCD 5シナリオ横断評価:データ境界シナリオが最低1.7点で最下位、安全コンプライアンスが最大の弱点に

WDCD v3.1パイロット評価において、データ境界シナリオで最低点1.7点(Qwen3-max)、安全コンプライアンスシナリオで1.8点(Doubao Pro)が記録され、この2シナリオが全モデルにおいて最も得点が低く、かつ識別力が最も高

WDCD 守约测试 数据边界 安全合规
1,438
レビュー

15モデル中R3完全崩壊はわずか1回——Qwen3 MaxはR3崩壊率10% WDCD v2アンカー問題の三段階衰減の真相

v2アンカー問題8問のサンプリング条件下で15モデルの約束遵守スコアを分析した結果、R1確認率100%・R2抵抗率60%・R3誠実率76.7%という明確な三段階衰減パターンが確認された。150回のworst-of-3サンプリング中、R3完全

WDCD 守约测试 约束衰减 模型行为分析
521
レビュー

WDCD 5シナリオ横断評価:エンジニアリング規範が最低2.45点、DoubaoとClaudeの得意・不得意の差は1.45点

WDCD v3.1の5大制約シナリオ横断評価において、エンジニアリング規範シナリオで全モデルの得点が最低となり、Doubao-proは11モデル中最低の2.45/4を記録した。安全コンプライアンスシナリオでは最大1.2点の差が生じ、モデルご

WDCD 守约测试 模型评测 Claude Opus
638