4大モデル翻訳対決:第34週品質評価、gpt-o3が8.3点でトップ

今週の翻訳タスクは343件、4モデルが担当。抽出した3件についてマルチモデルブラインド評価を実施し、総合最優秀はgpt-o3(平均スコア 8.3/10)。

今週の翻訳統計

モデル言語翻訳量平均処理時間平均品質スコア
deepseek-v4-flashen6234.3s未評価
claude-sonnet-4.6ja17138.7s未評価
passthroughen1060s未評価
native-englishen1-未評価
deepseek-v4-flashzh120.9s未評価
deepseek-v4-flash:backtranslateen138.1s未評価
claude-sonnet-4.6en143.7s未評価

抽出サンプル比較評価

評価1:OpenAIモデルテストがHugging Faceに侵入――安全テストと防護優先の立場が対立

モデル正確性流暢性術語可読性合計
deepseek-v4-flash98988
deepseek-v4-pro87877
gpt-o398988

deepseek-v4-flash

✓ 「the model proactively discovering and exploiting a zero-day vulnerability」という重要な細部を正確に伝え、モデルが能動的に攻撃するという原文の意味を忠実に再現している。

✗ 本文末尾が切断されており、「Hugging Face's blog also recorded that its internal attempts to reproduce the attack failed due to restrictions from hosted model guardrails.」が不完全で可読性に影響している。

deepseek-v4-pro

✓ タイトル訳「OpenAI Model Test Breaches Hugging Face」が原文の主旨を簡潔に反映している。

✗ 翻訳内容をJSON形式で包んでおり、「{"translation":"..."}」は純粋なテキスト翻訳ではなく、不要なフォーマット干渉を生じさせている。

gpt-o3

✓ 「intruded into Hugging Face's production system」を用いて「侵入」の意味を正確に対応させており、術語が一貫している。

✗ 同様にJSONオブジェクト形式で出力されており、「{"translation": "..."}」は純粋な翻訳要件を満たさず、末尾も切断されている。

結論:3バージョンの翻訳品質は概ね同水準だが、Aバージョンが最も内容が完全で余分なフォーマットもなく、BとCはJSONラップおよび切断により若干劣る。

評価2:原文タイトル

モデル正確性流暢性術語可読性合計
claude-sonnet-4.676877
deepseek-v4-pro88988
gpt-o399999

claude-sonnet-4.6

✓ 構造の階層が明確で、段落見出しが適切に使われており、「驚異的な評価額の跳躍」が原文内容を明快に対応している。

✗ 明らかな誤記があり、「わずかなヶM以内に」の「ヶM」は無効な文字で、可読性に深刻な影響を与えている。

deepseek-v4-pro

✓ 術語処理が比較的一貫しており、「AIプログラミングエージェント」が原文に正確に対応している。

✗ タイトル「狂気じみた評価額の上昇」のトーンが誇張気味で、原文の中立的な表現からずれている。

gpt-o3

✓ 全体的な表現が自然で流暢であり、「異例の評価額急上昇」は原文に忠実でありながら日本語の表現習慣にも合致している。

✗ 一部の長文がやや複雑だが、全体への影響は小さい。

結論:バージョンC(gpt-o3)の総合品質が最も高く、正確性・流暢性・可読性のいずれも他バージョンを上回る。バージョンAは明らかな誤記により品質が最も低い。

評価3:GLM-4.6の誠実性評価がPassからFailに転落――タスク表現スコアが25点急落、メインランキングは12.8点上昇

モデル正確性流暢性術語可読性合計
claude-sonnet-4.699999
deepseek-v4-pro88788
gpt-o388898

claude-sonnet-4.6

✓ 術語の使用が正確かつ一貫しており、「誠実性評価がPassからFailに転落」が原文の評価変化の意味を完全に保持している。

✗ 段落がやや長く、一部の文は情報密度が高すぎるため、読む際に多くの区切りが必要となる。

deepseek-v4-pro

✓ スコア変化の記述が簡潔で、「タスク表現は-25点の大幅な下落」が数値の変動を直接的に示している。

✗ 大文字・小文字の表記が不統一で、「pass」「fail」が小文字になる箇所があり、原文のスタイルと合わず術語の一貫性に影響している。

gpt-o3

✓ タイトル部分の処理が適切で、「GLM-4.6の誠実性評価がPassからFailに タスク表現は25点急落」が核心的な変化を的確に要約している。

✗ 一部の表現がやや繰り返し気味で、「passからfailに変わった」が複数箇所に現れており、若干冗長に感じられる。

結論:バージョンAの総合品質が最も高く、正確性・流暢性・術語の一貫性のいずれも他バージョンを上回り、そのまま使用するのに適している。バージョンBとCはそれぞれ小さな瑕疵があるものの、全体的には許容範囲内である。