AI评估に関するニュース

作弊できないAIランキング、なんとランキング対象企業が資金提供

AIモデルの事実上の公的ランキングとなったArenaが、実はランキング対象企業から資金提供を受けていることが判明し、その公正性に疑問が投げかけられている。

MIT Technology Reviewの「ダウンロード」ニュースレターが、AI能力追跡の困難さと原子力技術の革新という2つの重要な科学技術トピックスに焦点を当てる。

AI評価機関METRの「計算フロンティアプロット」は業界の進歩を示す重要な指標となっているが、単純な性能対計算量のグラフではなく、AIの人間レベル能力への接近を測る複雑な指標であることが理解されていない。

『MITテクノロジーレビュー』のニュースレター『ダウンロード』最新号では、AI分野における評価の難しさと、AI時代のエネルギー需要に応える次世代原子力技術の進展を取り上げている。