MLCommons、MLPerf Client v1.6を発表：性能最適化とユーザーエクスペリエンスの向上

MLCommons®は、業界標準のMLPerf®基準テストの背後にあるオープンソースエンジニアリングアライアンスとして、個人用コンピュータのAI性能を評価するための基準テストスイートの最新バージョンであるMLPerf Client v1.6を発表しました。

MLPerf Clientは、ノートパソコン、デスクトップ、ワークステーションなどのPCでローカルにAIワークロード（例えば、大規模言語モデルLLM）を実行する際の効果を測定するために使用されます。テキスト要約、コンテンツ作成、コード分析を含む実際の生成AIタスクをシミュレートすることで、応答速度やスループットなどの明確で標準化された指標を提供します。

v1.6バージョンは、基準テストの体験を最適化し、重要なソフトウェアコンポーネントを更新し、利用性と性能を向上させました。

MLPerf Client v1.6の新機能

MLPerf Client v1.6は、コアAIランタイムとフレームワークを更新することで加速サポートを向上させました。これには、Windows MLとllama.cppの新バージョン、そしてWindowsプラットフォームの独立ハードウェアベンダーの最新ランタイム最適化が含まれます。Appleプラットフォームでは、MLX with Metalとllama.cpp with Metalの更新により、macOSとiPadシステムの性能と互換性がさらに向上しました。

このバージョンでは、グラフィカルユーザーインターフェースにも多くの改良が施されました。アプリケーションの読み込み時間を短縮するために起動性能を最適化し、初期化プロセスの明確なフィードバックを提供するプログレスバーを新たに追加し、内部のアーキテクチャを改良して基準テストの実行の全体的な安定性を向上させました。

反復テストプロセスを簡素化するために、MLPerf Client v1.6では基準テストの開始時にダウンロード確認を無効にするオプションを追加しました。これにより、ユーザーはワンクリックで効率的に複数のバッチテストを実行することができ、レビュアーや開発者の生産性を向上させます。

これらの更新により、MLPerf Clientは各種クライアントシステムのAI性能を評価するための信頼性が高く使いやすい基準としての地位をさらに強固なものにしました。

MLPerf Clientは、AMD、Intel、Microsoft、NVIDIA、Qualcomm Technologies, Inc.および主要PC OEMメーカーといった先進技術企業が共同で開発しています。基準テストは完全に無料でオープンソースであり、ソースコードはMLCommons GitHubリポジトリで確認および貢献が可能です。

ダウンロード、ドキュメントその他の情報については、mlcommons.org/benchmarks/clientをご覧ください。グラフィカルインターフェース版は、iOSおよびMac App Storeでダウンロード可能であり、数日中にSteamにも登場予定です。

MLCommonsについて

MLCommonsは、機械学習をすべての人に役立てることを目指すオープンソースエンジニアリングアライアンスです。この組織は、クラウド、データセンター、エッジ、クライアントAIシステムをカバーする先進的な基準テスト、データセット、ベストプラクティスを開発しています。そのMLPerf基準スイートは、機械学習性能測定の業界標準として広く認識されています。