Artificial Analysis、画像から動画を生成するモデルのベンチマーク「AA-Video-I2V v2.1」を公開

Artificial Analysisは、画像から動画を生成するモデルのベンチマーク「AA-Video-I2V v2.1」と「AA-Video-I2V-Silent v2.1」を公開しました。各プロンプトは、1080pの開始画像とそれに合わせて作成されたプロンプトを組み合わせ、ユースケース、能力、ビジュアルスタイルのタグが付けられています。モデルは最大1080pで評価され、10のユースケースと10の能力にわたって順位付けされます。総合ランキングでは、それらを均等にサンプリングします。結果はArtificial Analysis独自のものです。

AA-Video-I2V v2.1のランキングは、1,000件のプロンプトを対象に、米国と英国の非公開評価者から集めた58,000票超に基づいています。Silent版は500件のプロンプトを対象に、44,000票超に基づいています。Artificial Analysisによると、公開アリーナで使用されるプロンプトは全体の5%にすぎず、汚染を防ぐためプロンプトは毎月入れ替えられます。

報告された結果:

• Dreamina Seedance 2.5は総合1位で、Seedance 2.0およびMiniMax H3ファミリーと統計的に同率です。11のカテゴリ別ランキングで首位に立っています。1分あたり$34.12で、トップ10の中で最も高価なモデルです。
• Dreamina Seedance 2.0は2位で、Audio SynchronizationとLighting & Materialsでは1位です。
• オープンウェイトモデルのMiniMax H3 (768p)は、1分あたり$4.80で3位です。Seedance 2.5の約7分の1の価格で、Text Renderingでは1位です。両方のベンチマークで、品質と価格のパレートフロンティア上に位置しています。
• falが追加学習したMiniMax H3 Maxは、音声対応で4位、Silent版では1位です。
• Video RebirthのBach 1.0 Proは、Silent版で3位となり、統計的には1位と同率です。価格は1分あたり$7.20です。
• ランキングはテキストから動画を生成するモデルとは異なります。AA-Video-T2V v2.1で首位のWan 3.0は、こちらでは5位です。また、Gemini Omni Flash 1.1は総合9位ですが、Audio Synchronizationでは3位です。