Artificial Analysis meluncurkan AA-Video-I2V v2.1, benchmark untuk model image-to-video

Artificial Analysis meluncurkan AA-Video-I2V v2.1 dan AA-Video-I2V-Silent v2.1, benchmark untuk model image-to-video. Setiap prompt memasangkan gambar awal 1080p dengan prompt yang ditulis khusus untuk gambar tersebut, lalu diberi tag berdasarkan kasus penggunaan, kemampuan, dan gaya visual; model dinilai hingga resolusi 1080p dan diperingkat dalam 10 kasus penggunaan serta 10 kemampuan. Peringkat keseluruhan mengambil sampel secara merata dari semuanya. Hasilnya berasal dari Artificial Analysis sendiri.

Peringkat AA-Video-I2V v2.1 didasarkan pada lebih dari 58.000 suara dari evaluator privat di AS dan Inggris untuk lebih dari 1.000 prompt, sedangkan versi Silent didasarkan pada lebih dari 44.000 suara untuk 500 prompt. Artificial Analysis mengatakan hanya 5% prompt yang ada di arena publiknya, dan prompt dirotasi setiap bulan untuk mencegah kontaminasi.

Hasil yang dilaporkan:

• Dreamina Seedance 2.5 menempati peringkat #1 secara keseluruhan, secara statistik imbang dengan Seedance 2.0 dan keluarga MiniMax H3, serta memimpin 11 papan peringkat kategori. Dengan harga $34.12 per menit, model ini paling mahal di antara 10 teratas.
• Dreamina Seedance 2.0 berada di #2, dan #1 dalam Sinkronisasi Audio serta Pencahayaan & Material.
• MiniMax H3 (768p), model dengan bobot terbuka, berada di #3 dengan harga $4.80 per menit—sekitar seper tujuh harga Seedance 2.5—dan #1 dalam Perenderan Teks. Model ini berada di frontier Pareto kualitas-versus-harga pada kedua benchmark.
• MiniMax H3 Max, yang dilatih lanjut oleh fal, berada di #4 dengan audio dan #1 pada versi Silent.
• Bach 1.0 Pro dari Video Rebirth berada di #3 pada versi Silent, secara statistik imbang untuk #1, dengan harga $7.20 per menit.
• Peringkatnya berbeda dari text-to-video: Wan 3.0, yang memimpin AA-Video-T2V v2.1, berada di #5 di sini, dan Gemini Omni Flash 1.1 berada di #9 secara keseluruhan tetapi #3 dalam Sinkronisasi Audio.