Artificial Analysis lancia AA-Video-I2V v2.1, un benchmark per i modelli di generazione video da immagini

Artificial Analysis ha lanciato AA-Video-I2V v2.1 e AA-Video-I2V-Silent v2.1, un benchmark per i modelli di generazione video da immagini. Ogni prompt abbina un'immagine iniziale a 1080p a un prompt scritto appositamente per essa ed è classificato per caso d'uso, capacità e stile visivo; i modelli vengono valutati fino a 1080p e classificati in 10 casi d'uso e 10 capacità. La classifica generale assegna lo stesso peso a ciascuna categoria. I risultati sono elaborati da Artificial Analysis.

La classifica AA-Video-I2V v2.1 si basa su oltre 58.000 voti di valutatori privati negli Stati Uniti e nel Regno Unito, raccolti su 1.000 prompt; la versione Silent si basa su oltre 44.000 voti raccolti su 500 prompt. Artificial Analysis afferma che solo il 5% dei prompt è presente nella sua arena pubblica e che i prompt vengono aggiornati ogni mese per contrastare la contaminazione.

Risultati riportati:

• Dreamina Seedance 2.5 è al primo posto assoluto, a pari merito sul piano statistico con Seedance 2.0 e la famiglia MiniMax H3, e guida 11 classifiche di categoria. A $34.12 al minuto, è il modello più costoso tra i primi 10.
• Dreamina Seedance 2.0 è al secondo posto e al primo nelle categorie Sincronizzazione audio e Illuminazione e materiali.
• MiniMax H3 (768p), un modello a pesi aperti, è al terzo posto a $4.80 al minuto, circa un settimo del prezzo di Seedance 2.5, e al primo nella categoria Rendering del testo. Si trova sulla frontiera di Pareto tra qualità e prezzo in entrambi i benchmark.
• MiniMax H3 Max, sottoposto a post-training da fal, è al quarto posto con audio e al primo nella versione Silent.
• Bach 1.0 Pro di Video Rebirth è al terzo posto nella versione Silent, a pari merito sul piano statistico per il primo posto, a $7.20 al minuto.
• Le classifiche differiscono da quelle per la generazione video da testo: Wan 3.0, al primo posto in AA-Video-T2V v2.1, qui è al quinto, mentre Gemini Omni Flash 1.1 è al nono posto assoluto e al terzo nella categoria Sincronizzazione audio.