Artificial Analysis, 코드로 만든 마케팅 동영상 벤치마크 Code2Video-AA 출시

Artificial Analysis가 HeyGen과 협력해 자체 구현한 HeyGen의 Code2Video Bench, Code2Video-AA를 공개했습니다. 모델은 제품 및 브랜드 마케팅 브리프 114개를 받고, 도구를 사용하지 않고 한 번의 응답으로 각각에 대한 HyperFrames HTML 구성을 작성해야 합니다. 구성은 네트워크에 연결하지 않은 상태에서 동영상으로 렌더링됩니다. 심사 모델(Gemini 4 Argon, high)이 참여도, 프롬프트 의도, 구성, 시간적 일관성, 완성도를 기준으로 동영상 쌍을 비교하고, 다섯 항목의 Elo 평점을 평균해 종합 점수를 산출합니다. 35,000건이 넘는 판정으로 모델 27개의 순위를 매겼습니다. 결과는 Artificial Analysis 자체 평가입니다.

보고된 결과:

• Claude Opus 5.5 (max with fallback)가 Elo 1536으로 1위를 차지했습니다. 다음 모델보다 93점 앞서고 다섯 항목 모두에서 선두를 기록했으며, 완성도 항목에서 가장 큰 격차를 보였습니다. 작업당 비용은 $3.08입니다.
• Claude Sonnet 5.5 (1443)와 GPT-6 Astra (1427)는 통계적으로 공동 2위입니다.
• GPT-6.1 Sol (max)은 Elo 1369로 4위이며 작업당 비용은 $0.31로, Opus 5.5 비용의 약 10분의 1입니다. 모델별 작업당 비용은 $0.01~$3.89이며, 8개 모델이 Elo 대비 비용의 파레토 프런티어에 있습니다.
• 오픈 웨이트 모델은 최소 483점 뒤처졌습니다. 상위 모델은 DeepSeek V4.1 Flash (max, 1053), MiMo-V2.6-Flash (1052), MiMo-V2.6-Pro (1052)이며, 작업당 비용은 $0.01~$0.08입니다.