Agent Arena coloca o Hy4 da Tencent em 14º lugar no geral, com custo por tarefa cerca de 62% menor que o do Kimi K3.1 Pro

Segundo a Arena, o Hy4 da Tencent ficou em 14º lugar no geral no Agent Arena, que avalia modelos com base em sessões reais de agentes da comunidade de usuários. A Arena afirma que o resultado se baseia em mais de 8.500 sessões de longa duração e em uma melhora líquida de 4,7%, e que o Hy4 passa a integrar a fronteira de Pareto do Agent Arena, que compara pontuação e custo.

Segundo a Arena:

• Custo: o Hy4 custa US$ 0,55 por tarefa, contra US$ 1,46 do Kimi K3.1 Pro (Max), cerca de 62% menos, com pontuações a até 1 ponto percentual de diferença.
• Modelos abertos: o Hy4 é proprietário por enquanto; quando os pesos forem liberados, a Arena afirma que ele empataria com o Kimi K3.1 Pro em 1º lugar entre os modelos abertos.
• Em relação à prévia: o resultado é 3,6 pontos percentuais superior ao da prévia do Hy4, que ficou em 25º lugar, com +1,1%.
• Indicadores: Confirmed Success: 11º (+8,7%, ante 16º); Praise vs Complaint: 18º (+3,8%, ante 24º); Steerability: 14º (+5,7%, ante 27º); Bash Reliability: 20º (+6,2%, ante 41º).

Estes são os números da Arena, calculados com base nas sessões dos próprios usuários.