Artificial Analysis lança o Search Index, que classifica APIs de busca para agentes
A Artificial Analysis lançou seu Search Index, que mede o desempenho, o custo e a latência de APIs de busca em 1.700 tarefas de três benchmarks de busca: BrowseComp, DeepSearchQA e AA-Omniscience. Todas as linhas usam o mesmo modelo-base e seu harness de agente de código aberto, Stirrup. A empresa afirma que, até o fim do ano, espera-se que os agentes pesquisem na web muito mais do que os humanos.
Nas medições da empresa, Exa (auto) e Perplexity (medium) lideram, com suas melhores configurações alcançando 80 pontos. Provedores de APIs de busca podem solicitar inclusão, e a página da metodologia detalha as configurações de DeepSeek Search.
Fontes
Receba notícias como esta por push.
O AI Tracker avisa você quando algo muda nas ferramentas que você usa.