AI TrackerBaixar o app
← Todas as notícias
OpenAIModelosProgramação

OpenAI relata que seus agentes de programação agora concluem, sem ajuda, quase metade das tarefas de pesquisa que levam de duas a quatro horas

Em um relatório datado de 18 de novembro, a OpenAI compartilha medições internas de como os agentes de programação estão mudando sua pesquisa em IA, como atualização de seu relatório de setembro. A empresa chama o avanço de “irregular” e afirma que as pessoas continuam sendo essenciais para o trabalho.

  • Sucesso nas tarefas: a OpenAI estima que a taxa de sucesso dos agentes sem intervenção humana subiu de março a outubro de 23% para 46% em tarefas que levariam de duas a quatro horas para uma pessoa, e de 13% para 35% em tarefas de quatro a oito horas. Por tipo de tarefa, a taxa de sucesso é de 79% para monitorar execuções de treinamento, 72% para responder a perguntas técnicas, 35% para iniciar execuções de treinamento, 29% para criar ambientes de avaliação e de agentes e 25% para escrever código de inferência e serving.
  • Uso: com os preços de tabela da API, o uso diário de agentes pelo pesquisador mediano chegou a US$ 2.400 em outubro (alta de 62% em relação a setembro), e o percentil 90 atingiu US$ 23.000 (alta de 105%). Os dias de trabalho com agentes por pesquisador subiram de 0,5 para 5,7. A OpenAI afirma que, em setembro, o valor do uso de agentes equivalente ao cobrado pela API era cerca de duas vezes a remuneração dos pesquisadores, sem contar participação acionária, enquanto a implantação interna consome 2% da capacidade computacional de pesquisa.
  • Pesquisa de opinião: em uma pesquisa com 101 funcionários de pesquisa, o participante mediano abriria mão de 40% do tamanho da equipe ou de 30% da capacidade computacional da equipe para manter agentes de programação de ponta por três meses. Em uma pesquisa menor, 27 dos 28 participantes esperavam ser mais produtivos com o modelo interno mais recente do que com um engenheiro de pesquisa em meio de carreira acompanhado de um modelo de 2024.
  • Ideias: segundo os pesquisadores, as pessoas tiveram as ideias-chave por trás do GPT-6 Astra e do GPT-6.2 Astra, e os modelos ajudaram a implementá-las. Alguns pesquisadores de pré-treinamento disseram que o Codex ajudou a desenvolver ideias para o GPT-6.2 Astra.
  • Segurança: a OpenAI afirma que o trabalho documentado de Segurança e Alinhamento aumentou 77% de janeiro a setembro, o maior crescimento entre todas as áreas de pesquisa, acelerando após o incidente da Hugging Face em julho.

A OpenAI diz que o relatório busca apoiar o acompanhamento público de indicadores de autoaperfeiçoamento recursivo e que não deve ser interpretado como uma intenção de buscá-lo. Os números são estimativas da própria OpenAI, que observa haver limitações nos dados sobre delegação de tarefas e autorrelatos.

Receba notícias como esta por push.

O AI Tracker avisa você quando algo muda nas ferramentas que você usa.

Baixar o app