Anthropic detalla cómo 1.000 agentes de Fable 5.2 reprodujeron una demostración formal del último teorema de Fermat

Anthropic afirma que un equipo de 1.000 agentes que ejecutaban una versión preliminar de Claude Fable 5.2 reprodujo una formalización en Lean del último teorema de Fermat en 28,7 horas, en lo que denomina un experimento de juguete. Su formalización de septiembre, realizada por decenas de agentes con un modelo interno aproximadamente comparable a Fable 5.1 y bajo la dirección de un investigador, llevó 11 días y unos 6.000 millones de tokens de salida. Anthropic afirma que la nueva ejecución usó un tercio de los tokens de salida y produjo una demostración de una séptima parte de la longitud, sin la plataforma Prove2Me ni la supervisión de un investigador.

Configuración. Cada agente tenía un intérprete de comandos y un editor de archivos en su propia máquina virtual ligera sin acceso a la red, Lean y Mathlib, su propia rama de Git con solicitudes de fusión a main y una base de datos Postgres compartida. Anthropic asignó al equipo 60 enunciados por demostrar, un esbozo de una frase del método clásico, las definiciones necesarias y 47 lemas demostrados en el trabajo anterior, con un agente líder y 999 asistentes. Afirma que no dio más indicaciones sobre cómo organizarse.

Lo que hicieron los agentes. Anthropic afirma que el agente líder creó cinco tablas en la base de datos —para órdenes, asignaciones, notas, subtareas y trabajo terminado— en los primeros 10 minutos. Al principio, los asistentes consideraron que 47 de los 60 enunciados no se podían demostrar dentro del presupuesto; el agente líder los dejó de lado y volvió a ellos después de que se demostraran los primeros 10, en unos 70 minutos. Cerca de la hora 18, asignó unos 750 asistentes a Langlands–Tunnell, cuya probabilidad de terminar a tiempo su responsable había estimado en menos del 1 %. Los asistentes lo dividieron en un árbol de 2.418 tareas de hasta 10 niveles de profundidad, y quedó demostrado en la hora 28,4; el teorema final, en la hora 28,7.

Controles de seguridad. Anthropic afirma que, además de los entornos aislados, un clasificador guiado por instrucciones comprobaba cada comando del intérprete y cada edición de archivo antes de ejecutarlos; si bloqueaba alguno, se detenía todo el equipo para una revisión humana. Un monitor sin conexión también revisaba las acciones del equipo. Según la empresa, ninguna de las más de un millón de llamadas a herramientas alcanzó el umbral para ser bloqueada. La ejecución usó únicamente el monitor basado en acciones; poco después, Anthropic añadió un monitor que también lee la cadena de pensamiento y las comunicaciones entre agentes. La empresa señala que realiza experimentos de este tipo con modelos que quizá aún no hayan completado su evaluación de alineamiento previa al lanzamiento.

Salvedades. Anthropic afirma que el resultado no elimina la necesidad de plataformas especializadas como Prove2Me y que los agentes tienden a abandonar pronto los problemas difíciles y a juzgar mal su dificultad, por lo que el ánimo de una persona todavía puede ayudar.