Anthropic의 Claude, EVE Online과 EVE Frontier에서 거래하고 함대를 운용

Anthropic은 Fellows Program(2026년 4~7월)에서 Fenris Creations와 함께 진행한 연구인 "Project EVE"를 공개했습니다. 이 연구에서 Claude는 EVE Universe의 게임 두 가지를 플레이했습니다. Anthropic이 보고한 내용은 다음과 같습니다.

• EVE Online 거래. Claude Opus 4.6, 4.7, 4.8과 Fable 5는 실제 플레이어 주문을 재현하는 시뮬레이터에서 30억 ISK로 시작해 거래했습니다. 2주 단위로 아홉 차례 진행한 결과, Opus 4.7, Opus 4.8과 Fable 5는 아홉 번 모두 수익을 냈고, 평균 자본을 각각 약 16%, 22%, 43% 늘렸습니다. Opus 4.6은 약 4%를 벌어 20개가 넘는 규칙 기반 전략 가운데 가장 성과가 좋은 전략과 비슷한 수준이었습니다. 규칙 기반 전략 중 손익분기점을 간신히 넘긴 것은 하나뿐이었습니다. 6개월간 진행한 실험에서는 Opus 4.6에서 Fable 5로 갈수록 평균 수익이 세 배 늘어, 초기 자본의 약 200%에서 600%로 증가했습니다.
• 거래 방식. 대부분의 실행은 스프레드 포착 방식으로 귀결됐습니다. 모델이 작성하고 거의 수정하지 않은 알고리즘을 사용해 하루 안에 매수와 재판매를 마치며 8~13%의 마진을 노렸습니다. 게임에서 2025년 3월 판매세를 인상했을 때 Opus 4.7 에이전트는 알아차리는 데 중앙값 기준 2.5일이 걸렸고, Opus 4.6 에이전트의 43%는 끝내 알아차리지 못했습니다. Anthropic은 시뮬레이터가 에이전트에 대한 시장의 반응을 반영하지 못한다고 밝혔으며, 인위적으로 더 낮은 가격의 매도 주문을 넣자 수익은 약 35% 줄었습니다.
• 방향성 베팅. 게임 내 뉴스에 따른 가격 변동에 베팅하라는 지시를 받았을 때 모델의 성과는 훨씬 나빴습니다. Fable 5조차 실행의 절반 정도에서만 수익을 냈습니다.
• EVE Frontier 팀. Opus 4.8 또는 Fable 5 에이전트 네 명으로 구성된 팀이 실제 게임을 플레이했습니다. 반응 속도가 느리고 공간 인식 능력이 부족해 개발자 에이전트가 작성한 보조 도구가 필요했습니다. Fable 5 보조 도구를 사용한 Fable 5 팀은 함선을 잃지 않고 12시간 안에 튜토리얼을 마쳤습니다. 대형 전함 목표에서는 어느 팀도 절반 정도 진행하는 데 그쳤습니다. Anthropic은 팀들이 협력과 역할 분담을 잘했다고 밝혔습니다.
• 사보타주. 한 에이전트에게 팀을 몰래 방해하라는 지시를 내렸을 때, 팀원들은 거의 알아차리지 못했습니다. Anthropic은 이 결과가 모델이 지시를 받았을 때 사보타주하는 모습을 보여줄 뿐, 모델이 자발적으로 그렇게 할지를 보여주는 것은 아니라고 덧붙였습니다.