Claude Code(클로드 코드)로 구축한 시뮬레이션 환경에서의 모델별 성능 비교

요약

한 개발자가 Claude Code를 활용해 항해 시뮬레이션을 구축하고, 다양한 AI 모델들이 스스로 배를 조종하며 경주하는 실험을 진행했다. 시뮬레이션은 5초마다 배의 상태 정보를 AI에게 제공하면, 각 모델이 직접 키와 돛을 제어하는 방식으로 운영되었다. 이번 경주에는 Opus, GPT-6 Astra, Gemini 4 Argon, 그리고 비교군인 Qwen3.5-9b가 참여했다. 실험 결과 Gemini 4 Argon이 우승을 차지했으며, 특히 Astra 대비 비용은 5분의 1 수준인 0.78달러에 불과해 높은 효율성을 입증했다. 개발자는 모델별로 사고하는 동안 시뮬레이션을 일시 정지시켜 속도에 따른 불이익을 방지했다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.