Offloop, 멀티 에이전트 하네스 공개…Claude Code 대비 비용 효율성 및 성능 우위 주장
주요 벤치마크에서 기존 에이전트 도구를 상회하는 성능을 보여줌. 에이전트 기반 워크플로우 도입 시 대안으로 검토할 만함.
요약
Offloop은 최근 고도의 추론 작업에서 Claude Code와 Codex를 능가하는 새로운 멀티 에이전트 하네스(multi-agent harness)를 공개했다. 이 시스템은 문서, 스프레드시트, 프레젠테이션 생성을 평가하는 GDPval, 문서 파싱 성능을 측정하는 GDP.pdf, 전문 업무 위임 능력을 보는 JobBench 등 주요 산업 평가 지표에서 SOTA(State-of-the-Art)를 기록했다. 성능뿐만 아니라 비용 효율성 측면에서도 우위를 점했는데, GDP.pdf 벤치마크 기준 Claude Code가 작업당 6.15달러를 소요하는 반면, Offloop은 더 높은 점수를 기록하면서도 작업당 2.86달러의 비용을 보였다. 이번 결과는 소규모 팀이 개발한 멀티 에이전트 시스템이 대규모 언어 모델 기반의 기존 강자들을 성능과 가격 면에서 모두 압도할 수 있음을 보여준다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @DataChaz: A TEAM OF FOUR JUST BEAT CLAUDE CODE AND CODEX ON ADVANCED REASONING TASKS 🚨 @Offloop released a multi-agent harness today that i
원문 보기 ↗