참고X
오픈소스 에이전트 런타임 'Atomic Agent', GAIA 벤치마크서 Hermes 능가
Qwen-3.6-35B 기반 오픈소스 모델로 효율성 증명. 에이전트 구축 시 고려할 대안.
요약
오픈소스 에이전트 런타임인 Atomic Agent가 GAIA 벤치마크에서 Hermes를 뛰어넘는 성능을 기록했다. 동일한 4비트 Qwen-3.6-35B 모델과 Apple M4 Max 환경에서 진행된 53개의 GAIA Level 1 작업 테스트 결과, Atomic Agent는 69.8%의 성공률(37/53)을 보여 58.5%(31/53)를 기록한 Hermes를 앞섰다. 수행 속도 면에서도 Atomic Agent는 3시간 12분이 소요되어 Hermes(5시간 10분)보다 1.6배 빠른 완료 시간을 달성했다. Atomic Agent는 6개의 작업을 더 해결하고 약 2시간 일찍 작업을 마쳤으며, MIT 라이선스를 따르는 오픈소스 프로젝트로 공개되었다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @kimmonismus: Atomic Agent beat Hermes on GAIA: 69.8% vs. 58.5%, and finished 1.6× faster! They ran both agents through all 53 GAIA Level 1 task
원문 보기 ↗