AI 에이전트 성능의 핵심은 모델 외 '하네스': 구조 설계 지침서 분석

요약

화웨이 노아 아크 AI 연구소 전 소장이 이끄는 17명의 연구진이 AI 에이전트 구축에 관한 포괄적인 분석 보고서를 발표했다. 이들은 AI 에이전트의 품질이 단순히 모델 자체의 성능뿐만 아니라, 모델을 둘러싼 '하네스(harness)' 시스템에 의해 결정된다고 주장한다. 보고서는 관찰부터 검증까지 총 6단계로 구성된 에이전트 하네스 구조를 상세히 설명하며, 프롬프트 중심에서 에이전트 네이티브 학습으로 이어지는 4단계 발전 과정을 제시했다. 특히 특정 작업에 적합한 하네스 설정 가이드와 함께 SWE-bench를 활용한 모델별 성능 평가 결과를 다루고 있어 실무적인 참고가 가능하다. 에이전트 구축을 위한 기술적 아키텍처와 방법론을 체계적으로 정리한 자료로 평가받는다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.