멀티 에이전트 시스템의 효율성 논란: 단일 에이전트가 더 나은 경우
복잡한 멀티 에이전트 설계가 항상 정답은 아님. 채팅 기반 작업에서는 비용과 성능 측면에서 단일 에이전트가 우위일 수 있다는 연구 사례.
요약
최근 펜실베이니아 대학교(UPenn)의 연구 결과, 동일한 모델을 사용하더라도 다중 에이전트 시스템이 단일 에이전트보다 최대 5.5배 많은 토큰을 소모하면서 성능은 오히려 떨어질 수 있는 것으로 나타났다. 항공, 소매, 통신 분야의 고객 지원 채팅 약 7,950건을 대상으로 단일 에이전트와 3인 팀(플래너, 데이터베이스 담당, 규칙 조언자) 구성을 비교한 결과, 13번의 테스트 중 12번에서 팀 구성이 평균 28점 낮은 점수를 기록했다. 다중 에이전트 구성은 에이전트 간 불필요한 대화에 토큰 예산을 과도하게 소모하여 정작 작업을 완료하지 못하는 경우가 빈번했다. 다만, 이번 연구는 대화형 태스크에 국한된 결과로, 대규모 자율 작업이나 성능이 낮은 모델을 사용할 때는 다중 에이전트 협업이 효율적일 수 있다. 따라서 실무자는 태스크의 특성에 따라 단일 또는 다중 에이전트 방식을 적절히 선택해야 한다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @undefinedKi: Your multi-agent setup might cost up to 5.5x the tokens and still work worse than one agent UPenn ran a simple test. Same model, t
원문 보기 ↗