구글, LLM 도구 사용 성능 높이는 데이터셋 생성 프레임워크 'ToolGrad' 공개
도구 활용(Tool-use) 데이터셋을 자동 생성해 LLM 성능 개선 가능. 실무 에이전트 개발 시 데이터셋 구축 방법론으로 활용.
요약
Google Research가 거대언어모델(LLM)의 도구 활용 능력을 향상시키기 위한 새로운 프레임워크 'ToolGrad'를 공개했다. ToolGrad는 프롬프트 생성 이전에 정답에 해당하는 도구 활용 체인(ground-truth tool-use chains)을 먼저 생성하는 방식을 사용한다. 이러한 접근법을 통해 데이터셋 생성 과정에서 거의 100%에 달하는 통과율을 달성했다. 결과적으로 학습된 LLM의 도구 사용 정확도와 성능이 크게 개선되는 효과를 확인했다. 복잡한 도구 사용 작업을 수행해야 하는 LLM 모델 개발 및 학습 과정에서 효율적인 데이터 생성 솔루션이 될 것으로 기대된다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @GoogleResearch: Introducing ToolGrad: an efficient framework for generating tool-use datasets. By generating ground-truth tool-use chains before p
원문 보기 ↗