참고팁HF Papers
코딩 에이전트 컨텍스트 최적화 기법 'SWE-Pruner Pro' 공개
에이전트 내부 표현을 활용해 불필요한 토큰을 39% 절감하고 코딩 벤치마크 성능을 높이는 효율적인 최적화 기술.
요약
SWE-Pruner Pro는 코딩 에이전트의 긴 문맥을 효율적으로 관리하기 위해 에이전트 내부 표현을 활용하여 코드 컨텍스트를 가지치기(pruning)하는 새로운 기법이다. 기존 SWE-Pruner가 별도의 코드 분류기를 사용했던 것과 달리, 이 방식은 에이전트 자체의 내부 표현을 사용하여 도구 출력의 관련성을 판단한다. 에이전트에 추가된 작은 헤드가 코드 각 줄의 유지 여부를 라벨링하며, 도구 출력의 줄 수에 맞춘 길이 인식 임베딩을 통해 처리한다. 두 개의 오픈 웨이트 백본과 네 개의 멀티턴 벤치마크 실험 결과, SWE-Pruner Pro는 작업 품질을 유지하면서 프롬프트 및 완성 토큰을 최대 39% 절감했다. 특히 MiMo-V2-Flash 환경에서 SWE-Bench Verified 해결률을 3.8%p, Oolong 정확도를 2.2%p 향상시키는 성과를 보였다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 SWE-Pruner Pro: The Coder LLM Already Knows What to Prune
원문 보기 ↗