참고X
샤오미, 오픈소스 기반 자동 RL 학습 환경 구축 시스템 'CodeMidas' 공개
기존 소프트웨어에서 검증 가능한 학습 데이터를 자동 추출해 모델 훈련 효율을 높이는 새로운 접근 방식입니다.
요약
샤오미(Xiaomi)가 기존 소프트웨어에서 코딩 에이전트의 학습 환경을 스스로 생성하는 시스템인 CodeMidas를 공개했다. CodeMidas는 오픈소스 프로젝트를 검사하여 코딩 과제를 추출하고 실행 기반 테스트를 구축하며, 오류가 있거나 악용 가능한 과제는 걸러내는 방식으로 작동한다. 이를 통해 23개 프로그래밍 언어, 3,185개 프로젝트에서 5,545개의 검증된 강화학습(RL) 환경을 생성하는 데 성공했다. 해당 환경에서 학습한 MiMo-V2.5 모델은 기존 대비 이슈 해결 능력이 11.7%, 전체 프로그램 구축 성능이 17%, Terminal-Bench 성능이 8.5% 향상되었다. 이 시스템은 사람이 수동으로 강화학습 과제를 작성하는 대신, 방대한 소프트웨어 데이터로부터 검증 가능한 학습 과제를 지속적으로 추출할 수 있다는 점에서 의의가 있다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @mark_k: Coding agents can now create their own training environments from existing software! Xiaomi's new CodeMidas system lets agents ins
원문 보기 ↗