중요X
로봇 롤아웃 성공 판정기 'Instance' 출시, Claude Opus보다 정확·저지연 주장
로봇 정책 평가에서 사람이 직접 성공 여부를 확인하던 병목을 자동화. 로봇 학습 파이프라인 검토 가치.
요약
로봇 배포의 성공 여부를 판별하는 도구인 Instance가 새롭게 출시되었다. 사용자가 작업 내용을 설명하고 데이터셋을 입력하면, 각 롤아웃의 성공과 실패를 판별하고 상세한 하위 작업 캡션을 제공한다. Instance는 Claude Opus 4.8보다 높은 정확도를 보이면서도 훨씬 낮은 지연 시간을 기록한다. 현재 로봇 정책 평가는 인간이 직접 성공 여부를 판단하고 장면을 초기화하는 수동 과정이 필요하다. 개발팀은 이번 도구 출시를 시작으로 로봇 학습을 위한 자율 평가 시스템을 구축하는 것을 목표로 하고 있다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @lucyjcai: We’re excited to launch Instance – a success detector for robot rollouts! Describe your task and drop in a dataset, and it judges
원문 보기 ↗