참고팁Hacker News
Claude Fable 5 vs GPT-5.6 Sol: 에이전트 자율 워크플로우 성능 비교
음악 영상 제작이라는 복합 에이전트 태스크에서 모델별 도구 사용 패턴, 비용, 성공률을 코드와 로그로 검증한 데이터. 워크플로우 설계 시 참고 가능.
요약
최근 공개된 실험에서는 Claude Fable 5와 GPT-5.6 Sol 모델에게 25달러와 100달러의 예산을 각각 부여하여 자율적으로 뮤직비디오를 제작하는 테스트를 진행했다. 각 모델은 영상 생성 모델 검색, 클립 생성, ffmpeg를 이용한 영상 편집 및 최종 결과물 조립까지 전 과정을 스스로 수행했다. 실험팀은 브루노 마스와 마크 론슨의 'Uptown Funk'를 공통 곡으로 설정하고, 예산 소진 시까지 모델이 자율적으로 도구를 호출하는 루프를 실행했다. 실험 결과, 모든 모델이 추가적인 제약 없이 스스로 뮤직비디오 제작을 완료했으며 모든 도구 호출 기록은 투명하게 공개되었다. 해당 프로젝트는 전체 코드가 오픈소스로 공개되어 누구나 직접 테스트할 수 있도록 github.com/hershalb/music-video-arena에 업로드되었다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 $100 AI Music Video: Claude Fable 5 vs. GPT-5.6 Sol
원문 보기 ↗