Opus 5 'Effort Dial' 설정 팁: 무조건 'Max'가 정답은 아니다
설정이 높을수록 과도한 리팩토링으로 코드 성능이 하락할 수 있음. 작업 난이도에 맞는 최적 설정값 테스트 필요.
요약
Anthropic의 Opus 5는 low, medium, high, xhigh, max의 5단계 노력 설정(effort settings)을 제공하지만, 코딩 작업에서는 'high' 설정 이상부터 성능이 오히려 하락하는 경향을 보인다. FrontierCode 벤치마크 결과, 'high'를 초과하면 모델이 불필요한 리팩토링이나 범위를 벗어난 수정을 수행하여 오히려 결과가 나빠진다. Anthropic 측의 마이그레이션 가이드 역시 단순 작업에서 설정값을 높일 경우 과도한 추론으로 인한 성능 저하가 발생할 수 있음을 경고한다. 실제로 AA-Omniscience 벤치마크에서 Opus 5는 Opus 4.8 대비 정확도는 11% 향상되었으나 환각(hallucination) 발생률은 6% 더 높게 나타났다. 따라서 실무에서는 작업 성격에 따라 적절한 노력 단계를 선택하는 것이 중요하다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 Opus 5's effort dial is not monotonic. Above "high", coding scores go down, and Anthropic's own migration guide says so.
원문 보기 ↗