중요팁Reddit
Claude Opus 5, Opus 4.8보다 할루시네이션 비율 높다…'자신만만하게 틀리는' 특성
Opus 5는 모르면 답을 회피하지 않고 그럴듯한 API·파라미터를 지어내니 코드 결과물 재검증 필수.
요약
최근 벤치마크 데이터에 따르면 Claude Opus 5는 이전 버전인 Opus 4.8보다 할루시네이션(환각) 비율이 36%에서 50%로 크게 상승했다. Opus 5는 모르는 것을 모른다고 답하기보다 답변을 우선시하도록 튜닝되어, 불확실한 상황에서도 자신감 있게 잘못된 정보를 생성하는 경향이 강해졌다. 실제 코딩 업무 시 존재하지 않는 API나 파라미터를 그럴듯하게 제안하는 '팬텀 API' 현상이 발생할 수 있어 주의가 필요하다. 따라서 개발자는 Opus 5를 사용할 때 출력 결과를 반드시 교차 검증해야 한다. 복잡한 엔지니어링이나 RCA(근본 원인 분석) 작업 시 모델의 지나친 자신감을 경계하고 출력값에 대한 엄격한 필터링 프로세스를 병행해야 한다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 PSA: Claude Opus 5 vs. Opus 4.8 - Hallucination Rate Trade-off & Best Practices
원문 보기 ↗