참고Reddit
Opus 5 성능 변동성: 사용자가 체감한 품질 저하 현상
일시적 성능 향상 후 품질이 급격히 저하되는 Opus 5의 운영상 특징 공유.
요약
Claude Code를 실무에 사용하는 한 사용자가 Claude 3.5 Opus가 특정 시점까지 놀라운 성능을 보이다가 갑자기 품질이 저하되었다고 보고했다. 초기에는 산업별 광고 규정을 정확히 해석해 컴플라이언스 문제를 지적하고, 제품 내 실제 버그와 백업 시스템의 허점을 찾아내는 등 매우 우수한 업무 수행 능력을 보였다. 그러나 시간이 지나면서 다시 특유의 '클로드스러운(clodish)' 문체로 회귀했고, 이후 반복적인 지시에도 개선되지 않았다. 결국 문체와 더불어 정확도까지 떨어지며 허위 타임라인을 생성하는 등 성능 저하 현상이 발생했다. 실무 사용 시 모델의 일관되지 않은 퍼포먼스 변화에 주의가 필요해 보인다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 Ran surprisingly good on Opus 5 today, then fell off. Heads up.
원문 보기 ↗