Claude Opus 5.5(클로드 오푸스 5.5) 성능 검증: '모델 너프'는 없었다

요약

Reddit의 r/ClaudeAI 커뮤니티에서 진행 중인 'LiveNerf' 프로젝트가 지난 29일간 Claude 3 Opus 5.5 모델의 성능 저하(nerf) 여부를 추적한 데이터를 공개했다. 프로젝트 분석 결과, 지난 29일 동안 모델의 성능이 유의미하게 하락했다는 징후는 발견되지 않았다. 이번 조사는 최소 6.6 포인트 이상의 성능 변화를 감지할 수 있는 범위 내에서 이루어졌으며, 이를 통해 Anthropic이 의도적으로 모델 성능을 저하시킨다는 의혹이 설득력을 잃게 되었다. LiveNerf는 앞으로도 모델 성능 변화를 객관적으로 모니터링하기 위해 데이터를 계속 수집할 예정이다. 관련 데이터와 프로젝트 내용은 GitHub 리포지토리(https://github.com/ninjahawk/livenerf)에서 확인할 수 있다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.