Anthropic(앤트로픽) Opus 5.5(오푸스 5.5) 모델 성능 저하 논란, 'LiveNerf'로 실시간 트래킹 가능

요약

Reddit 사용자 ninjahawk은 LiveNerf 프로젝트를 통해 Anthropic의 Opus 5.5 모델이 출시 후 성능 저하(nerfing)를 겪는지 3주간 추적 데이터를 공개했다. 초기 10일간은 성능 변동성이 높았으나, 이후 11일간은 변동성이 감소하며 평균으로 수렴하는 경향을 보였다. 해당 데이터 분석 결과에 따르면, 현재까지 Opus 5.5에 의도적인 성능 저하가 발생했다는 징후는 발견되지 않았다. 관련 분석 코드와 데이터는 GitHub의 'ninjahawk/livenerf' 저장소에서 직접 확인할 수 있다. 이번 프로젝트는 모델의 성능 변화를 객관적인 데이터로 입증하기 위해 시작되었으며 향후에도 지속적으로 모니터링이 이어질 예정이다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.