참고팁Reddit
Claude Code(클로드 코드) 사용자의 A/B 테스트 세션 기록 확인하는 법
성능 저하 의심 시 내 계정에 적용된 실험 ID를 터미널 스크립트로 직접 확인 가능.
요약
Anthropic이 자사의 유료 구독자를 대상으로 Claude 모델의 A/B 테스트를 진행 중인 정황이 포착되었다. 사용자들은 'Claude Code'의 세션 파일에 기록된 실험 ID를 통해 본인의 계정이 특정 실험에 참여 중인지 직접 확인할 수 있다. 한 레딧 사용자는 자신의 Ultra 계정에서 Opus 5.5 및 Fable 모델과 관련된 실험 기록을 발견했으며, 8월 이후 총 26개의 서로 다른 실험 ID를 확인했다고 밝혔다. 사용자는 터미널에 파이썬 스크립트를 실행함으로써 실험 날짜와 세션 참여 횟수 등의 상세 데이터를 조회할 수 있다. 이번 발견은 최근 논란이 된 모델 성능 저하 이슈에 대해 사용자가 직접 투명하게 검증할 수 있는 단초를 제공한다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 Anthropic is A/B testing paying subscribers, you can check if there are/were any experiments ran on your account for both Opus and Fable
원문 보기 ↗