참고X
Teknium: 신규 모델 Fable 성능, 기존 Opus 4.6-8 대비 오히려 퇴보
유력 인사의 실사용 후기를 통해 신규 모델 도입 시 검증 필요성 및 기존 모델 대비 성능 이슈 확인.
요약
AI 연구자 Teknium은 최근 Anthropic의 모델 'fable' 사용을 중단하고 이전 모델인 Claude 3 Opus 4.6-8 버전으로 복귀했다. Teknium은 'fable' 모델이 hermes agent 운영 과정에서 심각한 오류를 발생시켰다고 지적하며, 해당 모델의 성능이 기존 모델보다 떨어진다고 평가했다. 평소 Anthropic이 발표하는 벤치마크 지표를 신뢰하지 않았지만, 이번에는 실제 체감 성능이 예상보다 더 낮았다고 언급했다. 결과적으로 Teknium은 'fable' 모델을 향후 사용하지 않겠다는 입장을 명확히 했다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @Teknium: I switched back to fable too. Its worse than opus 4.6-8 too. It caused some gnarly issues in hermes agent and i wont be using it a
원문 보기 ↗