중요X
Claude Opus 5, ARC-AGI-3에서 30%로 최고 기록 경신
스케일링이 잘 안 통하던 '무경험 추론' 영역의 진전. 에이전트·신규 도메인 적용 재평가 필요.
요약
Anthropic의 Opus 5 모델이 ARC-AGI-3 벤치마크에서 30%의 점수를 기록하며 새로운 SOTA를 달성했다. ARC-AGI-3는 사전 학습 데이터 없이 완전히 새로운 문제를 해결하는 능력을 측정하는 평가 지표다. 이는 기존 AI 모델들이 모델 크기를 키우는 스케일링 방식으로는 성능 향상이 가장 어려웠던 영역이다. 이번 성과는 이전에 비해 큰 폭의 성능 향상을 보여주며 AI 업계에서 주목받고 있다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @fchollet: Opus 5 sets a new state-of-the-art on ARC-AGI-3, at 30%. ARC-AGI-3 measures solving problems with no prior exposure -- the setting
원문 보기 ↗