Artificial Analysis 코딩 에이전트 지수 v2.0 공개, Claude Opus 5.5(클로드 오푸스 5.5)가 61.7점 선두
벤치마크 290개 과제로 개편·FrontierCode 도입. 코딩 에이전트 모델 선정 시 참고 지표.
요약
Artificial Analysis가 코딩 에이전트 성능을 평가하는 'Coding Agent Index v2.0'을 새롭게 발표했다. 이번 업데이트에서는 기존 DeepSWE를 Cognition의 FrontierCode v1.1로 교체하고, SWE-Atlas-QnA 평가 방식을 SWE-Atlas-QnA-AA로 개편하여 평가의 정확도를 높였다. 평가 결과, Claude Code와 Claude Opus 5.5 조합이 61.7점으로 전체 1위를 차지했으며, Claude Sonnet 5.5(59.3점)와 Muse Wonder Full(58.9점)이 그 뒤를 이었다. 특히 FrontierCode v1.1 부문에서 Claude Opus 5.5는 56.0%의 점수로 DeepSeek V4.1 Flash(52.6%) 등을 앞서며 최상위 성능을 입증했다. 새로운 SWE-Atlas-QnA-AA 평가 기준은 기존보다 엄격해져 평가 대상의 평균 점수가 약 1.7점 하락하는 등 일관성을 강화했다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @ArtificialAnlys: Announcing Artificial Analysis Coding Agent Index v2.0: FrontierCode v1.1 from Cognition replaces DeepSWE, SWE-Atlas-QnA grading i
원문 보기 ↗