참고X
Artificial Analysis: Astra 6.2·Sol, 코딩 에이전트 벤치마크서 전작 대비 퇴보
주요 코딩 에이전트 지표에서 최신 모델들이 하락세를 보임에 따라 워크플로우 선택 시 재검토 필요.
요약
최근 Artificial Analysis의 Coding Agent Index 평가에서 모델 6.2 Astra와 Sol이 이전 모델들에 비해 성능이 하락하는 회귀 현상을 보였다. 해당 모델들은 최근 출시된 모든 Claude 모델들의 성능을 밑도는 것으로 나타났다. 이번 결과는 코드 생성 및 에이전트 능력 평가에서 특정 모델들이 기대에 미치지 못했음을 시사한다. AI 실무자들은 모델 업데이트가 반드시 성능 향상으로 이어지지 않을 수 있다는 점을 유의해야 한다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @synthwavedd: Both 6.2 Astra and Sol are regressions on Artificial Analysis’ Coding Agent Index versus their predecessors, lagging all recent Cl
원문 보기 ↗