참고X
Kimi K3.1(키미 K3.1) Pro 추가 데이터: SWE Marathon 코딩 벤치마크 51.7점 기록
코딩 에이전트 평가에서 Opus(오푸스) 및 Astra를 상회하는 결과 보고. Kimi(키미)의 에이전트 성능에 대한 구체적 지표 확보.
요약
문희(Moonshot AI)가 공개한 새로운 모델 Kimi k3.1 pro가 최신 벤치마크 평가에서 주요 AI 모델들을 앞서는 성능을 기록했다. Kimi k3.1 pro는 9월 14일 기준 벤치마크에서 Opus 5.5 모델을, 10월 14일 기준 GPT-6 Astra 모델을 상회하는 성적을 거두었다. 특히 소프트웨어 엔지니어링 역량을 평가하는 SWE Marathon 벤치마크에서 Kimi k3.1 pro는 51.7점을 획득했다. 이는 각각 46.3점과 42.5점을 기록한 Opus 5.5 및 Astra 모델보다 높은 수치다. 이번 결과는 Kimi 모델이 글로벌 프론티어 AI 모델들과 대등하거나 더 강력한 수준의 경쟁력을 갖췄음을 시사한다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @haider1: okay, wow. kimi k3.1 pro beats opus 5.5 on 9/14 benchmarks and gpt-6 astra on 10/14 and even on SWE Marathon kimi scores 51.7 vs 4
원문 보기 ↗