참고X
HLE Diamond 벤치마크 결과: Gemini 4(제미나이 4) Carbon과 Opus 5.5(오푸스 5.5)가 최상위권
오픈 웨이트 모델 대비 독점 모델의 성능 격차가 더욱 벌어짐을 보여주는 벤치마크 데이터.
요약
최신 HLE Diamond 벤치마크 결과에서 오픈 웨이트 모델들이 저조한 성적을 기록했다. 중국 모델들은 상위 모델 대비 30점 이상 뒤처지는 결과를 보였으며, Meta Muse Wonder 역시 Gemini 4 대비 20점 낮은 점수를 기록했다. 현재 벤치마크에서 뛰어난 성능을 보여준 모델은 Gemini 4 Carbon과 Opus 5.5인 것으로 나타났다. 반면, Fable 5.1 수준에 근접했다고 주장했던 Kimi K3.1은 실제 성능이 Gemini 3.8 Flash 수준에 머물렀다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @haider1: absolutely brutal results for open-weight models on the updated HLE Diamond: > chinese models are over 30 points behind > even met
원문 보기 ↗