독파모 2차 평가 결과 발표…'벤치맥싱' 논란 속 SKT·LG·업스테이지 생존

요약

과학기술정보통신부의 독자 파운데이션 모델(독파모) 2차 평가에서 SK텔레콤, LG AI연구원, 업스테이지가 선정되고 모티프테크놀로지스는 탈락했다. 이번 평가는 벤치마크(40점), 전문가 평가(35점), 사용자 평가(25점)로 구성되었으며, 모티프의 '모티프 3'는 AAII 벤치마크에서 최고점인 47점을 기록했으나 배점 환산 과정에서 변별력이 낮아졌다. 탈락의 결정적 요인은 사용자 평가로, 과기정통부는 모티프가 기술력은 뛰어나나 사용성 및 활용성 면에서 낮은 평가를 받았다고 설명했다. 특히 전문가와 일반인으로 구성된 234명의 사용자 평가 결과, 네 모델 모두 '보통과 우수 사이'의 유사한 점수를 기록해 현재 국산 모델의 수준을 객관적으로 보여주었다. 필자는 이번 결과를 단순히 성능과 실용성의 대립으로 볼 것이 아니라, 추론 능력인 성능 외에 인터페이스, 서빙 안정성 등 과업 수행 비용과 접근성의 문제로 해석해야 한다고 지적했다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.