프론티어 모델의 '디자인 창의성' 평가 벤치마크 공개

요약

최근 LLM이 '자전거 타는 펠리컨'의 SVG 이미지를 생성할 때 동일한 결과만 출력하는 현상은 모델의 다양성 붕괴(diversity collapse) 문제를 보여준다. 연구진은 AI 모델의 UI 디자인 창의성을 평가하기 위한 새로운 벤치마크인 'Design Creativity Bench'를 도입했다. 16개 프론티어 모델을 대상으로 80개의 개방형 UI 과제를 수행한 결과, 최고 성능 모델인 OpenAI GPT-6 Astra의 창의성 점수는 65.5점으로 인간 디자이너의 기준 점수인 92.3점에 비해 여전히 큰 격차를 보였다. 이는 AI가 기능적인 웹사이트나 제품 UI 생성 능력은 빠르게 발전하고 있으나, 디자인 측면의 창의적 의사결정에는 한계가 있음을 시사한다. 연구진은 디자인 창의성을 측정 가능한 지표로 만들기 위해 전체 리더보드와 평가 방법론을 공개했다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.