참고X
Artificial Analysis, AI 에이전트의 3D 공간 구축 성능 측정 'AA-3D' 벤치마크 공개
AI 모델의 웹 페이지 생성 및 3D 구현 능력을 평가하는 새로운 지표. Claude 5.5(클로드 5.5) 시리즈와 GPT-6(지피티 6) Astra가 상위권 기록.
요약
Artificial Analysis는 AI 모델의 대화형 3D 장면 생성 능력을 평가하는 새로운 벤치마크 'AA-3D'를 공개했다. 이 벤치마크는 55개의 서면 지시사항을 기반으로 AI가 three.js 웹 페이지를 생성하면, 인간 심사위원이 블라인드 테스트를 통해 품질을 비교 평가하는 방식이다. 평가 결과, Claude Sonnet 5.5, Claude Opus 5.5, GPT-6 Astra, Claude Fable 5.1 등 4개 모델이 최상위권에서 통계적으로 동등한 성능을 보였다. 오픈 웨이트 모델인 Kimi K3와 MiMo-V2.6-Pro는 11위와 12위에 그쳐 상위권 모델과 200점 이상의 Elo 격차를 나타냈다. 또한 AA-3D는 AI의 전반적인 지능 지수가 높을수록 3D 장면 생성 능력도 비례하여 향상된다는 점을 확인했다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @ArtificialAnlys: We have measured intelligence. Now it's time to see it. We are launching AA-3D, our new benchmark for how well AI models build int
원문 보기 ↗