참고X
실무 작업 기반 모델 평가 플랫폼 'OpenArt Arena' 공개
분야별(광고, 영상 등) 블라인드 테스트를 통해 실무 성능을 평가. 워크플로우에 맞는 모델 선정 시 참고.
요약
최근 대다수의 AI 모델 평가가 특정 모델을 1위로 선정하는 단편적인 방식에 치중하고 있어, OpenArt Arena는 실제 현업 전문가들을 대상으로 블라인드 투표를 진행했다. 이번 평가에서는 각 모델의 로고를 숨긴 채 진행되어 편향성을 제거했다. 특히 영화, 광고, 립싱크 등 실제 활용되는 작업 분야별로 AI 모델의 성능을 세분화하여 평가한 점이 특징이다. 해당 평가는 글로벌 리더보드 형태로 제공되며, 이를 통해 각 AI 모델이 특정 도메인에서 어떤 성과를 내는지 구체적인 확인이 가능하다. 이러한 방식은 제조사들의 일방적인 1위 주장보다 실무적인 관점에서 더 정확한 모델 선택 기준을 제공할 것으로 기대된다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @minchoi: Most people rank AI models like there's one winner. Every lab says their model is #1. OpenArt Arena hid the logos and had creative
원문 보기 ↗