영상 생성 모델의 3D 일관성 평가 벤치마크 'Orbia' 공개

요약

최근 비디오 생성 모델이 인터랙티브 월드로 주목받고 있으나, 생성된 프레임 간의 3D 공간적 일관성 부족 문제가 지속적으로 제기되고 있습니다. 이에 인터랙티브 월드 모델의 3D 일관성을 체계적으로 평가하는 최초의 벤치마크인 'Orbia'가 공개되었습니다. Orbia는 입력 보존, 생성 콘텐츠 지속성, 3D 자기 일관성 등 세 가지 핵심 차원을 중심으로 모델의 3D 정합성을 측정합니다. 이 벤치마크는 공공 데이터셋과 시뮬레이션 등을 통해 구축된 720개의 인스턴스를 포함하며, 27개의 텍스트, 액션, 카메라 조건부 모델을 평가할 수 있습니다. Orbia는 분 단위의 장기 탐색 및 재방문 테스트를 통해 모델의 3D 공간 기억력을 검증하며, 향후 더욱 일관된 비디오 월드 모델 개발을 위한 진단 도구로 활용될 전망입니다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.