KeyFrame-Compass: 키프레임 조건부 비디오 생성 모델 평가 벤치마크 공개

요약

KeyFrame-Compass는 키프레임 기반 비디오 생성 모델의 성능을 평가하기 위해 설계된 최초의 포괄적인 벤치마크이다. 해당 벤치마크는 3개 도메인, 2개 구조, 2개 프롬프트 세분성, 2개 조건 형식, 4개 키프레임 밀도를 포함한 386개의 샘플로 구성되어 다각적인 분석이 가능하다. 자동화된 평가 프레임워크는 키프레임 실행(존재, 충실도, 시간 순서 등 6개 지표)과 비디오 전체 품질을 동시에 측정한다. 9개 주요 비디오 생성 시스템을 실험한 결과, 모델들이 키프레임 충실도와 비디오 자연스러움 사이에서 명확한 상충 관계(trade-off)를 보임을 확인했다. 또한 키프레임 제약이 조밀해질수록 성능이 저하되며, 대부분의 오픈소스 모델은 스토리보드 그리드 입력을 순차적인 키프레임으로 해석하는 데 한계를 드러냈다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.