참고Reddit
텐센트-푸단대, 2K 해상도 멀티모달 비디오 생성 모델 'Prism' 공개
비디오와 오디오를 동시 생성하는 MIT 라이선스 모델로, 기존 상용 서비스와 비교해볼 가치가 있는 오픈소스 대안입니다.
요약
Tencent Hunyuan과 Fudan이 협력하여 개발한 비디오 생성 모델 Prism이 공개되었다. 이 모델은 영상과 오디오를 동시에 생성하는 것이 특징이며, 네이티브 720p, 1080p, 2K 해상도를 지원한다. 핵심 기술인 다이내믹 희소 어텐션(Dynamic Sparse Attention) 기법은 기존 풀 어텐션 대비 학습 속도를 2.5배 향상시키면서도 품질을 높였다. 현재 Kling 3, MiniMax H3, Wan 3.0 등과 경쟁하며 립싱크 및 다국어 오디오 생성에서 준수한 성능을 보여준다. MIT 라이선스로 배포되었으며 학습 및 파인튜닝 코드가 모두 공개되었고, 알파와 베타 체크포인트를 통해 체험할 수 있다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 Prism (Tencent Hunyuan + Fudan) just dropped a preview: native 2K video + audio, MIT license
원문 보기 ↗