Tencent(텐센트)의 비디오 월드 모델 'Hy-Nomas', ComfyUI(콤피UI) 네이티브 구동 성공

요약

텐센트가 공개한 비디오 월드 모델 'Hy-Nomas'가 12GB VRAM 환경의 ComfyUI에서 네이티브로 구동 가능한 상태로 포팅되었다. 이 모델은 연속적인 비디오 세그먼트를 생성할 때 이전 프레임의 키와 밸류 값을 캐싱하여 일관성을 유지하며, 사용자가 생성 과정에서 실시간으로 장면이나 동작을 수정할 수 있다. 이미지 입력 기능이 없는 원본 모델의 한계를 극복하기 위해, 사용자의 이미지를 짧은 스틸 클립으로 인코딩하여 첫 번째 세그먼트로 모델 메모리에 로드하는 방식을 사용한다. 특히 ComfyUI의 기본 KSampler를 통해 DiT 모델을 직접 제어할 수 있어 메모리 관리가 효율적이다. 사용자는 각 세그먼트마다 텍스트 프롬프트를 다르게 설정하여 장면 전환, 카메라 이동 등의 구체적인 연출을 단계별로 이어갈 수 있다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.