참고Reddit
비디오 생성 모델 'FastH3-Omni' 공개 예정…10월 20일 오픈 웨이트 배포
영상/오디오 참조 기반 생성 및 로컬 환경(RTX, Apple(애플) Silicon) 지원. 비디오 워크플로우 효율 개선에 유용.
요약
FastH3-Omni는 캐릭터 및 배경 참조 이미지를 활용해 동기화된 오디오와 함께 영상을 생성하는 모델로, 오는 10월 20일 오픈 웨이트가 공개될 예정이다. 이 모델은 실시간 모드에서 최대 3개, 일반 모드에서는 최대 9개의 이미지 참조를 지원하며, 오디오 참조 역시 최대 3개까지 활용 가능하다. 주요 기능으로는 대화 및 사운드스케이프 생성, 이전 영상 클립 이어가기, 첫/마지막 프레임 컨디셔닝 등이 있으며 24 FPS로 5~15초 분량의 출력을 제공한다. 10월 20일 정식 출시와 함께 RTX GPU, DGX Spark, Apple Silicon(MLX)을 통한 로컬 환경 지원이 시작된다. 현재 공식 API 프리뷰는 공개된 상태이며, 관련 문서는 reactor.inc에서 확인할 수 있다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 Title: FastH3-Omni arrives October 20: open weights and local Spark/RTX/MLX support
원문 보기 ↗