참고X
메타, 'Muse' 실시간 아바타 기능 공개
실시간 음성 및 영상 생성 아키텍처 결합. Muse 생태계 내에서 대화형 인터페이스의 몰입감 강화.
요약
Meta가 실시간 대화형 아바타 기술인 Muse Realtime Avatar를 공개했다. 이 기술은 기존 Muse Realtime Voice와 결합하여 음성과 영상이 동기화된 상호작용을 가능하게 한다. Muse Realtime Voice가 생성한 콘텐츠와 운율이 담긴 음성 토큰 스트림을 Muse Realtime Avatar가 입력받아 실시간으로 영상으로 변환하는 통합 스트리밍 아키텍처를 갖췄다. 고정된 길이의 히스토리를 모션 컨텍스트로 활용하여 대화 길이에 상관없이 일정한 연산량을 유지한다. 이를 통해 음성, 입 모양, 표정이 정교하게 동기화된 실시간 아바타 대화 환경을 구현한다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @AIatMeta: just unveiled Muse Realtime Avatar, our real-time embodiment technology that turns Muse Realtime Voice into expressive, interactiv
원문 보기 ↗