참고Reddit
오픈소스 1.58비트 TTS 'Kitten-TTS 2' 공개: CPU에서 실시간 음성 복제 지원
1.58비트 양자화로 CPU 환경에서도 가볍게 구동 가능한 실시간 오픈소스 TTS 모델.
요약
KittenML이 세계 최초의 1.58비트 TTS 모델인 Kitten-TTS 2의 코드와 가중치를 오픈소스로 공개했다. 이 모델은 1.7B 파라미터 규모로, 모든 선형 가중치가 3진법(-1, 0, +1)으로 구성되어 있어 CPU 환경에서도 실시간 추론이 가능하다. 별도의 GPU 없이 로컬 환경에서 구동할 수 있어 운영 비용을 획기적으로 낮출 수 있는 것이 특징이다. 제로샷 보이스 클로닝(Zero-shot voice cloning)을 지원하며 다국어 처리와 감정 및 강조 표현 조절 기능을 갖췄다. 관련 코드와 모델 가중치는 GitHub와 Hugging Face를 통해 확인할 수 있다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 Kitten-TTS 2: New Open-source SOTA 1.58 bit TTS (CPU-only with voice cloning, multilingual, emotion control)
원문 보기 ↗