참고팁Reddit
웹 브라우저에서 로컬 추론으로 구동되는 리듬 게임 공개
ONNX Runtime-Web을 활용하여 브라우저 내에서 경량 모델을 로컬로 구동하는 구현 기술.
요약
브라우저 환경에서 실행되는 리듬 게임이 출시되었으며, 사용자가 업로드한 MP3 파일을 기반으로 게임 내 장애물과 배경이 생성됩니다. 이 게임은 외부 서버 업로드 없이 로컬 브라우저 탭 내에서 모든 오디오 분석이 이루어지는 것이 특징입니다. 핵심 모델로는 비트 및 다운비트 추적을 담당하는 1.6MB 용량의 BeatNet과 음표 전사를 수행하는 0.2MB 용량의 Spotify Basic Pitch가 사용됩니다. 모든 모델은 ONNX Runtime-Web을 통해 웹 워커(Web Worker)에서 개별적으로 구동됩니다. 사용자는 웹 브라우저만으로 데이터를 외부로 유출하지 않고 로컬 환경에서 음악 생성형 게임을 즐길 수 있습니다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 Made a rhythm game where 4 small neural nets listen to your song right in the browser tab (open source)
원문 보기 ↗