참고팁Hacker News
125M 파라미터 모델 기반 실시간 피아노 자동 완성 앱 'RollTab' 공개
경량 모델을 활용한 온디바이스 오디오 데이터 처리 및 생성 최적화 기술 사례.
요약
개발자가 1억 2,500만 파라미터의 트랜스포머 모델을 학습시켜 실시간으로 피아노 연주를 자동 완성하는 애플리케이션 'RollTab'을 공개했다. 이 모델은 iPhone 15 환경에서 초당 약 108개의 음표를 처리할 수 있으며, MIDI 이벤트를 시퀀스로 학습하여 피아노 연주를 보조한다. 성능 향상의 핵심 요인은 최적의 MIDI 표현 방식 선택, 정밀한 학습 데이터 정제, 그리고 DPO(Direct Preference Optimization) 사후 학습 적용이었다. MIDI는 소리 데이터가 아닌 음의 높낮이, 강도, 페달 조작 등 이벤트 시퀀스로 구성되어 있어 일반적인 오디오 파일과는 차별화된다. 현재 이 앱은 MIDI 키보드와 iPhone 또는 iPad를 연결해 무료로 사용할 수 있다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 Show HN: I trained a 125M model to autocomplete piano on-device
원문 보기 ↗