Bad Apple 영상을 3MB 신경망으로 압축하기: SIREN 모델 활용 사례

요약

한 개발자가 6,524 프레임의 'Bad Apple' 영상을 3.2MB 크기의 신경망(MLP)으로 압축하는 데 성공했다. 해당 모델은 5개의 선형 레이어와 sine 활성화 함수로 구성된 SIREN(Sitzmann et al.) 아키텍처를 기반으로 하며, 총 790k개의 파라미터를 사용한다. 입력값으로 프레임 인덱스와 픽셀 위치(t, y, x)를 받으면 0에서 1 사이의 흑백 명도값을 출력하는 방식이다. 원본 영상(854×480)은 1620 프레임, 384×384 해상도로 샘플링되어 약 1/10 수준으로 데이터가 축소되었다. 기존 ReLU MLP와 푸리에 특징을 사용했을 때보다 SIREN 아키텍처를 도입했을 때 더 낮은 MSE를 기록하며 효율적인 압축 성능을 보였다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.