Raspberry Pi Pico 2 W에서 구동되는 초소형 월드 모델 프로젝트

요약

Raspberry Pi Pico 2 W의 RP2350 칩셋에서 두 개의 신경망을 활용해 게임을 생성하고 플레이하는 초소형 월드 모델이 구현되었다. 첫 번째 신경망은 현재 프레임과 행동을 바탕으로 다음 프레임과 보상을 예측하는 월드 모델 역할을 하며, 두 번째 신경망은 이를 기반으로 행동을 결정하는 에이전트 역할을 수행한다. 개발자는 메모리 효율을 위해 가중치를 재사용하는 루프드 트랜스포머(looped transformers) 방식을 채택하여 마이크로컨트롤러 환경에 최적화했다. 해당 모델은 외부 게임 데이터 없이 월드 모델이 생성한 가상 환경 내에서 학습하며, RP2350의 코어 1에서 두 신경망이 구동되고 코어 0이 USB 및 디스플레이 처리를 담당한다. 게임 종류에 따라 파라미터 수를 조절하여 하드웨어 리소스 제약 안에서 원활한 구동이 가능하도록 설계되었다.

AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.