라즈베리 파이 피코 2 W에서 게임을 돌리는 초소형 월드 모델

“라즈베리 파이 피코 2 W에서 두 개의 소형 신경망으로 게임을 생성하고 플레이하는 초소형 월드 모델이 구현됐다. 월드 모델은 26k~131k 파라미터의 루프 트랜스포머로 프레임당 2~8M 곱셈-덧셈을 사용하고, 액터는 9k~16k 파라미터의 MLP로 동작한다. 브레이크아웃 99.99%, 플래피 버드 100%, 퐁 99.45%의 프레임 정확도를 기록했으며 두 네트워크 모두 RP2350의 코어 1에서 실행된다.”

AI 요약

라즈베리 파이 피코 2 W 마이크로컨트롤러에서 두 개의 소형 신경망으로 게임을 생성하고 동시에 플레이하는 초소형 월드 모델 프로젝트가 공개됐다. 첫 번째 네트워크(월드 모델)는 현재 프레임과 행동을 입력받아 다음 프레임과 보상을 예측하고, 두 번째 네트워크(액터)는 생성된 프레임을 보고 행동을 선택한다. 루프 트랜스포머 구조를 활용해 가중치를 재사용함으로써 메모리를 절약했으며, 26k~131k 파라미터의 월드 모델이 2~8M 곱셈-덧셈 연산으로 프레임을 생성한다. Breakout, Doom-lite, Flappy Bird, Pong, Pac-Man lite 등 게임에서 83.6%~100%의 정확도로 실제 게임을 재현했다.

핵심 포인트

  • RP2350 칩의 코어 1에서 두 신경망 실행, 코어 0은 USB와 디스플레이 담당
  • 월드 모델은 26k~131k 파라미터, 액터는 9k~16k 파라미터로 초경량화
  • Breakout 99.99%, Flappy Bird 100%, Pong 99.45% 프레임 재현 정확도 달성
  • 버튼 누르면 사용자가 직접 '꿈' 속 게임을 플레이 가능, 스트리밍 RL 에이전트로 온보드 학습도 지원

향후 전망

  • 마이크로컨트롤러급 초저전력 기기에서 월드 모델 기반 AI 활용 가능성 확대
  • 엣지 디바이스에서의 실시간 생성형 AI 및 강화학습 연구 촉진
Share

이것도 읽어보세요

댓글

이 소식에 대한 의견을 자유롭게 남겨주세요.

댓글 (0)

불러오는 중...