중요Reddit
크래프톤, 처음부터 자체 학습한 30B MoE 'Raon-1 mini' 공개
PUBG 제작사가 독자 아키텍처로 Qwen(큐원)급 성능 달성. 국산 파운데이션 모델 선택지 확대, 검토 가치 있음.
요약
PUBG 개발사 크래프톤(KRAFTON)이 자체적으로 처음부터 학습시킨 새로운 거대언어모델(LLM) 'Raon-1 mini'를 공개했다. 이 모델은 30B MoE(Mixture of Experts) 구조로 설계되었으며, 약 4B의 활성 파라미터를 사용하여 최신 AI 연구 혁신을 기반으로 자체 아키텍처를 적용했다. 특히 크래프톤은 'Raon-1 mini'가 알리바바의 Qwen과 같은 동급 규모의 MoE 모델과 경쟁하거나 일부 영역에서 더 우수한 성능을 보인다고 밝혔다. 이번 성과는 거대 IT 기업들도 쉽지 않은 기초 모델 개발을 게임사가 성공적으로 수행했다는 점에서 큰 주목을 받고 있다. 전문 지식이 필요한 파운데이션 모델 학습 분야에서 게임사의 기술적 역량을 입증한 사례로 평가된다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 PUBG's creators just trained a Qwen competitor from scratch
원문 보기 ↗