참고Reddit
분산형 LLM 학습 프로젝트 'CrowdGPT' 공개
중앙 데이터센터 없이 사용자 기기를 활용해 오픈소스 모델을 공동 학습하는 새로운 패러다임 제시.
요약
CrowdGPT는 데이터센터나 서버 팜 없이 사용자의 GPU 자원을 활용하여 오픈소스 LLM을 학습시키는 프로젝트입니다. 참여자는 자신의 컴퓨팅 자원을 기여하는 대신, 함께 학습시킨 LLM 모델에 대한 소유권을 얻는 새로운 보상 체계를 도입했습니다. 이 프로젝트는 연합 학습(Federated Learning) 모델을 기반으로 하며, 학습 과정을 조율하는 경량화된 중앙 서버를 통해 모델 학습의 안정성과 보안성을 확보했습니다. 기존의 거대 AI 학습 방식과 달리 100% 투명하고 친환경적인 데이터 및 학습 환경을 지향합니다. 상세한 프로젝트 정보는 공식 웹사이트(crowdgpt.net)와 GitHub 저장소를 통해 확인할 수 있습니다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 CrowdGPT - The first datacenterless LLM
원문 보기 ↗