참고X
탈중앙화 학습 모델 'Teutonic-II-110B' 공개
허가 없이 학습 가능한 110B 규모의 오픈소스 모델. 탈중앙화 학습 방식과 대규모 모델 구현 사례로 참고할 만함.
요약
X 계정 @const_reborn은 새로운 거대언어모델인 Teutonic-II-110B의 개발 소식을 발표했다. 이번 모델은 기존 자사 모델 대비 10배 확장된 규모로, 110B(1100억 개) 파라미터를 갖춘 것이 특징이다. 특히 이전의 어떤 탈중앙화 학습 사례보다 50% 더 큰 규모로 진행된 것이 핵심이다. 이번 Teutonic-II-110B는 누구나 허가 없이 모델을 학습할 수 있는 'permissionless' 방식을 채택했다. 탈중앙화 환경에서 대규모 모델을 훈련하는 새로운 기술적 이정표를 제시했다는 점에서 의미가 있다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @const_reborn: Announcing Teutonic-II-110B: a frontier permissionless training of a 110B LLM We are scaling 10x beyond our previous model and 50%
원문 보기 ↗