중요X
텐센트, 멀티모달 플래그십 MoE 'Hy4' 오픈 웨이트 공개 (770B/활성 49B, 1M 컨텍스트)
활성 파라미터 49B로 추론 부담 완화, 1M 컨텍스트·GGUF 제공. 자체 호스팅 후보로 검토 가치.
요약
텐센트(Tencent)가 자사의 네이티브 멀티모달 플래그십 모델인 Hy4의 오픈 웨이트를 공개했다. Hy4는 총 파라미터 770B, 활성 파라미터 49B 규모의 MoE(Mixture-of-Experts) 모델이며 1M 토큰의 컨텍스트 윈도우를 지원한다. 이번 공개와 함께 포괄적인 안전성 평가 보고서가 포함된 Hy4 시스템 카드도 함께 배포되었다. 관련 모델 가중치와 GGUF 파일 등은 깃허브(GitHub)를 통해 접근할 수 있다. 텐센트는 한국 시간 기준 오는 금요일 오전 8시부터 10시(PT 기준)까지 레딧(r/LocalLLaMA)에서 Hy4 모델과 관련한 라이브 AMA를 진행할 예정이다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @TencentHunyuan: Today, we’re releasing the open weights for Hy4. Our natively multimodal flagship MoE (770B total / 49B active, 1M context). Along
원문 보기 ↗