참고Reddit
llama.cpp, 적응형 MTP(Multi-Token Prediction) 깊이 기능 업스트림 추진 중단
로컬 모델 런타임 최적화 관련 주요 기능 업데이트가 무산됨에 따라 대안적 최적화 방향 확인 필요.
원문 제목 Efforts to upstream adaptive MTP depth to llama.cpp abandoned
원문 보기 ↗로컬 모델 런타임 최적화 관련 주요 기능 업데이트가 무산됨에 따라 대안적 최적화 방향 확인 필요.
원문 제목 Efforts to upstream adaptive MTP depth to llama.cpp abandoned
원문 보기 ↗광고
promppy는 한국 AI 실무자를 위한 실시간 AI 뉴스 터미널입니다.
15분마다 속보·중요·팁 자동 수집 · 한국어 요약 제공