참고X
다중 교사 모델 기반 On-Policy 증류 가속화 연구(P^2-MOPD)
여러 교사 모델을 활용한 지식 증류 기법 제안. 모델 경량화 및 학습 효율화 연구 시 참고.
원문 제목 @_akhaliq: P^2-MOPD Accelerating Multi-Teacher On-Policy Distillation via Parameter Priors paper: https://t.co/uCZWaYbyqK https://t.co/e5vgTK
원문 보기 ↗