참고팁Reddit
MiniMax-H3(미니맥스 H3) 모델용 PTD 가속 LoRA 공개 (8/4스텝)
영상 생성 모델 MiniMax-H3(미니맥스 H3)의 추론 속도를 획기적으로 줄일 수 있는 어댑터. 관련 워크플로우에 적용 권장.
요약
MiniMax-H3 모델을 위한 Ref2VA(참조 이미지 기반 비디오 및 오디오 생성) 작업의 추론 속도를 대폭 개선하는 8단계 및 4단계 PTD(Parametric Trajectory Distillation) LoRA가 공개되었습니다. 이번 방식은 기존의 단일 LoRA와 달리, 병렬 디코딩 증류(PDD)로 도입된 구간별 출력 헤드 위에 추론 단계별로 독립적인 저순위 어댑터를 훈련하는 'per-hop' LoRA 방식을 적용합니다. 추론 시 각 노이즈 제거 단계에서 해당 단계의 어댑터를 선택하고 출력 헤드를 병합하는 구조로, 8단계 체크포인트는 8번, 4단계 체크포인트는 4번의 트랜스포머 평가(NFE)만으로 생성이 가능합니다. 이번 가속 LoRA는 Ref2VA 작업의 효율성을 높이기 위해 설계되었으나, 기존 ComfyUI LoRA 로더와의 호환성 여부는 확인이 필요합니다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 8 and 4-step MiniMax-H3 PTD Ref2VA Acceleration LoRAs
원문 보기 ↗