8단계 및 4단계 MiniMax-H3 PTD Ref2VA 가속 LoRA

요약

이 기술은 Parametric Trajectory Distillation (PTD)을 MiniMax-H3 모델에 적용하여, 참조 이미지로부터 비디오와 오디오를 생성하는 Ref2VA 궤적 작업을 수행합니다. 이를 위해 8단계 및 4단계 가속기(accelerator) LoRA를 개발했으며, 이는 확산 백본에 대한 단계별 독립적인 저랭크 어댑터 방식을 사용합니다.

핵심 포인트

• PTD 기법을 MiniMax-H3 모델에 적용하여 Ref2VA 궤적 생성을 시도함.
• 8단계 및 4단계 가속기 LoRA를 출시하여 효율적인 추론을 제공함.
• 단일 공유 LoRA와 달리, 단계별 독립 저랭크 어댑터 방식을 사용함.