互促式双模自演化:加速音视频角色自回归生成
Mutual Forcing: Dual-Mode Self-Evolution for Fast Autoregressive Audio-Video Character Generation
Yupeng Zhou, Lianghua Huang, Zhifan Wu, Jiabao Wang, Yupeng Shi, 等 (+5)
⭐ 16
• 本文提出“互促式”(Mutual Forcing)框架,旨在实现高效的自回归音视频角色生成。
• 该框架通过一个统一模型,巧妙地融合了少步和多步两种训练模式,以优化生成过程。
• 两种训练模式共享参数,这种设计显著提升了模型在生成内容时的一致性。
• 互促式方法有效减少了模型训练和推理的开销,提升了整体效率。
• 最终,该方法能够快速生成高质量的音视频角色内容。
🔗 arXiv · 🤗 HF
#音视频生成 #自回归模型 #角色生成 #高效生成 #双模训练
Mutual Forcing: Dual-Mode Self-Evolution for Fast Autoregressive Audio-Video Character Generation
Yupeng Zhou, Lianghua Huang, Zhifan Wu, Jiabao Wang, Yupeng Shi, 等 (+5)
⭐ 16
• 本文提出“互促式”(Mutual Forcing)框架,旨在实现高效的自回归音视频角色生成。
• 该框架通过一个统一模型,巧妙地融合了少步和多步两种训练模式,以优化生成过程。
• 两种训练模式共享参数,这种设计显著提升了模型在生成内容时的一致性。
• 互促式方法有效减少了模型训练和推理的开销,提升了整体效率。
• 最终,该方法能够快速生成高质量的音视频角色内容。
🔗 arXiv · 🤗 HF
#音视频生成 #自回归模型 #角色生成 #高效生成 #双模训练