AnimateDiff-Lightning: Destilação de Difusão entre Modelos

Apresentamos o AnimateDiff-Lightning para geração de vídeo ultrarrápida. Nosso modelo utiliza destilação de difusão adversarial progressiva para alcançar um novo estado-da-arte na geração de vídeo em poucos passos. Discutimos nossas modificações para adaptá-lo à modalidade de vídeo. Além disso, propomos destilar simultaneamente o fluxo de probabilidade de múltiplos modelos base de difusão, resultando em um único módulo de movimento destilado com compatibilidade de estilo mais ampla. Temos o prazer de liberar nosso modelo destilado AnimateDiff-Lightning para uso da comunidade.