Stable Video Diffusion étend l’approche de Stable Diffusion au mouvement. On fournit une image fixe, et le modèle génère quelques secondes de vidéo qui animent la scène. Il a été publié avec des poids ouverts, pour que chercheurs et amateurs puissent le faire tourner et l’adapter.
Beaucoup d’outils et de flux de travail ultérieurs se sont construits dessus, en ajoutant des contrôles, des clips plus longs et des fine-tunes. Il a aidé à montrer que des modèles vidéo ouverts étaient faisables, même si des modèles plus récents d’autres labos l’ont dépassé en durée et en qualité.
Le modèle se télécharge gratuitement, avec des conditions de licence pour l’usage commercial. Le faire tourner demande un GPU capable. Les alternatives incluent Runway, Pika, Kling, Luma, et des modèles ouverts comme Wan et HunyuanVideo. Stable Video Diffusion convient aux chercheurs et aux amateurs qui aiment bricoler.