Runway est l’une des premières entreprises de vidéo par IA, et elle a construit ses outils en pensant aux cinéastes et aux artistes. Le cœur du produit, ce sont ses modèles vidéo Gen, qui créent de courts clips à partir d’un prompt texte, d’une image fixe, ou des deux. Les images de référence aident à garder un personnage ou un décor cohérent d’un plan à l’autre, ce qui est le plus difficile dès qu’on dépasse un seul clip. L’entreprise a commencé par un ensemble d’outils de montage dans le navigateur, et une partie reste, comme la suppression de fond, le suivi de mouvement et l’inpainting.
Deux outils plus récents montrent la direction. Aleph modifie une vidéo existante avec des instructions simples : on peut changer la météo, retirer un objet, restyler un plan ou générer un nouvel angle de caméra à partir de rushs qu’on a déjà. Act-Two prend une vidéo de la performance d’un acteur, visage et mouvements des mains compris, et l’applique à un personnage généré. Les workflows enchaînent plusieurs étapes pour qu’un processus de production répétable tourne sans cliquer chaque étape. Runway fait aussi de la recherche sur les world models, qui simulent des environnements pour les jeux et la robotique.
Runway tourne dans le navigateur et a une offre gratuite avec un petit nombre de crédits, plus des offres payantes qui incluent plus de crédits, une résolution plus haute et l’usage commercial. La génération vidéo consomme les crédits vite, donc le budget compte sur les projets longs. La qualité a beaucoup progressé, mais les détails fins comme les mains, le texte et une action continue longue peuvent encore déraper, et la plupart des pièces finies s’assemblent à partir de plusieurs générations et d’un monteur classique. Les alternatives incluent Luma, Veo de Google, Kling et Pika.