Act-One
Le modèle de Runway qui reporte le jeu facial d'un acteur sur un personnage généré
Act-One est une fonction du modèle vidéo Gen-3 Alpha de Runway, sortie en octobre 2024, qui transforme une vidéo ordinaire d’un visage en signal de pilotage pour un personnage généré par IA. On se filme au téléphone ou à la webcam, et Act-One reporte les expressions, la direction du regard et le rythme sur un autre personnage généré, sans installation de motion capture, sans marqueurs faciaux et sans keyframes à poser à la main. Plusieurs angles de caméra sont pris en charge, et un jeu peut être reporté sur des personnages dont les proportions diffèrent de celles de l’acteur d’origine.
La fonction visait directement à remplacer les pipelines classiques de capture de performance, qui demandent du matériel spécialisé et un studio. Runway la présentait comme un outil pour les cinéastes et les animateurs qui veulent un jeu de personnage expressif sans budget de motion capture, et à la sortie on a surtout noté qu’elle gardait mieux les nuances du visage que les outils d’IA plus anciens de lip-sync ou de face swap. Runway a ensuite prolongé l’idée avec Act-Two, qui ajoute le transfert du mouvement du corps entier par-dessus la capture faciale introduite par Act-One.