Act-One
Modell von Runway, das die Mimik und Performance eines Schauspielers auf eine generierte Figur überträgt
Act-One ist eine Funktion im Videomodell Gen-3 Alpha von Runway, die im Oktober 2024 erschien. Sie nutzt ein gewöhnliches Video eines Gesichts als Steuerung für eine KI-generierte Figur. Creator:innen filmen sich mit einem Smartphone oder einer Webcam; Act-One überträgt Mimik, Blickrichtung und Timing auf eine andere Figur, ohne Motion-Capture-Ausrüstung, Gesichtspunkte oder manuelle Keyframes. Es unterstützt mehrere Kamerawinkel und kann eine Darstellung auf Figuren mit anderen Proportionen übertragen.
Die Funktion sollte herkömmliche Performance-Capture-Abläufe mit Spezialhardware und Studioaufbau ersetzen. Runway positionierte sie für Filmschaffende und Animator:innen, die ausdrucksstarkes Figurenspiel ohne Motion-Capture-Budget erstellen möchten. Bei der Veröffentlichung fiel auf, wie gut sie feine Gesichtsausdrücke im Vergleich zu früheren KI-Lippensynchronisations- oder Face-Swap-Werkzeugen erhielt. Später erweiterte Runway den Ansatz mit Act-Two, das zur Gesichtserfassung von Act-One die Übertragung von Ganzkörperbewegungen ergänzt.