Act-One

Act-OneはRunwayの動画モデルGen-3 Alphaに含まれる機能で、2024年10月にリリースされました。人の顔を撮った普通の動画を、AI生成キャラクターを動かすための入力に変えます。クリエイターがスマートフォンやウェブカメラで自分を撮影すると、Act-Oneが表情、視線、間のタイミングを別の生成キャラクターに写します。モーションキャプチャ用の機材も、顔のマーカーも、手作業のキーフレームも要りません。複数のカメラアングルに対応し、元の俳優とは体型の異なるキャラクターにも演技を付け替えられます。

この機能が狙ったのは、専用機材とスタジオが必要な従来のパフォーマンスキャプチャの置き換えです。Runwayは、モーキャプの予算がなくても表情豊かなキャラクター演技を付けたい映像作家やアニメーター向けのツールと位置づけました。リリース当時は、従来のAIによるリップシンクや顔の入れ替えツールより、微妙な表情をよく保てると注目されました。その後RunwayはAct-Twoでこの考えを広げ、Act-Oneが導入した顔の演技キャプチャに全身のモーション転送を加えています。