Runway Gen-3 Alphaの進化：2024年後半の大きな飛躍

Runwayの進化：2024年後半の大きな飛躍

クリエイター向けAIツールの進化は目覚ましいものがあります。
特にRunwayは2024年後半に入って急速な発展を遂げています。

私は久々にRunwayを使用してみようと使ってみたところ、その驚くべき進化を目の当たりにしました。
以前と比べて機能性が大幅に向上しており、クリエイティブの可能性が大きく広がっていることを実感しています。

今回のデモでは最近の社会的イベントをモチーフとして選びました。
韓国の戒厳令です。なかなか衝撃的でしたのでモチーフとします。
画像生成では以下のようなプロンプトを基本として作業を開始しています。

Intense close-up shot of confrontation, Asian protesters face-to-face with riot police at parliament steps...

このプロンプトは段階的な改良を重ねることで完成に至りました。
特に注目したのは以下の要素です。

それで出来た画像がこちらとなります

Flux.1で生成された画像を初期フレームとして使用し、動画化のプロセスに移行しました。

動画生成では以下のようなプロンプトを使用して、シーンの動きを指定しています。

Camera moves through a chaotic night scene at Asian parliament, dynamic motion of protesters...

このプロンプトにより静止画では表現できなかったダイナミックな動きを付加することができました。
群衆の動きや光の変化が自然な形で表現されています。

しかし失敗して気味の悪い動画が出来たのでプロンプトを消し去りました。
最終的に出来上がった動画がこちらです。

デモ制作を完了した後、Runwayの新機能を偶然発見することになりました。
それが待ち望んでいた「First/Last Keyframes」機能でした。

この機能は動画生成において画期的な進歩をもたらすものでした。
以前は開始(or終了)フレームしか指定できなかった制約が大きく緩和されています。

以前連続動画作るときに利用していた手持ちの女性ポートレート画像を使用して、早速First/Last Keyframes機能の検証を行いました。
開始フレームと終了フレームで異なる表情を指定することで、自然な表情の変化を生成することに成功しています。

顔の角度が最初と最後で違っていたら振り返るじゃなくて入れ替わるという奇妙な動画となりました。

First

Last

どちらも同じ方向を向いている画像を使うと凄く自然になりました。

First

Last

これはプロンプトを一切入れていません。

こんな感じで遊んでいました

Act-Oneは単一の動画とキャラクター画像から表情豊かなパフォーマンスを生成する画期的な機能です。
この機能はiOS版でも利用可能となり、モバイル環境での制作の幅を大きく広げています。

さらに垂直方向の動画にも対応したことで、スマートフォン向けコンテンツの制作も容易になりました。

Gen-3 Alpha Turboは処理速度と機能の両面で大きな進化を遂げています。
新たに実装されたAdvanced Camera Controlにより、シーンの移動方向と強度を細かく制御できるようになりました。

Expand Video機能の追加により、既存の動画を新しいアスペクト比に変換することも可能になっています。
これにより異なるプラットフォーム向けのコンテンツ制作が効率化されました。

Video to Videoの処理速度が大幅に向上し、コストも削減されています。
クリエイターの制作効率向上に大きく貢献する改善といえるでしょう。

API面での進化も見逃せません。First/Last Keyframesのサポートが追加され、プログラマティックな制御の幅が広がっています。

マルチユーザー組織のサポートにより、チームでの利用がより効率的になりました。
利用制限やビリング管理も柔軟に行えるようになっています。

Runwayの進化は留まることを知りません。
キャラクターベースのコンテンツ制作や精密な動画制御など、新しい可能性が次々と開かれています。

効率的なワークフローの実現により、クリエイターの創造性がより発揮しやすい環境が整いつつあります。

Runwayは確実に、単なる動画生成ツールから総合的なクリエイティブプラットフォームへと進化を遂げています。今後の展開にも大きな期待が寄せられます。