Runway Gen-2

主な機能とモード

1. Text to Video（モード01）：テキストプロンプトだけで、想像したスタイルの動画を合成します。
2. Text + Image to Video（モード02）：参照画像とテキストプロンプトから動画を生成します。
3. Image to Video（モード03）：参照画像だけを使って動画を生成します（Variationsモード）。
4. Stylization（モード04）：画像やプロンプトのスタイルを動画の全フレームに適用します。
5. Storyboard（モード05）：モックアップを、スタイル付きのアニメーション映像に変換します。
6. Mask（モード06）：モックアップを、スタイル付きのアニメーション映像に変換します。
7. Render（モード07）：入力画像やプロンプトを適用し、テクスチャのないレンダーをリアルな出力に変換します。
8. Customization（モード08）：Gen-1のモデルをカスタマイズし、より忠実な結果を目指せます。

主なメリット

• 照明もカメラも不要です。画像やテキストの構図・スタイルを元動画の構造に適用するVideo to Video、または言葉だけで作るText to Videoによって、撮影せずに新しい動画をリアルかつ一貫して合成できます。
• ユーザー調査では、Gen-1の結果は既存のimage-to-imageおよびvideo-to-video変換手法より好まれました。Stable Diffusion 1.5を73.53%、Text2Liveを88.24%上回りました。

対象ユーザー

テキスト、画像、モックアップをリアルな動画コンテンツに変換したい映像制作者、動画クリエイター、デザイナー、クリエイター。

使い方

RunwayアプリからGen-2にアクセスし、テキストプロンプトを入力するか、元となる画像・動画をアップロードします。希望する生成モードを選ぶと、入力内容に基づく新しい動画が生成されます。