Gen-2で動画生成が進化！テキストや画像から新しい映像表現が可能に。

Runwayは、テキスト、画像、または動画クリップを利用して新しい動画を生成できるマルチモーダルAIシステムGen-2を発表しました。このシステムは、リアルで一貫した新しい動画を合成することができます。画像やテキストプロンプトのスタイルを既存の動画の構造に適用することで、まるで何も撮影せずに新しいものを撮影するかのように実現します。

Gen-2は、任意の画像、動画クリップ、またはテキストプロンプトを魅力的な映像作品に変えるさまざまな方法を提供します。ユーザーは、運転画像とテキストプロンプトを使用して動画を生成したり、単一の運転画像を用いてバリエーションを作成したりできます。また、任意の画像やプロンプトのスタイルを動画の全フレームに転送することが可能です。

モックアップを完全にスタイライズされたアニメーションレンダリングに変換でき、テクスチャのないレンダリングをリアルな出力に変換することも可能です。Gen-1の完全な力を発揮するために、モデルをカスタマイズしてさらに高い忠実度の結果を得ることができます。

ユーザー調査に基づくと、Gen-1からの結果は、画像から画像、動画から動画の翻訳において既存の方法よりも好まれています。Runway Researchは、新しい形の創造性を可能にするマルチモーダルAIシステムの構築に専念しています。Gen-1は、この使命において重要なステップを示しています。