Meta社による新たな動画生成AIモデル「Movie Gen」が発表されています！
Meta Movie Gen
MetaのAI研究チームによって開発されたMovie Genは、様々な機能において最先端の結果をもたらします。私たちは、カジュアルなクリエイターからクリエイティブなプロフェッショナルまで、全く新しい可能性を切り開くこの研究ラインの可能性に興奮しています。
Movie Genのモデルと機能
- Movie Genビデオ： 1つのテキストプロンプトから高品質かつ高精細な画像や動画を生成できる30Bパラメータ変換モデル。
- Movie Gen オーディオ： 13Bのパラメータ・トランスフォーマー・モデルで、ビデオ入力を制御可能なオプションのテキスト・プロンプトとともに受け取り、ビデオに同期した忠実度の高いオーディオを生成することができます。アンビエントサウンド、インストゥルメンタルBGM、フォーリーサウンドを生成することができ、オーディオ品質、ビデオとオーディオのアライメント、テキストとオーディオのアライメントにおいて最先端の結果をもたらします。
- 正確なビデオ編集： 生成された、または既存のビデオと付随するテキスト指示を入力として使用し、要素の追加、削除、置換などのローカライズされた編集や、背景やスタイルの変更などのグローバルな編集を実行できます。
- パーソナライズされたビデオ： 人物の画像とテキストによる指示を入力として、このモデルは、動画におけるキャラクターの保存と自然な動きに関して最先端の結果を持つ動画を生成することができます。
これはすごいなぁ。Facebookとかのコンテンツで学習しているのだろうか？
ちなみに残念ながら、この技術はまだ使用することはできません。今後どのような展開がされていくのかが楽しみですね。技術論文なども公開されています。詳細は公式サイトをご確認ください。
リンク
コメント