株式会社フロム・ソフトウェア 中途採用特設ページ

Settings Manager - 環境設定やアドオン有効状態などをプロファイ...

Pawel Wilczewski氏による、Blenderの環境設定やアドオンの有効状況などをプロファイル保存して管理できるアドオン『Setting Manager』が登場しました!

  • 0
  • 0
  • 0
続きを読む

UI Effect Function Library - Unreal Engi...

UI Effect's FantasyによるUnreal Engine 5向けのUI向けエフェクト関数ライブラリプラグイン『UI Effect Function Library』が無料公開されています!

  • 0
  • 0
  • 0
続きを読む

Moiré - モアレ表現を手軽に追加できるAfter Effects用プラグイ...

aescripts + aepluginsにてモアレ表現を手軽に追加できるAfter Effects用プラグイン『Moiré』がリリースされました!

  • 0
  • 0
  • 0
続きを読む

Skip UV unwrapping - Vertex Painting for...

Jamie Dunbar氏が頂点ペイントを行う際のフローを紹介したBlenderチュートリアル動画『Skip UV unwrapping - Vertex Painting for Beginners』を公開しています。

  • 0
  • 0
  • 1
続きを読む

Shell Texture Fur Blender GeoNodes - 多層ポ...

CGアーティストでコンテンツクリエイターのYOGYOG氏が多層ポリゴンのファー「シェル法」をBlender上で構築したデータを無料公開中です!

  • 0
  • 0
  • 1
続きを読む

Maya 2024 | 製品概要と購入 | Autodesk 公式

Make-A-Video - MetaのAI研究開発チームによるテキストからビデオを生成する技術が発表!

この記事は約2分5秒で読めます

Meta AIによる、テキストプロンプトから動画を生成する技術「Make-A-Video」が発表されました。


プロモーション

求人情報検索 | CG・映像の専門情報サイト | CGWORLD.jp


Make-A-Video

Make-A-Videoの研究は、テキストからビデオへの生成を可能にするために構築されたテキストから画像への生成技術における最近の進歩をベースにしています。このシステムは、説明文付きの画像を用いて、世界がどのように見えるか、また、どのように説明されることが多いかを学習します。また、ラベルのない動画を使って、世界の動きを学習します。このデータをもとに、Make-A-Videoは、わずかな文字や行のテキストで、気まぐれで世界にひとつだけの動画を生成し、あなたの想像力を膨らませます。

公式ページより

私たちは、Text-to-Image(T2I)生成における最近の驚異的な進歩を、Text-to-Video(T2V)に直接変換するアプローチであるMake-A-Videoを提案します。我々の直感は単純で、テキストと画像のペアデータから、世界がどのように見えるか、どのように記述されるかを学び
このように、Make-A-Videoは、テキストと画像のペアから世界の様子とその説明を学習し、教師なしビデオ映像から世界の動きを学習する。Make-A-Videoには、
(1)T2Vモデルの学習を高速化できる(視覚表現とマルチモーダル表現を一から学習する必要がない)
(2)教師なしビデオ映像から世界の動きを学習できテキストとビデオのペアデータを必要としない、
(3)生成されたビデオは今日の画像生成モデルの持つ広大さ(美的感覚の多様性、幻想的な描写など)を継承している
という三つの利点があります。
我々は、T2Iモデルに新規かつ効果的な空間-時間モジュールを構築するための、シンプルかつ効果的な方法を設計する。まず、完全な時間的U-Netと注意テンソルを分解し、空間と時間で近似する。次に、T2V以外の様々なアプリケーションを可能にするビデオデコーダ、補間モデル、2つの超解像モデルにより、高解像度かつフレームレートのビデオを生成する空間時間パイプラインを設計する。空間的・時間的解像度、テキストへの忠実性、品質、すべての側面において、Make-A-Videoは質的にも量的にも、テキストからビデオへの生成における新しい最先端を打ち立てたと言える。

論文より

これまた凄いのが出てきましたね。「Make-A-Video」は現在論文のみ公開済みです。
今後の動向が気になる方は、是非サイトをチェックしてみてください。

リンク

Screenshot of makeavideo.studio


プロモーション
Curo Inc.

関連記事

  1. MotionDiffuse: Text-Driven Human Motion Generation with Diffusion Model - テキストから最適な人物の3Dモーションを生成する技術!

    2022-10-05

  2. Ubisoft Toronto "IK Rig" Prototype - UBIソフト トロントスタジオによるIKを活用したリグモデルのプロトタイプ映像!

    2015-06-16

  3. Neural State Machine for Character-Scene Interactions - ディープラーニングを活用しキャラクターとオブジェクトとの干渉アニメーションを良い感じにする技術!

    2019-10-17

  4. Seeing the World through Your Eyes - 瞳に反射した画像を元に3Dシーンを復元する技術!

    2023-06-18

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

2023/4/3 新サーバーへ移行しました!
3D/2D/VR/GAME/AIなどのCGに関連する
気になる情報やツールをほぼ毎日紹介!
TwitterやYoutubeなども是非フォロー
よろしくお願いします!

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR

株式会社クリーク・アンド・リバー社 大阪支社の採用・求人情報-engage

採用 | 3DCGアーティスト&テクニカルアーティスト大募集 | 株式会社Cygames

ネットで学べる3DCG講座 MAYA 3dsMax |デジハリ・オンラインスクール

GRASSHOPPER MANUFACTURE

   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る