Another World, Lester and Beast Maya mGe...

アニメーターのEmilio Serrano Garcia氏がゲーム「Another World」のファンメイドムービーをUE5上で構築!使用したキャラクター2体のMaya用mGearセットアップ済みモデルも無料公開しています。

続きを読む

DmSkinningSupport - 登録したジョイントをスライダーで動かしな...

3Dモデラーのdmfuji氏による登録したジョイントをスライダーで動かしながらスキンウェイト調整が出来るMayaスクリプト『DmSkinningSupport』がリリースされました!

続きを読む

AgedFX - 塵埃や傷、汚れ、蜘蛛の巣などの経年劣化表現をポチポチと簡単に追...

VICUBE Animationによる経年劣化表現追加Blenderアドオン『AgedFX』がリリースされました!

続きを読む

Gesture Helper v1.0 - 8方向のマウスジェスチャーに様々なコ...

AIGODLIKEによるマウスジェスチャーにコマンドを追加出来るBlenderアドオン『Gesture Helper v1.0』が無料公開!

続きを読む

Unreal Engine 5.4が4月下旬のリリースと同時にゲーム以外の分野で...

2024年3月12日、Epic GamesがUnreal Engine 5.4移行の料金形態について発表しました。映像分野などの完全無料は廃止されちゃいます。

続きを読む

Maya 2024 | 製品概要と購入 | Autodesk 公式

Make-A-Video - MetaのAI研究開発チームによるテキストからビデオを生成する技術が発表!

この記事は約2分5秒で読めます

Meta AIによる、テキストプロンプトから動画を生成する技術「Make-A-Video」が発表されました。


プロモーション

Blender Fes - Blenderの世界へ、一緒に飛び込もう!


Make-A-Video

Make-A-Videoの研究は、テキストからビデオへの生成を可能にするために構築されたテキストから画像への生成技術における最近の進歩をベースにしています。このシステムは、説明文付きの画像を用いて、世界がどのように見えるか、また、どのように説明されることが多いかを学習します。また、ラベルのない動画を使って、世界の動きを学習します。このデータをもとに、Make-A-Videoは、わずかな文字や行のテキストで、気まぐれで世界にひとつだけの動画を生成し、あなたの想像力を膨らませます。

公式ページより

私たちは、Text-to-Image(T2I)生成における最近の驚異的な進歩を、Text-to-Video(T2V)に直接変換するアプローチであるMake-A-Videoを提案します。我々の直感は単純で、テキストと画像のペアデータから、世界がどのように見えるか、どのように記述されるかを学び
このように、Make-A-Videoは、テキストと画像のペアから世界の様子とその説明を学習し、教師なしビデオ映像から世界の動きを学習する。Make-A-Videoには、
(1)T2Vモデルの学習を高速化できる(視覚表現とマルチモーダル表現を一から学習する必要がない)
(2)教師なしビデオ映像から世界の動きを学習できテキストとビデオのペアデータを必要としない、
(3)生成されたビデオは今日の画像生成モデルの持つ広大さ(美的感覚の多様性、幻想的な描写など)を継承している
という三つの利点があります。
我々は、T2Iモデルに新規かつ効果的な空間-時間モジュールを構築するための、シンプルかつ効果的な方法を設計する。まず、完全な時間的U-Netと注意テンソルを分解し、空間と時間で近似する。次に、T2V以外の様々なアプリケーションを可能にするビデオデコーダ、補間モデル、2つの超解像モデルにより、高解像度かつフレームレートのビデオを生成する空間時間パイプラインを設計する。空間的・時間的解像度、テキストへの忠実性、品質、すべての側面において、Make-A-Videoは質的にも量的にも、テキストからビデオへの生成における新しい最先端を打ち立てたと言える。

論文より

これまた凄いのが出てきましたね。「Make-A-Video」は現在論文のみ公開済みです。
今後の動向が気になる方は、是非サイトをチェックしてみてください。

リンク

Screenshot of makeavideo.studio


プロモーション


関連記事

  1. Talking Head Anime from a Single Image 3 - 1枚の2Dキャラ立ち絵からVTuberになれるAI技術の新バージョン!上半身の動きにも対応!

    2022-06-06

  2. Runway Gen-1 - テキストで指定した通りに動画のスタイルを変更可能なAIモデルが一般公開!無料お試し可能!次期モデル「Gen-2」のトレーラーも公開中!

    2023-03-28

  3. NVIDIA ACE (Avatar Cloud Engine) - ゲームキャラクターと自然な対話を可能にするAI技術サービス群!早期アクセスが可能に!

    2024-01-09

  4. BlueWillow AI Beta - Discord上命令可能な新AI画像生成サービスが登場!現在無料のベータ提供中!

    2023-01-10

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

2023/4/3 新サーバーへ移行しました!
3D/2D/VR/GAME/AIなどのCGに関連する
気になる情報やツールをほぼ毎日紹介!
TwitterやYoutubeなども是非フォロー
よろしくお願いします!

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR

株式会社クリーク・アンド・リバー社 大阪支社の採用・求人情報-engage

採用 | 3DCGアーティスト&テクニカルアーティスト大募集 | 株式会社Cygames

ネットで学べる3DCG講座 MAYA 3dsMax |デジハリ・オンラインスクール

GRASSHOPPER MANUFACTURE

   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る