AnimationCafe

BreakDown - レイヤーを可視化していくブレイクダウンアニメーション(G...

Mels Mneyan氏によるPhotoshop用のプラグイン「BreakDown」のご紹介。レイヤー構成を元にブレイクダウンアニメーションを生成が可能です!

  • 7
  • 0
  • 0
続きを読む

Conform Object - オブジェクトを別オブジェクトのサーフェスに添っ...

Configurate(Mark Kingsnorth氏)による「Conform Object」は、オブジェクトを別オブジェクトのサーフェスに添って変形させつつ貼り付けられる便利なBlenderアドオンです!

  • 126
  • 0
  • 0
続きを読む

Over 700 animations available for free -...

モーションキャプチャーソリューションでお馴染みNoitomのMocap.marketにてPerception Neuron Studio で作成された700を超えるモーションデータが無料ダウンロード可能だそうです!

  • 307
  • 0
  • 1
続きを読む

State of Unreal GDC 2023 Epic Games - UE...

GDC 2023のEpic Gamesの基調講演で、色々な発表がありましたよー!熱い熱い!

  • 28
  • 0
  • 0
続きを読む

The #GameAudioGDC Bundle Part 7 - GDC202...

毎年3月頃GDCに合わせて公開されるSonnissのサウンドデータ!GDC 2023に合わせて無償公開された音響データ!「The #GameAudioGDC Bundle Part 7」が公開!44GB超のロイヤリティフリー・商用利用も可能なサウンドデータ!

  • 64
  • 0
  • 0
続きを読む

Maya、3ds Max のインディー版 | AREA JAPAN | Autodesk

Make-A-Video - MetaのAI研究開発チームによるテキストからビデオを生成する技術が発表!

この記事は約2分5秒で読めます

Meta AIによる、テキストプロンプトから動画を生成する技術「Make-A-Video」が発表されました。


プロモーション

『ファイナルファンタジーVII』リメイクプロジェクトの3D背景アーティストが語るリメイクのこだわりとは | スクウェア・エニックスで働くストーリー | 中途採用 SQUARE ENIX -RECRUITING-


Make-A-Video

Make-A-Videoの研究は、テキストからビデオへの生成を可能にするために構築されたテキストから画像への生成技術における最近の進歩をベースにしています。このシステムは、説明文付きの画像を用いて、世界がどのように見えるか、また、どのように説明されることが多いかを学習します。また、ラベルのない動画を使って、世界の動きを学習します。このデータをもとに、Make-A-Videoは、わずかな文字や行のテキストで、気まぐれで世界にひとつだけの動画を生成し、あなたの想像力を膨らませます。

公式ページより

私たちは、Text-to-Image(T2I)生成における最近の驚異的な進歩を、Text-to-Video(T2V)に直接変換するアプローチであるMake-A-Videoを提案します。我々の直感は単純で、テキストと画像のペアデータから、世界がどのように見えるか、どのように記述されるかを学び
このように、Make-A-Videoは、テキストと画像のペアから世界の様子とその説明を学習し、教師なしビデオ映像から世界の動きを学習する。Make-A-Videoには、
(1)T2Vモデルの学習を高速化できる(視覚表現とマルチモーダル表現を一から学習する必要がない)
(2)教師なしビデオ映像から世界の動きを学習できテキストとビデオのペアデータを必要としない、
(3)生成されたビデオは今日の画像生成モデルの持つ広大さ(美的感覚の多様性、幻想的な描写など)を継承している
という三つの利点があります。
我々は、T2Iモデルに新規かつ効果的な空間-時間モジュールを構築するための、シンプルかつ効果的な方法を設計する。まず、完全な時間的U-Netと注意テンソルを分解し、空間と時間で近似する。次に、T2V以外の様々なアプリケーションを可能にするビデオデコーダ、補間モデル、2つの超解像モデルにより、高解像度かつフレームレートのビデオを生成する空間時間パイプラインを設計する。空間的・時間的解像度、テキストへの忠実性、品質、すべての側面において、Make-A-Videoは質的にも量的にも、テキストからビデオへの生成における新しい最先端を打ち立てたと言える。

論文より

これまた凄いのが出てきましたね。「Make-A-Video」は現在論文のみ公開済みです。
今後の動向が気になる方は、是非サイトをチェックしてみてください。

リンク

Screenshot of makeavideo.studio


プロモーション
Curo Inc.

関連記事

  1. Talking Head Anime from a Single Image 3 - 1枚の2Dキャラ立ち絵からVTuberになれるAI技術の新バージョン!上半身の動きにも対応!

    2022-06-06

  2. RigNet: Neural Rigging for Articulated Characters - ディープラーニングでモデルへのリギングを自動で行ってくれる技術!SIGGRAPH 2020 論文

    2020-05-11

  3. ChatGPT - 人生の悩みからプログラムのコードやツールのスクリプトも教えてくれる 高度な対話型チャットAIがお試し可能!

    2022-12-02

  4. BlueWillow AI Beta - Discord上命令可能な新AI画像生成サービスが登場!現在無料のベータ提供中!

    2023-01-10

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/CG関連のネタ・ツール情報を
ほぼ毎日紹介します!

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR

育成講座

採用 | 3DCGアーティスト&テクニカルアーティスト大募集 | 株式会社Cygames


 株式会社コナミデジタルエンタテインメント × イマジカデジタルスケープ 共同募集プロジェクト

株式会社フロム・ソフトウェア 中途採用特設ページ

GRASSHOPPER MANUFACTURE

3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る