Houdini 21 新機能を徹底解説!各種新機能や ML などで広がるゲーム開発の未来 #ポリゴンナイト | CREATIVE VILLAGE SEMINAR

【PR】Advanced Modeling Techniques for AAA...

環境アーティストのMauriccio氏によるUnreal Engine 5のモデリングツールなどを使用したAAAプロップ制作解説チュートリアルコース『Advanced Modeling Techniques for AAA Assets in Unreal Engine』がCG&デジタルアート関連チュートリアルサービス-Wingfoxにて取り扱い開始!

続きを読む

LuxDiT: Lighting Estimation with Video D...

NVIDIA&トロント大学&Vector AI研究所の研究チームによる、1枚の画像や動画からライティング環境を推定し、HDRI環境マップを生成するAIモデル「LuxDiT: Lighting Estimation with Video Diffusion Transformer」が発表されております。

続きを読む

RenderMan 26 - ディズニー・ピクサーのフラッグシップ・レンダラーの...

ディズニー・ピクサーのフラッグシップ・レンダラー「RenderMan」の最新板「RenderMan 26」がリリースされています!

続きを読む

UNote - レベル内にフィードバック用メモと座標を残す事が出来るUnreal...

Edouard Boudet氏による、レベル内にフィードバック用メモと座標を残す事が出来るUnreal Engine 5向けの無料プラグイン「UNote」がリリースされています!

続きを読む

CGWORLD MASTER CLASS ONLINE vol.18 -  今回...

CGWORLDによる大型オンライン学習イベントの第18回目『CGWORLD MASTER CLASS ONLINE vol.18』が2025年9月20日~21日の2日間、オンライン開催されます!今回は「アニメーション」に特化したセッションが多数用意されているそうですよー!!!

続きを読む

はじめてのFlow Studio ウェビナー | イベント | Autodesk :: AREA JAPAN

AnimaX: Animating the Inanimate in 3D with Joint Video-Pose Diffusion Models - 動画生成AIを活用した3Dアニメーション生成フレームワーク!

この記事は約1分43秒で読めます

動画拡散モデルの運動知識と骨格ベースアニメーションの制御性を融合するフレームワーク「AnimaX: Animating the Inanimate in 3D with Joint Video-Pose Diffusion Models」のプロジェクトページが公開されています。

AnimaX: Animating the Inanimate in 3D with Joint Video-Pose Diffusion Models

我々は、映像拡散モデルのモーションプリオールと、スケルトンベースのアニメーションの制御可能な構造を橋渡しする、フィードフォワード3DアニメーションフレームワークであるAnimaXを発表する。従来のモーション合成手法は、固定された骨格トポロジーに制限されるか、高次元の変形空間でコストのかかる最適化を必要とする。これに対してAnimaXは、ビデオベースのモーション知識を3D領域に効果的に転送し、任意の骨格を持つ多様な多関節メッシュをサポートします。私たちの手法は、3Dモーションをマルチビュー、マルチフレームの2Dポーズマップとして表現し、テンプレートレンダリングとテキストによるモーションプロンプトを条件として、ビデオとポーズのジョイント拡散を可能にします。ビデオとポーズシーケンス間の空間的・時間的整合を保証するために、共有位置エンコーディングとモダリティを考慮した埋め込みを導入し、ビデオプリオをモーション生成タスクに効果的に転送する。得られたマルチビューのポーズシーケンスは、3D関節位置に三角測量され、インバースキネマティクスを介してメッシュアニメーションに変換される。160,000のリギングされたシーケンスからなる新たにキュレートされたデータセットでトレーニングされたAnimaXは、VBenchにおいて汎化、モーション忠実度、効率性において最先端の結果を達成し、カテゴリーにとらわれない3Dアニメーションのためのスケーラブルなソリューションを提供します。

  • テキストで表現された動きをテンプレートから生成
  • 多視点の2DポーズマップとRGB動画を同時生成
  • 逆運動学で3Dスケルトンアニメーション化
  • カテゴリ非依存:人型・動物・機械・家具にも対応
  • 高精度×高速:学習済みモデルを用いたフィードフォワード処理で数分以内に生成可能
  • 大規模データで訓練:約16万シーケンスのリグ付きモーションデータ使用arxiv.org

簡単に言うと「動画を作るAIを応用して、3Dキャラの動きを自動で作ってくれる技術」って感じですかね。
結構良さそうなアプローチだと思いました。Githubの方はComing Soonとなっています。公開が楽しみですね。

リンク

Screenshot of anima-x.github.io

プロモーション


関連記事

  1. Meshy-3 - 登場から1周年の3D系生成AIサービス!生成品質向上!彫刻やPBRスタイル対応!部分修正も可能になった最新アップデートが公開!

    2024-05-01

  2. Glimnote Early Access - ゲームやエンタメ制作者向けに世界観や設定を制作可能なAIツール!早期アクセス開始!日本語&英語対応!

    2024-04-09

  3. QuickSplat: Fast 3D Surface Reconstruction via Learned Gaussian Initialization - 大規模な室内シーンのガウススプラッティングを最適化!AIを活用し従来の約8倍高速&最大48%高精度な3D構築技術!

    2025-05-13

  4. ChatGPT - 人生の悩みからプログラムのコードやツールのスクリプトも教えてくれる 高度な対話型チャットAIがお試し可能!

    2022-12-02

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR






   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る