※6/27リアル開催※【3Dスクランブル】著名なHoudiniアーティスト登壇イベント | CyberAgent

Kibali Rig - Pierrick Picaut氏によるBlender向...

Blender向けのアニメーションチュートリアル講座などでもおなじみPierrick Picaut氏が最新のリグモデル「Kibali」を無償公開しました。

続きを読む

SpringNode - Maya用のシンプルな追従処理ノード!Github上で...

テクニカルアーティストのSEN-A氏によるSpringNode - Maya用のシンプルな追従処理ノード「SpringNode」がGithub上で無料公開されています!

続きを読む

Blenderではじめる 視覚効果・VFX制作 実践入門 - 3Dにゃん氏による...

3Dにゃん氏によるBlenderを使用した実写合成VFX制作を学べる入門書「Blenderではじめる 視覚効果・VFX制作 実践入門」が2024年6月20日に発売されました!

続きを読む

GB Studio 4.0 - プログミング不要でゲームボーイ風ゲームを開発でき...

気がついたらv4になってた…。そして中々すごい進化しているなぁ。無料で使えますので是非チェックしてみてください!

続きを読む

RizomUV 2024.0 - UV展開専用ツールの2024年メジャーアップデ...

Rizom-LabはUV展開専用ツールの2024年メジャーアップデート「RizomUV 2024.0」をリリースしました!

続きを読む

Maya 2024 | 製品概要と購入 | Autodesk 公式

MDM: Human Motion Diffusion Model - テキストから人物モーションの生成や合成が可能な技術が登場!

この記事は約2分9秒で読めます

テキストから人物モーションの生成や合成が可能な技術「MDM: Human Motion Diffusion Model」が登場!

2022/10/07 – Githubにてコードが公開されたのでリンクを追加


プロモーション

求人情報検索 | CG・映像の専門情報サイト | CGWORLD.jp


MDM: Human Motion Diffusion Model

自然で表現力豊かな人間の動きを生成することは、コンピュータ・アニメーションの聖域である。しかし、動きには多様性があり、それに対する人間の知覚的な感度や、正確な描写の難しさから、難しい課題となっています。そのため、現在の生成ソリューションは、低品質であるか、表現力に限界がある。他の領域で既に顕著な生成能力を示している拡散モデルは、その多対多の性質から人間の運動に対する有望な候補であるが、リソースを消費し、制御が困難な傾向がある。本論文では、分類器を用いない拡散ベースの生成モデルを人体運動領域用に慎重に適応させたMotion Diffusion Model (MDM)を紹介する。MDMはモーション生成の文献からの洞察を組み合わせた変換器ベースである。注目すべきデザインチョイスは、各拡散ステップにおいて、ノイズではなく、サンプルを予測することである。これにより、足の接触損失など、運動の位置と速度に関する確立された幾何学的損失の利用が容易になる。我々が示すように、MDMは汎用的なアプローチであり、異なる条件付けのモードや、異なる生成タスクが可能である。我々は、我々のモデルが軽量なリソースで学習可能でありながら、テキストからモーション、アクションからモーションの主要なベンチマークにおいて最先端の結果を達成することを示す。

MDMフレームワークは、様々な条件付けを可能にする汎用的な設計になっている。本発表では、テキストからモーション、アクションからモーション、そして無条件生成の3つのタスクを紹介する。MDMは、多様性と忠実性をトレードオフにする分類器不要の方法で学習し、同じモデルから条件付きと無条件の両方をサンプリングすることが可能である。テキストからモーションへの変換では、HumanML3DおよびKITベンチマークにおいて最先端の結果を達成し、一貫性のあるモーションを生成することができた。また、ユーザ調査の結果、人間の評価者は42%の確率で、生成したモーションを実モーションよりも好むことがわかった。また、Action-to-Motionでは、HumanAct12とUESTCのベンチマークにおいて、MDMはこのタスクのために特別に設計されたにもかかわらず、最先端技術を上回る性能を示した。

論文のみ公開、ソースコードはComming Soonとなっております。2022年10月7日にGithubにてソースコードも公開されました。この技術がどう発展していくのか、とても楽しみです。今後レイアウトなどもテキストで指定出来るようになれば、テキストだけで3Dドラマみたいなものが作れるようになりそうですね。

リンク

Screenshot of guytevet.github.io


プロモーション


関連記事

  1. Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold - 点を動かしてポージングや形状変形&画像調整を行えるAI技術!SIGGRAPH 2023 論文

    2023-05-19

  2. Unity Kinematica - Unityに搭載される新アニメーションシステム SIGGRAPHに合わせ新映像が公開!

    2018-08-12

  3. Runway Gen-1 - テキストで指定した通りに動画のスタイルを変更可能なAIモデルが一般公開!無料お試し可能!次期モデル「Gen-2」のトレーラーも公開中!

    2023-03-28

  4. DReCon - ユービーアイソフトによるゲームでの実行を想定した深層強化学習とモーションマッチングを用いた物理ベースのアニメーション制御技術!

    2019-11-18

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR


採用 | 3DCGアーティスト&テクニカルアーティスト大募集 | 株式会社Cygames

   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る