3D動かさナイト モーションアクターが語る・動く・魅せる! | CREATIVE VILLAGE SEMINAR

Advanced Cars And Bikes System - 多彩な車両やA...

DevlogerioによるUnreal Engine 5向けの車両制御プラグイン「Advanced Cars And Bikes System」がFab上でリリースしました!

続きを読む

GUILTY GEAR Xrd開発スタッフが送るスキニングのためのモデリングTI...

アークシステムワークス開発陣による、キャラクターのスキニングTIPS「GUILTY GEAR Xrd開発スタッフが送るスキニングのためのモデリング」の方の動画とスライドが公開されております!

続きを読む

Morphin - iPhoneやiPadなどのiOS端末上で手軽に3Dリギング...

Ademola Adenekan氏によるによる、キャラクターのリギングやアニメーション制作ができるiOSアプリ「Morphin」のご紹介。

続きを読む

LL3M: Large Language 3D Modelers - AIでB...

シカゴ大学の研究者らによるAIでBlender内で3Dアセットを作成・編集するPythonコードを生成できるオープンソース技術「LL3M: Large Language 3D Modelers」が発表されています。

続きを読む

Free Shrubs Pack (Ultra Realistic Wind) ...

Greenleaf Visionが7周年を記念しNaniteとPivot Painter 2対応の低木メッシュアセット「Free Shrubs Pack (Ultra Realistic Wind)」をFab上で無料公開しました!

続きを読む

従量課金制の Flex で柔軟に制作 | メディア&エンターテイメント | Autodesk

Vidu4D: Single Generated Video to High-Fidelity 4D Reconstruction with Dynamic Gaussian Surfels - 単一生成動画から4D(連続3D)表現を構築する新しい再構成技術!

この記事は約2分21秒で読めます

単一生成動画から忠実性の高いDGS(Dynamic Gaussian Surfels)を生成する再構成モデル「Vidu4D: Single Generated Video to High-Fidelity 4D Reconstruction with Dynamic Gaussian Surfels」のプロジェクトページが公開されています!


プロモーション

CGWORLD vol.325(2025年9月号)8月8日(金)発売! 「セガの現在地」


Vidu4D: Single Generated Video to High-Fidelity 4D Reconstruction with Dynamic Gaussian Surfels

映像生成モデルは、リアルで想像力豊かなフレームを生成する能力から、特に注目されている。また、これらのモデルは強い3次元一貫性を示すことが観察されており、世界シミュレータとして機能する可能性を大きく高めている。この研究では、非剛性とフレーム歪みに関連する課題に対処し、単一生成動画から4D(すなわち連続3D)表現を正確に再構成することに優れた、新しい再構成モデルであるVidu4Dを紹介する。この機能は、空間的・時間的な一貫性を維持した忠実度の高いバーチャルコンテンツを作成するために極めて重要です。Vidu4Dの中核となるのは、当社が提案するDGS(Dynamic Gaussian Surfels)技術です。DGSは、時間的に変化するワーピング関数を最適化し、ガウスサーフェル(表面要素)を静的な状態から動的にワーピングされた状態に変換します。この変換により、経時的な動きや変形を正確に描写することができます。サーフェスに整列したガウスサーフェルの構造的完全性を保持するために、法線を推定するための連続ワーピング場に基づくワーピング状態の幾何学的正則化を設計する。さらに、ガウスサーフェルの回転パラメータとスケーリングパラメータの精密化を学習することで、ワーピングプロセス中のテクスチャのちらつきを大幅に緩和し、きめ細かい外観の詳細のキャプチャを強化する。また、Vidu4Dは、DGSのワーピングフィールドの適切な開始を提供する新しい初期化状態を含んでいる。Vidu4Dに既存のビデオ生成モデルを装備することで、全体的なフレームワークは、アピアランスとジオメトリの両方において、忠実度の高いテキストから4Dへの生成を実証している。

Vidu4Dって何?

Vidu4Dは、1本の動画から立体的で動きもリアルな3D映像を作る技術です。今までも動画を3Dにする方法はありましたが、動きがなめらかじゃなかったり、歪みが出たりしていました。
Vidu4Dは、この問題を解決します。この技術を使うと、動画の中の動きが正確に再現できます。例えば、動物が走る姿や、人がジャンプする動きなども自然に見えるようになります。

どんなふうに動くの?

Vidu4Dは、動画から「ガウスサーフェル」という特別な仕組みを使います。サーフェルは、表面の小さな要素みたいなものです。これをガウスサーフェルという方法でうまくつなぎ合わせて、動画の中の動きを再現します。
このガウスサーフェルは、時間の経過によって動きや変形するので、動画の中のキャラクターや物体の動きをリアルに再現できます。ちょうど、粘土細工を動かすような感じです。

より良い見た目を実現

さらに、この技術では、サーフェルの質感や回転も考慮するので、細かい見た目の変化も滑らかに表現できます。例えば、テクスチャがちらつかないようにしたり、細部まで美しく見えるように工夫されています。

とても興味深い技術ですね!これを応用したツール形が今後出てくると楽しそうです。
「Vidu4D」のプロジェクトページは公開済みですが、コード周りは間もなく公開(Code will be released soon.)とのこと。

リンク

Screenshot of vidu4d-dgs.github.io

プロモーション


関連記事

  1. Gaussian Haircut: Human Hair Reconstruction with Strand-Aligned 3D Gaussians - 3Dガウシアンデータから人間の髪型を忠実に構築するアプローチ!ECCV 2024技術論文!

    2024-09-28

  2. GaussianObject: Just Taking Four Images to Get A High-Quality 3D Object with Gaussian Splatting - 4枚の画像からGaussian Splatting技術を活用し高品質な3Dオブジェクトを生成するための技術が登場!

    2024-05-21

  3. ASH: Animatable Gaussian Splats for Efficient and Photoreal Human Rendering - リアルタイムで動的な人物のためのアニメーション対応Gaussian Splattingアプローチ!

    2024-04-28

  4. Binary Opacity Grids: Capturing Fine Geometric Detail for Mesh-Based View Synthesis - NeRFや3DGSに続く次世代シーン構築技術!メッシュベースでより細かなディテールを再現可能に!

    2024-02-26

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR

3DCG募集要項 | 株式会社Colorful Palette

採用 | 3DCGアーティスト&テクニカルアーティスト大募集 | 株式会社Cygames

   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る