Houdini 21 新機能を徹底解説!各種新機能や ML などで広がるゲーム開発の未来 #ポリゴンナイト | CREATIVE VILLAGE SEMINAR

ND v2.0 - 多彩な機能を備えた非破壊ハードサーフェスモデリングツールキッ...

HugeMenace氏による多彩な機能を備えた非破壊ハードサーフェスモデリングツールキットBlenderアドオン「ND」の最新メジャーアップデート「ND v2.0」がリリースされました!

続きを読む

Rig Aling - Effortless Character Attire ...

MeiU氏によるキャラクターのボーンと体型の違う衣装やアクセサリーのボーンをワンクリック位置合わせが出来るBlnederアドオン「Rig Aling」がリリースされました!!

続きを読む

ZDepth Plugin 2.0 for ZBrush - 1枚の画像から深度...

3DキャラクターアーティストでZBrushのツール開発なども手掛けるTon Thien Hai氏(ZM Polygon)による、1枚の画像から深度情報などを生成し凹凸ディテールを追加出来るZBrushむけプラグインの最新メジャーアップデート「ZDepth Plugin 2.0 for ZBrush」が公開されています!

続きを読む

Little Werewolf : Blender+Houdini Simple...

holy_x氏によるBlender&Houdiniを使用したカートゥーンキャラクター制作解説コース『Simple Character Transformation Animation Tutorial: Little Werewolf (Blender + Houdini)』がCG&デジタルアート関連チュートリアルサービス-Wingfoxにて取り扱い開始!

続きを読む

Rebelle 8 - よりリアルな質感のブラシを搭載!アナログ感を売りとしたペ...

Escape Motionsによるアナログ感を売りとしたリアル志向のペイントソフトの最新メジャーアップデート「Rebelle 8」がリリースされました!

続きを読む

Autodesk Flow Studio ソフトウェア | Autodesk Flow Studio 2025 の価格と購入 | Autodesk

Vidu4D: Single Generated Video to High-Fidelity 4D Reconstruction with Dynamic Gaussian Surfels - 単一生成動画から4D(連続3D)表現を構築する新しい再構成技術!

この記事は約2分21秒で読めます

単一生成動画から忠実性の高いDGS(Dynamic Gaussian Surfels)を生成する再構成モデル「Vidu4D: Single Generated Video to High-Fidelity 4D Reconstruction with Dynamic Gaussian Surfels」のプロジェクトページが公開されています!

Vidu4D: Single Generated Video to High-Fidelity 4D Reconstruction with Dynamic Gaussian Surfels

映像生成モデルは、リアルで想像力豊かなフレームを生成する能力から、特に注目されている。また、これらのモデルは強い3次元一貫性を示すことが観察されており、世界シミュレータとして機能する可能性を大きく高めている。この研究では、非剛性とフレーム歪みに関連する課題に対処し、単一生成動画から4D(すなわち連続3D)表現を正確に再構成することに優れた、新しい再構成モデルであるVidu4Dを紹介する。この機能は、空間的・時間的な一貫性を維持した忠実度の高いバーチャルコンテンツを作成するために極めて重要です。Vidu4Dの中核となるのは、当社が提案するDGS(Dynamic Gaussian Surfels)技術です。DGSは、時間的に変化するワーピング関数を最適化し、ガウスサーフェル(表面要素)を静的な状態から動的にワーピングされた状態に変換します。この変換により、経時的な動きや変形を正確に描写することができます。サーフェスに整列したガウスサーフェルの構造的完全性を保持するために、法線を推定するための連続ワーピング場に基づくワーピング状態の幾何学的正則化を設計する。さらに、ガウスサーフェルの回転パラメータとスケーリングパラメータの精密化を学習することで、ワーピングプロセス中のテクスチャのちらつきを大幅に緩和し、きめ細かい外観の詳細のキャプチャを強化する。また、Vidu4Dは、DGSのワーピングフィールドの適切な開始を提供する新しい初期化状態を含んでいる。Vidu4Dに既存のビデオ生成モデルを装備することで、全体的なフレームワークは、アピアランスとジオメトリの両方において、忠実度の高いテキストから4Dへの生成を実証している。

Vidu4Dって何?

Vidu4Dは、1本の動画から立体的で動きもリアルな3D映像を作る技術です。今までも動画を3Dにする方法はありましたが、動きがなめらかじゃなかったり、歪みが出たりしていました。
Vidu4Dは、この問題を解決します。この技術を使うと、動画の中の動きが正確に再現できます。例えば、動物が走る姿や、人がジャンプする動きなども自然に見えるようになります。

どんなふうに動くの?

Vidu4Dは、動画から「ガウスサーフェル」という特別な仕組みを使います。サーフェルは、表面の小さな要素みたいなものです。これをガウスサーフェルという方法でうまくつなぎ合わせて、動画の中の動きを再現します。
このガウスサーフェルは、時間の経過によって動きや変形するので、動画の中のキャラクターや物体の動きをリアルに再現できます。ちょうど、粘土細工を動かすような感じです。

より良い見た目を実現

さらに、この技術では、サーフェルの質感や回転も考慮するので、細かい見た目の変化も滑らかに表現できます。例えば、テクスチャがちらつかないようにしたり、細部まで美しく見えるように工夫されています。

とても興味深い技術ですね!これを応用したツール形が今後出てくると楽しそうです。
「Vidu4D」のプロジェクトページは公開済みですが、コード周りは間もなく公開(Code will be released soon.)とのこと。

リンク

Screenshot of vidu4d-dgs.github.io

プロモーション


関連記事

  1. Feat2GS: Probing Visual Foundation Models with Gaussian Splatting - カジュアルな画像からAIがどこまで3D形状とテクスチャを理解できるかをGaussian Splattingで検証する評価手法!

    2025-04-01

  2. ASH: Animatable Gaussian Splats for Efficient and Photoreal Human Rendering - リアルタイムで動的な人物のためのアニメーション対応Gaussian Splattingアプローチ!

    2024-04-28

  3. GaussianObject: Just Taking Four Images to Get A High-Quality 3D Object with Gaussian Splatting - 4枚の画像からGaussian Splatting技術を活用し高品質な3Dオブジェクトを生成するための技術が登場!

    2024-05-21

  4. Gaussian Haircut: Human Hair Reconstruction with Strand-Aligned 3D Gaussians - 3Dガウシアンデータから人間の髪型を忠実に構築するアプローチ!ECCV 2024技術論文!

    2024-09-28

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR






   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る