3D動かさナイト モーションアクターが語る・動く・魅せる! | CREATIVE VILLAGE SEMINAR

CGWORLD27周年記念 特大プレゼント企画 - アンケートに答えて豪華プレゼ...

CGWORLDが27周年記念の特大プレゼント企画を実施中!「CGWORLD27周年記念 特大プレゼント企画」の応募締切は2025年8月8日(金)のAM10:00までです!

続きを読む

Planetary Gear Generator for Blender v1....

kame404( @kame404 )氏が「遊星歯車(プラネタリーギア)」メッシュを生成できる無料のBlenderアドオン「Planetary Gear Generator for Blender v1.0」をGithub上で公開しました!

続きを読む

MOVIN - 単一のLiDAR&RGBカメラを搭載したデバイスでマーカー&スー...

単一のLiDAR&RGBカメラを搭載したデバイスでマーカー&スーツ不要モーションキャプチャが可能なソリューション「MOVIN(ムービン)」が2025年8月1日に提供開始されました!

続きを読む

PivotPainter2 for Maya - テクニカルアーティストの神崎 ...

テクニカルアーティストの神崎 建三 氏が、Maya向けのPivotPainter2ベイクスクリプトを開発!「PivotPainter2 for Maya」を近日OSSとして公開する事を発表しました!

続きを読む

OptiPloy - リンク&アペンドの欠点を解消!リグ付きモデルを軽量かつベス...

hisanimationsによるリンク&アペンドの欠点を解消した状態でリグモデルをインポートできるBlenderアドオン「OptiPloy」のご紹介!

続きを読む

従量課金制の Flex で柔軟に制作 | メディア&エンターテイメント | Autodesk

Vidu4D: Single Generated Video to High-Fidelity 4D Reconstruction with Dynamic Gaussian Surfels - 単一生成動画から4D(連続3D)表現を構築する新しい再構成技術!

この記事は約2分21秒で読めます

単一生成動画から忠実性の高いDGS(Dynamic Gaussian Surfels)を生成する再構成モデル「Vidu4D: Single Generated Video to High-Fidelity 4D Reconstruction with Dynamic Gaussian Surfels」のプロジェクトページが公開されています!


プロモーション

CGWORLD vol.325(2025年9月号)8月8日(金)発売! 「セガの現在地」


Vidu4D: Single Generated Video to High-Fidelity 4D Reconstruction with Dynamic Gaussian Surfels

映像生成モデルは、リアルで想像力豊かなフレームを生成する能力から、特に注目されている。また、これらのモデルは強い3次元一貫性を示すことが観察されており、世界シミュレータとして機能する可能性を大きく高めている。この研究では、非剛性とフレーム歪みに関連する課題に対処し、単一生成動画から4D(すなわち連続3D)表現を正確に再構成することに優れた、新しい再構成モデルであるVidu4Dを紹介する。この機能は、空間的・時間的な一貫性を維持した忠実度の高いバーチャルコンテンツを作成するために極めて重要です。Vidu4Dの中核となるのは、当社が提案するDGS(Dynamic Gaussian Surfels)技術です。DGSは、時間的に変化するワーピング関数を最適化し、ガウスサーフェル(表面要素)を静的な状態から動的にワーピングされた状態に変換します。この変換により、経時的な動きや変形を正確に描写することができます。サーフェスに整列したガウスサーフェルの構造的完全性を保持するために、法線を推定するための連続ワーピング場に基づくワーピング状態の幾何学的正則化を設計する。さらに、ガウスサーフェルの回転パラメータとスケーリングパラメータの精密化を学習することで、ワーピングプロセス中のテクスチャのちらつきを大幅に緩和し、きめ細かい外観の詳細のキャプチャを強化する。また、Vidu4Dは、DGSのワーピングフィールドの適切な開始を提供する新しい初期化状態を含んでいる。Vidu4Dに既存のビデオ生成モデルを装備することで、全体的なフレームワークは、アピアランスとジオメトリの両方において、忠実度の高いテキストから4Dへの生成を実証している。

Vidu4Dって何?

Vidu4Dは、1本の動画から立体的で動きもリアルな3D映像を作る技術です。今までも動画を3Dにする方法はありましたが、動きがなめらかじゃなかったり、歪みが出たりしていました。
Vidu4Dは、この問題を解決します。この技術を使うと、動画の中の動きが正確に再現できます。例えば、動物が走る姿や、人がジャンプする動きなども自然に見えるようになります。

どんなふうに動くの?

Vidu4Dは、動画から「ガウスサーフェル」という特別な仕組みを使います。サーフェルは、表面の小さな要素みたいなものです。これをガウスサーフェルという方法でうまくつなぎ合わせて、動画の中の動きを再現します。
このガウスサーフェルは、時間の経過によって動きや変形するので、動画の中のキャラクターや物体の動きをリアルに再現できます。ちょうど、粘土細工を動かすような感じです。

より良い見た目を実現

さらに、この技術では、サーフェルの質感や回転も考慮するので、細かい見た目の変化も滑らかに表現できます。例えば、テクスチャがちらつかないようにしたり、細部まで美しく見えるように工夫されています。

とても興味深い技術ですね!これを応用したツール形が今後出てくると楽しそうです。
「Vidu4D」のプロジェクトページは公開済みですが、コード周りは間もなく公開(Code will be released soon.)とのこと。

リンク

Screenshot of vidu4d-dgs.github.io

プロモーション


関連記事

  1. Feat2GS: Probing Visual Foundation Models with Gaussian Splatting - カジュアルな画像からAIがどこまで3D形状とテクスチャを理解できるかをGaussian Splattingで検証する評価手法!

    2025-04-01

  2. QuickSplat: Fast 3D Surface Reconstruction via Learned Gaussian Initialization - 大規模な室内シーンのガウススプラッティングを最適化!AIを活用し従来の約8倍高速&最大48%高精度な3D構築技術!

    2025-05-13

  3. GaussianObject: Just Taking Four Images to Get A High-Quality 3D Object with Gaussian Splatting - 4枚の画像からGaussian Splatting技術を活用し高品質な3Dオブジェクトを生成するための技術が登場!

    2024-05-21

  4. GAF: Gaussian Avatar Reconstruction from Monocular Videos via Multi-view Diffusion - スマホなどで撮影された単眼映像から高精度なアニメーション付きの頭部3D Gaussian Splattingを生成する技術!

    2024-12-18

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR

3DCG募集要項 | 株式会社Colorful Palette

採用 | 3DCGアーティスト&テクニカルアーティスト大募集 | 株式会社Cygames

   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る