エントリーフォーム - COYOTE 3DCG STUDIO | C&R Creative Studios

OpenVAT v1.03 - VAT(頂点アニメーションテクスチャ)をベイクで...

sharpenedによる、Blender上で手軽にVAT(頂点アニメーションテクスチャ)をベイク出来る無料アドオン「OpenVAT」のUnreal Engine向けアセットと紹介動画が公開されました!

続きを読む

ScatterFlow - 450超のアセットパック付き!物理ベースのスキャッタ...

Apex Assetsによる物理ベースのスキャッターBlenderアドオン「Scatterflow」がリリースされました!

続きを読む

Zen Cage v1.0 - バウンディングボックスを基準に直感操作でオブジェ...

Sergey Tyapkin氏によるBlenderアドオンZenシリーズ新作「Zen Cage v1.0」がリリースされまさした!

続きを読む

DASH 2025 TRAILER - Unreal Engine 5での世界構...

PolygonflowによるUnreal Engine向けワールド構築支援プラグイン『Dash』の2025年トレーラーが公開されています!

続きを読む

Distance Field Based Reactive Grass - Un...

数多くのUE5向け動画などを配信している CodeLikeMeによる、Unreal Engineのディスタンスフィールドを活用した地面の草のリアクション解説チュートリアル動画「Distance Field Based Reactive Grass」が公開されています。

続きを読む

Autodesk Golaem 発表ウェビナー ~Mayaで群衆を自在に操る。Golaemで広がる表現力~ | イベント | Autodesk :: AREA JAPAN

DreamCraft3D: Hierarchical 3D Generation with Bootstrapped Diffusion Prior - テキストから3Dモデルを生成する技術!既存技術よりも更に高精度に!

この記事は約2分10秒で読めます

清華大学やDeepSeek AIなどの研究者たちによる、より高精度なText-to-3Dモデル『DreamCraft3D: Hierarchical 3D Generation with Bootstrapped Diffusion Prior』が公開されています。


プロモーション

Level Designer's Matrix


DreamCraft3D: Hierarchical 3D Generation with Bootstrapped Diffusion Prior

我々はDreamCraft3Dを発表する。これは、高忠実度で首尾一貫した3Dオブジェクトを生成する階層的3Dコンテンツ生成手法である。我々は、ジオメトリ・スカルプティングとテクスチャ・ブーストの段階をガイドするために、2D参照画像を活用することによってこの問題に取り組む。本研究の中心的な焦点は、既存の研究が遭遇している一貫性の問題に対処することである。首尾一貫してレンダリングされるジオメトリをスカルプトするために、ビュー依存の拡散モデルを介してスコア蒸留サンプリングを実行する。この3D事前処理は、いくつかの学習戦略とともに、ジオメトリの一貫性を優先させるが、テクスチャの忠実性は妥協する。さらに、テクスチャに特化したBootstrapped Score Distillation(BSD)を提案する。我々は、最適化されるシーンの3D知識を付与するために、シーンの拡張レンダリング上でパーソナライズされた拡散モデルであるDreamboothを訓練する。この3Dを意識した拡散事前処理からのスコア抽出は、シーンのビューに一貫したガイダンスを提供する。注目すべきは、拡散事前予測と3Dシーン表現を交互に最適化することで、相互に補強し合う改善を達成していることです。最適化された3Dシーンは、シーン固有の拡散モデルの学習を助け、3D最適化のためのビューコンシステントなガイダンスをますます提供します。最適化はこのようにブートストラップされ、実質的なテクスチャブーストにつながる。DreamCraft3Dは、階層的生成の全体を通して調整された3Dプリオールにより、フォトリアリスティックなレンダリングで首尾一貫した3Dオブジェクトを生成し、3Dコンテンツの最先端を進めます。

DreamCraft3Dは、テキストプロンプトから生成された2D画像を利用して、ジオメトリのスカルプトとテクスチャブーストの段階をガイドします。ジオメトリをスカルプトする際、ビュー条件付き拡散モデルは、ジオメトリの一貫性を確保するために重要な3Dガイダンスを提供します。その後、周期的最適化を行うことで、テクスチャの品質を向上させます。マルチビューレンダリングを補強し、それを使って拡散モデルDreamBoothを微調整し、シーンを最適化するためにマルチビューで一貫性のあるグラデーションを提供します。進化する拡散事前分布から蒸留する損失を、bootstrapped distillation samplingと呼ぶ。

まずは高品質の2D参照画像を生成し、その後3Dに変換するという段階的な手法を採用。
いやぁこの分野の技術発展がすごいぞ…
まだ完璧では無いものの、用途次第では現時点でも使い所がありそうなクオリティです。
既に論文やGithubページも公開済みのようです。
その他詳細はプロジェクトページをご確認ください。

リンク

Screenshot of mrtornado24.github.io

プロモーション


関連記事

  1. Genesis: A Generative and Universal Physics Engine for Robotics and Beyond - 汎用的なロボット工学&身体化AI&物理AIアプリケーションの為に設計された物理エンジン&シミュレーションプラットフォーム!オープンソース!

    2024-12-19

  2. QuickSplat: Fast 3D Surface Reconstruction via Learned Gaussian Initialization - 大規模な室内シーンのガウススプラッティングを最適化!AIを活用し従来の約8倍高速&最大48%高精度な3D構築技術!

    2025-05-13

  3. TripoSG&TripoSF are now OPEN-SOURCED - TripoのVAST AI Researchチームが3D生成系AI技術2つをオープンソース化し無料公開!

    2025-04-01

  4. Neural Haircut: Prior-Guided Strand-Based Hair Reconstruction - 動画や複数枚画像からStrandベースのヘアーを構築出来る技術が登場! ICCV2023技術論文!

    2023-07-20

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR

3DCG募集要項 | 株式会社Colorful Palette

採用 | 3DCGアーティスト&テクニカルアーティスト大募集 | 株式会社Cygames

   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る