エントリーフォーム - COYOTE 3DCG STUDIO | C&R Creative Studios

Easy Custom Normals - アニメキャラモデル制作に最適!歪んだ...

Fondant(@getfondant)による法線のスムージングツールBlenderアドオン「Easy Custom Normals」がSuperHive上で無料公開されています!

続きを読む

UberPaint - 環境アーティストの為に設計されたレイヤーベースのマテリア...

​Forest Stook氏が、環境アーティストの為に設計したレイヤーベースのマテリアルペイントBlenderアドオン「UberPaint」が登場!現在無料ダウンロードが可能です!​

続きを読む

Ancient Valley UE5 Realistic Scene Full ...

環境アーティストのDiamondDog氏によるUnreal Engine 5を使用したリアルなシーン構築チュートリアルコース『Ancient Valley UE5 Realistic Scene Full Process Tutorial』がCG&デジタルアート学習オンラインプラットフォーム「WINGFOX」にて取り扱い開始されています。

続きを読む

EDGS: Eliminating Densification for Effi...

​ミュンヘン大学の研究チームCompVisが開発した新しい3D再構築技術「EDGS(Eliminating Densification for Efficient Convergence of 3DGS)」の論文が公開されています!これまでの3DGSよりも優れた精度を実現出来るとか!

続きを読む

HoloPart - Tripoなどでお馴染みVASTのAIリサーチームと香港大...

Tripoなどでお馴染みVASTのAIリサーチームと香港大学がAIを活用したメッシュのパーツ分解技術「HoloPart」をオープンソース公開しました!

続きを読む

従量課金制の Flex で柔軟に制作 | メディア&エンターテイメント | Autodesk

DreamCraft3D: Hierarchical 3D Generation with Bootstrapped Diffusion Prior - テキストから3Dモデルを生成する技術!既存技術よりも更に高精度に!

この記事は約2分10秒で読めます

清華大学やDeepSeek AIなどの研究者たちによる、より高精度なText-to-3Dモデル『DreamCraft3D: Hierarchical 3D Generation with Bootstrapped Diffusion Prior』が公開されています。


プロモーション

CGWORLD vol.321(2025年5月号)、「セガのゲームで学ぶ3DCGの基礎」特集号を先行告知!


DreamCraft3D: Hierarchical 3D Generation with Bootstrapped Diffusion Prior

我々はDreamCraft3Dを発表する。これは、高忠実度で首尾一貫した3Dオブジェクトを生成する階層的3Dコンテンツ生成手法である。我々は、ジオメトリ・スカルプティングとテクスチャ・ブーストの段階をガイドするために、2D参照画像を活用することによってこの問題に取り組む。本研究の中心的な焦点は、既存の研究が遭遇している一貫性の問題に対処することである。首尾一貫してレンダリングされるジオメトリをスカルプトするために、ビュー依存の拡散モデルを介してスコア蒸留サンプリングを実行する。この3D事前処理は、いくつかの学習戦略とともに、ジオメトリの一貫性を優先させるが、テクスチャの忠実性は妥協する。さらに、テクスチャに特化したBootstrapped Score Distillation(BSD)を提案する。我々は、最適化されるシーンの3D知識を付与するために、シーンの拡張レンダリング上でパーソナライズされた拡散モデルであるDreamboothを訓練する。この3Dを意識した拡散事前処理からのスコア抽出は、シーンのビューに一貫したガイダンスを提供する。注目すべきは、拡散事前予測と3Dシーン表現を交互に最適化することで、相互に補強し合う改善を達成していることです。最適化された3Dシーンは、シーン固有の拡散モデルの学習を助け、3D最適化のためのビューコンシステントなガイダンスをますます提供します。最適化はこのようにブートストラップされ、実質的なテクスチャブーストにつながる。DreamCraft3Dは、階層的生成の全体を通して調整された3Dプリオールにより、フォトリアリスティックなレンダリングで首尾一貫した3Dオブジェクトを生成し、3Dコンテンツの最先端を進めます。

DreamCraft3Dは、テキストプロンプトから生成された2D画像を利用して、ジオメトリのスカルプトとテクスチャブーストの段階をガイドします。ジオメトリをスカルプトする際、ビュー条件付き拡散モデルは、ジオメトリの一貫性を確保するために重要な3Dガイダンスを提供します。その後、周期的最適化を行うことで、テクスチャの品質を向上させます。マルチビューレンダリングを補強し、それを使って拡散モデルDreamBoothを微調整し、シーンを最適化するためにマルチビューで一貫性のあるグラデーションを提供します。進化する拡散事前分布から蒸留する損失を、bootstrapped distillation samplingと呼ぶ。

まずは高品質の2D参照画像を生成し、その後3Dに変換するという段階的な手法を採用。
いやぁこの分野の技術発展がすごいぞ…
まだ完璧では無いものの、用途次第では現時点でも使い所がありそうなクオリティです。
既に論文やGithubページも公開済みのようです。
その他詳細はプロジェクトページをご確認ください。

リンク

Screenshot of mrtornado24.github.io

プロモーション


関連記事

  1. ProlificDreamer: High-Fidelity and Diverse Text-to-3D Generation with Variational Score Distillation - テキストから高精度なテクスチャ付き3DメッシュやNeRFを生成可能な技術!

    2023-05-27

  2. DeepMotion Neuron - AIを使ったキャラクターモーション生成ツール!2018年第4四半期にリリース予定!

    2018-08-09

  3. Chimera Painter - GoogleがGANを使用したクリーチャー生成のアプローチとペイントツールをWeb上で公開

    2020-11-19

  4. MeshPad: Interactive Sketch Conditioned Artistic-designed Mesh Generation and Editing - スケッチ入力をベースに忠実性の高い3Dメッシュを生成する技術!

    2025-03-12

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR


採用 | 3DCGアーティスト&テクニカルアーティスト大募集 | 株式会社Cygames

   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る