エントリーフォーム - COYOTE 3DCG STUDIO | C&R Creative Studios

マーモット v1.0 - CGクリエイターのばなないんこ氏によるマーモットのBl...

CGクリエイターのばないんこ氏(@pochita08249022)が、マーモットのBlender用モデルデータをBOOTH上で無償公開しています!

続きを読む

TripoSG&TripoSF are now OPEN-SOURCED - T...

TripoサービスでおなじみVAST社のAI Researchチームによる3D生成系AI技術2つ「TripoSG」と「TripoSF」が予告通りオープンソース化し公開されました!

続きを読む

Runway Gen-4 - 高品質な動画生成AIの新モデルが発表!一貫性のある...

各種AI活用サービスを展開するRunwayからテキストや画像から高品質な動画を生成出来るモデルの新バージョン「Gen-4」が発表されました!一貫性のあるキャラクター、ロケーション、オブジェクトを正確に生成可能になり作品づくりがしやすくなるとか。

続きを読む

Feat2GS: Probing Visual Foundation Model...

Yue Chen氏、Xingyu Chen氏、Anpei Chen氏、Gerard Pons-Moll氏、Yuliang Xiu氏らによる、CVPR 2025技術論文「Feat2GS: Probing Visual Foundation Models with Gaussian Splatting」の紹介。

続きを読む

月刊「CGWORLD」のオトクな定期購読プランが刷新!3冊分以上お得な年額プラン...

CGWORLDさんの定期購読プランが刷新!年間購読でお得になるみたいですよ!それに登録者は過去セミナー動画200以上が見放題になる「CGWORLD アーカイブ」付きです!

続きを読む

従量課金制の Flex で柔軟に制作 | メディア&エンターテイメント | Autodesk

DreamCraft3D: Hierarchical 3D Generation with Bootstrapped Diffusion Prior - テキストから3Dモデルを生成する技術!既存技術よりも更に高精度に!

この記事は約2分10秒で読めます

清華大学やDeepSeek AIなどの研究者たちによる、より高精度なText-to-3Dモデル『DreamCraft3D: Hierarchical 3D Generation with Bootstrapped Diffusion Prior』が公開されています。


プロモーション

CGWORLD vol.321(2025年5月号)、「セガのゲームで学ぶ3DCGの基礎」特集号を先行告知!


DreamCraft3D: Hierarchical 3D Generation with Bootstrapped Diffusion Prior

我々はDreamCraft3Dを発表する。これは、高忠実度で首尾一貫した3Dオブジェクトを生成する階層的3Dコンテンツ生成手法である。我々は、ジオメトリ・スカルプティングとテクスチャ・ブーストの段階をガイドするために、2D参照画像を活用することによってこの問題に取り組む。本研究の中心的な焦点は、既存の研究が遭遇している一貫性の問題に対処することである。首尾一貫してレンダリングされるジオメトリをスカルプトするために、ビュー依存の拡散モデルを介してスコア蒸留サンプリングを実行する。この3D事前処理は、いくつかの学習戦略とともに、ジオメトリの一貫性を優先させるが、テクスチャの忠実性は妥協する。さらに、テクスチャに特化したBootstrapped Score Distillation(BSD)を提案する。我々は、最適化されるシーンの3D知識を付与するために、シーンの拡張レンダリング上でパーソナライズされた拡散モデルであるDreamboothを訓練する。この3Dを意識した拡散事前処理からのスコア抽出は、シーンのビューに一貫したガイダンスを提供する。注目すべきは、拡散事前予測と3Dシーン表現を交互に最適化することで、相互に補強し合う改善を達成していることです。最適化された3Dシーンは、シーン固有の拡散モデルの学習を助け、3D最適化のためのビューコンシステントなガイダンスをますます提供します。最適化はこのようにブートストラップされ、実質的なテクスチャブーストにつながる。DreamCraft3Dは、階層的生成の全体を通して調整された3Dプリオールにより、フォトリアリスティックなレンダリングで首尾一貫した3Dオブジェクトを生成し、3Dコンテンツの最先端を進めます。

DreamCraft3Dは、テキストプロンプトから生成された2D画像を利用して、ジオメトリのスカルプトとテクスチャブーストの段階をガイドします。ジオメトリをスカルプトする際、ビュー条件付き拡散モデルは、ジオメトリの一貫性を確保するために重要な3Dガイダンスを提供します。その後、周期的最適化を行うことで、テクスチャの品質を向上させます。マルチビューレンダリングを補強し、それを使って拡散モデルDreamBoothを微調整し、シーンを最適化するためにマルチビューで一貫性のあるグラデーションを提供します。進化する拡散事前分布から蒸留する損失を、bootstrapped distillation samplingと呼ぶ。

まずは高品質の2D参照画像を生成し、その後3Dに変換するという段階的な手法を採用。
いやぁこの分野の技術発展がすごいぞ…
まだ完璧では無いものの、用途次第では現時点でも使い所がありそうなクオリティです。
既に論文やGithubページも公開済みのようです。
その他詳細はプロジェクトページをご確認ください。

リンク

Screenshot of mrtornado24.github.io

プロモーション


関連記事

  1. Runway Gen-3 Alpha - テキストから高品質な動画を生成出来るモデルの新バージョン「Gen-3 Alpha」をサブスクユーザー向けに公開!

    2024-07-02

  2. The Matrix: Infinite-Horizon World Generation with Real-Time Moving Control - 16FPS 720pでリアルタイムに無限動画生成!AIパワーで無限に世界を作り上げる新技術が発表!

    2024-11-21

  3. MeshPad: Interactive Sketch Conditioned Artistic-designed Mesh Generation and Editing - スケッチ入力をベースに忠実性の高い3Dメッシュを生成する技術!

    2025-03-12

  4. Ubisoft Toronto "IK Rig" Prototype - UBIソフト トロントスタジオによるIKを活用したリグモデルのプロトタイプ映像!

    2015-06-16

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR


採用 | 3DCGアーティスト&テクニカルアーティスト大募集 | 株式会社Cygames

   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る