COYOTE スタジオ採用説明会 | クリエイターのための総合情報サイト CREATIVE VILLAGE

HairDeck: Animation-Ready Stylized Hair ...

清華大学のYuze He氏・Yixiang Wei氏ら&カーネギーメロン大学・香港中文大学の研究チームが、1枚の画像からスタイライズされた3Dヘアを生成する技術「HairDeck」を公開しています。

続きを読む

HairHarpy v2.0.0 | カーブによるメッシュ生成やUV展開&リトポ...

3DキャラクターアーティストのCataRackta氏( @CataRackta )が、スタイライズされた髪型を制作するソフト「HairHarpy v2.0.0」を無料公開しました。

続きを読む

Talk風Live翻訳 1.0 | PCの英語音声をやさしい日本語のチャットに!...

エンジニア上がりの元ゲーム会社ディレクターStudioYebisu氏( @studio_yebisu )が、PCで再生中の英語音声を日本語に翻訳するWindows向けアプリ「Talk風Live翻訳 1.0.0」を公開しました。

続きを読む

Floaters - The BIGGEST 3D Modeling Cheat...

Blender BrosのJosh氏による、Blenderでフローターを使ったディテール追加の方法を解説するチュートリアル動画「Floaters - The BIGGEST 3D Modeling Cheat Code」をご紹介!

続きを読む

SculptForge | ZBrushライクなUIが印象的!スカルプトからリト...

islandmed氏らが開発する、無料&オープンソースの3Dスカルプトソフト「SculptForge」をご紹介!

続きを読む

Pixal3D | 入力画像に対してピクセル単位でより忠実な3Dモデルを生成可能なImage-to-3D技術!オープンソース!SIGGRAPH 2026 論文!

この記事は約2分44秒で読めます

Tsinghua University、Tencent ARC Lab、Victoria University of Wellingtonの共同研究チームによる「Pixal3D」が公開!入力画像に対して“ピクセル単位で忠実”な3Dモデル生成を目指したImage-to-3D技術!

Pixal3D | Pixel-Aligned 3D Generation from Images

Pixal3Dは、単一の画像から高精細な3Dアセットを生成します。アテンションを用いて画像の特徴を大まかに取り込む従来の手法とは異なり、Pixal3Dはバックプロジェクションを通じてピクセルの特徴を明示的に3D空間へ変換し、ピクセルと3D空間の直接的な対応関係を確立します。これにより、詳細な形状とPBRテクスチャを備えた、再構築レベルに近い精細さを実現します。

  • 入力画像の視点に合わせた「Pixel-Aligned」方式で3D生成
  • ピクセル情報を3D空間へ逆投影するBack-Projection技術
  • 2D画像と3D形状の対応関係を明示的に構築
  • 従来手法より高い入力画像への忠実度を実現
  • 再構築系に近い高精細な形状生成
  • 高品質なPBRテクスチャ生成に対応
  • 見えていない部分を自然に補完可能
  • マルチビュー入力による3D生成に対応
  • オブジェクト分離されたシーン生成が可能
  • Trellis.2ベースの改良版実装を公開済み

3D生成モデルにおける最近の進歩により、画像から3Dへの合成品質は急速に向上し、より高解像度の形状やよりリアルな外観が可能になりました。しかし、生成された3Dアセットが入力画像に対してピクセルレベルでどれほど忠実であるかを測る「フィデリティ」は、依然として主要なボトルネックとなっています。我々は、この問題が暗黙的な2D-3D対応関係に起因すると考える。ほとんどの3Dネイティブ生成モデルは、標準空間で形状を合成し、アテンションを介して画像の手がかりを注入するため、ピクセルと3Dの関連付けが曖昧なままになっている。この問題に対処するため、我々は3D再構成の手法に着想を得て、画像から高忠実度の3Dアセットを生成するためのピクセルアラインメント型3D生成パラダイム「Pixal3D」を提案する。Pixal3Dは、標準的なポーズで生成するのではなく、入力ビューと整合したピクセルアラインメント方式で3Dを直接生成する。これを実現するため、我々はピクセルバックプロジェクション条件付けスキームを導入し、マルチスケールの画像特徴を明示的に3D特徴ボリュームへと昇格させることで、曖昧さのない直接的なピクセルと3Dの対応関係を確立する。我々は、Pixal3Dがスケーラブルで高品質な3Dアセットを生成できるだけでなく、忠実度を大幅に向上させ、再構成と同等の忠実度レベルに近づけることを示す。さらに、Pixal3Dは、各ビューにわたるバックプロジェクションされた特徴ボリュームを集約することで、マルチビュー生成へと自然に拡張可能である。最後に、ピクセルアラインメント生成がシーン合成に有益であることを示し、画像から高忠実度のオブジェクト分離済み3Dシーンを生成するモジュール式パイプラインを提示する。

従来のなんとなく似ている結果から一歩進んだ感じですね!Image-to-3Dは次の段階になる?
現在「Pixal3D」は論文、コード、デモがすべて公開されており、フィードバックを受け付けている状態です!
是非チェックしてみてください!

リンク

Screenshot of ldyang694.github.io
Screenshot of huggingface.co
Screenshot of github.com
Screenshot of arxiv.org

PR

関連記事

  1. DreamFusion: Text-to-3D using 2D Diffusion - テキストプロンプトから3次元モデル(NeRF:Neural Radiance Field)を生成できる技術が登場!

    2022-09-30

  2. AI Can Now Fix Your Grainy Photos - NVIDIAによるディープラーニングを用いたノイズ除去技術

    2018-07-12

  3. Unique3D: High-Quality and Efficient 3D Mesh Generation from a Single Image - 1枚の画像から3Dメッシュを生成するフレームワーク!オープンソース公開!オンライン上で動かすデモもあるよ!

    2024-07-06

  4. PrimitiveAnything - Tencentが単純な3Dプリミティブ形状の組み合わせでオブジェクトを生成する技術をオープンソース公開!SIGGRAPH 2025

    2025-05-12

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!
※当サイトのリンクにはアフィリエイトを含みます

※当サイトの一部記事にはアフィリエイトが含まれております。

スポンサープロダクト


X-Ray Realtime Light and TexturingTool

CGElementaryに関する記事一覧


Character Creator - アニメーション、ゲーム、AR/VR のための 3D キャラメイクソフト

Reallusionに関する記事一覧


Paintstorm Studio

Paintstorm Studioに関する記事一覧


MarvelousDesigner

MarvelousDesignerに関する記事一覧


JangaFX - Real-Time VFX Software For Real-Time VFX Artists

JangaFXに関する記事一覧


パルミーの講座が見放題!月謝制お申し込み|お絵かき講座パルミー

Palmieに関する記事一覧


AAA Character Creation: The Boxing Bunny

WINGFOXに関する記事一覧


アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR






Donate

   
USD
3D人のLINEアカウントを作りました!
友だち追加




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る