COYOTE スタジオ採用説明会 | クリエイターのための総合情報サイト CREATIVE VILLAGE

mSculpt | BlenderでHD領域を選んで高精細スカルプト&Displ...

mPainterの開発者Mattias Lind氏(@mattiaslind93)が、Blender向けアドオン「mSculpt - HDgeometry sculpting for Blender…

続きを読む

Folio | HTML/CSS風の記述でゲームUIを作成!操作できる画面を3D...

Fogspireが、Unreal Engine 5向けの無料UIフレームワーク「Folio」をGitHubで公開しています。HTML/CSSに似たマークアップとスタイルシートで、メニューやHUD、ゲ…

続きを読む

Blender 5.3 | 3D Gaussian Splattingに標準対応...

Blender Foundationと開発コミュニティは、2026年11月10日、無料&オープンソースの3DCGソフト「Blender 5.3」を正式リリースしました!

続きを読む

HairDeck: Animation-Ready Stylized Hair ...

清華大学のYuze He氏・Yixiang Wei氏ら&カーネギーメロン大学・香港中文大学の研究チームが、1枚の画像からスタイライズされた3Dヘアを生成する技術「HairDeck」を公開しています。

続きを読む

HairHarpy v2.0.0 | カーブによるメッシュ生成やUV展開&リトポ...

3DキャラクターアーティストのCataRackta氏( @CataRackta )が、スタイライズされた髪型を制作するソフト「HairHarpy v2.0.0」を無料公開しました。

続きを読む

PanoHead: Geometry-Aware 3D Full-Head Synthesis in 360° - 1枚の写真から3D頭部を構築出来る生成技術が登場!CVPR 2023論文!

この記事は約1分58秒で読めます

ウィスコンシン大学マディソン校、ByteDance社による、1枚の写真から3D頭部を構築する技術『PanoHead: Geometry-Aware 3D Full-Head Synthesis in 360°』が公開されました。

PanoHead: Geometry-Aware 3D Full-Head Synthesis in 360°

近年、コンピュータビジョンやコンピュータグラフィックスにおいて、3次元人体頭部の合成と再構成に対する関心が高まっている。既存の3D人間の頭部合成のための最先端の3D生成的敵対ネットワーク(GAN)は、近正面ビューに限定されるか、大きな視野角で3Dの一貫性を保持することが困難である。我々はPanoHeadを提案する。PanoHeadは、多様な外見と詳細な形状を持つ、360°全頭の高品質なビューコンシステント画像合成を可能にする、初の3D認識生成モデルである。その中核は、最近の3次元GANの表現力を引き上げ、広範囲に分散したビューを持つin-the-wild画像から学習する際のデータ整列ギャップを埋めることである。具体的には、ロバストな3次元GAN学習のための、新しい2段階の自己適応的画像アライメントを提案する。さらに、広く採用されている三平面の定式化に根ざした、正面と後頭部の特徴のもつれに効果的に対処する三格子神経ボリューム表現を導入する。本手法は、3Dニューラルシーン構造の敵対的学習に2D画像セグメンテーションの事前知識を組み込むことで、多様な背景における合成可能な頭部合成を可能にする。これらの設計の恩恵により、本手法は従来の3D GANを大幅に凌駕し、正確なジオメトリと多様なアピアランスを持つ高品質な3D頭部を生成する。さらに、本システムは、パーソナライズされたリアルな3Dアバターのために、単一の入力画像から完全な3D頭部を再構成できることを示す。

解説動画

3D出力例

その他Tweet

いやぁ凄い事になってますよ。
ドウェイン・ジョンソン氏の写真を使った例は、少し横や後頭部に違和感がありますが、今後写真が数枚あれば、ほぼ完全再現みたいなのも出来そうですよね。
Colab環境も公開されておりますので、手軽にお試しも出来そうです。是非チェックしてみてください!

リンク

Screenshot of sizhean.github.io
Screenshot of arxiv.org
Screenshot of github.com

Screenshot of github.com

PR

関連記事

  1. Glimnote Early Access - ゲームやエンタメ制作者向けに世界観や設定を制作可能なAIツール!早期アクセス開始!日本語&英語対応!

    2024-04-09

  2. Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold - 点を動かしてポージングや形状変形&画像調整を行えるAI技術!SIGGRAPH 2023 論文

    2023-05-19

  3. Seeing the World through Your Eyes - 瞳に反射した画像を元に3Dシーンを復元する技術!

    2023-06-18

  4. AI Can Now Fix Your Grainy Photos - NVIDIAによるディープラーニングを用いたノイズ除去技術

    2018-07-12

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!
※当サイトのリンクにはアフィリエイトを含みます

※当サイトの一部記事にはアフィリエイトが含まれております。

スポンサープロダクト


X-Ray Realtime Light and TexturingTool

CGElementaryに関する記事一覧


Character Creator - アニメーション、ゲーム、AR/VR のための 3D キャラメイクソフト

Reallusionに関する記事一覧


Paintstorm Studio

Paintstorm Studioに関する記事一覧


MarvelousDesigner

MarvelousDesignerに関する記事一覧


JangaFX - Real-Time VFX Software For Real-Time VFX Artists

JangaFXに関する記事一覧


パルミーの講座が見放題!月謝制お申し込み|お絵かき講座パルミー

Palmieに関する記事一覧


AAA Character Creation: The Boxing Bunny

WINGFOXに関する記事一覧


アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR






Donate

   
USD
3D人のLINEアカウントを作りました!
友だち追加




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る