3D動かさナイト モーションアクターが語る・動く・魅せる! | CREATIVE VILLAGE SEMINAR

LiquiGen 1.0 - JangaFXによるリアルタイム流体シミュレーショ...

多彩なエフェクトツールを開発&販売しているJangaFXによる軽量かつリアルな流体が作れることでお馴染みの流体シミュレーションソフト「LiquiGen 1.0」が正式リリースされました!

続きを読む

IlluGen 1.0 - JangaFXからノードベースのリアルタイムエフェク...

多彩なエフェクトツールを開発&販売しているJangaFXがノードベースのリアルタイムエフェクト&マテリアル素材作成ツール「IlluGen 1.0」をリリースしました!

続きを読む

Graphite - レイヤー方式とノードベース処理を融合!非破壊&プロシージャ...

レイヤー方式とノードベース処理を融合し、非破壊でプロシージャルな編集を可能にする 無料・オープンソースの2Dグラフィックエディタ「Graphite」のご紹介。

続きを読む

Rumba 2.0 - 非商用なら無料でフル機能が使える!直感操作のリグ制御が特...

レンダラーGuerilla Render なども手掛けるMercenaries Engineeringによる3Dアニメーション制作ソフトのメジャーアップデート「Rumba 2.0」がリリースされました!

続きを読む

Hand Shadow Poser - 多彩な形状に対応した手影絵のハンドポーズ...

CUHK、UCL、Adobe Research、UESTCの研究者らによる、指定したシェイプに対して適切な手影用ハンドポーズを提示してくれる技術「Hand Shadow Poser」のご紹介。SIGGRAPH 2025発表技術論文です。

続きを読む

従量課金制の Flex で柔軟に制作 | メディア&エンターテイメント | Autodesk

GAF: Gaussian Avatar Reconstruction from Monocular Videos via Multi-view Diffusion - スマホなどで撮影された単眼映像から高精度なアニメーション付きの頭部3D Gaussian Splattingを生成する技術!

この記事は約1分32秒で読めます

ミュンヘン工科大学、トヨタ モーター ヨーロッパ、ウーブン・バイ・トヨタの研究者らによる、スマホなどで撮影された単眼映像から高精度なアニメーション付きの頭部3D Gaussian Splattingを生成する技術「GAF」が発表されていました。


プロモーション

CGWORLD vol.324(2025年8月号)7月10日(木)発売! 「オレンジの挑戦と進化 『リヴァイアサン』と『BEASTARS』で描く未来」


GAF: Gaussian Avatar Reconstruction from Monocular Videos via Multi-view Diffusion

我々は、スマートフォンのような汎用デバイスで撮影された単眼動画から、アニメーション可能な3Dガウスアバターを再構成するための新しいアプローチを提案する。 このような録画映像からフォトリアリスティックな3D頭部アバターを再構成することは、限られた観測のため困難であり、未観測の領域が制約を受けずに残り、新しいビューでアーチファクトを引き起こす可能性がある。 この問題に対処するため、我々はマルチビュー頭部拡散モデルを導入し、その事前分布を活用して、欠損領域を埋め、ガウススプラッティングレンダリングにおけるビューの一貫性を確保する。 正確な視点制御を可能にするために、FLAMEベースの頭部再構成からレンダリングされた法線マップを使用し、ピクセル整列された誘導バイアスを提供する。 また、入力画像から抽出されたVAE特徴に拡散モデルを条件付けし、顔のアイデンティティと外観の詳細を保持する。 ガウシアンアバター再構成のために、反復的にノイズ除去された画像を擬似的な基底真理として使用することで、マルチビュー拡散プリオアを抽出し、過飽和の問題を効果的に緩和する。 フォトリアリズムをさらに改善するために、画像にデコードする前に、潜在的なアップサンプリングを適用して、ノイズ除去された潜在的な情報を洗練する。 本手法をNeRSembleデータセットで評価し、GAFが、新規ビュー合成と新規表情アニメーションにおいて、従来の最先端手法を凌駕することを示す。 さらに、汎用デバイスで撮影された単眼動画から、より忠実なアバター再構成を実証する。

中々の精度ですごいですね!この手の技術は今後もまだまだ発展していきそうですよね。実用化されるのが楽しみです。
現在「GAF」は論文のみ公開されており、Githubページは存在しますがコードは非公開です。
詳細に関してはプロジェクトページをご確認ください。

リンク

Screenshot of tangjiapeng.github.io

プロモーション


関連記事

  1. 4D Gaussian Splatting for Real-Time Dynamic Scene Rendering - 動的な3Dガウス・スプラッティングシーン学習&軽量にリアルタイム再生する技術!

    2023-11-06

  2. GaussianObject: Just Taking Four Images to Get A High-Quality 3D Object with Gaussian Splatting - 4枚の画像からGaussian Splatting技術を活用し高品質な3Dオブジェクトを生成するための技術が登場!

    2024-05-21

  3. Vidu4D: Single Generated Video to High-Fidelity 4D Reconstruction with Dynamic Gaussian Surfels - 単一生成動画から4D(連続3D)表現を構築する新しい再構成技術!

    2024-05-28

  4. ASH: Animatable Gaussian Splats for Efficient and Photoreal Human Rendering - リアルタイムで動的な人物のためのアニメーション対応Gaussian Splattingアプローチ!

    2024-04-28

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR

3DCG募集要項 | 株式会社Colorful Palette

採用 | 3DCGアーティスト&テクニカルアーティスト大募集 | 株式会社Cygames

   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る