3D動かさナイト モーションアクターが語る・動く・魅せる! | CREATIVE VILLAGE SEMINAR

MOVIN - 単一のLiDAR&RGBカメラを搭載したデバイスでマーカー&スー...

単一のLiDAR&RGBカメラを搭載したデバイスでマーカー&スーツ不要モーションキャプチャが可能なソリューション「MOVIN(ムービン)」が2025年8月1日に提供開始されました!

続きを読む

PivotPainter2 for Maya - テクニカルアーティストの神崎 ...

テクニカルアーティストの神崎 建三 氏が、Maya向けのPivotPainter2ベイクスクリプトを開発!「PivotPainter2 for Maya」を近日OSSとして公開する事を発表しました!

続きを読む

OptiPloy - リンク&アペンドの欠点を解消!リグ付きモデルを軽量かつベス...

hisanimationsによるリンク&アペンドの欠点を解消した状態でリグモデルをインポートできるBlenderアドオン「OptiPloy」のご紹介!

続きを読む

Houdini 21 Sneak Peek - 「Houdini」次期メジャーア...

SideFXの「Houdini」次期メジャーアップデートのスニークピーク映像「Houdini 21 Sneak Peek」が公開されました!

続きを読む

Procedural World Generator - PCGと3Dスキャンさ...

数多くの3Dスキャンアセットを販売しているScansLibraryから、Unreal EngineのPCGを活用したワールド生成ツールセット「Procedural World Generator」がFab上でリリースされました。

続きを読む

従量課金制の Flex で柔軟に制作 | メディア&エンターテイメント | Autodesk

Feat2GS: Probing Visual Foundation Models with Gaussian Splatting - カジュアルな画像からAIがどこまで3D形状とテクスチャを理解できるかをGaussian Splattingで検証する評価手法!

この記事は約2分16秒で読めます

Yue Chen氏、Xingyu Chen氏、Anpei Chen氏、Gerard Pons-Moll氏、Yuliang Xiu氏らによる、CVPR 2025技術論文「Feat2GS: Probing Visual Foundation Models with Gaussian Splatting」の紹介。


プロモーション

CGWORLD vol.325(2025年9月号)8月8日(金)発売! 「セガの現在地」


[CVPR 2025] Feat2GS: Probing Visual Foundation Models with Gaussian Splatting

我々は、視覚的基礎モデルの「テクスチャとジオメトリの認識」を調査するための統一されたフレームワークであるFeat2GSを発表する。 新しいビュー合成は、3D評価の効果的な代理として機能します。

仕組み
何気なく撮影された写真は、特徴を抽出するために視覚的基礎モデル(VFM)に入力され、相対的なポーズを得るためにステレオ再構成器に入力される。 ピクセル単位の特徴は、測光損失で訓練された軽量読み出しレイヤーを使用して、3Dガウシアン(3DGS)に変換されます。 3DGSパラメータはジオメトリとテクスチャにグループ化され、VFMにおけるジオメトリ/テクスチャの認識を個別に分析することができる。 我々は、いくつかのVFMの3D認識を調査するために広範な実験を実施し、3D認識VFMにつながる成分を調査する。 これらの知見を基に、多様なデータセットにおいてSOTAを達成するいくつかのバリエーションを開発する。 これにより、Feat2GSはVFMのプロービングや、NVSのためのシンプルで効果的なベースラインとして有用である。

「AIは3Dの形や質感を本当に理解してるのか?」をチェックする為の技術とのことで、どういう立ち位置なのかわからないのでAIに今後の可能性を聞いてみました。

今後の応用分野として、以下のような展開が期待されます:

① 3D生成AIの“実力チェックツール”に

→ いま流行りの「テキストから3D生成」や「1枚の画像から3D構築」などに使われるAIの性能を、客観的に比べる指標として使える。

② 軽量な3D再構築パイプラインに

→ 本来3D再構築にはLiDARや正確なカメラ情報が必要だったけど、Feat2GSのような仕組みを使えば簡単な画像群からの3D生成がもっと手軽に

③ AIトレーニングのガイドに

→ どのモデルが「形をちゃんと理解してるか」「テクスチャを重視してるか」を見極めて、より優れた視覚AIを作る設計に役立つ

ほぉ…結構重要な技術ですね。
Githubではコードも公開済みで、Hugging faceのでもページも用意されています。詳細はプロジェクトページをご確認ください!

リンク

Screenshot of fanegg.github.io

プロモーション


関連記事

  1. ASH: Animatable Gaussian Splats for Efficient and Photoreal Human Rendering - リアルタイムで動的な人物のためのアニメーション対応Gaussian Splattingアプローチ!

    2024-04-28

  2. GaussianObject: Just Taking Four Images to Get A High-Quality 3D Object with Gaussian Splatting - 4枚の画像からGaussian Splatting技術を活用し高品質な3Dオブジェクトを生成するための技術が登場!

    2024-05-21

  3. Gaussian Haircut: Human Hair Reconstruction with Strand-Aligned 3D Gaussians - 3Dガウシアンデータから人間の髪型を忠実に構築するアプローチ!ECCV 2024技術論文!

    2024-09-28

  4. 4D Gaussian Splatting for Real-Time Dynamic Scene Rendering - 動的な3Dガウス・スプラッティングシーン学習&軽量にリアルタイム再生する技術!

    2023-11-06

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR

3DCG募集要項 | 株式会社Colorful Palette

採用 | 3DCGアーティスト&テクニカルアーティスト大募集 | 株式会社Cygames

   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る