エントリーフォーム - COYOTE 3DCG STUDIO | C&R Creative Studios

Gizmify Media Plane - 連番画像は不要!MP4・AVI・MK...

Gizmify StudiosによるMP4・AVI・MKV・MOVなどの動画ファイルを直接プレーンに読み込む事が可能となるMayaプラグイン「Gizmify Media Plane」のご紹介!

続きを読む

3DMakerpro Eagle Review - 空間を手軽にデジタル化!14...

140mの広域を空間キャプチャー可能なLiDAR 3Dスキャナー3DMakerpro「Eagle」&「Eagle Max」が日本に上陸!Makuakeにてクラウドファンディングが実施中です!一足先にレビューさせていただきました!

続きを読む

CameraBag 2026.0 - 多機能高性能かつ買い切りのスタンドアロン写...

Nevercenterによる写真や動画編集の為のスタンドアロンソフト「CameraBag 2026.0」がリリースされました!

続きを読む

Quad Filler v0.1 Beta Early Access - 3エッ...

数多くの便利アドオンを開発&販売しているCasey_Sheep氏による3エッジと1エッジをワンクリックで理想的な四角形で埋めてくれるシンプルなBlenderアドオン「Quad Filler v0.1」のベータ版が早期アクセスリリースされました!

続きを読む

Retopoflow 4 - v1登場から10年!Blender向けリトポロジー...

Orange Turbine氏によるBlender向けリトポロジーアドオンの最新メジャーアップデート「Retopoflow 4」が正式リリースされました!

続きを読む

Autodesk Flow Studio ソフトウェア | Autodesk Flow Studio 2025 の価格と購入 | Autodesk

MV-Adapter: Multi-view Consistent Image Generation Made Easy - テキストや画像から高精度なマルチアングル画像を生成する技術!テクスチャとして適用可能なデモも公開!

この記事は約1分43秒で読めます

北京大学ソフトウェア学院、VAST(Tripoの会社)、上海交通大学の研究者らによる「MV-Adapter: Multi-view Consistent Image Generation Made Easy」が公開されています。テキストや画像から制度の高いマルチアングル画像を生成しテクスチャとして適用出来る技術です!

MV-Adapter: Multi-view Consistent Image Generation Made Easy

既存のマルチビュー画像生成手法では、学習済みのテキスト画像(T2I)モデルに侵襲的な変更を加えることが多く、完全な微調整が必要であるため、(1)特に大規模なベースモデルや高解像度画像では計算コストが高い、(2)最適化が困難で高品質な3Dデータが少ないため画質が劣化する、といった問題がある。 本論文では、マルチビュー画像生成のためのアダプタベースのソリューションを初めて提案し、元のネットワーク構造や特徴空間を変更することなく、T2Iモデルやその派生モデルを拡張する汎用性の高いプラグアンドプレイアダプタであるMV-Adapterを紹介する。 MV-Adapterは、より少ないパラメータを更新することで、効率的な学習を可能にし、事前学習済みモデルに埋め込まれた事前知識を保持することで、オーバーフィッティングのリスクを軽減する。アダプタ内で3D幾何学的知識を効率的にモデル化するために、我々は、重複した自己注意層と並列注意アーキテクチャを含む革新的な設計を導入し、アダプタが新しい3D知識をモデル化するために、事前に訓練されたモデルの強力な事前分布を継承することを可能にする。 さらに、カメラパラメータと幾何学的情報をシームレスに統合する統合条件エンコーダを提示し、テキストベースや画像ベースの3D生成やテクスチャリングなどのアプリケーションを容易にする。 MV-Adapterは、Stable Diffusion XL (SDXL)上で768解像度のマルチビュー生成を実現し、適応性と汎用性を示している。 また、任意のビュー生成への拡張も可能であり、より幅広い応用が可能です。 MV-Adapterがマルチビュー画像生成の新たな品質基準を設定し、その効率性、適応性、汎用性により新たな可能性を開くことを実証する。

いやぁすごい・・マルチアングル画像があるだけでかなり精度が上がりますよね。
Hugging Faceのページでは、テキストから3Dモデルにテクスチャを適用したり、画像から3Dモデルにテクスチャ適用するデモを実際に試すことができます。
詳細はプロジェクトページやGithubなどをチェックしてみてください!

リンク

Screenshot of github.com
Screenshot of huanngzh.github.io

ちなみにComfyUI版もありますね


プロモーション


関連記事

  1. RigNet - ディープラーニングを活用しモデルへのスキニングを自動で行う技術のソースコードが公開!

    2020-10-22

  2. Pippo: High-Resolution Multi-View Humans from a Single Image - 1枚の人物写真から複数アングル動画を生成する技術!

    2025-02-21

  3. Make-A-Video - MetaのAI研究開発チームによるテキストからビデオを生成する技術が発表!

    2022-09-30

  4. Meta Movie Gen - Meta社が新たな動画生成AIモデルを発表!高品質&安定した結果を実現!部分的な編集も容易に!?

    2024-10-05

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR






   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る