V-Ray for Blender Beta - 人気レンダラー「V-Ray」!...

Chaosによる老舗レンダラー「V-Ray」のBlender版「V-Ray for Blender」がベータ公開されました!正式リリースまで無料使用可能です!

続きを読む

シネマティック2D CGアニメーションの全工程実践講座 - 企画からレンダリング...

HeyShowスタジオの創設者でディレクター/3DアーティストのHannie氏による「シネマティック2D CGアニメーションの全工程実践講座」がCG&デジタルアート学習オンラインプラットフォーム「WINGFOX」にて取り扱い開始されています。

続きを読む

The Game Awards 2024 Trailers - 年末新作ゲームラ...

2023年12月12日(現地時間)に開催された「The Game Awards 2024」にあわせて、色々と新作ゲームの映像が公開されました。個人的に気になるもの幾つか貼り付けておきます。

続きを読む

Moderate Weight Reduction Tools v1.0 - 株...

株式会社ホロラボから、3Dスキャンやフォトグラメトリーデータなどの高ポリゴンモデルを軽量化出来るBlenderアドオン「Moderate Weight Reduction Tools v1.0」が無料公開されています!

続きを読む

TRELLIS: Structured 3D Latents for Scala...

Microsoft Research、中国科学技術大学、清華大学の研究者らによるAI活用3D生成技術「TRELLIS: Structured 3D Latents for Scalable and Versatile 3D Generation」が公開されています。

続きを読む

Autodesk Maya | Maya の価格と購入(公式ストア) | Autodesk

Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold - 点を動かしてポージングや形状変形&画像調整を行えるAI技術!SIGGRAPH 2023 論文

この記事は約1分41秒で読めます

Xingang Pan氏、Ayush Tewari氏、Thomas Leimkühler氏、Lingjie Liu氏、Abhimitra Meka氏、Christian Theobalt氏らよる「Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold」が話題になっています。

※2023/05/20 – 動画を追加
※2023/05/25 – コードやデモページへのリンクを追加


プロモーション

求人情報検索 | CG・映像の専門情報サイト | CGWORLD.jp


Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold

ユーザーのニーズに合ったビジュアルコンテンツを合成するためには、生成されるオブジェクトのポーズ、形状、表情、レイアウトを柔軟かつ正確に制御できることが必要です。既存のアプローチでは、手動でアノテーションされた学習データや事前の3Dモデルによって生成的敵対ネットワーク(GAN)の制御性を得ているが、柔軟性、精度、汎用性に欠けることが多い。本研究では、GANを制御する強力な方法として、図1に示すように、画像の任意の点を「ドラッグ」して、ユーザーと対話しながら目標点に正確に到達させるという、まだあまり知られていない方法を研究します。これを実現するために、我々は2つの主要コンポーネントからなるDragGANを提案します: 1)ハンドルポイントを目標位置に移動させる特徴ベースの動作監視、2)ハンドルポイントの位置を定位し続けるために識別可能なジェネレータの特徴を活用する新しいポイントトラッキングのアプローチ、です。DragGANは、ピクセルの位置を正確に制御しながら画像を変形させることができるため、動物、車、人間、風景など様々なカテゴリーのポーズ、形状、表情、レイアウトを操作することができます。これらの操作は、学習されたGANの生成画像多様体上で行われるため、オクルージョンの幻覚や、物体の剛性に一貫して従う形状の変形など、困難なシナリオでもリアルな出力が得られる傾向にあります。定性的・定量的な比較の両方から、画像操作と点追跡のタスクにおいて、先行アプローチに対するDragGANの優位性が実証されています。また、GAN反転による実画像の操作についても紹介する。

写真加工の難易度がぐぐっと下がる素敵な技術。

車の加工も自由自在!
いやぁ凄いですね…早く触ってみたいなぁ。
現時点ではコードは公開されておりません。SIGGRAPH2023に合わせて公開されるのかな?
その他詳細はプロジェクトページをご確認ください!

リンク



プロモーション


関連記事

  1. Editable Dance GEneration (EDGE) - 音楽に合わせて人型3Dモデル用のダンスアニメーションを生成可能なAIモデル!スタンフォード大学が開発!

    2023-04-29

  2. Luma Dream Machine - Luma AIから突如高品質な動画生成AIが発表!無料でお試し可能!

    2024-06-13

  3. Spatiotemporal atlas parameterization for evolving meshes - スキャンされたアニメーションメッシュの最適化技術

    2018-02-06

  4. Avatar Digitization From a Single Image For Real-Time Rendering - 1枚の顔写真からリアルタイム向けアバターモデルを生成する技術

    2017-11-15

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR


採用 | 3DCGアーティスト&テクニカルアーティスト大募集 | 株式会社Cygames

   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る