※6/27リアル開催※【3Dスクランブル】著名なHoudiniアーティスト登壇イベント | CyberAgent

Day 9 FREE Blender gifts - 10th birthday...

「Blender Market」10周年の誕生日企画で10日間連続のBlender関連ギフトを配布!9日目はBproductionによるリアルなVDBクラウドコレクション「Cloudscapes V2」13 VDB Cloudsプランを1日限定無料配布!

続きを読む

Ngon Loop Select V3 - NGon構成のメッシュでも良い感じに...

Blenderアドオン開発などでお馴染みAmandeep氏による、NGon構成でもある程度良い感じにループ選択ができるBlenderアドオン「NGon Loop Select」の最新メジャーアップデート「Ngon Loop Select V3」がリリースされました!現在30%OFFクーポンも配布中です!

続きを読む

Day 8 FREE Blender gifts - 10th birthday...

「Blender Market」10周年の誕生日企画で10日間連続のBlender関連ギフトを配布!8日目はCG Cookieによる都市制作チュートリアル+アセット付きコース「CUBICITY」を1日限定無料配布!

続きを読む

It Took Me 1.5 Years to Make This Attack...

中国を拠点に活躍するCGアーティストXie Boli氏が1年半かけて制作した「進撃の巨人」ファンメイドフルCGショートフィルムが公開されています!

続きを読む

Day 7 FREE Blender gifts - 10th birthday...

「Blender Market」10周年の誕生日企画で10日間連続のBlender関連ギフトを配布!7日目は美しいシェーダーコレクションアドオン旧バージョン「Shaders Plus v3 + Modules」を1日限定無料配布!

続きを読む

Maya 2024 | 製品概要と購入 | Autodesk 公式

Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold - 点を動かしてポージングや形状変形&画像調整を行えるAI技術!SIGGRAPH 2023 論文

この記事は約1分41秒で読めます

Xingang Pan氏、Ayush Tewari氏、Thomas Leimkühler氏、Lingjie Liu氏、Abhimitra Meka氏、Christian Theobalt氏らよる「Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold」が話題になっています。

※2023/05/20 – 動画を追加
※2023/05/25 – コードやデモページへのリンクを追加


プロモーション

求人情報検索 | CG・映像の専門情報サイト | CGWORLD.jp


Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold

ユーザーのニーズに合ったビジュアルコンテンツを合成するためには、生成されるオブジェクトのポーズ、形状、表情、レイアウトを柔軟かつ正確に制御できることが必要です。既存のアプローチでは、手動でアノテーションされた学習データや事前の3Dモデルによって生成的敵対ネットワーク(GAN)の制御性を得ているが、柔軟性、精度、汎用性に欠けることが多い。本研究では、GANを制御する強力な方法として、図1に示すように、画像の任意の点を「ドラッグ」して、ユーザーと対話しながら目標点に正確に到達させるという、まだあまり知られていない方法を研究します。これを実現するために、我々は2つの主要コンポーネントからなるDragGANを提案します: 1)ハンドルポイントを目標位置に移動させる特徴ベースの動作監視、2)ハンドルポイントの位置を定位し続けるために識別可能なジェネレータの特徴を活用する新しいポイントトラッキングのアプローチ、です。DragGANは、ピクセルの位置を正確に制御しながら画像を変形させることができるため、動物、車、人間、風景など様々なカテゴリーのポーズ、形状、表情、レイアウトを操作することができます。これらの操作は、学習されたGANの生成画像多様体上で行われるため、オクルージョンの幻覚や、物体の剛性に一貫して従う形状の変形など、困難なシナリオでもリアルな出力が得られる傾向にあります。定性的・定量的な比較の両方から、画像操作と点追跡のタスクにおいて、先行アプローチに対するDragGANの優位性が実証されています。また、GAN反転による実画像の操作についても紹介する。

写真加工の難易度がぐぐっと下がる素敵な技術。

車の加工も自由自在!
いやぁ凄いですね…早く触ってみたいなぁ。
現時点ではコードは公開されておりません。SIGGRAPH2023に合わせて公開されるのかな?
その他詳細はプロジェクトページをご確認ください!

リンク



プロモーション


関連記事

  1. ChatGPT - 人生の悩みからプログラムのコードやツールのスクリプトも教えてくれる 高度な対話型チャットAIがお試し可能!

    2022-12-02

  2. InvokeAI 3.0 - SDXLやControlNetもサポート!ローカル環境で扱える多機能で無料&オープンソースのStable Diffusion画像生成スタンドアロンソフト!

    2023-07-27

  3. Stitch Meshing - 弾力のある網状のモデルに変換する技術!SIGGRAPH 2018技術論文

    2018-05-17

  4. Chimera Painter - GoogleがGANを使用したクリーチャー生成のアプローチとペイントツールをWeb上で公開

    2020-11-19

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR


採用 | 3DCGアーティスト&テクニカルアーティスト大募集 | 株式会社Cygames

   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る