エントリーフォーム - COYOTE 3DCG STUDIO | C&R Creative Studios

Universal Blender Material - UV不要!ハードサーフ...

Alexei( @munsplit )によるBlender向けマテリアルアセット「Universal Blender Material」がArtstation上でリリースされています!

続きを読む

FT SIMULATION - 物理シミュレーションで大量のオブジェクトを配置...

テクニカルアートディレクターのArt by Rens氏による物理シミュレーションで大量のオブジェクトを配置できるUnreal Engine 5向けプラグイン「FT SIMULATION」のベータ版がリリース!

続きを読む

EasyAtmos - 岩崩れ、瓦礫、葉、虫、埃、霧、煙などでシーンの雰囲気を向...

William Faucher氏によるEasyアセットシリーズ最新作「EasyAtmos」がFab上でリリースされました!岩崩れ、瓦礫、葉、虫、埃、霧、煙などでシーンの雰囲気を向上させる事が可能なです!

続きを読む

SpatialTrackerV2 - 単眼動画からカメラの動きとシーン形状とピク...

浙江大学 CAD&CG研究所、オックスフォード大学、Ant Research(アント・グループ研究所)、Pixelwise AI、ByteDance Seedチームの共同研究チームが、3Dポイントトラッキングの新技術「SpatialTrackerV2」を発表。カメラの動き、シーンの形、そして個々のピクセルの動きをまとめて一気に推定できる画期的な学習モデルです。

続きを読む

Hunyuan3D-PolyGen - Tencentの3D生成AIモデル!ゲー...

中国の大手IT企業テンセントの3D生成AIモデル「Hunyuan3D-PolyGen」が公開されました!ゲーム用途にも使えるトポロジーでのメッシュ生成が可能とのこと。

続きを読む

従量課金制の Flex で柔軟に制作 | メディア&エンターテイメント | Autodesk

Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold - 点を動かしてポージングや形状変形&画像調整を行えるAI技術!SIGGRAPH 2023 論文

この記事は約1分41秒で読めます

Xingang Pan氏、Ayush Tewari氏、Thomas Leimkühler氏、Lingjie Liu氏、Abhimitra Meka氏、Christian Theobalt氏らよる「Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold」が話題になっています。

※2023/05/20 – 動画を追加
※2023/05/25 – コードやデモページへのリンクを追加


プロモーション

CGWORLD JAM ONLINE 2025


Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold

ユーザーのニーズに合ったビジュアルコンテンツを合成するためには、生成されるオブジェクトのポーズ、形状、表情、レイアウトを柔軟かつ正確に制御できることが必要です。既存のアプローチでは、手動でアノテーションされた学習データや事前の3Dモデルによって生成的敵対ネットワーク(GAN)の制御性を得ているが、柔軟性、精度、汎用性に欠けることが多い。本研究では、GANを制御する強力な方法として、図1に示すように、画像の任意の点を「ドラッグ」して、ユーザーと対話しながら目標点に正確に到達させるという、まだあまり知られていない方法を研究します。これを実現するために、我々は2つの主要コンポーネントからなるDragGANを提案します: 1)ハンドルポイントを目標位置に移動させる特徴ベースの動作監視、2)ハンドルポイントの位置を定位し続けるために識別可能なジェネレータの特徴を活用する新しいポイントトラッキングのアプローチ、です。DragGANは、ピクセルの位置を正確に制御しながら画像を変形させることができるため、動物、車、人間、風景など様々なカテゴリーのポーズ、形状、表情、レイアウトを操作することができます。これらの操作は、学習されたGANの生成画像多様体上で行われるため、オクルージョンの幻覚や、物体の剛性に一貫して従う形状の変形など、困難なシナリオでもリアルな出力が得られる傾向にあります。定性的・定量的な比較の両方から、画像操作と点追跡のタスクにおいて、先行アプローチに対するDragGANの優位性が実証されています。また、GAN反転による実画像の操作についても紹介する。

写真加工の難易度がぐぐっと下がる素敵な技術。

車の加工も自由自在!
いやぁ凄いですね…早く触ってみたいなぁ。
現時点ではコードは公開されておりません。SIGGRAPH2023に合わせて公開されるのかな?
その他詳細はプロジェクトページをご確認ください!

リンク



プロモーション


関連記事

  1. StrokeAggregator - ラフな線から最適なラインを検出して清書してくれる技術!SIGGRAPH 2018 論文!

    2018-05-22

  2. SIGGRAPH Asia 2016 Technical Papers Trailer - 気になる技術が盛りだくさん!シーグラフアジア2016技術論文プレビュートレーラー!

    2016-11-18

  3. Ink-and-Ray - 手描きアニメーションからメッシュを形成しレンダリングする驚きの技術!SIGGRAPH 2014論文!

    2014-08-08

  4. Adaptive Tearing and Cracking of Thin Sheets - 動的なメッシュ分割でリアルなクラック表現を実現!SIGGRAPH2014技術論文!

    2014-05-15

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR

3DCG募集要項 | 株式会社Colorful Palette

採用 | 3DCGアーティスト&テクニカルアーティスト大募集 | 株式会社Cygames

   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る