パーティクルナイト セガエフェクトデザイナー育成事例 パネルディスカッション&懇親会 | クリエイターのための総合情報サイト CREATIVE VILLAGE

Turning the Toyota MR2 into a MODERN CLA...

架空のカーカスタムデザインなどを公開しているZephyr Designzが初のBlender制作タイムラプス動画を公開しました!

続きを読む

Instance Damage System v2.0 - インスタンス化された...

Adiによる、スタティックメッシュインスタンスに「ダメージ表現」などを追加できるプラグイン「Instance Damage System v2.0」のご紹介!ダメージを受けたインスタンスを置き換え物理挙動を実行させたり、再スポーンさせたりといった仕組みを簡単に導入できます。

続きを読む

C++ Generator - C++のスニペットやマクロ、アクターやクラスを自...

Ciji Gamesによる「C++ Generator」はUnreal Engine開発においてC++コードの生成を支援するプラグインです。C++学習者がスニペットを素早く作成する場面から、経験者が変数やアクター構造を整理する場面まで、幅広く利用できるとのこと。

続きを読む

Alt Tab Easy Decals v1.0 - スタンプ&シール貼り付けア...

数多くの高品質アドオンを開発しているAlt Tabから、デカール貼り付けアドオン「Alt Tab Easy Decals」が登場!このアドオンはBeeBee 3Dの「Stamp It!」というアドオンを引き継いで進化させた新アドオンです!

続きを読む

State of 3D 2025 - 全世界の3Dアーティスト向けアンケート調査...

Andrew Price氏が全世界の3Dアーティスト向けアンケート調査「State of 3D 2025」を実施中です!

続きを読む

はじめてのFlow Studio ウェビナー | イベント | Autodesk :: AREA JAPAN

Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold - 点を動かしてポージングや形状変形&画像調整を行えるAI技術!SIGGRAPH 2023 論文

この記事は約1分41秒で読めます

Xingang Pan氏、Ayush Tewari氏、Thomas Leimkühler氏、Lingjie Liu氏、Abhimitra Meka氏、Christian Theobalt氏らよる「Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold」が話題になっています。

※2023/05/20 – 動画を追加
※2023/05/25 – コードやデモページへのリンクを追加


プロモーション

Blender Fes 2025 AW - Blenderの世界へ、一緒に飛び込もう!


Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold

ユーザーのニーズに合ったビジュアルコンテンツを合成するためには、生成されるオブジェクトのポーズ、形状、表情、レイアウトを柔軟かつ正確に制御できることが必要です。既存のアプローチでは、手動でアノテーションされた学習データや事前の3Dモデルによって生成的敵対ネットワーク(GAN)の制御性を得ているが、柔軟性、精度、汎用性に欠けることが多い。本研究では、GANを制御する強力な方法として、図1に示すように、画像の任意の点を「ドラッグ」して、ユーザーと対話しながら目標点に正確に到達させるという、まだあまり知られていない方法を研究します。これを実現するために、我々は2つの主要コンポーネントからなるDragGANを提案します: 1)ハンドルポイントを目標位置に移動させる特徴ベースの動作監視、2)ハンドルポイントの位置を定位し続けるために識別可能なジェネレータの特徴を活用する新しいポイントトラッキングのアプローチ、です。DragGANは、ピクセルの位置を正確に制御しながら画像を変形させることができるため、動物、車、人間、風景など様々なカテゴリーのポーズ、形状、表情、レイアウトを操作することができます。これらの操作は、学習されたGANの生成画像多様体上で行われるため、オクルージョンの幻覚や、物体の剛性に一貫して従う形状の変形など、困難なシナリオでもリアルな出力が得られる傾向にあります。定性的・定量的な比較の両方から、画像操作と点追跡のタスクにおいて、先行アプローチに対するDragGANの優位性が実証されています。また、GAN反転による実画像の操作についても紹介する。

写真加工の難易度がぐぐっと下がる素敵な技術。

車の加工も自由自在!
いやぁ凄いですね…早く触ってみたいなぁ。
現時点ではコードは公開されておりません。SIGGRAPH2023に合わせて公開されるのかな?
その他詳細はプロジェクトページをご確認ください!

リンク



プロモーション


関連記事

  1. Color Map Optimization for 3D Reconstruction with Consumer Depth Cameras - 深度カメラによるカラーマップ3Dスキャン精度を大幅に向上させるSIGGRAPH2014技術論文!

    2014-06-02

  2. Pixar USD (Universal Scene Description) - ピクサーのシーン・アセット管理システム!スライドや解説映像が公開!

    2013-10-17

  3. Smart Inker - ディープラーニングでラフスケッチに対するペン入れをサポート!早稲田大学のSIGGRAPH 2018技術論文!

    2018-06-05

  4. DeepMotion Neuron - AIを使ったキャラクターモーション生成ツール!2018年第4四半期にリリース予定!

    2018-08-09

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR






   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る