エントリーフォーム - COYOTE 3DCG STUDIO | C&R Creative Studios

Melt Mouse - デザイン情報発信メディア『Paraph -パラフ-』に...

マジシャン・デザイナー・アートディレクターの鎌田 亮平氏が立ち上げたデザイナーオススメアイテムの紹介などでお馴染みのメディア「Paraph -パラフ-」による革新的マウス「Melt Mouse」がKickstarterにて予約受付開始しました!

続きを読む

【製造業様向け】エピックゲームズジャパン合同ウェビナー2025 - ディプロス株...

2025年10月6日に開催された『【製造業様向け】エピックゲームズジャパン合同ウェビナー2025』のアーカイブ映像が公開されました!

続きを読む

FlexToon OSL Toon Manager v2.0 - MayaのAr...

Christophe Saillard氏によるMayaのArnold用トゥーンシェーダーパッケージ「FlexToon」のv2.0がリリースされていました。

続きを読む

【PR】Wingfox Black Friday Early Acess - C...

CG&デジタルアート関連チュートリアルサービス「Wingfox」にてブラックフライデー早期アクセス関連セールが実施中で新コースの各種が20%OFFで入手できるようです❗️!

続きを読む

アーティストのための動物解剖学:ドローイング&リファレンス - 動物の構造を理解...

アーティスト向けに動物の構造を解説した洋書「Animal Anatomy for Artists: A visual guide to the animal form」の日本語版『アーティストのための動物解剖学:ドローイング&リファレンス』がボーンデジタルから2025年11月下旬に発売されます!

続きを読む

Autodesk Flow Studio ソフトウェア | Autodesk Flow Studio 2025 の価格と購入 | Autodesk

4D Humans: Reconstructing and Tracking Humans with Transformers - 単眼カメラ映像から人物の動きをトラッキング出来るICCV 2023発表新技術!コードも公開され使用可能!

この記事は約3分30秒で読めます

ICCV 2023に合わせて発表された単眼カメラ映像から人物の動きをトラッキングする新技術「4D Humans: Reconstructing and Tracking Humans with Transformers」が注目を集めています。

4D Humans: Reconstructing and Tracking Humans with Transformers

我々は、野生のあらゆる映像が与えられた場合、その下にある人間を3Dで共同再構成し、経時的に追跡することができるアプローチを提示する。ここでは、左側に入力映像、右側に再構成された人間を、時間的な滑らかさなしで、色で経時的な追跡の同一性を示す。我々のアプローチは、視認性が悪く、極端な切り捨てや極端なオクルージョンの下でも、通常のポーズでも、通常とは異なるポーズでも、確実に動作する。

我々は、人間を再構成し、経時的に追跡するアプローチを提示する。本アプローチの核となるのは、人体メッシュ復元用ネットワークの完全「変形」バージョンを提案することである。このネットワーク、HMR 2.0は最先端の技術であり、これまで単一画像からの再構成が困難であった特異なポーズを解析する能力を示す。映像を解析するために、HMR 2.0からの3D再構成を、3Dで動作する追跡システムへの入力として使用する。これにより、複数の人物を扱うことができ、オクルージョンイベントを通してアイデンティティを維持することができる。我々の完全なアプローチである4DHumansは、単眼ビデオからの人物追跡において最先端の結果を達成している。さらに、HMR 2.0が行動認識という下流のタスクにおいて有効であることを実証し、これまでのポーズベースの行動認識アプローチと比較して大幅な改善を達成した。

お試し方法解説記事(日本語)

とりあえず試したい方はこの辺の投稿をチェックしてみると良さそうです。

色々試されているPost

コードも公開されているので
早速Xのタイムライン上では4D-Humansをお試しする投稿が確認できました

有志によるBlenderアドオンも登場

AI技術をすぐにBlenderアドオン化する事でもお馴染みCarlos Barreto氏が
早速「CEB 4D Humans」アドオンを開発しています

Blender上で完結するのは良さそうですね
このアドオンはPatreonサポートユーザーに公開しております

今後もどんどんこの技術を採用したツールが増えると良いなぁ。
そして過去のアーカイブ動画が色々活用されたコンテンツも登場しそうで楽しみですね。
是非公式ページをチェックしてみてください!

リンク

Screenshot of shubham-goel.github.io

プロモーション


関連記事

  1. Runway Gen-1 - テキストで指定した通りに動画のスタイルを変更可能なAIモデルが一般公開!無料お試し可能!次期モデル「Gen-2」のトレーラーも公開中!

    2023-03-28

  2. Drag Your GAN: Interactive Point-based Manipulation on the Generative Image Manifold - 点を動かしてポージングや形状変形&画像調整を行えるAI技術!SIGGRAPH 2023 論文

    2023-05-19

  3. Luma Dream Machine - Luma AIから突如高品質な動画生成AIが発表!無料でお試し可能!

    2024-06-13

  4. Runway Gen-3 Alpha - テキストから高品質な動画を生成出来るモデルの新バージョン「Gen-3 Alpha」をサブスクユーザー向けに公開!

    2024-07-02

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!

※当サイトの一部記事にはアフィリエイトが含まれております。

アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR






   
USD
3D人のLINEアカウントを作りました!
友だち追加


follow us in feedly

RSSリーダーで購読する


ほしい物リスト公開中!
3D人運営に援助!
Amazonでリストを見る

Discordチャンネル公開

pixivFUNBOXページ公開!




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る