株式会社Witchpotは2024年4月に生成AIを基盤としたゲーム・エンタメ制作者向け世界観・設定制作AIツール「Glimnote（グリムノート）」のアーリーアクセスを開始しました！

とりにく氏（ @tori29umai ）による線画から陰影を出力するAIアプリ「NormalmapLighting」がFanboxにて早期アクセス公開されています。

浙江大学、チューリッヒ工科大学、香港城市大学、マックス・プランク知能システム研究所、香港科技大学の学生グループらによる単眼ビデオから精巧なヘアーモデルを構築する技術「MonoHair:High-Fidelity Hair Modeling from a Monocular Video」の情報が公開！

テキストや入力画像から3D人体のテクスチャを生成出来るモデル『TexDreamer: Towards Zero-Shot High-Fidelity 3D Human Texture Generation』の技術ページが公開されています！

OptimizerAIによるテキストから効果音を生成出来るサービスが現在利用可能になりました！

NeRFや3DGSに続く技術として『Binary Opacity Grids: Capturing Fine Geometric Detail for Mesh-Based View Synthesis』が注目されています。

OpenAIから新たなテキストto動画のAIモデル『Sora』が発表されました。

HEN3DRIK - Electroplating 3D PrintsのYoutubeチャンネルにてFDM系3Dプリントで出力したアイアンマンヘルメットに電気メッキを施してテカテカにする工程を解説した動画が公開されています。

カーネギーメロン大学やマックス・プランク知能システム研究所らの研究者による『WHAM:Reconstructing World-grounded Humans with Accurate 3D Motion』という技術に注目が集まっています。動画から人物のモーションを構築する技術です。

何気なく取った動物や人物の映像から脚式ロボット向けに動きを転送する為のフレームワーク『SLoMo: A General System for Legged Robot Motion Imitation from Casual Videos』が公開されています。

Metaやカリフォルニア大学サンディエゴ校 、メリーランド大学カレッジパーク校の研究者らによる、数枚の画像からターゲットの3Dモデルにテクスチャを転送する技術『TextureDreamer: Image-guided Texture Synthesis through Geometry-aware Diffusion』が発表されています。

NVIDIAがCES 2024に合わせてNVIDIA Audio2Face (A2F) および NVIDIA Riva 自動音声認識 (ASR) 用の ACE プロダクション マイクロサービスが利用可能になったことを発表しました。

3DジェネレーティブAIプラットフォーム『Atlas』が発表されました。スクエニなどと提携しているとか。これは気になります。

ByteDance、State Key Lab of CAD & CGｋ浙江大学の研究者らによる『DreamSpace: Dreaming Your Room Space with Text-Driven Panoramic Texture Propagation』という技術の紹介。

華中科技大学やHuaweiの研究者らによる、動的な3Dガウス・スプラッティングシーンの学習と軽量にリアルタイム再生する技術『4D Gaussian Splatting for Real-Time Dynamic Scene Rendering』

より高精度なText-to-3Dモデル『DreamCraft3D: Hierarchical 3D Generation with Bootstrapped Diffusion Prior』のご紹介。

Zhejiang University、Image Derivative Inc.、Ant Groupらによる、動的3Dシーンを4K解像度でリアルタイム描画出来る技術『4K4D』が登場。

南洋理工大学S-Lab、SenseTime Research、上海AI研究所、東京大学、国際デジタル・エコノミー・アカデミー（IDEA）の研究者達による、単眼カメラ映像から人物の動きを検出する技術『SMPLer-X: Scaling Up Expressive Human Pose and Shape Estimation』のコードが公開されております。NeurIPS 2023 論文