COYOTE スタジオ採用説明会 | クリエイターのための総合情報サイト CREATIVE VILLAGE

Blender 5.3 | 3D Gaussian Splattingに標準対応...

Blender Foundationと開発コミュニティは、2026年11月10日、無料&オープンソースの3DCGソフト「Blender 5.3」を正式リリースしました!

続きを読む

HairDeck: Animation-Ready Stylized Hair ...

清華大学のYuze He氏・Yixiang Wei氏ら&カーネギーメロン大学・香港中文大学の研究チームが、1枚の画像からスタイライズされた3Dヘアを生成する技術「HairDeck」を公開しています。

続きを読む

HairHarpy v2.0.0 | カーブによるメッシュ生成やUV展開&リトポ...

3DキャラクターアーティストのCataRackta氏( @CataRackta )が、スタイライズされた髪型を制作するソフト「HairHarpy v2.0.0」を無料公開しました。

続きを読む

Talk風Live翻訳 1.0 | PCの英語音声をやさしい日本語のチャットに!...

エンジニア上がりの元ゲーム会社ディレクターStudioYebisu氏( @studio_yebisu )が、PCで再生中の英語音声を日本語に翻訳するWindows向けアプリ「Talk風Live翻訳 1.0.0」を公開しました。

続きを読む

Floaters - The BIGGEST 3D Modeling Cheat...

Blender BrosのJosh氏による、Blenderでフローターを使ったディテール追加の方法を解説するチュートリアル動画「Floaters - The BIGGEST 3D Modeling Cheat Code」をご紹介!

続きを読む

The Matrix: Infinite-Horizon World Generation with Real-Time Moving Control - 16FPS 720pでリアルタイムに無限動画生成!AIパワーで無限に世界を作り上げる新技術が発表!

この記事は約2分55秒で読めます

アリババ・グループ、香港大学、ウォータールー大学、ベクター・インスティテュートの研究者らによる、AI活用の世界生成&リアルタイム動画生成技術「The Matrix」が発表されました!

The Matrix


リアルな世界シミュレーションのための、初のリアルタイム、フレームレベルの移動制御!
AIが現実と幻想の境界線を曖昧にし、完全に没入したインタラクティブな世界を作り上げるという『マトリックス』(1999年)のビジョンの実現に、私たちはどこまで近づいているのだろうか? 現実そのものに匹敵するビジュアルでリアルタイムに創造される、無限のデジタル宇宙を想像してみてほしい。 このプロジェクトは、そのビジョンに向けた先駆的な一歩であり、人類独自の “マトリックス “を垣間見る最初の機会である。

私たちのシステムは、以下を実現することで、世界シミュレーションの新境地を切り開きます:

映画で描かれた応答性に匹敵する、ユーザーとのインタラクションにおけるフレームレベルの正確さ。
AAAレベルのビジュアルにより、現実とほとんど見分けがつかない没入感のあるシーンを実現。
現在のビデオモデルの限界を超える、無限の探索を可能にする無限の生成能力。

無限の長さの超リアルなビデオをリアルタイムでフレームレベルで制御しながら生成するための基礎となる世界モデル。

  • 無限の長さのビデオ生成
  • 720pの高品質レンダリング
  • 16 FPSでのリアルタイム・フレームレベル制御
  • 実世界の映像制御への一般化

主なイノベーション シフトウィンドウデノイズプロセスモデルと呼ばれる全く新しい技法により、拡散モデルと一貫性モデルの自動回帰生成をリアルタイムで実現。

The Matrixは、一人称視点と三人称視点でリアルタイムの応答性の高いコントロールを提供し、動的な環境をシームレスに探索できます。Forza Horizo​​n 5やCyber​​punk 2077などの AAA ゲームのデータと現実世界の映像に基づいてトレーニングされているため、ユーザーは途切れることなく連続したビデオで、砂漠、都市、森林などのさまざまな地形を移動できます。各キーボード コマンドはフレーム レベルの精度で応答し、AAA ゲームと同様の 4 フレーム応答を実現します。

興味深いことに、膨大なインターネット ビデオ コレクションと AAA ゲームの映像を組み合わせて事前トレーニングされた The Matrix は、優れたドメイン一般化を示しています。たとえば、BMW X3 でオフィス エリアを運転するなどのシナリオが可能になります。

14分間の走行映像

ここ最近のAI技術の発展から予想されていた方向性ではあるものの、こんなに早く登場するとは・・・。生成の精度はまだ高くなさそうですが、なによりもリアルタイムで実現出来るという所が凄いです。
数年後どうなるんだろうこれ・・・今後この手の分野は色々と変化が起きそうですね。
「The Matrix」は現在論文が公開済みで、コードはComingSoonとなっております。
詳細などは公式のプロジェクトページをご確認ください!

リンク

Screenshot of thematrix1999.github.io

PR

関連記事

  1. Neuralangelo: High-Fidelity Neural Surface Reconstruction - 2D映像を複雑なディテールを持つ3D構造物に変える新しいAIモデル!NVIDIA Researchによる技術!CVPR2023技術論文!

    2023-06-07

  2. MV-Adapter: Multi-view Consistent Image Generation Made Easy - テキストや画像から高精度なマルチアングル画像を生成する技術!テクスチャとして適用可能なデモも公開!

    2025-03-31

  3. BANG: Dividing 3D Assets via Generative Exploded Dynamics - 3Dメッシュをパーツごとに分解する技術!SIGGRAPH 2025 発表論文!

    2025-08-12

  4. Meta 3D Gen - テキストからPBR対応のテクスチャ付き3Dモデルを1分未満で生成する技術をMeta社が発表!

    2024-07-06

コメントをお待ちしています。

コメント

日本語が含まれない投稿は無視されます。-Posts that do not include the Japanese will be ignored-(スパム対策-anti Spam-)

3D人-3dnchu-

3D/2D/VR/GAME/AIなどのCGに関連する個人的に気になる情報をほぼ毎日紹介!XやYoutubeなども是非フォローよろしくお願いします!
※当サイトのリンクにはアフィリエイトを含みます

※当サイトの一部記事にはアフィリエイトが含まれております。

スポンサープロダクト


X-Ray Realtime Light and TexturingTool

CGElementaryに関する記事一覧


Character Creator - アニメーション、ゲーム、AR/VR のための 3D キャラメイクソフト

Reallusionに関する記事一覧


Paintstorm Studio

Paintstorm Studioに関する記事一覧


MarvelousDesigner

MarvelousDesignerに関する記事一覧


JangaFX - Real-Time VFX Software For Real-Time VFX Artists

JangaFXに関する記事一覧


パルミーの講座が見放題!月謝制お申し込み|お絵かき講座パルミー

Palmieに関する記事一覧


《ドラゴン》―複雑な生き物モデリングとマップ作成技術のコース【Japanese】

WINGFOXに関する記事一覧


アーカイブ

カテゴリ

おすすめ商品Pickup

注目の記事

PR


PR






Donate

   
USD
3D人のLINEアカウントを作りました!
友だち追加




おすすめ商品Pickup

おすすめ記事

ページ上部へ戻る