TRELLIS: Structured 3D Latents for Scalable and Versatile 3D Generation - マイクロソフトによるAI活用3Dアセット生成技術が登場！テキストや画像から3Dアセットを生成！

Microsoft Research、中国科学技術大学、清華大学の研究者らによるAI活用3D生成技術「TRELLIS: Structured 3D Latents for Scalable and Versatile 3D Generation」が公開されています。

TRELLIS: Structured 3D Latents for Scalable and Versatile 3D Generation – マイクロソフトによる3Dアセット生成モデルが登場！テキストや画像から3Dアセットを生成！

TRELLISは大規模な3Dアセット生成モデルです。 テキストや画像のプロンプトを取り込み、ラディアンスフィールド、3Dガウシアン、メッシュなど様々なフォーマットで高品質な3Dアセットを生成します。 TRELLISの基盤は、異なる出力フォーマットへのデコードを可能にする統一された構造化LATent（SLAT）表現と、強力なバックボーンとしてのSLAT用に調整された整流トランスフォーマーです。 TRELLISは、50万個の多様なオブジェクトからなる大規模な3Dアセットデータセットを用いて、最大20億個のパラメータを持つ大規模な事前学習済みモデルを提供します。 TRELLISは、同規模の最近のものを含む既存の手法を大幅に凌駕し、以前のモデルでは提供されなかった柔軟な出力フォーマット選択とローカル3D編集機能を披露しています。

リンク