Meta社が1枚の画像からオブジェクトや人物を抽出して3D化する技術「SAM 3D」を発表しました。
SAM 3D
SAM 3Dを発表します。今回のリリースには、2つの新世代モデルが含まれます：物体とシーンの再構築のための「SAM 3D Objects」、および人体と形状推定のための「SAM 3D Body」です。SAM 3Dは、物理世界シナリオにおける実証済み3D再構築の新たな基準を確立します。
今回のリリースの一環として、トレーニングデータと評価データ、評価ベンチマーク、モデルチェックポイント、推論コード、パラメトリックな人間モデルを公開します。本研究は、ロボティクス、インタラクティブメディア、科学、スポーツ医学などの分野における創造的な応用への可能性を秘めています。
また、セグメント・エニシング・プレイグラウンドを導入します。これは、誰もが当社のモデルの機能を簡単に試したり、クリエイティブなメディア編集のための最先端AIを実験したりできる新しいプラットフォームです。本日リリースしたSAM 3と併せて、SAM 3Dもプレイグラウンドで利用可能となり、各自の画像を使って探索できるようになります。
研究の成果を製品革新へとつなげています。SAM 3DとSAM 3はFacebook Marketplaceの新機能「View in Room」を支え、購入前にランプやテーブルなどのインテリアアイテムが自宅の空間にどのように調和し、フィットするかを確認できるようにしています。
これは中々楽しい！生成時間も比較的早くて驚きました。
現状はとりあえずお試しができる感じかな？
技術詳細やお試しなどはMetaのページをご確認ください❗️
リンク
Githubページも公開済みです
コメント