Luma Unreal Engine Plugin - Luma AIでキャプチャしたNeRFのデータをUnreal Engine 5上でリアルタイム表示できるプラグイン！アルファ版が公開！

Luma AIから2023年4月3日 に同プラットフォームでキャプチャしたNeRFデータをUnreal Engine 5上でリアルタイム描画出来るプラグイン「Luma Unreal Engine Plugin」のアルファ版が公開されました。

Luma Unreal Engine プラグイン

Luma AIのNeRF用アルファUE 5（Windows）プラグインです！
このプラグインは、ローカルで動作する完全なボリューメトリックレンダリングを使用しています。つまり、メッシュフォーマット、ジオメトリ、マテリアル、ストリーミングをいじる必要がありません。

Unreal Engine Starter Project

本プラグインを含むスターター（ゲーム）プロジェクトはこちらからダウンロードできます：
https://cdn-luma.com/public/resources/LumaAIStarterProject.zip

シネマティックな使い方には、当社のシネマティック／フィルム・スターター・プロジェクトをお勧めします：
https://cdn-luma.com/public/resources/LumaAIFilmStarter.zip

How to download Luma Fields from Luma Web

各キャプチャーの「ダウンロード」画面では、UE 5で動作するルマフィールドファイルも確認できるようになりました。
https://captures.lumalabs.ai/me

A quick test of the new NeRF #UE5 plugin from the team at @LumaLabsAI. Here with scans of scenes that I made in Dreams on my PS5. Incredible stuff! The jungle here is the result of just a few hours of work from scratch and can now be used for soo many things 😍#MadeInDreams pic.twitter.com/If5k1IbhiW

— Martin Nebelong (@MartinNebelong) April 4, 2023

Luma NeRFの公式UE5のplugin早速気になって落とした。以前適当にLumaでキャプチャしたオブジェクトをUE5へ読み込んでみた。ボリュームレンダリングらしいけど現状はそんなに解像度は高くない感じかな pic.twitter.com/rkDi3SfpXP

— Hirokazu Yokohara (@Yokohara_h) April 3, 2023

うおおおおおおおおおおおおおお
大岡山NeRFにUE5で入り込むことができた！！！！！！！！！！！！！！！！！#LumaAI #UnrealEngine #NeRF pic.twitter.com/89BnXoGmuj

— イワケン@XRコミュニティのキーマン/Microsoft MVP (@iwaken71) April 4, 2023

#ue5 #nerf #LumaAI #ue5study
出かけたついでに西八王子駅を撮ってきました！！
やべええええとしか言いようがない
dynamic skyで天候を変えるデモ pic.twitter.com/6uv5nDxr8D

— aoharu@ue4 (@aoharuisgod) April 4, 2023

LumaAIの通常エクスポートできる3DデータとUE5プラグイン用のデータで、見え方どれくらい変わるのか比較してみました
左：glTFをFBXに変換してインポートしたモデル
右：Luma Field Fileからインポートしたモデル#LumaAI #NeRF #UE5 pic.twitter.com/3pgyFfkqWy

— MATSUZAKI (@marvo737) April 4, 2023

リンク

Introducing the Luma✨Unreal Engine alpha! Fully volumetric Luma NeRFs running realtime on Windows in UE 5 for incredible cinematic shots and experiences, starting today!
Try now: https://t.co/mdyGTWhhgN pic.twitter.com/Lj1Lm3F2P4

— Luma AI (@LumaLabsAI) April 3, 2023