単眼の動画や複数枚の画像から、ストランドベースのヘアーモデルを構築出来る技術「Neural Haircut: Prior-Guided Strand-Based Hair Reconstruction」が公開されています。International Conference on Computer Vision 2023（ICCV2023）技術論文です。
Neural Haircut: Prior-Guided Strand-Based Hair Reconstruction
我々は、制御されない照明条件下で撮影された単眼ビデオまたはマルチビュー画像から、髪の形状をストランドレベルで正確に再構成できるアプローチを提案する。本手法には2つの段階があり、第1段階では、暗黙的な体積表現を用いて、粗い髪とバストの形状、および髪の向きの共同再構成を行う
次に第2段階では、粗い体積制約と、合成データから学習された髪の束と髪型の事前分布を、1回の最適化処理で調整することにより、髪の束レベルの再構成を推定する。再構成の忠実度をさらに高めるために、新しい微分可能なレンダラーを用いて、画像ベースの損失をフィッティングプロセスに組み込む。Neural Haircutと名付けられたこの統合システムは、再構成されたヘアスタイルの高いリアリズムとパーソナライズ化を実現する。
いやぁーこれ、ゼロからヘアーモデリングするよりも、この技術で構築するほうが手っ取り早い時代になりますよね。
Rockstar Games所属の方も関わっているようなので、GTA6で採用されてたりするのだろうか、気になります。
Githubにはソースが公開されているようです。詳細はプロジェクトページをご確認ください。
リンク
Happy to share our new paper on hair reconstruction that will appear at #ICCV2023, congrats to @ness_pirs and colleagues!
— Egor Zakharov (@eozakharov) July 19, 2023
We produce a detailed and personalized strand-based hairstyle from the monocular video.
Project page: https://t.co/pXKVKt7rwk
More details in the thread 🧵 pic.twitter.com/B36wanIMfG
コメント