StyleBlit - MatCapよりも表現力豊かなスタイル転送アルゴリズム！動作も軽量！

法線だけを参照してスタイルを適用するMatCap（Spheremap）の苦手な表現を克服したスタイル転送アルゴリズム！「StyleBlit: Fast Example-Based Stylization with Local Guidance」

私たちはStyleBlitを提示します – それはシングルコアCPUでリアルタイムで高品質のスタイライズレンダリングを届けることができる効率的な例に基づくスタイル転送アルゴリズムです。我々の技術は、局所的な案内、すなわち大きな空間的変動を含む記述的案内チャンネルを使用するスタイル転送用途に特に適しています。ローカルガイダンスは、意味的に意味のある方法でソースの見本からターゲットの画像へのコンテンツの転送を促進します。典型的な局所案内は、例えば、法線値、テクスチャ座標、または変位場を含む。以前のスタイル転送手法とは対照的に、私たちのアプローチは、計算上高価な最適化を含みません。ローカルガイダンスが使用されているとき、最適化ベースの手法は単純なピクセルレベルの操作でよく近似できる解に収束することを示します。この観察に触発されて、私たちは最先端の技術に匹敵するほどではないにしても視覚的に似た結果を生み出し、数桁速いアルゴリズムを設計しました。私たちのアプローチは、ゲームやモバイルアプリケーションなど、計算量が少ないシナリオに適しています。

これは良いですね！すぐにでも実用化できそうな気がします。
スライドページではブラウザから挙動確認できる他、Unity向けプラグインもダウンロード出来るみたいです。

是非お試しあれ！

リンク

StyleBlit: Fast Example-Based Stylization with Local Guidance

• Published 2019-06-17
• Modified 2019-06-17
• Realtime Technology Rendering Technology 技術-Technology-
• MatCapUnityリアルタイムレンダリング