Seamless

V i r t u a l R e a l i t y

南カリフォルニア大学ら、1枚の2D画像から髪の毛の3Dモデルを生成するdeep learningを用いた手法を発表

南カリフォルニア大学、USC Institute for Creative Technologies、Pinscreen、Microsoft Research Asiaの研究者らは、deep learningを用いて、1枚の2D画像から髪の毛の3Dモデルをより自然に生成するための手法を発表しました。

論文:Single-View Hair Reconstruction using Convolutional Neural Networks
著者:Yi Zhou, Liwen Hu, Jun Xing, Weikai Chen, Han-Wei Kung, Xin Tong, Hao Li

本稿は、単一視点の画像から、全体のヘアジオメトリをリアルタイムに生成するためのニューラルネットワークを用いたアプローチを提案します。

本提案手法は、HairNetと呼ぶアーキテクチャで構成されており、ヘアマスクの推定を入力に各ピクセルの方向を計算し、さらに顔検出による頭と体のマスクも加えて入力とし、高密度のヘアモデルを再構築します。エンド・ツー・エンドのネットワークを訓練します。

現段階では、エキゾチックな髪型はうまく再現することはできませんが、より大量のヘアデータセットを構築すれば緩和するものとしています。