本16 Reconstruction-Based Disentanglement for Pose-invariant Face Recognition

これは本 Advent Calendar 2017 - Adventar 16日目の記事です。

本日も本ではありません。 [1702.03041] Reconstruction-Based Disentanglement for Pose-invariant Face Recognition になります。

著者はXi Peng, Xiang Yu, Kihyuk Sohn, Dimitris N. Metaxas, Manmohan Chandraker.

どんなもの?

Face Recognitionのタスクでは正面から見た顔と真横から見た顔が同一人物かを判定するのが難しい。Disetangleという手法を提案してSOTA。

先行研究とくらべて何が違う?

従来の研究では二つの視点から見た画像に共通する特徴を見つけるCanonical Correlation Analysis(CCA)などが用いられていた。 本研究では違う角度の顔の特徴を近づけるcross reconstructionというlossを利用した。

研究のキモ

  1. 正面画像から非正面画像の生成
  2. identity、pose, lmkの3つに分けたembedding
  3. 特徴量の再構成

検証

MultiPIE、300WLP、CFPを使って検証

議論

データセットによって大きく精度に差が出る。

次に読むべき論文