JP2020523694A5 - - Google Patents

Claims (14)

1. 顔画像に対してエッジ検出を行い、顔特徴線画像を取得することと、
   前記顔画像と前記顔特徴線画像とを融合し、顔特徴点の位置情報を取得することと、を含むことを特徴とする顔特徴点の測位方法。
2. 前記顔画像と前記顔特徴線画像を融合する前に、
   前記顔特徴線画像に対して有効性判別を行い、最適化された顔特徴線画像を取得することを更に含み、
   前記顔画像と前記顔特徴線画像とを融合し、顔特徴点の位置情報を取得することは、
   前記顔画像と前記最適化された顔特徴線画像とを融合し、顔特徴点の位置情報を取得することを含むことを特徴とする請求項１に記載の方法。
3. 前記顔画像に対してエッジ検出を行い、顔特徴線画像を取得することは、
   前記顔画像の特徴線の特徴を抽出し、特徴線画像を取得することと、
   前記特徴線画像を最適化し、前記顔特徴線画像を取得することと、を含むことを特徴とする請求項１に記載の方法。
4. 前記顔画像の特徴線の特徴を抽出し、特徴線画像を取得することは、
   前記顔画像に対して、畳み込み、残差演算、ダウンサンプリング及び残差演算の操作を順次に実行し、前記特徴線画像を取得することを含むことを特徴とする請求項３に記載の方法。
5. 前記特徴線画像を最適化し、前記顔特徴線画像を取得することは、
   前記特徴線画像を少なくとも一つの段階の最適化ネットワークを経させて、前記顔特徴線画像を取得することであって、各段階の前記最適化ネットワークが、残差演算を実現するための砂時計型ネットワーク及び特徴線情報を伝送するための情報伝送層を含むことを含むことを特徴とする請求項３に記載の方法。
6. 前記顔画像と前記顔特徴線画像とを融合し、顔特徴点の位置情報を取得することは、
   前記顔画像に対して入力画像融合を行い、第１の融合画像を取得することと、
   前記第１の融合画像と前記顔特徴線画像に対して少なくとも一つの段階のエッジ画像融合を行い、第２の融合画像を取得することと、
   前記第２の融合画像をマッピングし、特徴点の位置ベクトルを取得し、前記位置ベクトルを顔特徴点の位置情報とすることと、を含むことを特徴とする請求項１に記載の方法。
7. 前記第１の融合画像と前記顔特徴線画像に対して少なくとも一つの段階のエッジ画像融合を行う前に、
   前記第１の融合画像に対して、畳み込み、ダウンサンプリング及び残差演算を順次に含む最適化処理を行い、最適化された第１の融合画像を取得することを更に含むことを特徴とする請求項６に記載の方法。
8. 前記顔画像に対して入力画像融合を行い、第１の融合画像を取得することは、
   前記顔画像を、個々の事前定義された特徴線画像と画素ごとに乗算し、個々の事前定義された特徴線画像に一対一に対応する複数の境界特徴を取得することと、
   複数の前記境界特徴と前記顔画像とを重ね合わせ、第１の融合画像を取得することと、を含むことを特徴とする請求項６に記載の方法。
9. 前記第１の融合画像と前記顔特徴線画像に対して少なくとも一つの段階のエッジ画像融合を行い、第２の融合画像を取得することは、
   前記第１の融合画像と前記顔特徴線画像とを重ね合わせ、第３の融合画像を取得することと、
   前記第３の融合画像に対して残差演算を行い、前記顔特徴線画像と同じサイズの第４の融合画像を取得することと、
   前記第１の融合画像を前記第４の融合画像を画素ごとに乗算し、第５の融合画像を取得することと、
   前記第１の融合画像と前記第５の融合画像とを重ね合わせ、前記第２の融合画像を取得することと、を含むことを特徴とする請求項６に記載の方法。
10. 各段階の前記境界画像融合の間に、各段階の境界融合の結果に対して残差演算を行うことを更に含むことを特徴とする請求項６に記載の方法。
11. 前記第２の融合画像をマッピングし、特徴点の位置ベクトルを取得することは、
    前記第２の融合画像に対して、残差演算及び全結合操作を順次に行い、前記特徴点の位置ベクトルを取得することを含むことを特徴とする請求項６に記載の方法。
12. 請求項１〜１１のいずれか１項に記載の顔特徴点の測位方法を実行するように構成されることを特徴とする顔特徴点の測位装置。
13. プロセッサーと、
    プロセッサーが実行可能なコマンドを記憶するように構成されるメモリと、を含み、
    前記プロセッサーが請求項１〜１１のいずれか１項に記載の方法を実行するように配置される電子デバイス。
14. コンピュータープログラムコマンドが記憶されたコンピューター可読記憶媒体であって、
    プロセッサーによって前記コンピュータープログラムコマンドを実行する時に請求項１〜１１のいずれか１項に記載の方法を実現するコンピューター可読記憶媒体。