JP2020095727A - 顔認証の方法、装置、およびコンピュータが読出し可能な非一過性媒体 - Google Patents

顔認証の方法、装置、およびコンピュータが読出し可能な非一過性媒体 Download PDF

Info

Publication number
JP2020095727A
JP2020095727A JP2019225545A JP2019225545A JP2020095727A JP 2020095727 A JP2020095727 A JP 2020095727A JP 2019225545 A JP2019225545 A JP 2019225545A JP 2019225545 A JP2019225545 A JP 2019225545A JP 2020095727 A JP2020095727 A JP 2020095727A
Authority
JP
Japan
Prior art keywords
image
images
user
group
identified
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019225545A
Other languages
English (en)
Other versions
JP6903117B2 (ja
Inventor
イー スン リウ,
Yi-Sung Liu
イー スン リウ,
クオ ティン チャン,
Kuo-Ting Chan
クオ ティン チャン,
マオ ウェイ ツェン,
Mao-Wei Tseng
マオ ウェイ ツェン,
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Giga Byte Technology Co Ltd
Original Assignee
Giga Byte Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Giga Byte Technology Co Ltd filed Critical Giga Byte Technology Co Ltd
Publication of JP2020095727A publication Critical patent/JP2020095727A/ja
Application granted granted Critical
Publication of JP6903117B2 publication Critical patent/JP6903117B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/23Clustering techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2413Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on distances to training or reference patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/761Proximity, similarity or dissimilarity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/50Maintenance of biometric data or enrolment thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Computing Systems (AREA)
  • Evolutionary Biology (AREA)
  • Software Systems (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Medical Informatics (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Collating Specific Patterns (AREA)
  • Image Analysis (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

【課題】識別すべき新たな画像を取得した際、ユーザの登録データ内の特定の画像グループを調節し、その後画像グループ更新処理を実行する顔識別の方法及び装置並びにコンピュータが読出し可能な非一過性媒体を提供する。【解決手段】顔識別方法は、識別すべき画像を取得すること、識別すべき画像が少なくとも一人のユーザの複数の画像グループの一つに属するか否かを判断すること、識別すべき画像が複数の画像グループ内の判断画像グループに属する場合に、当該判断画像グループの画像数が現数よりも少ないか否かを判断すること、当該判断画像ループの画像数が現数よりも少なくない場合に、判断画像グループ内の顔画像の時間パラメータに従って判断画像グループ内の顔画像の一つを削除し、画像グループ更新処理を行うこと、および判断画像グループの画像数が現数よりも少ない場合に、画像グループ更新処理を行うことを含む。【選択図】図2

Description

本開示は、画像識別方法、特に顔識別方法に関する。
画像識別技術の発展に伴い、画像中の顔を識別する技術の応用が益々普及するに至っている。空港身元識別システム、アクセス制御システム、出勤システム、無人店舗、および他の身元認証システムは、顔識別技術と組み合わせることができる。より具体的には、データベース内の登録ユーザの顔画像と比較することで、身元識別システムは、現ユーザ(すなわち、識別されるユーザ)のアクセス権または身元を判断することができる。
しかしながら、ユーザがシステム内に登録された後にユーザの顔が経時的に変化する、または眼鏡をかけたり髭を蓄えるなどによってユーザの容貌が変わると、ユーザは新たな顔画像をシステム内に再登録する必要があり、これは極めて多くの時間とコンピューターリソースを消費してしまうことになる。
本開示の実施形態の一つによると、顔識別方法は、識別すべき画像を取得すること、識別すべき画像が少なくとも一人のユーザの複数の画像グループの一つに属するか否かを判断すること、識別すべき画像が複数の画像グループ内の判断画像グループに属する場合に、当該判断画像グループの画像数が現数よりも少ないか否かを判断すること、当該判断画像ループの画像数が現数よりも少なくない場合に、判断画像グループ内の顔画像の時間パラメータに従って当該判断画像グループ内の顔画像の一つを削除し、画像グループ更新処理を行うこと、および当該判断画像グループの画像数が現数よりも少ない場合に、画像グループ更新処理を行うことを含む。
本開示の実施形態の一つによると、顔識別装置は、撮像装置、データベース、およびプロセッサを含み、プロセッサは、撮像装置とデータベースに電気的に接続される。撮像装置は、識別すべき画像を取得するように構成される。データベースは、少なくとも一人のユーザの複数の画像グループを格納するように構成される。プロセッサは、識別すべき画像が少なくとも一人のユーザの複数の画像グループの一つに属するか否かを判断し、識別すべき画像が複数の画像グループ内の判断画像グループに属する場合に、判断画像グループの画像数が現数よりも少ないか否かを判断し、当該判断画像ループの画像数が現数よりも少なくない場合に、判断画像グループ内の顔画像の時間パラメータに従って当該判断画像グループ内の顔画像の一つを削除して画像グループ更新処理を行い、当該判断画像グループの画像数が現数よりも少ない場合に、画像グループ更新処理を行うように構成される。
本開示の実施形態の一つによると、コンピュータが読出し可能な非一過性媒体はコードを有し、コードは、上記実施形態の顔識別方法が行われるよう、一つ以上のプロセッサによって実行されるように構成される。
本開示は、以下の詳細な記載と添付図面からより完全に理解することができるであろう。図面は説明を目的としているにすぎず、本開示を限定するものでは無い。
本開示の実施形態の一つに係る顔識別装置の機能ブロック図である。 本開示の実施形態の一つに係る顔識別方法のフローチャートである。 本開示の他の実施形態の一つに係る顔識別方法のフローチャートである。 本開示の他の実施形態の一つに係る複数のユーザの登録データの模式図である。 本開示の実施形態の一つに係る顔識別方法の詳細なフローチャートである。
以下の詳細な記載では、説明を目的として、開示される実施形態の完全な理解を提供するために多くの具体的な詳細が示される。しかしながら、一つ以上の実施形態は、これらの具体的な詳細なしでも実施することができることが明らかとなるであろう。他の例では、図面を簡素化するため、公知の構造や装置は模式的に示される。
図1を参照していただくと、図1は、本開示の実施形態の一つに係る顔識別装置1の機能ブロック図である。一つ以上の実施形態において、顔識別装置1はデスクトップコンピュータ、ラップトップコンピュータ、タブレットコンピュータ、携帯装置、または他の電子デバイス内に内蔵することができ、身元識別機能を有するシステム、またはアクセス制御システム、セキュリティーチェックシステム、出勤システム、無人店舗といった顔を識別することで制御されるシステムに応用することができるが、これに限られない。図1に示すように、顔識別装置1は、撮像装置101、プロセッサ103、およびデータベース105を備え、プロセッサ103は撮像装置101とデータベース105に接続される。これらの構成間の接続は、電気的な接続または通信接続とすることができる。
より具体的には、撮像装置101は、例えばカメラ、赤外感熱レンズ、またはその他画像を取得するための装置である。撮像装置101は、一人以上のユーザの一つ以上の顔画像、および認識すべき画像を取り込むように構成される。撮像装置101によって取り込まれた画像は2D画像であってよい。プロセッサ103は、例えば中温演算ユニットであり、一つ以上のグラフィック演算ユニット(GPU)を含むことができる。顔識別のため、プロセッサ103は、撮像装置101によって取り込まれた画像をグループ化および比較することによって処理する。データベース105は、例えばメモリまたはクラウド装置であり、一人以上のユーザの登録データ、およびプロセッサ103によって生成された画像グループ化の結果を格納するように構成される。上述したグループ化と比較、およびその実行結果の説明について、図1と2を参照されたい。
図2は本開示の実施形態の一つに係る顔識別方法のフローチャートである。図2に示されたこの顔識別方法は、前出の実施形態における顔識別装置1に適用することができる。以下、顔識別装置1の操作を用い、図2の実施形態と他の実施形態における顔識別方法を例示的に記述する。
図2に示されるステップS11において、撮像装置101は、引き続く顔識別のため、識別すべき画像を取得する。幾つかの実施形態では、撮像装置101はプロセッサ103によって制御される。例えば、顔識別装置1は距離センサを有することができ、プロセッサ103は、距離センサの検出信号に基づいて物体が顔識別装置1に近いか否かを判断することができ、これにより、識別すべき画像を取得するために画像を取り込むよう、撮像装置101を制御することができる。あるいは、顔識別装置1は温度センサを有することができ、プロセッサ103は、顔識別装置1に近づく熱を持った物体(例えば人間)が存在するか否かを判断することができ、これにより、識別すべき画像を取得するために画像を取り込むよう、撮像装置101を制御することができる。顔識別装置1の撮像装置101の動作頻度または撮像頻度も、上述したセンサに加え、声、タッチ、機械的ボタンによるトリガーなどによって制御してもよいが、これに限られない。
識別すべき画像を取得した後、ステップS12において、プロセッサ103は、識別すべき画像が、少なくとも一人のユーザの複数の画像グループの一つに属するか否かを判断する。より具体的には、データベース105は一人以上のユーザの登録データを格納しており、各ユーザの登録データには、対応するユーザの一つ以上の顔画像をそれぞれ含む複数の画像グループが含まれる。例えば、データベース105は、第1のユーザの登録データと第2のユーザの登録データを格納し、第1のユーザの登録データには、第1のユーザの一つ以上の顔画像をそれぞれ含む複数の第1の画像グループが含まれ、第2のユーザの登録データには、第2のユーザの一つ以上の顔画像をそれぞれ含む複数の第2の画像グループが含まれる。登録方法、および識別すべき画像がどのユーザに帰属されるかを判断する方法の詳細については後述する。
識別すべき画像が複数の画像グループの一つに属しているとプロセッサ103が判断すると、ステップS13に記載されるように、プロセッサ103はさらに、識別すべき画像が属する画像グループ(以下、判断画像グループ)の画像数が現数よりも少ないか否かを判断する。ここで、画像数とは画像グループ中の顔画像の数を意味し、現数とはプロセッサ103の設定パラメータでよく、例えば20、または他の値である。、識別すべき画像がどの画像グループにも属さないとプロセッサ103が判断した場合には、プロセッサ103は、識別すべき新たな画像を取得する、すなわち、ステップS11を再度実行するように撮像装置101を制御してもよい。
判断画像グループの画像数が現数よりも少なくないとプロセッサ103が判断した場合には、ステップS14に記載されているように、プロセッサ103は、各顔画像の時間パラメータに従って判断画像グループ内の複数の顔画像の一部を削除する。時間パラメータとは画像の生成時間を意味することができ、例えば、撮像装置101によって画像が生成される時間であってよい。判断画像グループの画像数が例えば20といった現数よりも少なくないとプロセッサ103が判断した場合には、プロセッサ103は、最も早い生成時間を有する顔画像(すなわち、より古い顔画像)を判断画像グループから削除し、より最近の19個の顔画像を判断画像グループ内に残す。これに対し、プロセッサ103によって生成されたステップS13の判断結果により、判断画像グループの画像数が現数よりも少ない、すなわち20よりも少ないことが示された場合、プロセッサ103は、ステップ15に記載されるように、画像グループ更新処理を直接行う。
ステップ15において、画像グループ更新処理は、判断画像グループが属するユーザの複数の画像グループ内の全ての顔画像をクラスタリングアルゴリズムによって再グループ化することを含む。データベース105が単に一人のユーザの登録データのみを格納している実施形態では、プロセッサ103が画像グループ更新処理を行う際、プロセッサ103は、識別すべき画像とデータベース105内の全ての画像グループ内の全ての顔画像とをクラスタリングアルゴリズムによって再グループ化し、当該ユーザの更新登録データである複数の更新画像グループを生成する。例えば、同一のユーザの複数の画像グループ間の相違は、眼鏡や髭などのユーザによる顔面装飾が異なることに起因する。
さらに、データベース105が複数のユーザ、例えば二人のユーザの登録データを格納する他の実施形態においては、判断画像グループが第1のユーザの複数の第1の画像グループである場合、プロセッサ103は、識別すべき画像と複数の第1の画像グループ全ての中に含まれる全ての顔画像とをクラスタリングアルゴリズムによって再グループ化し、第1のユーザの複数の更新画像グループを第1のユーザの更新登録データとして生成する。判断画像グループが第2のユーザの複数の第2の画像グループの一つである場合、プロセッサ103は上記同様に第2のユーザの複数の登録画像グループを生成する。例えば、クラスタリングアルゴリズムは、教師無し学習クラスタリングアルゴリズムである。
上述した顔識別方法により、識別すべき新たな画像が顔識別装置に入力されるたびに、顔識別装置は、画像グループ更新処理のために古い画像を削除して識別すべき画像を追加するか否かを判断する。したがって、顔識別装置は、使用するにつれて自動的に学習し、ユーザの容貌のゆっくりとした変化に適応することができる。さらに、上述した顔識別方法では、古い画像を削除するか否かの判断は、単に識別すべき画像が属する画像グループに対してのみ行われる。換言すると、登録データに新たに追加された画像は、単に元の顔画像を新たに追加される画像に類似する容貌に置換するだけであり、他の元の顔画像に対し、新たに追加された画像との大きな相違による影響を与える必要がない。したがって、本開示の顔識別方法により、単一のユーザの登録データは、種々の容貌の画像の割合を維持することができる。
既に述べたように、顔識別装置1のデータベース101は、一人以上のユーザの登録データを格納することができる。図1から3を参酌していただくと、図3は本開示の他の実施形態に係る顔識別方法のフローチャートであり、この方法は、図1に示された顔識別装置1に適用される。図3に示すように、顔識別装置1の撮像装置101が識別すべき画像を取得する(すなわち、図2におけるステップS11)前に、ステップS9において、撮像装置101は一人以上のユーザのグループ化されていない複数の画像を取得する。より具体的には、撮像装置101は、制御命令に従い、一人以上のユーザのグループ化されていない画像を取得することができる。制御命令は、撮像装置101に対し、上述したグループ化されていない画像として、特定数(例えば、1スナップ、または連続した20スナップ)の顔画像を取得するためにユーザを撮影するよう命令することができる。制御命令は、声、タッチ、機械的ボタンによるトリガーなどによって生成することができるが、これに限られない。
ステップS10では、プロセッサ103は、前出の実施形態で述べたように、グループ化されていない画像をグループ化し、一人以上のユーザについて複数の画像グループを生成する。ここで、グループ可方法は、例えば、前出の実施形態で述べたクラスタリング方法である。したがって、複数の画像グループの各々は、一つ以上の顔画像を含む。プロセッサ103は、当該一人以上のユーザの登録データとしてデータベース105に複数の画像グループを格納する。例えば、一人のユーザの登録データに含まれる画像グループの数は5までであるが、本開示は画像グループの数を限定するものではない。より具体的には、プロセッサ103は、グループ化されていない各画像の特徴を取り込み、例えばFaceNetモデルによってこの特徴を座標点に変換し、その後グループ化を行い、グループ化の結果をデータベース105に格納する。これによりデータベース105は、そのユーザの複数の顔画像のそれぞれの座標データ(当該座標点)を格納する。上記実施形態では、ユーザの登録データの確立が記述される。他の実施形態では、顔識別装置1はまた、複数のユーザから登録要求を受け、その後各ユーザについて上記ステップS9とS10を実行して各ユーザの登録データを生成し、登録データをデータベース105に格納してもよい。
上述した登録データの説明のため、図4を参照されたい。ここで、図4は本開示の実施形態に係る、複数のユーザの登録データの模式図である。図4は、データベース105に格納された二人のユーザの登録データUSER_AとUSER_Bを例示的に示している。他の実施形態では、データベース105は、単一のユーザのみ、または二人以上のユーザの登録データを格納できてもよい。図4に示すように、第1のユーザの登録データUSER_Aは、複数の第1の画像グループA_G1からA_Gnを含み、第2のユーザの登録データUSER_Bは、複数の第2の画像グループB_G1からB_Gmを含む。一つの実施形態では、nとmは5よりも多くない、すなわち、一人のユーザの登録データは、5以下の画像グループを含む。複数の第1の画像グループA_G1からA_Gnの各々は、第1のユーザの一つ以上の顔画像を含み、複数の第2の画像グループB_G1からB_Gmの各々は、第2のユーザの一つ以上の顔画像を含む。例えば、この図に示すように、第1の画像グループA_G1は、顔画像A_P11からA_P1pを含み、第1の画像グループA_G2は、顔画像A_P21からA_P2qを含み、第2の画像グループB_G1は、顔画像B_P11からB_P1rを含み、第2の画像グループB_G2は、顔画像B_P21からB_P2sを含む。幾つかの実施形態では、p、q、r、およびsの各々は20よりも大きくなく、第2の画像グループB_Gmに示されるように、画像グループは一つの顔画像のみを含んでもよい。一つの実施形態では、上記複数の画像グループの各々の顔画像は、座標形式でデータベース105に格納することができ、顔画像の座標は、プロセッサ103によって顔画像の特徴を取得、変換することで得ることができる。
図2に示す顔識別方法における判断ステップS12をさらに説明するため、図1、4、および5を参照されたい。ここで、図5は、本開示の実施形態の一つに係る顔識別方法の詳細なフローチャートである。ステップS121において、プロセッサ103は、データベース105内の複数の画像グループの各々の距離平均パラメータを計算する。この距離平均パラメータとは、識別すべき画像の一つのポイントと対応する画像グループにおける各顔画像の一つのポイントの間の距離の平均値を表し、これらのポイントは同一の座標系内に存在する。さらなる説明のために図4の実施形態を用いると、プロセッサ103は、識別すべき画像の特徴を取得し、この特徴を(例えばFaceNetモデルにより)データベース105内に格納された顔画像のポイントが位置する座標系内のポイントに変換し、その後、識別すべき画像の点とデータベース105内の顔画像A_P11からA_P1p、A_P21からA_P2q、B_P11からB_P1r、およびB_P21からB_P2sの各々のポイントとの距離(例えばユークリッド距離)を計算する。その後、プロセッサ103は、第1と第2の画像グループA_G1からA_GnおよびB_G1からB_Gmのそれぞれに対し、距離平均パラメータの計算を実行する。例えば、プロセッサ103は、第1の画像グループA_G1内の顔画像A_P11からA_P1pについてp個の距離を取得可能であり、プロセッサ103は、第1の画像グループA_G1の距離平均パラメータとしてこれらのp個の距離の平均値を計算する。他の画像グループの距離平均パラメータについても同様である。
ステップS122では、プロセッサ103は、全ての画像グループの距離平均パラメータの最小値(以下、最小距離平均パラメータと記す)が閾値距離よりも小さいか否かを判断する。閾値距離はプロセッサ103の設定パラメータであり、例えば0と1の間、好ましくは0.3に設定される。画像グループの距離平均パラメータが小さいほど、識別すべき画像と画像グループ間の相関が高い。ステップS123では、最小距離平均パラメータが閾値距離よりも小さい場合、プロセッサ103は、識別すべき画像が、最小距離平均パラメータに対応する画像グループに属すると判断する、すなわち、前出の実施形態で述べたように、最小距離平均パラメータに対応する画像グループが判断画像グループであると決定される。これとは反対に、ステップ124において、最小距離平均パラメータが閾値距離よりも小さくない場合、プロセッサ103は、識別すべき画像がどの画像グループにも属さないと判断し、撮像装置101を制御して識別すべき新たな画像を再取得する。
前出の実施形態で述べた顔識別方法は、コード型式を取ることができ、コンピュータ、タブレット、携帯電話などの計算装置が読取り可能な、コンピュータが読取り可能な非一過性媒体内に格納することができる。例えば、コンピュータが読取り可能な非一過性媒体は、CD、フラッシュドライブ、メモリーカード、クラウドサーバのハードドライブなどである。コンピュータが読取り可能な非一過性の媒体から計算装置がコードを読み込む時に、計算装置は上記一つ以上の実施形態で記述された顔識別方法の操作を実行してもよい。さらに、前出の実施形態で記載した顔識別方法における更新方法は、識別すべきデータに係る元の登録データを調節するというコンセプト、および細分類のために、識別すべきデータを元の登録データに追加するというコンセプトを有するものであるが、この更新方法も、指紋、掌紋、虹彩、網膜、音声などの他の生体模倣型技術に適用することができる点に注目すべきである。
以上のことから、本開示で提供される顔識別の方法や装置、コンピュータが読出し可能な非一過性媒体は、識別すべき新たな画像を取得した際、ユーザの登録データ内の特定の画像グループを調節し、その後画像グループ更新処理を実行する。ここで、識別すべき新たな画像は、この特定の画像グループに属する。したがって、本開示によって提供される顔識別の方法や装置、コンピュータが読出し可能な非一過性媒体は、ユーザの容貌内のゆっくりとした変化に適合するために、使用するにつれて自動的に学習し、そして顔識別の精度と速度を改善することができる。本開示において提供される顔識別の方法や装置、コンピュータが読出し可能な非一過性媒体は、識別すべき画像が属する画像グループに対して単に画像削除を実行するだけであるため、一人のユーザの登録データは、様々な容貌の画像の割合を維持することができ、したがって、ユーザが外部アクセサリーを纏った場合でも、本開示において提供される顔識別の方法や装置、コンピュータが読出し可能な非一過性媒体は、依然として良好な識別精度を有することができる。

Claims (16)

  1. 識別すべき画像を取得すること、
    前記識別すべき画像が少なくとも一人のユーザの複数の画像グループの一つに属するか否かを判断すること、
    前記識別すべき画像が前記複数の画像グループ内の判断画像グループに属する場合、前記判断画像グループの画像数が現数よりも少ないか否かを判断すること、
    前記判断画像グループの前記画像数が前記現数よりも少なくない場合、前記判断画像グループ内の複数の顔画像の時間パラメータに従って前記判断画像グループ内の複数の顔画像の一つを削除し、画像グループ更新処理を行うこと、および
    前記判断画像グループの前記画像数が前記現数よりも少ない場合、前記画像グループ更新処理を行うことを含む、顔識別方法。
  2. 前記画像グループ更新処理は、前記識別すべき画像と、前記判断画像グループが属する前記少なくとも一人のユーザの前記複数の画像グループの複数の顔画像の全てとをクラスタリングアルゴリズムに従って再グループ化し、前記判断画像グループが属する前記少なくとも一人のユーザの複数の更新画像グループを生成することを含む、請求項1に記載の顔識別方法。
  3. 前記少なくとも一人のユーザは、第1のユーザと第2のユーザを含み、前記複数の画像グループは、前記第1のユーザの複数の第1の画像グループ、および前記第2のユーザの複数の第2の画像グルプ―を含み、前記画像グループ更新処理のステップは、
    前記判断画像グループが前記複数の第1の画像グループの一つに属する場合、前記識別すべき画像と、前記複数の第1の画像グループ内の全ての顔画像とをクラスタリングアルゴリズムに従って再グループ化して前記第1のユーザの前記更新画像グループを生成すること、および
    前記判断画像グループが前記複数の第2の画像グループの一つに属する場合、前記識別すべき画像と、前記複数の第2の画像グループ内の全ての顔画像とをクラスタリングアルゴリズムに従って再グループ化して前記第2のユーザの前記更新画像グループを生成することを含む、請求項2に記載の顔識別方法。
  4. 前記識別すべき画像が前記少なくとも一人のユーザの前記複数の画像グループの前記一つに属するか否かを判断するステップは、
    前記複数の画像グループのそれぞれの距離平均パラメータを計算すること、
    前記距離平均パラメータ中の最小距離平均パラメータが閾値距離よりも小さいか否かを判断すること、および
    前記最小距離平均パラメータが前記閾値距離よりも小さい場合、前記識別すべき画像が前記最小距離平均パラメータに対応する画像グループに属すると判断することを含み、
    前記距離平均パラメータの各々は、識別すべき画像のポイントと対応する画像グループにおける一つ以上の顔画像の各々のポイントとの間の距離の平均値を表し、前記ポイントは一つの座標系内に存在する、請求項1に記載の顔識別方法。
  5. 前記識別すべき画像のポイントと前記一つ以上の顔画像の各々の前記ポイントとの間の距離は、ユークリッド距離に属する、請求項4に記載の顔識別方法。
  6. 前記識別すべき画像を取得するステップの前に、
    前記少なくとも一人のユーザのグループ化されていない複数の画像を取得すること、および
    前記グループ化されていない複数の画像をグループ化して前記少なくとも一人のユーザの前記複数の画像グループを生成することをさらに含む、請求項1に記載の顔識別方法。
  7. 前記時間パラメータの各々は、対応する前記顔画像が生成される時の時間と関連付けられる、請求項1に記載の顔識別方法。
  8. 識別すべき画像を取得するように構成される撮像装置、
    少なくとも一人のユーザの複数の画像グループを格納するように構成されるデータベース、
    前記撮像装置と前記データベースと電気的に接続され、識別すべき画像が少なくとも一人のユーザの複数の画像グループの一つに属するか否かを判断し、識別すべき画像が複数の画像グループ内の判断画像グループに属する場合に、判断画像グループの画像数が現数よりも少ないか否かを判断し、当該判断画像ループの画像数が現数よりも少なくない場合に、判断画像グループ内の顔画像の時間パラメータに従って前記判断画像グループ内の顔画像の一つを削除して画像グループ更新処理を行い、前記判断画像グループの画像数が現数よりも少ない場合に、画像グループ更新処理を行うように構成されるプロセッサを含む、顔識別装置。
  9. 前記画像グループ更新処理は、前記識別すべき画像と、前記判断画像グループが属する前記少なくとも一人のユーザの前記複数の画像グループの複数の顔画像の全てとをクラスタリングアルゴリズムに従って再グループ化し、前記判断画像グループが属する前記少なくとも一人のユーザの複数の更新画像グループを生成することを含む、請求項8に記載の顔識別装置。
  10. コードを含み、前記コードは顔識別方法を実行するよう一つ以上のプロセッサによって実行され、前記顔識別方法は、
    識別すべき画像を取得すること、
    前記識別すべき画像が少なくとも一人のユーザの複数の画像グループの一つに属するか否かを判断すること、
    前記識別すべき画像が前記複数の画像グループ内の判断画像グループに属する場合、前記判断画像グループの画像数が現数よりも少ないか否かを判断すること、
    前記判断画像グループの前記画像数が前記現数よりも少なくない場合、前記判断画像グループ内の複数の顔画像の時間パラメータに従って前記判断画像グループ内の複数の顔画像の一つを削除し、画像グループ更新処理を行うこと、および
    前記判断画像グループの前記画像数が前記現数よりも少ない場合、前記画像グループ更新処理を行うことを含む、コンピュータが読出し可能な非一過性媒体。
  11. 前記画像グループ更新処理は、前記識別すべき画像と、前記判断画像グループが属する前記少なくとも一人のユーザの前記複数の画像グループの複数の顔画像の全てとをクラスタリングアルゴリズムに従って再グループ化し、前記判断画像グループが属する前記少なくとも一人のユーザの複数の更新画像グループを生成することを含む、請求項10に記載のコンピュータが読出し可能な非一過性媒体。
  12. 前記少なくとも一人のユーザは、第1のユーザと第2のユーザを含み、前記複数の画像グループは、前記第1のユーザの複数の第1の画像グループ、および前記第2のユーザの複数の第2の画像グルプ―を含み、前記画像グループ更新処理のステップは、
    前記判断画像グループが前記複数の第1の画像グループの一つに属する場合、前記識別すべき画像と、前記複数の第1の画像グループ内の全ての顔画像とをクラスタリングアルゴリズムに従って再グループ化して前記第1のユーザの前記更新画像グループを生成すること、および
    前記判断画像グループが前記複数の第2の画像グループの一つに属する場合、前記識別すべき画像と、前記複数の第2の画像グループ内の全ての顔画像とをクラスタリングアルゴリズムに従って再グループ化して前記第2のユーザの前記更新画像グループを生成することを含む、請求項11に記載のコンピュータが読出し可能な非一過性媒体。
  13. 前記識別すべき画像が前記少なくとも一人のユーザの前記複数の画像グループの前記一つに属するか否かを判断するステップは、
    前記複数の画像グループのそれぞれの距離平均パラメータを計算すること、
    前記距離平均パラメータ中の最小距離平均パラメータが閾値距離よりも小さいか否かを判断すること、および
    前記最小距離平均パラメータが前記閾値距離よりも小さい場合、前記識別すべき画像が前記最小距離平均パラメータに対応する画像グループに属すると判断することを含み、
    前記距離平均パラメータの各々は、識別すべき画像のポイントと対応する画像グループにおける一つ以上の顔画像の各々のポイントとの間の距離の平均値を表し、前記ポイントは一つの座標系内に存在する、請求項10に記載のコンピュータが読出し可能な非一過性媒体。
  14. 前記識別すべき画像のポイントと前記一つ以上の顔画像の各々の前記ポイントとの間の距離は、ユークリッド距離に属する、請求項13に記載のコンピュータが読出し可能な非一過性媒体。
  15. 前記識別すべき画像を取得するステップの前に、
    前記少なくとも一人のユーザのグループ化されていない複数の画像を取得すること、および
    前記グループ化されていない複数の画像をグループ化して前記少なくとも一人のユーザの前記複数の画像グループを生成することをさらに含む、請求項10に記載のコンピュータが読出し可能な非一過性媒体。
  16. 前記時間パラメータの各々は、対応する前記顔画像が生成される時の時間と関連付けられる、請求項10に記載のコンピュータが読出し可能な非一過性媒体。
JP2019225545A 2018-12-14 2019-12-13 顔識別方法、顔識別装置、およびコンピュータが読出し可能な非一時的媒体 Active JP6903117B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
TW107145176A TWI682329B (zh) 2018-12-14 2018-12-14 臉部辨識方法、裝置及計算機可讀取媒體
TW107145176 2018-12-14

Publications (2)

Publication Number Publication Date
JP2020095727A true JP2020095727A (ja) 2020-06-18
JP6903117B2 JP6903117B2 (ja) 2021-07-14

Family

ID=68887282

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019225545A Active JP6903117B2 (ja) 2018-12-14 2019-12-13 顔識別方法、顔識別装置、およびコンピュータが読出し可能な非一時的媒体

Country Status (4)

Country Link
US (1) US11651622B2 (ja)
EP (1) EP3667563A1 (ja)
JP (1) JP6903117B2 (ja)
TW (1) TWI682329B (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3099278B1 (fr) * 2019-07-22 2023-08-04 Bull Sas Procédé de surveillance vidéo du franchissement d’une ligne par des personnes, programme d’ordinateur et dispositif correspondants
CN112818909A (zh) * 2021-02-22 2021-05-18 Oppo广东移动通信有限公司 图像更新方法、装置、电子设备及计算机可读介质
US11921831B2 (en) * 2021-03-12 2024-03-05 Intellivision Technologies Corp Enrollment system with continuous learning and confirmation

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002259980A (ja) * 2001-03-05 2002-09-13 Omron Corp 生体照合装置、生体照合システム、生体照合方法および登録データ更新方法
JP2014526755A (ja) * 2011-09-27 2014-10-06 インテル・コーポレーション メモリが制限された環境における顔認識性能を改善するべく基準顔データベースを管理するための方法、装置およびコンピュータ可読記録媒体

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7551755B1 (en) * 2004-01-22 2009-06-23 Fotonation Vision Limited Classification and organization of consumer digital images using workflow, and face detection and recognition
GB2442504B (en) * 2006-11-17 2008-10-15 Internet Web Technology Ltd Face recognition system, security system comprising same and method for operating same
WO2012140315A1 (en) * 2011-04-15 2012-10-18 Nokia Corporation Method, apparatus and computer program product for providing incremental clustering of faces in digital images
US9239967B2 (en) * 2011-07-29 2016-01-19 Hewlett-Packard Development Company, L.P. Incremental image clustering
TWI469061B (zh) * 2012-12-19 2015-01-11 Nat Univ Chung Hsing Applies to eye recognition methods and identification systems
US9554100B2 (en) * 2014-09-30 2017-01-24 Qualcomm Incorporated Low-power always-on face detection, tracking, recognition and/or analysis using events-based vision sensor
TWI544358B (zh) * 2015-01-20 2016-08-01 崑山科技大學 結合基於秘密分持臉部辨識的射頻辨識門禁方法及系統以及適用於其之射頻辨識標籤
US10410086B2 (en) * 2017-05-30 2019-09-10 Google Llc Systems and methods of person recognition in video streams
US10025950B1 (en) * 2017-09-17 2018-07-17 Everalbum, Inc Systems and methods for image recognition

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002259980A (ja) * 2001-03-05 2002-09-13 Omron Corp 生体照合装置、生体照合システム、生体照合方法および登録データ更新方法
JP2014526755A (ja) * 2011-09-27 2014-10-06 インテル・コーポレーション メモリが制限された環境における顔認識性能を改善するべく基準顔データベースを管理するための方法、装置およびコンピュータ可読記録媒体

Also Published As

Publication number Publication date
TW202022700A (zh) 2020-06-16
TWI682329B (zh) 2020-01-11
EP3667563A1 (en) 2020-06-17
JP6903117B2 (ja) 2021-07-14
US11651622B2 (en) 2023-05-16
US20200193201A1 (en) 2020-06-18

Similar Documents

Publication Publication Date Title
TWI751161B (zh) 終端設備、智慧型手機、基於臉部識別的認證方法和系統
CN108062526B (zh) 一种人体姿态估计方法及移动终端
JP6903117B2 (ja) 顔識別方法、顔識別装置、およびコンピュータが読出し可能な非一時的媒体
US9690998B2 (en) Facial spoofing detection in image based biometrics
CN110059652B (zh) 人脸图像处理方法、装置及存储介质
WO2015128961A1 (ja) 顔認証システム
CN108985220B (zh) 一种人脸图像处理方法、装置及存储介质
WO2018153294A1 (zh) 人脸跟踪方法、存储介质及终端设备
WO2019024717A1 (zh) 防伪处理方法及相关产品
WO2015186436A1 (ja) 画像処理装置、画像処理方法、および、画像処理プログラム
WO2012089902A1 (en) Method, apparatus, and computer program product for image clustering
US20180089519A1 (en) Multi-modal user authentication
CN109272473B (zh) 一种图像处理方法及移动终端
US10764563B2 (en) 3D enhanced image correction
KR102558741B1 (ko) 사용자 등록 장치 및 방법
KR20180138002A (ko) 지문 인증 방법 및 장치
CN110008892A (zh) 一种基于四连指指纹图像采集的指纹核验方法及装置
CN110807391A (zh) 基于视觉的人-无人机交互用人体姿态指令识别方法
CN112052771A (zh) 一种对象重识别方法及装置
WO2019024718A1 (zh) 防伪处理方法、防伪处理装置及电子设备
KR102094953B1 (ko) 시선 추적 방법 및 이를 수행하기 위한 단말
CN111695502A (zh) 用于人脸识别的特征更新方法、装置和计算机设备
KR101656212B1 (ko) 손동작 인식을 이용한 접근 제어 시스템, 이를 위한 방법 및 이 방법이 기록된 컴퓨터 판독 가능한 기록매체
CN109711287B (zh) 人脸采集方法及相关产品
CN110135329B (zh) 从视频中提取姿势的方法、装置、设备及存储介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20191218

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201222

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210319

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210406

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210514

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210601

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210622

R150 Certificate of patent or registration of utility model

Ref document number: 6903117

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150