JP7196932B2 - 情報処理装置、情報処理方法、およびプログラム - Google Patents

情報処理装置、情報処理方法、およびプログラム Download PDF

Info

Publication number
JP7196932B2
JP7196932B2 JP2020558776A JP2020558776A JP7196932B2 JP 7196932 B2 JP7196932 B2 JP 7196932B2 JP 2020558776 A JP2020558776 A JP 2020558776A JP 2020558776 A JP2020558776 A JP 2020558776A JP 7196932 B2 JP7196932 B2 JP 7196932B2
Authority
JP
Japan
Prior art keywords
person
feature information
information
image
extracted
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020558776A
Other languages
English (en)
Other versions
JPWO2020115890A1 (ja
Inventor
伸明 川瀬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of JPWO2020115890A1 publication Critical patent/JPWO2020115890A1/ja
Application granted granted Critical
Publication of JP7196932B2 publication Critical patent/JP7196932B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G06V20/53—Recognition of crowd images, e.g. recognition of crowd congestion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Collating Specific Patterns (AREA)

Description

本発明は、情報処理システム、情報処理装置、情報処理方法、およびプログラムに関し、特に、画像認識処理を行う情報処理システム、情報処理装置、情報処理方法、およびプログラムに関する。
特許文献１には、ウォークスルー型の顔画像認証装置の一例が記載されている。特許文献１に記載の顔画像認識装置は、異なる時点で撮像された複数の顔領域画像に含まれる複数の顔（登場人物）について認証候補人物を特定し、認証候補人物と顔画像との類似度の高さを示す指標を用いて認証用の閾値を決定する。ここで用いられる指標は、（類似度が最高となったフレームの割合である１位ヒット率）である。そして、一位ヒット率が高い程、認証用閾値を低くする。そして、表情、顔の向きの変動等により一時的に他人との類似度が高くなったフレームがあったとしても１位ヒット率が低ければ認証用閾値は低くならない。
また、特許文献２に記載された人物認識装置は、第１のカメラで撮像された第１画像と、第２のカメラで撮像された第２画像と、からそれぞれ通行者の顔を検出する。ここで、第１のカメラは通行者に認識されやすい状態で設置されており、第２のカメラは通行者に認識されにくい状態で設置されている。そして、両方の検出結果に基づいて通行者を分類し、分類結果に基づいて顔の照合処理に用いる認証用閾値を調整するとともに、認証結果に基づく出力処理内容を決定する。
特許文献３に記載された人物判定装置および人物検索追跡装置は、離れたフレームや異なるカメラにより得られる人物画像シーケンスから、人物の歩行状態を検出し、歩行状態に基づいて、異なる画像シーケンスに含まれる人物が同一であるか否かを判定する。これにより、人物の追跡は可能になっている。また、特許文献４には、認証対象者の歩幅、身長、体重、または歩行状態（歩幅、歩調）を検出し、認証情報と照合し、個人認証を行うことが記載されている。特許文献５には、ゲートを通過する人の歩容（歩幅、姿勢、腕の振り方など）に基づいて認証処理を行い、ゲートの解錠施錠を制御するゲート管理システムが記載されている。
特開２０１３－１０１５５１号公報 特開２００８－１０８２４３号公報 国際公開第２００６／０１３７６５号 特開２００９－１０４５２６号公報 特開２０１８－７７５５２号公報
本発明者は、画像処理を用いて人物を追跡するための新たな手法を検討した。すなわち本発明が目的とするところは、画像処理を用いて人物を追跡するための新たな手法を提供することにある。
本発明の各側面では、上述した課題を解決するために、それぞれ以下の構成を採用する。
第一の側面は、情報処理装置に関する。
第一の側面に係る第１の情報処理装置は、
第１画像に含まれる人物から抽出される第１の特徴情報と、記憶手段が記憶する第１の登録特徴情報とを照合する照合手段と、
前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記照合手段による照合結果が不一致だった場合、当該人物から抽出される第２の特徴情報を第２の登録特徴情報として前記記憶手段に記憶させる登録手段と、を有し、
前記照合手段は、第２画像に含まれる人物から抽出された前記第２の特徴情報と前記記憶手段が記憶する前記第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定する。
第一の側面に係る第２の情報処理装置は、
第１画像に含まれる人物から抽出される第１の特徴情報と、記憶手段が記憶する第１の登録特徴情報とを照合する照合手段と、
前記人物から抽出される第２の特徴情報を第２の登録特徴情報として前記記憶手段に記憶させる登録手段と、を有し、
前記照合手段は、第２画像に含まれる人物から抽出された第２の特徴情報と前記記憶手段が記憶する第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定し、
前記照合手段は、前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記第１画像に含まれる人物から抽出される前記第１の特徴情報と前記第１の登録特徴情報との照合結果が不一致だった場合、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶手段が記憶する前記第１の登録特徴情報とを照合する。
第二の側面は、少なくとも１つのコンピュータにより実行される情報処理方法に関する。
第二の側面に係る第１の情報処理方法は、
情報処理装置が、
第１画像に含まれる人物から抽出される第１の特徴情報と、記憶装置が記憶する第１の登録特徴情報とを照合し、
前記人物から前記第１の特徴情報を抽出できなかった場合、または、照合結果が不一致だった場合、当該人物から抽出される第２の特徴情報を第２の登録特徴情報として前記記憶装置に記憶させ、
第２画像に含まれる人物から抽出された前記第２の特徴情報と前記記憶装置が記憶する前記第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定する、ことを含む。
第二の側面に係る第２の情報処理方法は、
情報処理装置が、
第１画像に含まれる人物から抽出される第１の特徴情報と、記憶装置が記憶する第１の登録特徴情報とを照合し、
前記人物から抽出される第２の特徴情報を第２の登録特徴情報として前記記憶装置に記憶させ、
第２画像に含まれる人物から抽出された第２の特徴情報と前記記憶装置が記憶する第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定し、
前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記第１画像に含まれる人物から抽出される前記第１の特徴情報と前記第１の登録特徴情報との照合結果が不一致だった場合、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶装置が記憶する前記第１の登録特徴情報とを照合する、ことを含む。
なお、本発明の他の側面としては、上記第二の側面の方法を少なくとも１つのコンピュータに実行させるプログラムであってもよいし、このようなプログラムを記録したコンピュータが読み取り可能な記録媒体であってもよい。この記録媒体は、非一時的な有形の媒体を含む。
このコンピュータプログラムは、コンピュータにより実行されたとき、コンピュータに、情報処理装置上で、その情報処理方法を実施させるコンピュータプログラムコードを含む。
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。
また、本発明の各種の構成要素は、必ずしも個々に独立した存在である必要はなく、複数の構成要素が一個の部材として形成されていること、一つの構成要素が複数の部材で形成されていること、ある構成要素が他の構成要素の一部であること、ある構成要素の一部と他の構成要素の一部とが重複していること、等でもよい。
また、本発明の方法およびコンピュータプログラムには複数の手順を順番に記載してあるが、その記載の順番は複数の手順を実行する順番を限定するものではない。このため、本発明の方法およびコンピュータプログラムを実施するときには、その複数の手順の順番は内容的に支障のない範囲で変更することができる。
さらに、本発明の方法およびコンピュータプログラムの複数の手順は個々に相違するタイミングで実行されることに限定されない。このため、ある手順の実行中に他の手順が発生すること、ある手順の実行タイミングと他の手順の実行タイミングとの一部ないし全部が重複していること、等でもよい。
上記各側面によれば、画像処理を用いて注意すべき人物を検出するための新たな手法を提供できる。
上述した目的、およびその他の目的、特徴および利点は、以下に述べる好適な実施の形態、およびそれに付随する以下の図面によってさらに明らかになる。
本発明の第１の実施の形態に係る情報処理装置の論理的な構成を示す機能ブロック図である。 図１の記憶装置の第２記憶部のデータ構造の一例を示す図である。 図１の情報処理装置の動作の一例を示すフローチャートである。 本発明の第２の実施の形態の情報処理装置の記憶装置の第２記憶部のデータ構造の一例を示す図である。 本発明の第２の実施の形態の情報処理装置の動作において図３のステップＳ１２５以降の手順の一例を示すフローチャートである。 本発明の第２の実施の形態の情報処理装置の動作において図５のステップＳ１３５以降の手順の例を示すフローチャートである。 本発明の第３の実施の形態に係る情報処理装置の構成を論理的に示す機能ブロック図である。 図７の情報処理装置の出力部の情報出力のタイミングを説明するための図である。 図７の記憶装置の第２記憶部のデータ構造の一例を示す図である。 本発明の第４の実施の形態の情報処理装置の動作の一例を示すフローチャートである。 本発明の第５の実施の形態の情報処理装置の動作の一例を示すフローチャートである。 本発明の第６の実施の形態の情報処理装置の動作の一例を示すフローチャートである。 各実施形態の情報処理装置を実現するコンピュータの構成の一例を示す図である。 所定エリア内を撮像したカメラの映像の表示画面の例を示す図である。 実施例の記憶装置の第２記憶部に登録されたデータの変化を示す図である。 実施例の記憶装置の第２記憶部の他のデータ構造の例を示す図である。 ある通路に沿って４台のカメラが設置されている場所の状況を模式的に示した図である。 実施例の記憶装置の第２記憶部に登録されたデータの変化を示す図である。
以下、本発明の実施の形態について、図面を用いて説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。
また、本明細書の各図において、本発明の本質に関わらない部分の構成については省略してあり、図示されていない。
（第１の実施の形態）
図１は、本発明の実施の形態に係る情報処理装置１００の論理的な構成を示す機能ブロック図である。情報処理装置１００は、所定のエリア内で撮像画像により認証されない人物を追跡するものである。
情報処理装置１００は、照合部１０２と、登録部１０４と、を備える。本図に示す例において、情報処理装置１００は、さらに記憶装置１１０を含む。記憶装置１１０は、第１記憶部１１１（例えば顔特徴情報データベース）および第２記憶部１１２を含む。記憶装置１１０は、複数の物理的な記憶媒体や、複数のデータベースによって実現されてもよい。また、第１記憶部１１１および第２記憶部１１２は、物理的に同一の装置に含まれてもよいし、物理的に互いに異なる装置に含まれていてもよい。また、第１記憶部１１１および第２記憶部１１２は、情報処理装置１００の本体と一体であってもよいし、別体であってもよい。
照合部１０２は、第１画像２０に含まれる人物から抽出される第１の特徴情報と、記憶装置１１０が記憶する第１の登録特徴情報とを照合する。
登録部１０４は、人物から第１の特徴情報を抽出できなかった場合、または、照合部１０２による照合結果が不一致だった場合、当該人物から抽出される第２の特徴情報を第２の登録特徴情報として記憶装置１１０に記憶させる。言い換えると、登録部１０４は、当該人物の第２の特徴情報を記憶装置１１０に登録する。
そして、照合部１０２は、第２画像２２に含まれる人物から抽出された第２の特徴情報と記憶装置１１０が記憶する第２の登録特徴情報とを照合することで第２画像２２から第２の登録特徴情報に対応する人物を特定する。以下、第１の登録特徴情報を用いた照合処理を「個人特定処理」とも呼び、第２の登録特徴情報を用いた照合処理を「人物特定処理」とも呼ぶ。
第１の特徴情報は、人物を特定できる特徴情報であり、本実施形態では、顔の特徴情報とし、以後、顔の特徴情報とも呼ぶ。また、第１記憶部１１１が記憶する第１の登録特徴情報も、以後、顔の登録特徴情報とも呼ぶ。第１の特徴情報は、他の生体情報、例えば虹彩、耳介、静脈、指紋、歩容などであってもよい。また、第１記憶部１１１は、一人につき複数種類の生体情報を記憶していてもよい。この場合、照合部１０２は、複数種類の生体情報を組み合わせて、照合処理を行ってもよい。
第２の特徴情報は、顔以外の領域を含む人物の特徴情報であり、以後、「人領域特徴情報」とも呼ぶ。また、第２記憶部１１２に登録される第２の登録特徴情報も、以後、登録人領域特徴情報とも呼ぶ。人領域特徴情報とは、照合部１０２により顔認証できなかった人物の背格好又は服装等の見た目の特徴を示す特徴情報である。人領域特徴情報は、背丈、肩幅、身体パーツの比率、衣服（形、色、素材等）、髪型（髪色も含む）、装飾品（帽子、眼鏡、アクセサリ等）、所持品（バッグ、傘、杖等）等の特徴を示す情報を含む。また、人領域特徴情報は、その特徴情報の尤度等の情報を含んでもよい。
以下、情報処理装置１００について詳細に説明する。
まず、情報処理装置１００が処理する画像について説明する。第１画像２０と第２画像２２は、同じ撮像手段により撮像されていてもよいし、異なる撮像手段により撮像されていてもよい。撮像手段は、レンズとＣＣＤ（Charge Coupled Device）イメージセンサといった撮像素子を備えるカメラであり、ＩＰ（Internet Protocol）カメラ等のネットワークカメラであるのが好ましい。ネットワークカメラは、たとえば、無線ＬＡＮ（Local Area Network）通信機能を有し、通信ネットワーク、すなわちルータなどの中継装置（不図示）を介して情報処理装置１００に接続される。これらのカメラは、所謂、監視カメラであってもよい。そして、撮像手段は、特定の人物の動きに合わせて追従してカメラ本体やメンズの向きの制御、ズーム制御、焦点合わせ等を行う機構を備えてもよい。
カメラと情報処理装置１００は直接接続されてもよいし、上記したように通信ネットワークなどを介して間接的に接続されてもよい。たとえば、カメラで撮像された画像データが情報処理装置１００に直接送信され、情報処理装置１００がこの画像データを逐次受信してもよい。また、カメラ及び情報処理装置１００の双方がアクセス可能な記憶装置（不図示）を設けてもよい。この場合カメラにより撮像された画像データが、記憶装置に格納され、情報処理装置１００が記憶装置から画像データを読み出して取得してもよい。
ここで画像データは、静止画および動画の少なくともいずれかであってよい。データ形式、ファイル形式、ファイルサイズ、画像サイズ、画像の解像度、動画のフレームレート等も特に限定されず、カメラおよび情報処理装置１００の仕様、規格、性能等、あるいは、画像解析の処理能力、精度等に応じて様々な形式のものを採用し得る。そしてこの画像データの少なくとも一つのフレームが、第１画像２０及び第２画像２２の少なくとも一方になる。
また、実施形態において「取得」とは、自装置が他の装置や記憶媒体に格納されているデータまたは情報を取りに行くこと（能動的な取得）、および、自装置に他の装置から出力されるデータまたは情報を入力すること（受動的な取得）の少なくとも一方を含む。能動的な取得の例は、他の装置にリクエストまたは問い合わせしてその返信を受信すること、及び、他の装置や記憶媒体にアクセスして読み出すこと等がある。また、受動的な取得の例は、配信（または、送信、プッシュ通知等）される情報を受信すること等がある。さらに、「取得」とは、受信したデータまたは情報の中から選択して取得すること、または、配信されたデータまたは情報を選択して受信することであってもよい。
また、カメラから情報処理装置１００への画像の送信のタイミングは、リアルタイムに例えば、ストリーミング配信であってもよいし、所定間隔で所定期間分の画像を送信してもよい。カメラや情報処理装置１００のメモリ容量、通信容量、画像処理能力または、カメラと情報処理装置１００間の通信状況等に基づいて、タイミングは適宜選択されてもよい、あるいは、状況変化に応じて変更されてもよい。
本実施形態において、第１画像２０は第１のタイミングで撮像され、第２画像２２は、第１のタイミングより後に撮像される。
「第１のタイミングの後」とは、第１のタイミングから所定時間経過後、および、第１のタイミングより後の所定時刻のいずれかである。また、この「第１のタイミングの後」で撮影された第２画像２２は、異なるタイミングで撮影された複数の画像あってもよい。この場合、照合部１０２による個人特定処理と人物特定処理は、各画像に対して順次実行される。つまり、人物特定処理後の第２画像２２を、次のタイミングで第１画像２０として個人特定処理し、さらにその後のタイミングで撮影された第２画像２２について人物特定処理を行うという処理を繰り返してもよい。
上記したように、情報処理装置１００の第１記憶部１１１には、認証対象となる個人の顔の特徴情報が記憶されている。例えば、第１記憶部１１１には従業員の顔の特徴情報が記憶されているとする。この場合、撮像画像から検出された顔の特徴情報と一致する顔の特徴情報が第１記憶部１１１に記憶されていない場合は、その顔の人は、従業員でない人物の可能性があると推定できる。なお、照合処理におけるマッチング方法は様々な手法を用いることができ、特定の方法には限定されない。
例えば照合部１０２における個人特定処理は、以下のいずれかの手順で行うことができるが、これらに限定されない。
（ａ１）はじめに人領域を検出し、検出した人領域内の顔の領域を特定する。そして、特定した顔領域の認証を行う。
（ａ２）はじめに顔の領域を検出し、検出した顔領域の認証を行う。そして、顔の領域を含む人領域を特定する。この場合、認証できた場合は、人領域の特定を省略してもよい。
（ａ３）人領域と顔の領域を検出し、検出した顔領域の認証を行う。
さらに、登録部１０４は、個人特定処理で一致した顔の特徴情報がなかった場合以外に、第１画像２０に含まれる人物から顔の領域が特定できず、照合処理が行えなかった人領域に基づく人領域特徴情報を第２記憶部１１２に記憶させてもよい。例えば、不審者が監視カメラの位置を把握していて、カメラを避けて行動した結果、顔の特徴情報が取得できない場合であっても、その人領域特徴情報を第２記憶部１１２に記憶させる。
照合部１０２による照合結果とは、第１の特徴情報（顔の特徴情報）または第２の特徴情報（人領域特徴情報）が記憶された特徴情報と一致したことを示す情報と、一致しなかったこと（不一致）を示す情報の少なくともいずれか１つを含む。また、顔の特徴情報との不一致を示す情報は、上記した第１画像２０に含まれる人物から顔の特徴情報が抽出できなかった場合を含んでもよい。
図２は、第２記憶部１１２のデータ構造の例を示す図である。
第２記憶部１１２は、日時情報と、人領域特徴情報とが対応付けて記憶されている。日時情報は、第１画像２０の撮像時刻、第１画像２０の取得時刻、第１画像２０に基づく顔認証処理の実行時刻、前記顔認証処理の結果の取得時刻、および人領域特徴情報の保存時刻の少なくともいずれか１つである。
なお、図２の第２記憶部１１２には人領域特徴情報に日時情報が紐付けて記憶されているが、必ずしも日時情報は必要ではなく、含まなくてもよい。本実施形態の例では、第２記憶部１１２に、照合部１０２による個人特定処理において、顔認証できなかった人物の人領域特徴情報が記憶されていて、顔認証できた人物の人領域特徴情報は記憶されない。したがって、本実施形態では、第１画像２０に含まれる人物構成は、第２画像２２においても変わらないことを前提としている。なお、カメラ１０において検出された人物構成から変更がある場合については、他の実施形態で説明する。
このように構成された情報処理装置１００の動作について以下説明する。図３は、本実施形態の情報処理装置１００の動作の一例を示すフローチャートである。
まず、カメラ１０が所定のエリアを撮像した第１画像を情報処理装置１００に送信する（ステップＳ１０１）。例えば、第１画像には、３人の人物Ａ、人物Ｂ、人物Ｃが写っているものとする。
情報処理装置１００において、照合部１０２は、カメラ１０から受信した第１画像２０に含まれる人物から顔の特徴情報を抽出する（ステップＳ１１１）。ここでは、３人の人物（人物Ａ、人物Ｂ、人物Ｃ）が検出され、各々の顔の特徴情報が抽出される。そして、照合部１０２は、抽出した各顔の特徴情報について、第１記憶部１１１に記憶されている顔の登録特徴情報との照合処理（個人特定処理）をそれぞれ実行する（ステップＳ１１３）。
ここでは、人物Ａについては、第１記憶部１１１に一致する顔の登録特徴情報が含まれていたものとする（ステップＳ１１５のＹＥＳ）。そこで、人物Ａについては個人特定済みとなり、ステップＳ１１７以降の処理は行わずに本処理を終了する。一方、人物Ｂと人物Ｃについては、第１記憶部１１１に一致する顔の特徴情報が含まれていなかったため（ステップＳ１１５のＮＯ）、ステップＳ１１７に進み、第２記憶部１１２に人物Ｂと人物Ｃの人領域に対応する人領域特徴情報と日時情報をそれぞれ記憶させる。つまり、人物Ｂと人物Ｃが以降の追跡対象者となる。
そして、第１画像２０を取得した第１のタイミングより後に、カメラ１０から撮像された第２画像２２が情報処理装置１００に送信される（ステップＳ１０３）。情報処理装置１００において、照合部１０２は、カメラ１０から第２画像２２を受信し、受信した第２画像２２から人領域を検出して人領域特徴情報を抽出する（ステップＳ１１９）。
そして、照合部１０２は、第２画像２２から抽出された人領域特徴情報と、第２記憶部１１２に記憶されている登録人領域特徴情報との照合処理（人物特定処理）を行う（ステップＳ１２１）。
そして、抽出された人領域特徴情報と一致する登録人領域特徴情報が第２記憶部１１２に含まれていた場合（ステップＳ１２３のＹＥＳ）、第２画像２２において、登録人領域特徴情報に対応する人物Ｂと人物Ｃが特定される（ステップＳ１２５）。そして、本処理を終了する。
このようにして、第２画像２２内において、人物Ｂと人物Ｃを追跡できる。
一方、抽出された人領域特徴情報と一致する登録人領域特徴情報が第２記憶部１１２にない人物（ここでは人物Ａ）については（ステップＳ１２３のＮＯ）、第２画像２２に写っていたとしても追跡対象とはならず、ステップＳ１２５はバイパスして本処理を終了する。
本フローチャートの処理は、カメラ１０から画像が送信される度に繰り返し実行される。ステップＳ１１７で第２記憶部１１２に人領域特徴情報が記憶された人物Ｂと人物Ｃについては、第２画像２２を受信する毎にステップＳ１１９以降の処理が繰り返し実行されてよい。つまり、各第２画像２２において、第２記憶部１１２に記憶された人領域特徴情報に対応する人物Ｂと人物Ｃが追跡され続ける。
以上説明したように、本実施形態の情報処理装置１００において、照合部１０２により第１画像２０について個人の特定ができなかった人物について人領域特徴情報を未確定人物の情報として登録部１０４が第２記憶部１１２に記憶させる。そして、照合部１０２により、第２画像２２から抽出された人領域特徴情報と第２記憶部１１２に記憶されている登録人領域特徴情報とが照合され、一致する人物が特定される。この構成によれば、第１画像２０で未確定となった人物について、第１画像２０より後のタイミングで撮像された第２画像２２において人領域特徴情報に基づいて人物を特定できるので、未確定人物の追跡を続けることができる。
このように、本実施形態によれば、所定エリア内において、第１のタイミング以降、認証されない人物（すなわち、注意すべき人物）を追跡することができ、当該人物の人領域特徴情報を未確定人物として第２記憶部１１２に記憶させることができる。例えば、認証できない不審者等が所定エリアに紛れ込んでいた場合等に、その人物を追跡し続けることができる。
（第２の実施の形態）
本実施形態の情報処理装置１００は、第２画像２２に含まれる人物を特定した後、当該人物から抽出される顔の特徴情報を用いた照合処理を行う点以外は図１の上記実施形態の情報処理装置１００と同じである。本実施形態の情報処理装置１００は、図１の上記実施形態の情報処理装置１００と同じ構成を有するので、以下、図１を用いて説明する。
照合部１０２は、第２画像２２から特定された人物から抽出される顔の特徴情報と、記憶装置１１０の第１記憶部１１１が記憶する顔の登録特徴情報とを照合する。
つまり、第２画像２２で追跡を続行している人物について、顔認証処理を行うことで未確定人物について個人の特定を行うことができる。第１のタイミングで撮像された第１画像２０では顔をカメラから背けていたために顔認証がうまくいかなかったとしても、第１のタイミングより後に撮像された第２画像２２では顔が写っていれば、再度顔認証に成功する可能性がある。
図４は、本実施形態の第２記憶部１１２のデータ構造の一例を示す図である。
第２記憶部１１２は、図２の第２記憶部１１２の日時情報と人領域特徴情報に加え、確定フラグをさらに含む。確定フラグは、照合部１０２による顔認証処理により個人が特定できたこと、又は特定できなかったことを示すフラグであり、例えば、確定済みは「１」、未確定は「０」とすることができる。あるいは、確定済みは「０」、未確定は「１」としてもよい。さらに、例えば、確定済みのみフラグをセットし、未確定はＮＵＬＬとしてもよい。または、確定する前、つまり未確定のみフラグをセットし、確定後はＮＵＬＬとしてもよい。あるいは、第２記憶部１１２に、個人を特定した顔認証処理の実行日時を人領域特徴情報に対応付けて記憶されてもよい。
本実施形態において、第２画像２２において特定された人物から抽出された顔の特徴情報の照合処理で一致となった場合に、登録部１０４は、第２記憶部１１２に記憶されている当該人物に対応する登録人領域特徴情報に紐付けられている確定フラグを０から１にセットする。
あるいは、情報処理装置１００は、第２画像２２から特定された人物から抽出された顔の特徴情報と第１記憶部１１１が記憶する顔の登録特徴情報との照合結果が一致となった場合、第２記憶部１１２から当該人物の登録人領域特徴情報を削除する削除部（不図示）を備えてもよい。削除部を有する構成では、第２記憶部１１２のデータ構造は上記実施形態の図２とする。
図５は、本実施形態の情報処理装置１００の動作の例を示すフローチャートである。
図５（ａ）のフローチャートは、図３のフローチャートのステップＳ１２５の後に、ステップＳ１３１～ステップＳ１３３を含む。
照合部１０２は、ステップＳ１２５で第２画像２２から特定された人物から顔の特徴情報を抽出し（ステップＳ１３１）、抽出された顔の特徴情報と、記憶装置１１０の第１記憶部１１１が記憶する顔の登録特徴情報との照合処理（個人特定処理）を行い（ステップＳ１３３）、本処理を終了する。
さらに、図５（ｂ）に示すように、照合部１０２は、第２画像２２から第２の登録特徴情報（登録人領域特徴情報）に対応する人物を特定する処理（図３のステップＳ１１９～ステップＳ１２５）、および、特定された当該人物から抽出された第１の特徴情報（顔の特徴情報）と第１の登録特徴情報（顔の登録特徴情報）とを照合する処理（図５（ａ）のステップＳ１３１～ステップＳ１３３）を、照合結果が一致となるまで（図５（ｂ）のステップＳ１３５のＹＥＳ）繰り返す（図３のステップＳ１１９に戻る）。
例えば、上記実施形態で未確定人物として追跡されていた人物Ｂと人物Ｃのうち、人物Ｃについては、図３のステップＳ１１３の個人特定処理では、第１画像２０で顔が写っていなかったために顔認証に失敗していたとする。しかし、第１画像２０より後に撮影された第２画像２２では顔が写っていたとすると、図５（ａ）のステップＳ１３３の個人特定処理では顔認証に成功し、個人が特定できる。
本実施形態では、所定時間内、又は所定時刻までの間、繰り返し撮像された複数の第２画像２２について照合部１０２により照合処理を繰り返すことができる。
また、照合部１０２により顔認証に成功し、個人が特定された人領域特徴情報に対する処理として、図４の第２記憶部１１２を用いる例（図６（ａ））と、情報処理装置１００が削除部を有し、図２の第２記憶部１１２を用いる例（図６（ｂ））と２つについて説明する。
まず、図６（ａ）の例について説明する。
ステップＳ１３３で特定された人物から抽出された顔の特徴情報と、第１記憶部１１１が記憶する顔の登録特徴情報のいずれかが一致した場合（ステップＳ１３５のＹＥＳ）、登録部１０４は、図４の第２記憶部１１２において、顔認証できた人物に対応する人領域特徴情報に紐付けられている確定フラグに１をセットする（ステップＳ１３７）。そして、本処理を終了する。
ここでは、人物Ｃについて個人の特定ができたものとし（ステップＳ１３５のＹＥＳ）、人物Ｃに対応する人領域特徴情報に紐付けられている確定フラグに１がセットされる（ステップＳ１３７）。
一方、ステップＳ１３３で特定された人物から抽出された顔の特徴情報と、第１記憶部１１１が記憶する顔の登録特徴情報のいずれとも不一致だった場合（ステップＳ１３５のＮＯ）、ステップＳ１３７をバイパスして、本処理を終了する。つまり、図４の第２記憶部１１２の人領域特徴情報に紐付けられている確定フラグは０のままとなる。この例では、人物Ｂについて、顔認証に失敗したものとし（ステップＳ１３５のＮＯ）、ステップＳ１３７はバイパスして本処理は終了する。よって人物Ｂの人領域特徴情報に紐付けられている確定フラグは０のままとなる。
図６（ｂ）の例では、ステップＳ１３３で特定された人物から抽出された顔の特徴情報と、第１記憶部１１１が記憶する顔の登録特徴情報のいずれかが一致した場合（ステップＳ１３５のＹＥＳ）、削除部は、顔認証できた人物に対応する人領域特徴情報を図２の第２記憶部１１２から削除する。
ここでは、人物Ｃについて、第１記憶部１１１に一致する顔の特徴情報が含まれたものとし（ステップＳ１３５のＹＥＳ）、削除部は、図２の第２記憶部１１２から人物Ｃに対応する人領域特徴情報を削除する（ステップＳ１３９）。
一方、ステップＳ１３３で特定された人物から抽出された顔の特徴情報と、第１記憶部１１１が記憶する顔の登録特徴情報のいずれとも不一致だった場合（ステップＳ１３５のＮＯ）、ステップＳ１３９をバイパスして、本処理を終了する。つまり、第２記憶部１１２に人領域特徴情報は保存されたままとなる。
ここでは、人物Ｂについて、第１記憶部１１１に一致する顔の特徴情報が含まれていなかったものとし（ステップＳ１３５のＮＯ）、ステップＳ１３９はバイパスして本処理を終了する。このように、図２の第２記憶部１１２の場合は、人物Ｂの人領域特徴情報のみが第２記憶部１１２に記憶され続けることになる。
以上説明したように、本実施形態によれば、照合部１０２により、第２画像２２から特定された人物から抽出される顔の特徴情報と第１記憶部１１１が記憶する顔の登録特徴情報との照合処理を行うことで、第１画像２０では顔認証できなかった人物についても、第１画像２０より後のタイミングで撮像された第２画像２２では顔認証に成功し、個人を特定できる。
そして、第２記憶部１１２に顔認証できたか否かを示す情報（確定フラグ）を人領域特徴情報に紐付けて記憶するか、あるいは、顔認証できた人領域特徴情報は第２記憶部１１２から削除するので、第２記憶部１１２を参照することで、所定時間内、または、所定時刻までに顔認証できなかった人物について人領域特徴情報を取得できる。
（第３の実施の形態）
図７は、本実施形態の情報処理装置１００の構成を論理的に示す機能ブロック図である。
本実施形態の情報処理装置１００は、図１の上記実施形態の情報処理装置１００の構成に加え、さらに、出力部１２０を有している点以外は、上記実施形態と同じである。
本実施形態において、登録部１０４は、第２記憶部１１２に、時刻情報とともに人領域特徴情報を記憶させる。そして、出力部１２０は、所定の条件に従い、第２記憶部１１２に記憶されている登録人領域特徴情報に関する情報を出力する。
第一の所定の条件の例では、出力部１２０は、時刻情報が示す時刻から基準時間以上経過しても、第２画像２２から登録人領域特徴情報との照合により特定された人物から顔の特徴情報を抽出できなかった場合、又は、第２画像２２から登録人領域特徴情報との照合により特定された人物から抽出される顔の特徴情報との照合結果が不一致だった場合に、当該登録人領域特徴情報に関する情報を出力する。
ここで、時刻情報とは、図２または図４の第２記憶部１１２の日時情報に相当し、第２記憶部１１２に人領域特徴情報が記憶された時刻、照合対象の画像の撮像（又は記憶）の時刻、照合対象の画像を受信した時刻、照合処理の実行時刻、および照合結果が第２記憶部１１２に記憶された時刻の少なくともいずれか１つである。
また、第二の所定の条件の例では、出力部１２０は、基準のタイミングにおいて第２記憶部１１２に記憶されている登録人領域特徴情報に関する情報を出力する。上記実施形態で説明した図２の第２記憶部１１２の場合、基準のタイミングにおいて第２記憶部１１２に残っている登録人領域特徴情報に対応する人物が、当該タイミングまで個人が特定できなかった未確定人物となる。そこで、出力部１２０は、当該登録人領域特徴情報に関する情報、例えば、当該登録人領域特徴情報に対応する人領域の画像等を表示することで、オペレータに未確定人物を認識させることができる。
基準のタイミングとは、所定時刻、あるいは、最後又は所定位置のカメラでの撮影タイミング等である。
出力部１２０は、例えば、ディスプレイに撮像画像を表示するとともに、各人物に重畳して認証済みか否かを示すマークを表示する。例えば、認証済みの人物には「ＯＫ」、未認証の人物には「ＮＧ」等のマークを表示する。なお、認証済みの人物にのみ「ＯＫ」マークを表示してもよいし、未認証の人物にのみ「ＮＧ」マークを表示してもよい。また、登録人領域特徴情報を抽出した画像に、認証済みの人物と未認証の人物の人領域を識別可能にする画像（例えば、人領域を色違いの矩形の枠で囲む）を描画して重畳表示してもよい。または、未認証の人物の人領域を強調表示してもよい。
出力部１２０の出力形態は、画面表示だけでなく、アラート音をスピーカから出力したり、所定の宛先または端末にメッセージを送信したり、ＬＥＤ（Light Emitting Diode）表示器等を点滅または点灯させたり、プリンタに情報を印字出力したりしてもよい。また、出力部１２０は、所定エリアの出入り口の扉の施錠装置に施錠解錠制御信号またはゲート、自動ドア、シャッター等の駆動装置に開閉制御信号を出力してもよい。すなわち、基準時間経過後、または、基準のタイミングにおいて認証されていない人物の人領域特徴情報が第２記憶部１１２に残っていた場合に、当該人領域特徴情報に対応する人物がエリアから出入りできないように、扉の施錠やゲートを閉じる制御信号を各装置に出力してもよい。
さらに、出力部１２０は、カメラに対し、認証されてない人物の人領域を含む撮像画像の画質や解像度を上げる制御信号や、当該人領域に追従させたりズームインさせたりする制御信号を出力してもよい。
また、登録人領域特徴情報に関する情報とは、登録人領域特徴情報に対応する人領域の画像を含んでもよい。また、その登録人領域特徴情報が、認証済みであるか、認証済みでないかを示す情報、画像の撮像時刻、顔認証を行った時刻等の情報を含んでもよい。また、監視対象エリアが複数ある場合は、エリアの識別情報を含んでもよい。また、複数のカメラ１０を用いている場合、当該登録人領域特徴情報の人領域を含む画像を撮影したカメラ１０の識別情報を含んでもよい。
図８は、出力部１２０の情報出力のタイミングを説明するための図である。図８（ｃ）については、後述する実施形態で説明する。
図８（ａ）の例では、人領域特徴情報の初回の記憶のタイミングの時刻から、基準時間以上継続して第２記憶部１１２に記憶され続けた人領域特徴情報について、出力部１２０はアラートを出力している。この例では、個々の人物について基準時間以内で顔認証できたか否かを監視することができる。
図８（ｂ）の例では、第２記憶部１１２に記憶されている人領域特徴情報について、ある基準のタイミング、例えば、所定の時刻等において、残っている人領域特徴情報について、出力部１２０はアラートを出力している。
以上説明したように、本実施形態において、登録部１０４により、時刻情報とともに人領域特徴情報が第２記憶部１１２に記憶され、出力部１２０により、時刻情報が示す時刻から基準時間以上経過しても、顔認証されない人物の登録人領域特徴情報に関する情報が出力される。本実施形態によれば、上記実施形態と同様な効果を奏するとともに、さらに、あるエリア内で、所定時間以上又は所定時刻までに認証できなかった人物に関する情報を報知することができる。
また、本実施形態において、出力部１２０により、基準のタイミングにおいて第２記憶部１１２に記憶されている登録人領域特徴情報に関する情報が出力される。本実施形態によれば、所定の時刻毎に認証できていない人物に関す情報を報知することができる。
（第４の実施の形態）
本実施形態の情報処理装置１００は、第１画像から抽出された全ての人物の人領域特徴情報を第２記憶部１１２に記憶させ、登録人領域特徴情報で追跡しながら、顔認証ができるまで顔認証処理を繰り返す構成を有する点以外は、上記実施形態に示した情報処理装置１００と同じである。本実施形態の情報処理装置１００は、図１の上記実施形態の情報処理装置１００と同じ構成を有するので、以下、図１を用いて説明する。なお、本実施形態はその他の実施形態の情報処理装置１００と同じ構成を有してもよく、矛盾のない範囲で組み合わせることができる。
本実施形態では、以下の点で上記実施形態と異なる。
登録部１０４は、第１画像２０に含まれる人物から抽出される人領域特徴情報を登録人領域特徴情報として第２記憶部１１２に記憶させる。
照合部１０２は、第２画像２２に含まれる人物から抽出された人領域特徴情報と第２記憶部１１２が記憶する登録人領域特徴情報とを照合することで、第２画像２２から登録人領域特徴情報に対応する人物を特定する。照合部１０２は、第１画像２０に含まれる人物から顔の特徴情報を抽出できなかった場合、または、第１画像２０に含まれる人物から抽出される顔の特徴情報と第１の登録特徴情報（顔の登録特徴情報）との照合結果が不一致だった場合、第２画像２２から特定された人物から抽出される顔の特徴情報と、第１記憶部１１１が記憶する顔の登録特徴情報とを照合する。
さらに、登録部１０４は、第１画像２０に含まれる人物から抽出される顔の特徴情報と顔の登録特徴情報との照合結果を示す情報を、登録人領域特徴情報に対応付けて第２記憶部１１２に記憶させてもよい。あるいは、登録部１０４は、第１画像２０に含まれる人物から顔の特徴情報を抽出できなかったことを示す情報を、登録人領域特徴情報に対応付けて第２記憶部１１２に記憶させてもよい。
図９は、本実施形態の第２記憶部１１２のデータ構造の一例を示す図である。
第２記憶部１１２は、日時情報と、人領域特徴情報と、照合結果フラグとが対応付けて記憶されている。日時情報は、第１画像２０の撮像時刻、第１画像２０の取得時刻、第１画像２０に基づく認証処理の実行時刻、前記認証処理の結果の取得時刻、および登録人領域特徴情報の保存時刻の少なくともいずれか１つである。
照合結果フラグは、照合部１０２による顔の特徴情報の照合結果を示す情報である。照合結果を示す情報とは、顔の登録特徴情報と一致したことを示す情報、および顔の登録特徴情報と一致しなかったことを示す情報の少なくともいずれかを含む。
照合処理で、第１記憶部１１１に一致する顔の登録特徴情報があった場合、つまり、個人が特定できた場合、例えば、照合結果フラグには、「１」がセットされ、一致した顔の登録特徴情報がなかった場合、例えば、照合結果フラグには、「０」がセットされる。さらに、例えば、一致した場合のみ照合結果フラグをセットし、一致した顔の特徴情報がなかった場合はＮＵＬＬとしてもよい。あるいは、照合結果フラグには、一致した場合に「０」がセットされ、不一致の場合に「１」がセットされてもよい。また、不一致の場合に照合結果フラグをセットし、一致の場合にＮＵＬＬとしてもよい。
照合部１０２は、照合結果を示す情報が、第１画像２０に含まれる人物から抽出される顔の特徴情報との照合結果が不一致だったことを示す場合に、第２画像２２から特定された人物から抽出される顔の特徴情報と、第１記憶部１１１が記憶する顔の登録特徴情報とを照合する。
照合部１０２は、登録人領域特徴情報に対応付けられている情報が、第１画像２０に含まれる人物から顔の特徴情報を抽出できなかったことを示す場合に、第２画像２２から特定された人物から抽出される顔の特徴情報と、第１記憶部１１１が記憶する顔の登録特徴情報とを照合する。
また、本実施形態の情報処理装置１００は、図７の上記実施形態の情報処理装置１００と同様な出力部１２０を備えてもよい。
図１０は、本実施形態の情報処理装置１００の動作の一例を示すフローチャートである。
なお、本図において、上記実施形態と同じ処理手順については同じステップ番号を付してある。
まず、カメラ１０が所定のエリアを撮像した第１画像２０を情報処理装置１００に送信する（ステップＳ１０１）。例えば、第１画像２０には、３人の人物Ａ、人物Ｂ、人物Ｃが写っているものとする。
情報処理装置１００において、照合部１０２は、カメラ１０から受信した第１画像２０に含まれる人物から顔の特徴情報を抽出する（ステップＳ１１１）。ここでは、３人の人物（人物Ａ、人物Ｂ、人物Ｃ）が検出され、各々の顔の特徴情報が抽出される。そして、照合部１０２は、抽出した各顔の特徴情報について、第１記憶部１１１に記憶されている顔の登録特徴情報との照合処理（個人特定処理）をそれぞれ実行する（ステップＳ１１３）。
ここでは、人物Ａについては、第１記憶部１１１に一致する顔の特徴情報が含まれていたものとする。つまり、人物Ａについては個人特定済みとなるので、登録部１０４は、人物Ａの照合結果フラグに一致したことを示す情報として「１」をセットし、人領域特徴情報と日時情報とに紐付けて照合結果フラグを第２記憶部１１２に記憶させる（ステップＳ２０１）。
一方、人物Ｂと人物Ｃについては、第１記憶部１１１に一致する顔の特徴情報が含まれていなかったものとする。よって、登録部１０４は、人物Ｂと人物Ｃの照合結果フラグに不一致を示す情報として「０」をセットし、人領域特徴情報と日時情報とに紐付けて照合結果フラグを第２記憶部１１２に記憶させる（ステップＳ２０１）。
そして、第１画像２０を取得した第１のタイミングより後に、カメラ１０から撮像された第２画像２２が情報処理装置１００に送信される（ステップＳ１０３）。情報処理装置１００において、照合部１０２は、カメラ１０から第２画像２２を受信し、受信した第２画像２２から人領域を検出して人領域特徴情報を抽出する（ステップＳ１１９）。
そして、照合部１０２は、第２画像２２から抽出された人領域特徴情報と、第２記憶部１１２に記憶されている登録人領域特徴情報との照合処理（人物特定処理）を行う（ステップＳ１２１）。そして、抽出された人領域特徴情報と一致する登録人領域特徴情報が第２記憶部１１２に含まれていた場合（ステップＳ１２３のＹＥＳ）、第２画像２２において、登録人領域特徴情報に対応する人物が特定される（ステップＳ１２５）。この例では、第２記憶部１１２に記憶されている３人の人物Ａ、人物Ｂ、人物Ｃが特定される。
そして、照合部１０２は、第２記憶部１１２を参照し、各人物の顔の特徴情報による照合結果が一致であることを示す照合結果フラグが「１」でない場合（ステップＳ２０３のＮＯ）、ステップＳ２０５に進む。照合結果が一致の場合、すなわち、照合結果フラグが「１」の場合（ステップＳ２０３のＹＥＳ）、ステップＳ２０５～ステップＳ２０９はバイパスして本処理を終了する。ここでは、人物Ａの照合結果フラグが１なので、人物Ａについては処理を終了する。人物Ｂと人物Ｃについて照合結果フラグが０なのでステップＳ２０５に進む。
そして、照合部１０２は、特定された各人物から顔の特徴情報を抽出する（ステップＳ２０５）。ここでは、２人の人物（人物Ｂ、人物Ｃ）の各々の顔の特徴情報が抽出される。そして、照合部１０２は、抽出した各顔の特徴情報について、第１記憶部１１１に記憶されている顔の登録特徴情報との照合処理（個人特定処理）をそれぞれ実行する（ステップＳ２０７）。
ここでは、人物Ｃについて、第１記憶部１１１に一致する顔の特徴情報が含まれていたものとする。つまり、人物Ｃについては個人特定済みとなるので、登録部１０４は、人物Ｃの照合結果フラグに一致したことを示す情報として「１」をセットし、人物Ｃに対応する人領域特徴情報と日時情報とに照合結果フラグを対応付けて記憶させ（ステップＳ２０９）、本処理を終了する。
一方、人物Ｂについて、第１記憶部１１１に一致する顔の特徴情報が含まれていなかったものとする。登録部１０４は、人物Ｂの照合結果フラグに不一致を示す情報として「０」をセットし、人物Ｂに対応する人領域特徴情報と日時情報と照合結果フラグを対応付けて記憶させ（ステップＳ２０９）、本処理を終了する。
このようにして、第２画像２２を用いて、各人物（人物Ａ、人物Ｂ、人物Ｃ）の追跡を継続しながら、顔認証ができていない人物について顔認証を再試行できる。最初にカメラに対して顔が向いていなかった人物が、後でカメラの方向に顔を向けた時に撮像された画像を用いて顔認証を実行して個人を特定することができる。
ステップＳ２０９において、第２記憶部１１２に記憶される人領域特徴情報と、ステップＳ２０１で第２記憶部１１２に既に記憶されている人領域特徴情報との両方を、関連付けて記憶してもよい。あるいは、ステップＳ２０７で特定された人領域特徴情報で第２記憶部１１２の人領域特徴情報を上書きしてもよいし、ステップＳ２０１で第２記憶部１１２に既に記憶されている人領域特徴情報を残し照合結果フラグのみを更新してもよい。
本フローチャートの処理は、カメラ１０から第２画像２２が送信される度にステップＳ１１９以降の処理が繰り返し実行される。
また、第２画像２２において第１画像２０には含まれていなかった新たな人物Ｄが検出された場合、すなわち、第２画像２２から抽出された人領域特徴情報に一致する人領域特徴情報が第２記憶部１１２に記憶されていなかった場合（ステップＳ１２３のＮＯ）、当該第２画像２２を第１画像２０として、ステップＳ１１１に戻り、当該人領域特徴情報について新たな人物Ｄとして処理を繰り返してもよい。
また、本実施形態において、ステップＳ２０９の後、図５（ａ）のステップＳ１３１～ステップＳ１３３、さらに、図５（ｂ）のステップＳ１３５、および、図６（ａ）のステップＳ１３５～ステップＳ１３７、又は図６（ｂ）のステップＳ１３５～ステップＳ１３９を実行してもよい。
以上説明したように、本実施形態において、登録部１０４により第１画像２０に含まれる人物から抽出される人領域特徴情報が、照合部１０２による顔認証の照合結果を示す情報に紐付けられて第２記憶部１１２に記憶される。第１画像２０より後のタイミングで撮像された第２画像２２において、第２記憶部１１２が記憶している人領域特徴情報に対応する各人物を特定することで追跡することができる。そして、照合部１０２により、第２画像２２において特定された人物のうち、未だ顔認証により個人が特定されていない人物について、顔認証処理が行われる。
本実施形態によれば、上記実施形態と同様な効果を奏するとともに、画像に含まれる人物を人領域特徴情報で追跡しながら、顔認証が済んでいない人物について顔認証を実行して個人を特定していくことができる。
さらに、本実施形態では、登録部１０４により各画像に含まれる全ての人物について顔認証の照合結果に対応付けて人領域特徴情報が第２記憶部１１２に記憶される。この構成によれば、所定のエリア内で人の出入りがあった場合でも、各人物の追跡と個人の特定処理を継続して行うことができる。さらに、所定のエリア内に存在している人物の総数をカウントして確認したり、当該エリアに進入またはエリアから退出した人物を時刻情報とともに確認したりすることも可能となる。
（第５の実施の形態）
本実施形態の情報処理装置１００は、上記実施形態とは、経路に沿って設置された複数のカメラの撮像画像を用いて所定の経路の始点から終点までの間に、認証されない人物を見つけるための構成を有する点以外は上記第１から第３のいずれかの実施形態と同じである。
本実施形態の情報処理装置１００は、図１の情報処理装置１００と同じ構成である場合について説明するので、図１を用いて説明する。
情報処理装置１００は、経路に沿って設置された複数のカメラ１０のそれぞれが生成した画像を処理する。
経路とは、異なる２点（例えば、始点と終点）を少なくとも含み、この２点の間を人が通る道筋である。経路とは、例えば、ある施設、建物、またはエリアの入口から入場して出口から退場するまでに通る道順であってもよいし、ある敷地の入口から入場して、建物の出入口に入場するまでの間に通るアプローチであってもよいし、あるエリアから他のエリアへ移動するための通路であってもよいし、ある駅の改札口における入場から他の駅の改札口における退場までに通る経路であってもよい。また、２点間を人が通る道筋は、人毎に異なってよい。
経路に沿って設置された複数のカメラは、人が経路に入る始点に設置された第１のカメラと、経路から出る終点に設置された第２のカメラの少なくとも２つのカメラを含む。
本実施形態において、第１画像２０は、第１のカメラにより撮像され画像である。第２画像２２は、経路に沿う方向において第１のカメラより後に位置する第２のカメラにより撮像された画像である。また、第２画像２２は、第１画像２０が撮像される第１のタイミングより後のタイミングで撮像される。なお、経路に沿う方向は、人物毎に異なってもよい。
具体的には、照合部１０２は、第１画像２０に含まれる人物から抽出される顔の特徴情報と、記憶装置１１０の第１記憶部１１１が記憶する顔の登録特徴情報とを照合する。
登録部１０４は、人物から顔の特徴情報を抽出できなかった場合、または、照合部１０２による照合結果が不一致だった場合、当該人物から抽出される人領域特徴情報を登録人領域特徴情報として記憶装置１１０の第２記憶部１１２に記憶させる。
そして、照合部１０２は、第２画像２２に含まれる人物から抽出された人領域特徴情報と第２記憶部１１２が記憶する登録人領域特徴情報とを照合することで第２画像２２から登録人領域特徴情報に対応する人物を特定する。
さらに、経路に沿って設置される複数のカメラのうち、第２のカメラは、始点から経路に沿って経路の終点までの間に所定の間隔、または所定の位置に複数設置される。
照合部１０２は、複数の第２のカメラによって撮像された第２の画像２２に対して、第２記憶部１１２が記憶している人領域特徴情報との照合処理を行うことで人領域特徴情報に対応する人物を特定する。これにより、本実施形態の情報処理装置１００では、第１のタイミングとは異なる時点又は異なる位置、または異なる複数の第２のカメラにより撮像された複数の画像間で、経路を通行している人領域（人物）をそれぞれ追跡することが可能になる。
本実施形態の第２記憶部１１２は、図２または図４のいずれかのデータ構造を有してよい。
また、本実施形態の情報処理装置１００は、図７の第３実施形態と同じ出力部１２０を備えてもよい。本実施形態の出力部１２０と第３実施形態の出力部１２０は、出力条件が以下の点で異なる。なお、本実施形態の出力部１２０は、第３実施形態の出力部１２０と同じ条件を組み合わせて用いる構成も含んでよい。
出力部１２０の出力条件は、複数の第２のカメラのうち、経路に沿う方向において最後（終点）または所定の位置に設置された第２のカメラが生成した画像を用いて照合部１０２が特定した人物について、照合部１０２による照合処理でいずれの顔の特徴情報にも一致しないことである。
出力部１２０は、複数の第２のカメラのうち、経路に沿う方向において最後（終点）または所定の位置に設置された第２のカメラが生成した画像から照合部１０２が特定した人領域について、顔の登録特徴情報との照合結果が不一致だった場合、当該人物から抽出された人領域特徴情報に関する情報を出力する。
また、登録部１０４は、人領域特徴情報を時刻情報とともに第２記憶部１１２に記憶させ、出力部１２０は、時刻情報が示す時刻から基準時間以上経過しても、第２記憶部１１２が記憶する顔の登録特徴情報との照合結果が一致とならない人領域特徴情報に関する情報を出力してもよい。
ここで、照合結果が一致とならないとは、第２画像２２から特定された人物から顔の特徴情報を抽出できなかった場合、または、第２画像２２から特定された人物から抽出される顔の特徴情報と顔の登録特徴情報との照合結果が不一致だった場合を含む。
また、本実施形態の出力部１２０は、上記実施形態の出力部１２０の出力形態に加え、さらに、例えば、経路の両端または途中に設けられたゲートの駆動装置に開閉制御信号を出力してもよい。すなわち、経路の所定の場所に設置された第２のカメラが生成した画像を用いて照合部１０２が特定した人物について、照合部１０２により照合処理でいずれの顔の特徴情報にも一致しなかった場合、当該人物が経路を通過できないように、経路途中または出入り口に設けられたゲートを閉じる制御信号をゲート駆動装置に出力してもよい。
図８（ｃ）に示すように、入口から入場した人物が、出口から退場した時点で第２記憶部１１２に残っている人領域特徴情報に関する情報を出力部１２０は出力する。
図１１は、本実施形態の情報処理装置１００の動作の一例を示すフローチャートである。
まず、経路の入り口に設置された第１のカメラ（第１カメラ１０ａとも呼ぶ）が所定のエリアを撮像した第１画像２０を情報処理装置１００に送信する（ステップＳ１０１）。例えば、第１画像２０には、３人の人物Ａ、人物Ｂ、人物Ｃが写っているものとする。
情報処理装置１００において、照合部１０２は、第１カメラ１０ａから受信した第１画像２０に含まれる人物から顔の特徴情報を抽出する（ステップＳ１１１）。ここでは、３人の人物（人物Ａ、人物Ｂ、人物Ｃ）が検出され、各々の顔の特徴情報が抽出される。そして、照合部１０２は、抽出した各顔の特徴情報について、第１記憶部１１１に記憶されている顔の登録特徴情報との照合処理（個人特定処理）をそれぞれ実行する（ステップＳ１１３）。
ここでは、人物Ａについては、第１記憶部１１１に一致する顔の登録特徴情報が含まれていたものとする（ステップＳ１１５のＹＥＳ）。そこで、人物Ａについては個人特定済みとなり、ステップＳ１１７以降の処理は行わずに本処理を終了する。一方、人物Ｂと人物Ｃについては、第１記憶部１１１に一致する顔の特徴情報が含まれていなかったため（ステップＳ１１５のＮＯ）、ステップＳ１１７に進み、第２記憶部１１２に人物Ｂと人物Ｃの人領域特徴情報と日時情報をそれぞれ記憶させる。
そして、第１画像２０を取得した第１のタイミングより後に、経路に沿う方向において第１カメラ１０ａより後に位置する第２のカメラ（第２カメラ１０ｂとも呼ぶ）から撮像された第２画像２２が情報処理装置１００に送信される（ステップＳ１０３）。情報処理装置１００において、照合部１０２は、第２カメラ１０ｂから第２画像２２を受信し、受信した第２画像２２から人領域を検出して人領域特徴情報を抽出する（ステップＳ１１９）。
そして、照合部１０２は、第２画像２２から抽出された人領域特徴情報と、第２記憶部１１２が記憶している登録人領域特徴情報との照合処理（人物特定処理）を行う（ステップＳ１２１）。そして、抽出された人領域特徴情報と一致する登録人領域特徴情報が第２記憶部１１２に含まれていた場合（ステップＳ１２３のＹＥＳ）、第２画像２２において、登録人領域特徴情報に対応する人物Ｂと人物Ｃが特定される（ステップＳ１２５）。そして、本処理を終了する。
このようにして、第２画像２２内において、人物Ｂと人物Ｃを追跡できる。
一方、抽出された人領域特徴情報と一致する登録人領域特徴情報が第２記憶部１１２にない人物（ここでは人物Ａ）については（ステップＳ１２３のＮＯ）、追跡対象とはならず、ステップＳ１２５はバイパスして本処理を終了する。
本フローチャートの処理は、各カメラ１０から画像が送信される度に繰り返し実行される。ステップＳ１１７で第２記憶部１１２に人領域特徴情報が記憶された人物Ｂと人物Ｃについては、第２画像２２を受信する毎にステップＳ１１９以降の処理が繰り返し実行されてよい。つまり、各第２画像２２において、第２記憶部１１２が記憶している人領域特徴情報に対応する人物Ｂと人物Ｃが追跡され続ける。
以上説明したように、本実施形態の情報処理装置１００において、経路に沿って設置された複数のカメラの撮像画像を用いて、第１のタイミングで第１カメラ１０ａにより撮像された第１画像２０について顔認証処理ができなかった人領域の人領域特徴情報を未確定人物の情報として登録部１０４が第２記憶部１１２に記憶させる。そして、第１のタイミングより後に、経路に沿う方向において第１カメラ１０ａより後に位置する第２カメラ１０ｂにより撮像された第２画像２２について照合部１０２により第２記憶部１１２が記憶している人領域特徴情報と一致する人物が特定される。
このように、本実施形態によれば、経路に入ってから経路から出るまでの間に、顔認証により個人が特定できない人物の人領域特徴情報を未確定人物として第２記憶部１１２に記憶させることができる。第１記憶部１１１に顔の特徴情報が記憶されていない、本来、通行を許可されていない人物等が通路を通行しようとした場合等に、その人物の人領域特徴情報を第２記憶部１１２に記憶させて追跡することができる。
また、本実施形態において、登録部１０４により、人領域特徴情報が初回の記憶のタイミングの時刻情報とともに第２記憶部１１２に記憶され、出力部１２０により、基準時間以上継続して、第２記憶部１１２に記憶され続けた人領域特徴情報に関する情報が出力される。
あるいは、本実施形態において、出力部１２０により、複数の第２のカメラのうち、経路に沿う方向において最後または所定の位置に設置された第２のカメラが生成した画像を用いて照合部１０２が特定した人物について、顔の特徴情報による照合処理で不一致となった場合、当該人物の人領域特徴情報に関する情報が出力される。
この構成によれば、経路を通行している人物のうち、顔認証により個人を特定できない人物の情報を、当該人物が経路の出口を出るところ、又は所定の位置で報知することができる。例えば、第１記憶部１１１には、通行が許可されている人物の顔の登録特徴情報が記憶されており、通行に許可が必要な通路の出口で、第１記憶部１１１に記憶されている顔の登録特徴情報との照合結果が不一致の人物、つまり、通行を許可されていない人物の通行を報知することが可能になる。
（第６の実施の形態）
本実施形態の情報処理装置１００は、顔認証の照合結果に関わらず、経路に沿って設置された複数のカメラのうちの第１のカメラにより撮像された第１画像２０に含まれる人物から抽出された人領域特徴情報を第２記憶部１１２に記憶させ、経路に沿う方向において第１のカメラより後に位置する第２のカメラにより撮像された第２画像２２において第２記憶部１１２が記憶した人領域特徴情報を用いて人物を特定して追跡する。
本実施形態の情報処理装置１００は、経路に沿って設置された複数のカメラのうちの第１のカメラにより撮像された第１画像２０と、経路に沿う方向において第１のカメラより後に位置する第２のカメラにより撮像された第２画像２２とを用いて処理する点以外は、上記第４実施形態の情報処理装置１００の構成と同じである。
照合部１０２は、経路に沿って設置された複数のカメラのうちの第１のカメラにより撮像された第１画像２０に含まれる人物から抽出される顔の特徴情報と、第１記憶部１１１が記憶する顔の登録特徴情報とを照合する。登録部１０４は、人物から抽出される人領域特徴情報を第２記憶部１１２（図９）に記憶させる。照合部１０２は、経路に沿う方向において第１のカメラより後に位置する複数の第２のカメラのそれぞれが生成した第２画像２２に含まれる人物から抽出された人領域特徴情報と第２記憶部１１２が記憶する登録人領域特徴情報とを照合することで第２画像２２から人物を特定することで、当該人物を追跡する。
そして、照合部１０２は、第１画像２０に含まれる人物から顔の特徴情報を抽出できなかった場合、または、第１画像２０に含まれる人物から抽出される顔の特徴情報と顔の登録特徴情報との照合結果が不一致だった場合、第２画像２２から特定された人物から抽出される顔の特徴情報と、第１記憶部１１１が記憶する顔の登録特徴情報とを照合する。
このように構成された本実施形態の情報処理装置１００の動作について説明する。図１２は、本実施形態の情報処理装置１００の動作の一例を示すフローチャートである。以下の説明では、第２記憶部１１２は図９のデータ構造を有するものとして説明するが、必ずしも照合結果フラグは必要ではなく、第２記憶部１１２は少なくとも人領域特徴情報を含んでいればよい。
まず、経路の入り口に設置された第１カメラ１０ａが所定のエリアを撮像した第１画像２０を情報処理装置１００に送信する（ステップＳ１０１）。例えば、第１画像２０には、３人の人物Ａ、人物Ｂ、人物Ｃが写っているものとする。
情報処理装置１００において、照合部１０２は、複数のカメラ１０のうちの第１カメラ１０ａから受信した第１画像に含まれる人物から顔の特徴情報を抽出する（ステップＳ１１１）。ここでは、３人の人物（人物Ａ、人物Ｂ、人物Ｃ）が検出され、各々の顔の特徴情報が抽出される。そして、照合部１０２は、抽出した各顔の特徴情報について、第１記憶部１１１に記憶されている顔の登録特徴情報との照合処理（個人特定処理）をそれぞれ実行する（ステップＳ１１３）。
ここでは、人物Ａについては、第１記憶部１１１に一致する顔の登録特徴情報が含まれていたものとする。つまり、人物Ａについては個人特定済みとなるので、登録部１０４は、人物Ａの照合結果フラグに一致したことを示す情報として「１」をセットし、人領域特徴情報と日時情報とに紐付けて照合結果フラグを第２記憶部１１２に記憶させる（ステップＳ２０１）。
一方、人物Ｂと人物Ｃについては、第１記憶部１１１に一致する顔の特徴情報が含まれていなかったものとする。よって、登録部１０４は、人物Ｂと人物Ｃの照合結果フラグに不一致を示す情報として「０」をセットし、人領域特徴情報と日時情報とに紐付けて照合結果フラグを第２記憶部１１２に記憶させる（ステップＳ２０１）。
そして、第１画像２０を取得した第１のタイミングより後に、経路に沿う方向において第１カメラ１０ａより後に位置する第２カメラ１０ｂから撮像された第２画像２２が情報処理装置１００に送信される（ステップＳ１０３）。情報処理装置１００において、照合部１０２は、第２カメラ１０ｂから第２画像２２を受信し、受信した第２画像２２から人領域を検出して人領域特徴情報を抽出する（ステップＳ１１９）。
そして、照合部１０２は、第２画像２２から抽出された人領域特徴情報と、第２記憶部１１２に記憶されている登録人領域特徴情報との照合処理（人物特定処理）を行う（ステップＳ１２１）。そして、抽出された人領域特徴情報と一致する登録人領域特徴情報が第２記憶部１１２に含まれていた場合（ステップＳ１２３のＹＥＳ）、第２画像２２において、登録人領域特徴情報に対応する人物Ｂと人物Ｃが特定される（ステップＳ１２５）。この例では、第２記憶部１１２に記憶されている３人の人物Ａ、人物Ｂ、人物Ｃが特定される。
そして、照合部１０２は、第２記憶部１１２を参照し、照合結果フラグが、各人物の顔の特徴情報による照合結果が一致であることを示す「１」ではない場合（ステップＳ２０３のＮＯ）、ステップＳ２０５に進む。照合結果が一致の場合、すなわち、照合結果フラグが「１」の場合（ステップＳ２０３のＹＥＳ）、ステップＳ２０５～ステップＳ２０９はバイパスして本処理を終了する。ここでは、人物Ａの照合結果フラグが１なので、人物Ａについては処理を終了する。人物Ｂと人物Ｃについて照合結果フラグが０なのでステップＳ２０５に進む。
そして、照合部１０２は、特定された各人物から顔の特徴情報を抽出する（ステップＳ２０５）。ここでは、２人の人物（人物Ｂ、人物Ｃ）の各々の顔の特徴情報が抽出される。そして、照合部１０２は、抽出した各顔の特徴情報について、第１記憶部１１１に記憶されている顔の登録特徴情報との照合処理（個人特定処理）をそれぞれ実行する（ステップＳ２０７）。
ここでは、人物Ｃについて、第１記憶部１１１に一致する顔の特徴情報が含まれていたものとする。つまり、人物Ｃについては個人特定済みとなるので、登録部１０４は、人物Ｃの照合結果フラグに一致したことを示す情報として「１」をセットし、人物Ｃに対応する人領域特徴情報と日時情報とに照合結果フラグを対応付けて記憶させ（ステップＳ２０９）、本処理を終了する。
一方、人物Ｂについて、第１記憶部１１１に一致する顔の特徴情報が含まれていなかったものとする。登録部１０４は、人物Ｂの照合結果フラグに不一致を示す情報として「０」をセットし、人物Ｂに対応する人領域特徴情報と日時情報と照合結果フラグを対応付けて記憶させ（ステップＳ２０９）、本処理を終了する。
このようにして、経路において複数のカメラを用いて撮像された第２画像２２を用いて、各人物（人物Ａ、人物Ｂ、人物Ｃ）の追跡を継続しながら、顔認証ができていない人物について顔認証を再試行できる。経路を通行している間に複数のカメラで撮像された複数の画像を用いて顔認証処理を繰り返し行うことで、最初にカメラに対して顔が向いていなかった人物が、後でカメラの方向に顔を向けた時に撮像された画像を用いて顔認証を実行して個人を特定することができる。
ステップＳ２０９において、第２記憶部１１２に記憶される人領域特徴情報と、ステップＳ２０１で第２記憶部１１２に既に記憶されている人領域特徴情報との両方を、関連付けて記憶してもよい。あるいは、ステップＳ２０７で特定された人領域特徴情報で第２記憶部１１２の人領域特徴情報を上書きしてもよいし、ステップＳ２０１で第２記憶部１１２に既に記憶されている人領域特徴情報を残し照合結果フラグのみを更新してもよい。
本フローチャートの処理は、カメラ１０から第２画像２２が送信される度にステップＳ１１９以降の処理が繰り返し実行される。
また、第２画像２２において第１画像２０には含まれていなかった新たな人物Ｄが検出された場合、すなわち、第２画像２２から抽出された人領域特徴情報に一致する人領域特徴情報が第２記憶部１１２に記憶されていなかった場合（ステップＳ１２３のＮＯ）、当該第２画像２２を第１画像２０として、ステップＳ１１１に戻り、当該人領域特徴情報について新たな人物Ｄとして処理を繰り返してもよい。
また、本実施形態において、ステップＳ２０９の後、図５（ａ）のステップＳ１３１～ステップＳ１３３、さらに、図５（ｂ）のステップＳ１３５、および、図６（ａ）のステップＳ１３５～ステップＳ１３７、又は図６（ｂ）のステップＳ１３５～ステップＳ１３９を実行してもよい。
この構成によれば、人物が経路内の途中で引き返した場合であっても、第１画像２０が撮像された後のタイミングで撮像された第２画像２２を用いて第２記憶部１１２に記憶された人領域特徴情報を用いて人物を特定して追跡することができる。
また、この構成においても、図７を用いて説明した出力部１２０を備えてもよい。
具体的には、出力部１２０は、複数のカメラのうち、経路の最後または所定の位置に設置されたカメラの画像において、照合部１０２により特定された人物について、第１記憶部１１１が記憶する顔の登録特徴情報と一致しなかった場合、当該人物の人領域特徴情報に関する情報を出力する。
図１３は、上述した各実施形態の情報処理装置を実現するコンピュータ８０の構成の一例を示す図である。
コンピュータ８０は、ＣＰＵ（Central Processing Unit）８２、メモリ８４、メモリ８４にロードされた図１および図７の各情報処理装置の構成要素を実現するプログラム９０、そのプログラム９０を格納するストレージ８５、Ｉ／Ｏ（Input/Output）８６、およびネットワーク接続用インタフェース（通信Ｉ／Ｆ８７）を備える。
ＣＰＵ８２、メモリ８４、ストレージ８５、Ｉ／Ｏ８６、通信Ｉ／Ｆ８７は、バス８９を介して互いに接続され、ＣＰＵ８２により情報処理装置全体が制御される。ただし、ＣＰＵ８２などを互いに接続する方法は、バス接続に限定されない。
メモリ８４は、ＲＡＭ（Random Access Memory）やＲＯＭ（Read Only Memory）などのメモリである。ストレージ８５は、ハードディスク、ＳＳＤ（Solid State Drive）、またはメモリカードなどの記憶装置である。
ストレージ８５は、ＲＡＭやＲＯＭなどのメモリであってもよい。ストレージ８５は、コンピュータ８０の内部に設けられてもよいし、コンピュータ８０がアクセス可能であれば、コンピュータ８０の外部に設けられ、コンピュータ８０と有線または無線で接続されてもよい。あるいは、コンピュータ８０に着脱可能に設けられてもよい。
ＣＰＵ８２が、ストレージ８５に記憶されるプログラム９０をメモリ８４に読み出して実行することにより、各実施形態の情報処理装置の各ユニットの各機能を実現することができる。
Ｉ／Ｏ８６は、コンピュータ８０と他の入出力装置間のデータおよび制御信号の入出力制御を行う。他の入出力装置とは、たとえば、コンピュータ８０に接続されるキーボード、タッチパネル、マウス、およびマイクロフォン等の入力装置（不図示）と、ディスプレイ、プリンタ、およびスピーカ等の出力装置（不図示）と、これらの入出力装置とコンピュータ８０のインタフェースとを含む。さらに、Ｉ／Ｏ８６は、他の記録媒体の読み取りまたは書き込み装置（不図示）とのデータの入出力制御を行ってもよい。
通信Ｉ／Ｆ８７は、コンピュータ８０と外部の装置との通信を行うためのネットワーク接続用インタフェースである。通信Ｉ／Ｆ８７は、有線回線と接続するためのネットワークインタフェースでもよいし、無線回線と接続するためのネットワークインタフェースでもよい。たとえば、情報処理装置を実現するコンピュータ８０は、通信Ｉ／Ｆ８７によりネットワークを介して少なくとも１台のカメラ１０と接続される。
各実施形態の情報処理装置の各構成要素は、本図のコンピュータ８０のハードウェアとソフトウェアの任意の組合せによって実現される。そして、その実現方法、装置にはいろいろな変形例があることは、当業者には理解されるところである。上述した各実施形態の情報処理装置を示す機能ブロック図は、ハードウェア単位の構成ではなく、論理的な機能単位のブロックを示している。
情報処理装置は、複数のコンピュータ８０により構成されてもよいし、仮想サーバにより実現されてもよい。コンピュータ８０は、本システムを利用する監視対象の場所（例えば、施設内）に設置されてもよいし、クラウドコンピューティングの形態で提供されてもよい。施設内のカメラをネットワークに接続し、クラウド上のサーバを構成するコンピュータ８０に撮像画像を送信してもよい。また、施設内のコンピュータ８０とクラウド上のコンピュータ８０を組み合わせ、情報処理装置の各ユニットの各機能を両者に分散させて実行させてもよい。
また、状況に応じて、画像解析処理を行うコンピュータ８０を、施設内のコンピュータ８０とクラウド上のコンピュータ８０から選択してもよい。例えば、通常は施設内のコンピュータ８０で認証処理を行い、高精度な解析処理を行いたい場合には、クラウド上のコンピュータ８０で認証処理を行う構成としてもよい。
以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記以外の様々な構成を採用することもできる。
たとえば、情報処理装置は、さらに、特定人物の特徴情報が記憶されている特定人物途中情報データベースを含み、第１記憶部１１１が記憶する顔の特徴情報を用いた照合処理では一致しなかった人物に対し、照合部１０２は、特定人物特徴情報データベースを用いて照合処理を行ってもよい。
例えば、第１記憶部１１１には従業員の顔の特徴情報が記憶されていて、特定人物特徴情報データベースには、ＶＩＰ（Very Important Person）、または、犯罪歴のある人物や要注意人物としてブラックリストに載っている人物等、特に見つけたい特定人物の顔の特徴情報が記憶されていてもよい。従業員を認証した後、認証されなかった人物に対して、特定人物の特徴情報との照合処理を行うことで、特定人物を検出できる可能性がある。出力部１２０は、特定人物が検出された場合、特定人物に関する情報を出力してもよい。
また、照合部１０２は、第１の登録特徴情報（顔の登録特徴情報）又は第２の登録特徴情報（登録人領域特徴情報）との照合処理において、所定回数以上一致した場合に、照合結果を一致としてもよい。所定回数は、特徴情報別に設定できてよい。情報処理装置１００は、所定回数の設定を受け付けるメニュー画面を表示してオペレータからの操作を受け付け、設定することができる。
（実施例１）
本実施例では、所定エリア内で、所定時間以上、又は所定時刻までに、認証されない人物を見つける例について説明する。本実施例は、第１実施形態の情報処理装置１００の構成を用いた例である。
図１４は、所定エリア内を撮像したカメラ１０の映像をコンピュータ８０のディスプレイ（不図示）に表示した画面の例を示す図である。図１５は、第２記憶部１１２に記憶されたデータの変化を示す図である。なお、図１５では、模式的にデータ内容を示してあり、例えば、人物Ｃの人領域に対応する人領域特徴情報は、「人検出」の項目に「Ｃ」と示してある。
図１４（ａ）は、第１時刻（９時１０分）の映像画面である。照合部１０２により３人の人物Ａ、人物Ｂ、人物Ｃの人領域が検出されたものとする。そして、照合部１０２による第１記憶部１１１が記憶する顔の特徴情報との照合処理により人物Ａと人物Ｂについては一致する顔の特徴情報が見つかり、認証済みとなったが、人物Ｃについては、一致する顔の特徴情報が見つからず、未認証となったとする。
この時の第２記憶部１１２に記憶されている情報の例を図１５（ａ）に示す。図１５（ａ）の例では、第２記憶部１１２には、顔認証がされなかった人領域の人領域特徴情報と、人領域特徴情報を抽出した画像の撮影日時情報とが記憶されている。ここでは、顔認証されなかった人物Ｃの人領域特徴情報が記憶されている。
次に、図１４（ｂ）は、第１時刻より後の第２時刻（９時２０分）の映像画面である。照合部１０２により既に照合処理が完了し、認証済みの人物Ａ、人物Ｂについて、出力部１２０により、画面上の人領域に対応付けて、「ＯＫ」マークが重畳表示されている。また、認証できなかった人物Ｃ、人物Ｄについて、出力部１２０により、画面上の人領域に対応付けて「ＮＧ」マークが重畳表示されている。
図１５（ｂ）の第２記憶部１１２には、新たに検出された人物Ｄの人領域の人領域特徴情報（Ｄ）がさらに記憶されている。
さらに、図１４（ｃ）は、第２時刻の後の第３時刻（９時２５分）の映像画面である。照合部１０２により人物Ｄについても顔認証できたので、人物Ｄについても、出力部１２０により画面上の人領域に対応付けて、「ＯＫ」マークが重畳表示されている。人物Ｃについては、顔認証ができなかったので、出力部１２０により、画面上の人領域に対応付けて「ＮＧ」マークが重畳表示されている。そして、人物Ｄについて顔認証されたので、図１５（ｃ）に示すように、削除部（不図示）により第２記憶部１１２から人物Ｄの人領域に対応する人領域特徴情報のレコードは削除されている。
そして、所定時間が経過した第４時刻（１０時）において、第２記憶部１１２に人物Ｃの人領域特徴情報のみが残っているため、図１４（ｄ）に示すように、出力部１２０は、未確認人物として人物Ｃをクローズアップした画像をディスプレイに表示する。
図１６は、第２記憶部１１２の他のデータ構造の例を示す図である。
図１６の例は、第４の実施形態の情報処理装置１００の構成を用いた例を示している。
図１６の第２記憶部１１２には、人領域特徴情報と、人領域特徴情報を抽出した画像の撮影日時情報と、人領域特徴情報に対応する人領域において顔認証の結果（認証された場合は「済」、認証できなかった場合は「未」）と、顔認証された場合に照合処理を実行した日時情報とが記憶されている。なお、図１６では、模式的に顔認証について「済」および「未」と記載しているが、実際には、フラグがセットされてよい。
図１６の例では、所定時間が経過した第４時刻（１０時）において、第２記憶部１１２の顔認証の結果が、「未」となっている人物Ｃの人領域特徴情報（Ｃ）に関する情報を出力する。ここでは、図１４（ｄ）に示すように、出力部１２０は、未確認人物として人物Ｃをクローズアップした画像をディスプレイに表示する。
（実施例２）
本実施例では、経路に沿って設置された複数のカメラを用いて、少なくとも経路の入口から入って出口から出るまでの間に認証できなかった人物を見つける例について説明する。本実施例は、第６の実施形態の情報処理装置１００の構成を用いた例である。
図１７は、ある通路に沿って４台のカメラ（１０－１～１０－４）が設置されている場所の状況を模式的に示した図である。経路の両端にカメラ１０－１とカメラ１０－４が設置されていて、通路の途中にカメラ１０－１よりにカメラ１０－２、カメラ１０－４よりにカメラ１０－３が設置されている。
複数の人物Ａ～Ｆが通路を歩いている。各人物に付してある矢印は人物の進行方向を示している。また、カメラ１０－１とカメラ１０－４の位置には、通路への入退場を行うゲート（不図示）が設置されているものとする。
図１７（ａ）から順に、図１７（ｂ）、図１７（ｃ）と時間が経過した状態を示している。例えば、人物Ｄは、図１７（ａ）の時点で入口から通路に入場し、図１７（ｂ）の時点でカメラ１０－２の前を通過している。そして、図１７（ｃ）の時点では、カメラ１０－３の前を通過している。人物Ｄは、通路に入場後、まもなくして顔認証が完了している。
図中、「ＯＫ」マークが付されている人物は、顔認証済みであり、「ＮＧ」マークが付されている人物は、顔認証ができてない人物を示している。図１７のように、出力部１２０は、各カメラで撮影された画像を合成してディスプレイに顔認証の結果を示すマークを重畳表示してもよい。あるいは、カメラ毎の映像に顔認証の結果を示すマークを重畳表示してもよい。
図１８は、第２記憶部１１２に記憶されたデータの変化を示す図である。本実施形態では、第２記憶部１１２は、複数のテーブルを含む。各カメラで撮像された画像において検出された人領域特徴情報と、検出された日時情報とが記憶されている４つのテーブルＴ１～Ｔ４と、各カメラで検出された人領域特徴情報の情報を統合し、人領域特徴情報の人領域別に照合部１０２による顔認証結果と、認証日時とが記憶されているテーブルＴ５とを含む。
図１８（ａ）から順に、図１８（ｂ）、図１８（ｃ）と時間が経過した状態を示している。
例えば、人物Ｂは、図１８（ａ）の時点で、カメラ１０－３の前を通過していて、カメラ１０－４とカメラ１０－３の画像で人領域特徴情報が検出され、テーブルＴ４とテーブルＴ３に記憶されている。そして、照合部１０２による顔認証ができていないことがテーブルＴ５に記憶されている。
そして、人物Ｂは、図１８（ｂ）の時点で、カメラ１０－２の前を通過していて、カメラ１０－２の画像でも人領域特徴情報が検出され、テーブルＴ２にも記憶されている。そして、照合部１０２による顔認証ができてないことがテーブルＴ５に記憶されている。
さらに、人物Ｂは、図１８（ｃ）の時点で、カメラ１０－１の前を通過し、カメラ１０－１の画像で人領域特徴情報が検出され、テーブルＴ１に記憶されている。そして、照合部１０２により顔認証ができていないことがテーブルＴ５に記憶されている。よって、出力部１２０は、人物Ｂは経路の最後のカメラで撮像された画像においても顔認証されていないので、人物Ｂについてアラートを出力する。
（実施例３）
本実施例では、空港内において、監視カメラを用いて撮影した画像を用いる。登録部１０４は、空港内の人物の人領域特徴情報を第２記憶部１１２に記憶させる。
また、チェックイン時にパスポート情報の取得と顔の撮影をカメラにより行い、登録部１０４は、記憶装置１１０の第１記憶部１１１は、チェックイン済みの人の顔の特徴情報をパスポート情報と紐づけて記憶する。
そして、空港内の各カメラにより撮影された映像について、照合部１０２が登録人領域特徴情報を用いて人物を追跡しながら、顔認証処理を実行する。基準時間以上照合に成功しない人物を特定し、出力部１２０はアラートを上げる。ここで、基準時間以上照合に成功しない人物とは、長時間、未チェックインなのに空港内をうろうろしている要注意人物である。
また、記憶装置１１０の第１記憶部１１１に顔の特徴情報が記憶されたチェックイン済みの人のうち、保安検査を通過した人を照合の対象から外す。具体的には、第１記憶部１１１から顔データを削除する。または、第１記憶部１１１の顔の特徴情報にフラグ付けをして照合の対象から除外する。
以上、実施形態および実施例を参照して本願発明を説明したが、本願発明は上記実施形態および実施例に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
なお、本発明において利用者に関する情報を取得、利用する場合は、これを適法に行うものとする。
上記の実施形態の一部または全部は、以下の付記のようにも記載されうるが、以下に限られない。
１． 第１画像に含まれる人物から抽出される第１の特徴情報と、記憶手段が記憶する第１の登録特徴情報とを照合する照合手段と、
前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記照合手段による照合結果が不一致だった場合、当該人物から抽出される第２の特徴情報を第２の登録特徴情報として前記記憶手段に記憶させる登録手段と、を備え、
前記照合手段は、第２画像に含まれる人物から抽出された前記第２の特徴情報と前記記憶手段が記憶する前記第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定する、情報処理装置。
２． １．に記載の情報処理装置において、
前記照合手段は、前記第２画像から特定された前記人物から抽出される前記第１の特徴情報と、前記記憶手段が記憶する前記第１の登録特徴情報とを照合する、
情報処理装置。
３． 第１画像に含まれる人物から抽出される第１の特徴情報と、記憶手段が記憶する第１の登録特徴情報とを照合する照合手段と、
前記人物から抽出される第２の特徴情報を第２の登録特徴情報として前記記憶手段に記憶させる登録手段と、を備え、
前記照合手段は、第２画像に含まれる人物から抽出された第２の特徴情報と前記記憶手段が記憶する第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定し、
前記照合手段は、前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記第１画像に含まれる人物から抽出される前記第１の特徴情報と前記第１の登録特徴情報との照合結果が不一致だった場合、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶手段が記憶する前記第１の登録特徴情報とを照合する、情報処理装置。
４． １．から３．のいずれか一つに記載の情報処理装置において、
前記照合手段は、前記第２画像から前記第２の登録特徴情報に対応する人物を特定する処理、および、特定された当該人物から抽出された前記第１の特徴情報と前記第１の登録特徴情報とを照合する処理を、前記照合結果が一致となるまで繰り返す、
情報処理装置。
５． １．から４．のいずれか一つに記載の情報処理装置において、
前記第２画像から特定された前記人物から抽出された前記第１の特徴情報と、前記記憶手段が記憶する前記第１の登録特徴情報との照合結果が一致となった場合、前記記憶手段から当該人物の前記第２の登録特徴情報を削除する削除手段をさらに備える情報処理装置。
６． １．から５．のいずれか一つに記載の情報処理装置において、
前記第２画像は前記第１画像とは異なるカメラで撮影される、情報処理装置。
７． １．から６．のいずれか一つに記載の情報処理装置において、
前記第１画像は、経路に沿って設置された複数のカメラのうちの第１のカメラにより撮像され、前記第２画像は、前記経路に沿う方向において前記第１のカメラより後に位置する第２のカメラにより撮像される、情報処理装置。
８． ７．に記載の情報処理装置において、
複数の第２のカメラのうち、前記経路に沿う方向において最後または所定の位置に設置された前記第２のカメラが生成した前記第２画像から前記照合手段が特定した前記人物について、前記第１の登録特徴情報との照合結果が不一致だった場合、当該人物から抽出された第２の特徴情報に関する情報を出力する出力手段を備える情報処理装置。
９． １．から８．のいずれか一つに記載の情報処理装置において、
前記第１画像は第１のタイミングで撮像され、前記第２画像は、前記第１のタイミングより後に撮像される、情報処理装置。
１０． １．から９．のいずれか一つに記載の情報処理装置において、
前記登録手段は、前記第１画像に含まれる人物から抽出される前記第１の特徴情報と前記第１の登録特徴情報との前記照合結果を示す情報を、前記第２の登録特徴情報に対応付けて前記記憶手段に記憶させ、
前記照合手段は、前記照合結果を示す情報が、前記照合結果が不一致だったことを示す場合に、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶手段が記憶する前記第１の登録特徴情報とを照合する、情報処理装置。
１１． １．から１０．のいずれか一つに記載の情報処理装置において、
前記登録手段は、前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかったことを示す情報を、前記第２の登録特徴情報に対応付けて前記記憶手段に記憶させ、
前記照合手段は、前記情報が、前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかったことを示す場合に、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶手段が記憶する前記第１の登録特徴情報とを照合する、情報処理装置。
１２． １．から１１．のいずれか一つに記載の情報処理装置において、
前記登録手段は、前記記憶手段に、時刻情報とともに前記第２の特徴情報を記憶させ、
前記時刻情報が示す時刻から基準時間以上経過しても、前記第２画像から特定された前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記第２画像から特定された前記人物から抽出される前記第１の特徴情報との前記照合結果が不一致だった場合、当該第２の特徴情報に関する情報を出力する出力手段をさらに備える情報処理装置。
１３． １．から１２．のいずれか一つに記載の情報処理装置において、
前記照合手段は、前記第１の登録特徴情報又は前記第２の登録特徴情報との照合処理において、所定回数以上一致した場合に、当該照合結果を一致とする、情報処理装置。
１４． １．から１３．のいずれか一つに記載の情報処理装置において、
前記第１の特徴情報は顔の特徴情報であり、前記第２の特徴情報は顔以外の領域を含む特徴情報である情報処理装置。
１５． １．から１４．のいずれか一つに記載の情報処理装置において、
基準のタイミングにおいて前記記憶手段に記憶されている前記第２の登録特徴情報に関する情報を出力する出力手段をさらに備える情報処理装置。
１６． 第１画像に含まれる人物から抽出される第１の特徴情報と、記憶手段が記憶する第１の登録特徴情報とを照合する照合手段と、
前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記照合手段による照合結果が不一致だった場合、当該人物から抽出される第２の特徴情報を第２の登録特徴情報として前記記憶手段に記憶させる登録手段と、を備え、
前記照合手段は、第２画像に含まれる人物から抽出された前記第２の特徴情報と前記記憶手段が記憶する前記第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定する、情報処理システム。
１７． １６．に記載の情報処理システムにおいて、
前記照合手段は、前記第２画像から特定された前記人物から抽出される前記第１の特徴情報と、前記記憶手段が記憶する前記第１の登録特徴情報とを照合する、
情報処理システム。
１８． 第１画像に含まれる人物から抽出される第１の特徴情報と、記憶手段が記憶する第１の登録特徴情報とを照合する照合手段と、
前記人物から抽出される第２の特徴情報を第２の登録特徴情報として前記記憶手段に記憶させる登録手段と、を備え、
前記照合手段は、第２画像に含まれる人物から抽出された第２の特徴情報と前記記憶手段が記憶する第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定し、
前記照合手段は、前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記第１画像に含まれる人物から抽出される前記第１の特徴情報と前記第１の登録特徴情報との照合結果が不一致だった場合、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶手段が記憶する前記第１の登録特徴情報とを照合する、情報処理システム。
１９． １６．から１８．のいずれか一つに記載の情報処理システムにおいて、
前記照合手段は、前記第２画像から前記第２の登録特徴情報に対応する人物を特定する処理、および、特定された当該人物から抽出された前記第１の特徴情報と前記第１の登録特徴情報とを照合する処理を、前記照合結果が一致となるまで繰り返す、
情報処理システム。
２０． １６．から１９．のいずれか一つに記載の情報処理システムにおいて、
前記第２画像から特定された前記人物から抽出された前記第１の特徴情報と、前記記憶手段が記憶する前記第１の登録特徴情報との照合結果が一致となった場合、前記記憶手段から当該人物の前記第２の登録特徴情報を削除する削除手段をさらに備える情報処理システム。
２１． １６．から２０．のいずれか一つに記載の情報処理システムにおいて、
前記第２画像は前記第１画像とは異なるカメラで撮影される、情報処理システム。
２２． １６．から２１．のいずれか一つに記載の情報処理システムにおいて、
前記第１画像は、経路に沿って設置された複数のカメラのうちの第１のカメラにより撮像され、前記第２画像は、前記経路に沿う方向において前記第１のカメラより後に位置する第２のカメラにより撮像される、情報処理システム。
２３． ２２．に記載の情報処理システムにおいて、
複数の第２のカメラのうち、前記経路に沿う方向において最後または所定の位置に設置された前記第２のカメラが生成した前記第２画像から前記照合手段が特定した前記人物について、前記第１の登録特徴情報との照合結果が不一致だった場合、当該人物から抽出された第２の特徴情報に関する情報を出力する出力手段を備える情報処理システム。
２４． １６．から２３．のいずれか一つに記載の情報処理システムにおいて、
前記第１画像は第１のタイミングで撮像され、前記第２画像は、前記第１のタイミングより後に撮像される、情報処理システム。
２５． １６．から２４．のいずれか一つに記載の情報処理システムにおいて、
前記登録手段は、前記第１画像に含まれる人物から抽出される前記第１の特徴情報と前記第１の登録特徴情報との前記照合結果を示す情報を、前記第２の登録特徴情報に対応付けて前記記憶手段に記憶させ、
前記照合手段は、前記照合結果を示す情報が、前記照合結果が不一致だったことを示す場合に、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶手段が記憶する前記第１の登録特徴情報とを照合する、情報処理システム。
２６． １６．から２５．のいずれか一つに記載の情報処理システムにおいて、
前記登録手段は、前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかったことを示す情報を、前記第２の登録特徴情報に対応付けて前記記憶手段に記憶させ、
前記照合手段は、前記情報が、前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかったことを示す場合に、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶手段が記憶する前記第１の登録特徴情報とを照合する、情報処理システム。
２７． １６．から２６．のいずれか一つに記載の情報処理システムにおいて、
前記登録手段は、前記記憶手段に、時刻情報とともに前記第２の特徴情報を記憶させ、
前記時刻情報が示す時刻から基準時間以上経過しても、前記第２画像から特定された前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記第２画像から特定された前記人物から抽出される前記第１の特徴情報との前記照合結果が不一致だった場合、当該第２の特徴情報に関する情報を出力する出力手段をさらに備える情報処理システム。
２８． １６．から２７．のいずれか一つに記載の情報処理システムにおいて、
前記照合手段は、前記第１の登録特徴情報又は前記第２の登録特徴情報との照合処理において、所定回数以上一致した場合に、当該照合結果を一致とする、情報処理システム。
２９． １６．から２８．のいずれか一つに記載の情報処理システムにおいて、
前記第１の特徴情報は顔の特徴情報であり、前記第２の特徴情報は顔以外の領域を含む特徴情報である情報処理システム。
３０． １６．から２９．のいずれか一つに記載の情報処理システムにおいて、
基準のタイミングにおいて前記記憶手段に記憶されている前記第２の登録特徴情報に関する情報を出力する出力手段をさらに備える情報処理システム。
３１． 情報処理装置が、
第１画像に含まれる人物から抽出される第１の特徴情報と、記憶装置が記憶する第１の登録特徴情報とを照合し、
前記人物から前記第１の特徴情報を抽出できなかった場合、または、照合結果が不一致だった場合、当該人物から抽出される第２の特徴情報を第２の登録特徴情報として前記記憶装置に記憶させ、
第２画像に含まれる人物から抽出された前記第２の特徴情報と前記記憶装置が記憶する前記第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定する、情報処理方法。
３２． ３１．に記載の情報処理方法において、
前記情報処理装置が、
前記第２画像から特定された前記人物から抽出される前記第１の特徴情報と、前記記憶装置が記憶する前記第１の登録特徴情報とを照合する、
情報処理方法。
３３． 情報処理装置が、
第１画像に含まれる人物から抽出される第１の特徴情報と、記憶装置が記憶する第１の登録特徴情報とを照合し、
前記人物から抽出される第２の特徴情報を第２の登録特徴情報として前記記憶装置に記憶させ、
第２画像に含まれる人物から抽出された第２の特徴情報と前記記憶装置が記憶する第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定し、
前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記第１画像に含まれる人物から抽出される前記第１の特徴情報と前記第１の登録特徴情報との照合結果が不一致だった場合、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶装置が記憶する前記第１の登録特徴情報とを照合する、情報処理方法。
３４． ３１．から３３．のいずれか一つに記載の情報処理方法において、
前記情報処理装置が、
前記第２画像から前記第２の登録特徴情報に対応する人物を特定する処理、および、特定された当該人物から抽出された前記第１の特徴情報と前記第１の登録特徴情報とを照合する処理を、前記照合結果が一致となるまで繰り返す、
情報処理方法。
３５． ３１．から３４．のいずれか一つに記載の情報処理方法において、
前記情報処理装置が、さらに、
前記第２画像から特定された前記人物から抽出された前記第１の特徴情報と、前記記憶装置が記憶する前記第１の登録特徴情報との照合結果が一致となった場合、前記記憶装置から当該人物の前記第２の登録特徴情報を削除する、情報処理方法。
３６． ３１．から３５．のいずれか一つに記載の情報処理方法において、
前記第２画像は前記第１画像とは異なるカメラで撮影される、情報処理方法。
３７． ３１．から３６．のいずれか一つに記載の情報処理方法において、
前記第１画像は、経路に沿って設置された複数のカメラのうちの第１のカメラにより撮像され、前記第２画像は、前記経路に沿う方向において前記第１のカメラより後に位置する第２のカメラにより撮像される、情報処理方法。
３８． ３７．に記載の情報処理方法において、
前記情報処理装置が、
複数の第２のカメラのうち、前記経路に沿う方向において最後または所定の位置に設置された前記第２のカメラが生成した前記第２画像から特定した前記人物について、前記第１の登録特徴情報との照合結果が不一致だった場合、当該人物から抽出された第２の特徴情報に関する情報を出力する、情報処理方法。
３９． ３１．から３８．のいずれか一つに記載の情報処理方法において、
前記第１画像は第１のタイミングで撮像され、前記第２画像は、前記第１のタイミングより後に撮像される、情報処理方法。
４０． ３１．から３９．のいずれか一つに記載の情報処理方法において、
前記情報処理装置が、
前記第１画像に含まれる人物から抽出される前記第１の特徴情報と前記第１の登録特徴情報との前記照合結果を示す情報を、前記第２の登録特徴情報に対応付けて前記記憶装置に記憶させ、
前記照合結果を示す情報が、前記照合結果が不一致だったことを示す場合に、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶装置が記憶する前記第１の登録特徴情報とを照合する、情報処理方法。
４１． ３１．から４０．のいずれか一つに記載の情報処理方法において、
前記情報処理装置が、
前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかったことを示す情報を、前記第２の登録特徴情報に対応付けて前記記憶装置に記憶させ、
前記情報が、前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかったことを示す場合に、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶装置が記憶する前記第１の登録特徴情報とを照合する、情報処理方法。
４２． ３１．から４１．のいずれか一つに記載の情報処理方法において、
前記情報処理装置が、さらに、
前記記憶装置に、時刻情報とともに前記第２の特徴情報を記憶させ、
前記時刻情報が示す時刻から基準時間以上経過しても、前記第２画像から特定された前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記第２画像から特定された前記人物から抽出される前記第１の特徴情報との前記照合結果が不一致だった場合、当該第２の特徴情報に関する情報を出力する、情報処理方法。
４３． ３１．から４２．のいずれか一つに記載の情報処理方法において、
前記情報処理装置が、
前記第１の登録特徴情報又は前記第２の登録特徴情報との照合処理において、所定回数以上一致した場合に、当該照合結果を一致とする、情報処理方法。
４４． ３１．から４３．のいずれか一つに記載の情報処理方法において、
前記第１の特徴情報は顔の特徴情報であり、前記第２の特徴情報は顔以外の領域を含む特徴情報である情報処理方法。
４５． ３１．から４４．のいずれか一つに記載の情報処理方法において、
前記情報処理装置が、さらに、
基準のタイミングにおいて前記記憶装置に記憶されている前記第２の登録特徴情報に関する情報を出力する、情報処理方法。
４６． コンピュータに、
第１画像に含まれる人物から抽出される第１の特徴情報と、記憶装置が記憶する第１の登録特徴情報とを照合する手順、
前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記照合する手順における照合結果が不一致だった場合、当該人物から抽出される第２の特徴情報を第２の登録特徴情報として前記記憶装置に記憶させる手順、
第２画像に含まれる人物から抽出された前記第２の特徴情報と前記記憶装置が記憶する前記第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定する手順、を実行させるためのプログラム。
４７． ４６．に記載のプログラムにおいて、
コンピュータに、
前記第２画像から特定された前記人物から抽出される前記第１の特徴情報と、前記記憶装置が記憶する前記第１の登録特徴情報とを照合する手順、を実行させるためのプログラム。
４８． コンピュータに、
第１画像に含まれる人物から抽出される第１の特徴情報と、記憶装置が記憶する第１の登録特徴情報とを照合する手順、
前記人物から抽出される第２の特徴情報を第２の登録特徴情報として前記記憶装置に記憶させる手順、
第２画像に含まれる人物から抽出された第２の特徴情報と前記記憶装置が記憶する第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定する手順、
前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記第１画像に含まれる人物から抽出される前記第１の特徴情報と前記第１の登録特徴情報との照合結果が不一致だった場合、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶装置が記憶する前記第１の登録特徴情報とを照合する手順、を実行させるためのプログラム。
４９． ４６．から４８．のいずれか一つに記載のプログラムにおいて、
コンピュータに、
前記第２画像から前記第２の登録特徴情報に対応する人物を特定する処理、および、特定された当該人物から抽出された前記第１の特徴情報と前記第１の登録特徴情報とを照合する処理を、前記照合結果が一致となるまで繰り返す手順、を実行させるためのプログラム。
５０． ４６．から４９．のいずれか一つに記載のプログラムにおいて、
コンピュータに、
前記第２画像から特定された前記人物から抽出された前記第１の特徴情報と、前記記憶装置が記憶する前記第１の登録特徴情報との照合結果が一致となった場合、前記記憶装置から当該人物の前記第２の登録特徴情報を削除する手順、をさらに実行させるためのプログラム。
５１． ４６．から５０．のいずれか一つに記載のプログラムにおいて、
前記第２画像は前記第１画像とは異なるカメラで撮影される、プログラム。
５２． ４６．から５１．のいずれか一つに記載のプログラムにおいて、
前記第１画像は、経路に沿って設置された複数のカメラのうちの第１のカメラにより撮像され、前記第２画像は、前記経路に沿う方向において前記第１のカメラより後に位置する第２のカメラにより撮像される、プログラム。
５３． ５２．に記載のプログラムにおいて、
コンピュータに、
複数の第２のカメラのうち、前記経路に沿う方向において最後または所定の位置に設置された前記第２のカメラが生成した前記第２画像から特定した前記人物について、前記第１の登録特徴情報との照合結果が不一致だった場合、当該人物から抽出された第２の特徴情報に関する情報を出力する手順、を実行させるためのプログラム。
５４． ４６．から５３．のいずれか一つに記載のプログラムにおいて、
前記第１画像は第１のタイミングで撮像され、前記第２画像は、前記第１のタイミングより後に撮像される、プログラム。
５５． ４６．から５４．のいずれか一つに記載のプログラムにおいて、
コンピュータに、
前記第１画像に含まれる人物から抽出される前記第１の特徴情報と前記第１の登録特徴情報との前記照合結果を示す情報を、前記第２の登録特徴情報に対応付けて前記記憶装置に記憶させる手順、
前記照合結果を示す情報が、前記照合結果が不一致だったことを示す場合に、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶装置が記憶する前記第１の登録特徴情報とを照合する手順、を実行させるためのプログラム。
５６． ４６．から５５．のいずれか一つに記載のプログラムにおいて、
コンピュータに、
前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかったことを示す情報を、前記第２の登録特徴情報に対応付けて前記記憶装置に記憶させる手順、
前記情報が、前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかったことを示す場合に、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶装置が記憶する前記第１の登録特徴情報とを照合する手順、を実行させるためのプログラム。
５７． ４６．から５６．のいずれか一つに記載のプログラムにおいて、
コンピュータに、
前記記憶装置に、時刻情報とともに前記第２の特徴情報を記憶させる手順、
前記時刻情報が示す時刻から基準時間以上経過しても、前記第２画像から特定された前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記第２画像から特定された前記人物から抽出される前記第１の特徴情報との前記照合結果が不一致だった場合、当該第２の特徴情報に関する情報を出力する手順、をさらに実行させるためのプログラム。
５８． ４６．から５７．のいずれか一つに記載のプログラムにおいて、
コンピュータに、
前記第１の登録特徴情報又は前記第２の登録特徴情報との照合処理において、所定回数以上一致した場合に、当該照合結果を一致とする手順、を実行させるためのプログラム。
５９． ４６．から５８．のいずれか一つに記載のプログラムにおいて、
前記第１の特徴情報は顔の特徴情報であり、前記第２の特徴情報は顔以外の領域を含む特徴情報であるプログラム。
６０． ４６．から５９．のいずれか一つに記載のプログラムにおいて、
コンピュータに、
基準のタイミングにおいて前記記憶装置に記憶されている前記第２の登録特徴情報に関する情報を出力する手順、をさらに実行させるためのプログラム。
６１． 経路に沿って設置された複数のカメラのそれぞれが生成した画像を処理する情報処理装置であって、
前記複数のカメラのうちの第１のカメラにより撮像される第１画像に含まれる人物から抽出される第１の特徴情報と、記憶手段が記憶する第１の登録特徴情報とを照合する照合手段と、
前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記照合手段による照合結果が不一致だった場合、当該人物から抽出される第２の特徴情報を第２の登録特徴情報として前記記憶手段に登録する登録手段と、を備え、
前記照合手段は、前記経路に沿う方向において前記第１のカメラより後に位置する第２のカメラにより撮像される第２画像に含まれる人物から抽出された前記第２の特徴情報と前記記憶手段が記憶する前記第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定する、情報処理装置。
６２． 経路に沿って設置された複数のカメラのそれぞれが生成した画像を処理する情報処理装置であって、
前記複数のカメラのうちの第１のカメラにより撮像される第１画像に含まれる人物から抽出される第１の特徴情報と、記憶手段が記憶する第１の登録特徴情報とを照合する照合手段と、
前記人物から抽出される第２の特徴情報を前記記憶手段に登録する登録手段と、を備え、
前記照合手段は、前記経路に沿う方向において前記第１のカメラより後に位置する第２のカメラにより撮像される第２画像に含まれる人物から抽出された前記第２の特徴情報と前記記憶手段が記憶する第２の登録特徴情報とを照合することで前記第２画像から前記人物を特定し、
前記照合手段は、前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記第１画像に含まれる人物から抽出される前記第１の特徴情報との照合結果が不一致だった場合、前記第２画像から特定された前記人物から抽出される前記第１の特徴情報と、前記記憶手段が記憶する前記第１の登録特徴情報とを照合する、情報処理装置。

Claims (10)

  1. 第１画像に含まれる人物から抽出される、前記人物の顔の特徴情報である第１の特徴情報と、記憶手段が記憶する、認証対象の人物の顔の特徴情報である第１の登録特徴情報とを照合する照合手段と、
    前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記照合手段による照合結果が不一致だった場合、当該人物から抽出される、前記人物の顔以外の領域を含む特徴情報である第２の特徴情報を第２の登録特徴情報として前記記憶手段に記憶させる登録手段と、を備え、
    前記照合手段は、第２画像に含まれる人物から抽出された前記第２の特徴情報と前記記憶手段が記憶する前記第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定する、情報処理装置。
  2. 請求項１に記載の情報処理装置において、
    前記照合手段は、前記第２画像から特定された前記人物から抽出される前記第１の特徴情報と、前記記憶手段が記憶する前記第１の登録特徴情報とを照合する、
    情報処理装置。
  3. 第１画像に含まれる人物から抽出される、前記人物の顔の特徴情報である第１の特徴情報と、記憶手段が記憶する、認証対象の人物の顔の特徴情報である第１の登録特徴情報とを照合する照合手段と、
    前記人物から抽出される、前記人物の顔以外の領域を含む特徴情報である第２の特徴情報を第２の登録特徴情報として前記記憶手段に記憶させる登録手段と、を備え、
    前記照合手段は、第２画像に含まれる人物から抽出された第２の特徴情報と前記記憶手段が記憶する第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定し、
    前記照合手段は、前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記第１画像に含まれる人物から抽出される前記第１の特徴情報と前記第１の登録特徴情報との照合結果が不一致だった場合、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶手段が記憶する前記第１の登録特徴情報とを照合する、情報処理装置。
  4. 請求項１から３のいずれか一項に記載の情報処理装置において、
    前記照合手段は、前記第２画像から前記第２の登録特徴情報に対応する人物を特定する処理、および、特定された当該人物から抽出された前記第１の特徴情報と前記第１の登録特徴情報とを照合する処理を、前記照合結果が一致となるまで繰り返す、
    情報処理装置。
  5. 請求項１から４のいずれか一項に記載の情報処理装置において、
    前記第２画像から特定された前記人物から抽出された前記第１の特徴情報と、前記記憶手段が記憶する前記第１の登録特徴情報との照合結果が一致となった場合、前記記憶手段から当該人物の前記第２の登録特徴情報を削除する削除手段をさらに備える情報処理装置。
  6. 請求項１から５のいずれか一項に記載の情報処理装置において、
    前記第２画像は前記第１画像とは異なるカメラで撮影される、情報処理装置。
  7. 情報処理装置が、
    第１画像に含まれる人物から抽出される、前記人物の顔の特徴情報である第１の特徴情報と、記憶装置が記憶する、認証対象の人物の顔の特徴情報である第１の登録特徴情報とを照合し、
    前記人物から前記第１の特徴情報を抽出できなかった場合、または、照合結果が不一致だった場合、当該人物から抽出される、前記人物の顔以外の領域を含む特徴情報である第２の特徴情報を第２の登録特徴情報として前記記憶装置に記憶させ、
    第２画像に含まれる人物から抽出された前記第２の特徴情報と前記記憶装置が記憶する前記第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定する、情報処理方法。
  8. 情報処理装置が、
    第１画像に含まれる人物から抽出される、前記人物の顔の特徴情報である第１の特徴情報と、記憶装置が記憶する、認証対象の人物の顔の特徴情報である第１の登録特徴情報とを照合し、
    前記人物から抽出される、前記人物の顔以外の領域を含む特徴情報である第２の特徴情報を第２の登録特徴情報として前記記憶装置に記憶させ、
    第２画像に含まれる人物から抽出された第２の特徴情報と前記記憶装置が記憶する第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定し、
    前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記第１画像に含まれる人物から抽出される前記第１の特徴情報と前記第１の登録特徴情報との照合結果が不一致だった場合、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶装置が記憶する前記第１の登録特徴情報とを照合する、情報処理方法。
  9. コンピュータに、
    第１画像に含まれる人物から抽出される、前記人物の顔の特徴情報である第１の特徴情報と、記憶装置が記憶する、認証対象の人物の顔の特徴情報である第１の登録特徴情報とを照合する手順、
    前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記照合する手順における照合結果が不一致だった場合、当該人物から抽出される、前記人物の顔以外の領域を含む特徴情報である第２の特徴情報を第２の登録特徴情報として前記記憶装置に記憶させる手順、
    第２画像に含まれる人物から抽出された前記第２の特徴情報と前記記憶装置が記憶する前記第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定する手順、を実行させるためのプログラム。
  10. コンピュータに、
    第１画像に含まれる人物から抽出される、前記人物の顔の特徴情報である第１の特徴情報と、記憶装置が記憶する、認証対象の人物の顔の特徴情報である第１の登録特徴情報とを照合する手順、
    前記人物から抽出される、前記人物の顔以外の領域を含む特徴情報である第２の特徴情報を第２の登録特徴情報として前記記憶装置に記憶させる手順、
    第２画像に含まれる人物から抽出された第２の特徴情報と前記記憶装置が記憶する第２の登録特徴情報とを照合することで前記第２画像から前記第２の登録特徴情報に対応する人物を特定する手順、
    前記第１画像に含まれる前記人物から前記第１の特徴情報を抽出できなかった場合、または、前記第１画像に含まれる人物から抽出される前記第１の特徴情報と前記第１の登録特徴情報との照合結果が不一致だった場合、前記第２画像から特定された前記人物から抽出される第１の特徴情報と、前記記憶装置が記憶する前記第１の登録特徴情報とを照合する手順、を実行させるためのプログラム。
JP2020558776A 2018-12-07 2018-12-07 情報処理装置、情報処理方法、およびプログラム Active JP7196932B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2018/045054 WO2020115890A1 (ja) 2018-12-07 2018-12-07 情報処理システム、情報処理装置、情報処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
JPWO2020115890A1 JPWO2020115890A1 (ja) 2021-10-28
JP7196932B2 true JP7196932B2 (ja) 2022-12-27

Family

ID=70974223

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020558776A Active JP7196932B2 (ja) 2018-12-07 2018-12-07 情報処理装置、情報処理方法、およびプログラム

Country Status (4)

Country Link
US (8) US11847848B2 (ja)
EP (1) EP3893192A4 (ja)
JP (1) JP7196932B2 (ja)
WO (1) WO2020115890A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11393212B2 (en) * 2018-04-20 2022-07-19 Darvis, Inc. System for tracking and visualizing objects and a method therefor
JP7207431B2 (ja) 2018-12-27 2023-01-18 日本電気株式会社 情報処理システム、情報処理装置、情報処理方法、およびプログラム
WO2023152970A1 (ja) * 2022-02-14 2023-08-17 日本電気株式会社 認証装置、認証方法、及び、記録媒体
WO2023162041A1 (ja) * 2022-02-22 2023-08-31 日本電気株式会社 サーバ装置、システム、サーバ装置の制御方法及び記憶媒体
JP7228822B1 (ja) 2022-07-13 2023-02-27 パナソニックＩｐマネジメント株式会社 認証システムおよび認証方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010171550A (ja) 2009-01-20 2010-08-05 Canon Inc 画像記録装置
JP2010219607A (ja) 2009-03-13 2010-09-30 Panasonic Corp ターゲットフレーム抽出装置、撮像装置およびデジタルカメラ
JP2013065119A (ja) 2011-09-15 2013-04-11 Toshiba Corp 顔認証装置及び顔認証方法
JP2016046639A (ja) 2014-08-21 2016-04-04 セコム株式会社 認証装置
JP2016127563A (ja) 2015-01-08 2016-07-11 パナソニックＩｐマネジメント株式会社 人物追尾システム及び人物追尾方法

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3584334B2 (ja) * 1997-12-05 2004-11-04 オムロン株式会社 人間検出追跡システムおよび人間検出追跡方法
US6698653B1 (en) 1999-10-28 2004-03-02 Mel Diamond Identification method, especially for airport security and the like
TWI278782B (en) 2001-08-24 2007-04-11 Toshiba Corp Personal recognition apparatus
CN101398891B (zh) 2004-08-03 2010-12-08 松下电器产业株式会社 人物判定装置
JP2008108243A (ja) 2006-09-28 2008-05-08 Toshiba Corp 人物認識装置および人物認識方法
JP2009048347A (ja) 2007-08-17 2009-03-05 Seiko Epson Corp 画像処理装置、画像処理方法、および、画像処理プログラム
JP2009104526A (ja) 2007-10-25 2009-05-14 Kenwood Corp 認証装置、認証方法及びプログラム
US8705813B2 (en) * 2010-06-21 2014-04-22 Canon Kabushiki Kaisha Identification device, identification method, and storage medium
KR101381439B1 (ko) 2011-09-15 2014-04-04 가부시끼가이샤 도시바 얼굴 인식 장치 및 얼굴 인식 방법
JP5766096B2 (ja) 2011-11-09 2015-08-19 セコム株式会社 顔画像認証装置
WO2013100697A1 (en) 2011-12-29 2013-07-04 Intel Corporation Method, apparatus, and computer-readable recording medium for authenticating a user
WO2015136938A1 (ja) 2014-03-14 2015-09-17 株式会社 東芝 情報処理方法および情報処理システム
JP6470503B2 (ja) * 2014-05-20 2019-02-13 キヤノン株式会社 画像照合装置、画像検索システム、画像照合方法、画像検索方法およびプログラム
JP2018077552A (ja) 2016-11-07 2018-05-17 アズビル株式会社 ゲート管理システムおよび方法
WO2018117704A1 (en) 2016-12-23 2018-06-28 Samsung Electronics Co., Ltd. Electronic apparatus and operation method thereof
TWI604332B (zh) * 2017-03-24 2017-11-01 緯創資通股份有限公司 遠距離的身份辨識方法及其系統與電腦可讀取記錄媒體
US11030291B2 (en) * 2018-09-14 2021-06-08 Comcast Cable Communications, Llc Methods and systems for user authentication

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010171550A (ja) 2009-01-20 2010-08-05 Canon Inc 画像記録装置
JP2010219607A (ja) 2009-03-13 2010-09-30 Panasonic Corp ターゲットフレーム抽出装置、撮像装置およびデジタルカメラ
JP2013065119A (ja) 2011-09-15 2013-04-11 Toshiba Corp 顔認証装置及び顔認証方法
JP2016046639A (ja) 2014-08-21 2016-04-04 セコム株式会社 認証装置
JP2016127563A (ja) 2015-01-08 2016-07-11 パナソニックＩｐマネジメント株式会社 人物追尾システム及び人物追尾方法

Also Published As

Publication number Publication date
EP3893192A1 (en) 2021-10-13
US12087076B2 (en) 2024-09-10
US20230368563A1 (en) 2023-11-16
US20230368560A1 (en) 2023-11-16
EP3893192A4 (en) 2021-12-15
US20230368559A1 (en) 2023-11-16
US12087075B2 (en) 2024-09-10
US20230368561A1 (en) 2023-11-16
US11847848B2 (en) 2023-12-19
JPWO2020115890A1 (ja) 2021-10-28
US20230368564A1 (en) 2023-11-16
US20230368562A1 (en) 2023-11-16
US20220019769A1 (en) 2022-01-20
US20240021006A1 (en) 2024-01-18
WO2020115890A1 (ja) 2020-06-11

Similar Documents

Publication Publication Date Title
JP7196932B2 (ja) 情報処理装置、情報処理方法、およびプログラム
US9875392B2 (en) System and method for face capture and matching
JP2021015627A (ja) 顔照合システム、顔照合方法、及びプログラム
KR20200006987A (ko) 출입 제어 방법, 출입 제어 장치, 시스템 및 저장매체
US20230401916A1 (en) Information processing apparatus, information processing system, and information processing method
WO2008018423A1 (fr) Dispositif de vérification d'objets et procédé de vérification d'objets
JP4892268B2 (ja) 入退室・所在管理システム
JP7257765B2 (ja) 情報処理装置、認証システムおよびそれらの制御方法、プログラム
JP2024056872A (ja) 滞在管理装置、滞在管理方法、及びプログラム
JP2014142838A (ja) 入室管理システムおよび入室管理装置
JP7020567B2 (ja) 情報処理システム、情報処理装置、情報処理方法、およびプログラム
JP7298729B2 (ja) 情報処理システム、情報処理装置、情報処理方法、およびプログラム
JP2022117025A (ja) 本人確認方法、プログラム、及び情報システム
JP7371806B2 (ja) 情報処理装置、情報処理方法、およびプログラム
US20230222193A1 (en) Information processing device, permission determination method, and program
JP2019159372A (ja) 認証装置、認証システム、認証方法、コンピュータプログラム、及び記憶媒体

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210527

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210527

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220524

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220722

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221115

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221128

R151 Written notification of patent or utility model registration

Ref document number: 7196932

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151