JP2013149242A - 情報処理装置、その制御方法、及びプログラム - Google Patents

情報処理装置、その制御方法、及びプログラム Download PDF

Info

Publication number
JP2013149242A
JP2013149242A JP2012264744A JP2012264744A JP2013149242A JP 2013149242 A JP2013149242 A JP 2013149242A JP 2012264744 A JP2012264744 A JP 2012264744A JP 2012264744 A JP2012264744 A JP 2012264744A JP 2013149242 A JP2013149242 A JP 2013149242A
Authority
JP
Japan
Prior art keywords
face
dictionary
image
face dictionary
file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012264744A
Other languages
English (en)
Other versions
JP2013149242A5 (ja
JP6161271B2 (ja
Inventor
Takahiro Matsushita
貴博 松下
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2012264744A priority Critical patent/JP6161271B2/ja
Priority to US13/718,365 priority patent/US9152848B2/en
Publication of JP2013149242A publication Critical patent/JP2013149242A/ja
Publication of JP2013149242A5 publication Critical patent/JP2013149242A5/ja
Application granted granted Critical
Publication of JP6161271B2 publication Critical patent/JP6161271B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/50Maintenance of biometric data or enrolment thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Collating Specific Patterns (AREA)
  • Image Analysis (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

【課題】外部装置において顔辞書に登録された顔画像の、顔辞書の更新による消失を防ぐ。
【解決手段】外部装置から、対象人物についての1以上の顔画像と各顔画像に含まれる顔領域の特徴量とを含む、対象人物についての顔認識ライブラリを取得する。そして、取得された顔認識ライブラリに含まれる顔画像と記録している対象人物についての顔画像から、予め設定された条件に従って1以上の顔画像を選択し、該選択した顔画像と該顔画像に含まれる顔領域の特徴量とを含む、新たな顔認識ライブラリを生成する。このとき情報処理装置は、対象人物についての顔認識ライブラリに含まれる顔画像のうち、外部装置において対象人物についての顔認識ライブラリに登録された顔画像と、該顔画像に含まれる顔領域の特徴量とを顔画像データベースに記録する。
【選択図】図5

Description

本発明は、情報処理装置、その制御方法、及びプログラムに関し、特に画像に含まれる顔画像を処理する技術に関する。
従来、撮像装置が撮影画像に対して顔認識処理を行い、撮影画像に含まれる顔画像について、人物を特定し、特定した人物を示す情報を該顔画像に関連付けた顔登録ファイルを生成し、外部装置に提供することが開示されている(特許文献1参照)。
また、顔認識機能を搭載したアプリケーションソフトウエアをインストールしたパーソナルコンピュータ(PC)でも、画像に含まれる特定の人物の顔画像を所定のデータベースに記憶し、それに基づいて、特定の人物を含む画像を検索することが行われている。
特開2008−278350号公報
一般的に、撮像装置はPCに比べて記憶領域の容量が小さい。また、撮像装置の記憶領域は撮影処理を最優先して利用される。
また、一般的に、人物の顔は年齢等の時間的な要因に伴って変化するため、記憶している顔画像が古くなると、特定の人物を含む画像の検索の精度が低減することがある。そこで、新しい顔画像を追加して更新することで検索の精度を向上させている。
しかし、上述の通り撮像装置の記憶領域の容量は小さいため、新しい顔画像を記憶する容量を確保するためには、既存の顔画像を削除しなければならなかった。
一方、ユーザが撮像装置で撮影して作成した顔画像は、例えば、ユーザがインターネット等を介して取得した、第三者により作成された顔画像よりも、ユーザにとって重要度が高いと考えられる。即ち、新しい顔画像を記憶するためにユーザが撮像装置による撮影で得た顔画像が消失してしまった場合、不都合が発生する。例えば、ユーザが以前に撮影した顔画像を利用したくなった場合、ユーザは再度、同じ人物に対して撮影を行い、同様の顔画像を作成する必要があった。あるいは、例えば消失した顔画像が古い場合には、同じ人物を撮影することは困難であり、同様の顔画像を作成できない場合もあった。
本発明は、上述の問題点に鑑みてなされたものであり、撮像装置により作成された顔画像の消失を防ぐことのできる情報処理装置、その制御方法、及びプログラムを提供することを目的とする。
前述の目的を達成するために、本発明の情報処理装置は、以下の構成を備える。
人物ごとに、画像に含まれる人物の顔に関する顔データを記録する第1の顔辞書を生成する生成手段と、第1の顔辞書と対応する人物の顔データを記録する第2の顔辞書を撮像装置から受信する受信手段であって、第2の顔辞書が、撮像装置により取得された画像に含まれる人物の顔データに基づき撮像装置により更新される受信手段と、受信された第2の顔辞書に記録された顔データを所定の記憶装置に記憶する記憶手段と、第2の顔辞書の更新日時が第1の顔辞書の更新日時よりも古いとき、第1の顔辞書を撮像装置へ送信する送信手段であって、第2の顔辞書が撮像装置において、送信された第1の顔辞書により上書きされる送信手段と、を有し、送信手段は、第1の顔辞書が、所定の期間内に撮影された画像に含まれる人物の顔データを含まないとき、第1の顔辞書を撮像装置へ送信しないことを特徴とする。
このような構成により本発明によれば、外部装置において顔辞書に登録された顔画像の、顔辞書の更新による消失を防ぐことが可能となる。
本発明の実施形態に係るPC100の機能構成を示すブロック図 本発明の実施形態に係る撮像装置200の機能構成を示すブロック図 本発明の第1の実施形態に係る、顔辞書及び顔辞書管理ファイルのデータ構造を例示した図 本発明の第1の実施形態に係る顔辞書更新処理を例示したフローチャート 本発明の第1の実施形態に係る、顔辞書更新アプリケーションにおける顔辞書に含める顔画像を選択するウィンドウを例示した図 本発明の第1の実施形態に係る自動更新処理を例示したフローチャート 本発明の第1の実施形態に係る更新により消失する外部登録顔画像を説明するための図 本発明の第1の実施形態に係る手動更新処理を例示したフローチャート 本発明の第1の実施形態に係る、選択された顔画像を用いた顔認識処理の結果をシミュレーションする機能を説明するための図 本発明の第1の実施形態に係る消失する外部登録顔画像の記録確認を通知するGUIを示した図 本発明の第1の実施形態に係る、複数の対象人物の顔辞書を撮像装置200に設定する際に用いられるGUIを示した図 本発明の変形例に係る自動更新処理を例示したフローチャート 本発明の第2の実施形態に係る顔辞書及び顔画像ファイルのデータ構造を例示した図 本発明の第2の実施形態に係る撮像装置の動作を例示したフローチャート 本発明の第2の実施形態に係るPCの動作を例示したフローチャート 本発明の第2の実施形態に係るPCの動作を例示したフローチャート 本発明の第2の実施形態に係るPCの動作を例示したフローチャート 本発明の第2の実施形態に係る撮像装置の動作を例示したフローチャート
[第1の実施形態]
以下、本発明の例示的な実施形態について、図面を参照して詳細に説明する。なお、以下に説明する一実施形態は、情報処理装置の一例としての、外部装置である撮像装置200の顔認識処理で用いられる顔認識ライブラリ(顔辞書)を生成可能なPCに、本発明を適用した例を説明する。しかし、本発明は、顔辞書を生成することが可能な任意の機器に適用可能である。
また、本明細書においては、以下に定義した用語を用いて発明を説明する。
・顔辞書 :1人の人物についての1以上の顔画像と各顔画像に含まれる顔
領域の特徴量のデータとを含む、顔認識処理におけるマッチン
グ処理に用いられる顔認識ライブラリ。なお、顔辞書は、含め
られる顔画像の数あるいは最大ファイルサイズが予め定められ
ているものとする。即ち、顔辞書には対象人物について管理さ
れている全ての顔画像が含まれない場合がある。また本実施形
態では顔画像を管理するPC100において、撮像装置200
が保持する顔辞書が生成される。
・更新用顔辞書 :顔辞書の更新用にPC100で作成される、更新対象人物につ
いての顔辞書。更新用顔辞書に含められた顔画像を示す情報は
、更新後は後述する顔辞書管理ファイルと共にPC100内に
保持される。
・自動更新 :カメラで撮影されて顔辞書に登録された対象人物についての顔
画像を含む、PC100で管理する対象人物についての全ての
顔画像から、予め定められた条件に従って選択された顔画像群
で構成される更新用顔辞書を生成し、撮像装置200の保持す
る顔画像を更新する。
・手動更新 :ユーザにより選択された顔画像群で構成される更新用顔辞書を
生成し、撮像装置200の保持する顔画像を更新する。
・顔辞書管理ファイル:撮像装置200が保持する全ての顔辞書、あるいは更新により
撮像装置200に出力した全ての顔辞書の管理用に生成される
ファイル。顔辞書の更新時は、互いの機器が有する顔辞書管理
ファイルの比較を行うことにより、更新用顔辞書に含める顔画
像の選択、及び顔画像のPC100への記録の判断が行われる
。なお、本実施形態では顔辞書管理ファイルは管理する全ての
人物についての顔辞書の情報が含められるものとして説明する
が、顔辞書管理ファイルは各人物の顔辞書について1つずつ存
在するものであってもよい。
<PC100の構成>
図1は、本発明の実施形態に係るPC100の機能構成を示すブロック図である。
CPU101は、PC100が有する各ブロックの動作を制御する。具体的にはCPU101は、例えば記録媒体104に記憶されている顔辞書更新アプリケーションの動作プログラムを読み出し、RAM103に展開して実行することにより、各ブロックの動作を制御する。
ROM102は、例えば書き換え可能な不揮発性メモリであり、PC100が有する各ブロックの動作において必要となるパラメータ等を記憶する。なお、本実施形態では顔辞書の更新処理に係る動作プログラムは記録媒体104に記録されているものとして説明するが、ROM102に記憶されている構成であってもよい。
RAM103は、揮発性メモリであり、顔辞書更新アプリケーションの動作プログラムや他の動作プログラムの展開領域としてだけでなく、PC100が有する各ブロックの動作により出力された中間データを記憶する格納領域としても用いられる。
記録媒体104は、例えばHDDやSSD等の、PC100に着脱可能に接続される記録装置(記憶領域)である。本実施形態では記録媒体104には、顔辞書更新アプリケーションの動作プログラムに加え、顔辞書の生成に用いられる各人物について撮影された1以上の顔画像及び各顔画像に含まれる顔領域の特徴量が記録される。即ち、記録媒体104内の一部の領域には、人物ごとに関連付けられた顔画像及び各顔画像に含まれる顔領域の特徴量を記録する顔画像データベースとして機能する。また記録媒体104には、上述した顔辞書管理ファイル(PC側顔辞書管理ファイル)が記録される。記録媒体104に記録されるPC側顔辞書管理ファイルは、PC100に接続された撮像装置200の顔辞書を更新した際の更新用顔辞書の情報が含まれる。
通信部105は、PC100が有する外部装置とのデータの送受信を行う通信インタフェースである。外部装置である撮像装置200とPC100とは、例えばUSB(Universal Serial Bus)ケーブルによる有線接続、あるいは無線LANによる無線接続など、有線無線を問わず通信部105を介して接続される。PC100及び撮像装置200間のデータ通信のプロトコルとしては、例えば、PTP(Picture Transfer Protocol)やMTP(Media Transfer Protocol)が用いられてよい。
表示部106は、例えばLCD等のPC100に接続された表示装置である。本実施形態では表示部106はPC100にその構成が含まれるものとして説明するが、表示部106はPC100に接続された外部表示装置であってもよいことは容易に想像されよう。本実施形態では、表示部106には顔辞書更新アプリケーションに係るGUIデータを用いて生成された表示画面が表示される。
操作入力部107は、例えばマウスやキーボード等の入力装置を含む、PC100が有するユーザインタフェースである。操作入力部107は、ユーザにより入力装置の操作がなされたことを検出すると、操作内容に対応する制御信号を生成してCPU101に伝送する。
<撮像装置200の構成>
次に、本発明の実施形態に係る撮像装置200の機能構成を、図2を用いて説明する。
カメラCPU201は、撮像装置200が有する各ブロックの動作を制御する。具体的にはカメラCPU201は、カメラROM202に記憶されている撮影処理等の動作プログラムを読み出し、不図示のカメラRAMに展開して実行することにより、各ブロックの動作を制御する。
カメラROM202は、例えば書き換え可能な不揮発性メモリであり、撮影処理等の動作プログラムに加え、撮像装置200が有する各ブロックの動作に必要なパラメータ等を記憶する。
カメラ撮像部203は、撮影光学系、CCDやCMOSセンサ等の撮像素子、A/D変換部等で構成される。カメラ撮像部203は、撮像素子上に結像された光学像を光電変換し、さらにA/D変換処理を含む種々の画像処理が適用された画像を出力する。
カメラ記録媒体204は、例えば撮像装置200が有する内蔵メモリや、メモリカードやHDD等の撮像装置200に着脱可能に接続される記録装置である。本実施形態ではカメラ記録媒体204には、撮影処理により撮影された画像や、撮像装置200における顔認識処理で参照される顔辞書が記録される。カメラ記録媒体204に記録される顔辞書は、PC100で実行される顔辞書管理アプリケーションにより生成されたものに限らず、撮像装置200における撮影により得られた顔画像が登録されて生成されたものであってもよい。またカメラ記録媒体204には、カメラ記録媒体204に記録されている顔辞書を管理する顔辞書管理ファイル(カメラ側顔辞書管理ファイル)が記録される。なお、本実施形態では、顔辞書及び顔辞書管理ファイルがカメラ記録媒体204に記録されているものとして説明するが、本発明の実施はこれに限られるものではない。例えば顔辞書及び顔辞書管理ファイルはカメラROM202等、PC100における顔辞書管理アプリケーションによりアクセス可能、あるいはファイル書き込み要求を受けて書き込み可能な領域に格納されていればよい。また顔辞書及び顔辞書管理ファイルは、PC100から送信された際に、カメラCPU201が所定の記録領域に格納する構成であってもよい。
カメラ通信部205は、撮像装置200が有する外部装置とのデータの送受信を行う通信インタフェースである。なお、本実施形態では、カメラ通信部205の通信インタフェースは、PC100の通信部105と同一のプロトコルでデータ通信が可能な通信インタフェースであるものとする。
カメラ表示部206は、例えば小型LCD等の撮像装置200が有する表示装置である。カメラ表示部206には、撮影によりカメラ撮像部203から出力された画像や、カメラ記録媒体204に記録された画像等が表示される。
カメラ操作入力部207は、例えば電源ボタンやシャッタボタン等の操作部材を含む、撮像装置200が有するユーザインタフェースである。カメラ操作入力部207は、ユーザによる操作部材の操作がなされたことを検出すると、操作内容に対応する制御信号を生成してカメラCPU201に伝送する。
<顔辞書及び顔辞書管理ファイルのデータ構造>
ここで、記録媒体104及びカメラ記録媒体204に記録される、本実施形態の顔辞書及び顔辞書管理ファイル(PC側及びカメラ側)のデータ構造について、図3を用いて説明する。
上述したように、PC100及び撮像装置200の各々は、それぞれ異なる顔辞書管理ファイルを有している。PC側顔辞書管理ファイルは、自動更新あるいは手動更新時に生成した更新用顔辞書に含めた顔画像についての情報を管理する。またカメラ側顔辞書管理ファイルは、撮像装置200のカメラ記録媒体204に記録されている顔辞書に含まれる顔画像についての情報を管理している。つまり、撮像装置200が有するカメラ側顔辞書管理ファイルは、例えば撮像装置200において撮影した顔画像の顔辞書への登録が行われた場合に変更が生じる。一方、PC100が有するPC側顔辞書管理ファイルは、PC100と撮像装置200とが接続された状態で、顔辞書更新アプリケーションにおける顔辞書更新処理が実行されるまでは、前回の更新時に生成した更新用顔辞書についての情報が保持される。即ち、PC100及び撮像装置200が有する顔辞書管理ファイルは、顔辞書更新処理が実行された直後は同一の情報を有する顔辞書管理ファイルである。しかしながらPC100及び撮像装置200が有する顔辞書管理ファイルは、顔辞書更新処理の実行後には撮像装置200における新たな顔画像の登録等がなされることにより、互いの情報に差が生じることになる。
(顔辞書のデータ構造)
まず1人の対象人物についての顔辞書のデータ構造を、図3(a)を用いて説明する。
1人の対象人物についての顔辞書は、該対象人物を識別する人物名301と、顔辞書に含められた該対象人物についての1以上の顔画像の各々についての詳細情報(顔画像情報(1)、顔画像情報(2)、・・・、顔画像情報(N))とで構成される。1つの顔画像についての詳細情報である顔画像情報(1)302は、
1.該顔画像に含まれる顔領域の特徴量データ(1)303(顔データ)
2.該顔画像が撮像装置200において登録された顔画像(外部登録顔画像)であるか
否かを示すカメラ作成フラグ(1)304(論理型)
を含む。
なお、顔辞書に含まれる顔画像の選択方法については、後述する顔辞書更新処理の説明において詳細を述べる。
(顔辞書管理ファイルのデータ構造)
次に、顔辞書管理ファイルのデータ構造を、図3(b)を用いて説明する。なお、顔辞書管理ファイルは、例えば顔辞書の生成あるいは顔辞書に変更が生じた際に、それぞれの機器においてCPU101あるいはカメラCPU201が生成するものとする。
本実施形態では顔辞書管理ファイル310は、撮像装置200の保持する全ての顔辞書についての情報を管理するデータである。具体的には顔辞書管理ファイル310内の1つの顔辞書(1)311についての情報は、図3(b)に示されるように、
1.該顔辞書を示す顔辞書ファイル名(1)312
2.該顔辞書の更新がなされた更新日時(1)313
3.該顔辞書に含められた各顔画像の詳細情報(顔画像詳細情報(1−1)314、顔
画像詳細情報(1−2)320、・・・、顔画像詳細情報(1−N)330)
を含む。
また、顔辞書に含められた顔画像詳細情報の各々は、1つの顔画像詳細情報(1−1)314を例にとると、
1.該顔画像の識別情報である、記録媒体104における顔画像ファイル名(1−1)
315
2.該顔画像が撮影された撮影日時(1−1)316
3.該顔画像が外部登録顔画像であるか否かを示すカメラ作成フラグ(1−1)317
(論理型)
4.該顔画像が顔辞書の代表画像として設定されているか否かを示す代表画像フラグ(
1−1)318(論理型)
を含む。
<顔辞書更新処理>
このような構成をもつ本実施形態のPC100の顔辞書更新処理について、図4のフローチャートを用いて具体的な処理を説明する。該フローチャートに対応する処理は、CPU101が、例えば記録媒体104に記憶されている対応する処理プログラムを読み出し、RAM103に展開して実行することにより実現することができる。なお、本顔辞書更新処理は、例えばPC100において実行中の顔辞書更新アプリケーションにおいて、ユーザからの1人の対象人物についての顔辞書更新指示がなされたことをCPU101が判断した際に開始されるものとして説明する。
S401で、CPU101は、対象人物の顔辞書に含める顔画像の自動選択設定がなされているか否かを判断する。具体的にはCPU101は、例えばRAM103に記憶されている顔辞書更新設定に含まれる顔画像の選択設定の情報を参照し、顔画像の選択設定が自動選択を示す設定となっているか否かを判断する。
(顔辞書更新アプリケーションのGUI例)
ここで、本実施形態の顔辞書更新アプリケーションで用いられるGUIを参照して、アプリケーションの概要について説明する。本実施形態の顔辞書更新アプリケーションでは、1人の対象人物についての顔辞書に含める顔画像の選択に係るGUIとして、図5に示されるようなウィンドウ500を使用するものとする。
図5に示されるように、ユーザは「自動で最適化する」と記載された顔画像の自動選択設定の自動選択チェックボックス501の状態を変更することにより、顔辞書に含める顔画像を自動選択にするか、あるいは手動選択にするかを切り替えることができる。CPU101は、ユーザにより自動選択チェックボックス501の状態変化がなされたことを操作入力部107からの制御信号により検出すると、RAM103に記憶されている顔画像の自動選択設定の状態を変更する。
顔辞書に含める顔画像の自動選択を行わない場合、ユーザは記録媒体104の顔画像データベースに登録されている顔画像の中から任意の顔画像を選択して顔辞書に含めることができる。記録媒体104の顔画像データベースに登録されている顔画像は、PC登録顔画像リスト502及びカメラ登録顔画像リスト503に、例えば撮影日時の新しい順に一覧表示される。カメラ登録顔画像リスト503には、PC100以外の外部装置(本実施形態では撮像装置200)で顔辞書に登録された顔画像(外部登録顔画像)が一覧表示される。一方、PC登録顔画像リスト502には、記録媒体104の顔画像データベースに記録されている顔画像のうち、外部登録顔画像を除く顔画像が一覧表示される。ユーザは、各顔画像の左上に表示された選択チェックボックス504の状態をチェック状態に変更することで、該顔画像を顔辞書に含める顔画像として選択することができる。
なお、本実施形態では、1人の対象人物についての顔辞書には、5枚の顔画像が選択可能であるものとする。CPU101は、1つの顔画像の選択チェックボックス504のチェック状態への変更指示を操作入力部107からの制御信号で検出すると、現在チェック状態にある顔画像の数が5枚未満である場合に、該選択チェックボックス504をチェック状態に変更する。
また、ユーザによる顔画像の選択がなされていない状態では、最後の更新時に対象人物の顔辞書に含めた顔画像に対応する選択チェックボックス504がチェック状態にされて表示される。具体的にはCPU101は、記録媒体104に記憶されているPC側顔辞書管理ファイルを参照して、最後の更新時に対象人物の顔辞書に含めた顔画像を特定し、該顔画像に対応する選択チェックボックス504をチェック状態に変更して表示する。このとき、他の顔画像については、対応する選択チェックボックス504は非チェック状態に制御される。
そして、このように顔辞書に含める顔画像の選択方法、あるいは顔辞書に含める顔画像の選択が完了した後にユーザは更新ボタン505を操作することにより、CPU101に顔辞書更新指示を行うことができる。
CPU101は、S401において対象人物の顔辞書に含める顔画像の自動選択設定がなされていると判断した場合は処理をS402に移し、なされていないと判断した場合は処理をS403に移す。
S402で、CPU101は、対象人物の顔辞書に含める顔画像を予め設定された条件に従って自動的に選択する自動更新処理を実行し、本顔辞書更新処理を完了する。
(自動更新処理)
ここで、本実施形態のPC100の自動更新処理について、図6を用いて詳細を説明する。
S601で、CPU101は、撮像装置200のカメラ記録媒体204から顔辞書(第2の顔辞書)及びカメラ側顔辞書管理ファイルを取得する。顔辞書及びカメラ側顔辞書管理ファイルの取得方法は、例えばCPU101が該ファイルの送信要求コマンドを通信部105を介して撮像装置200に送信し、要求に対するレスポンスとして受信してもよい。また例えばPC100と撮像装置200とがUSB接続されている場合、CPU101は外部接続ストレージとして認識したカメラ記録媒体204から、直接カメラ側顔辞書管理ファイルを取得してもよい。そしてCPU101は、取得したPC側顔辞書管理ファイルをRAM103に展開する。
S602で、CPU101は、同様に記録媒体104に記録されているPC側顔辞書管理ファイルを読み出してRAM103に展開する。
S603で、CPU101は、予め設定された条件に従って対象人物についての更新用顔辞書(第1の顔辞書)に含める顔画像の選択(自動選択)を行う。本実施形態では更新用顔辞書に含める顔画像は、時間的要因による変化を考慮するため、対象人物の顔画像のうちの現在日時との撮影日時の差が少ない、即ち撮影日時が新しい順に所定数(5枚)の顔画像を選択する。即ち、本実施形態の顔画像更新アプリケーションでは予め設定された条件として、対象人物の顔画像のうち、撮影日時を新しい順に並べた上位5枚の顔画像を選択する条件が設定されているものとする。しかしながら、更新用顔辞書に含める顔画像の選択条件は撮影日時に限らず、例えば定量化した特徴量の分布におけるピーク値に対応する顔画像や、顔認識処理におけるマッチング回数が上位の顔画像等、他の条件が設定されてよい。
CPU101は、RAM103に展開されたカメラ側顔辞書管理ファイル及びPC側顔辞書管理ファイルを参照する。そしてCPU101は、現在、撮像装置200が保持する顔辞書(現在の顔辞書)及び最後の更新時にPCから撮像装置200に出力した顔辞書(最後の更新用顔辞書)に含まれる顔画像のうち、撮影日時の新しい順に並べた場合の上位5枚の顔画像を、最新の更新用顔辞書に含める顔画像として選択する。最新の更新用顔辞書に含める顔画像として選択された顔画像を示す情報は、CPU101により例えばRAM103に格納される。
例えばRAM103に展開されているカメラ側顔辞書管理ファイル及びPC側顔辞書管理ファイルに含まれる顔画像が、図7に示されるような顔画像701a乃至eと顔画像702a乃至eである場合を考える。なお、図7では現在の顔辞書に含まれる顔画像のうち、外部登録顔画像701a、b、及びeを識別するために、左上にカメラアイコンを付して示している。外部登録顔画像であるか否かは、CPU101が顔辞書管理ファイルに含まれる各顔画像のカメラ作成フラグを参照することにより判断可能である。
このとき、CPU101は、顔画像701a乃至eおよび顔画像702a乃至eの全てについて、カメラ側顔辞書管理ファイルあるいはPC側顔辞書管理ファイルに含まれる撮影日時の情報を参照し、撮影日時の新しい順に並べた場合の上位5枚の顔画像を選択する。なお、図7の例では顔画像701dと顔画像702dとは同一の顔画像である。CPU101は、顔辞書管理ファイルに含まれる顔辞書ファイル名の情報を参照することで、現在の顔辞書及び最後の更新用顔辞書に同一の顔画像が含まれるか否かを判断することができる。CPU101は、同一の顔画像の存在を判断した後、該同一の顔画像をマージした顔画像の中から更新用顔辞書に含める顔画像を選択する。図7の例では、CPU101は9枚の顔画像の中から撮影日時の新しい順に並べた場合に上位となる顔画像701a、d、及びeと顔画像702c及びeを更新用顔辞書に含める顔画像として選択するものとする。
なお、本実施形態では現在の顔辞書及び最後の更新用顔辞書に含まれる顔画像から、最新の更新用顔辞書に含める顔画像を選択するものとして説明する。しかし、本発明の実施はこれに限られるものではない。例えばPC100が最後の更新用顔辞書を撮像装置200に出力した後に、記録媒体104の顔画像データベースに新たな顔画像が登録される場合を考える。この場合、CPU101は顔画像データベースの変更ごとに、該データベースに含まれる顔画像の中から上述のように撮影日時の新しい順に新たな所定数の顔画像を選択し、次の更新時の比較用のPC側顔辞書管理ファイルを生成し、最後の更新用顔辞書の代わりに用いてもよい。
また、本実施形態では本ステップにおける処理負荷を軽減するために、PC側顔辞書管理ファイルとカメラ側顔辞書管理ファイルとを設けて比較する方法について説明するが、PC100が顔画像データベースに保持する最新の顔画像を最新の更新用顔辞書に含めるために次のようにしてもよい。即ちCPU101は、本ステップにおいて現在の顔辞書に含まれる顔画像と記録媒体104の顔画像データベースに登録されている対象人物の全ての顔画像の中から、予め定められた条件に従って所定数の顔画像を選択する。
S604で、CPU101は、S603で選択された顔画像について、顔画像データベース及びS601で撮像装置200から取得した現在の顔辞書から情報を取得して最新の更新用顔辞書をRAM103に生成する。なお、このときCPU101は同様に、最新の更新用顔辞書に対応する、新たなPC側顔辞書管理ファイルを現在、記録媒体104に記録されているPC側顔辞書管理ファイルとは別に生成する。
S605で、CPU101は、現在の顔辞書に含まれる外部登録顔画像のいずれかが、最新の更新用顔辞書による更新を行うことで消失するか否かを判断する。具体的にCPU101は、RAM103に展開したカメラ側顔辞書管理ファイルとS604で生成した新たなPC側顔辞書管理ファイルとを参照する。そしてCPU101は、現在の顔辞書に含まれる外部登録顔画像のうち、最新の更新用顔辞書に含まれない顔画像は消失すると判断する。CPU101は、いずれかの外部登録顔画像が消失すると判断した場合は処理をS606に移し、消失しないと判断した場合は処理をS607に移す。
S606で、CPU101は、現在の顔辞書に含まれる外部登録顔画像のうち消失すると判断した顔画像をコピーし、記録媒体104の顔画像データベースに記録する。具体的にはCPU101は、消失する顔画像について、S601で取得した顔辞書から該顔画像に含まれる顔領域の特徴量データ、及び該顔画像のカメラ作成フラグを取得する。そしてCPU101は、消失する顔画像についての特徴量データ及びカメラ作成フラグを該顔画像に関連付けて、対象人物の顔画像として記録媒体104の顔画像データベースに記録する。図7の例では、現在の顔辞書に含まれる外部登録顔画像701a、b、及びeのうち、更新用顔辞書に含まれない顔画像701bが顔画像データベースに記録される。
S607でCPU101は、最後の更新用顔辞書に含まれる顔画像のいずれかが、最新の更新用顔辞書による更新を行うことで消失するかを判断する。具体的にはCPU101は、RAM103に展開したPC側顔辞書管理ファイルとS604で生成した新たなPC側顔辞書管理ファイルとを参照する。そしてCPU101は、まず最後の更新用顔辞書に含まれる顔画像のうち、最新の更新用顔辞書に含まれない顔画像を抽出する。さらにCPU101は、抽出した顔画像のうち、記録媒体104の顔画像データベースに記録されていない顔画像が存在するか否かを判断する。
抽出した顔画像の中に顔画像データベースに記録されていない顔画像が存在する場合、該顔画像は最後の更新用顔辞書に含められた外部登録顔画像である。本実施形態ではS606で説明したように、更新により消失すると判断された外部登録顔画像のみが顔画像データベースに記録される。即ち、前回の更新処理において、最新の更新用顔辞書に含まれていたため、消失せずに最後の更新用顔辞書に残った外部登録顔画像は、顔画像データベースに記録されていない。つまり、現在の顔辞書に含まれないが、最後の更新用顔辞書に含められた外部登録顔画像の消失を防ぐため、本ステップにおいて該当の顔画像が存在するか否かを判断する。なお、図7の例では、最後の更新用顔辞書に含まれる顔画像702a乃至eは全て顔画像データベースに記録されており、外部登録顔画像ではないため、本ステップで消失すると判断される顔画像は存在しないものとする。
なお、外部登録画像であるか否かは、顔画像に付与されたカメラ作成フラグを参照することでも判定可能である。よって、S607で、最後の更新用顔辞書に含まれる顔画像のうち、カメラ作成フラグが外部登録顔画像であることを示し、最新の更新用顔辞書に存在しない顔画像が存在するか否かを判定するようにしてもよい。
一方、上述の通り、最後の更新用顔辞書に含まれるが、最新の更新用顔辞書に含まれない顔画像のうち、顔画像データベースに記録されていない顔画像が存在するか否かを判定する場合、カメラ作成フラグを付与する機能のない撮像装置200で作成された顔画像や、他のPC100で作成された顔画像の消失も防ぐことが可能となる。
CPU101は、最後の更新用顔辞書に含まれる外部登録顔画像のうち、顔画像データベースに記録されていない顔画像が最新の更新用顔辞書による更新により消失すると判断した場合は処理をS608に移す。一方、消失しないと判断した場合は処理をS609に移す。
S608で、CPU101は、最後の更新用顔辞書に含まれ、かつ顔画像データベースに記録されていない外部登録顔画像のうち、消失すると判断した顔画像を、S606と同様に記録媒体104の顔画像データベースに追加して登録する。
S609で、CPU101は、通信部105を介して最新の更新用顔辞書を撮像装置200に出力する。これにより、カメラ記録媒体204に記録されている現在の顔辞書は、最新の更新用顔辞書に変更される。以降、カメラ記録媒体204に記録された最新の更新用顔辞書が現在の顔辞書となり、撮像装置200で撮影された顔画像により随時、更新される。
S610で、CPU101は、記録媒体104から最後の更新用顔辞書及びそれと対応するPC側顔辞書管理ファイルを削除し、S604で生成した最新の更新用顔辞書及びそれと対応する新たなPC側顔辞書管理ファイルを記録媒体104に記録する。以降、記録媒体104に記録された最新の更新用顔辞書が最後の更新用顔辞書となる。
そして、本自動更新処理を完了する。
一方、S401において対象人物の顔辞書に含める顔画像の自動選択設定がなされていないと判断した場合、CPU101は処理をS403に移す。S403で、CPU101は、ユーザにより選択された対象人物の顔画像を含む最新の更新用顔辞書で撮像装置200の顔辞書を更新する手動更新処理を実行し、本顔辞書更新処理を完了する。
(手動更新処理)
ここで、本実施形態のPC100の手動更新処理について、図8を用いて詳細を説明する。なお、本手動更新処理において、上述した自動更新処理と同様の処理を行うステップについては同一の参照符号を付して説明を省略し、本実施形態に特徴的な処理を行うステップの説明に留める。
S602においてPC側顔辞書管理ファイルを読みだした後、CPU101は処理をS801に移す。S801で、CPU101は、ユーザにより選択された対象人物の顔画像の情報を取得し、最新の更新用顔辞書に含める顔画像としてRAM103に格納し、処理をS604に移す。
このように、ユーザにより選択された対象人物の顔画像を含めた最新の更新用顔辞書を生成することにより、撮像装置200のカメラ記録媒体204に記録されている顔辞書を変更することができる。
<顔辞書の評価>
なお、対象人物について任意に選択した顔画像を含めた顔辞書を生成する場合、ユーザは顔辞書に含まれる顔画像の組み合わせを自由に設定することができる。しかしながら、任意に選択した顔画像について、各顔画像含まれる顔領域の特徴量データを用いて顔認識処理を行なった場合、ユーザの所望する結果が得られない、即ち対象人物の顔が正しく認識されない可能性がある。このため、本実施形態の顔辞書更新アプリケーションは、顔画像の組み合わせを用いて顔認識処理を行なった場合に、どのような認識結果が得られるかを事前にシミュレーションする機能を有していてもよい。
図9に示されるように、ユーザによりPC登録顔画像リスト502及びカメラ登録顔画像リスト503から顔辞書に含める顔画像の選択が行われた場合、CPU101は選択された顔画像の各々について対応する特徴量データを取得する。そしてCPU101は、記録媒体104の顔画像データベースに登録されている顔画像に対して、各顔画像の特徴量データを使用したマッチング処理を行い、同一人物の顔であると認識される顔画像を特定する。このように選択された全ての顔画像についてマッチング処理を行なった後、同一の人物の顔であると認識された顔画像を、CPU101は結果リスト901に表示する。
このようにすることで、ユーザは顔辞書に含める顔画像を手動で選択する場合に、所望の顔認識結果が得られるか否かを判断した上で、顔辞書に含める顔画像を決定することができる。なお、事前に行うマッチング処理の結果は、同一人物の顔であると認識された顔画像を表示する形態でなくてもよい。例えば、同一人物の顔であると認識された顔画像に含まれる対象人物の顔画像の割り合いを示す数値を算出し、認識正解率として表示する形態であってもよい。
また本実施形態では、更新用顔辞書を用いた更新により、記録媒体104に記録されていない外部登録顔画像が消失すると判断した場合に、CPU101は該顔画像を自動的に記録媒体104に記録するものとして説明した。しかしながら、本発明の実施はこれに限らず、例えば図10に示すような、更新により撮像装置200で顔辞書に登録した顔画像が消失されることを通知し、記録媒体104への記録の要否を選択するダイアログを表示してもよい。このときCPU101は、ユーザによりボタン1001が選択されたと判断した場合には外部登録顔画像の記録媒体104への記録を行った後に顔辞書の更新を行えばよい。また、ボタン1002が選択されたと判断した場合には外部登録顔画像の記録を行わずに顔辞書の更新を行えばよい。
また、上述した顔辞書更新処理において対象人物ごとに顔辞書に含める顔画像を選択して、撮像装置200のカメラ記録媒体204に顔辞書を書き込むことについて説明した。しかしながら、顔辞書更新処理においてカメラ記録媒体204への顔辞書の書き込みを行わず、顔辞書に含める顔画像を決定した上で更新用顔辞書の作成、及び更新用顔辞書に含まれない外部登録顔画像の記録のみを行い、別処理で顔辞書の書き込みを行なってもよい。この場合、顔辞書のカメラ記録媒体204への書き込みは、対象人物ごとに行わなくてもよい。
例えば、撮像装置200を用いてこれから撮影する複数の対象人物が事前に判明している場合、ユーザは図11に示すようなリストを使用して、カメラ記録媒体204に記録される顔辞書を、人物を示す情報によって決定した上で書き込みを指示してもよい。図11の例では、撮像装置200のカメラ記録媒体204に書き込まれている顔辞書に対応する人物名が記載されたカメラ側リスト1101と、PC100に記録されている顔辞書に対応する人物名が記載されたPC側リスト1102とが示されている。ユーザは、PC側リスト1102から顔辞書を書き込みたい人物を選択してボタン1103を操作することで、該人物の顔辞書をカメラ記録媒体204に書き込む顔辞書として設定できる。またユーザは、カメラ側リスト1101から顔辞書を削除したい人物を選択してボタン1104を操作することで、該人物の顔辞書をカメラ記録媒体204から削除する顔辞書として設定できる。このような設定の後、ユーザは顔辞書更新指示を行うことで、CPU101に対応する人物の顔辞書をカメラ記録媒体204に書き込む処理を実行させることができる。なお、顔辞書の登録時に顔辞書に含める顔画像のうちから代表画像に設定する顔画像を決定して代表画像フラグが設定されている場合、図11に示されるように、各人物名の横に対応する顔辞書の代表画像の顔画像を表示してもよい。
以上説明したように、本実施形態の情報処理装置は外部装置において生成され、顔辞書に登録された顔画像が、顔辞書の更新により消失するのを防ぐことができる。具体的には情報処理装置は、人物ごとに、1以上の顔画像と各顔画像に含まれる顔領域の特徴量とを顔画像データベースに記録する。情報処理装置は、外部装置から、対象人物についての1以上の顔画像と各顔画像に含まれる顔領域の特徴量とを含む、対象人物についての顔認識ライブラリ(現在の顔辞書)を取得する。そして、取得された顔認識ライブラリに含まれる顔画像と記録している対象人物についての顔画像から、予め設定された条件に従って1以上の顔画像を選択し、該選択した顔画像と該顔画像に含まれる顔領域の特徴量とを含む、新たな顔認識ライブラリ(最新の顔辞書)を生成する。このとき情報処理装置は、対象人物についての顔認識ライブラリ(現在の顔辞書)に含まれる顔画像のうち、外部装置において生成され、対象人物についての顔認識ライブラリに登録された顔画像と、該顔画像に含まれる顔領域の特徴量とを顔画像データベースに記録する。
このようにすることで、情報処理装置と外部装置とで顔辞書の変更が行われた場合であっても、該顔辞書を統合した際に消失してしまう顔画像を情報処理装置内の顔画像データベースに記録することができる。これにより、例えば統合により生成された顔辞書を用いて顔認識処理を実行した場合に顔認識率が低く、顔辞書の再調整が必要な場合に、統合時に顔画像データベースに記録した顔画像を再度顔辞書に含めることが可能になる。
[変形例]
上述した実施形態では、顔辞書更新処理において現在の顔辞書に含まれる外部登録顔画像のうち、最新の更新用顔辞書に含まれない外部登録顔画像を、記録媒体104の顔画像データベースに登録するものとして説明した。しかしながら、顔辞書更新処理において顔辞書データベースに登録する外部登録顔画像は、最新の更新用顔辞書に含まれないものに限定せず、顔画像データベースに未登録の外部登録顔画像であってよい。即ち、現在撮像装置200が保持する顔辞書に含まれる外部登録顔画像、及びその特徴量の全てが顔辞書更新処理において記録媒体104の顔画像データベースに登録されてもよい。
この場合、例えば自動更新処理においてS605乃至S608の処理を行わず、図12に示すように現在撮像装置200が保持する顔辞書に含まれる外部登録画像のうち、記録媒体104の顔画像データベースに未登録の顔画像をS1201で記録すればよい。このようにすることで、最後の更新時に撮像装置200に出力された顔辞書に含まれる外部登録顔画像が消失するか否かの判断を行う必要もなくなる。
[第2の実施形態]
本実施形態におけるPC100および撮像装置200の構成は、第1の実施形態において図1および図2を参照して説明したものと同様である。
まず、本実施形態における顔辞書ファイルおよび顔画像ファイルについて図13A及びBを参照して説明する。
本実施形態の顔辞書ファイルの構成の一例を図13(a)に示す。顔辞書ファイル1300は、顔辞書ファイル名1301、更新日時1302、人名1303、顔画像詳細情報1304を格納する。また、顔画像詳細情報1304として、顔画像ファイル名1341、代表画像フラグ1342、カメラ作成フラグ、顔特徴量データ1344を含む。なお、本実施形態において、顔画像詳細情報1304に格納可能な顔画像ファイルの個数(N)には上限があり、例えば5個であるとする。これは、撮像装置200のカメラ記録媒体204の記憶容量には上限があるので、顔辞書ファイル1300や顔画像ファイル1320の記憶にかかる負荷を低減するためである。
本実施形態の顔画像ファイルの構成の一例を図13(b)に示す。顔画像ファイル1320は、顔画像ファイル名1321、撮影日時1322、バージョン情報1323、顔画像データ1324を格納する。
<顔辞書ファイルの作成処理>
次に、撮像装置200のカメラCPU201が顔辞書ファイルを作成する動作を図14のフローチャートを参照して説明する。事前に撮像装置200の撮影者によるカメラ操作入力部207への操作を受けて、撮像装置200のカメラCPU201は通常撮影モードとは異なる、顔辞書撮影モードに切り替わって動作を開始しているものとする。
カメラCPU201は、撮影者によるカメラ操作入力部207への操作に応答して、顔辞書ファイルの新規作成の指示を受け付けたか否かを検知する(S1401)。顔辞書ファイルの新規作成の指示を受け付ければ(ステップS1401でYes)、新たに顔辞書ファイルを作成し、カメラ記録媒体204に記憶する(S1402)。ここで、カメラCPU201は、顔辞書ファイル1300の名称を示す顔辞書ファイル名1301を発行し、顔辞書ファイル1300に格納する。また、カメラCPU201は顔辞書ファイルを作成した日時を取得し、更新日時1302として顔辞書ファイル1300に格納する。
カメラCPU201はカメラ撮像部203により被写体を撮影して画像を取得する(S1403)。カメラCPU201は撮影画像を解析して顔領域を抽出し、顔画像データ1324を生成し(S1404)、顔画像データ1324から顔特徴量データ1344を算出する(S1405)。
そして、カメラCPU201は、顔画像ファイル1320を作成する(S1406)。ここで、カメラCPU201は、顔画像ファイルの名称を示す顔画像ファイル名1321を発行し、顔画像ファイル1320に格納する。カメラCPU201はステップS1403で取得された画像の撮影日時を取得し、撮影日時1322として顔画像ファイル1320に格納する。カメラCPU201は画像から顔画像データを生成するのに用いた顔認識アルゴリズムを特定するためのバージョン情報1323を顔画像ファイル1320に格納する。カメラCPU201は、ステップS1403で生成された顔画像データ1324を顔画像ファイル1320に格納する。
また、カメラCPU201は、撮影者によるカメラ操作入力部207への操作に応答して、顔辞書ファイル1300を選択し、選択された顔辞書ファイル1300を更新する(S1407)。なお、顔辞書ファイル1300の選択操作のタイミングは、これに限らず、例えば、撮影処理(S1403)より前に行われていてもよい。ここで、カメラCPU201は顔画像詳細情報1304に顔画像ファイルに関する情報を格納する。カメラCPU201はステップS1406で作成された顔画像ファイルの名称を示す顔画像ファイル名1341を顔辞書ファイル1300に格納する。また、カメラCPU201はステップS1406で作成された顔画像ファイル1320が、顔辞書ファイル1300に含まれる複数の顔画像ファイル1320の代表画像であるか否かを示す値をカメラ作成フラグとして格納する。どの顔画像ファイル1320を代表画像とするかは、撮影者によるカメラ操作入力部207への操作に応答して、カメラCPU201が決定する。あるいは、カメラCPU201が、顔画像ファイル1320の撮影日時1322に基づき、例えば、最新の撮影日時1322を持つ顔画像ファイルを代表画像として決定する。また、カメラCPU201は、顔画像ファイル1320が撮像装置200で作成されたことを示す値をカメラ作成フラグ1343に格納する。カメラCPU201はステップS1405で算出された顔特徴量データ1344を顔辞書ファイル1300に格納する。そして、カメラCPU201は顔辞書ファイル1300を更新した日時を取得し、更新日時1302を上書きする。
カメラCPU201は、顔辞書撮影モードでの撮影処理を終了するか否かを判定し(S1408)、継続する場合はステップS1403へ進み、終了する場合は本処理を終了する。
次に、PC100のCPU101が顔辞書ファイルを更新する動作を図15のフローチャートを参照して説明する。事前にPC100の利用者による操作入力部107への操作を受けて、PC100のCPU101は、顔辞書ファイルの更新指示を受け付け、顔辞書更新アプリケーションを起動しているものとする。また、CPU101は、複数の撮像装置200から画像ファイルを取り込んだり、インターネットを介してWebサーバから画像ファイルをダウンロードしたりして、複数の画像を所定のフォルダに関連付けて記録媒体104に記憶している。
まず、CPU101は記録媒体104に所定のフォルダに関連付けて記憶されている全ての画像を読み出し(S1501)、解析して顔領域を抽出し、顔画像データ1324を生成する(S1502)。そして、CPU101は顔画像ファイルを作成する(S1503)。
そして、顔画像データ1324から顔特徴量データ1344を算出する(S1504)。
PC100のCPU101は、利用者による操作入力部107への操作に応答して、顔辞書ファイルの新規作成の指示を受け付けたか否かを検知する(S1505)。顔辞書ファイルの新規作成の指示を受け付ければ(S1505でYes)、新たに顔辞書ファイルを作成し、記録媒体104に記憶する(S1506)。ここで、CPU101は、顔辞書ファイル1300の名称を示す顔辞書ファイル名1301を発行し、顔辞書ファイル1300に格納する。また、CPU101は、顔辞書ファイル1300を作成した日時を取得し、更新日時1302として顔辞書ファイル1300に格納する。
一方、顔辞書ファイルの新規作成の指示を受け付けていなければ(S1505でNo)、記録媒体104に既に記憶されている顔辞書ファイルの更新とみなし、既存の顔辞書ファイルの中から更新対象を選択する(S1510)。
CPU101は、記録媒体104に記憶された複数の顔画像ファイルの中からいずれか1つを代表画像として指定する(S1507)。ここで、CPU101は、記録媒体104に記憶された複数の顔画像ファイルのうち、撮影日時が所定期間内の顔画像ファイルの一覧画面を表示部106に表示し、利用者による操作入力部107への操作に応答して、代表画像となる顔画像ファイルを指定する。本実施形態では、所定期間内を例えば現在から1年以内として説明する。
CPU101は、顔辞書ファイル1300に格納する顔画像ファイルを選択する(S1508)。例えば、CPU101は、代表画像の顔画像ファイルの特徴量データに基づき、記録媒体104に記憶された顔画像ファイルの中から、特徴量データの差が小さい順に所定個数の顔画像ファイルを選択する。あるいは、CPU101は、代表画像の顔画像ファイルの特徴量データに基づき、記録媒体104に記憶された顔画像ファイルのうち、特徴量データの差が所定値より小さい顔画像ファイルの中から、撮影日時が新しい順に所定個数の顔画像ファイルを選択する。あるいは、CPU101は、記録媒体104に記憶された顔画像ファイルの中から、代表画像の顔画像ファイルを含んで、所定個数の顔画像ファイルを選んだ組み合わせについて、組み合わせに含まれる顔画像ファイル同士の特徴量データの差の総和を算出する。そして、算出結果が所定の上限値よりも小さく、所定の下限値よりも大きくなる組み合わせの顔画像ファイルを選択する。ここで、特徴量データの差が所定の上限値より小さくなる組み合わせを選択することにより、所望の人物とはことなる他人の顔画像ファイルが含まれないようにすることができる。また、特徴量データの差が所定の下限値よりも大きくなる組み合わせを選択することにより、同じ人物の異なる種類(表情、髪型、顔の向きなど)の顔画像ファイルを用いることによって、検索処理の検索精度を向上することができる。
そして、CPU101は、顔辞書ファイルに既存の顔画像ファイルとステップS1508で選択された顔画像ファイルとに変更があるか否かを判定する(S1509)。変更があれば(S1509でYes)、CPU101は、ステップS1508で選択された顔画像ファイルに関する顔画像詳細情報1304によって顔辞書ファイル1300を更新する(S1510)。CPU101は、ステップS1508で選択された顔画像ファイルの顔画像ファイル名1341を顔画像ファイル1320に格納する。CPU101は当該画像ファイルがステップS1507で代表画像として指定されれば、代表画像であることを示す値を代表画像フラグ1342に格納する。一方、当該画像ファイルがステップS1507で代表画像として指定されていなければ、代表画像でないことを示す値を代表画像フラグ1342に格納する。CPU101は当該顔画像ファイルが撮像装置200で作成されていないことを示す値をカメラ作成フラグ1343に格納する。CPU101はステップS1504で算出された、当該画像ファイルの顔特徴量データ1344を記録媒体104から読み出し、顔辞書ファイル1300に格納する。
一方、顔辞書ファイルに既存の顔画像ファイルとステップS1508で選択された顔画像ファイルとに変更がなければ(S1509でNo)、顔辞書ファイルを更新することなく、本処理を終了する。
<顔辞書ファイルの同期処理>
PC100に撮像装置200が接続された時のPC100における動作を図16のフローチャートを参照して説明する。
まず、PC100のCPU101は所定の制御プログラムやOSにしたがって動作し、撮像装置200が接続されたか否かを検知する(S1601)。撮像装置200が接続されたことを検知すると(S1601でYes)、CPU101は顔辞書更新アプリケーションを起動する。そして、CPU101は撮像装置200から顔辞書ファイル1300および顔画像ファイル1320を受信し、RAM103に一時記憶する(S1602)。そして、CPU101は、受信した顔画像ファイル1320の総数を変数Nに代入し、変数iに“1”を代入する(S1603)。
そして、CPU101は、受信したi番目の顔画像ファイル1320が既に記録媒体104に記憶されているか否かを判定する(S1604)。ステップS1604において、CPU101は、受信したi番目の顔画像ファイル1320の撮影日時1322と、記録媒体104に記憶されている顔画像ファイル1320の撮影日時1322とを比較する。CPU101は、受信したi番目の顔画像ファイル1320の撮影日時1322と一致する撮影日時を持つ顔画像ファイルが記録媒体104に存在すれば、受信したi番目の顔画像ファイル1320が既に記録媒体104に記憶されていると判定する。受信したi番目の顔画像ファイル1320の撮影日時1322と一致する撮影日時を持つ顔画像ファイルが記録媒体104に存在しなければ、CPU101は、受信したi番目の顔画像ファイル1320が未だ記録媒体104に記憶されていないと判定する。受信したi番目の顔画像ファイル1320が既に記録媒体104に記憶されていると判定されれば(S1604でYes)、CPU101はステップS1606の処理を実行する。
一方、受信したi番目の顔画像ファイル1320が未だ記録媒体104に記憶されていないと判定されれば(S1604でNo)、CPU101は受信したi番目の顔画像ファイル1320をコピーし、記録媒体104に記憶する(S1605)。これにより、撮像装置200から受信されたi番目の顔画像ファイル1320は、図15のS1508で選択対象となり、PC100において作成される顔辞書ファイル1300に利用することが可能となる。
そして、CPU101は変数iに1を加算し(S1606)、変数iが変数Nより小さければ(S1607でNo)、残りの顔画像ファイル1320についてステップS1604の処理を実行する。一方、変数iが変数Nより大きければ(S1607でYes)、ステップS1608の同期処理を実行する。
以上のように、PC100は撮像装置200が接続されると、同期処理を実行する前に、必ず顔画像ファイルを記録媒体104に記憶する。よって、同期処理が実行されても、撮像装置200で作成された顔画像ファイルを保持しておくことができ、消失してしまうのを防ぐことができる。
次に、PC100における顔辞書ファイルの同期処理について図17を参照して説明する。
まず、PC100のCPU101は、PC側の顔辞書ファイルとカメラ側の顔辞書ファイルの同期処理の実行指示があるか否かを判定する(S1701)。同期処理の実行指示があれば(S1701でYes)、CPU101はPC側の顔辞書ファイル1300の人名1303とカメラ側の顔辞書ファイル1300の人名1303を比較する(S1702)。CPU101は、比較の結果、同一の人名を取得し(S1703)、同一の人名の数を変数Nに代入し、変数iに“1”を代入する(S1704)。そして、CPU101は、i番目の同一の人名1303を持つ、撮像装置200とPC100の顔辞書ファイル1300の更新日時1302を比較する(S1705)。
PC100の顔辞書ファイルの更新日時が撮像装置200のそれよりも後であれば(S1705でYes)、CPU101は、PC100の顔辞書ファイルに属する全ての顔画像ファイルの撮影日時が1年以内であるか否かを判定する(S1706)。PC100の顔辞書ファイルに属する全ての顔画像ファイルの撮影日時が1年以内であれば(S1706でYes)、PC100の顔辞書ファイルおよびそれに属する顔画像ファイルを撮像装置200へ送信する(S1707)。一方、PC100の顔辞書ファイルに属する全ての顔画像ファイルの撮影日時が1年以内でなければ(S1706でNo)、PC100の当該顔辞書ファイルを撮像装置200へ送信せずに、ステップS1709へ進む。
ここで、本実施形態では、ステップS1706において、顔辞書ファイルに属する全ての顔画像ファイルの撮影日時が1年以内か否かによって、顔辞書ファイルの送信処理を選択的に実行する。撮像装置200は、これから撮影される画像ファイルの顔認識処理に対して顔辞書ファイルを利用する。人物の顔は時間の経過によって変化するため、現在、撮影中の人物の顔を認識処理する場合には古い顔画像ファイルでは精度が低下し、新しい顔画像ファイルが必要となる。一方、PC100は、過去に撮影された画像ファイルを蓄積し、昔に撮影された画像ファイルの顔認識処理に対しても顔辞書ファイルを利用するため、古い顔画像ファイルも必要な場合がある。
なお、本実施形態ではステップS1706において、顔辞書ファイルに属する全ての顔画像ファイルの撮影日時が1年以内である場合について説明した。しかし、顔認識処理において精度を高めるためには、撮影日時だけでなく、顔の表情や向きなども考慮する必要がある。よって、ステップS1706で少なくとも1つの顔画像ファイルの撮影日時が1年以内であるか否かを判定し、少なくとも1つの顔画像ファイルの撮影日時が1年以内であれば(S1706でYes)、S1707の処理を実行するようにしてもよい。また、さらに、CPU101が顔辞書ファイルに含まれる顔画像ファイルの顔の表情や顔の向きのばらつきを判定し、ばらつきが大きければ、S1707の処理を実行するようにしてもよい。
一方、PC100の顔辞書ファイルの更新日時が撮像装置200のそれよりも前であれば(S1705でNo)、CPU101は、記録媒体104のi番目の同一の人名の顔辞書ファイルを撮像装置200の顔辞書ファイルで上書きする(S1708)。これにより、PC100の顔辞書ファイルが新しいものに置き換わり、撮像装置200の顔辞書ファイルと同期する。ただし、先にPC100の顔辞書ファイル1300に属していた顔画像ファイル1320は上書きせず、記録媒体104から消去することなく保持しておく。これは、PC100の記録媒体104の記憶容量は、撮像装置200のカメラ記録媒体204の記憶容量よりも大きいため、残しておく余裕があるからである。これにより、この後、ユーザの操作に応答して、CPU101が上述の顔辞書ファイル作成処理を実行し、顔辞書ファイル1300を更新する際に、保持しておいた顔画像ファイル1320も、図15のS1508で選択対象となり、再び利用することが可能となる。
さらに、CPU101は撮像装置200から取得したi番目の同一の人名の新しい顔辞書ファイルを、記録媒体104に記憶されている顔画像ファイルを用いて最適化する。具体的には、上述の図15のステップS1507〜S1510と同様の処理を実行する。ここで、CPU101は、ステップS1507において、新しい顔辞書ファイルの代表画像フラグに基づき、代表画像を指定する。その後、顔辞書ファイルが更新されていれば(S1718でYes)、CPU101はステップS1707の処理を実行し、顔辞書ファイルが更新されていなければ(S1718でNo)、S1709の処理を実行する。
そして、CPU101は変数iに1を加算し(S1709)、変数iが変数Nより小さければ(S1710でNo)、ステップS1705の処理を実行する。一方、変数iが変数Nより大きければ(S1710でYes)、ステップS1711の処理を実行する。
CPU101は、ステップS1402で受信した撮像装置200の顔辞書ファイル1300のうち、PC100に存在しない人名の顔辞書ファイル1300が存在するか否かを判定する(S1711)。存在すれば(S1711でYes)、該当する人名の顔辞書ファイル1300を記録媒体104に追加して記憶する(S1712)。一方、存在しなければ(S1711でNo)、ステップS1713へ進む。
CPU101は、PC100の顔辞書ファイルのうち、それに属する全ての顔画像ファイルの撮影日時が1年以内であり、かつ撮像装置200の顔辞書ファイルに存在しない人名の顔辞書ファイルが、存在するか否かを判定する(S1713)。このような顔辞書ファイルが存在すれば(S1713でYes)、CPU101は、該当する人名の数を取得する(S1714)。CPU101は、ステップS1709で取得した人名の数と受信した撮像装置200の顔辞書ファイル1300の数との合計が、所定個数を超えるか否かを判定する(S1715)。そして、超えなければ(S1715でNo)、CPU101は、撮像装置200に存在しない人名の顔辞書ファイル1300を撮像装置200へ送信する(S1717)。
一方、超えれば(S1715でYes)、CPU101は受信した撮像装置200の顔辞書ファイル1300の数と所定個数との差の数だけ、該当する人名の顔辞書ファイル1300を選択する(S1716)。ステップS1715において、CPU101は、顔辞書ファイル1300に含まれる全ての顔画像ファイル1320の撮影日時1322が1年以内で、顔辞書ファイル1300に属する顔画像ファイル1320の数が多いものから順に選択する。そして、CPU101は、選択された顔辞書ファイル1300を撮像装置200へ送信する(S1717)。
なお、ステップS1706やS1713において、顔辞書ファイルに属する全ての顔画像ファイルが1年以内に撮影されたものではないとき、エラーメッセージを表示するようにしてもよい。さらに、PC100の顔辞書ファイル1300に含まれる顔画像ファイルを1年以内に撮影されたものに変更するように通知する。そして、ユーザの操作に応答して、CPU101は顔辞書ファイルに属する顔画像ファイルを変更した後、S1706やS1703の処理を実行し直すようにしてもよい。
また、本実施形態では、S1705において、PC100と撮像装置200の顔辞書ファイルの更新日時を比較し、その結果に従って、どちらの顔辞書ファイルで更新するかを決定し、PC100の顔辞書ファイルの送信処理を選択的に実行するようにした。しかし、これに限らず、例えば、顔辞書ファイルに属する顔画像ファイルの個数を比較し、多い方の顔辞書ファイルで更新するなど、他の所定の条件にしたがって、PC100と撮像装置200のどちらの顔辞書ファイルにするかを決定するようにしてもよい。
次に、撮像装置200における顔辞書ファイルの同期処理について図18を参照して説明する。
まず、撮像装置200のカメラCPU201は、PC100に接続して、要求を受けると、カメラ記録媒体204に記憶されている顔辞書ファイル1300およびそれに属する顔画像ファイルをPC100へ送信する(S1801)。
そして、図17のS1707またはS1717でPC100から送信された顔辞書ファイルおよび顔画像ファイルを、カメラCPU201が受信したか否か検知する(S1802)。受信していれば(S1802でYes)、カメラCPU201は、PC100から受信した顔辞書ファイル1300の総数を変数Nに代入し、変数iに“1”を代入する(S1803)。カメラCPU201は、受信されたi番目の顔辞書ファイル1300と同じ人名の顔辞書ファイル1300がカメラ記録媒体204に記憶されているか否かを判定する(S1804)。記憶されていると判定されれば(S1804でYes)、カメラCPU201は、i番目の顔辞書ファイルとその顔画像ファイルでカメラ記録媒体204のi番目の顔辞書ファイルと同じ人名の顔辞書ファイルおよびその顔画像ファイルを上書きする(S1805)。これにより、i番目の顔辞書ファイル1300と同じ人名の既存の顔画像ファイルはカメラ記録媒体204から消去される。ステップS1805の上書き処理により、カメラ記録媒体204の記憶容量が、記録媒体104に比べて非常に小さくても、新しい顔辞書ファイル1300およびそれに属する顔画像ファイルをカメラ記録媒体204に記憶することができる。これにより、例えば、撮像装置200の撮影処理時にPC100において作成された新しい顔辞書ファイル1300を利用することができるようになる。
一方、記憶されていないと判定されれば(S1804でNo)、カメラCPU201は、ステップS1807の記憶処理を実行する。
そして、カメラCPU201は変数iに1を加算し(S1807)、変数iが変数Nより小さければ(S1807でNo)、ステップS1804の処理を実行する。一方、変数iが変数Nより大きければ(S1807でYes)本処理を終了する。
なお、カメラCPU201は、顔辞書ファイルおよび顔画像ファイルをPC100から受信していなければ(S1802でNo)、本処理を実行せずに終了する。この場合は、PC100の顔辞書ファイルを撮像装置200の顔辞書ファイルで上書きする処理が実行されている。これにより、撮像装置200とPC100とで同じ顔辞書ファイルを保持している状態、すなわち、顔辞書ファイルが同期されている状態となる。
[その他の実施形態]
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。

Claims (17)

  1. 人物ごとに、画像に含まれる前記人物の顔に関する顔データを記録する第1の顔辞書を生成する生成手段と、
    前記第1の顔辞書と対応する人物の顔データを記録する第2の顔辞書を撮像装置から受信する受信手段であって、前記第2の顔辞書が、前記撮像装置により取得された画像に含まれる前記人物の顔データに基づき前記撮像装置により更新される受信手段と、
    前記受信された第2の顔辞書に記録された前記顔データを所定の記憶装置に記憶する記憶手段と、
    前記第2の顔辞書の更新日時が前記第1の顔辞書の更新日時よりも古いとき、前記第1の顔辞書を前記撮像装置へ送信する送信手段であって、前記第2の顔辞書が前記撮像装置において、前記送信された第1の顔辞書により上書きされる送信手段と、を有し、
    前記送信手段は、前記第1の顔辞書が、所定の期間内に撮影された画像に含まれる前記人物の顔データを含まないとき、前記第1の顔辞書を前記撮像装置へ送信しない
    ことを特徴とする情報処理装置。
  2. 前記記憶手段は、前記受信された第2の顔辞書に記録された前記顔データのうち、前記記憶装置に未だ記憶されていない顔データを前記記憶装置に記憶することを特徴とする請求項1に記載の情報処理装置。
  3. 所定の記憶領域に記憶された複数の画像に含まれる前記人物の顔データおよび前記第2の顔辞書に含まれる前記顔データの中から所定数の顔データを選択する選択手段をさらに有し、
    前記生成手段は、前記選択された顔データを記録する前記第1の顔辞書を生成する
    ことを特徴とする請求項1または2に記載の情報処理装置。
  4. 所定の記憶領域に記憶された画像に対して、前記選択された顔データを記録する前記第1の顔辞書に基づいて検索処理を実行した結果を画面に表示する表示手段をさらに有することを特徴とする請求項3に記載の情報処理装置。
  5. 前記受信手段は、他の人物の顔データを記録する第2の顔辞書も前記撮像装置から受信し、
    前記記憶手段は、前記受信された第2の顔辞書のうち、前記生成手段によりまだ生成されてない人物の第2の顔辞書を所定の記憶装置に記憶する
    ことを特徴とする請求項1乃至4のいずれか1項に記載の情報処理装置。
  6. 前記受信手段は、前記撮像装置が保持するすべての人物と対応する第2の顔辞書を受信し、
    前記送信手段は、前記生成手段により生成された第1の顔辞書のうち、前記撮像装置が保持していない人物の第1の顔辞書を前記撮像装置へ送信する
    ことを特徴とする請求項1乃至5のいずれか1項に記載の情報処理装置。
  7. 前記送信手段は、前記撮像装置が保持する第2の顔辞書の個数との合計が所定数を超えない個数の前記第1の顔辞書を前記撮像装置へ送信することを特徴とする請求項6に記載の情報処理装置。
  8. 顔データは、前記画像のうち前記人物の顔領域と対応する顔画像および前記顔画像の特徴量のうち少なくとも1つを含むことを特徴とする請求項1乃至7のいずれか1項に記載の情報処理装置。
  9. 情報処理装置の生成手段が、人物ごとに、画像に含まれる前記人物の顔に関する顔データを記録する第1の顔辞書を生成する生成工程と、
    前記情報処理装置の受信手段が、前記第1の顔辞書と対応する人物の顔データを記録する第2の顔辞書を撮像装置から受信する受信工程であって、前記第2の顔辞書が、前記撮像装置により取得された画像に含まれる前記人物の顔データに基づき前記撮像装置により更新される受信工程と、
    前記情報処理装置の記憶手段が、前記受信された第2の顔辞書に記録された前記顔データを所定の記憶装置に記憶する記憶工程と、
    前記情報処理装置の送信手段が、前記第2の顔辞書の更新日時が前記第1の顔辞書の更新日時よりも古いとき、前記第1の顔辞書を前記撮像装置へ送信する送信工程であって、前記第2の顔辞書が前記撮像装置において、前記送信された第1の顔辞書により上書きされる送信工程と、を有し、
    前記送信手段は前記送信工程において、前記第1の顔辞書が所定の期間内に撮影された画像に含まれる前記人物の顔データを含まないとき、前記第1の顔辞書を前記撮像装置に送信しない
    ことを特徴とする情報処理装置の制御方法。
  10. 前記記憶手段は前記記憶工程において、前記受信された第2の顔辞書に記録された前記顔データのうち、前記記憶装置に未だ記憶されていない顔データを前記記憶装置に記憶することを特徴とする請求項9に記載の情報処理装置の制御方法。
  11. 前記情報処理装置の選択手段が、所定の記憶領域に記憶された複数の画像に含まれる前記人物の顔データおよび前記第2の顔辞書に含まれる前記顔データの中から所定数の顔データを選択する選択工程をさらに有し、
    前記生成手段は前記生成工程において、前記選択された顔データを記録する前記第1の顔辞書を生成する
    ことを特徴とする請求項9または10に記載の情報処理装置の制御方法。
  12. 前記情報処理装置の表示手段が、所定の記憶領域に記憶された画像に対して、前記選択された顔データを記録する前記第1の顔辞書に基づいて検索処理を実行した結果を画面に表示する表示工程をさらに有することを特徴とする請求項11に記載の情報処理装置の制御方法。
  13. 前記受信手段は前記受信工程において、他の人物の顔データを記録する第2の顔辞書も前記撮像装置から受信し、
    前記記憶手段は前記記憶工程において、前記受信された第2の顔辞書のうち前記生成工程においてにまだ生成されてない人物の第2の顔辞書を所定の記憶装置に記憶する
    ことを特徴とする請求項9乃至12のいずれか1項に記載の情報処理装置の制御方法。
  14. 前記受信手段は前記受信工程において、前記撮像装置が保持するすべての人物と対応する第2の顔辞書を受信し、
    前記送信手段は前記送信工程において、前記生成工程において生成された第1の顔辞書のうち、前記撮像装置が保持していない人物の第1の顔辞書を前記撮像装置に送信する
    ことを特徴とする請求項9乃至13のいずれか1項に記載の情報処理装置の制御方法。
  15. 前記送信手段は前記送信工程において、前記撮像装置が保持する第2の顔辞書の個数との合計が所定数を超えない個数の前記第1の顔辞書を前記撮像装置に送信することを特徴とする請求項14に記載の情報処理装置の制御方法。
  16. 顔データは、前記画像のうち前記人物の顔領域と対応する顔画像および前記顔画像の特徴量のうち少なくとも1つを含むことを特徴とする請求項9乃至15のいずれか1項に記載の情報処理装置の制御方法。
  17. コンピュータを、請求項1乃至8のいずれか1項に記載の情報処理装置の各手段として機能させるためのプログラム。
JP2012264744A 2011-12-22 2012-12-03 情報処理装置、その制御方法、及びプログラム Active JP6161271B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2012264744A JP6161271B2 (ja) 2011-12-22 2012-12-03 情報処理装置、その制御方法、及びプログラム
US13/718,365 US9152848B2 (en) 2011-12-22 2012-12-18 Information processing apparatus including a face dictionary, control method therefor, and storage medium

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011282265 2011-12-22
JP2011282265 2011-12-22
JP2012264744A JP6161271B2 (ja) 2011-12-22 2012-12-03 情報処理装置、その制御方法、及びプログラム

Publications (3)

Publication Number Publication Date
JP2013149242A true JP2013149242A (ja) 2013-08-01
JP2013149242A5 JP2013149242A5 (ja) 2016-01-28
JP6161271B2 JP6161271B2 (ja) 2017-07-12

Family

ID=48654595

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012264744A Active JP6161271B2 (ja) 2011-12-22 2012-12-03 情報処理装置、その制御方法、及びプログラム

Country Status (2)

Country Link
US (1) US9152848B2 (ja)
JP (1) JP6161271B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017081839A1 (ja) * 2015-11-13 2017-05-18 パナソニックIpマネジメント株式会社 移動体追跡方法、移動体追跡装置、およびプログラム

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10049273B2 (en) * 2015-02-24 2018-08-14 Kabushiki Kaisha Toshiba Image recognition apparatus, image recognition system, and image recognition method
CN106845355B (zh) * 2016-12-24 2018-05-11 深圳云天励飞技术有限公司 一种人脸识别的方法、服务器及系统
CN106845356B (zh) * 2016-12-24 2018-06-05 深圳云天励飞技术有限公司 一种人脸识别的方法、客户端、服务器及系统
US10621473B1 (en) * 2019-01-30 2020-04-14 StradVision, Inc. Method for providing object detecting system capable of updating types of detectable classes in real-time by using continual learning and devices using the same
US10635918B1 (en) * 2019-01-30 2020-04-28 StradVision, Inc. Method and device for managing smart database for face recognition based on continual learning
JP7547840B2 (ja) * 2020-07-31 2024-09-10 セイコーエプソン株式会社 駆動波形決定方法、駆動波形決定プログラム、液体吐出装置および駆動波形決定システム
CN112150557B (zh) * 2020-09-14 2024-04-19 阿波罗智联(北京)科技有限公司 用于路侧感知相机数据流的众数获取方法、装置及介质
CN113837006B (zh) * 2021-08-20 2024-06-04 奥比中光科技集团股份有限公司 一种人脸识别方法、装置、存储介质及电子设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003316746A (ja) * 2002-04-25 2003-11-07 Toshiba Corp 人物認識システム
JP2005341017A (ja) * 2004-05-25 2005-12-08 Casio Comput Co Ltd カメラ装置およびプログラム
JP2007148691A (ja) * 2005-11-25 2007-06-14 Nikon Corp 画像処理装置
JP2007183798A (ja) * 2006-01-06 2007-07-19 Hitachi Omron Terminal Solutions Corp 生体情報処理装置および自動取引装置
JP2007304763A (ja) * 2006-05-10 2007-11-22 Secom Co Ltd 顔画像照合装置
JP2008129830A (ja) * 2006-11-21 2008-06-05 Sony Corp 個人識別装置、個人識別方法、識別用辞書データの更新方法および識別用辞書データの更新プログラム
JP2008165314A (ja) * 2006-12-27 2008-07-17 Sony Corp 個人識別装置および個人識別方法
JP2010231320A (ja) * 2009-03-26 2010-10-14 Fujitsu Ltd 生体情報処理装置および方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6125192A (en) * 1997-04-21 2000-09-26 Digital Persona, Inc. Fingerprint recognition system
TWI299471B (en) * 2001-08-24 2008-08-01 Toshiba Kk Person recognition apparatus
US8020005B2 (en) * 2005-12-23 2011-09-13 Scout Analytics, Inc. Method and apparatus for multi-model hybrid comparison system
JP4315212B2 (ja) 2007-05-02 2009-08-19 カシオ計算機株式会社 撮像装置、撮像制御プログラム及び撮像制御方法
GB2467127A (en) * 2009-01-21 2010-07-28 Alu Fix Contracts Ltd A system for monitoring users' time and attendance
JP5791364B2 (ja) * 2011-05-16 2015-10-07 キヤノン株式会社 顔認識装置、顔認識方法、顔認識プログラム、およびそのプログラムを記録した記録媒体
JP5869805B2 (ja) * 2011-08-25 2016-02-24 キヤノン株式会社 情報処理装置、撮像装置、およびそれらの制御方法、プログラム、並びに記憶媒体

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003316746A (ja) * 2002-04-25 2003-11-07 Toshiba Corp 人物認識システム
JP2005341017A (ja) * 2004-05-25 2005-12-08 Casio Comput Co Ltd カメラ装置およびプログラム
JP2007148691A (ja) * 2005-11-25 2007-06-14 Nikon Corp 画像処理装置
JP2007183798A (ja) * 2006-01-06 2007-07-19 Hitachi Omron Terminal Solutions Corp 生体情報処理装置および自動取引装置
JP2007304763A (ja) * 2006-05-10 2007-11-22 Secom Co Ltd 顔画像照合装置
JP2008129830A (ja) * 2006-11-21 2008-06-05 Sony Corp 個人識別装置、個人識別方法、識別用辞書データの更新方法および識別用辞書データの更新プログラム
JP2008165314A (ja) * 2006-12-27 2008-07-17 Sony Corp 個人識別装置および個人識別方法
JP2010231320A (ja) * 2009-03-26 2010-10-14 Fujitsu Ltd 生体情報処理装置および方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017081839A1 (ja) * 2015-11-13 2017-05-18 パナソニックIpマネジメント株式会社 移動体追跡方法、移動体追跡装置、およびプログラム
JPWO2017081839A1 (ja) * 2015-11-13 2018-09-06 パナソニックIpマネジメント株式会社 移動体追跡方法、移動体追跡装置、およびプログラム
US10740907B2 (en) 2015-11-13 2020-08-11 Panasonic Intellectual Property Management Co., Ltd. Moving body tracking method, moving body tracking device, and program

Also Published As

Publication number Publication date
US9152848B2 (en) 2015-10-06
US20130163830A1 (en) 2013-06-27
JP6161271B2 (ja) 2017-07-12

Similar Documents

Publication Publication Date Title
JP6161271B2 (ja) 情報処理装置、その制御方法、及びプログラム
US20120321131A1 (en) Image-related handling support system, information processing apparatus, and image-related handling support method
JP5868164B2 (ja) 撮像装置、情報処理システム、制御方法、及びプログラム
US10187575B2 (en) Image acquisition apparatus, method of controlling image acquisition apparatus, computer-readable recording medium non-transitorily storing control program of image acquisition apparatus, and image acquisition system
JP2009171558A (ja) 画像処理装置及び画像管理サーバ装置及びそれらの制御方法及びプログラム
US9395809B2 (en) Information processing apparatus and control method thereof
KR101503409B1 (ko) 파일 처리 장치, 파일 처리 방법, 및 기억 매체
JP5869805B2 (ja) 情報処理装置、撮像装置、およびそれらの制御方法、プログラム、並びに記憶媒体
US8532439B2 (en) Reproduction apparatus and reproduction method
JP2003209796A (ja) 撮像装置及びその制御方法及びプログラム及び記憶媒体
US8363886B2 (en) Image processing apparatus for providing metadata to captured image and method thereof
JP2015198300A (ja) 情報処理装置、撮像装置、画像管理システム
JP2015072633A (ja) 画像処理装置及びプログラム
JP6020152B2 (ja) 情報処理装置及び方法
JP2008311749A (ja) 画像送信装置及びその方法
US8452102B2 (en) Image management apparatus, control method, and storage medium
JP4614396B2 (ja) 撮像装置及びその制御方法
US8571357B2 (en) Image data management apparatus, method and program
JP2011041230A (ja) 情報処理システム、情報処理装置及び情報生成装置
JPH11112857A (ja) 映像制御装置及び制御方法及び記憶媒体
KR20100101960A (ko) 디지털 카메라, 사진 분류 시스템 및 방법
JP6666557B2 (ja) 画像管理システム、画像管理システムに用いられる情報処理装置、情報処理装置による情報提示方法及びプログラム
JP2018097843A (ja) 情報処理装置、情報処理装置の制御方法、およびプログラム
JP5445648B2 (ja) 画像表示装置、画像表示方法、およびそのプログラム。
JP5264274B2 (ja) 通信装置、カメラシステム、制御方法およびプログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151202

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20151202

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20161007

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161031

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161226

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170515

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170613

R151 Written notification of patent or utility model registration

Ref document number: 6161271

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151