JP2010231744A - 情報処理装置、プログラム及び画像データ管理方法 - Google Patents

情報処理装置、プログラム及び画像データ管理方法 Download PDF

Info

Publication number
JP2010231744A
JP2010231744A JP2009081620A JP2009081620A JP2010231744A JP 2010231744 A JP2010231744 A JP 2010231744A JP 2009081620 A JP2009081620 A JP 2009081620A JP 2009081620 A JP2009081620 A JP 2009081620A JP 2010231744 A JP2010231744 A JP 2010231744A
Authority
JP
Japan
Prior art keywords
similarity
face image
information
image
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2009081620A
Other languages
English (en)
Inventor
Nobumasa Araki
伸昌 荒木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Embedded Products Ltd
Original Assignee
NEC Embedded Products Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Embedded Products Ltd filed Critical NEC Embedded Products Ltd
Priority to JP2009081620A priority Critical patent/JP2010231744A/ja
Publication of JP2010231744A publication Critical patent/JP2010231744A/ja
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Image Analysis (AREA)

Abstract

【課題】システムの顔認識技術による認識結果にユーザの判定結果を反映させて、システムによる顔認識処理の精度を向上させる。
【解決手段】情報処理装置は、画像データに対する顔認識に基づく顔同士の類似度に関する情報を変更するユーザの入力を受け付け、該入力による変更後の類似度に関する情報を画像データの管理に用いる。また、情報処理装置は、基準顔画像と顔認識で取得された対象顔画像との類似度情報を保持する類似度情報保持手段と、保持された類似度情報を変更するユーザの入力を受け付ける入力受付手段と、受け付けられた入力内容を用いて、同一の画像データに含まれる一の対象顔画像が基準顔画像と同一であるとする該当人物確定と該画像データに含まれる他の対象顔画像が該基準顔画像と同一でないとする非該当人物確定とが反映するように、保持された類似度情報を変更する類似度情報管理手段と、を有する。
【選択図】図1

Description

本発明は、情報処理装置、プログラム及び画像データ管理方法に関し、特に、例えばデジタルカメラ等で取得した画像データを整理や編集する等して管理する場合に好ましく適用される技術に関するものである。
近年、デジタルカメラが急速に普及しているが、ユーザは、パーソナルコンピュータやネットワークを通じてアクセス可能なサーバ等にデジタルカメラで撮影した画像を記憶させることで、画像を整理、編集して共有することが可能となっている。また、ユーザが画像を眺めたり、日付や出来事に基づいてフォルダに整理したりすることを可能とする画像管理ソフトも多く提供されている。
顔画像認識技術を用いた画像管理ソフトでは、該画像管理ソフト上で画像を登録すると、画像の解析(写っている顔の検出)が自動的に行われ、顔を選んで検索を実行すると、各画像に写っている顔と選んだ顔との類似度を計算して、検索結果として類似度の高い順に画像を表示する。同一人物の複数の顔を指定して検索することで、検索の精度を上げることができる。また、人物の登録ができる画像管理ソフトでは、人物名とその人物の画像を検索するときの基準となる顔(以下、基準モデルという)を指定して登録することができ、登録した人物の基準モデルと各画像に写った顔との類似度を計算して検索結果を表示することで、登録した人物の写った画像を仮想フォルダのように表示することができる。
例えば特許文献1では、顔認識を用いて顔抽出を行って基準画像との類似度を判断することでデジタル写真の整理を行う方法が開示されている。また、例えば特許文献2では、同一人物が異なる複数の人物と誤認識されたときに、写っている画像が排他の人物同士の類似度を確認し、同一人物かどうかを判断して修正することで、精度の高い人物認識結果を得る方法が開示されている。また、例えば特許文献3では、同一人物が異なる複数の人物と誤認識されたときに、同一の画像内への写り方等から人物間の親密度を算出し、同一人物かどうかを判断して修正することで、精度の高い人物認識結果を得る方法が開示されている。
特開2005−174308号公報 特開2006−236216号公報 特開2006−236217号公報
上記の特許文献1から3は、画像データの効果的な整理や、精度の高い人物認識結果を得るものであるが、後述するような問題があった。すなわち、顔検出(画像の中から顔と判断される領域を判定)及び顔照合(検出された顔同士の類似度を計算して同一人物かどうかを判定)は、誤認識が発生するものであり、正確な結果にするためには、ユーザが誤認識を訂正できる仕組みが必要である。
また、従来の技術では、基準モデルの追加や削除により適切な基準モデルを選ぶことで検索の精度を上げることは可能であるが、顔照合により類似度が高いと判定される他人の顔が検索結果に表示され続けるという問題がある。また、写りが良くない等でその人物の他の顔と異なる顔は、他の顔を基準モデルに指定しても検索されにくい一方で、その顔を基準モデルに加えると、その人物の他の顔との違いが大きく、全体の精度を悪化させる懸念があるという問題もある。また、画像から顔が検出されても写りが良くない等のために他の顔との類似度を計算できない場合や、画像に顔が写っていても顔検出されない場合があり、そのような顔は類似度を計算して検索結果に表示できないという問題もある。以上のような問題により、望みどおりの表示結果とすることが困難であった。
そこで、本発明は、システムの顔認識技術による認識結果にユーザの判定結果を反映させて、システムによる顔認識処理の精度を向上させることを目的とする。
本発明の一側面である第1の情報処理装置は、画像データに対する顔認識に基づく顔同士の類似度に関する情報を変更するユーザの入力を受け付け、該入力による変更後の類似度に関する情報を画像データの管理に用いる。
本発明の一側面である第2の情報処理装置は、画像データの管理を行う情報処理装置であって、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する類似度情報保持手段と、類似度情報保持手段で保持された類似度情報を変更するユーザの入力を受け付ける入力受付手段と、入力受付手段で受け付けられた入力内容を用いて、同一の画像データに含まれる一の対象顔画像が基準顔画像と同一であるとする該当人物確定と該画像データに含まれる他の対象顔画像が該基準顔画像と同一でないとする非該当人物確定とが反映するように、類似度情報保持手段で保持された類似度情報を変更する類似度情報管理手段と、を有する。
本発明の一側面である第3の情報処理装置は、画像データの管理を行う情報処理装置であって、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する類似度情報保持手段と、類似度情報保持手段で保持された類似度情報を変更するユーザの入力を受け付ける入力受付手段と、入力受付手段で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と該対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、類似度情報保持手段で保持された類似度情報を変更する類似度情報管理手段と、を有する。
本発明の一側面である第4の情報処理装置は、画像データの管理を行う情報処理装置であって、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する類似度情報保持手段と、類似度情報保持手段で保持された類似度情報を変更するユーザの入力を受け付ける入力受付手段と、入力受付手段で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と、該当人物確定に係る対象顔画像と同一の画像データに含まれる他の対象顔画像が該基準顔画像と同一でない及び該当人物確定に係る対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、類似度情報保持手段で保持された類似度情報を変更する類似度情報管理手段と、を有する。
本発明の一側面である第5の情報処理装置は、画像データの管理を行う情報処理装置であって、他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付手段と、入力受付手段で受け付けられた入力内容を用いて、同一の画像データに含まれる一の対象顔画像が基準顔画像と同一であるとする該当人物確定と該画像データに含まれる他の対象顔画像が該基準顔画像と同一でないとする非該当人物確定とが反映するように、他の情報処理装置で保持された類似度情報を変更する類似度情報管理手段と、を有する。
本発明の一側面である第6の情報処理装置は、画像データの管理を行う情報処理装置であって、他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付手段と、入力受付手段で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と該対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、他の情報処理装置で保持された類似度情報を変更する類似度情報管理手段と、を有する。
本発明の一側面である第7の情報処理装置は、画像データの管理を行う情報処理装置であって、他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付手段と、入力受付手段で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と、該当人物確定に係る対象顔画像と同一の画像データに含まれる他の対象顔画像が該基準顔画像と同一でない及び該当人物確定に係る対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、他の情報処理装置で保持された類似度情報を変更する類似度情報管理手段と、を有する。
本発明の一側面である第1のプログラムは、画像データの管理を行う情報処理装置で用いられるプログラムあって、情報処理装置は、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する記憶手段を備え、コンピュータに、記憶手段に保持された類似度情報を変更するユーザの入力を受け付ける入力受付処理と、入力受付処理で受け付けられた入力内容を用いて、同一の画像データに含まれる一の対象顔画像が基準顔画像と同一であるとする該当人物確定と該画像データに含まれる他の対象顔画像が該基準顔画像と同一でないとする非該当人物確定とが反映するように、記憶手段に保持された類似度情報を変更する類似度情報管理処理と、を実行させる。
本発明の一側面である第2のプログラムは、画像データの管理を行う情報処理装置で用いられるプログラムあって、情報処理装置は、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する記憶手段を備え、コンピュータに、記憶手段に保持された類似度情報を変更するユーザの入力を受け付ける入力受付処理と、入力受付処理で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と該対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、記憶手段に保持された類似度情報を変更する類似度情報管理処理と、を実行させる。
本発明の一側面である第3のプログラムは、画像データの管理を行う情報処理装置で用いられるプログラムあって、情報処理装置は、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する記憶手段を備え、コンピュータに、記憶手段に保持された類似度情報を変更するユーザの入力を受け付ける入力受付処理と、入力受付処理で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と、該当人物確定に係る対象顔画像と同一の画像データに含まれる他の対象顔画像が該基準顔画像と同一でない及び該当人物確定に係る対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、記憶手段に保持された類似度情報を変更する類似度情報管理処理と、を実行させる。
本発明の一側面である第4のプログラムは、画像データの管理を行う情報処理装置で用いられるプログラムあって、他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付処理と、入力受付処理で受け付けられた入力内容を用いて、同一の画像データに含まれる一の対象顔画像が基準顔画像と同一であるとする該当人物確定と該画像データに含まれる他の対象顔画像が該基準顔画像と同一でないとする非該当人物確定とが反映するように、他の情報処理装置で保持された類似度情報を変更する類似度情報管理処理と、を実行させる。
本発明の一側面である第5のプログラムは、画像データの管理を行う情報処理装置で用いられるプログラムあって、他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付処理と、入力受付処理で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と該対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、他の情報処理装置で保持された類似度情報を変更する類似度情報管理処理と、を実行させる。
本発明の一側面である第6のプログラムは、画像データの管理を行う情報処理装置で用いられるプログラムあって、他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付処理と、入力受付処理で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と、該当人物確定に係る対象顔画像と同一の画像データに含まれる他の対象顔画像が該基準顔画像と同一でない及び該当人物確定に係る対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、他の情報処理装置で保持された類似度情報を変更する類似度情報管理処理と、を実行させる。
本発明の一側面である第1の画像データ管理方法は、情報処理装置で画像データの管理を行う画像データ管理方法であって、情報処理装置は、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する記憶手段を備え、記憶手段に保持された類似度情報を変更するユーザの入力を受け付ける入力受付ステップと、入力受付ステップで受け付けられた入力内容を用いて、同一の画像データに含まれる一の対象顔画像が基準顔画像と同一であるとする該当人物確定と該画像データに含まれる他の対象顔画像が該基準顔画像と同一でないとする非該当人物確定とが反映するように、記憶手段に保持された類似度情報を変更する類似度情報管理ステップと、を有する。
本発明の一側面である第2の画像データ管理方法は、情報処理装置で画像データの管理を行う画像データ管理方法であって、情報処理装置は、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する記憶手段を備え、記憶手段に保持された類似度情報を変更するユーザの入力を受け付ける入力受付ステップと、入力受付ステップで受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と該対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、記憶手段に保持された類似度情報を変更する類似度情報管理ステップと、を有する。
本発明の一側面である第3の画像データ管理方法は、情報処理装置で画像データの管理を行う画像データ管理方法であって、情報処理装置は、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する記憶手段を備え、記憶手段に保持された類似度情報を変更するユーザの入力を受け付ける入力受付ステップと、入力受付ステップで受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と、該当人物確定に係る対象顔画像と同一の画像データに含まれる他の対象顔画像が該基準顔画像と同一でない及び該当人物確定に係る対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、記憶手段に保持された類似度情報を変更する類似度情報管理ステップと、を有する。
本発明の一側面である第4の画像データ管理方法は、情報処理装置で画像データの管理を行う画像データ管理方法であって、他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付ステップと、入力受付ステップで受け付けられた入力内容を用いて、同一の画像データに含まれる一の対象顔画像が基準顔画像と同一であるとする該当人物確定と該画像データに含まれる他の対象顔画像が該基準顔画像と同一でないとする非該当人物確定とが反映するように、他の情報処理装置で保持された類似度情報を変更する類似度情報管理ステップと、を有する。
本発明の一側面である第5の画像データ管理方法は、情報処理装置で画像データの管理を行う画像データ管理方法であって、他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付ステップと、入力受付ステップで受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と該対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、他の情報処理装置で保持された類似度情報を変更する類似度情報管理ステップと、を有する。
本発明の一側面である第6の画像データ管理方法は、情報処理装置で画像データの管理を行う画像データ管理方法であって、他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付ステップと、入力受付ステップで受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と、該当人物確定に係る対象顔画像と同一の画像データに含まれる他の対象顔画像が該基準顔画像と同一でない及び該当人物確定に係る対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、他の情報処理装置で保持された類似度情報を変更する類似度情報管理ステップと、を有する。
本発明によれば、システムの顔認識技術による認識結果にユーザの判定結果を反映させて、システムによる顔認識処理の精度を向上させることが可能となる。
本発明の実施形態に係る情報処理装置のハードウエア構成図である。 本発明の実施形態に係る情報処理装置の機能ブロック図である。 本発明の実施形態における類似度テーブルの例を示した図である。 本発明の実施形態における人物の新規登録処理を示したフローチャートである。 本発明の実施形態における人物の更新処理を示したフローチャートである。 本発明の実施形態における誤認識修正処理を示したフローチャートである。 本発明の実施形態における画像データ管理を行う際の画面表示例を示した図である。 本発明の実施形態における画像データ管理を行う際の画面表示例を示した図である。 本発明の実施形態に係る情報処理装置のハードウエア構成図である。 本発明の実施形態に係る情報処理装置の機能ブロック図である。
以下、図面を参照しながら、本発明の実施形態について説明する。なお、以下の述べる実施形態は、本発明の好適な実施の形態であるから、技術的に好ましい種々の限定が付されているが、本発明の範囲は、以下の説明において特に本発明を限定する旨の記載がない限り、これらの態様に限られるものではない。
[第1実施形態]
本発明の第1実施形態の情報処理装置は、顔認識技術を用いて、基準モデルとして登録された顔画像と比較対象の顔画像との類似度を計算し、該計算で得られた顔同士の類似度を保持しておくとともに、該類似度にユーザの判断結果を反映させて画像の整理・検索の効率性を向上させる。本実施形態では、顔認識技術は画像の検索等の処理では用いず、顔同士の類似度を算出するために使用し、例えばテーブルとして保持する顔同士の類似度を用いて画像の検索等の処理を行う。
はじめに、第1実施形態の情報処理装置の構成について説明する。図1は、本実施形態の情報処理装置のハードウエア構成図である。本実施形態の情報処理装置は、CPU1、メモリ2、ハードディスク3、入力装置4、出力装置5を備える。CPU1は、メモリ2に格納されたOSや本実施形態特有のプログラムに従って、情報処理装置の全体動作制御を行うとともに、人物間の類似度の計算や該類似度の情報の管理を行う。メモリ2は、OSや本実施形態特有のプログラムを格納する記憶領域(ROM)、CPU1の各種処理等で用いる作業用の記憶領域(RAM)を持つ。ハードディスク3は、各種データを保持する外部記憶装置で、画像データ31、特徴量データ32、登場人物データ33及び類似度テーブル34を保持する領域を持つ。入力装置4は、操作情報の入力を行う装置で、例えばユーザからの人物確定要求(選択した顔が特定の人物であると確定する要求)を受け付けてCPU1に通知する。出力装置5は、画像データの画面出力を行う装置で、例えばCPU1から検索結果の人物の画像データを取得して表示出力する。
画像データ31は、デジタルカメラ等の撮像装置で取得されたデジタルデータで、少なくとも1つの顔を含む全体画像のデータである。特徴量データ32は、画像データ31に含まれる顔の眼、鼻、口等の位置、顔の輪郭といった顔面の特徴量のデータである。登場人物データ33は、類似度算出のもとになる基準モデルのデータである。類似度テーブル34は、画像に含まれる比較対象の顔ごとに基準モデルとの類似度を保持するデータで、例えば図3に示すようなテーブルデータである。
本実施形態では、画像検索の際に類似度テーブル34を画像検索に用いる。また、基準モデルを登録人物データ33とし、ユーザの判定結果(人物確定)を類似度テーブル34として別データで保持するため、ユーザが確定した顔で基準モデルに適さない顔を基準
モデルとしないようにすることができる。
なお、本実施形態では、類似度テーブル34はハードディスク3の記憶領域を用いて構成するものとしているが、これに限られるものではなく、メモリ2(RAM)内に設けるようにしてもよい。画像データ31、特徴量データ32、登場人物データ33についても同様で、ハードディスク3以外の記憶装置に保持するように構成することもできる。
図2は、本実施形態の情報処理装置の機能ブロック図である。本実施形態の情報処理装置は、CPU1がメモリ2に格納された本実施形態特有のプログラムを読み込んで、顔同士の類似度の計算や類似度情報の管理を行うための機能部である制御部10を構成する。制御部10は、顔検出部11、顔照合部12、人物登録更新部13、人物修正部14、テーブル管理部15を論理的に有する。なお、各部に相当する手段を回路で構成する等してハードウエアで実現することも可能である。
顔検出部11は、ハードディスク3から画像データ31を読み出して人物の顔を検出し、その特徴量を求めて特徴量データ32としてハードディスク3に保存するとともに、テーブル管理部15に類似度テーブル34の登録、更新を要求する。顔照合部12は、比較対象の顔の特徴量と基準モデルの特徴量とを照合して両者の類似度を計算し、テーブル管理部15に類似度テーブル34の登録、更新を要求する。顔検出部11や顔照合部12は公知の顔認識技術で実現される機能であるため、ここでは詳細な説明は省略する。
人物登録更新部13は、ユーザによる入力装置4からの入力を受けて、基準モデルの登録や更新を行って登録人物データ33としてハードディスク3に保存するとともに、顔照合部12に登録、更新した基準モデルと比較対象の顔との類似度計算を要求し、またテーブル管理部15に類似度テーブル34の登録、更新を要求する。人物修正部14は、ユーザによる入力装置4からの入力を受けて、テーブル管理部15に類似度テーブル34の更新を要求する。
テーブル管理部15は、顔検出部11、顔照合部12、人物登録更新部13、人物修正部14からの要求に応じて、ハードディスク3に保持された類似度テーブル34の登録、更新を行う。具体的には、顔検出部11からの要求に応じて、画像に含まれる顔ごとにその特徴量を登録する。また、顔照合部12からの要求に応じて、画像に含まれる顔ごとに基準モデルとの類似度を登録、更新する。また、人物登録更新部13からの要求に応じて、類似度算出のもとになる基準モデルを登録、更新する。また、人物修正部14からの要求に応じて、画像に含まれる顔ごとの確定人物及び類似度を更新する。
本実施形態では、上記のようにして、類似度が計算できない場合や、顔が検出されなかった場合でも、人物修正部14によりユーザの判定結果(人物確定)を受け付けることで、検索結果に表示されるようにすることができる。
次に、本実施形態の情報処理装置の動作(類似度テーブルの管理(登録、更新)動作)について説明する。図4は、本実施形態の情報処理装置が行う人物の新規登録処理を示したフローチャートである。まず、人物登録更新部13はAさんの基準モデルを登録する(ステップS101)。すなわち、ユーザに選択されたAさんの顔の特徴量データを登録人物データとして保存する。
基準モデルの登録後、顔照合部12は、画像データ31として保持されている比較対象の顔について基準モデルとの類似度を計算して類似度テーブルに登録、更新していく。顔照合部12は、類似度テーブル34に登録された顔の特徴量データを1つずつ特徴量データ32から取得する(ステップS102)。
取得した顔が基準モデル(例えばAさん)と同一であった場合(ステップS103/YES)、テーブル管理部15は、取得した顔のAさんに対する類似度を1とし、他の人物に対する類似度を0とするとともに、取得した顔と一緒の画像に含まれる他の顔のAさんに対する類似度を0とする類似度テーブル34の更新を行う(ステップS104)。
続いて、取得された顔について人物修正部14から人物確定の要求がなくても他の人物で特定されている場合(ステップS105/YES)には、テーブル管理部15は、取得された顔のAさんに対する類似度を0にする(ステップS106)。
それ以外の場合(ステップS103/NO、ステップS105/NO)は、顔照合部12は登録されたAさんの基準モデルと取得された顔との類似度を計算し、テーブル管理部15は計算された類似度を類似度テーブル34に登録する(ステップS107)。以上の処理を全ての顔について行う(ステップS108/NO、ステップS102〜ステップS107)。
図5は、本実施形態の情報処理装置が行う人物の更新処理を示したフローチャートで、基準モデルとして複数の顔を追加する場合や、ある顔を別の顔に変更する場合等の処理を表す。
まず、人物登録更新部13はAさんの基準モデルを更新する(ステップS201)。ここではAさんの顔を1つ追加して基準モデルを更新する場合を考える。基準モデルの更新後、顔照合部12は、類似度テーブル34に登録された顔の特徴量データを1つずつ特徴量データ32から取得する(ステップS202)。
取得した顔が更新後の基準モデルと同一であった場合又はAさんで人物確定済みの場合(ステップS203/YES)、テーブル管理部15は、取得した顔のAさんに対する類似度を1とし、他の人物に対する類似度を0とするとともに、取得した顔と一緒の画像に含まれる他の顔のAさんに対する類似度を0とする類似度テーブル34の更新を行う(ステップS204)。
Aさんで人物確定済みの場合をステップS204の処理の条件に含むのは、Aさんで人物確定済みの場合に基準モデル更新に伴う類似度再計算が行われるのを排除するためである。つまり、この条件が含まれないと、Aさんで人物確定済みとなっている顔が更新後の基準モデルと同一でない場合に、更新後基準モデルに基づいて類似度が再計算されてしまう。
続いて、取得された顔について人物修正部14から人物確定の要求がなくても、他の人物で特定されている又はAさんの類似度が0に設定されている場合(ステップS205/YES)には、テーブル管理部15は、取得された顔のAさんに対する類似度を0にする(ステップS206)。ここで、Aさんの類似度が0に設定されている場合をステップS206の処理の条件に含むのは、ステップS203の場合と同様で、基準モデル更新に伴う類似度再計算が行われるのを排除するためである。
それ以外の場合(ステップS203/NO、ステップS205/NO)は、顔照合部12は登録された基準モデルと取得された顔との類似度を計算し、テーブル管理部15は計算された類似度を類似度テーブル34に登録する(ステップS207)。以上の処理を全ての顔について行う(ステップS208/NO、ステップS202〜ステップS207)。
本実施形態では、上記のようにして、基準モデルが変更されたとき、その人物に対する類似度だけを計算して類似度テーブルを更新し、この場合、ユーザによる判定結果をみて、ユーザが人物を確定させた顔については類似度を再計算しない。
図6は、本実施形態の情報処理装置が行う誤認識修正処理を示したフローチャートで、システムの認識結果を誤認識としてユーザが修正する際の処理を表す。図6(a)は、Aさん以外の人物の検索結果として表示された顔について確定人物をAさんとする処理である。まず、人物修正部14は、ユーザからの確定人物修正の入力を受け付けてテーブル管理部15に類似度テーブルの更新を要求する(ステップS301)。ここでは、図3に示すように、顔01−1の確定人物をAさんにする修正を行うものとする。そして、テーブル管理部15は、人物修正部14からの要求に従って、まず顔01−1についての確定人物をAさんに変更する(ステップS302)。次いで、テーブル管理部15は、顔01−1のAさんに対する類似度を1、その他の人物に対する類似度を0とし、また顔01−1を含む画像FILE01に含まれる他の顔01−2のAさんに対する類似度を0に変更する(ステップS303)。
図6(b)は、Aさんの検索結果として表示された画像一覧から、実際にはAさんが写っていない画像を一覧から削除する際の処理である。まず、人物修正部14は、ユーザによる一覧からの画像削除の入力を受け付けてテーブル管理部15に類似度テーブルの更新を要求する(ステップS401)。テーブル管理部15は、人物修正部14からの要求に従って、一覧から削除された画像に含まれる顔を1つ取得する(ステップS402)。そして、その顔の確定人物がAさんである場合に未登録に変更するとともに、その顔のAさんに対する類似度を0に変更する(ステップS403)。上記ステップS302、ステップS303の処理を、一覧から削除された画像に含まれる全ての顔について繰り返す。
本実施形態では、上記のようにして、システムの顔認識技術を用いて計算された類似度データにユーザの判定結果を反映させることで、1つの顔についての類似度が確定する(顔01−1のAさんに対する類似度が1、Bさん及びCさんに対する類似度が0(図6(a)))とともに、類似度の確定した顔と一緒の画像に含まれる他の顔について該確定結果が反映される(顔01−2のAさんに対する類似度が0(図6(a)))ため、システム全体としての画像検索の精度が向上する。
図8は、本実施形態における画像データ管理を行う際の画面表示例を示した図である。図8の画面表示は、フォルダツリー、フォルダ内の画像一覧、選択画像に含まれる顔一覧で構成される。フォルダツリーは、画像検索の単位ごとに形成されたフォルダからなる。図では人物のフォルダとなっている。画像一覧には、各フォルダの人物に対する所定の類似度を持つ顔を含む画像が、画像検索結果として表示される。顔一覧には、画像一覧で選択した画像に含まれる顔が表示される。また、ユーザは、顔一覧から任意の顔を選択して、人物の訂正、確定、新しい人物の登録等の人物確定や基準モデルの登録を行うことができる。
顔一覧に表示される顔は、画像に対してシステムが顔検出した顔である。システムの顔検出結果をユーザに明示する方法として、図8のように画像(全体画像)と顔(顔画像)とを別に表示するほか、画像(全体画像)上に検出した顔を枠表示するようにしてもよい。図2には図示していないが、上記のようなシステムの顔検出結果をユーザに表示する機能部(例えば顔検出結果明示部)が制御部10内に構成される。
図9は、本実施形態における画像データ管理を行う際の画面表示例を示した図で、複数の顔についてまとめて人物確定を行う場合を表す。図8では顔1つ1つについて人物確定等の処理を行っていたが、図9のように複数の顔をまとめて行うことも可能である。この場合、フォルダツリーごとに画像を表示するのではなく、画像データに含まれる顔を顔一覧として表示するようにする。このとき、Aさんと確定されている顔を一覧中でグループにまとめて表示したり、未確定の顔のうちAさんの類似度が高い顔をまとめて表示(図9では「?Aさん」のように表示)したりすることで、同一人物の顔をまとめて選択することを行いやすくすることができる。また、例えば図8に示すように、基準モデルに対する類似度ごとにランク分けして顔一覧を表示することができる。
上述した第1実施形態によれば、検索結果をユーザが誤認識訂正した通りに表示することが可能である。すなわち、顔認識技術により計算された類似度に、ユーザの判定結果を反映させてテーブルとして保持し、検索時は該テーブルの値から結果を表示するため、ユーザが確定した通りに検索結果を表示できる。また、顔認識技術で類似度が計算できない顔や、検出されなかった顔も、ユーザが判定して人物確定を行うことで、検索結果に含めることができる。
また、上述した第1実施形態によれば、ユーザが誤認識訂正することで、その人物の検索結果の精度を向上させるだけでなく、それ以外の人物の検索結果の精度も向上させることが可能である。すなわち、ユーザが顔をある人物に確定したとき、その顔の確定した人物の類似度を1、その顔の確定した人物以外の類似度を0とし、またその顔が写っている画像にある他の顔のその人物の類似度を0とすることで、確定した顔・人物に限らず、その顔が写っている写真・その他の人物の検索結果も訂正される。
また、上述した第1実施形態によれば、画像検索に顔認識処理でなく類似度テーブルを利用することで、高速に検索結果を表示することが可能である。
[第2実施形態]
本発明の第2実施形態の情報処理装置は、他の情報処理装置から画像データを取得し画面表示してユーザによる判定結果を入力し、他の情報処理装置に保持された類似度テーブルにその判定結果を反映させ、その類似度テーブルを用いて画像の整理・検索を行う。他の情報処理装置は第1実施形態の情報処理装置であり、第2実施形態の情報処理装置は第1実施形態の情報処理装置とネットワーク等で接続される。
図10本実施形態の情報処理装置のハードウエア構成図、図11は本実施形態の情報処理装置の機能ブロック図である。基本的な構成は第1実施形態の情報処理装置と同様であり、第1実施形態と相違する点について述べる。本実施形態の情報処理装置Y200は、CPU210、メモリ220、入力装置240、出力装置250、外部IF260を備える。情報処理装置Y200は、ユーザによる判定結果(人物確定)の受け付け、類似度テーブルへの判定結果の反映を行う機能のみを有し、画像データや類似度テーブル等の各種データをメモリ220等の記憶手段に保持しない。
また、情報処理装置Y200は、CPU210がメモリ220に格納された本実施形態特有のプログラムを読み込んで、ユーザの判定結果(人物確定)の受け付けや類似度情報の管理を行うための機能部である制御部20を構成する。制御部20は、人物修正部21、テーブル管理部22を論理的に有する。なお、各部に相当する手段を回路で構成する等してハードウエアで実現することも可能である。このように、第2実施形態では、同じ画像群を別の装置で表示するときに、該装置に人物修正部とテーブル管理部を持たせて、画像データと類似度テーブルを共有する。
上記の第2実施形態によれば、同じ画像群を別の装置で表示するときに、該装置が顔認識機能を持たなくても、人物修正部とテーブル管理部を持たせて画像データと類似度テーブルを共有することで、人物の表示と誤認識訂正による画像の整理、検索を行わせることが可能である。
なお、上述する実施形態は、本発明の好適な実施形態であり、上記実施形態のみに本発明の範囲を限定するものではなく、本発明の要旨を逸脱しない範囲において種々の変更を施した形態での実施が可能である。
すなわち、本実施形態における情報処理装置で実行されるプログラムは、先に述べた各手段(顔検出部11、顔照合部12、人物登録更新部13、人物修正部14、テーブル管理部15)を含むモジュール構成となっており、実際のハードウエアを用いて具体的手段を実現する。すなわち、コンピュータ(CPU)が所定の記録媒体からプログラムを読み出して実行することにより上記各手段が主記憶装置上にロードされて生成される。また、上記各部に相当する手段を回路で構成する等してハードウエアで実現することも可能である。
本実施形態における情報処理装置で実行されるプログラムは、インターネット等のネットワークに接続されたコンピュータ上に格納され、ネットワーク経由でダウンロードさせることにより提供されるように構成してもよい。また、上記プログラムをインターネット等のネットワーク経由で提供あるいは配布するように構成してもよい。
また、上記プログラムは、インストール可能な形式又は実行可能な形式のファイルで、フロッピー(登録商標)ディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、DVD、不揮発性のメモリカード等のコンピュータで読み取り可能な記録媒体に記録されて提供されるように構成してもよい。また、上記プログラムは、ROM等にあらかじめ組み込んで提供するように構成してもよい。
この場合、上記記録媒体から読み出された又は通信回線を通じてロードし実行されたプログラムコード自体が前述の実施形態の機能を実現することになる。そして、そのプログラムコードを記録した記録媒体は本発明を構成する。
1,110,210 CPU
2,120,220 メモリ
3,130 ハードディスク
4,140,240 入力装置
5,150,250 出力装置
10,20 制御部
11 顔検出部
12 顔照合部
13 人物登録更新部
14,21 人物修正部
15,22 テーブル管理部
31,131 画像データ
32,132 特徴量データ
33,133 登場人物データ
34,134 類似度テーブル
100 情報処理装置X
160,260 外部IF
200 情報処理装置Y

Claims (23)

  1. 画像データに対する顔認識に基づく顔同士の類似度に関する情報を変更するユーザの入力を受け付け、前記入力による変更後の類似度に関する情報を画像データの管理に用いることを特徴とする情報処理装置。
  2. 画像データの管理を行う情報処理装置であって、
    顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する類似度情報保持手段と、
    前記類似度情報保持手段で保持された類似度情報を変更するユーザの入力を受け付ける入力受付手段と、
    前記入力受付手段で受け付けられた入力内容を用いて、同一の画像データに含まれる一の対象顔画像が基準顔画像と同一であるとする該当人物確定と該画像データに含まれる他の対象顔画像が該基準顔画像と同一でないとする非該当人物確定とが反映するように、前記類似度情報保持手段で保持された類似度情報を変更する類似度情報管理手段と、
    を有することを特徴とする情報処理装置。
  3. 画像データの管理を行う情報処理装置であって、
    顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する類似度情報保持手段と、
    前記類似度情報保持手段で保持された類似度情報を変更するユーザの入力を受け付ける入力受付手段と、
    前記入力受付手段で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と該対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、前記類似度情報保持手段で保持された類似度情報を変更する類似度情報管理手段と、
    を有することを特徴とする情報処理装置。
  4. 画像データの管理を行う情報処理装置であって、
    顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する類似度情報保持手段と、
    前記類似度情報保持手段で保持された類似度情報を変更するユーザの入力を受け付ける入力受付手段と、
    前記入力受付手段で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と、前記該当人物確定に係る対象顔画像と同一の画像データに含まれる他の対象顔画像が該基準顔画像と同一でない及び前記該当人物確定に係る対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、前記類似度情報保持手段で保持された類似度情報を変更する類似度情報管理手段と、
    を有することを特徴とする情報処理装置。
  5. 前記類似度情報管理手段は、基準顔画像が変更された場合に、前記類似度情報保持手段で保持された類似度情報のうち、変更後の基準顔画像が関連する類似度情報のみを変更することを特徴とする請求項2から4のいずれか1項に記載の情報処理装置。
  6. 前記対象顔画像をひとつの顔画像ごとに区別するようにユーザに明示する対象顔明示手段を有することを特徴とする請求項2から5のいずれか1項に記載の情報処理装置。
  7. 画像データの管理を行う情報処理装置であって、
    他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付手段と、
    前記入力受付手段で受け付けられた入力内容を用いて、同一の画像データに含まれる一の対象顔画像が基準顔画像と同一であるとする該当人物確定と該画像データに含まれる他の対象顔画像が該基準顔画像と同一でないとする非該当人物確定とが反映するように、前記他の情報処理装置で保持された類似度情報を変更する類似度情報管理手段と、
    を有することを特徴とする情報処理装置。
  8. 画像データの管理を行う情報処理装置であって、
    他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付手段と、
    前記入力受付手段で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と該対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、前記他の情報処理装置で保持された類似度情報を変更する類似度情報管理手段と、
    を有することを特徴とする情報処理装置。
  9. 画像データの管理を行う情報処理装置であって、
    他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付手段と、
    前記入力受付手段で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と、前記該当人物確定に係る対象顔画像と同一の画像データに含まれる他の対象顔画像が該基準顔画像と同一でない及び前記該当人物確定に係る対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、前記他の情報処理装置で保持された類似度情報を変更する類似度情報管理手段と、
    を有することを特徴とする情報処理装置。
  10. 画像データの管理を行う情報処理装置で用いられるプログラムあって、
    前記情報処理装置は、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する記憶手段を備え、
    コンピュータに、
    前記記憶手段に保持された類似度情報を変更するユーザの入力を受け付ける入力受付処理と、
    前記入力受付処理で受け付けられた入力内容を用いて、同一の画像データに含まれる一の対象顔画像が基準顔画像と同一であるとする該当人物確定と該画像データに含まれる他の対象顔画像が該基準顔画像と同一でないとする非該当人物確定とが反映するように、前記記憶手段に保持された類似度情報を変更する類似度情報管理処理と、
    を実行させることを特徴とするプログラム。
  11. 画像データの管理を行う情報処理装置で用いられるプログラムあって、
    前記情報処理装置は、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する記憶手段を備え、
    コンピュータに、
    前記記憶手段に保持された類似度情報を変更するユーザの入力を受け付ける入力受付処理と、
    前記入力受付処理で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と該対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、前記記憶手段に保持された類似度情報を変更する類似度情報管理処理と、
    を実行させることを特徴とするプログラム。
  12. 画像データの管理を行う情報処理装置で用いられるプログラムあって、
    前記情報処理装置は、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する記憶手段を備え、
    コンピュータに、
    前記記憶手段に保持された類似度情報を変更するユーザの入力を受け付ける入力受付処理と、
    前記入力受付処理で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と、前記該当人物確定に係る対象顔画像と同一の画像データに含まれる他の対象顔画像が該基準顔画像と同一でない及び前記該当人物確定に係る対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、前記記憶手段に保持された類似度情報を変更する類似度情報管理処理と、
    を実行させることを特徴とするプログラム。
  13. 前記類似度情報管理処理は、基準顔画像が変更された場合に、前記記憶手段に保持された類似度情報のうち、変更後の基準顔画像が関連する類似度情報のみを変更することを特徴とする請求項10から12のいずれか1項に記載のプログラム。
  14. 前記対象顔画像をひとつの顔画像ごとに区別するようにユーザに明示する対象顔明示処理をコンピュータに実行させることを特徴とする請求項10から13のいずれか1項に記載のプログラム。
  15. 画像データの管理を行う情報処理装置で用いられるプログラムあって、
    コンピュータに、
    他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付処理と、
    前記入力受付処理で受け付けられた入力内容を用いて、同一の画像データに含まれる一の対象顔画像が基準顔画像と同一であるとする該当人物確定と該画像データに含まれる他の対象顔画像が該基準顔画像と同一でないとする非該当人物確定とが反映するように、前記他の情報処理装置で保持された類似度情報を変更する類似度情報管理処理と、
    を実行させることを特徴とするプログラム。
  16. 画像データの管理を行う情報処理装置で用いられるプログラムあって、
    コンピュータに、
    他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付処理と、
    前記入力受付処理で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と該対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、前記他の情報処理装置で保持された類似度情報を変更する類似度情報管理処理と、
    を実行させることを特徴とするプログラム。
  17. 画像データの管理を行う情報処理装置で用いられるプログラムあって、
    コンピュータに、
    他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付処理と、
    前記入力受付処理で受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と、前記該当人物確定に係る対象顔画像と同一の画像データに含まれる他の対象顔画像が該基準顔画像と同一でない及び前記該当人物確定に係る対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、前記他の情報処理装置で保持された類似度情報を変更する類似度情報管理処理と、
    を実行させることを特徴とするプログラム。
  18. 情報処理装置で画像データの管理を行う画像データ管理方法であって、
    前記情報処理装置は、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する記憶手段を備え、
    前記記憶手段に保持された類似度情報を変更するユーザの入力を受け付ける入力受付ステップと、
    前記入力受付ステップで受け付けられた入力内容を用いて、同一の画像データに含まれる一の対象顔画像が基準顔画像と同一であるとする該当人物確定と該画像データに含まれる他の対象顔画像が該基準顔画像と同一でないとする非該当人物確定とが反映するように、前記記憶手段に保持された類似度情報を変更する類似度情報管理ステップと、
    を有することを特徴とする画像データ管理方法。
  19. 情報処理装置で画像データの管理を行う画像データ管理方法であって、
    前記情報処理装置は、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する記憶手段を備え、
    前記記憶手段に保持された類似度情報を変更するユーザの入力を受け付ける入力受付ステップと、
    前記入力受付ステップで受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と該対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、前記記憶手段に保持された類似度情報を変更する類似度情報管理ステップと、
    を有することを特徴とする画像データ管理方法。
  20. 情報処理装置で画像データの管理を行う画像データ管理方法であって、
    前記情報処理装置は、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を保持する記憶手段を備え、
    前記記憶手段に保持された類似度情報を変更するユーザの入力を受け付ける入力受付ステップと、
    前記入力受付ステップで受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と、前記該当人物確定に係る対象顔画像と同一の画像データに含まれる他の対象顔画像が該基準顔画像と同一でない及び前記該当人物確定に係る対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、前記記憶手段に保持された類似度情報を変更する類似度情報管理ステップと、
    を有することを特徴とする画像データ管理方法。
  21. 情報処理装置で画像データの管理を行う画像データ管理方法であって、
    他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付ステップと、
    前記入力受付ステップで受け付けられた入力内容を用いて、同一の画像データに含まれる一の対象顔画像が基準顔画像と同一であるとする該当人物確定と該画像データに含まれる他の対象顔画像が該基準顔画像と同一でないとする非該当人物確定とが反映するように、前記他の情報処理装置で保持された類似度情報を変更する類似度情報管理ステップと、
    を有することを特徴とする画像データ管理方法。
  22. 情報処理装置で画像データの管理を行う画像データ管理方法であって、
    他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付ステップと、
    前記入力受付ステップで受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と該対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、前記他の情報処理装置で保持された類似度情報を変更する類似度情報管理ステップと、
    を有することを特徴とする画像データ管理方法。
  23. 情報処理装置で画像データの管理を行う画像データ管理方法であって、
    他の情報処理装置から取得した、顔同士の類似度算出の基準となる基準顔画像と画像データに対する顔認識で取得された類似度判定対象の対象顔画像との類似度に関する情報である類似度情報を変更するユーザの入力を受け付ける入力受付ステップと、
    前記入力受付ステップで受け付けられた入力内容を用いて、対象顔画像が一の基準顔画像と同一であるとする該当人物確定と、前記該当人物確定に係る対象顔画像と同一の画像データに含まれる他の対象顔画像が該基準顔画像と同一でない及び前記該当人物確定に係る対象顔画像が他の基準顔画像と同一でないとする非該当人物確定とが反映するように、前記他の情報処理装置で保持された類似度情報を変更する類似度情報管理ステップと、
    を有することを特徴とする画像データ管理方法。
JP2009081620A 2009-03-30 2009-03-30 情報処理装置、プログラム及び画像データ管理方法 Withdrawn JP2010231744A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009081620A JP2010231744A (ja) 2009-03-30 2009-03-30 情報処理装置、プログラム及び画像データ管理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009081620A JP2010231744A (ja) 2009-03-30 2009-03-30 情報処理装置、プログラム及び画像データ管理方法

Publications (1)

Publication Number Publication Date
JP2010231744A true JP2010231744A (ja) 2010-10-14

Family

ID=43047456

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009081620A Withdrawn JP2010231744A (ja) 2009-03-30 2009-03-30 情報処理装置、プログラム及び画像データ管理方法

Country Status (1)

Country Link
JP (1) JP2010231744A (ja)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014013686A1 (ja) * 2012-07-19 2014-01-23 日本電気株式会社 照合装置及び照合装置の制御方法、並びにコンピュータ・プログラム
JP2014048722A (ja) * 2012-08-29 2014-03-17 Ntt Docomo Inc 画像分類装置、画像分類方法
JP2014078064A (ja) * 2012-10-09 2014-05-01 Ntt Docomo Inc 画像表示のための装置、方法及びプログラム
US20160026854A1 (en) * 2014-07-23 2016-01-28 Samsung Electronics Co., Ltd. Method and apparatus of identifying user using face recognition
JP2016194857A (ja) * 2015-04-01 2016-11-17 日本電信電話株式会社 画像検索装置及びプログラム
JP2020201644A (ja) * 2019-06-07 2020-12-17 日本放送協会 提示制御装置、提示装置、およびプログラム
JP2023021054A (ja) * 2021-07-29 2023-02-09 ネイバー コーポレーション 人物情報を利用した写真分類機能を提供する方法、コンピュータ装置、およびコンピュータプログラム
JP7529006B2 (ja) 2019-12-17 2024-08-06 日本電気株式会社 プログラム、検索装置、および検索方法

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014013686A1 (ja) * 2012-07-19 2014-01-23 日本電気株式会社 照合装置及び照合装置の制御方法、並びにコンピュータ・プログラム
JPWO2014013686A1 (ja) * 2012-07-19 2016-06-30 日本電気株式会社 照合装置及び照合装置の制御方法、並びにコンピュータ・プログラム
US10068073B2 (en) 2012-07-19 2018-09-04 Nec Corporation Verification device and control method for verifiction device, as well as computer program
JP2014048722A (ja) * 2012-08-29 2014-03-17 Ntt Docomo Inc 画像分類装置、画像分類方法
JP2014078064A (ja) * 2012-10-09 2014-05-01 Ntt Docomo Inc 画像表示のための装置、方法及びプログラム
US20160026854A1 (en) * 2014-07-23 2016-01-28 Samsung Electronics Co., Ltd. Method and apparatus of identifying user using face recognition
JP2016194857A (ja) * 2015-04-01 2016-11-17 日本電信電話株式会社 画像検索装置及びプログラム
JP2020201644A (ja) * 2019-06-07 2020-12-17 日本放送協会 提示制御装置、提示装置、およびプログラム
JP7333714B2 (ja) 2019-06-07 2023-08-25 日本放送協会 提示制御装置、提示装置、およびプログラム
JP7529006B2 (ja) 2019-12-17 2024-08-06 日本電気株式会社 プログラム、検索装置、および検索方法
JP2023021054A (ja) * 2021-07-29 2023-02-09 ネイバー コーポレーション 人物情報を利用した写真分類機能を提供する方法、コンピュータ装置、およびコンピュータプログラム
JP7522161B2 (ja) 2021-07-29 2024-07-24 ネイバー コーポレーション 人物情報を利用した写真分類機能を提供する方法、コンピュータ装置、およびコンピュータプログラム

Similar Documents

Publication Publication Date Title
US12019675B2 (en) Recognizing text in image data
JP2010231744A (ja) 情報処理装置、プログラム及び画像データ管理方法
US9020183B2 (en) Tagging images with labels
US8867779B2 (en) Image tagging user interface
US9996735B2 (en) Facial recognition
US9135229B2 (en) Automated clipboard software
US20110064281A1 (en) Picture sharing methods for a portable device
US20090324103A1 (en) Method, apparatus and computer program product for providing image modification
US20050234896A1 (en) Image retrieving apparatus, image retrieving method and image retrieving program
US20040264810A1 (en) System and method for organizing images
JP4457988B2 (ja) 画像管理装置、画像管理方法およびコンピュータプログラム
WO2016199662A1 (ja) 画像情報処理システム
JP5808371B2 (ja) 画像認識装置、画像認識方法及び画像認識プログラム
CN105787028A (zh) 一种名片校对方法及系统
JP7390071B2 (ja) 書類処理装置、書類処理方法、およびプログラム
US9195312B2 (en) Information processing apparatus, conference system, and information processing method
JPWO2019038878A1 (ja) 端末装置、プログラム及び方法
JP4556739B2 (ja) 画像管理装置、画像管理方法、および画像管理プログラム
US9036946B2 (en) Image processing apparatus that retrieves similar images, method of controlling the same, and storage medium
JP6635208B1 (ja) 検索装置、検索方法、およびプログラム
JP2007086546A (ja) 広告印刷装置、広告印刷方法及び広告印刷プログラム
JP2019040599A (ja) 端末装置、プログラム及び方法
JP2005339000A (ja) 画像認識装置およびプログラム
JP2021068306A (ja) 情報処理装置およびプログラム
JP2006268173A (ja) 画像管理装置、および、プログラム

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20110830

A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20120605