JP2014053749A - 画像処理装置、画像処理方法およびプログラム - Google Patents

Abstract

【課題】複数の撮像画像から特定人物の顔などの対象物を含む撮像画像を取得する際のユーザの操作手間を軽減する。
【解決手段】画像保存部により、撮像部で撮像されて得られた撮像画像を保存する。対象物選択部により、撮像部で撮像されて得られた撮像画像から対象物、例えば、人物の顔を選択する。画像抽出部により、保存されている撮像画像から、選択された対象物に応じた撮像画像を抽出する。例えば、画像抽出部は、モード設定に基づいて、保存されている撮像画像から、選択された対象物の全部または一部が含まれている、あるいは選択された対象物の全部が含まれていない撮像画像を抽出する。ユーザは対象物が含まれる画像を撮像するだけでよく、対象物を含む撮像画像を取得するためのユーザ操作が容易となる。
【選択図】図２

Description

本技術は、画像処理装置、画像処理方法およびプログラムに関し、特に、複数の撮像画像から特定人物の顔などの対象物を含む撮像画像を容易に取得可能にした画像処理装置等に関する。

近年、例えば、デジタルカメラ、ビデオカメラなどの撮像装置により撮影した画像（画像データ）を、複数のカメラ間で交換する技術が実現されている。このような画像の交換では、有線／無線の通信接続を介して、サーバを介した撮像装置間、もしくは直接的に撮像装置間で、画像が転送される。

例えば、特許文献１には、画像データの交換技術の一例として、画像を識別情報と共にサーバに送信し、ユーザ毎に登録された識別情報に該当する画像をサーバから配信する交換方法が記載されている。この交換方法では、ユーザは識別情報をサーバに登録しておき、サーバは、登録された識別情報に該当する識別情報を伴う画像がアップロードされるとき、この画像データを該当するユーザに配信する。よって、この交換方法は、複数のカメラを含む撮影グループが共通の識別情報を登録し、識別情報に基づいて画像データを共有する、という形態で利用される。

特開平２００６−０５９３３１号公報

画像を交換する用途として、例えば、特定人物の顔などの対象物を含む撮像画像を取得したい場合がある。しかし、上述の特許文献１の交換方法は、撮像画像に含まれる人物の顔などの対象物を識別するものではないので、撮影グループのカメラは、自ら撮影した全ての画像の画像データをサーバに送信し、他のカメラが撮影した全ての画像の画像データをサーバから受信して記憶することになる。そして、撮影グループのカメラは、特定人物の顔などの対象物を含む画像を取得するために、撮影グループが共有する全ての画像の各々について所望の画像データであるかを判別し、不要な画像データを消去する必要がある。

本技術の目的は、複数の撮像画像から特定人物の顔などの対象物を含む撮像画像を取得する際のユーザの操作手間を軽減することにある。

本技術の概念は、
撮像部と、
上記撮像部で撮像されて得られた撮像画像を保存する画像保存部と、
上記撮像部で撮像されて得られた撮像画像から対象物を選択する対象物選択部と、
上記保存されている撮像画像から、上記選択された対象物に応じた撮像画像を抽出する画像抽出部とを備える
画像処理装置にある。

本技術において、画像保存部により、撮像部で撮像されて得られた撮像画像が保存される。また、対象物選択部により、撮像部で撮像されて得られた撮像画像から対象物、例えば、人物の顔が選択される。そして、画像抽出部により、保存されている撮像画像から、選択された対象物に応じた撮像画像が抽出される。

例えば、画像抽出部は、モード設定に基づいて、保存されている撮像画像から、選択された対象物の全部または一部が含まれている、あるいは選択された対象物の全部が含まれていない撮像画像を抽出する、ようにされてもよい。この場合、モード設定によって、抽出される撮像画像を変更することが可能となる。

また、例えば、画像抽出部は、選択された対象物を保存されている撮像画像と照合し、この撮像画像にその対象物が含まれているか否かを識別し、識別結果に基づいて、保存されている撮像画像から、選択された対象物に応じた撮像画像を抽出する、ようにされてもよい。ここで、抽出される撮像画像は、例えば、選択された対象物の全部または一部が含まれている、あるいは選択された対象物の全部が含まれていない撮像画像である。

また、例えば、撮像部で撮像されて得られた撮像画像に基づいて所定数の対象物を登録する対象物登録部をさらに備え、画像保存部は、撮像部で撮像されて得られた撮像画像を登録された所定数の対象物と照合して、この撮像画像が各対象物を含むか否かを識別し、その撮像画像を識別情報と共に保存し、画像抽出部は、選択された対象物を登録された所定数の対象物と照合し、選択された対象物が登録された所定数の対象物のいずれであるか、あるいはいずれでもないのかを識別し、識別結果に基づいて、識別情報と共に保存されている撮像画像から、選択された対象物に応じた撮像画像を抽出する、ようにされてもよい。この場合、画像保存部に保存される撮像画像には識別情報が対応付けて保存されているので、選択された対象物に応じた撮像画像を抽出する際の処理が容易となる。

このように本技術においては、撮像部で撮像されて得られた撮像画像から対象物を選択し、画像保存部に保存されている撮像画像から、選択された対象物に応じた撮像画像を抽出するものである。この場合、ユーザは対象物が含まれる画像を撮像するだけでよく、特定人物の顔などの対象物を含む撮像画像を取得するためのユーザ操作が容易となる。

なお、本技術において、例えば、抽出された撮像画像を外部機器に転送する画像転送部をさらに備える、ようにされてもよい。これにより、特定人物の顔などの対象物を含む撮像画像のみを外部機器に転送することが可能となる。そして、この場合、例えば、対象物選択部は、転送操作があるとき、この転送操作がされる直前に撮像部で撮像されて得られた撮像画像から対象物を選択する、ようにされてもよい。この場合、ユーザは、転送操作後に、対象物を選択するための撮像画像を得る撮像操作を行うこと必要なく、処理が容易となる。

また、本技術の他の概念は、
撮像画像を取得する画像取得部と、
上記取得された撮像画像を保存する画像保存部と、
上記取得された画像から対象物を選択する対象物選択部と、
上記保存されている撮像画像から、上記選択された対象物に応じた撮像画像を抽出する画像抽出部とを備える
画像処理装置にある。

本技術において、画像取得部により、撮像画像が取得される。例えば、画像取得部は、外部機器から、ネットワークを介して、撮像画像を受信する、ようにされてもよい。また、例えば、画像取得部は、撮像部、あるいはカメラ等から出力される撮像信号の入力部などであってもよい。対象物選択部により、画像取得部で取得された撮像画像から対象物、例えば、人物の顔が選択される。そして、画像抽出部により、保存されている撮像画像から、選択された対象物に応じた撮像画像が抽出される。

このように本技術においては、画像取得部で取得された撮像画像から対象物を選択し、画像保存部に保存されている撮像画像から、選択された対象物に応じた撮像画像を抽出するものである。そのため、特定人物の顔などの対象物を含む撮像画像を容易に取得可能になる。なお、本技術において、例えば、抽出された撮像画像を外部機器に転送する画像転送部をさらに備える、ようにされてもよい。これにより、特定人物の顔などの対象物を含む撮像画像のみを外部機器に転送することが可能となる。

また、本技術の他の概念は、
撮像画像を取得する画像取得部と、
上記取得された撮像画像に基づいて所定数の対象物を登録する対象物登録部と、
上記取得された撮像画像を上記登録された所定数の対象物と照合して、該撮像画像が各対象物を含むか否かを識別し、該撮像画像を識別情報と共に保存する画像保存部とを備える
画像処理装置にある。

本技術において、画像取得部により、撮像画像が取得される。例えば、画像取得部は、外部機器から、ネットワークを介して、撮像画像を受信する、ようにされてもよい。また、例えば、画像取得部は、撮像部、あるいはカメラ等から出力される撮像信号の入力部などであってもよい。

対象物登録部により、画像取得部で取得された撮像画像から所定数の対象物、例えば、人物の顔が登録される。そして、画像保存部により、取得された撮像画像が登録された所定数の対象物と照合されて、この撮像画像が各対象物を含むか否かが識別され、この撮像画像が識別情報と共に保存される。

このように本技術においては、画像保存部には、画像取得部で取得された各撮像画像が、どの対象物を含むかと観点で仕分けされたものとなる。そのため、特定の対象物を含む、あるいは含まない撮像画像を抽出することが容易となる。

本技術によれば、複数の撮像画像から特定人物の顔などの対象物を含む撮像画像を取得する際のユーザの操作手間を軽減できる。

実施の形態としてのカメラの構成例を示すブロック図である。 カメラにおける画像転送処理の一例（第１のパターン）を説明するための図である。 モード設定と画像収集パターンとの対応関係の一例を示す図である。 カメラのＣＰＵにおける転送モードの制御処理の一例を示すフローチャートである。 カメラにおける画像転送処理の他の例（第２のパターン）を説明するための図である。 対象物登録モードにおけるＬＣＤの表示例を示す図である。 登録されている対象物（顔）の確認時におけるＬＣＤの表示例を示す図である。 カメラのＣＰＵにおける転送モードの制御処理の一例を示すフローチャートである。 カメラのＣＰＵにおける転送モードの制御処理の一例を示すフローチャートである。 クラウド上の外部機器を利用する画像処理システムの構成例を示すブロック図である。 クラウド上の外部機器を利用する画像処理システムの他の構成例を示すブロック図である。

以下、発明を実施するための形態（以下、「実施の形態」とする）について説明する。なお、説明を以下の順序で行う。
１．実施の形態
２．変形例

＜１．実施の形態＞
［カメラの構成例］
図１は、実施の形態としてのカメラ１００の構成例を示している。最初に、このカメラ１００の基本的な構成について説明する。

被写体からの光は、レンズや絞り機構などにより構成されるレンズ部１２を介して、撮像素子としてのＣＣＤ（Charge Coupled Device）３１に入射されて光電変換され、撮像信号としてＣＤＳ（Correlated Double Sampling）回路３２に供給される。

ＣＤＳ回路３２は、撮像信号に相関二重サンプリングを施してノイズ成分を除去し、ＡＧＣ（Automatic Gain Control）回路３３に画像データとして出力する。ＡＧＣ回路３３は、画像データのゲインを調整した後、Ａ／Ｄ変換器３４に出力する。Ａ／Ｄ変換器３４は、画像データをアナログ信号からデジタル信号に変換し、ＤＳＰ（Digital Signal Processor）３５に出力する。

ＤＳＰ３５は、画像調整処理部４１、画像圧縮伸長処理部４２、およびＳＤＲＡＭコントローラ４３を含んで構成される。ＤＳＰ３５は、画像調整処理部４１により、画像データに基づいて自動フォーカス、自動露出、および自動ホワイトバランスなどに用いられる制御信号を生成し、バス５０を介してＣＰＵ５１に供給する。

ＤＳＰ３５は、ＳＤＲＡＭ（SynchronousDynamic Random Access Memory）コントローラ４３によりＳＤＲＡＭ３６を制御しながら、画像圧縮伸長処理部４２により、画像データを所定の圧縮伸長方式で圧縮し、圧縮画像データを生成する。また、ＤＳＰ３５は、画像圧縮伸長処理部４２により、記憶部５５などに供給された圧縮画像データを伸長する。

画像圧縮伸長処理部４２により生成された圧縮画像データは、バス５０を介して、ＲＡＭ５３などに供給され、保存された後、記憶部５５に供給されてメモリやハードディスクなどに記録されたり、メモリＩ／Ｆ５９に接続されたメモリカード６１に供給されて記録されたり、または、通信部５８に供給されて、他のカメラを含む外部機器に転送されたりする。

ＣＰＵ５１は、ＲＯＭ５２に記憶されているプログラム、またはフラッシュメモリなどにより構成される記憶部５５からＲＡＭ５３にロードされたプログラムに従って各部を制御したり、各種の処理を実行したりする。ＲＡＭ５３には、また、ＣＰＵ５１が各種の処理を実行する際に必要なデータなども適宜記憶されている。ＣＰＵ５１には、また、ユーザの操作を受ける外部操作入力部５４が接続されている。

ＣＰＵ５１、ＲＯＭ５２、およびＲＡＭ５３は、バス５０を介して相互に接続されている。バス５０には、また、不揮発性のメモリやハードディスクなどで構成される記憶部５５、ＬＣＤ１９に表示させる画像を制御する表示制御部５６、メモリカード６１などが装着されるメモリＩ／Ｆ５９が接続されている。

表示制御部５６は、ＤＳＰ３５で伸長された画像データを内蔵のＶＲＡＭ（Video RAM）に記憶させ、ＶＲＡＭに記憶されている画像データに対応する画像や、他のメモリに記憶されている画像データに対応する画像をＬＣＤ１９に表示させる。

バス５０には、また、必要に応じて、インターフェースを介してドライブ６３が接続され、ドライブ６３に接続された磁気ディスク６４、光ディスク６５、光磁気ディスク６６、またはメモリ６７などから読み出されたプログラムが記憶部５５などにインストールされる。また、メモリＩ／Ｆ５９に適宜装着されるメモリカード６１から読み出されたプログラムも、必要に応じて記憶部５５などにインストールされる。

ＣＰＵ５１は、外部操作入力部５４から入力されたユーザからの指示情報や、画像調整処理部４１より供給された制御情報、または、各種のプログラムを実行することにより得られた情報に基づいて、ＣＤＳ回路３２、ＡＧＣ回路３３、およびＡ／Ｄ変換器３４の動作を制御する。また、ＣＰＵ５１は、ＣＣＤ３１の駆動を制御するＴＧ（タイミング生成部）７１およびＶドライバ７２を制御することにより、ＣＣＤ３１の動作を制御する。さらに、ＣＰＵ５１は、レンズ部１２の動作を制御するアイリスシャッタドライバ７３を制御し、シャッタ速度を調整したり、絞り機構を調整したりする。

通信部５８は、例えば、ＣＰＵ５１などの制御下において、無線／有線の通信接続を介して、通信可能な他のカメラを含む外部機器との間で、撮影画像（画像データ）を含む各種情報の送受信を実行する。

［画像転送処理（第１のパターン）］
図１に示すカメラ１００における画像転送処理の一例（第１のパターン）について説明する。カメラ１００は、外部操作入力部５４から入力されたユーザからの指示情報に基づいて、撮像モードあるいは転送モードとなる。

撮像モードでは、図２（ａ）に示すように、撮像（ａ１）と、保存（ａ２）が、繰り返し行われる。この場合、被写体が撮像される毎に、撮像して得られた画像（画像データ）が、画像保存部（記憶部５５、メモリカード６１など）に保存される。

転送モードでは、図２（ｂ）に示すように、対象物選択（ｂ１）と、対象物照合（ｂ２）と、画像収集（ｂ３）と、転送（ｂ４）が行われる。対象物選択（ｂ１）では、まず、対象物としての人物の顔を含む被写体が撮像され、その撮像画像（撮像画像データ）がＲＡＭ５３に記憶される。そして、ＣＰＵ５１により、この撮像画像が処理され、撮像画像に含まれる人物の顔が対象物として選択され、その特徴量（顔識別のためのパラメータ情報）がＲＡＭ５３に記憶される。

この場合、撮像画像に人物の顔が複数存在する場合には、それぞれの人物の顔が対象物として選択され、その特徴量がＲＡＭ５３に保存される。なお、顔画像から識別に有効な特徴量を抽出する際には、例えば、非限定的に、エッジ画像、周波数強度画像、高度自己相関、カラー変換画像等の信号処理を施し、例えば、目鼻など、顔の特徴を表すパラメータ情報を顔画像の特徴量として抽出する。

対象物照合（ｂ２）では、ＣＰＵ５１により、画像保存部に保存されている撮像画像（保存画像）毎に、選択された対象物と保存画像との照合が行われ、保存画像に対象物が含まれているか否かが識別される。この場合、ＣＰＵ５１により、保存画像が処理され、人物の顔が取り出され、その特徴量と、選択された対象物の特徴量との相関が取られ、保存画像に対象物が含まれているか否かが識別される。

画像収集（ｂ３）では、ＣＰＵ５１により、各保存画像の識別結果に基づいて、転送すべき保存画像の転送リストが生成され、ＲＡＭ５３に記憶される。ここで、カメラ１００は、外部操作入力部５４から入力されたユーザからの指示情報に基づいて、画像収集パターンを示すモード設定が可能とされている。

上述のＣＰＵ５１により生成される転送リストには、モード設定に基づいて、例えば、選択された対象物の全部または一部が含まれている、あるいは選択された対象物の全部が含まれていない保存画像が登録される。図３は、モード設定と画像収集パターンとの対応関係の一例を示しており、対象物が１個の場合と、２個の場合とを示している。

選択時の対象物が１個の場合に関して、「モード１」または「モード２」が設定される。「モード１」が設定される場合、対象物を含む保存画像を収集することが行われる。つまり、この場合、転送リストには、対象物を含む保存画像が登録される。また、「モード２」が設定される場合、対象物を含まない保存画像を収集することが行われる。つまり、この場合、転送リストには、対象物を含まない保存画像が登録される。

また、選択時の対象物が２個の場合に関して、「モード１」、「モード２」または「モード３」が設定される。「モード１」が設定される場合、２個の対象物をどちらも含む保存画像を収集することが行われる。つまり、この場合、転送リストには、２個の対象物をどちらも含む保存画像が登録される。

また、「モード２」が設定される場合、２個の対象物のうち少なくとも片方を含む保存画像を収集することが行われる。つまり、この場合、転送リストには、２個の対象物のうち少なくとも片方を含む保存画像が登録される。また、「モード３」が設定される場合、２個の対象物をどちらも含まない保存画像を収集することが行われる。つまり、この場合、転送リストには、２個の対象物をどちらも含まない保存画像が登録される。

転送（ｂ４）では、ＣＰＵ５１の制御により、転送リストに登録された保存画像が画像保存部から取り出され、通信部５８から、転送先である他のカメラ、ＰＣ、サーバなどの外部機器に転送される。なお、転送先情報として、例えば、予めＩＰアドレスなどが登録される。

図４のフローチャートは、図１に示すカメラ１００のＣＰＵ５１における転送モード（図２（ｂ）参照）の制御処理の一例を示している。ＣＰＵ５１は、例えば、ユーザによる転送操作があるとき、ステップＳＴ１において、転送モードの制御処理を開始する。そして、ＣＰＵ５１は、ステップＳＴ２において、ユーザの撮像操作で撮像されて得られた撮像画像を処理して、撮像画像に含まれる人物の顔を対象物として選択する。この際、ＣＰＵ５１は、信号処理により、対象物の特徴量（顔識別のためのパラメータ情報）を取得し、ＲＡＭ５３に記憶しておく。

次に、ＣＰＵ５１は、ステップＳＴ３において、画像保存部に保存されている撮像画像（保存画像）と、選択対象物（顔）とを照合し、選択対象物がその保存画像に含まれているか否かを識別する。この際、ＣＰＵ５１は、保存画像を処理し、人物の顔を取り出し、その特徴量と、選択対象物の特徴量との相関をとって、保存画像に対象物が含まれているか否かを識別する。

次に、ＣＰＵ５１は、ステップＳＴ４において、選択対象物の個数と、設定されているモードに応じた画像収集パターン（図３参照）に基づき、ステップＳＴ３における識別結果を参照して、転送リストに、ステップＳＴ３で照合された保存画像を登録する。勿論、ステップＳＴ３の識別結果が、画像収集パターンに合致しない場合には、ステップＳＴ３で照合された保存画像の登録はされない。

次に、ＣＰＵ５１は、ステップＳＴ５において、画像保存部に保存されている最終画像まで処理を行ったか否かを判断する。最終画像まで処理を行っていないとき、ＣＰＵ５１は、ステップＳＴ３に戻り、次の保存画像に対して、上述したと同様の処理を行う。一方、最終画像まで処理を行ったとき、ＣＰＵ５１は、ステップＳＴ６において、転送リストに、保存画像の登録があるか否かを判断する。

保存画像の登録があるとき、ＣＰＵ５１は、ステップＳＴ７において、ユーザにより転送開始選択があったか否かを判断する。そして、転送開始選択があったとき、ＣＰＵ５１は、ステップＳＴ８において、通信部５８を制御して、転送リストに登録された保存画像を予め登録された外部機器に転送する。

この場合、ユーザは、転送開始選択を行う前に、外部操作入力部５４からの操作により、転送リストに登録されている保存画像をＬＣＤ１９に表示させて確認できる。また、この場合、ユーザは、外部操作入力部５４からの操作により、必要に応じて、登録されている保存画像の一部または全部を削除できる。

その後、ＣＰＵ５１は、ステップＳＴ９において、制御処理を終了する。なお、ＣＰＵ５１は、ステップＳＴ６で転送リストに保存画像の登録がないとき、直ちに、ステップＳＴ９に進み、制御処理を終了する。また、図示はしていないが、ユーザが転送開始選択をすることなく終了操作を行った場合、あるいは、ユーザの削除操作によって転送リストに保存画像の登録がなくなったときも、ＣＰＵ５１は、直ちに、ステップＳＴ９に進み、制御処理を終了する。

［画像転送処理（第２のパターン）］
図１に示すカメラ１００における画像転送処理の他の例（第２のパターン）について説明する。カメラ１００は、外部操作入力部５４から入力されたユーザからの指示情報に基づいて、対象物登録モード、撮像モードあるいは転送モードとなる。

対象物登録モードでは、図５（ａ）に示すように、撮像（ａ１）および対象物登録（ａ２）が行われる。撮像（ａ１）では、登録すべき対象物としての人物の顔を含む被写体が撮像され、その撮像画像（撮像画像データ）がＲＡＭ５３に記憶される。図６は、この撮像時におけるＬＣＤ１９の表示例を示しており、ユーザは、顔が枠に収まるように撮像する。

対象物登録（ａ２）では、撮像画像が処理され、枠内の顔が登録すべき対象物として抽出され、顔画像とその特徴量（顔識別のためのパラメータ情報）が、記憶部５５に関連付けされて保存される。上述の撮像（ａ１）および対象物登録（ａ２）が繰り返されることで、複数個の対象物（人物の顔）の登録が可能となる。

ユーザは、外部操作入力部５４からの操作により、登録されている対象物（顔）を確認できる。図７は、確認時におけるＬＣＤ１９の表示例を示している。この表示例のように、例えば、登録されている対象物（顔）の画像がユーザ確認のために表示される。なお、ユーザは、例えば、この確認時において、外部操作入力部５４からの操作により、選択的に、不要な対象物（顔）を登録から除外できる。

撮像モードでは、図５（ｂ）に示すように、撮像（ｂ１）と、対象物照合（ｂ２）と、保存（ｂ３）が、繰り返し行われる。撮像（ｂ１）では、被写体が撮像され、その撮像画像（撮像画像データ）がＲＡＭ５３に記憶される。

対象物照合（ｂ２）では、撮像画像が、登録されている所定数の対象物（顔）と照合され、撮像画像に対象物が含まれているか否かが識別される。この場合、ＣＰＵ５１により、撮像画像が処理され、人物の顔が取り出され、その特徴量と、登録されている対象物の特徴量との相関が取られ、撮像画像に対象物が含まれているか否かが識別される。

保存（ｂ３）では、撮像画像と、その識別情報（登録対象物情報）とが対応付けされて、画像保存部（記憶部５５、メモリカード６１など）に保存される。この場合の識別情報は、撮像画像に、登録されている対象物（顔）のどれが含まれているか、あるいはどれも含まれていないのかを示す。

転送モードでは、図５（ｃ）に示すように、対象物選択（ｃ１）と、対象物照合（ｃ２）と、画像収集（ｃ３）と、転送（ｃ４）が行われる。対象物選択（ｃ１）では、まず、対象物としての人物の顔を含む被写体が撮像され、その撮像画像（撮像画像データ）がＲＡＭ５３に記憶される。

そして、ＣＰＵ５１により、この撮像画像が処理され、撮像画像に含まれる人物の顔が対象物として選択され、その特徴量（顔識別のためのパラメータ情報）がＲＡＭ５３に記憶される。この場合、撮像画像に人物の顔が複数存在する場合には、それぞれの人物の顔が対象物として選択され、その特徴量がＲＡＭ５３に保存される。

対象物照合（ｃ２）では、ＣＰＵ５１により、記憶部５５に保存されている登録対象物毎に、選択対象物との照合が行われ、一致するか否かが識別される。この場合、登録対象物の特徴量と、選択対象物の特徴量との相関が取られ、一致、不一致が識別される。

画像収集（ｃ３）では、ＣＰＵ５１により、選択対象物の識別結果に基づいて、転送すべき保存画像の転送リストが生成され、ＲＡＭ５３に記憶される。上述したように、画像保存部に保存されている撮像画像（保存画像）には、登録対象物（顔）のどれが含まれているか、あるいはどれも含まれていないのかを示す識別情報（登録対象物情報）が対応付けされている。そのため、ＣＰＵ５１は、この識別情報と、上述の選択対象物の識別結果に基づいて、保存画像毎に、選択対象物が含まれているか否かを識別できる。

カメラ１００は、外部操作入力部５４から入力されたユーザからの指示情報に基づいて、画像収集パターンを示すモード設定が可能とされている。上述のＣＰＵ５１により生成される転送リストには、モード設定に基づいて、例えば、選択された対象物の全部または一部が含まれている、あるいは選択された対象物の全部が含まれていない保存画像が登録される（図３参照）。

転送（ｃ４）では、ＣＰＵ５１の制御により、転送リストに登録された保存画像が画像保存部から取り出され、通信部５８から、転送先である他のカメラ、ＰＣ、サーバなどの外部機器に転送される。なお、転送先情報として、例えば、予めＩＰアドレスなどが登録される。

図８のフローチャートは、図１に示すカメラ１００のＣＰＵ５１における転送モード（図５（ｃ）参照）の制御処理の一例を示している。ＣＰＵ５１は、例えば、ユーザによる転送操作があるとき、ステップＳＴ１１において、転送モードの制御処理を開始する。そして、ＣＰＵ５１は、ステップＳＴ１２において、ユーザの撮像操作で撮像されて得られた撮像画像を処理して、撮像画像に含まれる人物の顔を対象物として選択する。この際、ＣＰＵ５１は、信号処理により、対象物の特徴量（顔識別のためのパラメータ情報）を取得し、ＲＡＭ５３に記憶しておく。

次に、ＣＰＵ５１は、ステップＳＴ１３において、記憶部５５に保存されている登録対象物（顔）と、選択対象物（顔）とを照合し、選択対象物が登録対象物と一致するか否かを識別する。この際、ＣＰＵ５１は、登録対象物の特徴量と、選択対象物の特徴量との相関をとって、選択対象物が登録対象物と一致するか否かを識別する。

次に、ＣＰＵ５１は、ステップＳＴ１４において、選択対象物の個数と、設定されているモードに応じた画像収集パターン（図３参照）に基づき、ステップＳＴ１３における識別結果を参照して、転送リストに、画像保存部に保存されている保存画像の中から転送対象の保存画像を収集して、登録する。上述したように、画像保存部に保存されている保存画像には、登録対象物（顔）のどれが含まれているか、あるいはどれも含まれていないのかを示す識別情報（登録対象物情報）が対応付けされている。そのため、ＣＰＵ５１は、このステップにおいて、保存画像と選択対象物を照合する処理は不要となり、処理負荷が軽減される。

次に、ＣＰＵ５１は、ステップＳＴ１５において、転送リストに、保存画像の登録があるか否かを判断する。保存画像の登録があるとき、ＣＰＵ５１は、ステップＳＴ１６において、ユーザにより転送開始選択があったか否かを判断する。そして、転送開始選択があったとき、ＣＰＵ５１は、ステップＳＴ１７において、通信部５８を制御して、転送リストに登録された保存画像を予め登録された外部機器に転送する。

この場合、ユーザは、転送開始選択を行う前に、外部操作入力部５４からの操作により、転送リストに登録されている保存画像をＬＣＤ１９に表示させて確認できる。また、この場合、ユーザは、外部操作入力部５４からの操作により、必要に応じて、登録されている保存画像の一部または全部を削除できる。

その後、ＣＰＵ５１は、ステップＳＴ１８において、制御処理を終了する。なお、ＣＰＵ５１は、ステップＳＴ１５で転送リストに保存画像の登録がないとき、直ちに、ステップＳＴ１８に進み、制御処理を終了する。また、図示はしていないが、ユーザが転送開始選択をすることなく終了操作を行った場合、あるいは、ユーザの削除操作によって転送リストに保存画像の登録がなくなったときも、ＣＰＵ５１は、直ちに、ステップＳＴ１８に進み、制御処理を終了する。

なお、図８のフローチャートに示す制御処理においては、ステップＳＴ１５で転送リストに保存画像の登録がないとき、直ちに、ステップＳＴ１８で制御処理を終了するものである。しかし、そのとき、画像保存部に保存されている保存画像毎に、選択対象物（顔）との照合を行い、その結果に基づいて、転送リストを再作成することも考えられる。

図９のフローチャートは、その場合におけるＣＰＵ５１における転送モードの制御処理の一例を示している。なお、この図９において、図８と対応する部分には同一符号を付し、適宜、その詳細説明は省略する。

ＣＰＵ５１は、ステップＳＴ１５で転送リストに保存画像の登録がないとき、ステップＳＴ２１に進む。このステップＳＴ２１において、ＣＰＵ５１は、画像保存部に保存されている撮像画像（保存画像）と、選択対象物（顔）とを照合し、選択対象物がその保存画像に含まれているか否かを識別する。この際、ＣＰＵ５１は、保存画像を処理し、人物の顔を取り出し、その特徴量と、選択対象物の特徴量との相関をとって、保存画像に対象物が含まれているか否かを識別する。

次に、ＣＰＵ５１は、ステップＳＴ２２において、選択対象物の個数と、設定されているモードに応じた画像収集パターン（図３参照）に基づき、ステップＳＴ２１における識別結果を参照して、転送リストに、ステップＳＴ２１で照合された保存画像を登録する。勿論、ステップＳＴ２１の識別結果が、画像収集パターンに合致しない場合には、ステップＳＴ２１で照合された保存画像の登録はされない。

次に、ＣＰＵ５１は、ステップＳＴ２３において、画像保存部に保存されている最終画像まで処理を行ったか否かを判断する。最終画像まで処理を行っていないとき、ＣＰＵ５１は、ステップＳＴ２１に戻り、次の保存画像に対して、上述したと同様の処理を行う。一方、最終画像まで処理を行ったとき、ＣＰＵ５１は、ステップＳＴ２４において、転送リストに、保存画像の登録があるか否かを判断する。

保存画像の登録があるとき、ＣＰＵ５１は、ステップＳＴ１６に進む。そして、ＣＰＵ５１は、ユーザの転送開始選択があるとき、ステップＳＴ１７において、転送リストに登録された画像を転送し、その後に、ステップＳＴ１８において、制御処理を終了する。一方、ステップＳＴ２４で転送リストに保存画像の登録がないときは、直ちに、ステップＳＴ１８に進み、制御処理を終了する。

上述したように、図１に示すカメラ１００においては、転送モードにおいて、撮像画像から対象物（顔）が選択され、画像保存部から、その対象物に応じた保存画像が抽出されて、外部機器に転送される。この場合、ユーザは対象物が含まれる被写体を撮像するだけでよく、ユーザ操作が容易となる。

＜２．変形例＞
なお、上述実施の形態においては、転送モードとした後に、つまりユーザが転送操作を行った後に、ユーザが対象物（人物の顔）を含む被写体を撮像し、その撮像画像から対象物を選択する例を示した。しかし、転送操作があるとき、この転送操作がされる直前に撮像されて得られた撮像画像から対象物を選択することも考えられる。この場合、ユーザは、転送操作後に、対象物を選択するための撮像画像を得るための撮像操作を行うこと必要なく、処理が容易となる。

また、上述実施の形態においては、対象物が人物の顔である例を示した。しかし、本技術における対象物は、人物の顔に限定されるものではなく、犬や猫などの顔、あるいはその他の物体であってもよい。

また、上述実施の形態においては、画像転送処理の全てをカメラ１００で行う例を示した。しかし、その一部の処理を、クラウド上の外部機器（サーバなど）、つまりネットワークに接続された外部機器で処理することも考えられる。

図１０は、その場合における画像処理システムの構成例を示している。最初に、画像転送処理（第１のパターン）（図２参照）を行う場合を考える。この場合、撮像モードで、カメラ１００で撮像されて得られた撮像画像はクラウド上の外部機器２００に送られ、この外部機器２００の画像保存部に保存される。

また、この場合、転送モードで、カメラ１００で撮像されて得られた対象物（顔）を選択するための撮像画像はクラウド上の外部機器２００に送られる。そして、クラウド上の外部機器２００で、対象物選択、保存画像と選択対象物との照合、画像収集および転送先機器３００への転送の各処理が行われる。

なお、この場合、クラウド上の外部機器２００から転送画像をカメラ１００に送ることも考えられる。これにより、カメラ１００では、転送画像を確認することが可能となる。また、クラウド上の外部機器２００から転送先機器３００に直接転送するのではなく、カメラ１００を介して転送先機器３００に転送するように構成されてもよい。

次に、画像転送処理（第２のパターン）（図５参照）を行う場合を考える。この場合、対象物登録モードで、カメラ１００で撮像されて得られた対象物（顔）の登録のための撮像画像はクラウド上の外部機器２００に送られ、この外部機器２００で対象物登録が行われる。

また、この場合、撮像モードで、カメラ１００で撮像されて得られた撮像画像はクラウド上の外部機器２００に送られ、この外部機器２００で撮像画像と登録対象物との照合が行われ、この外部機器２００の画像保存部に、撮像画像が、登録対象物（顔）のどれが含まれているか、あるいはどれも含まれていないのかを示す識別情報が付加されて、保存される。

また、この場合、転送モードで、カメラ１００で撮像されて得られた対象物（顔）を選択するための撮像画像はクラウド上の外部機器２００に送られる。そして、クラウド上の外部機器２００で、対象物選択、登録対象物と選択対象物との照合、画像収集および転送先機器３００への転送の各処理が行われる。

なお、この場合、クラウド上の外部機器２００から転送画像をカメラ１００に送ることも考えられる。これにより、カメラ１００では、転送画像を確認することが可能となる。また、クラウド上の外部機器２００から転送先機器３００に直接転送するのではなく、カメラ１００を介して転送先機器３００に転送するように構成されてもよい。

図１０に示すような構成の画像処理システムにおいては、画像転送処理における一部の処理をカメラ１００の代わりにクラウド上の外部機器２００が行うものである。そのため、カメラ１００の処理負荷を軽減でき、メモリ容量の節約も可能となる。

図１１は、図１０と同様に、クラウド上の外部機器を利用する画像処理システムの構成例を示している。この構成例では、カメラ１００からクラウド上の外部機器２００に撮像画像を直接送信するのではなく、スマートフォン４００が中継器として挿入されている。なお、このスマートフォン４００の部分は、その他のモバイル端末、さらには、パーソナルコンピュータなどであってもよい。

また、本技術は、以下のような構成をとることもできる。
（１）撮像部と、
上記撮像部で撮像されて得られた撮像画像を保存する画像保存部と、
上記撮像部で撮像されて得られた撮像画像から対象物を選択する対象物選択部と、
上記保存されている撮像画像から、上記選択された対象物に応じた撮像画像を抽出する画像抽出部とを備える
画像処理装置。
（２）上記抽出された撮像画像を外部機器に転送する画像転送部をさらに備える
前記（１）に記載の画像処理装置。
（３）上記対象物選択部は、
転送操作があるとき、該転送操作がされる直前に上記撮像部で撮像されて得られた撮像画像から対象物を選択する
前記（２）に記載の画像処理装置。
（４）上記画像抽出部は、
モード設定に基づいて、上記保存されている撮像画像から、上記選択された対象物の全部または一部が含まれている、あるいは上記選択された対象物の全部が含まれていない撮像画像を抽出する
前記（１）から（３）のいずれかに記載の画像処理装置。
（５）上記画像抽出部は、
上記選択された対象物を上記保存されている撮像画像と照合し、該撮像画像に該対象物が含まれているか否かを識別し、該識別結果に基づいて、上記保存されている撮像画像から、上記選択された対象物に応じた撮像画像を抽出する
前記（１）から（４）のいずれかに記載の画像処理装置。
（６）上記撮像部で撮像されて得られた撮像画像に基づいて所定数の対象物を登録する対象物登録部をさらに備え、
上記画像保存部は、
上記撮像部で撮像されて得られた撮像画像を上記登録された所定数の対象物と照合して、該撮像画像が各対象物を含むか否かを識別し、該撮像画像を識別情報と共に保存し、
上記画像抽出部は、
上記選択された対象物を上記登録された所定数の対象物と照合し、上記選択された対象物が上記登録された所定数の対象物のいずれであるか、あるいはいずれでもないのかを識別し、該識別結果に基づいて、上記識別情報と共に保存されている撮像画像から、上記選択された対象物に応じた撮像画像を抽出する
前記（１）から（４）のいずれかに記載の画像処理装置。
（７）上記対象物は、人物の顔である
前記（１）から（６）のいずれかに記載の画像処理装置。
（８）撮像部で撮像されて得られた撮像画像を画像保存部に保存するステップと、
上記撮像部で撮像されて得られた撮像画像から対象物を選択するステップと、
上記保存されている撮像画像から、上記選択された対象物に応じた撮像画像を抽出するステップとを備える
画像処理方法。
（９）コンピュータに、
撮像部で撮像されて得られた撮像画像を画像保存部に保存するステップと、
上記撮像部で撮像されて得られた撮像画像から対象物を選択するステップと、
上記保存されている撮像画像から、上記選択された対象物に応じた撮像画像を抽出するステップとを備える画像処理方法を実行させる
プログラム。
（１０）撮像画像を取得する画像取得部と、
上記取得された撮像画像を保存する画像保存部と、
上記取得された画像から対象物を選択する対象物選択部と、
上記保存されている撮像画像から、上記選択された対象物に応じた撮像画像を抽出する画像抽出部とを備える
画像処理装置。
（１１）上記画像取得部は、外部機器から、ネットワークを介して、上記撮像画像を受信する
前記（１０）に記載の画像処理装置。
（１２）上記抽出された撮像画像を外部機器に転送する画像転送部をさらに備える
前記（１０）または（１１）に記載の画像処理装置。
（１３）撮像画像を取得する画像取得部と、
上記取得された撮像画像に基づいて所定数の対象物を登録する対象物登録部と、
上記取得された撮像画像を上記登録された所定数の対象物と照合して、該撮像画像が各対象物を含むか否かを識別し、該撮像画像を識別情報と共に保存する画像保存部とを備える
画像処理装置。

１２・・・レンズ部
１３・・・ＣＣＤ
１９・・・ＬＣＤ
３２・・・ＣＤＳ回路
３３・・・ＡＧＣ回路
３４・・・Ａ／Ｄ変換器
３５・・・ＤＳＰ
３６・・・ＳＤＲＡＭ
４１・・・画像調整処理部
４２・・・画像圧縮伸長処理部
４３・・・ＳＤＲＡＭコントローラ
５０・・・バス
５１・・・ＣＰＵ
５２・・・ＲＯＭ
５３・・・ＲＡＭ
５４・・・外部操作入力部
５５・・・記憶部
５６・・・表示制御部
５８・・・通信部
５９・・・メモリＩ／Ｆ
６１・・・メモリカード
６３・・・ドライブ
７１・・・タイミング生成部
７２・・・Ｖドライバ
７３・・・アイリスシャッタドライバ
１００・・・カメラ
２００・・・外部機器
３００・・・転送先機器
４００・・・スマートフォン

Claims (13)

1. 撮像部と、
   上記撮像部で撮像されて得られた撮像画像を保存する画像保存部と、
   上記撮像部で撮像されて得られた撮像画像から対象物を選択する対象物選択部と、
   上記保存されている撮像画像から、上記選択された対象物に応じた撮像画像を抽出する画像抽出部とを備える
   画像処理装置。
2. 上記抽出された撮像画像を外部機器に転送する画像転送部をさらに備える
   請求項１に記載の画像処理装置。
3. 上記対象物選択部は、
   転送操作があるとき、該転送操作がされる直前に上記撮像部で撮像されて得られた撮像画像から対象物を選択する
   請求項２に記載の画像処理装置。
4. 上記画像抽出部は、
   モード設定に基づいて、上記保存されている撮像画像から、上記選択された対象物の全部または一部が含まれている、あるいは上記選択された対象物の全部が含まれていない撮像画像を抽出する
   請求項１に記載の画像処理装置。
5. 上記画像抽出部は、
   上記選択された対象物を上記保存されている撮像画像と照合し、該撮像画像に該対象物が含まれているか否かを識別し、該識別結果に基づいて、上記保存されている撮像画像から、上記選択された対象物に応じた撮像画像を抽出する
   請求項１に記載の画像処理装置。
6. 上記撮像部で撮像されて得られた撮像画像に基づいて所定数の対象物を登録する対象物登録部をさらに備え、
   上記画像保存部は、
   上記撮像部で撮像されて得られた撮像画像を上記登録された所定数の対象物と照合して、該撮像画像が各対象物を含むか否かを識別し、該撮像画像を識別情報と共に保存し、
   上記画像抽出部は、
   上記選択された対象物を上記登録された所定数の対象物と照合し、上記選択された対象物が上記登録された所定数の対象物のいずれであるか、あるいはいずれでもないのかを識別し、該識別結果に基づいて、上記識別情報と共に保存されている撮像画像から、上記選択された対象物に応じた撮像画像を抽出する
   請求項１に記載の画像処理装置。
7. 上記対象物は、人物の顔である
   請求項１に記載の画像処理装置。
8. 撮像部で撮像されて得られた撮像画像を画像保存部に保存するステップと、
   上記撮像部で撮像されて得られた撮像画像から対象物を選択するステップと、
   上記保存されている撮像画像から、上記選択された対象物に応じた撮像画像を抽出するステップとを備える
   画像処理方法。
9. コンピュータに、
   撮像部で撮像されて得られた撮像画像を画像保存部に保存するステップと、
   上記撮像部で撮像されて得られた撮像画像から対象物を選択するステップと、
   上記保存されている撮像画像から、上記選択された対象物に応じた撮像画像を抽出するステップとを備える画像処理方法を実行させる
   プログラム。
10. 撮像画像を取得する画像取得部と、
    上記取得された撮像画像を保存する画像保存部と、
    上記取得された画像から対象物を選択する対象物選択部と、
    上記保存されている撮像画像から、上記選択された対象物に応じた撮像画像を抽出する画像抽出部とを備える
    画像処理装置。
11. 上記画像取得部は、外部機器から、ネットワークを介して、上記撮像画像を受信する
    請求項１０に記載の画像処理装置。
12. 上記抽出された撮像画像を外部機器に転送する画像転送部をさらに備える
    請求項１０に記載の画像処理装置。
13. 撮像画像を取得する画像取得部と、
    上記取得された撮像画像に基づいて所定数の対象物を登録する対象物登録部と、
    上記取得された撮像画像を上記登録された所定数の対象物と照合して、該撮像画像が各対象物を含むか否かを識別し、該撮像画像を識別情報と共に保存する画像保存部とを備える
    画像処理装置。

Images