JP5272773B2 - 画像処理装置、画像処理方法およびプログラム - Google Patents

Description

本発明は、画像処理装置に関し、特に、画像の表示制御を行う画像処理装置および画像処理方法ならびに当該方法をコンピュータに実行させるプログラムに関する。

近年、人物等の被写体が撮像された画像を記録するデジタルスチルカメラ、デジタルビデオカメラ等の撮像装置が普及している。また、このように撮像された画像に含まれる人物の顔を検出し、この検出された顔について各種画像処理を行う画像処理装置が提案されている。

例えば、画像に含まれる人物の顔を検出し、この検出された顔に関する情報に基づいてオートフォーカスの対象となるエリアを画像上の顔に設定し、この画像上の顔に適切にフォーカスを合わせる撮像装置が提案されている。また、例えば、その検出された顔を美しく記録するための最適な撮像パラメータを設定し、各種画像処理を行う撮像装置が提案されている。なお、画像に複数の顔が含まれる場合には、例えば、画像に含まれる複数の顔のうちの少なくとも１つの顔を基準顔とし、この基準顔に基づいて画像処理を行うことが考えられる。この基準顔は、例えば、画像における位置に基づいて設定することが考えられる。例えば、画像に含まれる複数の顔のうち、その画像における中心位置に最も近い顔を基準顔とすることができる。

しかしながら、例えば、画像における位置とは無関係に、ユーザが所望する顔を基準顔としたい場合も想定される。そこで、例えば、画像処理装置により選択された基準顔とは別にユーザ操作により基準顔を選択することが考えられる。例えば、タッチパネル上に表示される複数の顔に顔位置マーカを付すとともに、これらの複数の顔の中から、タッチパネルへの押下操作や十字キーの押下操作等により、ユーザが所望する顔を選択する画像処理装置が提案されている（例えば、特許文献１参照。）。この画像処理装置では、例えば、ユーザにより選択された顔に付される顔位置マーカを他の顔位置マーカとは異なる表示態様とするとともに、その選択された顔の位置に検波枠を設け、その顔に合焦するようにフォーカス制御を行う。

特開２００８−１３１４０５号公報（図１５）

上述の従来技術によれば、タッチパネル上に表示される複数の顔の中から、タッチパネルへの押下操作や十字キーの押下操作等により、ユーザが所望する顔を選択することができる。

しかしながら、例えば、両手で撮像装置を持ちながら撮影を行っている状態では、タッチパネル上に表示される複数の顔の中からタッチパネルへの押下操作により所望の顔を選択すると、その撮影姿勢が崩れてしまうおそれがある。また、例えば、画像から３人以上の顔が検出されている場合において、十字キーの押下操作により所望の顔を選択する場合には、所望の顔を選択するまでに十字キーの押下操作を複数回行う必要がある場合も想定される。このため、例えば、撮影中に十字キーの押下操作により所望の顔を選択する場合には、その押下操作により、撮影タイミングを逃してしまうおそれがある。このように画像に複数の対象物が含まれる場合において、これらの複数の対象物から所望の対象物を選択する場合には、各態様において、容易に選択することが重要となる。

本発明はこのような状況に鑑みてなされたものであり、画像に含まれる複数の対象物から所望の対象物を容易に選択することを目的とする。

本発明は、上記課題を解決するためになされたものであり、その第１の側面は、画像に含まれる複数の対象物のうちの少なくとも１つの対象物を基準対象物とし、複数の操作位置を検出することが可能な操作部材による操作入力と、少なくとも１つの操作位置を検出することが可能な他の操作部材による操作入力との組合せにより上記複数の対象物のうちから上記基準対象物以外の他の対象物を選択するための選択操作内容を上記他の対象物毎に決定する選択操作内容決定部と、上記決定された選択操作内容を上記他の対象物毎に関連付けて表示させる表示制御部とを具備する画像処理装置および画像処理方法ならびに当該方法をコンピュータに実行させるプログラムである。これにより、操作部材による操作入力と他の操作部材による操作入力との組合せにより、基準対象物以外の他の対象物を選択するための選択操作内容を、他の対象物毎に決定し、この決定された選択操作内容を他の対象物毎に関連付けて表示させるという作用をもたらす。

また、この第１の側面において、上記操作部材による操作入力と上記他の操作部材による操作入力とに対応する上記他の対象物を上記決定された選択操作内容に基づいて特定して当該特定された他の対象物を新たな基準対象物として選択する基準対象物選択部をさらに具備するようにしてもよい。これにより、操作部材による操作入力と他の操作部材による操作入力とに対応する他の対象物を、決定された選択操作内容に基づいて特定し、この特定された他の対象物を新たな基準対象物として選択するという作用をもたらす。

また、この第１の側面において、上記操作部材による操作入力と上記他の操作部材による操作入力とを受け付ける操作受付部をさらに具備するようにしてもよい。これにより、操作部材による操作入力と、他の操作部材による操作入力とを受け付けるという作用をもたらす。

また、この第１の側面において、上記画像に含まれる複数の対象物を検出する対象物検出部をさらに具備するようにしてもよい。これにより、画像に含まれる複数の対象物を検出するという作用をもたらす。

また、この第１の側面において、上記選択操作内容決定部は、上記操作部材の操作方向および操作量と、上記他の操作部材の操作の要否とを上記他の対象物毎に上記選択操作内容として決定し、上記表示制御部は、上記決定された選択操作内容を表す選択操作支援画像を上記他の対象物毎に関連付けて表示させるようにしてもよい。これにより、操作部材の操作方向および操作量と、他の操作部材の操作の要否とを他の対象物毎に決定し、この決定された選択操作内容を表す選択操作支援画像を他の対象物毎に関連付けて表示させるという作用をもたらす。

また、この第１の側面において、上記操作部材は、上記画像を表示する表示面における接触操作を検出するタッチパネルであり、上記選択操作内容決定部は、上記選択操作内容として上記表示面における基準位置からの操作方向および操作量を上記他の対象物毎に決定し、上記基準対象物選択部は、上記画像が表示されている状態で上記タッチパネルにおける最初の接触操作が検出された位置を上記基準位置として当該基準位置からの連続した接触操作の方向および移動量に基づいて上記新たな基準対象物を選択するようにしてもよい。これにより、表示面における基準位置からの操作方向および操作量を他の対象物毎に決定し、画像が表示されている状態でタッチパネルにおける最初の接触操作が検出された基準位置からの連続した接触操作の方向および移動量に基づいて新たな基準対象物を選択するという作用をもたらす。

また、この第１の側面において、被写体を撮像して画像を生成する撮像部と、上記選択された基準対象物に基づいて撮像制御を行う撮像制御部とをさらに具備するようにしてもよい。これにより、選択された基準対象物に基づいて撮像制御を行うという作用をもたらす。

また、この第１の側面において、上記選択された基準対象物に基づいて上記画像に関する出力制御を行う出力制御部をさらに具備するようにしてもよい。これにより、選択された基準対象物に基づいて画像に関する出力制御を行うという作用をもたらす。

また、この第１の側面において、上記選択操作内容決定部は、上記選択操作内容として上記操作部材の操作方向および操作量を上記他の対象物毎に決定し、上記表示制御部は、上記決定された選択操作内容を表す選択操作支援画像を上記他の対象物毎に関連付けて表示させるようにしてもよい。これにより、操作部材の操作方向および操作量を他の対象物毎に決定し、この決定された選択操作内容を表す選択操作支援画像を他の対象物毎に関連付けて表示させるという作用をもたらす。

また、この第１の側面において、上記選択操作内容決定部は、上記画像における上記基準対象物と上記他の対象物との位置関係に基づいて当該他の対象物の上記選択操作内容を決定するようにしてもよい。これにより、画像における基準対象物と他の対象物との位置関係に基づいて、他の対象物の選択操作内容を決定するという作用をもたらす。

また、この第１の側面において、上記表示制御部は、上記画像において上記基準対象物にはその旨を関連付けて表示させるとともに上記他の対象物には選択対象である旨および上記決定された選択操作内容を表す選択操作支援画像を関連付けて表示させるようにしてもよい。これにより、画像において、基準対象物にはその旨を関連付けて表示させるとともに、他の対象物には選択対象である旨および決定された選択操作内容を表す選択操作支援画像を関連付けて表示させるという作用をもたらす。

また、この第１の側面において、上記表示制御部は、上記決定された選択操作内容を表す選択操作支援画像を上記画像における上記対象物の位置を示す標識として上記他の対象物毎に関連付けて表示させるようにしてもよい。これにより、決定された選択操作内容を表す選択操作支援画像を、画像における対象物の位置を示す標識として他の対象物毎に関連付けて表示させるという作用をもたらす。

また、この第１の側面において、上記表示制御部は、上記検出された対象物を含む対象物画像と当該対象物について決定された上記選択操作内容とを関連付けて上記画像の表示領域とは異なる表示領域に表示させるようにしてもよい。これにより、検出された対象物を含む対象物画像と、その対象物について決定された選択操作内容とを関連付けて、画像の表示領域とは異なる表示領域に表示させるという作用をもたらす。

また、この第１の側面において、上記検出された対象物が特定対象物であるか否かを識別する識別部をさらに具備し、上記選択操作内容決定部は、上記検出された複数の対象物のうち上記特定対象物であると識別された対象物について上記選択操作内容を決定し、上記表示制御部は、上記決定された選択操作内容を上記特定対象物であると識別された対象物毎に関連付けて表示させるようにしてもよい。これにより、検出された対象物が特定対象物であるか否かを識別し、特定対象物であると識別された対象物について選択操作内容を決定し、この決定された選択操作内容を特定対象物であると識別された対象物毎に関連付けて表示させるという作用をもたらす。

また、この第１の側面において、上記特定対象物を表す特定対象物画像を上記特定対象物毎に記憶する特定対象物画像記憶部をさらに具備し、上記表示制御部は、上記特定対象物であると識別された対象物に対応する上記特定対象物画像と当該対象物について決定された上記選択操作内容とを関連付けて上記画像の表示領域とは異なる表示領域に表示させるようにしてもよい。これにより、特定対象物であると識別された対象物に対応する特定対象物画像と、その対象物について決定された選択操作内容とを関連付けて、画像の表示領域とは異なる表示領域に表示させるという作用をもたらす。

本発明によれば、画像に含まれる複数の対象物から所望の対象物を容易に選択することができるという優れた効果を奏し得る。

本発明の第１の実施の形態における撮像装置１００の内部構成例を示すブロック図である。 本発明の第１の実施の形態における撮像装置１００の外観を示す図である。 本発明の第１の実施の形態における撮像装置１００を用いて撮影を行う場合における撮影者の撮影姿勢の一例を示す図である。 本発明の第１の実施の形態における撮像装置１００の機能構成例を示すブロック図である。 本発明の第１の実施の形態における特定人物情報記憶部２３０に記憶されている各情報を模式的に示す図である。 本発明の第１の実施の形態における選択操作支援画像保持部２５０に保持されている内容を概略的に示す図である。 本発明の第１の実施の形態における撮像装置１００の外観と、リング型操作部材１４３の操作領域とを示す図である。 本発明の第１の実施の形態におけるリング型操作部材１４３の操作範囲と、選択操作支援画像保持部２５０に保持されている選択操作支援画像２５５乃至２５９との関係を示す図である。 本発明の第１の実施の形態における表示部２６１に表示される撮像画像の一例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定される選択操作内容を模式的に示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像が撮像画像に重畳された場合における表示例を示す図である。 本発明の第１の実施の形態における表示部２６１に表示される撮像画像の表示例と、リング型操作部材１４３との関係を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における撮像装置１００を用いて撮影を行う場合における撮影者の撮影姿勢の一例と、その撮影時における選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の実施の形態における撮像装置１００による撮像画像記録処理の処理手順を示すフローチャートである。 本発明の第１の実施の形態における基準対象物の選択操作を行う際に用いることが可能な操作部材を備える撮像装置の例を示す図である。 本発明の第１の実施の形態における基準対象物の選択操作を行う際に用いることが可能な操作部材を備える撮像装置の例を示す図である。 本発明の第１の実施の形態における基準対象物の選択操作を行うための選択操作内容を表す選択操作支援画像の例を示す図である。 本発明の第１の実施の形態における基準対象物の選択操作を行うための選択操作内容を表す選択操作支援画像の例を示す図である。 本発明の第２の実施の形態における撮像装置７００の外観を示す図である。 本発明の第２の実施の形態における撮像装置７００の機能構成例を示すブロック図である。 本発明の第２の実施の形態における選択操作支援画像保持部７２０に保持されている内容を概略的に示す図である。 本発明の第２の実施の形態における選択操作内容決定部７１１により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第２の実施の形態における選択操作内容決定部７１１により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。 本発明の第３の実施の形態における印刷装置８００の機能構成例を示すブロック図である。 本発明の第３の実施の形態における印刷装置８００の外観および印刷装置８００のタッチパネル８１１に表示される画像を示す図である。 本発明の第３の実施の形態における印刷装置８２０の外観を示す図である。 本発明の第４の実施の形態における再生装置８５０の機能構成例を示すブロック図である。 本発明の第４の実施の形態における再生装置８５０の外観を示す図である。 本発明の第４の実施の形態における再生装置８５０の外観を示す図である。

以下、本発明を実施するための形態（以下、実施の形態と称する）について説明する。説明は以下の順序により行う。
１．第１の実施の形態（画像表示制御：画像に含まれる顔に関連付けて選択操作支援画像を表示させる例）
２．第２の実施の形態（画像表示制御：補助操作部材を利用して選択操作支援画像が関連付けられた顔を選択する例）
３．第３の実施の形態（画像表示制御：印刷装置において選択操作支援画像を表示させて所望の顔を選択する例）
４．第４の実施の形態（画像表示制御：再生装置において選択操作支援画像を表示させて所望の顔を選択する例）

＜１．第１の実施の形態＞
［撮像装置の内部構成例］
図１は、本発明の第１の実施の形態における撮像装置１００の内部構成例を示すブロック図である。撮像装置１００は、光学ブロック１１１と、レンズアイリスドライバ１１２と、ＣＣＤ（Charge Coupled Devices）１１３と、タイミング生成回路１１４と、ＣＣＤドライバ１１５と、前処理回路１１６とを備える。また、撮像装置１００は、ＤＳＰ（Digital Signal Processor）１１７と、ＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）１１８とを備える。また、撮像装置１００は、ＣＰＵ（Central Processing Unit）１１９と、ＲＡＭ（Random Access Memory）１２０と、フラッシュＲＯＭ（Read Only Memory）１２１とを備える。また、撮像装置１００は、表示コントローラ１２２と、操作部１２３と、ドライブコントローラ１２４と、記録メディアインターフェース１２６と、バス１２８と、液晶モニタ１３０と、ファインダ１３５とを備える。また、撮像装置１００には、例えば、リムーバブルメディア１２５および記録メディア１２７の２つの記録媒体がそれぞれ適宜装着される。撮像装置１００は、例えば、撮像された画像をリアルタイムで表示する機能を有するデジタルスチルカメラ、デジタルビデオカメラ（例えば、カメラ一体型レコーダ）等の画像処理装置により実現される。

光学ブロック１１１は、例えば、光学レンズ、フォーカス機構、シャッタ機構、絞り（アイリス）機構等から構成され、被写体から反射された光を集光し、被写体の像の光をＣＣＤ１１３の受光部に結像させるものである。この光学ブロック１１１は、レンズアイリスドライバ１１２により駆動される。

レンズアイリスドライバ１１２は、ＣＰＵ１１９の制御に基づいて、光学ブロック１１１を動作させる駆動信号を生成し、この生成された駆動信号を光学ブロック１１１に供給して光学ブロック１１１を動作させるものである。例えば、レンズアイリスドライバ１１２は、撮像時において、ユーザの指示に基づいて、基準対象物に合焦させるための駆動信号や、絞りを調節して光量を調整させるための駆動信号を生成して光学ブロック１１１に供給する。

ＣＣＤ１１３は、ＣＣＤセンサから構成され、ＣＣＤドライバ１１５から供給される駆動信号に応じて、光学ブロック１１１から供給された光を光電変換することにより、光信号をアナログの電気信号（アナログ信号）に変換するものである。また、ＣＣＤ１１３は、タイミング生成回路１１４から供給されるタイミング信号に基づいて、変換されたアナログ信号（画像データ）を前処理回路１１６に供給する。なお、ＣＣＤ１１３として、例えば、ＣＣＤセンサ以外に、画素を単位として画像信号を生成する撮像素子を用いることができる。この撮像素子として、例えば、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサ等を用いることができる。

タイミング生成回路１１４は、ＣＰＵ１１９の制御に基づいて、ＣＣＤ１１３の動作の時間的な基準となるタイミング信号を生成し、この生成されたタイミング信号をＣＣＤ１１３およびＣＣＤドライバ１１５に供給するものである。

ＣＣＤドライバ１１５は、タイミング生成回路１１４から供給されるタイミング信号に基づいて、ＣＣＤ１１３を駆動するための駆動信号を生成し、この生成された駆動信号をＣＣＤ１１３に供給するものである。

前処理回路１１６は、ＣＰＵ１１９の制御に基づいて、ＣＣＤ１１３から供給されるアナログ信号（画像データ）に対して、各種の前処理を行うものである。この前処理として、前処理回路１１６は、例えば、ＣＤＳ（Correlated Double Sampling）処理を行い、Ｓ／Ｎ（Signal/Noise）比を良好に保つようにする。また、ＡＧＣ（Automatic Gain Control）処理を行い、利得を制御する。そして、前処理回路１１６は、Ａ／Ｄ（Analog/Digital）変換を行い、アナログ信号をデジタル信号に変換し、この変換により得られたデジタル信号（画像データ）をＤＳＰ１１７に供給する。なお、前処理回路１１６からＤＳＰ１１７に供給される画像データは、ＳＤＲＡＭ１１８に順次記憶される。

ＣＰＵ１１９は、ＲＡＭ１２０やフラッシュＲＯＭ１２１等に記憶されているプログラムに基づいて、撮像装置１００の各部の動作を制御するものである。また、ＣＰＵ１１９は、操作部１２３またはタッチパネル１３２から供給される操作信号に基づいて、撮像装置１００の各部の動作を制御する。

ＲＡＭ１２０には、ＣＰＵ１１９が実行するプログラムや各種のデータ等が適宜記憶されるメモリである。フラッシュＲＯＭ１２１は、ＣＰＵ１１９が実行するプログラムや各種のデータ等を記録するメモリである。これらのＣＰＵ１１９、ＲＡＭ１２０およびフラッシュＲＯＭ１２１は、バス１２８により相互に接続される。また、バス１２８には、ＤＳＰ１１７、表示コントローラ１２２、操作部１２３、ドライブコントローラ１２４および記録メディアインターフェース１２６が接続されている。

ＤＳＰ１１７は、ＣＰＵ１１９の制御に基づいて、前処理回路１１６から供給されるデジタル信号（画像データ）に対して、各種の画像処理を行うものである。ＤＳＰ１１７は、例えば、ＡＦ（Auto Focus）処理部、ＡＥ（Auto Exposure）処理部、ＡＷＢ（Auto White Balance）処理部、圧縮伸張部等を含む。そして、前処理回路１１６から供給された画像データに所定のカメラ信号処理を施し、このカメラ信号処理が施された画像データを所定の圧縮方式で圧縮する。また、ＤＳＰ１１７はＳＤＲＡＭコントローラを含み、このＳＤＲＡＭコントローラは、ＤＳＰ１１７が実行するプログラムや各種データに基づいてＳＤＲＡＭ１１８を制御して、一時的にそれらのプログラムや各種データをＳＤＲＡＭ１１８に記憶させる。なお、ＤＳＰ１１７として、例えば、専用のＩＣ（Integrated Circuit）である専用ＤＳＰまたは汎用ＤＳＰ等を用いることができる。

ＳＤＲＡＭ１１８は、ＳＤＲＡＭコントローラの制御に基づいて、ＤＳＰ１１７が実行するプログラムや各種データ等を適宜記憶するメモリである。例えば、ＳＤＲＡＭ１１８が前処理回路１１６から供給される画像データを一時的に記憶することにより、ＤＳＰ１１７は、その一時的に記憶された画像データに対して所定のカメラ信号処理および画像データの圧縮処理を施し、圧縮された画像データを生成する。

具体的には、ＳＤＲＡＭ１１８に記憶される前処理回路１１６から供給された画像データに対して、ＤＳＰ１１７のＡＦ処理部は、被写体に焦点（ピント）を合わせる処理（いわゆる、オートフォーカス）を行う。また、ＤＳＰ１１７のＡＥ処理部は、被写体の明るさに基づいて露出を決定する処理（いわゆる、自動露出）を行う。また、ＤＳＰ１１７のＡＷＢ処理部は、白色である予め定められた基準の色に基づいて全体の画像データを補正する処理（いわゆる、ホワイトバランス）を行う。また、ＤＳＰ１１７の圧縮伸張部は、所定のカメラ信号処理により、種々の調整がされた画像データを所定の圧縮方式で圧縮する。この圧縮伸張部は、例えば、画像データをＪＰＥＧ（Joint Photographic Experts Group）方式で圧縮する。そして、ＤＳＰ１１７は、圧縮された画像データをＳＤＲＡＭ１１８から読み出し、この画像データをバス１２８を介してドライブコントローラ１２４に供給する。これにより、画像データのデータ量を減らしてから、画像データをリムーバブルメディア１２５に記録することができる。

また、ＤＳＰ１１７は、操作部１２３やタッチパネル１３２により受け付けられたユーザからの操作入力に応じて、画像データがリムーバブルメディア１２５から読み出された場合、その画像データに対して所定の伸張処理（解凍処理）を行う。すなわち、ＤＳＰ１１７の圧縮伸張部は、バス１２８を介して、リムーバブルメディア１２５から供給される圧縮されている画像データを、その圧縮の方式に応じた所定の伸張処理を行うことにより、その画像データを伸張する。そして、ＤＳＰ１１７は、その伸張された画像データを、バス１２８を介して表示コントローラ１２２に供給する。

操作部１２３は、ユーザからの操作入力を受け付ける操作部であり、受け付けられた操作入力に応じた操作信号をＣＰＵ１１９に出力する。操作部１２３として、例えば、図２に示すシャッターボタン１４１、リング型操作部材１４３等が撮像装置１００に設けられている。

表示コントローラ１２２は、ＣＰＵ１１９の制御に基づいて、ＤＳＰ１１７から供給される画像データに基づいて、カラー液晶表示部１３１に画像を表示させるための画像信号を生成し、この生成された画像信号をカラー液晶表示部１３１に供給するものである。また、表示コントローラ１２２は、ＤＳＰ１１７から供給される画像データに基づいて、カラー液晶表示部１３１と同様の画像をファインダ１３５に表示させるための画像信号を生成し、この生成された画像信号をファインダ１３５に供給する。すなわち、表示コントローラ１２２は、画像信号をカラー液晶表示部１３１およびファインダ１３５に供給することにより、カラー液晶表示部１３１およびファインダ１３５の表示を制御する。

液晶モニタ１３０は、カラー液晶表示部１３１およびタッチパネル１３２を備え、撮像装置１００を使用するユーザに対するインターフェースを提供するものである。

カラー液晶表示部１３１は、表示コントローラ１２２から供給される画像信号に基づいて、その画像信号に応じた画像を表示するものである。例えば、撮像装置１００を用いた撮影時において、モニタリングモードが設定されている場合には、ＤＳＰ１１７から供給される画像データに対応する撮像画像がカラー液晶表示部１３１に順次表示される。このモニタリングモードは、例えば、撮像装置１００が画像記録待機状態である場合に、ＤＳＰ１１７から供給される画像データに対応する撮像画像をリアルタイムで表示させる撮像モードである。また、リムーバブルメディア１２５に記録されている画像データに対応する画像が、カラー液晶表示部１３１に表示される。カラー液晶表示部１３１として、例えば、ＬＣＤ（Liquid Crystal Display）パネルや有機ＥＬ（Electro Luminescence）パネルを用いることができる。

タッチパネル１３２は、カラー液晶表示部１３１の画面を透過するように、カラー液晶表示部１３１に重ねて配置されているタッチパネルである。タッチパネル１３２は、カラー液晶表示部１３１に表示されている操作画面のキー等のユーザによる操作入力を受け付けると、その操作位置に対応する操作信号をＣＰＵ１１９に供給する。

ファインダ１３５は、撮像装置１００を用いた撮影時において、その撮像範囲をユーザが確認するためのファインダであり、表示コントローラ１２２から供給される画像信号に基づいて、その画像信号に応じた画像を表示する。なお、本発明の第１の実施の形態では、撮像装置１００を用いた撮影時（例えば、モニタリングモード設定時）において、カラー液晶表示部１３１およびファインダ１３５には同一の画像を表示させることができるものとする。

ドライブコントローラ１２４は、リムーバブルメディア１２５に対応した所定のインターフェースから構成され、ＣＰＵ１１９の制御に基づいて、ＤＳＰ１１７から供給された画像データをリムーバブルメディア１２５に記録させるものである。また、ドライブコントローラ１２４は、リムーバブルメディア１２５に記録されている画像データを読み出し、ＤＳＰ１１７またはＣＰＵ１１９等に供給する。

リムーバブルメディア１２５は、ＤＳＰ１１７から供給された画像データを記録する記録媒体である。このリムーバブルメディア１２５は、撮像装置１００に内蔵するようにしてもよく、着脱可能に撮像装置１００に装着されるようにしてもよい。リムーバブルメディア１２５として、例えば、テープ（例えば、磁気テープ）、光ディスク（例えば、記録可能なＤＶＤ（Digital Versatile Disc））を用いることができる。また、リムーバブルメディア１２５として、例えば、磁気ディスク（例えば、ハードディスク）、半導体メモリ（例えば、メモリカード）、光磁気ディスク（例えば、ＭＤ（MiniDisc））を用いるようにしてもよい。

記録メディアインターフェース１２６は、記録メディア１２７に対応した所定のインターフェースから構成され、ＣＰＵ１１９の制御に基づいて、ＤＳＰ１１７またはＣＰＵ１１９から供給されたデータを記録メディア１２７に記録させるものである。また、記録メディアインターフェース１２６は、記録メディア１２７に記録されているデータを読み出し、ＤＳＰ１１７またはＣＰＵ１１９等に供給する。

記録メディア１２７は、メモリカード等の記録メディアであり、必要に応じて撮像装置１００に装着される。なお、本発明の第１の実施の形態では、ドライブコントローラ１２４および記録メディアインターフェース１２６を撮像装置１００に設け、リムーバブルメディア１２５および記録メディア１２７を装着可能とする例を示す。ただし、記録メディア１２７に記録されるデータをリムーバブルメディア１２５に記録させ、記録メディアインターフェース１２６を省略するように構成するようにしてもよい。

［撮像装置の外観および使用例］
図２は、本発明の第１の実施の形態における撮像装置１００の外観を示す図である。図３は、本発明の第１の実施の形態における撮像装置１００を用いて撮影を行う場合における撮影者の撮影姿勢の一例を示す図である。図２（ａ）には、撮像装置１００の正面（すなわち、被写体に向けられるレンズ面）側の外観を示し、図２（ｂ）には、撮像装置１００の背面（すなわち、撮影者に向けられる液晶モニタ１３０の面）側の外観を示す。また、図２（ｃ）には、撮像装置１００の正面側の斜視図を示す。また、図３（ａ）には、撮像装置１００を両手で構えた撮影者１５０を撮像装置１００の正面側から示し、図３（ｂ）には、撮像装置１００を両手で構えた撮影者１５０を撮像装置１００の側面側から示す。なお、本発明の第１の実施の形態で示す撮像装置の外観は、説明の容易のため、簡略化して図示する。例えば、撮像装置１００の外側面には、電源スイッチ等の操作部材が備えられているが、これらの図示および説明を省略する。

撮像装置１００は、液晶モニタ１３０と、ファインダ１３５と、シャッターボタン（レリーズボタン）１４１と、レンズ１４２と、リング型操作部材１４３と、ダイヤル型操作部材１４４乃至１４６とを備える。なお、シャッターボタン１４１、リング型操作部材１４３、ダイヤル型操作部材１４４乃至１４６は、図１に示す操作部１２３に対応する。また、レンズ１４２は図１に示す光学ブロック１１１に対応する。なお、液晶モニタ１３０およびファインダ１３５は、図１に示すものと同一であるため、同一の符号を付して説明する。

シャッターボタン１４１は、ＤＳＰ１１７により生成された画像データを静止画ファイルとしてリムーバブルメディア１２５に記録する際に押下されるボタンである。撮像装置１００を用いて撮影者が撮像操作（いわゆる、写真撮影）を行う場合には、液晶モニタ１３０またはファインダ１３５により所望の被写体を確認した後に、撮影者がシャッターボタン１４１を押下する。シャッターボタン１４１が押下されると、シャッターボタン１４１の押下に応じた操作信号がＣＰＵ１１９に供給される。この操作信号が供給されると、ＣＰＵ１１９は、ＤＳＰ１１７により生成された画像データを静止画ファイルとしてリムーバブルメディア１２５に記録させる

レンズ１４２は、外界の光を集光するレンズであり、この入射光がズームレンズおよびフォーカスレンズを介してＣＣＤ１１３に出力される。

リング型操作部材１４３は、レンズ鏡筒外径部に設けられているリング型操作部材である。このリング型操作部材１４３を光軸方向を軸として回転させることにより、その回転に応じた操作信号がＣＰＵ１１９に出力される。リング型操作部材１４３として、例えば、手動によりフォーカス（ピント）合わせを行うためのマニュアルフォーカスリングを用いることができる。例えば、マニュアルフォーカスモードが設定されている場合には、リング型操作部材１４３の回転に応じてフォーカス制御が行われる。一方、オートフォーカスモードが設定されている場合には、フォーカス制御にリング型操作部材１４３が用いられない。そこで、本発明の第１の実施の形態では、オートフォーカスモードが設定されている場合において、基準顔を選択するための操作部材としてリング型操作部材１４３を用いる。なお、リング型操作部材１４３の操作方法については、図７および図８等を参照して詳細に説明する。

ダイヤル型操作部材１４４乃至１４６は、各種の撮影モード等を設定する場合に用いられる操作部材である。例えば、フラッシュの発光を強制的にオン／オフにするモード、セルフタイマを使用するモード、液晶モニタ１３０にメニュー画面を表示するモード等の各種のモードを選択する場合等に、ダイヤル型操作部材１４４乃至１４６が操作される。

液晶モニタ１３０は、撮像装置１００の背面側に設けられ、カラー液晶表示部１３１に各画像を表示し、タッチパネル１３２において操作入力を受け付けるものである。

ファインダ１３５は、撮像装置１００の背面側に設けられ、例えば、モニタリングモードが設定されている場合には、液晶モニタ１３０に表示される画像と同一の画像がモニタリング表示される。

ここで、撮像装置１００を用いて撮影を行う場合について説明する。図３に示すように、撮像装置１００を用いて撮影を行う場合には、撮影者１５０は、右手１５１により撮像装置１００の本体を持ち、左手１５２によりリング型操作部材１４３を握った状態でシャッターチャンスを待つことが多い。この待機状態では、例えば、右手１５１の人差し指がシャッターボタン１４１上に乗せられた状態でシャッターチャンスを待つことになる。このように、撮影の待機状態では、右手１５１を他の操作に用いることができないことが想定される。そこで、本発明の第１の実施の形態では、左手１５２により容易に操作が可能なリング型操作部材１４３を用いて、液晶モニタ１３０およびファインダ１３５に表示される画像に含まれる複数の顔から、所望の顔を選択する例について説明する。

［撮像装置の機能構成例］
図４は、本発明の第１の実施の形態における撮像装置１００の機能構成例を示すブロック図である。撮像装置１００は、撮像部２００と、撮像制御部２０１と、顔検出部２１０と、顔識別部２２０と、特定人物情報記憶部２３０と、選択操作内容決定部２４０と、選択操作支援画像保持部２５０と、表示制御部２６０と、表示部２６１とを備える。また、撮像装置１００は、記録制御部２７０と、記録部２７１と、基準対象物選択部２８０と、姿勢検出部２９０と、選択操作受付部３００と、操作受付部３１０とを備える。ここで、本発明の各実施の形態では、「画像」と記載した場合には、画像そのものと、その画像を表示するための画像データとの両方の意味を含むものとする。

撮像部２００は、被写体を撮像して画像（撮像画像）を生成するものであり、生成された撮像画像を撮像制御部２０１、顔検出部２１０、顔識別部２２０、選択操作内容決定部２４０、表示制御部２６０および記録制御部２７０に出力する。なお、画像生成の際に用いられるカメラパラメータ（撮像パラメータ）が、撮像制御部２０１により順次決定される。なお、撮像部２００は、例えば、図１に示す光学ブロック１１１、レンズアイリスドライバ１１２、ＣＣＤ１１３、タイミング生成回路１１４、ＣＣＤドライバ１１５および前処理回路１１６に対応する。

撮像制御部２０１は、撮像部２００により生成される撮像画像に関するカメラパラメータを決定するものであり、決定されたカメラパラメータを用いて、撮像部２００に対する撮像制御を行う。具体的には、撮像制御部２０１は、撮像部２００により生成された撮像画像を評価し、シャッター速度、露出、ホワイトバランス等のカメラパラメータを決定する。また、撮像制御部２０１は、撮像部２００により生成された撮像画像から顔が検出された場合には、検出された顔および現在の撮像画像の評価に基づいて、カメラパラメータを決定する。また、撮像制御部２０１は、撮像部２００により生成された撮像画像から複数の顔が検出された場合には、例えば、基準顔として選択された顔および現在の撮像画像の評価に基づいてカメラパラメータを決定する。例えば、基準顔が選択された場合には、その基準顔の撮像画像における位置および大きさが選択操作支援画像保持部２５０から取得され、これらの位置および大きさに基づいて、基準顔に合焦させて適切な露出を設定するためのカメラパラメータが決定される。なお、撮像制御部２０１は、例えば、図１に示すＤＳＰ１１７およびＣＰＵ１１９に対応する。

顔検出部２１０は、撮像部２００から出力された撮像画像について顔検出処理を行うものであり、検出された顔に関する顔情報を顔識別部２２０および選択操作内容決定部２４０に出力する。この顔検出方法として、例えば、顔の輝度分布情報が記録されているテンプレートと実画像とのマッチングによる顔検出方法（例えば、特開２００４−１３３６３７参照。）、撮像画像に含まれる肌色の部分や人間の顔の特徴量に基づいた顔検出方法を用いることができる。また、顔を含む画像である顔画像について、この顔画像上の２画素間の輝度差を学習し、この学習により得られた特徴量を顔検出基準データとして予め保持しておく。そして、この顔検出基準データを用いて、撮像部２００から出力された撮像画像における一定範囲の対象画像について顔検出を順次行う顔検出方法を用いることができる。また、顔情報には、検出された顔の撮像画像における位置およびサイズが含まれる。ここで、顔情報に含まれる顔の位置は、例えば、検出された顔の周囲を囲む矩形の顔検出ウィンドウの位置（例えば、顔検出ウィンドウの中心の位置）とすることができる。また、顔情報に含まれる顔のサイズは、例えば、その顔検出ウィンドウのサイズ（例えば、顔検出ウィンドウの水平方向および垂直方向の各画素数）とすることができる。なお、顔検出部２１０は、例えば、図１に示すＤＳＰ１１７に対応する。また、顔検出部２１０は、特許請求の範囲に記載の対象物検出部の一例である。

顔識別部２２０は、顔検出部２１０により検出された顔が、特定人物情報記憶部２３０に特定人物情報が記憶されている特定人物の顔（登録顔）であるか否かを識別するものであり、識別結果を顔識別情報として選択操作内容決定部２４０に出力する。具体的には、顔識別部２２０は、顔検出部２１０により検出された顔を含む顔画像について、その顔に含まれる両目に基づいて正規化を行い、この正規化された顔画像（正規化顔画像）における特徴量を抽出する。なお、両目の検出方法として、例えば、顔検出方法と同様に、目の輝度分布情報が記録されているテンプレートと実画像とのマッチングによる目検出方法等を用いることができる。続いて、顔識別部２２０は、抽出された特徴量と、特定人物情報記憶部２３０に記憶されている特徴量２３３（図５に示す）とを照合することにより、顔検出部２１０により検出された顔が登録顔であるか否かを識別する。そして、識別結果として、例えば、識別された登録顔に対応する特定人物識別番号２３１（図５に示す）が、処理対象となった顔に関する顔情報とともに、選択操作内容決定部２４０に出力される。ここで、顔識別方法として、例えば、特徴量の類似度に基づいて顔識別を行う顔識別方法を用いることができる。すなわち、特定人物情報記憶部２３０に記憶されている特徴量２３３と、正規化顔画像から抽出された特徴量とが比較されることにより、これらの特徴量の類似度が算出される。そして、この算出された類似度が閾値を超えた場合に、その正規化顔画像に含まれる顔が登録顔であると判定される。また、顔識別方法として、例えば、比較対象となる登録顔画像および正規化顔画像のそれぞれの画像上の２点間の特徴量の差分値を用いた弱判別器による識別処理を行う識別方法を用いることができる。また、例えば、特徴量として特徴ベクトルを用いて識別処理を行う識別方法を用いることができる（例えば、特開２００８−１２９８３０号参照。）。なお、顔識別部２２０は、例えば、図１に示すＤＳＰ１１７に対応する。また、顔識別部２２０は、特許請求の範囲に記載の識別部の一例である。

特定人物情報記憶部２３０は、特定人物に関する特定人物情報を人物毎に記憶するものであり、記憶されている特定人物情報を顔識別部２２０および表示制御部２６０に供給する。なお、特定人物情報記憶部２３０の内容については、図５を参照して詳細に説明する。また、特定人物情報記憶部２３０は、例えば、図１に示すフラッシュＲＯＭ１２１に対応する。また、特定人物情報記憶部２３０は、特許請求の範囲に記載の特定対象物画像記憶部の一例である。

選択操作内容決定部２４０は、顔検出部２１０により検出された複数の顔から所望の顔を基準顔として選択するための選択操作内容（選択操作方法）を決定するものである。そして、この決定された選択操作内容に基づいて選択操作支援画像保持部２５０の保持内容を順次更新する。具体的には、選択操作内容決定部２４０は、顔検出部２１０により複数の顔が検出された場合には、これらの複数の顔から基準顔を選択する。例えば、顔検出部２１０から出力された顔情報と、顔識別部２２０から出力された顔識別情報とに基づいて、基準顔が選択される。また、既に基準顔が選択されている場合には、選択操作支援画像保持部２５０の保持内容に基づいて、基準顔を特定する。そして、選択操作内容決定部２４０は、顔検出部２１０により検出された複数の顔の中から操作支援画像を付す対象となる顔を選択し、これらの顔を基準顔として選択するための選択操作内容を顔毎に決定する。また、選択操作内容決定部２４０は、基準対象物選択部２８０から選択情報が出力された場合には、この選択情報に対応する顔を基準顔として決定し、他の顔に関する選択操作内容を決定する。また、選択操作内容決定部２４０は、撮像部２００から出力された撮像画像に基づいて、選択操作支援画像保持部２５０に顔情報が保持されている顔について追尾処理を行う。なお、選択操作内容決定部２４０は、例えば、図１に示すＣＰＵ１１９に対応する。

選択操作支援画像保持部２５０は、選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像およびこれに関連付けられた顔情報等を保持するものであり、保持されている情報を各部に供給する。例えば、選択操作支援画像保持部２５０の保持内容に基づいて、撮像画像への操作支援画像の重畳が表示制御部２６０により行われる。また、例えば、選択操作支援画像保持部２５０の保持内容に基づいて、カメラパラメータの決定処理が撮像制御部２０１により行われる。また、選択操作支援画像保持部２５０の保持内容は、選択操作内容決定部２４０により順次更新される。なお、選択操作支援画像保持部２５０の保持内容については、図６を参照して詳細に説明する。また、選択操作支援画像保持部２５０は、例えば、図１に示すフラッシュＲＯＭ１２１に対応する。

表示制御部２６０は、撮像部２００から出力された画像に、選択操作支援画像保持部２５０に保持されている保持内容に応じた選択操作支援画像を重畳し、この選択操作支援画像が重畳された画像を表示部２６１に表示させるものである。この選択操作支援画像の撮像画像への重畳の要否については、ユーザ操作により変更することができる。また、表示制御部２６０は、ユーザ操作に基づいて、特定人物情報記憶部２３０に記憶されている特定人物情報に含まれる特定人物の顔を表示させる。また、表示制御部２６０は、姿勢検出部２９０により検出された姿勢に関する姿勢情報に基づいて、撮像画像に重畳される選択操作支援画像の表示形態を変更する。なお、表示制御部２６０は、例えば、図１に示す表示コントローラ１２２に対応する。

表示部２６１は、表示制御部２６０により選択操作支援画像が重畳された画像を表示するものである。また、選択操作支援画像が重畳されていない場合には、撮像部２００により生成された画像のみが表示される。表示部２６１は、例えば、図１に示すカラー液晶表示部１３１およびファインダ１３５に対応する。

記録制御部２７０は、操作受付部３１０により受け付けられた操作内容に応じて、撮像部２００から出力された撮像画像を記録部２７１に記録させるものである。記録制御部２７０は、例えば、図１に示すドライブコントローラ１２４に対応する。

記録部２７１は、記録制御部２７０の制御に基づいて、撮像部２００から出力された撮像画像を記録するものである。記録部２７１は、例えば、図１に示すリムーバブルメディア１２５に対応する。

基準対象物選択部２８０は、選択操作受付部３００により受け付けられた操作入力に応じて、選択操作支援画像保持部２５０に顔情報が保持されている複数の対象物のうちから、基準対象物を選択するものである。そして、基準対象物選択部２８０は、選択された基準対象物に関する選択情報（例えば、図６に示す選択操作支援画像識別番号２５１）を選択操作内容決定部２４０に出力する。なお、基準対象物選択部２８０は、例えば、図１に示すＣＰＵ１１９に対応する。

姿勢検出部２９０は、撮像装置１００の加速度、動き、傾き等を検出することにより撮像装置１００の姿勢を検出するものであり、検出された姿勢に関する姿勢情報を選択操作内容決定部２４０に出力する。姿勢検出部２９０は、例えば、ジャイロセンサにより実現することができる。

選択操作受付部３００は、表示部２６１に表示されている選択操作支援画像に応じて行われた操作内容を受け付けるものであり、受け付けられた操作内容を基準対象物選択部２８０に出力する。選択操作受付部３００は、例えば、図２に示すリング型操作部材１４３に対応する。また、選択操作受付部３００は、特許請求の範囲に記載の操作受付部の一例である。

操作受付部３１０は、ユーザにより行われた操作内容を受け付けるものであり、受け付けられた操作内容を選択操作内容決定部２４０、表示制御部２６０および記録制御部２７０に出力する。操作受付部３１０は、例えば、図１に示す操作部１２３およびタッチパネル１３２に対応する。

ここで、顔検出部２１０、顔識別部２２０、表示制御部２６０および記録制御部２７０については、ソフトウェア（コンピュータプログラム）を実行するＣＰＵ１１９により実現するようにしてもよい。すなわち、これらについては、ハードウェアとして構成するようにしてもよく、ソフトウェアとして構成するようにしてもよい。また、ソフトウェアおよびハードウェアの組み合わせとしても構成するようにしてもよい。

図５は、本発明の第１の実施の形態における特定人物情報記憶部２３０に記憶されている各情報を模式的に示す図である。特定人物情報記憶部２３０には、ユーザにより予め登録されている人物（特定人物）に関する特定人物情報が記憶されている。具体的には、特定人物情報記憶部２３０には、特定人物識別番号２３１と、登録名称２３２と、特徴量２３３と、登録顔画像２３４とが関連付けて記憶されている。

特定人物識別番号２３１は、特定人物情報記憶部２３０に特定人物情報が記憶されている各特定人物を管理するための識別情報であり、例えば、登録された順番に「＃１」、「＃２」に関連付けられて特定人物情報が記憶される。

登録名称２３２には、特定人物情報記憶部２３０に特定人物情報が記憶されている各特定人物に関する名称（氏名や通称等）が記憶される。例えば、特定人物情報記憶部２３０に特徴量および登録顔画像を登録する際に特定人物の名称がユーザにより入力され、この入力された名称が登録名称２３２として記憶される。図５では、登録名称２３２として、各特定人物の名字が記憶されている場合を示す。

特徴量２３３には、特定人物情報記憶部２３０に特定人物情報が記憶されている各特定人物に関する特徴量が記憶される。この特徴量は、画像から検出された顔が特定人物の顔に該当するか否かを識別するために用いられる判定情報であり、例えば、顔を構成する目や鼻、口、眉等の各部の位置関係や形状を認識するための顔画像の特徴や特性を示すデータを用いることができる。この特徴量として、例えば、特定人物の顔を含む顔画像から、色や輝度等の値に基づいて抽出されるデータを用いることができる。なお、図５では、特徴量２３３の内容を省略して示す。

登録顔画像２３４には、特定人物情報記憶部２３０に特定人物情報が記憶されている各特定人物に関する顔画像の画像データ（圧縮または非圧縮）が記憶される。なお、図５では、登録顔画像２３４に記憶されている顔画像の画像データを図形化して示す。登録顔画像２３４に記憶されている顔画像は、例えば、図２５（ａ）乃至図２８（ａ）に示すように、撮像画像と同時に選択操作補助画像として表示部２６１に表示させることができる。また、登録顔画像２３４に記憶されている顔画像は、例えば、ユーザからの指示操作により表示部２６１に表示させることができる。これにより、登録されている特定人物の顔をユーザが随時確認することができる。

なお、図５では、特定人物として５人の人物に関する特定人物情報が特定人物情報記憶部２３０に記憶されている場合を例にして示す。例えば、特定人物識別番号２３１「＃１」には「田中」氏に関する特定人物情報が記憶され、特定人物識別番号２３１「＃２」には「山田」氏に関する特定人物情報が記憶されているものとする。また、特定人物識別番号２３１「＃３」には「佐藤」氏に関する特定人物情報が記憶され、特定人物識別番号２３１「＃４」には「志村」氏に関する特定人物情報が記憶されているものとする。また、特定人物識別番号２３１「＃５」には「鈴木」氏に関する特定人物情報が記憶されているものとする。

図６は、本発明の第１の実施の形態における選択操作支援画像保持部２５０に保持されている内容を概略的に示す図である。選択操作支援画像保持部２５０には、選択操作支援画像識別番号２５１と、選択操作支援画像２５２と、顔情報２５３と、特定人物番号２５４とが保持されている。なお、図６に示す例では、画像に含まれる複数の人物のうち、５人の顔に選択操作支援画像を付して表示する場合における選択操作支援画像保持部２５０について説明する。

選択操作支援画像識別番号２５１は、選択操作支援画像を管理するための識別情報であり、例えば、選択操作支援画像が種類毎に「＃１１」乃至「＃１５」に関連付けられて記憶される。

選択操作支援画像２５２には、画像に含まれる複数の顔から所望の顔を選択するための選択操作内容を示す選択操作支援画像２５５乃至２５９のテンプレート画像が記憶される。図６に示す例では、画像に含まれる複数の顔に、５種類のリング型の選択操作支援画像２５５乃至２５９を付す場合を例にして示す。例えば、選択操作支援画像識別番号２５１「＃１１」には、ユーザ操作や予め設定されている条件等に基づいて決定された基準顔に付される選択操作支援画像２５５が記憶されている。また、選択操作支援画像識別番号２５１「＃１２」乃至「＃１５」には、基準顔以外の顔に付される選択操作支援画像２５６乃至２５９が記憶されている。これらの選択操作支援画像２５５乃至２５９が、撮像画像に含まれる各顔を囲むように付され、撮像画像に重ねて合成される。また、選択操作支援画像２５５乃至２５９は、検出された各顔の撮像画像におけるサイズに応じて拡大または縮小され、検出された顔を囲むように、拡大または縮小後の選択操作支援画像が撮像画像に重畳される。このように選択操作支援画像２５５乃至２５９を表示することにより、撮像画像に含まれる複数の顔から所望の顔を選択するための選択操作内容を、その顔の位置に関連付けてユーザに提供することができる。なお、選択操作支援画像については、図７および図８を参照して詳細に説明する。また、選択操作支援画像の配置およびその重畳については、図９乃至図３２等を参照して詳細に説明する。

顔情報２５３には、顔検出部２１０により検出された顔に関する顔情報が記憶される。ここで、顔情報として、例えば、顔検出部２１０により検出され顔の撮像画像における位置（Ｘ，Ｙ）およびサイズ（Ｈ，Ｗ）が顔情報２５３に記憶される。具体的には、選択操作支援画像識別番号２５１「＃１１」には、ユーザ操作または予め設定されている条件に基づいて決定された基準顔に関する顔情報が記憶される。また、選択操作支援画像識別番号２５１「＃１２」乃至「＃１５」には、選択操作内容決定部２４０により選択操作内容が決定された基準顔以外の顔に関する顔情報が記憶される。この顔情報２５３に記憶された顔情報に対応する顔に、その顔情報に関連付けて選択操作支援画像２５２に記憶されている選択操作支援画像が付される。なお、撮像画像から検出された顔が５人未満の場合には、その検出された顔の数だけ顔情報２５３に顔情報が記憶される。また、撮像画像から検出された顔が６人以上の場合には、例えば、予め設定された優先順位に従って顔情報が顔情報２５３に記憶される。例えば、特定人物の顔（登録顔）が検出された場合には、その登録顔に関する顔情報を優先して顔情報２５３に記憶する。また、例えば、６人以上の登録顔が検出された場合には、予め設定されている登録顔の優先順位に従ってその登録顔に関する顔情報を顔情報２５３に記憶する。また、６人以上の顔が検出されたが、そのうち登録顔が５人未満である場合には、例えば、顔検出部２１０による顔検出処理の際に算出される評価値が高い顔を優先して顔情報を顔情報２５３に記憶する。

特定人物番号２５４には、顔検出部２１０により検出された顔のうち、顔識別部２２０により登録顔であると識別された顔について、その特定人物の特定人物識別番号２３１（図５に示す）が記憶される。なお、顔識別部２２０により登録顔であるとは識別されていない顔については、特定人物識別番号２３１は記憶されない。

なお、選択操作支援画像保持部２５０の保持内容は、例えば、選択操作内容決定部２４０によりフレーム毎に順次更新される。例えば、選択操作支援画像保持部２５０に保持された顔に関する顔情報は、選択操作内容決定部２４０による追尾処理により追尾されて更新される。

［リング型操作部材の操作例］
図７は、本発明の第１の実施の形態における撮像装置１００の外観と、リング型操作部材１４３の操作領域とを示す図である。図７（ａ）には、撮像装置１００の背面側の外観を示す。図７（ａ）に示す撮像装置１００は、図２（ｂ）に示す撮像装置１００に、正面側に設けられているリング型操作部材１４３を破線で示したものである。例えば、図３に示すように、撮影時には、撮影者１５０の顔は撮像装置１００の背面側と向き合うことになる。そこで、図７では、撮影時における撮影者からの視線を考慮して、撮像装置１００の背面側から見た場合におけるリング型操作部材１４３の選択操作内容を例にして説明する。また、図７では、説明の容易のため、リング型操作部材１４３の１２時の位置（撮像装置１００の垂直方向における上端部の位置）を基準位置１７０として説明する。また、図７において、矢印１６１および１６２は、リング型操作部材１４３の操作方向を示す矢印である。例えば、図３に示すように、撮影者１５０がリング型操作部材１４３を左手１５２で握っている状態で、リング型操作部材１４３を矢印１６１または１６２の方向に回転させることができる。

図７（ｂ）には、リング型操作部材１４３の操作領域を円状に模式的に示す。図７（ｂ）に示す円状のリング型操作部材１４３の操作領域は、例えば、図７（ａ）に示す基準位置１７０の移動経路に対応する。ここで、本発明の第１の実施の形態では、図６に示すように、５種類の選択操作支援画像２５５乃至２５９を表示させる。そこで、選択操作支援画像２５５乃至２５９により表される操作方向および操作範囲に対応するように、リング型操作部材１４３の操作領域が設定される。リング型操作部材１４３の操作領域として、例えば、不感領域１７１および１７２と、操作領域１７３乃至１７５とが設定される。ここで、不感領域１７１および１７２と、操作領域１７３乃至１７５とは、リング型操作部材１４３の基準位置１７０の移動経路に対応する領域である。また、不感領域１７１に対応する角度を角度θ１とし、不感領域１７２に対応する角度を角度θ２とし、操作領域１７３に対応する角度を角度θ３とし、操作領域１７４に対応する角度を角度θ４とする。なお、図７（ｂ）では、リング型操作部材１４３の基準位置１７０の移動経路において、操作領域１７３および１７４に対応する部分を太線で示す。また、リング型操作部材１４３の基準位置１７０の移動経路において、操作領域１７５に対応する部分の外側を太線で示す。なお、リング型操作部材１４３の操作範囲と、図６に示す選択操作支援画像２５５乃至２５９との関係を図８に示す。

図８は、本発明の第１の実施の形態におけるリング型操作部材１４３の操作範囲と、選択操作支援画像保持部２５０に保持されている選択操作支援画像２５５乃至２５９との関係を示す図である。なお、図８では、リング型操作部材１４３の基準位置１７０の移動経路を示す円上において、リング型操作部材１４３の操作範囲１８１乃至１８５を太線で示す。また、リング型操作部材１４３の操作範囲と、選択操作支援画像２５５乃至２５９との関係については、図７を参照して詳細に説明する。

図７（ｂ）に示す不感領域１７１および１７２は、これらに対応する角度θ１およびθ２の回転が検出されても撮像者による操作とみなさずに操作を受け付けない領域である。なお、不感領域１７１および１７２は、図８（ａ）に示す操作範囲１８１に対応する。ここで、図８（ａ）に示す選択操作支援画像２５５は、撮像画像に含まれる複数の顔のうち、基準顔として選択されている顔に付される選択操作支援画像である。この選択操作支援画像２５５を構成する実線の楕円には、１２時の位置に、実線の線幅よりも直径の大きな黒丸を付す。この黒丸は、例えば、リング型操作部材１４３の基準位置１７０を模式的に示すものである。

ここで、不感領域１７１および１７２に対応する角度θ１およびθ２として、例えば、１、２度程度の比較的小さい値を設定することができる。ただし、リング型操作部材の回転トルクやリング径等の操作部材自体の機能や、撮影者の操作能力によって適切な範囲が変わるため、それぞれに応じた適切な不感領域の範囲を設定することが望ましい。また、不感領域の範囲を撮影者の手動操作により設定するようにしてもよい。例えば、リング型操作部材の回転トルクが軽い場合には、撮像者が意図していなくても若干の回転が発生することが想定される。このため、不感領域の範囲を比較的大きく設定することが好ましい。また、リング型操作部材のリング径が比較的小さい場合には、撮影者の指の動きだけでもリングが動くことが想定される。このため、不感領域の範囲を比較的大きく設定することが好ましい。一方、リング型操作部材のリング径が比較的大きい場合には、撮影者の手首を使わないと回転が発生しないことも想定される。そこで、このような場合には、不感領域の範囲を比較的小さく設定することが好ましい。

操作領域１７３は、図８（ｂ）に示す選択操作支援画像２５６に対応する操作を実行するための操作範囲１８２に対応する領域である。例えば、選択操作支援画像２５６が付されている顔を基準顔として選択するための選択操作を撮影者が行う場合には、基準位置１７０が操作範囲１８２の範囲内となるようにリング型操作部材１４３を矢印１６１方向に回転させて停止させる。ここで、図８（ｂ）に示す選択操作支援画像２５６は、撮像画像に含まれる複数の顔のうち、基準顔以外の顔に付される選択操作支援画像である。この選択操作支援画像２５６を構成する楕円には、選択操作支援画像２５５と同様に、１２時の位置に、リング型操作部材１４３の基準位置１７０を模式的に示す黒丸を付す。また、選択操作支援画像２５６を構成する楕円には、その黒丸を基点として、ＣＣＷ（Counter ClockWise：反時計回り）方向に略１０時の位置に向かって伸びる実線の矢印を付す。この矢印は、例えば、選択操作支援画像２５５の楕円と同じ太さとする。また、選択操作支援画像２５６を構成する楕円上における矢印部分以外の他の部分は、矢印よりも細い点線で構成する。このように、選択操作支援画像２５６を構成する楕円に付された矢印により、選択操作支援画像２５６が付された顔を選択するために必要なリング型操作部材１４３の操作方向と操作範囲を表すことができる。

具体的には、撮影者が選択操作支援画像２５６に対応する操作を実行する場合には、図７（ｂ）に示すように、リング型操作部材１４３を矢印１６１方向にθ（θ１＋θ３≧θ＞θ１）度回転させて停止させる。この回転操作がユーザにより行われると、その操作方向および操作量が選択操作受付部３００から基準対象物選択部２８０に出力される。そして、基準対象物選択部２８０は、その操作方向および操作量に基づいて、選択操作支援画像保持部２５０に顔情報が保持されている顔から、基準顔として選択すべき顔を選択する。すなわち、選択操作支援画像２５６が付された顔が基準顔として選択される。そして、新たに選択された基準顔に関する選択情報（例えば、その選択された顔情報に関連付けられている選択操作支援画像識別番号）が選択操作内容決定部２４０に出力され、選択操作内容決定部２４０はその基準顔に基づいて他の顔の選択操作内容を決定する。そして、選択操作内容決定部２４０は、決定された新たな基準顔および他の顔の選択操作内容に基づいて、選択操作支援画像保持部２５０の内容を更新する。

ここで、基準対象物選択部２８０により行われるリング型操作部材１４３の回転操作の停止判断について説明する。例えば、撮像部２００により生成される撮像画像が、１フレーム＝３０ｆｐｓ（frame per second）とする。この場合において、リング型操作部材１４３が矢印１６１方向に回転操作された後に、１ｆｐｓ当たりの回転検出量（操作量）が１度以内となった場合に、撮像者による回転操作が停止したと判断することができる。また、例えば、リング型操作部材１４３が矢印１６１方向に回転操作された後に、その逆方向（すなわち、矢印１６２方向）の回転が検出された場合に、撮像者による回転操作が停止したと判断することができる。このように、リング型操作部材１４３の回転操作の停止を判断することにより、撮像者による回転操作の直後に基準顔を迅速に選択させることができる。

操作領域１７４は、図８（ｄ）に示す選択操作支援画像２５８に対応する操作を実行するための操作範囲１８４に対応する領域である。例えば、選択操作支援画像２５８が付されている顔を基準顔として選択するための選択操作を撮影者が行う場合には、基準位置１７０が操作範囲１８４の範囲内となるようにリング型操作部材１４３を矢印１６２方向に回転させて停止させる。ここで、図８（ｄ）に示す選択操作支援画像２５８は、撮像画像に含まれる複数の顔のうち、基準顔以外の顔に付される選択操作支援画像である。この選択操作支援画像２５８を構成する楕円には、選択操作支援画像２５５と同様に、１２時の位置に、リング型操作部材１４３の基準位置１７０を模式的に示す黒丸を付す。また、選択操作支援画像２５８を構成する楕円には、その黒丸を基点として、ＣＷ（ClockWise：時計回り）方向に略２時の位置に向かって伸びる実線の矢印を付す。この矢印は、例えば、選択操作支援画像２５５の楕円と同じ太さとする。また、選択操作支援画像２５８を構成する楕円上における矢印部分以外の他の部分は、矢印よりも細い点線で構成する。このように、選択操作支援画像２５８を構成する楕円に付された矢印により、選択操作支援画像２５８が付された顔を選択するために必要なリング型操作部材１４３の操作方向と操作範囲を表すことができる。具体的には、撮影者が選択操作支援画像２５８に対応する操作を実行する場合には、図７（ｂ）に示すように、リング型操作部材１４３を矢印１６２方向にθ（θ２＋θ４≧θ＞θ２）度回転させて停止させる。この回転操作がユーザにより行われると、その操作方向および操作量が選択操作受付部３００から基準対象物選択部２８０に出力される。そして、基準対象物選択部２８０による基準顔選択処理および選択操作内容決定部２４０による選択操作内容決定処理が行われる。なお、リング型操作部材１４３の回転操作の停止判断については、操作領域１７３と同様であるため、ここでの説明を省略する。

また、図８（ｃ）に示すように、撮影者が選択操作支援画像２５７に対応する操作を実行する場合には、基準位置１７０が操作範囲１８３の範囲内となるようにリング型操作部材１４３を矢印１６１方向に回転させる。ここで、図８（ｃ）に示す選択操作支援画像２５７は、撮像画像に含まれる複数の顔のうち、基準顔以外の顔に付される選択操作支援画像である。この選択操作支援画像２５７を構成する楕円には、選択操作支援画像２５５と同様に、１２時の位置に、リング型操作部材１４３の基準位置１７０を模式的に示す黒丸を付す。また、選択操作支援画像２５７を構成する楕円において、図８（ｂ）に示す選択操作支援画像２５６における矢印のＣＣＷ方向の終端の位置を基点として、ＣＣＷ方向に略８時の位置に向かって伸びる実線の矢印を付す。この矢印は、例えば、選択操作支援画像２５５の楕円と同じ太さとする。また、選択操作支援画像２５７を構成する楕円上における矢印部分以外の他の部分は、矢印よりも細い点線で構成する。このように、選択操作支援画像２５７を構成する楕円に付された矢印により、選択操作支援画像２５７が付された顔を選択するために必要なリング型操作部材１４３の操作方向と操作範囲を表すことができる。具体的には、撮影者が選択操作支援画像２５７に対応する操作を実行する場合には、図７（ｂ）に示すように、リング型操作部材１４３を矢印１６１方向にθ（θ＞θ１＋θ３）度回転させる。この回転操作がユーザにより行われると、その操作方向および操作量が選択操作受付部３００から基準対象物選択部２８０に出力される。そして、基準対象物選択部２８０による基準顔選択処理および選択操作内容決定部２４０による選択操作内容決定処理が行われる。

ここで、基準対象物選択部２８０により行われるリング型操作部材１４３の回転操作の判断について説明する。撮影者が選択操作支援画像２５７に対応する操作を実行する場合には、例えば、リング型操作部材１４３の回転操作の停止を判断せずに、基準位置１７０が図７（ｂ）に示す操作領域１７３の範囲外となったことを条件に、その回転操作の操作量を判断する。すなわち、撮像者による回転操作の操作量が、矢印１６１方向にθ（θ＞θ１＋θ３）度を超えたと判断された場合に、回転操作の停止を判断することなく、基準顔を選択させることができる。例えば、矢印１６１方向に回転された状態で、図８（ｃ）に示す操作範囲１８３の範囲外となった場合でも、選択操作支援画像２５７に対応する操作であると判断するようにしてもよい。これにより、撮像者の回転操作に対して、遅延無く迅速な応答が可能である。

ここで、撮像者による回転操作の操作量が、矢印１６１方向にθ（θ＞θ１＋θ３）度を超えたことを判断する判断方法について説明する。例えば、撮影者による回転操作状態が、次の（１）および（２）の何れの条件も満たした状態を維持しつつ、その操作量が矢印１６１方向にθ（θ＞θ１＋θ３）度を超えたことを判断条件とすることができる。
（１）逆方向（すなわち、矢印１６２方向）の回転が検出されないこと。
（２）撮像部２００により生成される撮像画像が、１フレーム＝３０ｆｐｓとする場合に、１ｆｐｓあたりに検出された回転量（操作量）が１度よりも小さくならないこと。

なお、回転操作状態は、単位時間当たりの回転検出量が、例えば、１度／ｆｐｓ以上の状態で、回転検出量が角度θ１よりも大きくなった状態とすることができる。また、この回転操作状態と判断された場合に、単位時間当たりの回転検出量が、例えば、１度／ｆｐｓ以上となった時点からの回転量を操作量とみなすようにしてもよい。

また、図８（ｅ）に示すように、撮影者が選択操作支援画像２５９に対応する操作を実行する場合には、基準位置１７０が操作範囲１８５の範囲内となるようにリング型操作部材１４３を矢印１６２方向に回転させる。ここで、図８（ｅ）に示す選択操作支援画像２５９は、撮像画像に含まれる複数の顔のうち、基準顔以外の顔に付される選択操作支援画像である。この選択操作支援画像２５９を構成する楕円には、選択操作支援画像２５５と同様に、１２時の位置に、リング型操作部材１４３の基準位置１７０を模式的に示す黒丸を付す。また、選択操作支援画像２５９を構成する楕円において、図８（ｄ）に示す選択操作支援画像２５８における矢印のＣＷ方向の終端の位置を基点として、ＣＷ方向に略４時の位置に向かって伸びる実線の矢印を付す。この矢印は、例えば、選択操作支援画像２５５の楕円と同じ太さとする。また、選択操作支援画像２５９を構成する楕円上における矢印部分以外の他の部分は、矢印よりも細い点線で構成する。このように、選択操作支援画像２５９を構成する楕円に付された矢印により、選択操作支援画像２５９が付された顔を選択するために必要なリング型操作部材１４３の操作方向と操作範囲を表すことができる。具体的には、撮影者が選択操作支援画像２５９に対応する操作を実行する場合には、図７（ｂ）に示すように、リング型操作部材１４３を矢印１６２方向にθ（θ＞θ２＋θ４）度回転させる。この回転操作がユーザにより行われると、その操作方向および操作量が選択操作受付部３００から基準対象物選択部２８０に出力される。そして、基準対象物選択部２８０による基準顔選択処理および選択操作内容決定部２４０による選択操作内容決定処理が行われる。

なお、これらの回転操作の判断は一例であり、例えば、単位時間あたりの回転検出量の閾値は、リング型操作部材の設定トルクや回転検出分解能によって適切な数値が変わる可能性がある。このため、回転操作の判断に用いられる閾値として、撮像装置に応じて適切な値を設定することが好ましい。また、逆方向の回転が検出された場合に、回転停止と判断する設定についても、リング型操作部材の設定トルクや回転検出分解能によって適切に判断することができる場合と、適切に判断することができない場合とが想定される。このため、撮像装置に応じて適切に設定することが好ましい。

ここで、図７（ｂ）に示す操作領域１７３および１７４を特定するための角度（θ１＋θ３、θ２＋θ４）について説明する。例えば、操作領域１７３および１７５の境界となる角度（θ１＋θ３）と、操作領域１７４および１７５の境界となる角度（θ２＋θ４）については、撮像者の各操作の使い分けを実施し易くするため、例えば、１５度程度とすることができる。ただし、リング型操作部材の回転トルクやリング径等の操作部材自体の機能や、撮影者の操作能力によって適切な角度が変わるため、それぞれに応じた適切な角度を設定することが望ましい。また、これらの角度を撮影者の手動操作により設定するようにしてもよい。また、本発明の第１の実施の形態では、角度θ１およびθ２を同一とし、角度θ３およびθ４を同一とする例について説明する。しかしながら、角度θ１およびθ２を異なる値とするようにしてもよく、また、角度θ３およびθ４についても異なる値とするようにしてもよい。

［選択操作支援画像の表示制御例］
以下では、選択操作支援画像２５５乃至２５９を、撮像画像に含まれる複数の顔に付す場合について図面を参照して詳細に説明する。

図９は、本発明の第１の実施の形態における表示部２６１に表示される撮像画像の一例を示す図である。図９（ａ）には、サッカーの試合を撮像している場合における撮像画像４００を示す。この撮像画像４００は、撮像部２００により生成された撮像画像であり、サッカー選手４０１乃至４０５が含まれるものとする。この例では、説明の容易のため、サッカー選手４０１乃至４０５が撮像装置１００に対して正面向きまたは側面向きであるものとして説明する。

図９（ｂ）には、撮像画像４００において、サッカー選手４０１乃至４０５の各顔が顔検出部２１０により検出された場合を模式的に示す。図９（ｂ）では、撮像画像４００において検出された各顔の大きさを破線の矩形４１１乃至４１５で示す。例えば、撮像画像において、１人の顔が検出された場合には、その顔に最適なカメラパラメータを決定することができる。また、撮像画像から複数の顔が検出された場合には、例えば、１人の顔を基準顔として選択し、この基準顔に最適なカメラパラメータを決定することができる。この場合に、例えば、水平方向において最も真中に近い顔を基準顔として決定することができる。また、例えば、撮像画像全体において、最も中心位置に近い顔を基準顔として決定するようにしてよく、撮像画像において最も大きい顔を基準顔として決定するようにしてよい。また、カメラ制御処理において測定される各顔までの被写体距離を用いて、最も撮像装置１００に近い顔を基準顔として決定するようにしてもよい。また、例えば、特定人物情報記憶部２３０に記憶されている特定人物情報に、予め優先度を設定しておき、この優先度が最も高い顔を基準顔として決定するようにしてよい。このように、撮像画像から複数の顔が検出された場合には、例えば、撮像画像における各顔の位置等に基づいて基準顔を設定することができる。しかしながら、例えば、サッカーの試合を撮像している状態で、撮像画像における各顔の位置とは無関係に、撮像範囲に含まれる所望のサッカー選手を最も綺麗に撮像したいと考える場合も想定される。また、例えば、撮像画像の中心位置に存在するサッカー選手の顔を基準顔としている状態で、その選手がボールをパスしたような場合には、そのパスが出された選手に基準顔を迅速に移動させたい場合も想定される。そこで、本発明の第１の実施の形態では、基準顔以外の顔を迅速に選択することができるように、基準顔以外の顔には、基準顔として選択するための選択操作内容を視覚的に表す選択操作支援画像２５６乃至２５９を付す。また、基準顔にはその旨を表す選択操作支援画像２５５を付す。この選択操作支援画像の配置方法については、図１０を参照して詳細に説明する。

図１０は、本発明の第１の実施の形態における選択操作内容決定部２４０により決定される選択操作内容を模式的に示す図である。図１０（ａ）に示す例では、撮像部２００により生成された撮像画像４００における左下隅を原点とし、水平方向をｘ軸とし、垂直方向をｙ軸とする。この場合において、撮像画像４００から検出された複数の顔のｘ軸方向の位置関係に基づいて、選択操作内容を決定する例を示す。なお、図１０（ａ）に示す例では、説明の容易のため、撮像画像４００におけるｘ軸方向の大きさを２０とし、ｙ軸方向の大きさを１５とした場合を例にして示す。すなわち、（Ｘ，Ｙ）＝（０，０），（２０，０），（０，１５），（２０，１５）の４点を四隅とする座標により撮像画像４００に含まれる各顔を特定する場合を例にして示す。

最初に、撮像画像４００から複数の顔（サッカー選手４０１乃至４０５の各顔）が検出され、これらの各顔が特定人物情報記憶部２３０に特定人物情報が記憶されている顔であるため、これらの各顔の中から基準顔が決定される。例えば、撮像画像４００におけるｘ軸方向の中心位置に最も近い顔を決定する。図１０（ａ）に示す例では、サッカー選手４０１の顔の中心位置を座標（３，６）とし、サッカー選手４０２の顔の中心位置を座標（７，１０）とし、サッカー選手４０３の顔の中心位置を座標（１０，１２）とする。また、サッカー選手４０４の顔の中心位置を座標（１５，８）とし、サッカー選手４０５の顔の中心位置を座標（１８，５）とする。この場合には、サッカー選手４０３の顔の中心位置の座標（１０，１２）が、撮像画像４００におけるｘ軸方向の中心位置に最も近い顔である。そこで、サッカー選手４０３の顔が基準顔として決定される。なお、既に基準顔が決定されている場合には、このような決定処理を行わない。また、基準顔に関する顔情報は、図６に示す選択操作支援画像保持部２５０の選択操作支援画像識別番号２５１「＃１１」に関連付けて記憶される。

続いて、基準顔と、他の顔との撮像画像４００におけるｘ軸方向の位置関係に基づいて選択操作内容が決定される。例えば、基準顔（サッカー選手４０３の顔）の座標（１０，１２）のｘ座標を基準とする。この場合に、基準顔の右側方向（ｘ座標の増加方向）において、基準顔からのｘ座標における距離が最も近い顔には、リング型操作部材１４３をＣＷ方向に小さく回転させる選択操作内容が決定される。例えば、図１０（ｂ）に示すように、基準顔の右側方向において、基準顔からのｘ座標における距離は、サッカー選手４０４の顔の距離Ｋ３が最も近い。このため、サッカー選手４０４の顔には、リング型操作部材１４３をＣＷ方向に小さく回転させる選択操作内容が決定される。すなわち、サッカー選手４０４の顔には選択操作支援画像２５８を付すことが決定される。

また、基準顔の右側方向において、基準顔からのｘ座標における距離が２番目に近い顔には、リング型操作部材１４３をＣＷ方向に大きく回転させる選択操作内容が決定される。例えば、図１０（ｂ）に示すように、基準顔の右側方向において、基準顔からのｘ座標における距離は、サッカー選手４０５の顔の距離Ｋ４が２番目に近い。このため、サッカー選手４０５の顔には、リング型操作部材１４３をＣＷ方向に大きく回転させる選択操作内容が決定される。すなわち、サッカー選手４０５の顔には選択操作支援画像２５９を付すことが決定される。

また、基準顔の左側方向（ｘ座標の減少方向）において、基準顔からのｘ座標における距離が最も近い顔には、リング型操作部材１４３をＣＣＷ方向に小さく回転させる選択操作内容が決定される。例えば、図１０（ｂ）に示すように、基準顔の左側方向において、基準顔からのｘ座標における距離は、サッカー選手４０２の顔の距離Ｋ１が最も近い。このため、サッカー選手４０２の顔には、リング型操作部材１４３をＣＣＷ方向に小さく回転させる選択操作内容が決定される。すなわち、サッカー選手４０２の顔には選択操作支援画像２５６を付すことが決定される。

また、基準顔の左側方向において、基準顔からのｘ座標における距離が２番目に近い顔には、リング型操作部材１４３をＣＣＷ方向に大きく回転させる選択操作内容が決定される。例えば、図１０（ｂ）に示すように、基準顔の左側方向において、基準顔からのｘ座標における距離は、サッカー選手４０１の顔の距離Ｋ２が２番目に近い。このため、サッカー選手４０１の顔には、リング型操作部材１４３をＣＣＷ方向に大きく回転させる選択操作内容が決定される。すなわち、サッカー選手４０１の顔には選択操作支援画像２５７を付すことが決定される。

このように選択操作内容決定部２４０により決定された選択操作内容は、選択操作支援画像保持部２５０に保持される。すなわち、決定された選択操作内容に応じて、各顔に関する顔情報が顔情報２５３に保持され、各顔に関する顔識別情報が特定人物番号２５４に保持される。また、選択操作内容決定部２４０により決定処理が行われる毎に、選択操作支援画像保持部２５０に保持されている内容が順次更新される。これにより、選択操作支援画像２５５乃至２５９の配置が決定される。

図１１は、本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像が撮像画像に重畳された場合における表示例を示す図である。図１１（ａ）には、図９に示す撮像画像４００に、図１０で示した決定方法により決定された選択操作支援画像２５５乃至２５９が重畳された撮像画像４２０を示す。また、図１１（ｂ）には、撮像画像４２０に含まれる各顔と、撮像画像４２０に重畳される選択操作支援画像２５５乃至２５９との関係を模式的に示す。図１１（ｂ）に示す例では、撮像画像４２０に含まれる各顔を含む画像４２１乃至４２５の下側に、これらの各顔に付される選択操作支援画像２５５乃至２５９を並べて示す。また、この例では、図１１（ｂ）に示すように、円環（サイクル）状に選択操作支援画像２５５乃至２５９を決定する例について説明する。

例えば、図３に示すように、撮影者１５０が撮像装置１００を両手で持って撮影をしている場合には、ファインダ１３５に順次表示される撮像画像を見ながらシャッターチャンスを待つことが多い。このファインダ１３５には、例えば、図１１（ａ）に示すように、選択操作支援画像２５５乃至２５９が重畳された撮像画像４２０が表示される。この撮像画像４２０が表示されている場合において、撮像画像４２０に含まれる複数の顔の中から所望の顔を撮影者１５０が選択する場合には、各顔に付された選択操作支援画像２５５乃至２５９を見て、その選択操作内容に従って選択操作を行うことができる。すなわち、所望の顔に付された選択操作支援画像を見て、その選択操作内容に従ったリング型操作部材１４３の一度の回転操作により選択操作を行うことができるため、選択操作が容易である。このため、撮影者１５０は撮影姿勢を崩すことなく、容易に所望の顔を選択することができる。

例えば、サッカー選手４０３がサッカー選手４０５にボール４０６をパスした場合を想定する。この場合には、ボール４０６をパスされたサッカー選手４０５が綺麗になるように撮影を行いたい場合が多い。そこで、このような場合には、サッカー選手４０５の顔に付された選択操作支援画像４２９の選択操作内容に従って、撮影者１５０が選択操作を行うことにより、サッカー選手４０５の顔を基準顔として選択することができる。この選択方法については、図１２を参照して詳細に示す。

図１２は、本発明の第１の実施の形態における表示部２６１に表示される撮像画像の表示例と、リング型操作部材１４３との関係を示す図である。図１２（ａ）には、サッカー選手４０３がサッカー選手４０５にボール４０６をパスした場合における撮像画像４３０を示す。なお、図１２（ａ）では、ボール４０６の軌跡を破線で模式的に示す。図１２（ｂ）には、撮像装置１００の背面側の外観を示す。なお、図１２（ｂ）に示す撮像装置１００は、図７（ａ）に示す撮像装置１００と同様であるため、ここでの説明を省略する。

ここで、表示部２６１に撮像画像４３０が表示されている場合において、基準顔をサッカー選手４０３の顔からサッカー選手４０５の顔に変更する場合について説明する。撮像装置１００を用いて撮影を行っている場合には、例えば、撮影者が液晶モニタ１３０またはファインダ１３５により撮像画像４３０を見ている。このため、撮影者は、基準顔とすべきサッカー選手４０５の顔に付されている選択操作支援画像４２９の選択操作内容を見て、リング型操作部材１４３を回転操作することができる。例えば、図３に示すように、撮影者１５０がリング型操作部材１４３を左手１５２で握っている状態で、選択操作支援画像４２９の選択操作内容に従って、リング型操作部材１４３を矢印４３１の方向に大きく回転させる。このように、リング型操作部材１４３を矢印４３１の方向に大きく回転させることにより、基準位置１７０が、図７（ｂ）に示す操作領域１７５の範囲内となるように回転させることができる。そして、この回転に応じた操作方向および操作量が、選択操作受付部３００から基準対象物選択部２８０に出力される。この操作方向および操作量を受けた基準対象物選択部２８０は、選択操作支援画像保持部２５０の保持内容に基づいて、この操作方向および操作量に応じた顔を選択する。すなわち、選択操作支援画像２５９が付されたサッカー選手４０５の顔が基準顔として選択される。そして、新たに選択された基準顔に関する選択情報（例えば、サッカー選手４０５の顔に関連付けられている選択操作支援画像識別番号２５１「＃１５」）が選択操作内容決定部２４０に出力される。このように、例えば、図１２（ｂ）に示すように、リング型操作部材１４３を矢印４３１の方向に大きく回転させた場合には、サッカー選手４０５の顔が基準顔として選択され、この基準顔に基づいて他の顔を選択するための選択操作内容が決定される。この例では、図１１（ｂ）に示すように、１つの円環４２６に従って、新たに選択された基準顔に対応する他の顔の選択操作内容を決定する例を示す。また、この例では、説明の容易のため、撮像画像におけるサッカー選手４０１乃至４０５の位置が変更してない場合を例にして説明する。

図１３は、本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像が撮像画像に重畳された場合における表示例を示す図である。図１３（ａ）には、図１２（ａ）に示す撮像画像４３０に、リング型操作部材１４３の回転操作により新たに決定された選択操作支援画像２５５乃至２５９が重畳された撮像画像４４０を示す。また、図１３（ｂ）には、撮像画像４４０に含まれる各顔と、撮像画像４４０に重畳される選択操作支援画像２５５乃至２５９との関係を模式的に示す。

例えば、図１２（ｂ）に示すようにリング型操作部材１４３の回転操作が行われた場合には、選択操作内容決定部２４０が、新たに基準顔として選択された顔情報の更新を行う。すなわち、新たに基準顔として選択されたサッカー選手４０５の顔に関する顔情報が、図６に示す選択操作支援画像保持部２５０の選択操作支援画像識別番号２５１「＃１１」に関連付けて記憶される。

続いて、選択操作内容決定部２４０が、基準顔と、他の顔との撮像画像４３０におけるｘ軸方向の位置関係に基づいて選択操作内容を決定する。例えば、基準顔（サッカー選手４０５の顔）の座標（１８，５）のｘ座標を基準とする。この場合に、基準顔の右側方向においては、他の顔が存在しない。そこで、例えば、図１１（ｂ）の円環４２６に示すように、各顔が繋がっているものと想定する。そして、基準顔の左側方向において、基準顔からのｘ座標における距離が最も遠い顔に、リング型操作部材１４３をＣＷ方向に小さく回転させる選択操作内容が決定される。例えば、図１２（ａ）に示すように、基準顔の左側方向において、基準顔（サッカー選手４０５の顔）からのｘ座標における距離は、サッカー選手４０１の顔が最も遠い。このため、サッカー選手４０１の顔には、リング型操作部材１４３をＣＷ方向に小さく回転させる選択操作内容が決定される。すなわち、サッカー選手４０１の顔には選択操作支援画像２５８を付すことが決定される。

また、基準顔の左側方向において、基準顔からのｘ座標における距離が２番目に遠い顔には、リング型操作部材１４３をＣＷ方向に大きく回転させる選択操作内容が決定される。例えば、図１２（ａ）に示すように、基準顔の左側方向において、基準顔（サッカー選手４０５の顔）からのｘ座標における距離は、サッカー選手４０２の顔が２番目に遠い。このため、サッカー選手４０２の顔には、リング型操作部材１４３をＣＷ方向に大きく回転させる選択操作内容が決定される。すなわち、サッカー選手４０２の顔には選択操作支援画像２５９を付すことが決定される。

また、基準顔の左側方向において、基準顔からのｘ座標における距離が最も近い顔には、リング型操作部材１４３をＣＣＷ方向に小さく回転させる選択操作内容が決定される。例えば、図１２（ａ）に示すように、基準顔の左側方向において、基準顔（サッカー選手４０５の顔）からのｘ座標における距離は、サッカー選手４０４の顔が最も近い。このため、サッカー選手４０４の顔には、リング型操作部材１４３をＣＣＷ方向に小さく回転させる選択操作内容が決定される。すなわち、サッカー選手４０４の顔には選択操作支援画像２５６を付すことが決定される。

また、基準顔の左側方向において、基準顔からのｘ座標における距離が２番目に近い顔には、リング型操作部材１４３をＣＣＷ方向に大きく回転させる選択操作内容が決定される。例えば、図１２（ａ）に示すように、基準顔の左側方向において、基準顔（サッカー選手４０５の顔）からのｘ座標における距離は、サッカー選手４０３の顔が２番目に近い。このため、サッカー選手４０３の顔には、リング型操作部材１４３をＣＣＷ方向に大きく回転させる選択操作内容が決定される。すなわち、サッカー選手４０３の顔には選択操作支援画像２５７を付すことが決定される。

このように選択操作内容決定部２４０により選択操作内容が決定されると、選択操作支援画像保持部２５０に保持されている内容が更新される。また、更新された選択操作支援画像保持部２５０の内容に基づいて、図１３（ａ）に示すように、選択操作支援画像２５５乃至２５９が重畳された撮像画像４４０が表示される。このように、リング型操作部材１４３の回転操作が行われた後の選択操作支援画像２５５乃至２５９は、例えば、円環４２６に従って、図１１（ｂ）に示す矢印４２７または４２８方向に選択操作支援画像２５５乃至２５９を移動させて決定することができる。例えば、図１３（ａ）に示す撮像画像４４０は、図１１（ｂ）に示す矢印４２７方向に選択操作支援画像２５５乃至２５９を移動させて決定した例である。また、リング型操作部材１４３の回転操作を行うことにより、サッカー選手４０１、４０２、４０４の顔を基準顔として決定する場合についても、同様に、選択操作支援画像２５５乃至２５９を移動させて決定することができる。これらの表示例については、図１４乃至図１６に示す。

図１４乃至図１６は、本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像が撮像画像に重畳された場合における表示例を示す図である。図１４（ａ）には、図１１（ａ）に示す撮像画像４２０が表示されている状態で、リング型操作部材１４３の回転操作によりサッカー選手４０４が基準顔として選択された後に表示される撮像画像４５１を示す。図１５（ａ）には、図１１（ａ）に示す撮像画像４２０が表示されている状態で、リング型操作部材１４３の回転操作によりサッカー選手４０２が基準顔として選択された後に表示される撮像画像４５２を示す。図１６（ａ）には、図１１（ａ）に示す撮像画像４２０が表示されている状態で、リング型操作部材１４３の回転操作によりサッカー選手４０１が基準顔として選択された後に表示される撮像画像４５３を示す。なお、図１４（ａ）乃至図１６（ａ）では、ボール４０６の軌跡を破線で模式的に示す。また、図１４（ｂ）乃至図１６（ｂ）には、撮像画像４５１乃至４５３に含まれる各顔と、撮像画像４５１乃至４５３に重畳される選択操作支援画像２５５乃至２５９との関係を模式的に示す。

［選択操作支援画像の表示制御の変形例］
図１１乃至図１６に示す例では、基準顔が変更される毎に、円環４２６に従って選択操作支援画像２５５乃至２５９を決定する例を示した。このように、円環４２６に従って選択操作支援画像を決定する場合には、撮影者の左右方向と、選択操作支援画像により表される操作方向とが異なるように、選択操作支援画像が配置されることがある。例えば、図１３に示す撮像画像４４０では、基準顔（サッカー選手４０５の顔）の左側方向において、リング型操作部材１４３をＣＣＷ方向に回転させる選択操作内容を表す選択操作支援画像２５７および２５６が配置されている。しかしながら、選択操作支援画像２５７および２５６の左側方向においては、リング型操作部材１４３をＣＷ方向に回転させる選択操作内容を表す選択操作支援画像２５８および２５９が配置されている。このように、撮影者の左右方向と、選択操作支援画像により表される操作方向とが異なる場合には、その選択操作内容を容易に認識することができないと感じる撮影者も想定される。そこで、例えば、基準顔には選択操作支援画像２５５を付すとともに、基準顔以外の顔については、ｘ座標の値の小さい顔から順番に、選択操作支援画像２５６乃至２５９を配置して付すようにしてもよい。具体的には、基準顔以外の顔について、ｘ座標の値の小さい顔から、選択操作支援画像２５７、２５６、２５８、２５９の順番で割り振るようにする。これらの表示例については、図１７乃至図２０に示す。

図１７乃至図２０は、本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像が撮像画像に重畳された場合における表示例を示す図である。図１７乃至図２０に示す例は、基準顔以外の顔について、ｘ座標の値の小さい顔から、選択操作支援画像２５７、２５６、２５８、２５９の順番で割り振る表示例である。なお、図１７（ａ）に示す表示例は、図１３（ａ）に示す撮像画像４４０の変形例であり、図１８（ａ）に示す表示例は、図１４（ａ）に示す撮像画像４５１の変形例である。また、図１９（ａ）に示す表示例は、図１５（ａ）に示す撮像画像４５２の変形例であり、図２０（ａ）に示す表示例は、図１６（ａ）に示す撮像画像４５３の変形例である。また、図１７（ｂ）乃至図２０（ｂ）には、撮像画像４６１乃至４６４に含まれる各顔と、撮像画像４６１乃至４６４に重畳される選択操作支援画像２５５乃至２５９との関係を模式的に示す。

また、例えば、図１１乃至図１６に示す表示例において、基準顔以外の顔に付される選択操作支援画像のうち、撮影者の左右方向と異なる操作方向となる選択操作支援画像については、表示しないようにしてもよい。これらの表示例については、図２１乃至図２４に示す。

図２１乃至図２４は、本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像が撮像画像に重畳された場合における表示例を示す図である。図２１乃至図２４に示す例は、撮影者の左右方向と異なる操作方向となる選択操作支援画像については表示しない例である。なお、図２１（ａ）に示す表示例は、図１３（ａ）に示す撮像画像４４０の変形例であり、図２２（ａ）に示す表示例は、図１４（ａ）に示す撮像画像４５１の変形例である。また、図２３（ａ）に示す表示例は、図１５（ａ）に示す撮像画像４５２の変形例であり、図２４（ａ）に示す表示例は、図１６（ａ）に示す撮像画像４５３の変形例である。また、図２１（ｂ）乃至図２４（ｂ）には、撮像画像４６５乃至４６８に含まれる各顔と、撮像画像４６５乃至４６８に重畳される選択操作支援画像２５５乃至２５９との関係を模式的に示す。

これらの選択操作支援画像の配置については、例えば、ユーザの手動操作により変更可能とするようにしてもよい。このように、ユーザの好みに応じて選択操作支援画像の配置を変更して表示させることにより、撮像画像に含まれる複数の対象物のうちから、所望の対象物をさらに容易に迅速に選択することができる。

以上では、撮像画像に含まれる複数の顔の位置がｘ軸方向においてそれぞれ異なる場合について説明した。しかしながら、例えば、撮像画像に含まれる複数の顔の位置がｘ軸方向において同一となる場合も想定される。このように、ｘ軸方向における位置が同一となる顔については、例えば、ｙ座標の値を用いて選択操作支援画像の配置を決定することができる。例えば、図１１（ａ）に示す円環４２６に従って、選択操作支援画像の配置を決定する場合において、ｘ軸方向における位置が同一となる２つの顔について、ｙ座標の値が大きい顔については円環４２６の左側の選択操作支援画像を配置すると決定する。一方、ｙ座標の値が小さい顔については円環４２６の右側の選択操作支援画像を配置すると決定することができる。また、例えば、基準顔からのｙ座標の差分値に基づいて選択操作支援画像の配置を決定するようにしてもよい。また、ｘ座標の値の小さい顔から、所定の順番で選択操作支援画像を割り振る場合においても、ｘ軸方向における位置が同一となる顔については、ｙ座標の値を用いて選択操作支援画像を割り振ることができる。

また、例えば、撮像画像に含まれる複数の顔のｘ軸方向における位置と、ｙ軸方向における位置とが略同一となる場合も想定される。このように、ｘ軸方向およびｙ軸方向における位置が略同一となる顔については、撮像画像上において、ほぼ重なっている状態であると考えられる。このため、ｘ軸方向およびｙ軸方向における位置が同一となる複数の顔のうち、少なくとも１つの顔が撮像装置１００側に表示され、何れかの顔が後ろに隠れる状態になっていると考えられる。このような場合には、顔検出部２１０が顔検出処理を行う際に算出される評価値を用いて、選択操作支援画像の配置を決定することができる。例えば、図１１（ａ）に示す円環４２６に従って、選択操作支援画像の配置を決定する場合には、評価値が高い顔については円環４２６の左側の選択操作支援画像の配置を決定することができる。また、例えば、特定人物情報記憶部２３０に記憶されている特定人物情報に予め優先順位を設定しておき、ｘ軸方向およびｙ軸方向における位置が同一となる複数の顔が登録顔である場合には、その優先順位に基づいて選択操作支援画像の配置を決定することができる。

また、図１１乃至図２４に示す例では、各選択操作支援画像をサッカー選手の顔の位置に重畳して表示する例を示したが、例えば、各顔の背景によっては、各選択操作支援画像が見難くなってしまうおそれがある。そこで、例えば、選択操作支援画像を付す対象となる対象物の背景に応じて、選択操作支援画像の表示形態を変更するようにしてもよい。例えば、選択操作支援画像を付す対象となる対象物の背景に応じて、選択操作支援画像の輝度を高くしたり、点滅させたり、エッジ強調を使用したりすることにより、選択操作支援画像自体を見易くすることができる。また、例えば、選択操作支援画像を付す対象となる対象物の背景に、半透明のグレー画像を重畳させ、この上から選択操作支援画像を重畳させることにより、選択操作支援画像自体を見易くすることができる。

［選択操作補助画像の表示制御例］
図１１乃至図２４に示す例では、撮像画像に含まれるサッカー選手の顔の位置に各選択操作支援画像を重畳して表示する例を示した。しかしながら、例えば、各選択操作支援画像については、撮像画像に重畳するとともに、他の表示領域において各顔に関連付けて表示するようにしてもよい。以下では、撮像画像の表示領域以外の表示領域に選択操作支援画像を表示する例について図面を参照して詳細に示す。

図２５乃至図２９は、本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。図２５乃至図２９に示す例は、各選択操作支援画像を、撮像画像に重畳するとともに、他の表示領域において各顔に関連付けて表示する表示例である。なお、図２５（ｂ）に示す撮像画像４２０は、図１１（ａ）に示す撮像画像４２０と同一である。

図２５（ａ）に示す画像５００は、図２５（ｂ）に示す撮像画像４２０が表示されている状態で、撮像画像４２０の表示領域以外の表示領域に表示される画像である。例えば、カラー液晶表示部１３１またはファインダ１３５における表示領域において、撮像画像４２０を表示する撮像画像表示領域と、画像５００を表示する選択操作補助画像表示領域とを設けことができる。また、カラー液晶表示部１３１およびファインダ１３５以外の他の表示部を撮像装置１００に設け、この表示部において、画像５００を表示するようにしてもよい。このように、図２５乃至図２９に示す例では、撮像画像および選択操作補助画像を同時に表示する例を示す。

図２５（ａ）に示す画像５００は、撮像画像４２０に含まれる所望の顔を選択するための選択操作を支援するための選択操作補助画像であり、例えば、撮像画像４２０に含まれる各人物に関する選択操作補助画像５０１乃至５０５により構成される。

選択操作補助画像５０１乃至５０５は、例えば、特定人物情報記憶部２３０に記憶されている特定人物情報と、選択操作支援画像５０６乃至５１０とが関連付けられている画像である。例えば、特定人物情報として、特定人物情報記憶部２３０に記憶されている登録名称２３２および登録顔画像２３４が表示される。この特定人物情報は、例えば、選択操作支援画像保持部２５０に保持されている特定人物番号２５４に基づいて、表示制御部２６０が、特定人物情報記憶部２３０から取得して表示させる。また、選択操作支援画像５０６乃至５１０は、選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の一例である。すなわち、選択操作支援画像５０６乃至５１０は、同時に表示される撮像画像４２０に含まれるサッカー選手４０１乃至４０５の各顔に付されている選択操作支援画像２５５乃至２５９に対応するものである。また、選択操作補助画像５０１乃至５０５は、同時に表示される撮像画像４２０におけるｘ軸方向の位置に基づいて配置される。すなわち、図２５（ａ）および（ｂ）に示すように、サッカー選手４０１乃至４０５のｘ軸方向における位置が対応している。なお、図２５乃至図２９に示す例では、撮像画像に重畳される選択操作支援画像と、選択操作補助画像に含まれる選択操作支援画像とを異なる形態として示すが、これらを同一の形態として表示するようにしてもよい。

ここで、図２５（ｂ）では、図１１乃至図２４に示す例と同様に、撮像画像に選択操作支援画像２５５乃至２５９を重畳した例を示した。ただし、例えば、撮像画像に含まれる各顔に顔マークを付し、これらの顔マークの色と、これに対応する選択操作補助画像の枠の色とを同一とすることにより、各顔と選択操作支援画像とを関連付けるようにしてもよい。例えば、図２６に示すように、撮像画像５２０に含まれる各顔に顔マーク５２１乃至５２５を付し、これらの顔マーク５２１乃至５２５の色と、これに対応する選択操作補助画像５３１乃至５３５の枠の色とを同一とすることができる。なお、図２６では、これらの同一の色を付す部分を太線で示す。また、選択操作補助画像５３１乃至５３５の太線および顔マーク以外については、図２５に示す例と同様である。

ここで、例えば、撮像装置１００を用いて撮影を行っている場合には、撮像画像に含まれる各人物が頻繁に動いて位置関係が頻繁に変更される可能性がある。また、撮像画像（画枠）に新たな人物が進入したり、現在表示されている人物が撮像画像の範囲外へ移動したりすること等も想定される。このような場合には、選択操作補助画像の配置に変更が発生することになるため、撮影者が選択操作補助画像を見易くすることが重要となる。

そこで、図２５（ａ）および図２６（ａ）に示すように、同時に表示される撮像画像におけるｘ軸方向の位置に基づいた選択操作補助画像の配置以外に、例えば、規定時間以上位置が不変だった場合にのみ選択操作補助画像の配置を変更するようにしてもよい。また、選択操作補助画像の配置の変更をさらに少なくしたい場合には、例えば、顔識別部２２０により識別された順番に選択操作補助画像の配置を決定し、この配置を変更しないようにしてもよい。この場合に、例えば、既に配置された選択操作補助画像に対応する人物が撮像画像の範囲外へ移動した場合やその人物を顔識別部２２０が識別できなくなることが想定される。この場合には、選択操作補助画像の枠内には特定人物情報を表示させずに空き状態とし、他の選択操作補助画像については配置状態も変更しないようにすることができる。このように、空き状態となった選択操作補助画像については、撮像画像（画枠）に新たな人物が進入した場合や、新たな人物が顔識別部２２０により識別された場合に、その新たな人物に関する選択操作補助画像として割り当てるようにしてもよい。これにより、選択操作補助画像の配置に変更が発生することを防止することができ、選択操作補助画像を見易くすることができる。また、特定人物情報記憶部２３０に記憶されている特定人物情報に、予め優先度を設定しておき、この優先度の順番に選択操作補助画像を配置するようにしてもよい。

図２７（ａ）には、選択操作補助画像の配置の変更を少なくした場合における表示例を示す。図２７（ａ）に示す表示例は、例えば、顔識別部２２０により識別された順番に選択操作補助画像の配置を決定した場合を示すものとする。例えば、サッカー選手４０５と、選択操作補助画像５４１とが対応するものとする。なお、この場合には、図２７（ａ）および（ｂ）に示すように、撮像画像５５０に含まれる各顔のｘ軸方向における位置と、選択操作補助画像５４１乃至５４５の配置とが同一とならない場合が生じる。このため、これらの選択操作補助画像の配置については、撮影者の好みに応じて手動操作により変更可能とするようにしてもよい。

図２８（ａ）には、図２７に示す表示状態から、撮像画像に含まれる人物が移動して、識別できなくなった人物が生じた場合における表示例を示す。例えば、サッカー選手４０５が移動して撮像装置１００からの距離が遠くなったような場合には、図２８（ｂ）に示すように、撮像画像５７０に含まれるサッカー選手４０５のサイズが小さくなる。このように撮像画像における顔のサイズが小さい場合や焦点が合っていない場合には、顔識別部２２０により識別できない場合も想定される。このような場合にでも、既に特定人物であると識別されているような場合には、例えば、追尾処理により各人物の顔を追尾して同一人物であることが推定し続けられる間は、その特定人物に関する選択操作補助画像を表示し続けることができる。ただし、例えば、顔識別部２２０により識別できなくなった後には、同一人物であることが推定し続けられる場合でも、その特定人物に関する選択操作補助画像の名称および登録顔画像については消去するようにしてもよい。図２８（ａ）に示す例では、撮像画像５７０に含まれるサッカー選手４０５に関する選択操作補助画像５６１を表示し続けるが、その枠内の名称および登録顔画像については消去する例を示す。なお、顔識別部２２０により識別できなくなった後に、再度、顔識別部２２０により識別することができるようになった場合には、その特定人物に関する選択操作補助画像の名称および登録顔画像を追加表示することができる。また、例えば、図２８（ｂ）に示すサッカー選手４０５のように、撮像画像５７０におけるサイズが小さい場合には、撮影者に見易くするため、選択操作支援画像２５７をその顔に応じて小さくせずに、比較的大きいサイズとするようにしてもよい。また、同様に、例えば、撮像画像における顔のサイズが小さい場合等において、既に特定人物であると識別されているような場合には、同一人物であることが推定し続けられる間は、その特定人物に選択操作支援画像を重畳して表示し続けるようにしてもよい。

以上では、特定人物情報記憶部２３０に記憶されている特定人物情報（登録名称２３２および登録顔画像２３４）を用いて選択操作補助画像を表示する例を示した。しかしながら、例えば、撮像画像に含まれる顔を含む顔画像を撮像装置から取り出し、この取り出された顔画像を用いるようにしてもよい。

図２９（ａ）には、撮像画像５９０から取り出された顔画像を用いて選択操作補助画像５８１乃至５８５を表示する例を示す。図２９（ａ）および（ｂ）では、撮像画像５９０における取出し元の位置（破線の矩形）と、選択操作補助画像５８１乃至５８５に含まれる顔画像との関係を破線の矢印で結んで示す。ここで、例えば、サッカー選手４０５のように、撮像装置１００からの距離が遠く、撮像画像５９０における顔のサイズが小さい場合には、その顔を含む顔画像を拡大処理して用いるようにすることができる。また、例えば、現在の基準顔と離れていて焦点があっていない顔（いわゆる、ぼやけている顔）については、シャープネス処理して用いるようにすることができる。

ここで、撮像画像から取り出された顔画像を用いて選択操作補助画像を表示する場合には、例えば、順次生成される撮像画像毎に順次顔画像を取り出して選択操作補助画像を表示することができる。ただし、選択操作補助画像に比較的綺麗な顔画像を表示するため、例えば、顔識別部２２０が顔識別処理を行う際に算出される評価値を用いて、この評価値が閾値を超えた場合に、その顔画像を取り出して用いるようにしてもよい。また、現在表示されている顔画像の評価値よりも高い値の評価値が算出されたことを条件に、その評価値に対応する顔画像を新たに表示するようにしてもよい。また、顔識別部２２０により算出される評価値の代わりに、顔検出部２１０が顔検出処理を行う際に算出される評価値を用いるようにしてもよい。このように選択操作補助画像を表示することにより、例えば、正面向きを向いていた特定人物が後ろを向いてしまった場合でも、正面向きの顔画像を表示させておくことができる。

［選択操作支援画像の表示制御の変形例］
以上では、撮像装置１００の上下方向と、撮影者の上下方向とが同一の場合における撮影時（撮像範囲が横長となる撮影時）の表示例を示した。しかしながら、例えば、図３０（ａ）に示すように、光軸方向に対して９０度回転させた状態で撮像装置１００による撮影が行われることもある。そこで、以下では、このような撮影姿勢による撮影時の表示例を示す。

図３０は、本発明の第１の実施の形態における撮像装置１００を用いて撮影を行う場合における撮影者の撮影姿勢の一例と、その撮影時（撮像範囲が縦長となる撮影時）における選択操作支援画像の表示例を示す図である。図３０（ａ）には、光軸方向に対して９０度回転させた状態で撮像装置１００を両手で構えた撮影者１５０を撮像装置１００の側面側から示す。図３０（ｂ）には、図３０（ａ）に示す撮影姿勢で撮影が行われた場合における撮像画像の表示例を示す。

図３０（ａ）に示す撮影姿勢で撮影が行われた場合には、図３０（ｂ）に示すように、撮影者は、縦長の撮像画像６００を見ることになる。この撮像画像６００は、撮像装置１００の回転と同様に、光軸方向に対して９０度回転された状態となる。そこで、このような場合には、撮影者の上下方向に合わせて、ＣＷ方向に９０度回転させた選択操作支援画像２５５乃至２５９を各顔に重畳して表示させることができる。例えば、表示制御部２６０は、姿勢検出部２９０により撮像装置１００の回転角度が検出されると、この検出された回転角度に応じて、選択操作支援画像２５５乃至２５９を回転させて表示させる。これにより、撮影者がどのような撮影姿勢であっても、撮像画像に重畳して表示される選択操作支援画像の上下方向の関係が同一となるように表示されるため、撮影者が見易くなる。なお、これらの選択操作支援画像の回転表示については、撮影者の手動操作により変更可能とするようにしてもよい。

また、以上では、主にｘ軸方向における対象物の位置関係に基づいて選択操作支援画像の配置を決定する例を示した。しかしながら、例えば、カーレース等の競走を正面から撮影するような場合には、撮像範囲が横長となる撮影時でも、対象物（例えば、車）の並びが主に縦方向になることが想定される。このような撮影時には、主にｙ軸方向における対象物の位置関係に基づいて選択操作支援画像の配置を決定するようにしてもよい。この場合には、例えば、図３１および図３２に示すように、選択操作支援画像の配置の決定方法に応じて、選択操作支援画像の表示形態を変更するようにしてもよい。

図３１および図３２は、本発明の第１の実施の形態における選択操作内容決定部２４０により決定された選択操作内容を表す選択操作支援画像の表示例を示す図である。図３１には、各選択操作支援画像の表示形態を変更して撮像画像６０１に重畳する表示例を示す。また、図３２には、各選択操作支援画像の表示形態を変更して撮像画像６０２に重畳するとともに、他の表示領域において選択操作補助画像の表示形態を変更して表示する表示例を示す。図３１および図３２（ｂ）に示すように、例えば、主にｙ軸方向における対象物の位置関係に基づいて選択操作支援画像の配置を決定した場合には、ＣＣＷ方向に９０度回転させた選択操作支援画像２５５乃至２５９を各顔に重畳して表示させることができる。また、選択操作補助画像を表示させる場合には、図３２（ａ）に示すように、例えば、選択操作補助画像を上下方向に並べて表示させることができる。この場合に、選択操作補助画像に含まれる選択操作支援画像の矢印方向についても変更することができる。このように、選択操作支援画像の配置の決定方法に応じて、選択操作支援画像または選択操作補助画像の表示形態を変更することにより、何れの基準によって選択操作支援画像の配置が決定されているのかを撮影者が容易に把握することができる。

［撮像装置の動作例］
次に、本発明の第１の実施の形態における撮像装置１００の動作について図面を参照して説明する。

図３３は、本発明の実施の形態における撮像装置１００による撮像画像記録処理の処理手順を示すフローチャートである。この例では、撮像画像記録待機状態（例えば、モニタリングモード設定時）である場合に、撮像画像を生成し、この撮像画像に選択操作支援画像を重畳して表示させる表示制御処理を行う例について説明する。

最初に、撮像画像記録待機状態であるか否かが判断される（ステップＳ９０１）。撮像画像記録待機状態である場合には（ステップＳ９０１）、撮像部２００が撮像画像を生成し（ステップＳ９０２）、生成された撮像画像について顔検出部２１０が顔検出処理を行う（ステップＳ９０３）。なお、この顔検出処理は各フレームに対して行うようにしてもよく、一定間隔毎のフレームに対して行うようにしてもよい。また、ステップＳ９０３は、特許請求の範囲に記載の対象物検出手順の一例である。一方、撮像画像記録待機状態でない場合には（ステップＳ９０１）、撮像画像記録処理の動作を終了する。

続いて、撮像画像から顔が検出されたか否かが判断される（ステップＳ９０４）。撮像画像から顔が検出されている場合には（ステップＳ９０４）、検出された顔について顔識別部２２０が顔識別処理を行う（ステップＳ９０５）。続いて、選択操作内容決定部２４０が、選択操作支援画像保持部２５０の保持内容に基づいて、基準顔が存在するか否かを判断する（ステップＳ９０６）。基準顔が存在しない場合には（ステップＳ９０６）、選択操作内容決定部２４０が、予め設定されている条件（一定条件）に基づいて、顔検出部２１０により検出された顔の中から、基準顔を選択する（ステップＳ９０７）。

基準顔が存在する場合には（ステップＳ９０６）、リング型操作部材１４３により他の顔の選択操作が行われた否かが判断される（ステップＳ９０８）。リング型操作部材１４３により他の顔の選択操作が行われた場合には（ステップＳ９０８）、基準対象物選択部２８０が、選択操作支援画像保持部２５０の保持内容に基づいて、その選択操作に対応する基準顔を選択する（ステップＳ９０９）。一方、他の顔の選択操作が行われていない場合には（ステップＳ９０８）、選択操作内容決定部２４０が、選択操作支援画像保持部２５０に保持されている基準顔について追尾処理を行う（ステップＳ９１０）。続いて、選択操作内容決定部２４０が、基準顔に基づいて他の顔の選択操作内容を決定し、この決定された選択操作内容に基づいて選択操作支援画像保持部２５０の保持内容の更新を行う（ステップＳ９１１）。なお、ステップＳ９１１は、特許請求の範囲に記載の選択操作内容決定手順の一例である。

続いて、表示制御部２６０が、選択操作支援画像保持部２５０の保持内容に基づいて、選択操作支援画像を撮像画像に重畳して表示部２６１に表示させる（ステップＳ９１２）。すなわち、選択操作内容決定部２４０により新たに決定された選択操作内容に対応する各選択操作支援画像が撮像画像に重畳されて表示される。なお、ステップＳ９１２は、特許請求の範囲に記載の表示制御手順の一例である。続いて、撮像制御部２０１が、選択操作支援画像保持部２５０に保持されている基準顔の内容に基づいて、カメラパラメータを決定する（ステップＳ９１３）。例えば、撮像制御部２０１が、基準顔の撮像画像における位置および大きさに基づいて、基準顔に最適なカメラパラメータを決定する。

また、撮像画像から顔が検出されていない場合には（ステップＳ９０４）、表示制御部２６０が、撮像部２００により生成された撮像画像を表示部２６１に表示させる（ステップＳ９１４）。続いて、撮像制御部２０１が、予め設定されている条件に基づいてカメラパラメータを決定する（ステップＳ９１５）。

続いて、シャッターボタン１４１が押下されたか否かが判断され（ステップＳ９１６）、シャッターボタン１４１が押下された場合には、記録制御部２７０が、生成された撮像画像を記録部２７１に記録させる（ステップＳ９１７）。一方、シャッターボタンが押下されない場合には（ステップＳ９１６）、撮像画像記録処理の動作を終了する。

このように、本発明の第１の実施の形態では、順次更新される選択操作支援画像保持部２５０の保持内容に基づいて、撮像画像に含まれる顔を基準顔として選択するための操作方向および操作範囲を表す選択操作支援画像が各顔の周りに重畳される。そして、撮影者は、選択したい顔に重畳された選択操作支援画像に従って、リング型操作部材１４３を一度操作するのみで、所望の顔を基準顔として選択することができる。これにより、撮影者は、選択操作内容を確認しながら素早く確実に目的の顔を基準顔として選択することができる。

また、本発明の第１の実施の形態では、リング型操作部材１４３の操作範囲として、左右方向のそれぞれに、比較的小さい操作量または比較的大きい操作量の何れかの操作領域を設定する。すなわち、左右方向のそれぞれに２段階の操作領域を設定する。このように、操作領域が限定されているため、撮影者が撮影に集中しているような場合でも、適切な操作を正確に行うことができる。これにより、決定的な瞬間の静止画撮影を成功させる確率を高めることができる。また、リング型操作部材１４３を回転操作するのみでよいため、選択操作による手振れを防止することができる。また、動いている被写体に対しても、選択操作を素早く確実に行うことができる。

［操作部材の変形例］
以上では、リング型操作部材１４３を用いて、選択操作支援画像に従って基準顔を選択する選択操作内容を示した。しかしながら、例えば、撮像装置に備えられている他の操作部材（例えば、操作方向および操作量を検出することが可能な操作部材）を用いて基準顔の選択操作を行うようにしてもよい。例えば、図２に示すダイヤル型操作部材１４４乃至１４６を用いて、選択操作支援画像に従って基準顔の選択操作を行うようにしてもよい。また、例えば、マニュアルアイリスリング等の操作部材を用いるようにしてもよい。また、回転操作を行う操作部材以外に、例えば、複数の操作量を検出可能な押下げボタンやシーソー型操作部材等を用いるようにしてもよい。なお、撮像装置に装着可能な外部操作部材からの操作入力を受け付け、この操作入力に基づいて基準顔の選択操作を行うようにしてもよい。また、エンドレス回転タイプではない操作部材（例えば、中点復帰（ゴーホーム）タイプのリング型操作部材）を用いるようにしてもよい。また、回転端や押し下げ端があるスイッチを使用する場合には、２種類の回転量（押し下げ量）による切り替えのみではなく、回転端や押し下げ端に達した場合の操作指示を追加するようにしてもよい。なお、分解能によって端の検出が不正確な場合には、端に達した場合にマイクロスイッチが押されるようにすることにより、端の検出精度を高めることができる。また、押し下げスイッチを操作部材として使用する場合等において、押し下げ量が少なく押し下げ量による切換が困難な場合には、単なる押し下げと端までの押し下げとを使用するようにしてもよい。また、操作部材としてスイッチを用いる場合には、例えば、一般的なカメラのシャッターボタンと同じ２段階の押し下げ式のボタンを用いることができる。このようなボタンでは、連続した押し下げ量を検出することはできないが、半押しと全押しの２種類の押し下げ状態の検出が可能であるため、操作部材として使用可能である。なお、図３４および図３５では、操作部材の例を示す。

図３４および図３５は、本発明の第１の実施の形態における基準対象物の選択操作を行う際に用いることが可能な操作部材を備える撮像装置の例を示す図である。図３４（ａ）乃至（ｃ）に示す撮像装置６３１乃至６３３は、例えば、デジタルビデオカメラであり、ダイヤル型６３４、リング型操作部材６３５乃至６３７が備えられている。撮像装置６３１乃至６３３により撮影を行う場合において、基準顔の選択操作を行う場合には、例えば、表示部６３８乃至６４０に表示される撮像画像を見ながら、選択操作支援画像に従ってダイヤル型６３４、リング型操作部材６３５乃至６３７の回転操作を行う。これにより、所望の顔を基準顔として選択することができる。

図３５には、基準対象物の選択操作を行う際に用いることが可能なタッチパネル６１１を備える撮像装置６１０を示す。撮像装置６１０は、例えば、デジタルスチルカメラであり、タッチパネル６１１が備えられている。例えば、図３５に示すように、左手６１３および右手６１４で撮像装置６１０を持った状態で、タッチパネル６１１に表示される撮像画像を見ながら、撮像装置６１０により撮影を行うことができる。図３５では、タッチパネル６１１に表示される撮像画像には、サッカー選手４０１乃至４０５の各顔に選択操作支援画像６２１乃至６２５を付した場合を示す。選択操作支援画像６２１乃至６２５は、選択操作支援画像２５５乃至２５９の一部を変形したものであり、選択操作支援画像６２２乃至６２５における各矢印は操作量を示す。また、選択操作支援画像６２２および６２４における各矢印の終端には一重丸を付し、選択操作支援画像６２３および６２５における各矢印の終端には二重丸を付す。

例えば、図３５に示すように、タッチパネル６１１に表示される撮像画像を見ながら、撮像装置６１０により撮影を行う場合において、基準顔の選択操作を行う場合には、タッチパネル６１１を指で触れておく。例えば、左手６１３の親指でタッチパネル６１１を触れておく。このようにタッチパネル６１１を指で触れると、タッチパネル６１１における左手６１３の親指の位置６１２を起点として選択操作画像６１５が表示される。この選択操作画像６１５は、タッチパネル６１１における位置６１２を起点として左右方向に指を滑らせることにより基準顔の選択操作を行うための画像であり、位置６１２を起点として左右方向に指を滑らせる方向および量を表す。また、選択操作画像６１５には、指を滑らせる量の目安となる一重丸および二重丸を付す。この一重丸および二重丸は、選択操作支援画像６２２乃至６２５における各矢印の終端に付されている一重丸および二重丸に対応するものである。例えば、サッカー選手４０１の顔を基準顔として選択する場合には、サッカー選手４０１の顔に付されている選択操作支援画像６２３の矢印方向および二重丸に従って、タッチパネル６１１における左手６１３の親指を左側方向に二重丸６１６の位置まで滑らせる。これにより、所望の顔を基準顔として容易に選択することができる。

［選択操作支援画像の変形例］
以上で示した選択操作支援画像以外に、例えば、選択操作内容を表すことが可能な他の画像を選択操作支援画像として用いることができる。この選択操作支援画像の例を図３６および図３７に示す。

図３６および図３７は、本発明の第１の実施の形態における基準対象物の選択操作を行うための選択操作内容を表す選択操作支援画像の例を示す図である。なお、図３６（ａ）に示す選択操作支援画像は、図８等に示す選択操作支援画像２５５乃至２５９に対応する。

図３６（ｂ）に示す選択操作支援画像は、操作方向および操作量を表す選択操作支援画像である。すなわち、図３６（ａ）に示す選択操作支援画像における矢印の長さは、操作範囲を表すものであるのに対し、図３６（ｂ）に示す選択操作支援画像における矢印の長さは、操作量（基準位置からの回転角度）を表す。

図３６（ｃ）に示す選択操作支援画像は、操作方向および操作量を表す選択操作支援画像の変形例であり、図３６（ｂ）に示す円形の選択操作支援画像を、矩形の選択操作支援画像としたものである。

図３６（ｄ）に示す選択操作支援画像は、操作方向および操作量を文字で表す選択操作支援画像である。図３６（ｅ）に示す選択操作補助画像は、操作方向および操作量を文字で表す選択操作支援画像を含むものである。図３６（ｄ）および（ｅ）に示す例では、選択操作内容を日本語で表す例を示すが、英語等の外国語で表すようにしてもよく、日本語と外国語とが混在した文字を表すようにしてもよい。また、選択操作内容を、図３６（ａ）乃至（ｃ）等に示すマークと、文字とで同時に表すようにしてもよい。

また、以上では、左右方向において、それぞれ２つの操作範囲を表す選択操作支援画像について説明した。ここで、上述したように、例えば、複数の操作量を検出することが可能な押し下げボタンを選択操作部材として用いることができる。この押し下げボタンを用いて基準顔の選択操作を行う場合における選択操作支援画像の例を図３７で示す。図３７（ａ）には、押し下げボタンの操作方向および操作量を表す選択操作支援画像を示す。また、図３７（ｂ）には、押し下げボタンの操作方向および操作範囲を表す選択操作支援画像を示す。なお、図３７では、付与の対象となる人物の顔に、選択操作支援画像を重畳させた例を示す。

これらの選択操作支援画像については、操作部材の種類やユーザの好みに応じて変更可能とすることができる。例えば、ユーザが設定した操作範囲に対応するように選択操作支援画像の矢印範囲を変更して表示するようにしてもよい。また、選択操作内容を表す他の選択操作支援画像を用いるようにしてもよい。

＜２．第２の実施の形態＞
［撮像装置の外観例］
以上では、１つの操作部材を用いて撮像画像に含まれる複数の対象物のうちから基準対象物を選択する例を示した。例えば、撮影時には、撮影に集中するため、細かい操作を行うことが困難であることも想定されるため、本発明の第１の実施の形態では、リング型操作部材１４３の操作範囲を左右方向において２領域に設定する例を示した。これにより、例えば、基準対象物以外の他の４つの対象物を選択することが可能となる。しかしながら、撮像画像に含まれる対象物の数が多く、選択操作の対象となる対象物を多くしたい場合も想定される。そこで、本発明の第２の実施の形態では、簡易的な操作を維持しつつ選択操作の対象となる対象物を多くする例について説明する。

図３８は、本発明の第２の実施の形態における撮像装置７００の外観を示す図である。図３８（ａ）には、撮像装置７００の正面側の斜視図を示す。図３８（ｂ）には、撮像装置７００を用いて撮影を行う場合における撮影者の撮影姿勢の一例を示す。なお、撮像装置７００の内部構成については、図１に示す撮像装置１００と略同様であるため、ここでの説明を省略する。また、撮像装置７００は、例えば、撮像された画像をリアルタイムで表示する機能を有するデジタルビデオカメラ（例えば、カメラ一体型レコーダ）等の撮像装置により実現される。撮像装置７００は、レンズ鏡筒７０１と、リング型操作部材７０２と、補助操作部材７０３と、接眼ユニット７０４と、アイピース７０５とを備える。

レンズ鏡筒７０１は、撮像装置７００本体の前部に装着され、光学系を収容するものである。

リング型操作部材７０２は、レンズ鏡筒７０１の外径部に設けられているリング型操作部材である。リング型操作部材７０２として、例えば、手動によりフォーカス合わせを行うためのマニュアルフォーカスリングを用いることができる。

補助操作部材７０３は、レンズ鏡筒７０１の外径部に設けられているボタン型操作部材であり、押し下げの有無を検出することができる。

接眼ユニット７０４は、拡大された撮像画像を撮影者に提供するためのユニットであり、アイピース７０５を備える。このアイピース７０５は、撮影時において、拡大された撮像画像を撮影者が視認する際に用いられる。

ここで、撮像装置７００を用いて撮影を行う場合について説明する。図３８（ｂ）に示すように、撮像装置７００を用いて撮影を行う場合には、撮影者１５５は、撮像装置７００本体を右肩に乗せた状態で、両手によりレンズ鏡筒７０１の外径部を持つ。また、撮影者１５５は、右眼でアイピース７０５を覗くことにより、拡大された撮像画像を視認することができる。このような撮影姿勢では、例えば、左手によりリング型操作部材７０２を操作し、右手により補助操作部材７０３を操作することができる。すなわち、リング型操作部材７０２および補助操作部材７０３を同時に操作することができる。

［撮像装置の機能構成例］
図３９は、本発明の第２の実施の形態における撮像装置７００の機能構成例を示すブロック図である。ここで、撮像装置７００は、図４に示す撮像装置１００の変形例であるため、撮像装置１００と共通する部分については、同一の符号を付してこれらの説明を省略し、撮像装置１００と異なる部分を中心に説明する。撮像装置７００は、選択操作内容決定部７１１と、基準対象物選択部７１２と、補助操作受付部７１３と、選択操作受付部７１４と、選択操作支援画像保持部７２０とを備える。

選択操作内容決定部７１１は、顔検出部２１０により検出された複数の顔から所望の顔を基準顔として選択するための選択操作内容を決定するものであり、この決定された選択操作内容に基づいて選択操作支援画像保持部７２０の保持内容を順次更新する。なお、選択操作内容決定部７１１は、選択操作内容の決定対象となる顔が増えた点以外は、選択操作内容決定部２４０と同様である。

選択操作支援画像保持部７２０は、選択操作内容決定部７１１により決定された選択操作内容を表す選択操作支援画像およびこれに関連付けられた顔情報等を保持するものであり、保持されている情報を各部に供給する。なお、選択操作支援画像保持部７２０の保持内容については、図４０を参照して詳細に説明する。

基準対象物選択部７１２は、補助操作受付部７１３および選択操作受付部７１４により受け付けられた操作入力に応じて、選択操作支援画像保持部７２０に顔情報が保持されている複数の対象物のうちから、基準対象物を選択するものである。そして、基準対象物選択部７１２は、選択された基準対象物に関する選択情報を選択操作内容決定部７１１に出力する。この基準対象物の選択方法については、図４１および図４２を参照して詳細に説明する。

補助操作受付部７１３および選択操作受付部７１４は、表示部２６１に表示されている選択操作支援画像に応じて行われた操作内容を受け付けるものであり、受け付けられた操作内容を基準対象物選択部７１２に出力する。なお、補助操作受付部７１３は、例えば、図３８に示す補助操作部材７０３に対応し、選択操作受付部７１４は、例えば、図３８に示すリング型操作部材７０２に対応する。また、補助操作受付部７１３および選択操作受付部７１４は、特許請求の範囲に記載の操作受付部の一例である。

図４０は、本発明の第２の実施の形態における選択操作支援画像保持部７２０に保持されている内容を概略的に示す図である。選択操作支援画像保持部７２０は、選択操作支援画像識別番号７２１と、選択操作支援画像７２２と、顔情報７２３と、特定人物番号７２４とが保持されている。なお、選択操作支援画像保持部７２０は、図６に示す選択操作支援画像保持部２５０の一部を変形したものであり、選択操作支援画像７２２に記憶される選択操作支援画像の種類が多くなった点以外は略同一である。そこで、以下では、図６に示す選択操作支援画像保持部２５０と異なる点を中心に説明し、共通する点についての説明を省略する。また、図４０に示す例では、画像に含まれる複数の人物のうち、９人の顔に選択操作支援画像を付して表示する場合における選択操作支援画像保持部７２０について説明する。

選択操作支援画像７２２には、画像に含まれる複数の顔から所望の顔を選択するための選択操作内容を示す選択操作支援画像７３１乃至７３９のテンプレート画像が記憶される。図４０に示す例では、画像に含まれる複数の顔に、９種類のリング型の選択操作支援画像７３１乃至７３９を付す場合を例にして示す。例えば、選択操作支援画像識別番号７２１「＃１１」には、ユーザ操作や予め設定されている条件等に基づいて決定された基準顔に付される選択操作支援画像７３１が記憶されている。また、選択操作支援画像識別番号２５１「＃１２」乃至「＃１５」には、基準顔以外の顔に付される選択操作支援画像７３２乃至７３５が記憶されている。これらの選択操作支援画像７３１乃至７３５は、図６に示す選択操作支援画像２５５乃至２５９に対応するものであり、リング型操作部材７０２を用いて選択操作を行うための選択操作内容を表す。また、選択操作支援画像識別番号２５１「＃１５」乃至「＃１９」には、基準顔以外の顔に付される選択操作支援画像７３６乃至７３９が記憶されている。これらの選択操作支援画像７３６乃至７３９は、リング型操作部材７０２および補助操作部材７０３を用いて選択操作を行うための選択操作内容を表す選択操作支援画像である。

このように、選択操作支援画像７３２乃至７３５と、選択操作支援画像７３６乃至７３９とは、選択操作を行う際に用いられる操作部材が異なるため、異なる表示形態として表示する。この例では、選択操作支援画像７３１乃至７３５には、基準位置を示す白丸を楕円上に付す。また、選択操作支援画像７３６乃至７３９には、基準位置を示す黒丸を楕円上に付す。このように、選択操作を行う際に用いられる操作部材が異なる選択操作支援画像同士を容易に識別することができるように、それぞれの表示形態を変更して表示する。なお、選択操作支援画像の表示例および選択方法については、図４１および図４２を参照して詳細に説明する。

［選択操作支援画像の表示制御例］
図４１は、本発明の第２の実施の形態における選択操作内容決定部７１１により決定された選択操作内容を表す選択操作支援画像が撮像画像に重畳された場合における表示例を示す図である。図４１に示す撮像画像７５０は、選択操作内容決定部７１１により決定された選択操作支援画像７３１乃至７３９が、サッカー選手７５１乃至７５９の各顔に重畳された撮像画像である。ここで、選択操作支援画像７３１乃至７３５については、例えば、本発明の第１の実施の形態と同様に配置を決定することができる。また、選択操作支援画像７３６乃至７３９については、選択操作支援画像７３１が付される顔の位置を基準として、選択操作支援画像７３１乃至７３５が付された顔以外の顔に、本発明の第１の実施の形態と同様に配置を決定することができる。すなわち、選択操作支援画像７３１が付される顔の位置を基準として、選択操作支援画像７３１乃至７３５の配置を優先的に決定した後に、選択操作支援画像７３６乃至７３９の配置を決定することができる。

ここで、図４１に示す撮像画像７５０が表示されている場合において、選択操作支援画像７３２乃至７３９が付されている顔を基準顔として選択するための選択操作内容について説明する。なお、選択操作支援画像７３２乃至７３５が付されている顔を基準顔として選択する選択操作については、リング型操作部材７０２を用いる点以外は、本発明の第１の実施の形態と同様である。例えば、選択操作支援画像７３２乃至７３５の操作方向および操作範囲に従ってリング型操作部材７０２の回転操作を行う。

選択操作支援画像７３６乃至７３９が付されている顔を基準顔として選択する場合には、リング型操作部材７０２の回転操作とともに、補助操作部材７０３の押下操作を行う。例えば、補助操作部材７０３を押した状態で、選択操作支援画像７３６乃至７３９の操作方向および操作範囲に従ってリング型操作部材７０２の回転操作を行うことにより、所望の顔を基準顔として選択することができる。または、例えば、補助操作部材７０３を１度押した後に、選択操作支援画像７３６乃至７３９の操作方向および操作範囲に従ってリング型操作部材７０２の回転操作を行うことにより、所望の顔を基準顔として選択するようにしてもよい。

これらの補助操作部材７０３の押下げ操作の判定は、例えば、リング型操作部材７０２の回転操作が終了するまでに行う必要がある。例えば、リング型操作部材７０２の回転操作の停止が検出される前で、かつ、リング型操作部材７０２の回転操作により特定される操作範囲に達するまでに補助操作部材７０３の押下操作が行われた場合に、その押下げ操作が行われたと判定することができる。

また、補助操作部材７０３を１度押した後に、リング型操作部材７０２の回転操作を行うことにより、所望の顔を基準顔として選択する場合には、補助操作部材７０３の押下操作の解除設定を行う必要がある。この解除設定として、例えば、リング型操作部材７０２の回転操作の終了後に解除する設定、補助操作部材７０３をもう一度押下げて解除する設定、または、補助操作部材７０３の押下げ操作後一定時間後に解除する設定等の設定条件を用いることができる。

また、本発明の第１の実施の形態では、図２１乃至図２４において、基準顔以外の顔に付される選択操作支援画像のうち、撮影者の左右方向と異なる操作方向となる選択操作支援画像については、表示しない例を示した。本発明の第２の実施の形態では、例えば、同一方向について４種類の選択操作支援画像を表示させることができるため、図２１乃至図２４において選択操作支援画像が付されなかった顔についても選択操作支援画像を表示させることができる。この表示例を図４２に示す。

図４２は、本発明の第２の実施の形態における選択操作内容決定部７１１により決定された選択操作内容を表す選択操作支援画像が撮像画像に重畳された場合における表示例を示す図である。図４２に示す撮像画像７６０は、選択操作内容決定部７１１により決定された選択操作支援画像７３１乃至７３３、７３６、７３７が、サッカー選手７６１乃至７６５の各顔に重畳された撮像画像である。ここで、選択操作支援画像７３１乃至７３３については、例えば、図２１乃至図２４において示した配置と同様に配置を決定することができる。また、選択操作支援画像７３６および７３７については、選択操作支援画像７３６乃至７３９のうち、基準顔からの方向が同一方向となる選択操作支援画像が選択され、配置が決定される。なお、図４２に示す撮像画像７６０が表示されている場合において、選択操作支援画像７３１乃至７３３、７３６、７３７が付されている顔を基準顔として選択するための選択操作内容については、図４１に示す例と同様である。

このように、現在の基準顔が撮像画像に含まれる複数の顔の中で最も右側に存在している場合でも、撮影者の左右方向と同一の操作方向となる選択操作支援画像を４人に付して表示させることができる。これにより、選択操作が直感的にわかりやすい上に、選択対象者の数を増やすことができる。

このように、本発明の第２の実施の形態によれば、補助操作部材の押下げ操作を組み合わせることにより、簡易的な操作を維持しつつ選択操作の対象となる対象物を多くすることができる。

なお、本発明の第２の実施の形態では、円状の選択操作支援画像を表示して、選択操作部材としてリング型操作部材を用いる例を示したが、他の操作部材を用いる場合についても同様に適用することができる。例えば、内部の可変抵抗等により押し下げ量を検出することが可能なシーソー型操作部材を用いることができる。このシーソー型操作部材を用いる場合には、例えば、シーソー型操作部材の形状に応じた選択操作支援画像を表示するようにしてもよい。また、例えば、補助操作部材の使用により選択操作支援画像７３６乃至７３９が付された顔が選択可能となったことを撮像画像上に表示させるようにしてもよい。例えば、補助操作部材の押下げ操作時に選択可能となった顔に付された選択操作支援画像を異なる形態（例えば、点滅表示や色の変更により異なる表示形態とする）で表示させることができる。

＜３．第３の実施の形態＞
以上では、画像処理装置の一例として撮像装置を例にして説明した。以下では、他の画像処理装置について図面を参照して詳細に説明する。

［印刷装置の機能構成例］
図４３は、本発明の第３の実施の形態における印刷装置８００の機能構成例を示すブロック図である。ここで、印刷装置８００は、図４に示す撮像装置１００の変形例であるため、撮像装置１００と共通する部分については、同一の符号を付してこれらの説明を省略し、撮像装置１００と異なる部分を中心に説明する。印刷装置８００は、コンテンツ入力部８０１と、印刷処理部８０２とを備える。

コンテンツ入力部８０１は、操作受付部３１０により受け付けられた操作入力に応じて、動画（ビデオデータ）や静止画等のコンテンツを入力するものである。そして、このコンテンツが顔検出部２１０、顔識別部２２０、選択操作内容決定部２４０、表示制御部２６０および印刷処理部８０２に出力される。

印刷処理部８０２は、操作受付部３１０により受け付けられた操作入力に応じて、コンテンツ入力部８０１から出力されたコンテンツに対応する画像を印刷する処理を行うものである。例えば、印刷処理部８０２は、選択操作支援画像保持部２５０の保持内容に基づいて、印刷対象となる画像における所定領域を拡大して印刷する。なお、印刷処理部８０２は、特許請求の範囲に記載の出力制御部の一例である。

［選択操作支援画像の表示制御例］
図４４は、本発明の第３の実施の形態における印刷装置８００の外観および印刷装置８００のタッチパネル８１１に表示される画像を示す図である。図４４（ａ）には、印刷装置８００のタッチパネル８１１に表示される画像４２０を示し、図４４（ｂ）には、印刷装置８００の正面側の外観を簡略化して示す。なお、図４４（ａ）に示す画像４２０は、図１１（ａ）に示す画像と同様である。

印刷装置８００は、タッチパネル８１１およびダイヤル型操作部材８１２を備える。なお、タッチパネル８１１は、例えば、図４３に示す表示部２６１および操作受付部３１０に対応し、ダイヤル型操作部材８１２は、例えば、図４３に示す選択操作受付部３００に対応する。

印刷装置８００は、例えば、コンテンツ入力部８０１から出力されたコンテンツに対応する画像を印刷処理する前に、その画像をタッチパネル８１１に表示させて確認することができる。また、例えば、印刷装置８００は、タッチパネル８１１に表示されている画像の一部の領域を拡大して印刷することができる。例えば、タッチパネル８１１に表示されている画像に顔が含まれている場合には、その顔を含む画像領域を拡大して印刷することができる。例えば、タッチパネル８１１に表示されている画像において、所望の顔を押下して選択することができる。しかしながら、例えば、図４４（ｂ）に示すように、タッチパネル８１１のサイズが小さい場合には、タッチパネル８１１に表示されている画像に含まれる顔が小さくなり、見難い場合が想定される。また、この場合には、所望の顔を適切に選択することができない場合も想定される。

そこで、本発明の第３の実施の形態では、例えば、タッチパネル８１１に表示されている選択操作支援画像２５５乃至２５９に従って、ダイヤル型操作部材８１２の回転操作を行うことにより、所望の顔の選択操作を行う。これにより、印刷装置８００に大きいサイズのタッチパネルを設ける必要がなく、印刷装置８００に既に備えられているダイヤル型操作部材８１２を用いて所望の顔の選択操作を適切に行うことができる。

図４５は、本発明の第３の実施の形態における印刷装置８２０の外観を示す図である。この印刷装置８２０は、図４４に示す印刷装置８００の変形例であり、機能構成については印刷装置８００と同様であるため、ここでの説明を省略する。印刷装置８２０は、ダイヤル型操作部材８２１およびリモートコントローラー８３０を備える。このリモートコントローラー８３０には、ボタン型操作部材８３１およびダイヤル型操作部材８３２が設けられている。また、印刷装置８２０は、表示装置８２２と接続され、印刷対象となる画像を表示装置８２２に表示させることができる。なお、表示装置８２２は、例えば、図４３に示す表示部２６１に対応し、ボタン型操作部材８３１は、例えば、図４３に示す操作受付部３１０に対応し、ダイヤル型操作部材８２１および８３２は、例えば、図４３に示す選択操作受付部３００に対応する。印刷装置８２０は、例えば、コンテンツとして動画を入力し、この動画を構成する各画像を印刷処理する印刷装置（例えば、ビデオプリンタ）とすることができる。

印刷装置８２０は、印刷装置８００と同様に、例えば、コンテンツ入力部８０１から出力されたコンテンツに対応する画像を印刷処理する前に、その画像を表示装置８２２に表示させて確認することができる。また、例えば、印刷装置８２０は、表示装置８２２に表示されている画像の一部の領域を拡大して印刷することができる。そして、例えば、表示装置８２２に表示されている選択操作支援画像２５５乃至２５９に従って、ダイヤル型操作部材８２１または８３２の回転操作を行うことにより、所望の顔の選択操作を行う。また、例えば、ボタン型操作部材８３１を補助操作部材として使用して、顔の選択操作を行うようにしてもよい。これにより、表示装置８２２がタッチパネルでない場合でも、印刷装置８２０に既に備えられている各操作部材を用いて所望の顔の選択操作を適切に行うことができる。

＜４．第４の実施の形態＞
［再生装置の機能構成例］
図４６は、本発明の第４の実施の形態における再生装置８５０の機能構成例を示すブロック図である。ここで、再生装置８５０は、図４３に示す印刷装置８００の変形例であるため、印刷装置８００と共通する部分については、同一の符号を付してこれらの説明を省略し、印刷装置８００と異なる部分を中心に説明する。再生装置８５０は、コンテンツ入力部８０１および表示制御部８５１を備える。

表示制御部８５１は、操作受付部３１０により受け付けられた操作入力に応じて、コンテンツ入力部８０１から出力されたコンテンツに対応する画像を表示部２６１に表示させるものである。例えば、表示制御部８５１は、選択操作支援画像保持部２５０の保持内容に基づいて、表示対象となる画像における所定領域を拡大して表示する。なお、表示制御部８５１は、特許請求の範囲に記載の出力制御部の一例である。

［選択操作支援画像の表示制御例］
図４７および図４８は、本発明の第４の実施の形態における再生装置８５０の外観を示す図である。図４７および図４８に示す例では、再生装置８５０の正面側の外観を簡略化して示す。また、図４７に示す画像４２０は、図１１（ａ）に示す画像と同様である。また、図４８に示す画像８８０は、図４７に示す画像４２０の一部の領域を拡大表示した画像である。

再生装置８５０は、ダイヤル型操作部材８６１およびリモートコントローラー８７０を備える。このリモートコントローラー８７０には、ボタン型操作部材８７１およびダイヤル型操作部材８７２が設けられている。また、再生装置８５０は、表示装置８６２と接続され、入力されたコンテンツに対応する画像を表示装置８６２に表示させる。なお、表示装置８６２は、例えば、図４６に示す表示部２６１に対応し、ボタン型操作部材８７１は、例えば、図４６に示す操作受付部３１０に対応し、ダイヤル型操作部材８６１および８７２は、例えば、図４６に示す選択操作受付部３００に対応する。

再生装置８５０は、コンテンツ入力部８０１から出力されたコンテンツに対応する画像を表示装置８６２に表示させる場合に、例えば、表示されている画像の一部の領域を指定して拡大表示させることができる。例えば、図４８に示すように、サッカー選手４０３の顔の周辺画像を拡大して表示させることができる。しかしながら、例えば、サッカーの試合の動画を再生中に、所望の選手を選択して拡大表示させる場合には、各選手が動きまわっていることが多いため、その選択操作が困難であることが想定される。そこで、例えば、表示装置８６２に表示されている選択操作支援画像２５５乃至２５９に従って、ダイヤル型操作部材８６１または８７２の回転操作を行うことにより、所望の顔の選択操作を行う。また、例えば、ボタン型操作部材８７１を補助操作部材として使用して、顔の選択操作を行うようにしてもよい。これにより、再生装置８５０に既に備えられている各操作部材を用いて所望の顔の選択操作を適切に容易に行うことができる。

なお、本発明の第３および第４の実施の形態では、コンテンツ入力部８０１から入力されたコンテンツについて顔検出処理および顔識別処理を行い、これらの処理により取得された情報を用いて選択操作内容決定処理を行う例を示した。しかしながら、例えば、撮影時に行われた顔検出処理または顔識別処理等により取得された情報を用いるようにしてもよい。例えば、撮影時に顔検出処理または顔識別処理等を行い、これらの処理により取得された情報（顔情報、顔識別情報等）をメタデータとしてコンテンツに関連付けて記憶しておく。そして、メタデータが関連付けられたコンテンツをコンテンツ入力部８０１から入力し、そのメタデータを用いて選択操作内容決定処理を行うようにしてもよい。

ここで、画像から検出された顔の数が、選択操作支援画像の数よりも多い場合には、予め決められた割り当て方法により、一定の顔についてのみ選択操作支援画像を付すようにしてもよい。この割り当て方法として、例えば、次の（１）および（２）の何れかの割り当て方法を用いることができる。また、（１）および（２）を組み合せた割り当て方法を用いるようにしてもよい。
（１）顔検出処理または顔識別処理により算出される評価値が高い顔から順番に割り当てる。なお、顔識別処理により算出される評価値を優先して用いる。
（２）特定人物情報毎に優先度を登録しておき、優先度の高い顔から順番に割り当てる。

ただし、サッカーの試合のように各選手が動き回るような場合には、選択操作支援画像の割り当て対象となる顔が頻繁に変更される可能性がある。そこで、例えば、顔検出処理または顔識別処理により算出される評価値が規定時間以上、選択操作支援画像の割り当て対象となる順位以内の値となった場合にのみ、その評価値に対応する顔を割り当て対象とするようにしてもよい。

また、例えば、他の補助操作部材を用いて、その補助操作部材が押下げられた場合にのみ、選択操作支援画像を撮像画像に重畳して表示するようにしてもよい。ただし、その補助操作部材が押されていない状態でも、選択操作内容の決定処理は継続して行われる。その補助操作部材により選択操作支援画像が重畳された後には、例えば、リング型操作部材の回転操作の終了後に選択操作支援画像の表示を解除することができる。また、例えば、その補助操作部材をもう一度押下げることによる解除、または、その補助操作部材の押下げ後、一定時間経過後に解除する等の設定をするようにしてもよい。また、例えば、選択操作支援画像の付与対象となる顔の動き予想（例えば、特開２００８−９８７５５号参照。）により、その顔の位置関係が押し下げ後すぐに（例えば、１秒以内）入れ替わることが想定される場合には、入れ替え後の位置関係に基づいて重畳するようにしてもよい。これにより、撮像画像に重畳される選択操作支援画像が頻繁に変更されることを防止してユーザの好みに応じて表示を行うことができる。

また、顔識別処理を行う際に用いられる特定人物情報は、例えば、撮像装置１００により取得された画像に基づいて登録しておくことができるが、例えば、他の撮像装置により撮影された画像や、インターネットに掲載された情報等を利用するようにしてもよい。

また、本発明の実施の形態では、人の顔を対象物として検出する例について説明したが、例えば、自動車等の乗り物や動物等を対象物とする場合についても本発明の実施の形態を適用することができる。例えば、動くものを対象物としても容易に選択操作を行うことができる。また、本発明の実施の形態では、サッカーの試合を撮像している場合を例にして説明したが、例えば、陸上のゴールの正面シーンや競馬の横から見たシーン等を撮像する場合に本発明の実施の形態を適用することができる。

また、本発明の実施の形態では、人物の顔を用いて個人識別処理を行う例を示した。ここで、例えば、２チームで対戦する試合（サッカーやバレーボール等）の場合には、ユニフォームがチーム毎に統一（例えば、色や模様）されていることが多い。また、ユニフォームには、背番号等の個人を識別可能な番号が付されていることが多い。そこで、ユニフォームおよび背番号を用いて、個人識別処理を行うようにしてもよい。また、人物の顔を用いた個人識別処理と、ユニフォームおよび背番号を用いた個人識別処理とを同時に行うようにしてもよい。例えば、正面向きの人物の場合には、これらの各処理を同時に行うことにより、個人識別の精度を向上させることができる。また、例えば、後ろ向きの人物の場合には、ユニフォームおよび背番号を用いた個人識別処理を行うことにより、一度識別された人物を継続的に追従することができる。背番号の認識技術として、例えば、文字認識技術（例えば、ＯＣＲ（Optical Character Recognition）技術）を用いることができる。また、カーレース等を撮像する場合には、カーナンバー等の文字画像を利用することも可能である。

また、例えば、撮像装置１００からの被写体距離が基準顔と近い他の顔に付す選択操作支援画像については、ピントが合っている旨を通知するため、他の選択操作支援画像と異なる形態（例えば、色を変更する）に変更して表示するようにしてもよい。この被写体距離の推定は、例えば、顔の大きさに基づいて推定するようにしてもよく、コントラストに基づいて推定するようにしてもよい。

また、本発明の実施の形態では、左右方向の２段階の操作領域を設定する例を示したが、例えば、ユーザの操作の能力に応じて、３段階以上の操作領域を設定するようにしてもよい。この操作領域は、ユーザにより適宜設定可能とすることができる。

また、撮像機能付き携帯電話機、パーソナルコンピュータ等の画像処理装置に本発明の実施の形態を適用することができる。また、例えば、撮像装置および画像処理装置が装置間インターフェースで接続されている画像処理システムにおいて、撮像装置により生成された画像を画像処理装置が表示装置に表示させる場合に本発明の実施の形態を適用することができる。このシステムにおいて、例えば、画像処理装置において受け付けられた選択操作に基づいて、撮像装置自体を可動させる制御を行い、撮影範囲を変更しながら撮影を行うようにしてもよい。例えば、基準対象物に選択された対象物が撮像範囲の中心となるように撮像装置を可動させることができる。

なお、本発明の実施の形態は本発明を具現化するための一例を示したものであり、上述のように特許請求の範囲における発明特定事項とそれぞれ対応関係を有する。ただし、本発明は実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変形を施すことができる。

また、本発明の実施の形態において説明した処理手順は、これら一連の手順を有する方法として捉えてもよく、また、これら一連の手順をコンピュータに実行させるためのプログラム乃至そのプログラムを記憶する記録媒体として捉えてもよい。この記録媒体として、例えば、ＣＤ（Compact Disc）、ＭＤ（MiniDisc）、ＤＶＤ（Digital Versatile Disk）、メモリカード、ブルーレイディスク（Blu-ray Disc（登録商標））等を用いることができる。

１００ 撮像装置
１１１ 光学ブロック
１１２ レンズアイリスドライバ
１１３ ＣＣＤ
１１４ タイミング生成回路
１１５ ＣＣＤドライバ
１１６ 前処理回路
１１７ ＤＳＰ
１１８ ＳＤＲＡＭ
１１９ ＣＰＵ
１２０ ＲＡＭ
１２１ フラッシュＲＯＭ
１２２ 表示コントローラ
１２３ 操作部
１２４ ドライブコントローラ
１２５ リムーバブルメディア
１２６ 記録メディアインターフェース
１２７ 記録メディア
１２８ バス
１３０ 液晶モニタ
１３１ カラー液晶表示部
１３２ タッチパネル
１３５ ファインダ
１４１ シャッターボタン
１４２ レンズ
１４３ リング型操作部材
１４４〜１４６ ダイヤル型操作部材
２００ 撮像部
２０１ 撮像制御部
２１０ 顔検出部
２２０ 顔識別部
２３０ 特定人物情報記憶部
２４０ 選択操作内容決定部
２５０ 選択操作支援画像保持部
２６０ 表示制御部
２６１ 表示部
２７０ 記録制御部
２７１ 記録部
２８０ 基準対象物選択部
２９０ 姿勢検出部
３００ 選択操作受付部
３１０ 操作受付部
６１１ タッチパネル
７００ 撮像装置
７０１ レンズ鏡筒
７０２ リング型操作部材
７０３ 補助操作部材
７０４ 接眼ユニット
７０５ アイピース
７１１ 選択操作内容決定部
７１２ 基準対象物選択部
７１３ 補助操作受付部
７１４ 選択操作受付部
７２０ 選択操作支援画像保持部
８００ 印刷装置
８５０ 再生装置

Claims (17)

1. 画像に含まれる複数の対象物のうちの少なくとも１つの対象物を基準対象物とし、複数の操作位置を検出することが可能な操作部材による操作入力と、少なくとも１つの操作位置を検出することが可能な他の操作部材による操作入力との組合せにより前記複数の対象物のうちから前記基準対象物以外の他の対象物を選択するための選択操作内容を前記他の対象物毎に決定する選択操作内容決定部と、
   前記決定された選択操作内容を前記他の対象物毎に関連付けて表示させる表示制御部と
   を具備する画像処理装置。
2. 前記操作部材による操作入力と前記他の操作部材による操作入力とに対応する前記他の対象物を前記決定された選択操作内容に基づいて特定して当該特定された他の対象物を新たな基準対象物として選択する基準対象物選択部をさらに具備する請求項１記載の画像処理装置。
3. 前記操作部材による操作入力と前記他の操作部材による操作入力とを受け付ける操作受付部をさらに具備する請求項１記載の画像処理装置。
4. 前記画像に含まれる複数の対象物を検出する対象物検出部をさらに具備する請求項１記載の画像処理装置。
5. 前記選択操作内容決定部は、前記操作部材の操作方向および操作量と、前記他の操作部材の操作の要否とを前記他の対象物毎に前記選択操作内容として決定し、
   前記表示制御部は、前記決定された選択操作内容を表す選択操作支援画像を前記他の対象物毎に関連付けて表示させる
   請求項１記載の画像処理装置。
6. 前記操作部材は、前記画像を表示する表示面における接触操作を検出するタッチパネルであり、
   前記選択操作内容決定部は、前記選択操作内容として前記表示面における基準位置からの操作方向および操作量を前記他の対象物毎に決定し、
   前記基準対象物選択部は、前記画像が表示されている状態で前記タッチパネルにおける最初の接触操作が検出された位置を前記基準位置として当該基準位置からの連続した接触操作の方向および移動量に基づいて前記新たな基準対象物を選択する
   請求項２記載の画像処理装置。
7. 被写体を撮像して画像を生成する撮像部と、
   前記選択された基準対象物に基づいて撮像制御を行う撮像制御部と
   をさらに具備する請求項２記載の画像処理装置。
8. 前記選択された基準対象物に基づいて前記画像に関する出力制御を行う出力制御部をさらに具備する請求項２記載の画像処理装置。
9. 前記選択操作内容決定部は、前記選択操作内容として前記操作部材の操作方向および操作量を前記他の対象物毎に決定し、
   前記表示制御部は、前記決定された選択操作内容を表す選択操作支援画像を前記他の対象物毎に関連付けて表示させる
   請求項１記載の画像処理装置。
10. 前記選択操作内容決定部は、前記画像における前記基準対象物と前記他の対象物との位置関係に基づいて当該他の対象物の前記選択操作内容を決定する請求項１記載の画像処理装置。
11. 前記表示制御部は、前記画像において前記基準対象物にはその旨を関連付けて表示させるとともに前記他の対象物には選択対象である旨および前記決定された選択操作内容を表す選択操作支援画像を関連付けて表示させる請求項１記載の画像処理装置。
12. 前記表示制御部は、前記決定された選択操作内容を表す選択操作支援画像を前記画像における前記対象物の位置を示す標識として前記他の対象物毎に関連付けて表示させる請求項１記載の画像処理装置。
13. 前記表示制御部は、前記検出された対象物を含む対象物画像と当該対象物について決定された前記選択操作内容とを関連付けて前記画像の表示領域とは異なる表示領域に表示させる請求項４記載の画像処理装置。
14. 前記検出された対象物が特定対象物であるか否かを識別する識別部をさらに具備し、
    前記選択操作内容決定部は、前記検出された複数の対象物のうち前記特定対象物であると識別された対象物について前記選択操作内容を決定し、
    前記表示制御部は、前記決定された選択操作内容を前記特定対象物であると識別された対象物毎に関連付けて表示させる
    請求項４記載の画像処理装置。
15. 前記特定対象物を表す特定対象物画像を前記特定対象物毎に記憶する特定対象物画像記憶部をさらに具備し、
    前記表示制御部は、前記特定対象物であると識別された対象物に対応する前記特定対象物画像と当該対象物について決定された前記選択操作内容とを関連付けて前記画像の表示領域とは異なる表示領域に表示させる
    請求項１４記載の画像処理装置。
16. 画像に含まれる複数の対象物のうちの少なくとも１つの対象物を基準対象物とし、複数の操作位置を検出することが可能な操作部材による操作入力と、少なくとも１つの操作位置を検出することが可能な他の操作部材による操作入力との組合せにより前記複数の対象物のうちから前記基準対象物以外の他の対象物を選択するための選択操作内容を前記他の対象物毎に決定する選択操作内容決定手順と、
    前記決定された選択操作内容を前記他の対象物毎に関連付けて表示させる表示制御手順と
    を具備する画像処理方法。
17. 画像に含まれる複数の対象物のうちの少なくとも１つの対象物を基準対象物とし、複数の操作位置を検出することが可能な操作部材による操作入力と、少なくとも１つの操作位置を検出することが可能な他の操作部材による操作入力との組合せにより前記複数の対象物のうちから前記基準対象物以外の他の対象物を選択するための選択操作内容を前記他の対象物毎に決定する選択操作内容決定手順と、
    前記決定された選択操作内容を前記他の対象物毎に関連付けて表示させる表示制御手順と
    をコンピュータに実行させるプログラム。

Images