JP4821881B2 - 対象決定装置 - Google Patents

Description

本発明は、静止画像や動画像などを撮像する装置（スチルカメラやビデオカメラ等）への適用が有効な技術に関する。

撮像装置には、特定の被写体に対して焦点を合わせるオートフォーカスや、特定の被写体に応じて露出制御を実行する自動露出制御などの技術が搭載される。従来は、フレーム内で予め規定された特定の位置（例えばフレーム内の中央点）に存在する被写体に対してオートフォーカスや自動露出制御が実施されていた。しかし、ユーザのフレーミングの好みによっては、ユーザにとって注目したい被写体、即ちオートフォーカスや自動露出制御の対象としたい被写体がフレームの中央に位置するとは限らない。この場合、ユーザは、注目したい被写体をフレーム内の特定の位置に来るように撮像装置を操作し、そこでオートフォーカスや自動露出制御を行った後に、好みに応じたフレーミングを実施しなければならず、このような処理を行うことは煩わしい作業であった。

このような問題を解決する技術として、合焦させる対象や露出制御の対象を特定するために、予め撮像を実施する（以下、このような撮像を「予備撮像」と呼ぶ）技術がある。予備撮像を行う技術では、予備撮像において撮像された画像を用いて、合焦や露出制御の対象が特定される。

予備撮像を行う技術の具体的な例として、被写界（画像内）の人物の位置／範囲に関わらず画像内の人物の顔に合焦させる技術がある（特許文献１参照）。同様に、画像内の人物の位置／範囲に関わらず画像内の人物を適正露光とする技術がある（特許文献２参照）。

特開２００３−１０７３３５号公報 特開２００３−１０７５５５号公報

ところで、予備撮像における画像内において検出される人の顔の数が一つである場合には、無条件でこの顔に対して合焦や露出制御を行えば良かった。しかし、予備撮像における画像内において複数の人物の顔が検出された場合にいずれの顔に対して合焦や露出制御を行うべきか、これまで十分に考慮されていなかった。例えば、フレーム中央に写っている人の顔が、ユーザが被写体として望んでいる顔であるという方針の元に、フレーム中央に最も近い人の顔に対して合焦や露出制御を行う技術はあった。しかし、このような技術は、ユーザが被写体として最も望んでいる顔はフレーム内に一つであるという前提に基づいており、フレーム内に同等に被写体として望まれる顔が複数存在する場合には的確に対処できていなかった。

本発明では、このような問題を解決し、予備撮像において複数の人物の顔が検出された場合に、いずれの顔に対して合焦や露出制御を行うべきかを判断する装置を提供することを目的とする。

〔第一の態様〕
以下の説明において、肌の色とはあらゆる人の肌の色を意味し、特定の人種の肌の色には限定されない。

上記問題を解決するため、本発明は以下のような構成をとる。本発明の第一の態様は対象決定装置であって検出手段と決定手段とを含む。本発明の第一の態様は、検出される顔の位置に応じて、合焦や露出制御を行うべき対象となる顔を決定する。なお、本発明の第一の態様によって決定された顔は、合焦や露出制御に限らずどのような処理の対象とされても良い。例えば、色補正（ホワイトバランスの補正）や、輪郭強調などの処理を行う対象とされても良い。

具体的には、検出手段は、入力された画像から人の顔を検出する。検出手段は、画像中から複数の人の顔を検出することが可能な技術であれば、既存のどのような顔検出技術が適用されても良い。例えば、肌の色を有する領域が顔の領域として検出されても良い。他の例として、顔や顔の部位のテンプレートを用いた検出技術や、濃淡差に基づいて顔の領域を検出する技術などがある。

決定手段は、検出手段において複数の人の顔が検出されたときに、当該複数の人の顔の位置に基づいて、当該複数の人の顔から、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔を決定する。決定手段は、個々の顔の位置を独立して考慮することにより決定を行うのではなく、複数の顔の位置に基づいて決定を行う。即ち、決定手段は、少なくとも複数の顔の相対的な位置関係に基づいて決定を行う。決定手段は、顔の位置を、顔に含まれる点の位置として捉えても良いし、顔の領域の位置として捉えても良い。

なお、決定手段によって決定された顔の一部（例：目，鼻，額，口，耳）に対して合焦や露出制御が行われるように構成されても良い。

本発明の第一の態様によれば、検出された複数の顔の位置に基づいて、合焦や露出制御の対象となる顔が決定される。このため、予備撮像された画像から、合焦や露出制御の対象とすべき顔の数よりも多くの顔が検出された場合であっても、所定の数の顔を決定することが可能となる。

また、検出された各々の顔の位置について独立して考慮するのではなく、複数の顔の相対的な位置に基づいて、合焦や露出制御の対象となる顔が決定される。このため、検出された複数の顔の状況（例：顔の密集度合い，顔の密集している位置）に応じて、合焦や露出制御の対象となる顔が決定される。このため、検出された複数の顔の状況に応じた合焦処理や露出制御を行う事が可能となる。

次に、本発明の第一の態様における決定手段のより具体的な構成について説明する。本発明の第一の態様における決定手段は、中心決定手段と顔決定手段とを含むように構成されても良い。

中心決定手段は、検出手段において検出された複数の人の顔の位置に基づいて、これら複数の人の顔の位置の中心を決定する。ここで言う中心とは、概念的な中心を示す。例えば、ある３点について中心と言った場合、外心や内心や垂心や重心など複数の概念的な中心を示す。このように、ここで言う中心とは、ある概念に従って求められる真ん中を示す。

具体的には、中心決定手段は、複数の人の顔の位置に対して外接する多角形の中心を求
めるように構成されても良い。このとき、多角形はあらかじめ決められた数の頂点を有する多角形であっても良い。この場合、生成される多角形は、必ずしも全ての人の顔を頂点として有する必要はない。

例えば、外接する多角形が三角形である場合、中心決定手段は、求められた三角形の外心，内心，垂心，重心のいずれかを中心として取得する。

また、例えば、外接する多角形が四角形である場合、中心決定手段は、求められた四角形の対角線の交点を中心として取得する。また、例えば、外接する多角形が四角形である場合、中心決定手段は、この四角形を二つの三角形に分割し、それぞれの三角形について外心，内心，垂心，重心のいずれかを取得し、取得された２点に基づいて中心を取得するように構成されても良い。

また、例えば、外接する多角形の頂点の数が５点以上である場合、中心決定手段は、外接する多角形を複数の三角形に分割し、各三角形について外心，内心，垂心，重心のいずれかを取得し、取得された点を用いて新たな多角形を構成し、この多角形について上記の処理を繰り返すことによって中心を取得するように構成されても良い。

また、中心決定手段は、複数の人の顔の位置の重心を中心として決定するように構成されても良い。

次に、顔決定手段の構成について説明する。顔決定手段は、中心決定手段によって求められた中心の位置に基づいて、対象となる顔を決定する。顔決定手段は、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔の数に従って、対象となる顔を決定する。

具体的には、顔決定手段は、中心の最も近くに位置する人の顔を対象となる顔として決定するように構成されても良い。

また、顔決定手段は、中心から所定の距離内に位置する顔の中から所定の基準に従って対象となる顔を決定するように構成されても良い。所定の基準とは、例えば顔の大きさに基づいたもの（例：最も大きな顔を決定するという基準，中間の大きさの顔を決定するという基準，最小の顔を決定するという基準）であっても良いし、画像中における顔の位置に基づいたもの（例：画像の中央に最も近い顔という基準）であっても良いし、顔の向きに基づいたもの（例：正面を向いている顔という基準）であっても良いし、顔らしさに基づいたもの（例：顔らしさの度合いを示す量が最も大きな顔を決定するという基準）であても良いし、顔から推定される性別に基づいたもの（例：男と推定された顔を決定するという基準，女と推定された顔を決定するという基準）であっても良いし、顔から推定される年代に基づいたもの（最も若い年代と推定された顔を決定するという基準，中間の年代と推定された顔を決定するという基準）であっても良いし、その他どのような基準であっても良い。また、所定の基準とは、上記した基準を適宜複数組み合わせたものであっても良い。

このように構成された本発明の第一の態様では、複数の顔の相対的な位置の基準として、複数の顔の位置の中心に基づき、合焦や露出制御の対象となる顔が決定される。例えば、複数の顔の略中心に位置する顔が、合焦や露出制御の対象とすべき顔として決定される。集団が撮影される状況（複数の顔が密集している状況）においては、ユーザは、その集団の中央付近の顔に対して合焦や露出制御を（無意識のうちに）行う場合が多い。このため、そのようなユーザのマニュアルによる操作を自動的に実現することで、ユーザの手間を省くことが可能となる。従って、オートフォーカスや自動露出制御において、集団にお
ける複数の顔の中央付近に位置する顔に対して合焦や露出制御を行うことが一般的に望ましい。そして、上記のように構成された本発明の第一の態様によれば、上記のような望ましい制御を自動的に行うことが可能となり、ユーザの手間を省くことが可能となる。

また、本発明の第一の態様における決定手段は、複数の人の顔のうち最下方に位置する顔を前記対象となる顔として決定するように構成されても良い。なお、最下方の顔とは厳密に最下方に位置する顔である必要はなく、例えば下から２番目に位置する顔であっても、下から３番目に位置する顔であっても良い。人の顔が縦に並ぶ状態で集合写真が撮像される場合、一般的に下方に位置する顔ほど撮像装置に対する距離が近い顔となる。例えば、前列の者がかがみ、後列の者が立って写真を撮像する場合に上記の状態となる。また、例えば、ひな壇を使用して集合写真が撮像された場合に上記の状態となる。このため、最下方に位置する顔が、合焦や露出制御の対象の顔とされることにより、撮像装置に最も近い顔に対して合焦や露出制御が実行される可能性が高くなる。

本発明の第一の態様は、分類手段と集合決定手段とをさらに含むように構成されても良い。分類手段は、検出手段で複数の人の顔が検出されたときに、検出された複数の人の顔を、それぞれの位置に基づいて複数の集合に分類する。より具体的には、分類手段は、一般的なクラスタリング手法を用いることにより、画像中の位置が近い顔同士が同じ集合に含まれるように、検出された複数の顔を複数の集合に分類する。

集合決定手段は、分類手段によって分類された複数の集合の中から、合焦や露出制御の対象となる顔を決定するための集合（即ち、合焦や露出制御の対象となる顔を含む集合：「選択集合」と称する）を決定（選択）する。即ち、最終的に集合決定手段によって決定された選択集合に含まれる顔から、合焦や露出制御の対象となる顔が決定される。

集合決定手段は、どのような基準に基づいて選択集合を決定しても良い。例えば、集合決定手段は、各集合に含まれる顔の数に基づいて選択集合を決定しても良いし、各集合に含まれる複数の顔の位置の中心に基づいて選択集合を決定しても良いし、各集合に含まれる顔に基づいて取得される特徴量（例えば、顔の大きさ、顔の向き、顔の数などに基づいて取得される量，顔から推定される特定の性別の度数，顔から推定される特定の年代の度数，又は顔らしさの度合いを示す量）に基づいて選択集合を決定しても良い。

本発明の第一の態様が上記のような分類手段及び集合決定手段を含むように構成される場合、決定手段は、選択集合に含まれる人の顔に基づいて、選択集合に含まれる人の顔の中から、対象となる顔を決定するように構成される。

このように構成された本発明の第一の態様によれば、画像中の複数の顔が複数の集合に分けられ、複数の集合から処理の対象となる顔を決定するための選択集合が決定される。そして、決定された選択集合に含まれる顔から、決定手段が最終的に処理の対象となる顔を決定する。

このため、画像中に複数の顔の集合が存在する場合に、複数の集合に含まれる顔全てに基づいて処理の対象となる顔が決定されるのではなく、いずれかの集合に含まれる顔のみに基づいて処理の対象となる顔が決定される。従って、集合決定手段によって決定された選択集合に含まれる顔のみに応じた制御を行うことが可能となる。例えば、画像中に複数人の集団が離れて存在した場合、これらの集団に平均した処理ではなく、いずれかの集団に特化した合焦及び／又は露出制御を行うことが可能となる。また、例えば画像中に集団と孤立した人とが存在する場合、この孤立した人を含めることなく、集団又は孤立した人の一方のみに特化した合焦及び／又は露出制御を行うことが可能となる。

本発明の第一の態様は、決定手段によって決定された人の顔を、他の顔と区別して表示する表示手段をさらに含むように構成されても良い。表示手段は、例えば決定された人の顔の周囲に枠を表示することにより、他の顔と区別して表示する。また、表示手段は、例えば決定された人の顔の周囲に、他の顔の周囲に表示される枠と異なる色や太さや形の枠を表示することにより、他の顔と区別して表示する。また、表示手段は、例えば決定された人の顔に対して他の顔と異なる画像処理を施して表示することにより、他の顔と区別して表示する。

〔第二の態様〕
本発明の第二の態様は、対象決定装置であって、検出手段及び決定手段を含む。このうち、検出手段は本発明の第一の態様と同様の構成をとる。

本発明の第二の態様における決定手段は、検出手段で複数の人の顔が検出されたときに、検出された顔の数を基準としてその真ん中に位置する人の顔を、合焦や露出制御の対象となる顔として決定する。この決定手段は、検出された顔の数を計数し、計数された数の中間値に基づいて顔を決定する。例えば、この決定手段は、各顔をそのｘ座標を元にソートし、上記した中間値の順位に相当する顔を対象となる顔として決定する。この決定手段は、ｘ座標ではなくｙ座標に基づいて対象となる顔を決定しても良い。また、この決定手段は、ｘ座標及びｙ座標に基づいてそれぞれ顔を選択し、同一の顔が選択された場合にはこの顔を対象となる顔として決定し、異なる顔が選択された場合には所定の基準に基づいていずれかの顔が対象となる顔として決定されるように構成されても良い。

本発明の第二の態様によれば、複数の顔の位置の中心に基づいて対象となる顔を決定するように構成された本発明の第一の態様と同様の効果を、擬似的に得ることが可能となる。また、本発明の第二の態様によれば、複数の顔の位置の中心を取得する必要が無い。即ち、顔の計数とデータのソートとを実行すれば足り、幾何学的な計算を実行する必要がない。このため、汎用な情報処理装置を用いた場合には、本発明の第一の態様に比べて高速に処理を実行することが可能となる。

また、本発明の第二の態様は、本発明の第一の態様と同様に、分類手段及び集合決定手段をさらに含むように構成されても良い。この場合、本発明の第二の態様における決定手段は、選択集合に含まれる人の顔に基づいて、対象となる顔を決定する。

〔第三の態様〕
本発明の第三の態様は、対象決定装置であって、検出手段，分類手段，暫定決定手段，及び最終決定手段を含む。このうち、検出手段及び分類手段は、本発明の第一の態様と同様の構成をとる。

本発明の第三の態様における暫定決定手段は、分類手段によって生成される複数の集合それぞれにおいて、合焦や露出制御の対象となる顔を暫定的に決定する。言い換えれば、暫定決定手段は、複数の集合それぞれについて、当該集合に含まれる人の顔から、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔を決定する。このとき、暫定決定手段はどのような基準に基づいて対象となる顔を決定しても良い。例えば、暫定決定手段は、本発明の第一の態様や第二の態様に示される決定手段と同様の処理によって、対象となる顔を決定しても良い。また、例えば、暫定決定手段は、本発明の第一の態様の顔決定手段における所定の基準に基づいて、対象となる顔を決定しても良い。

本発明の第三の態様における最終決定手段は、暫定決定手段によって決定された顔の中から、合焦や露出制御の対象となる顔を最終的に決定する。例えば、最終決定手段は、各
集合において暫定決定手段によって決定された顔の中から、本発明の第一の態様や第二の態様に示される決定手段と同様の処理によって、対象となる顔を最終的に決定しても良い。また、例えば、最終決定手段は、各集合において暫定決定手段によって決定された顔の中から、本発明の第一の態様の顔決定手段における所定の基準に基づいて、対象となる顔を最終的に決定しても良い。

本発明の第三の態様によれば、分類手段と集合決定手段とをさらに含むように構成された本発明の第一の態様や第二の態様と同様の効果を得ることが可能となる。また、本発明の第三の態様によれば、分類手段と集合決定手段とを含むことによる効果を維持したまま、対象となる顔を決定する際に様々な基準に基づいてこの顔を決定することが可能となる。

〔第四の態様〕
本発明の第四の態様は、対象決定装置であって、検出手段，ブロック決定手段，及び決定手段を含む。

本発明の第四の態様における検出手段は、入力された画像が分割された複数のブロックのそれぞれにおいて人の顔を検出する。入力された画像がどのようなブロックに分けられるかは予め定められていても良いし、動的に決定されても良い。

ブロック決定手段は、検出手段による検出結果に基づいて、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔を決定するためのブロック（即ち、合焦や露出制御の対象となる顔を含むブロック：「選択ブロック」と称する）を決定する。例えば、本発明の第一の態様における集合決定手段と同様の基準に従ってブロックを決定することができる。

本発明の第四の態様における決定手段は、選択ブロックに含まれる顔から、対象となる顔を決定する。このとき、この決定手段はどのような基準に基づいて対象となる顔を決定しても良い。例えば、この決定手段は、本発明の第一の態様や第二の態様に示される決定手段と同様の処理によって、対象となる顔を決定しても良い。また、例えば、この決定手段は、本発明の第一の態様の顔決定手段における所定の基準に基づいて、対象となる顔を決定しても良い。

〔第五の態様〕
本発明の第五の態様は、対象決定装置であって、検出手段，判断手段，選択手段，及び決定手段を含む。このうち、検出手段は、本発明の第一の態様と同様の構成をとる。

判断手段は、検出手段において複数の顔が検出されたときに、検出された人の顔のうち最大の顔を判断する。判断手段は、例えば、検出された人の顔における肌の色のピクセル数によって大きさを判断しても良い。また、判断手段は、例えば人の顔として検出される際に用いられる顔矩形の大きさによって顔の大きさを判断しても良い。判断手段は、その他どのような基準に従って顔の大きさを判断するように構成されても良い。なお、最大の顔とは厳密に最大である必要はなく、例えば２番目に大きな顔であっても、３番目に大きな顔であっても良い。

選択手段は、検出された顔のうち最大の顔、及びこの顔の大きさから所定の範囲内の大きさを有する他の顔を選択する。

本発明の第五の態様における決定手段は、選択手段によって選択された顔の中から、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔
を決定する。このように、本発明の第五の態様における決定手段は、検出手段によって検出された複数の顔全ての位置に基づいて対象となる顔を決定するのではなく、検出された顔のうち最大の顔及びこの顔の大きさから所定の範囲内の大きさを有する他の顔の中から、対象となる顔を決定する。この決定手段は、どのような基準に基づいて対象となる顔を決定しても良い。例えば、この決定手段は、本発明の第一の態様や第二の態様に示される決定手段と同様の処理によって、対象となる顔を決定しても良い。また、例えば、この決定手段は、本発明の第一の態様の顔決定手段における所定の基準に基づいて、対象となる顔を決定しても良い。

本発明の第五の態様によれば、合焦用の画像内において相対的にある程度の大きさをもった顔のみに基づいて、合焦の対象となる顔が選択される。このため、背景として写ってしまった人、即ちユーザが被写体として意識していない人の顔が処理の対象として含まれることが防止される。従って、例えばこの決定手段が本発明の第一の態様における決定手段と同様の処理を行う場合、合焦の対象となる顔を含む集合を選択する処理や、集合に含まれる顔に基づいた中心を取得する処理や、合焦の対象となる顔を選択する処理の精度が向上する。

〔第六の態様〕
本発明の第六の態様は、対象決定装置であって、検出手段，分類手段，集合決定手段，及び決定手段を含む。このうち、検出手段，分類手段，及び集合決定手段は、第一の態様と同様の構成をとる。

本発明の第六の態様における決定手段は、集合決定手段によって決定された集合に含まれる顔の中から、対象となる顔を決定する。このとき、この決定手段は、どのような基準に基づいて対象となる顔を決定しても良い。例えば、この決定手段は、本発明の第一の態様や第二の態様に示される決定手段と同様の処理によって、対象となる顔を決定しても良い。また、例えば、この決定手段は、本発明の第一の態様の顔決定手段における所定の基準に基づいて、対象となる顔を決定しても良い。

本発明の第六の態様によれば、本発明の第三の態様と同様の効果を得ることができる。

〔第七の態様〕
本発明の第七の態様は、対象決定装置であって、検出手段，特徴量取得手段，及び決定手段を含む。このうち、検出手段は、本発明の第一の態様と同様の構成をとる。

特徴量取得手段は、検出手段において検出された複数の人の顔それぞれについて、人の顔度合いを示す特徴量を取得する。「人の顔度合い」とは、例えば、ある画像が人の顔であるか否かを分ける識別境界線からの距離によって与えられる。人の顔度合いとは、検出手段における顔検出処理の際に取得される値を用いて示されても良い。

決定手段は、特徴量に基づいて、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔を決定する。

〔その他〕
本発明の第一の態様から第七の態様は、プログラムが情報処理装置によって実行されることによって実現されても良い。即ち、本発明は、上記した第一の態様から第七の態様における各手段が実行する処理を、情報処理装置に対して実行させるためのプログラム、或いは当該プログラムを記録した記録媒体として特定することができる。

以上述べた本発明によれば、予備撮像において複数の人物の顔が検出された場合に、検出された複数の顔の位置や大きさ等に基づいて、いずれの顔に対して合焦や露出制御を行うべきかが自動的に判断される。

第一実施形態の機能ブロックを示す図である。 外接多角形法を説明するための図である。 重心法を説明するための図である。 顔決定部の処理を説明するための図である。 第一実施形態の動作例を示すフローチャートである。 第一実施形態の動作例の一部を示すフローチャートである。 第一実施形態の動作例の一部を示すフローチャートである。 第二実施形態の機能ブロックを示す図である。 分類部の処理例を示す図である。 第二実施形態における決定部の処理例を示す図である。 第二実施形態の動作例の一部を示すフローチャートである。 第二実施形態における効果を示すための図である。 第三実施形態の機能ブロックを示す図である。 第三実施形態の動作例の一部を示すフローチャートである。 第四実施形態の機能ブロックを示す図である。 複数のブロックに分けられた合焦用の画像の例を示す図である。 第四実施形態における決定部の処理例を示す図である。 第四実施形態の動作例の一部を示すフローチャートである。 第五実施形態の機能ブロックを示す図である。 最大顔選択部の処理例を示す図である。 候補選択部の処理例を示す図である。 第五実施形態の動作例の一部を示すフローチャートである。

以下に、図を用いて合焦対象決定部５（５ａ，５ｂ，５ｃ，５ｄ，５ｅ）を備える撮像装置１（１ａ，１ｂ，１ｃ，１ｄ，１ｅ）について説明する。この説明において、人物画像とは、少なくとも人物の顔の一部または全部の画像を含む画像である。従って、人物画像とは、人物全体の画像を含んでも良いし、人物の顔だけや上半身だけの画像を含んでも良い。また、複数の人物についての画像を含んでも良い。さらに、背景に人物以外の風景（背景：被写体として注目された物も含む）や模様などのいかなるパターンが含まれても良い。

なお、合焦対象決定部５や撮像装置１についての以下の説明は例示であり、その構成は以下の説明に限定されない。

［第一実施形態］
〔システム構成〕
まず、合焦対象決定部５ａを備える撮像装置１ａについて説明する。合焦対象決定部５ａは、合焦対象決定部５の第一実施形態である。

撮像装置１ａは、ハードウェア的には、バスを介して接続されたＣＰＵ（中央演算処理装置），主記憶装置（ＲＡＭ（Read Only Memory）），補助記憶装置，及びデジタルスチルカメラやデジタルビデオカメラとして動作するための各装置（撮像レンズ，メカ機構，ＣＣＤ（Charge-Coupled Devices），操作部，モータ等）などを備える。補助記憶装置は、不揮発性記憶装置を用いて構成される。ここで言う不揮発性記憶装置とは、いわゆるＲ
ＯＭ（Read-Only Memory：ＥＰＲＯＭ（Erasable Programmable Read-Only Memory），ＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory），マスクＲＯＭ
等を含む），ＦＲＡＭ（Ferroelectric RAM），ハードディスク等を指す。

図１は、撮像装置１ａの機能ブロックを示す図である。撮像装置１ａは、補助記憶装置に記憶された各種のプログラム（ＯＳ，アプリケーションプログラム等）が主記憶装置にロードされＣＰＵにより実行されることによって、入力部２，撮像部３，画像記憶部４，合焦対象決定部５ａ，及び測距部１０等を含む装置として機能する。合焦対象決定部５ａは、合焦対象決定プログラムがＣＰＵによって実行されることにより実現される。また、合焦対象決定部５ａは、専用のハードウェアとして実現されても良い。

以下、図１を用いて、撮像装置１ａに含まれる各機能部について説明する。

〈入力部〉
入力部２は、シャッターレリーズボタン等を用いて構成される。入力部２は、ユーザによる命令の入力を検知すると、入力された命令に従って、撮像装置１ａの各部に対して命令の通知を行う。例えば、入力部２は、ユーザによるオートフォーカスの命令の入力を検知すると、撮像部３に対し、オートフォーカスの命令を通知する。また、例えば入力部２は、ユーザによる撮像の命令の入力を検知すると、撮像部３に対し、撮像の命令を通知する。

入力部２がシャッターレリーズボタンを用いて構成される場合、オートフォーカスの命令は、例えばこのシャッターレリーズボタンが半押しされることにより入力部２によって検知される。また、撮像の命令は、例えばこのシャッターレリーズボタンが完全に押下されることにより入力部２によって検知される。

〈撮像部〉
撮像部３は、撮像レンズ，メカ機構，ＣＣＤ，モータ等を用いて、オートフォーカス機能を備える装置として構成される。撮像レンズは、例えばズーム機能を実現するためのズームレンズや、任意の被写体に対して焦点を合わせるためのフォーカスレンズ等を含む。メカ機構は、メカニカルシャッタや絞りやフィルタ等を含む。モータは、ズームレンズモータやフォーカスモータやシャッターモータ等を含む。

撮像部３は、不図示の記憶部を備え、この記憶部に所定の焦点情報を記憶する。所定の焦点情報とは、予め定められた一つの焦点情報である。撮像装置１ａの電源がオンとなっている場合であって測距部１０から焦点情報の入力が無い場合、撮像部３のフォーカスレンズは、この所定の焦点情報に基づいた状態となるように制御される。一方、測距部１０から焦点情報の入力が有る場合、撮像部３のフォーカスレンズは、入力された焦点情報に基づいた状態となるように制御される。

撮像部３は、上記のように制御されたフォーカスレンズを含む撮像レンズを通して結像された被写体の画像を、ＣＣＤにより電気信号に変換することにより撮像を行う。

〈画像記憶部〉
画像記憶部４は、いわゆるＲＡＭ等の読み書き可能な記録媒体などを用いて構成される。画像記憶部４は、撮像装置１ａに対して着脱可能な記録媒体を用いて構成されても良い。画像記憶部４は、撮像部３によって撮像される画像のデータを記憶する。

〈合焦対象決定部〉
合焦対象決定部５ａは、撮像部３によって撮像された被写体から、焦点を合わせる被写
体、即ち合焦の対象となる顔を決定する。このとき、合焦対象決定部５ａは、撮像部３によって合焦用に撮像された画像を用いて処理を行う。この合焦用に撮像された画像は、撮像部３によって合焦対象決定部５ａに入力される。

合焦対象決定部５ａは、顔検出部６ａ及び決定部７ａを含む。以下、合焦対象決定部５ａを構成する各機能部について説明する。

〈顔検出部〉
顔検出部６ａは、合焦用の画像から人物の顔を含む領域（以後「顔領域」と呼ぶ）の座標を得る。この顔矩形の座標により、合焦用の画像における人の顔領域の位置や大きさが特定される。

顔領域の検出は、既存のどのような技術を適用することにより実現されても良い。例えば、顔全体の輪郭に対応した基準テンプレートを用いたテンプレートマッチングによって顔矩形の座標が得られても良い。また、顔の構成要素（目，鼻，耳など）に基づくテンプレートマッチングによって顔矩形の座標が得られても良い。また、クロマキー処理によって頭髪の頂点が検出され、この頂点に基づいて顔矩形の座標が得られても良い。また、肌の色領域の検出に基づいて顔矩形の座標が得られても良い。

〈決定部〉
決定部７ａは、顔検出部６ａによって検出された顔の中から、合焦の対象となる顔を決定する。決定部７ａは、決定された顔に関する顔矩形の座標（例：顔矩形の中央を示す座標）を測距部１０に渡す。決定部７ａは、中心決定部８ａ及び顔決定部９ａを含む。以下、決定部７ａを構成する各機能部について説明する。

〈中心決定部〉
中心決定部８ａは、顔検出部６ａによって検出された顔が複数である場合、検出された複数の顔の位置の中心を求める。ここでは、顔矩形の中央の点（以下、「顔点」と呼ぶ）が顔の位置を示すものとする。検出された顔が二つである場合は、中心決定部８ａは、二つの顔点の中点を求める。また、検出された顔が三つ以上である場合は、中心決定部８ａは、以下のいずれかの方法により中心を求める。

《外接多角形法》
外接多角形法では、中心決定部８ａは、複数の顔点に外接する多角形の中心を、複数の顔の位置の中心として求める。用いられる多角形の頂点数は、いくらであっても良く、あらかじめ定められる。ここでは、頂点数が４点である場合について説明する。

図２は、外接多角形法に基づいて中心決定部８ａが中心を取得する処理を説明するための図である。中心決定部８ａは、複数の顔点におけるｘ座標及びｙ座標それぞれについて、最大値及び最小値を判断する。中心決定部８ａは、ｘ座標の最大値，最小値をとる顔点を含むｙ軸に平行な直線と、ｙ座標の最大値，最小値をとる顔点を含むｘ軸に平行な直線とによって生成される矩形（直交座標系において、ｘ軸、ｙ軸に平行で且つ顔点座標の各座標成分の最大値及び最小値を夫々通過する各線の交点が頂点を構成する矩形）を生成する。そして、中心決定部８ａは、生成された矩形の対角線の交点の座標を中心の座標として取得する。

《重心法》
図３は、重心法に基づいて中心決定部８ａが中心を取得する処理を説明するための図である。重心法では、中心決定部８ａは、複数の顔点の重心を取得する。具体的には、中心決定部８ａは、各顔点の位置ベクトルの和を顔点の数で除算することにより重心の位置ベ
クトルを取得し、この位置ベクトルに基づいて重心の座標を取得する。そして、中心決定部８ａは、取得された重心の座標を中心の座標として取得する。図３には、６つの顔点に対し、或る基準点（例えば各顔点の座標成分それぞれの最小値によって示される点）からの位置ベクトルが夫々求められ、重心座標（Ｘg,Ｙg）が求められる様子が示されている
。

〈顔決定部〉
顔決定部９ａは、中心決定部８ａによって取得された中心の座標に基づいて、いずれの顔に基づいて合焦を行えばよいか決定する。図４は、顔決定部９ａによる処理を説明するための図である。顔決定部９ａは、中心から所定の距離内に位置する顔の中から所定の基準に従って顔を選択する。このとき、顔決定部９ａは、顔の大きさ、顔の位置、顔の向きなどどのような基準に基づいて顔を決定しても良い。例えば、顔決定部９ａは、中心決定部８ａによって取得された中心から所定の距離内に位置する顔の中で、画像（フレーム）の中央点（図４でシンボル「×」により図示）に最も近い顔（太線の円で囲まれた顔点）を選択する。

図４に示す例では、顔点の中心ＦＯから所定の距離Ｒを半径とする円Ｃ１内に存する二つの顔点Ｆ１及びＦ２について、画像（フレーム）の中心点Ｏとの距離Ｌ１及びＬ２が測定される。そして、Ｌ１＜Ｌ２であることから、顔点Ｆ１が合焦対象の顔点（即ち、合焦対象の顔）として決定される。

顔決定部９ａは、選択された顔点の座標を測距部１０へ渡す。

〈測距部〉
測距部１０は、合焦対象決定部５ａの顔決定部９ａによって決定された顔に焦点を合わせるための焦点情報を取得する。このとき測距部１０は、顔決定部９ａから入力される二次元座標（顔点の座標）を元に、焦点を合わせるための被写体を特定する。測距部１０により実施される測距は、例えば顔の実物に対して赤外線を射出することによって実施される（アクティブ方式）が適用されても良いし、このようなアクティブ方式以外の方式（例えばパッシブ方式）が適用されても良い。

例えば、測距部１０は、赤外線などを被写体に対して射出することにより被写体までの距離を測距することにより焦点情報を取得するように構成される。この場合、測距部１０は、顔決定部９ａから入力される二次元座標を元に、赤外線などを射出する方向を決定する。

測距部１０は、焦点情報を取得すると、取得された焦点情報を撮像部３へ渡す。

〔動作例〕
図５は、撮像装置１ａの動作例を示すフローチャートである。以下、図５を用いて撮像装置１ａの動作例について説明する。

撮像装置１ａに電源が投入されると、撮像部３は、フォーカスレンズを所定の焦点情報に基づいた状態となるように制御する。

入力部２は、シャッターレリーズボタンがユーザによって半押しされたことを検知すると（Ｓ０１）、オートフォーカスの命令が入力されたことを撮像部３へ通知する。

撮像部３は、測距部１０から焦点情報が入力されているか否かを判断する。焦点情報が入力されていない場合（Ｓ０２−ＮＯ）、撮像部３は、合焦用の画像を撮像する（Ｓ０３
）。撮像部３は、撮像された合焦用の画像を、合焦対象決定部５ａへ渡す。

合焦対象決定部５ａは、入力された合焦用の画像に基づいて、焦点を合わせる対象となる顔を決定する（Ｓ０４）。図６は、合焦対象決定部５ａの動作例（焦点を合わせる顔の決定処理（Ｓ０４）の例）を示すフローチャートである。Ｓ０４の処理について、図６を用いて説明する。

まず、顔検出部６ａは、入力された画像から人物の顔を検出する（Ｓ１０）。顔検出部６ａは、検出された顔の画像情報を決定部７ａの中心決定部８ａへ渡す。

中心決定部８ａは、顔検出部６ａによって検出された顔の数を調べる。顔の数が１より少ない場合（Ｓ１１：＜１）、即ち０である場合、中心決定部８ａは、顔が無いことを顔決定部９に通知する。そして、顔決定部９ａは、画像中央の二次元座標を測距部１０へ渡す（Ｓ１２）。

顔の数が１より多い場合（Ｓ１１：＞１）、即ち複数の顔が検出された場合、決定部７ａは、複数の顔から一つの顔を選択する処理を実行する（Ｓ１３）。図７は、複数の顔から一つの顔を選択する処理（Ｓ１３）の例を示すフローチャートである。図７を用いてＳ１３の処理について説明する。

中心決定部８ａは検出された顔の顔点の中心の座標を取得する（Ｓ１５）。中心決定部８ａは、顔決定部９ａへ取得された中心の座標を渡す。次に、顔決定部９ａは、入力された中心の座標に基づいて、例えば図４を用いて説明した手法により、一つの顔を選択する（Ｓ１６）。

図６を用いた説明に戻る。画像から検出された顔が一つである場合（Ｓ１１：＝１）、又はＳ１３の処理の後、顔決定部９ａは、一つの顔の顔点の二次元座標を測距部１０へ渡す（Ｓ１４）。ここでいう一つの顔とは、検出された顔の数が一つである場合はこの唯一検出された顔であり、Ｓ１３の処理の後である場合は選択された顔である。

図５を用いた説明に戻る。Ｓ０４の処理の後、測距部１０は、合焦対象決定部５ａの顔決定部９ａから渡される二次元座標に基づいて焦点情報を取得する（Ｓ０５）。測距部１０は、取得された焦点情報を撮像部３へ渡す。この処理の後、再びＳ０２以降の処理が実行される。

Ｓ０２において、撮像部３に対し測距部１０から焦点情報の入力がある場合（Ｓ０２−ＹＥＳ）、撮像部３は、入力された焦点情報に基づいてフォーカスレンズを制御する（Ｓ０６）。即ち、撮像部３は、合焦対象決定部５ａによって決定された顔に焦点が合うようにフォーカスレンズを制御する。

フォーカスレンズの制御の後、撮像部３は撮像を行う（Ｓ０７）。この撮像により、合焦対象決定部５ａによって決定された顔に焦点が合った画像が撮像される。そして、画像記憶部４は、撮像部３によって撮像された画像のデータを記憶する（Ｓ０８）。

〔作用／効果〕
本発明の第一実施形態である撮像装置１ａによれば、画像中に存在する人の顔が検出され、検出された顔のいずれかが合焦の対象として自動的に決定される。このため、ユーザは、合焦の対象にしたい顔を、画像（フレーム）の中心に位置させる必要はない。言い換えれば、ユーザは、合焦したい顔をフレームの中心に置くようにする必要がない。

また、本発明の第一実施形態である撮像装置１ａによれば、画像中に複数の顔が存在する場合、画像中に存在する複数の顔の位置の中心に基づいて、合焦する対象となる顔が決定される。このため、画像中に複数の顔が存在した場合であっても、合焦の対象とすべき一つの顔を決定することが可能となる。また、集団における複数の顔の中央付近に位置する顔に対して合焦を行うことが可能となる。

〔変形例〕
顔決定部９ａは、中心から所定の距離内に位置し、かつ正面を向いている顔の中から、所定の基準に従って顔を選択するように構成されても良い。このとき、顔決定部９ａは、顔が正面を向いているか否かについて、例えば以下の公知文献に記載された技術によって判断する。

H. Schneiderman, T. Kanade. "A Statistical Method for 3D Object Detection Applied to Faces and Cars." IEEE Conference on Computer Vision and Pattern Recognition, 2000。

また、上記の記載では中心決定部８ａが顔の位置を点として捉える構成について説明したが、中心決定部８ａは顔の位置を領域として捉えるように構成されても良い。

また、顔決定部９ａにより決定された顔は、図示せぬ表示部を介して、その顔の周囲に枠が表示されるように構成されても良い。このように構成されることにより、ユーザはいずれの顔が、合焦の対象として決定されたかを知ることが可能となる。また、ユーザは、このように表示された顔に対して合焦されることに不満がある場合は、入力部２によって命令を入力することにより、手動で他の顔に対して合焦されるように操作可能に設計されても良い。

また、顔決定部９ａは、中心から所定の距離内に位置し、かつその中で所定の大きさ以上の顔の中から、所定の基準に従って顔を選択するように構成されても良い。

また、撮像装置１ａは、決定部７ａによって決定された顔に基づいて、露出制御を実行するように構成されても良い。この点は、後述する第二乃至第五実施形態においても同様である。

また、決定部７ａは、顔検出部６ａによって検出された各顔をそのｘ座標又はｙ座標を元にソートし、検出された顔の数の中間値の順位に相当する顔を対象となる顔として決定しても良い。

また、決定部７ａは、顔検出部６ａによって検出された顔の中から、所定の基準に従って顔を決定するように構成されても良い。所定の基準とは、例えば顔の大きさに基づいたもの（例：最も大きな顔を決定するという基準，中間の大きさの顔を決定するという基準，最小の顔を決定するという基準）であっても良いし、画像中における顔の位置に基づいたもの（例：画像の中央に最も近い顔という基準）であっても良いし、顔の向きに基づいたもの（例：正面を向いている顔という基準）であっても良いし、顔らしさに基づいたもの（例：顔らしさの度合いを示す量が最も大きな顔を決定するという基準）であても良いし、顔から推定される性別に基づいたもの（例：男と推定された顔を決定するという基準，女と推定された顔を決定するという基準）であっても良いし、顔から推定される年代に基づいたもの（最も若い年代と推定された顔を決定するという基準，中間の年代と推定された顔を決定するという基準）であっても良いし、その他どのような基準であっても良い。また、所定の基準とは、上記した基準を適宜複数組み合わせたものであっても良い。

また、上記の説明では、撮像部３は一つの被写体に対して合焦を行うように構成されていることを前提としている。このため、合焦対象決定部５ａは一つの顔の座標を測距部１０に渡している。しかし、撮像部３が複数の被写体に対して合焦を行うように構成される場合、合焦対象決定部５ａはこの数に応じて複数の顔の座標を測距部１０に渡すように構成されても良い。このような撮像部３の例として、特開平１１−２９５８２６に記載される装置がある。この場合、決定部５ａの顔決定部９ａは、所定の基準に従って顔に優先順位をつけ、この優先順位に基づいて所定の数の顔を選択する。例えば、顔決定部９ａは、中心決定部８ａによって決定された中心に近い順から所定の数の顔を選択するように構成できる。選択される顔の数が所定の数に達しない場合は、その他どのような方法によって、測距部１０に渡される座標が取得されても良い。

［第二実施形態］
次に、合焦対象決定部５ｂを備える撮像装置１ｂについて説明する。合焦対象決定部５ｂは、合焦対象決定部５の第二実施形態である。以下、撮像装置１ｂ及び合焦対象決定部５ｂについて、第一実施形態における撮像装置１ａ及び合焦対象決定部５ａと異なる点について説明する。

〔システム構成〕
図８は、撮像装置１ｂの機能ブロックを示す図である。撮像装置１ｂは、合焦対象決定部５ａの代わりに合焦対象決定部５ｂを備える点で、第一実施形態における撮像装置１ａと異なる。従って、以下、撮像装置１ｂの入力部２，撮像部３，画像記憶部４，及び測距部１０についての説明は省略する。

〈合焦対象決定部〉
合焦対象決定部５ｂは、顔検出部６ａ，分類部１１，集合決定部１２，及び決定部７ｂを含む。以下、合焦対象決定部５ｂを構成する各機能部について説明する。ただし、合焦対象決定部５ｂに含まれる顔検出部６ａは、第一実施形態における合焦対象決定部５ａに含まれる顔検出部６ａと同様の構成となるためその説明を省略する。

〈分類部〉
分類部１１は、顔検出部６ａにおいて検出された顔の顔点を、複数の集合にクラスタリングする。このクラスタリングには、最近傍法などどのような手法が用いられても良い。分類部１１は、各顔点の位置に基づいてクラスタリングを実行する。分類部１１によるクラスタリングの結果、各顔点は、画像中の位置が近い顔点同士が同じ集合に含まれるように分類される。

図９は、分類部１１の処理例を示す図である。図９のように複数の顔点の集団が存在する場合、それぞれの集団毎に一つの集合として分類される。

〈集合決定部〉
集合決定部１２は、分類部１１において分類された複数の集合のうち、合焦の対象となる顔を決定するための集合（即ち、合焦の対象となる顔を含む集合：以下、「選択集合」と呼ぶ）を決定する。即ち、測距部１０に渡される顔点の座標は、集合決定部１２によって決定された選択集合に含まれる顔の顔点の座標となる。

集合決定部１２は、各集合に含まれる顔の数、各集合に含まれる顔に関する特徴量など、どのような基準に基づいて選択集合を決定しても良い。例えば、集合決定部１２は、各集合において最も多くの顔を含む集合を、選択集合として決定する。また、例えば、集合決定部１２は、各集合に含まれる顔に関する特徴量の和が最も大きい集合を、選択集合として決定する。顔に関する特徴量は、例えば、顔の大きさ、顔の向き、顔の数などに基づ
いて取得することができる。また、顔に関する特徴量は、人の顔度合いを示す値であっても良い。人の顔度合いとは、例えば、ある画像が人の顔であるか否かを分ける識別境界線からの距離によって与えられる。人の顔度合いとは、顔検出部６ａにおける顔検出処理の際に取得される値を用いて示されても良い。

図９を用いて、集合決定部１２の処理例を説明する。分類部１１の処理によって生成された複数の集合（図９においては三つの集合）から、所定の基準（ここでは集合に含まれる顔点の数が多いもの）に従って、集合決定部１２により左上の集合が選択集合として選択される。

〈決定部〉
決定部７ｂは、撮像部３によって撮像された画像全体に含まれる顔ではなく、集合決定部１２によって決定された選択集合に含まれる顔に基づいて処理を行う（選択集合を顔の決定の母集団とする）点で、決定部７ａと異なる。決定部７ｂは、上記の点を除けば、決定部７ａと同様の処理を行う。

図１０は、決定部７ｂによる処理例を示す図である。集合決定部１２によって選択集合において、決定部７ｂの中心決定部８ｂにより顔点の中心が取得される。そして、取得された中心に基づいて、顔決定部９ｂにより、所定の基準（ここでは画像（フレーム）の中央点に近いもの）に従って、一つの顔点（太線の円で囲まれた顔点）が選択される。

〔動作例〕
次に、第二実施形態における撮像装置１ｂの動作例について説明する。撮像装置１ｂの動作は、第一実施形態における撮像装置１ａの動作と、Ｓ１３の処理の内容を除けば同じである。このため、撮像装置１ｂの動作例について、Ｓ１３の処理の内容についてのみ説明する。

図１１は、第二実施形態における合焦対象決定部５ｂの処理の一部、即ち図６におけるＳ１３の処理の内容を示すフローチャートである。第二実施形態では、Ｓ１３において、第一実施形態で説明した図７の処理の代わりに、この図１１に示す処理が行われる。

Ｓ１３の処理が開始すると、分類部１１は、顔検出部６ａによって検出された複数の顔点を複数の集合にクラスタリングする（Ｓ１７）。次に、集合決定部１２は、分類部１１によって生成された複数の集合から一つの選択集合を選択する（Ｓ１８）。

中心決定部８ｂは、Ｓ１８において選択された選択集合に含まれる顔に基づいて、この選択集合に含まれる複数の顔点の中心を取得する（Ｓ１９）。そして、顔決定部９ｂは、Ｓ１９において取得された中心に基づいて、合焦の対象となる顔として一つの顔を選択する（Ｓ２０）。

〔作用／効果〕
第二実施形態における撮像装置１ｂによれば、画像中に複数の集団が存在する場合、そのうちの一つの集団に含まれる人のみに基づいて、合焦の対象となる顔を決定することが可能となる。ユーザが或る集団を撮像する場合、その集団の人々は一箇所に集まっている場合が多い。このとき、当該集団に属しない人（単独人、単独人の点在、他の人の集団）がフレーム内に存在していても、ユーザが撮像したいと考える集団に属する人の中から合焦の対象となる被写体が選択されることが望ましい。第二実施形態における撮像装置１ｂによれば、ユーザのこのような要望を実現することが可能となる。即ち、第二実施形態では、フレーム内に収まる最も数の多い人の集団（集合）が撮像対象の集団（選択集合）が選択され、当該集団に属する何れかの人を基準とした合焦が実現される。なお、変形例の
欄に後述するように、集合決定部１２によって選択された選択集合がユーザにとって望まれる集合でない場合は、ユーザによって手動で任意の集合を選択集合として選択可能に構成されても良い。

図１２は、撮像装置１ｂによって奏される効果を示すための図である。図１２のように複数の集団が存在する場合であっても、例えば画像の左下に位置する集団に含まれる顔の位置のみに基づいて、その集団の中心に近い顔（太線の矩形によって囲まれた顔）が選択される。

〔変形例〕
集合決定部１２は、各集合に含まれる顔の顔点の中心に基づいて選択集合を決定するように構成されても良い。この場合、中心決定部８ｂは、分類部１１によって生成された各集合に含まれる顔点について中心を取得する。集合決定部１２は、中心決定部８ｂによって取得された各集合における中心に基づいて、選択集合を決定する。例えば、集合決定部１２は、集合に含まれる顔点の中心の座標が画像の中央点に最も近い集合を、選択集合として決定する。そして、顔決定部９ｂは、選択集合の中心に基づいて、合焦の対象となる顔を決定する。

また、集合決定部１２は、各集合において合焦の対象となる顔として暫定的に決定された顔の顔点に基づいて選択集合を決定するように構成されても良い。この場合、決定部７ｂは、分類部１１によって生成された各集合について、その集合に含まれる顔のみに基づいて、合焦の対象となる顔を暫定的に決定する。そして、集合決定部１２は、決定部７ｂによって取得された各集合における顔点に基づいて、選択集合を決定する。例えば、集合決定部１２は、集合に含まれる暫定的に決定された顔点の座標が画像の中央点に最も近い集合を、選択集合として決定する。即ち、実質的に集合決定部１２は、合焦の対象となる顔を最終的に決定する。この場合は、集合決定部１２が測距部１０に決定された顔の顔点の座標を渡すように構成されても良い。

また、このように構成される場合、集合決定部１２によって選択された集合がユーザにとって所望の集合ではなかった場合（集合の選択結果は図示せぬ表示部を介してユーザに提示される）に、入力部２を用いてユーザによって他の集合が選択集合として選択されるように構成されても良い。この場合、ユーザによって選択される集合は、入力部２が操作される度に、優先順位に基づいてシフトするように構成されても良い。この優先順位とは、集合決定部１２によって判断される所定の基準に基づいた順位である。

上述したように、集合毎に合焦対象の顔（「対象顔」と称することもある）を暫定的に決定し、暫定の対象顔の中から最終的な対象顔を決定し、この対象顔をユーザに提示し、ユーザの意図と一致しない場合には、対象顔を、暫定的に決定された他の対象顔のいずれかに変更できるようにすることができる。

上記構成に代えて、決定部７ｂが暫定の対象顔から最終的な対象顔を決定する前に、暫定の対象顔がユーザに提示され、その中からユーザが最終的な対象顔を選択するように構成しても良い。暫定の対象顔は、図示せぬ表示部を介して、その顔の周囲に枠が表示されることによりユーザに提示される。

或いは、対象顔が決定される前に、分類部１１による集合の分類結果が図示せぬ表示部を介してユーザに提示され、ユーザが選択集合を決定し、ユーザにより決定された選択集合から決定部７ｂが対象顔を選択するようにしても良い。この場合には、集合決定部１２は選択集合の決定処理を行わず、ユーザによる選択集合の決定結果を決定部７ｂに渡す動作を行うのみとなる。このように、集合決定部１２の決定動作がオプション操作によりオ
ン／オフされるようにしても良い。

［第三実施形態］
次に、合焦対象決定部５ｃを備える撮像装置１ｃについて説明する。合焦対象決定部５ｃは、合焦対象決定部５の第三実施形態である。以下、撮像装置１ｃ及び合焦対象決定部５ｃについて、第二実施形態における撮像装置１ｂ及び合焦対象決定部５ｂと異なる点について説明する。

〔システム構成〕
図１３は、撮像装置１ｃの機能ブロックを示す図である。撮像装置１ｃは、合焦対象決定部５ｂの代わりに合焦対象決定部５ｃを備える点で、第二実施形態における撮像装置１ｂと異なる。従って、以下、撮像装置１ｃの入力部２，撮像部３，画像記憶部４，及び測距部１０についての説明は省略する。

〈合焦対象決定部〉
合焦対象決定部５ｃは、決定部７ｂの代わりに決定部７ｃを含む点で、第二実施形態における合焦対象決定部５ｂと異なる。従って、顔検出部６ａ，分類部１１，及び集合決定部１２についての説明は省略する。

〈決定部〉
決定部７ｃは、集合決定部１２によって決定された集合（選択集合）に含まれる顔に基づいて処理を行う。決定部７ｃは、その顔の大きさに基づいて、合焦の対象となる顔を決定する。決定部７ｃは、例えば、選択集合に含まれる顔のうち最も大きな顔を、合焦の対象となる顔として決定する。或いは、決定部７ｃは、例えば、集合決定部１２によって決定された選択集合に含まれる顔のうち中間の大きさを有する顔を、合焦の対象となる顔として決定しても良い。以下の説明では、決定部７ｃは、最も大きな顔を合焦の対象となる顔として決定するものとして説明する。

〔動作例〕
次に、第三実施形態における撮像装置１ｃの動作例について説明する。撮像装置１ｃの動作は、第二実施形態における撮像装置１ｂの動作と、Ｓ１３の処理の内容を除けば同じである。このため、撮像装置１ｃの動作例について、Ｓ１３の処理の内容についてのみ説明する。

図１４は、第三実施形態における合焦対象決定部５ｃの処理の一部、即ち図６におけるＳ１３の処理の内容を示すフローチャートである。

Ｓ１３の処理が開始すると、分類部１１は、顔検出部６ａによって検出された複数の顔点を複数の集合にクラスタリングする（Ｓ１７）。次に、集合決定部１２は、分類部１１によって生成された複数の集合から一つの選択集合を選択する（Ｓ１８）。そして、決定部７ｃは、Ｓ１８の処理において選択された選択集合に含まれる顔の中から、各顔の大きさに基づいて、合焦の対象となる顔として一つの顔を選択する（Ｓ２１）。

〔作用／効果〕
第三実施形態における撮像装置１ｃによれば、第二実施形態における撮像装置１ｂと同様に、画像中に複数の集団が存在する場合、そのうちの一つの集団に含まれる人のみに基づいて、合焦の対象となる顔を決定することが可能となる。

また、第三実施形態における撮像装置１ｃによれば、選択された一つの集団に含まれる顔の中から、その顔の大きさに基づいて、合焦の対象となる顔が選択される。ユーザにと
って、最も注目したい顔は撮像装置に最も近い顔である場合がある。また、撮像装置に最も近い顔は、撮像される際に最も大きい顔である可能性が高い。このため、撮像装置１ｃによれば、選択された一つの集団に含まれる顔の中から、顔の大きさに基づいてユーザにとって最も注目したいと想定される顔が選択される。従って、この場合ユーザは注目したい顔に対して手動で焦点を合わせる必要がなくなる。少なくとも、従来技術のように、最も注目したい顔をフレームの中心やその付近に置く必要はない。

〔変形例〕
決定部７ｃは、集合決定部１２によって決定された集合に含まれる各顔に関する特徴量に基づいて処理を行うように構成されても良い。決定部７ｃは、各顔に関する特徴量を取得する。決定部７ｃは、例えば、顔の大きさ、顔の向きなどに基づいて、各顔に関する特徴量を取得するように構成される。また、決定部７ｃは、例えば各顔について、顔らしさの度合いを示す量を特徴量として取得するように構成される。「顔らしさの度合いを示す量」とは、例えば顔検出部６ａにおける顔検出処理の際に取得される値を用いて示される。具体的には、顔検出部６ａは、ある領域内に顔が含まれるか否かを判断する際に、この領域内の画像の顔らしさに関する値を算出するように構成された場合、この顔らしさに関する値が特徴量として用いられる。

［第四実施形態］
次に、合焦対象決定部５ｄを備える撮像装置１ｄについて説明する。合焦対象決定部５ｄは、合焦対象決定部５の第四実施形態である。以下、撮像装置１ｄ及び合焦対象決定部５ｄについて、第一実施形態における撮像装置１ａ及び合焦対象決定部５ａと異なる点について説明する。

〔システム構成〕
図１５は、撮像装置１ｄの機能ブロックを示す図である。撮像装置１ｄは、合焦対象決定部５ａの代わりに合焦対象決定部５ｄを備える点で、第一実施形態における撮像装置１ａと異なる。従って、以下、撮像装置１ｄの入力部２，撮像部３，画像記憶部４，及び測距部１０についての説明は省略する。

〈合焦対象決定部〉
合焦対象決定部５ｄは、顔検出部６ｄ，ブロック決定部１３，及び決定部７ｄを含む。以下、合焦対象決定部５ｄを構成する各機能部について説明する。

〈顔検出部〉
顔検出部６ｄは、合焦用の画像から顔領域を検出する際に、予め定められた複数のブロック毎に顔領域を検出する点で、第一実施形態における顔検出部６ａと異なる。図１６は、複数のブロックに分けられた合焦用の画像の例を示す図である。図１６に示されるように、合焦用の画像は、複数のブロック（図１６では、矩形の画像（フレーム）がその縦又は横軸に平行で且つ画像の中央点を通過する二つの線分により４つのブロックに分けられているが、いくつのブロックに分けられても良い）に分けられる。合焦用の画像がどのようなブロックに分けられるかは、例えば顔検出部６ｄが記憶している。

顔検出部６ｄは、複数の各ブロックについて顔を検出する。そして、顔検出部６ｄは、ブロック毎に検出結果をブロック決定部１３に渡す。

〈ブロック決定部〉
ブロック決定部１３は、予め定められた複数のブロックのうち、合焦の対象となる顔を決定するためのブロック（即ち、合焦の対象となる顔を含むブロック：以下、「選択ブロック」と称する）を選択する。即ち、測距部１０に渡される座標は、ブロック決定部１３
によって決定された選択ブロックにおいて検出された顔の顔点の座標となる。

ブロック決定部１３は、各ブロックにおいて検出された顔の数、ブロックにおいて検出された顔に関する特徴量など、どのような基準に基づいて選択ブロックを決定しても良い。例えば、ブロック決定部１３は、各ブロックにおいて最も多くの顔が検出されたブロックを、選択ブロックとして決定する。このようにブロック決定部１３が構成された場合、図１６に示される状況では、左上のブロックが、ブロック決定部１３により選択ブロックとして決定される。

また、例えば、ブロック決定部１３は、各ブロックに含まれる顔に関する特徴量の和が最も大きいブロックを、選択ブロックとして決定することもできる。顔に関する特徴量の算出手法として、上述した実施形態において説明した手法と同様の手法を適用することができる。

〈決定部〉
決定部７ｄは、撮像部３によって撮像された画像全体に含まれる顔ではなく、ブロック決定部１３によって決定された選択ブロックに含まれる顔に基づいて処理を行う点で、決定部７ａと異なる。決定部７ｄは、上記の点を除けば、決定部７ａと同様の処理を行う。

図１７は、決定部７ｄによる処理例を示す図である。ブロック決定部１３によって選択された左上のブロック（選択ブロック）において、顔点の中心が取得される。そして、取得された中心に基づいて、所定の基準（ここでは画像（フレーム）の中央点に近いもの）に従って、一つの顔点（太線の円で囲まれた顔点）が選択される。

〔動作例〕
次に、第四実施形態における撮像装置１ｄの動作例について説明する。撮像装置１ｄの動作は、第一実施形態における撮像装置１ａの動作と、Ｓ０４の処理の内容を除けば同じである。このため、撮像装置１ｄの動作例について、Ｓ０４の処理の内容についてのみ説明する。

図１８は、第四実施形態における合焦対象決定部５ｄの処理の一部、即ち図５におけるＳ０４の処理の内容を示すフローチャートである。このように、第四実施形態では、Ｓ０４において、第一実施形態で適用される図６に示す処理の代わりに、図１８に示す処理が実行される。

Ｓ０４の処理が開始すると、顔検出部６ｄは、ブロック毎に顔を検出する（Ｓ２２）。次に、ブロック決定部１３は、顔が検出されたブロックの数を調べる。顔が検出されたブロックの数が１より少ない場合（Ｓ２３：＜１）、即ち０である場合、ブロック決定部１３は、顔が無いことを決定部７ｄに通知する。そして、決定部７ｄは、画像（フレーム）中央の二次元座標を測距部１０へ渡す（Ｓ２４）。

顔が検出されたブロックの数が１より多い場合（Ｓ２３：＞１）、ブロック決定部１３は、顔が検出された複数のブロックから一つの選択ブロックを選択する（Ｓ２５）。顔が検出されたブロックが一つである場合（Ｓ２３：＝１）、又はＳ２５の処理の後、決定部７ｄは、ブロック決定部１３によって選択された選択ブロックに含まれる顔の数を調べる。顔の数が１より多い場合（Ｓ２６：＞１）、即ち複数の顔がこの選択ブロックにおいて検出されている場合、決定部７ｄはこの複数の顔から一つの顔を選択する（Ｓ２７）。Ｓ２７の処理は、図７に示されるフローチャートと同様の処理となる。但し、処理の対象が画像全体ではなく選択ブロックである点において、第一実施形態と異なる。

図１８を用いた説明に戻る。検出された顔が一つである場合（Ｓ２６：＝１）、又はＳ２７の処理の後、決定部７ｄは、一つの顔の顔点の二次元座標を測距部１０へ渡す（Ｓ２８）。ここでいう一つの顔とは、検出された顔の数が一つである場合はこの唯一検出された顔であり、Ｓ２７の処理の後である場合は選択された顔である。この処理の後、図５におけるＳ０５以降の処理が実施される。

〔作用／効果〕
第四実施形態における撮像装置１ｄによれば、合焦用の画像が複数のブロックに分割され、複数のブロックの中から、合焦の対象となる顔を含む一つの選択ブロックが選択される。そして、この一つの選択ブロックの中から、合焦の対象となる顔が選択される。このため、第四実施形態における撮像装置１ｄでは、擬似的に第二実施形態と同様の効果を得ることが可能となる。具体的には、画像中に複数の集団が存在する場合、ブロックによってこれらの集団をおおまかに分けることが可能となる。そして、所定の基準に従って選択された一つの選択ブロックに含まれる集団又は集団の一部の顔に基づいて、合焦の対象となる顔が選択される。

また、第四実施形態における撮像装置１ｄでは、第二実施形態における撮像装置１ｂとは異なりクラスタリングの処理を実行しない。このため、第四実施形態における撮像装置１ｄでは、第二実施形態における撮像装置１ｂに比べて高速に処理を行うことが可能となる。

〔変形例〕
決定部７ｄは、第二実施形態における決定部７ｂと同様に構成されても良い。この場合、決定部７ｄは、集合決定部１２によって決定された選択集合に含まれる顔ではなく、ブロック決定部１３によって決定された選択ブロックに含まれる顔に基づいて処理を行う点で、決定部７ｂと異なるように構成される。即ち、画像全体ではなく選択ブロックを対象とした集合の分類や、選択集合の決定等が行われるように構成される。この場合、決定部７ｄは、上記の点を除けば、決定部７ｂと同様の処理を行うように構成される。

このように構成されることにより、画面に含まれる全ての顔を対象とするクラスタリングを行う必要が無くなる。即ち、選択されたブロックに含まれる顔についてのみクラスタリングが実行されれば良い。このため、画面に多数の集団が含まれる場合、第二実施形態における撮像装置１ｂに比べて高速に処理を行うことが可能となる。また、通常の第四実施形態における撮像装置１ｄに比べて、より正確に、合焦の対象となる顔を含む集合及び合焦の対象となる顔を選択することが可能となる。

［第五実施形態］
次に、合焦対象決定部５ｅを備える撮像装置１ｅについて説明する。合焦対象決定部５ｅは、合焦対象決定部５の第五実施形態である。以下、撮像装置１ｅ及び合焦対象決定部５ｅについて、第一実施形態における撮像装置１ａ及び合焦対象決定部５ａと異なる点について説明する。

〔システム構成〕
図１９は、撮像装置１ｅの機能ブロックを示す図である。撮像装置１ｅは、合焦対象決定部５ａの代わりに合焦対象決定部５ｅを備える点で、第一実施形態における撮像装置１ａと異なる。従って、以下、撮像装置１ｅの入力部２，撮像部３，画像記憶部４，及び測距部１０についての説明は省略する。

〈合焦対象決定部〉
合焦対象決定部５ｅは、顔検出部６ａ，最大顔選択部１４，候補選択部１５，及び決定
部７ｅを含む。以下、合焦対象決定部５ｅを構成する各機能部について説明する。ただし、合焦対象決定部５ｅに含まれる顔検出部６ａは、第一実施形態における合焦対象決定部５ａに含まれる顔検出部６ａと同様の構成となるためその説明を省略する。

〈最大顔選択部〉
最大顔選択部１４は、顔検出部６ａによって検出された複数の顔の中から、最も大きな顔（最大顔）を選択する。最大顔選択部１４は、顔検出部６ａにおいて顔矩形が用いられる場合は、この顔矩形の大きさを元に選択を行う。また、最大顔選択部１４は、顔検出部６ａにおいてパターンマッチングが実行される場合は、このパターンの大きさを元に選択を行う。最大顔選択部１４は、その他どのような方法によって最大顔を選択するように構成されても良い。最大顔選択部１４は、選択された最大顔についての情報（例：顔点の座標，顔の大きさ）を候補選択部１５へ渡す。

図２０は、最大顔選択部１４の処理例を示す図である。図２０において、各顔点の大きさは、各顔点に対応する顔の大きさを示す。最大顔選択部１４の処理によって、太枠に囲まれた顔点が最大顔選択される。

〈候補選択部〉
候補選択部１５は、最大顔選択部１４によって選択された最大顔の大きさに基づいて、合焦の対象となる顔の候補を選択する。言い換えると、候補選択部１５は、決定部７ｅの処理対象となる顔を決定する。

候補選択部１５は、最大顔選択部１４によって選択された最大顔と、この最大顔の大きさから所定の範囲内の大きさを有する他の顔を対象顔の候補として選択する。所定の範囲内の大きさとは、例えば数パーセント〜数十パーセント分だけ最大顔よりも小さい大きさを示す。また、所定の範囲内の大きさとは、例えば最大顔の半分以上の大きさや２／３以上の大きさを示す。

図２１は、候補選択部１５の処理例を示す図である。図２１において、小さな白抜きの円は、候補選択部１５によって選択されなかった顔点を示す。黒塗りの円は、候補選択部１５によって選択された他の顔の顔点を示す。なお、太枠によって囲まれた顔点は、決定部７ｅによって選択された最大顔の顔点を示す。

〈決定部〉
決定部７ｅは、撮像部３によって撮像された画像全体に含まれる顔ではなく、候補選択部１５によって選択された候補に含まれる顔に基づいて処理を行う点で、決定部７ａと異なる。決定部７ｅは、上記の点を除けば、決定部７ａと同様の処理を行う。

図２１を用いて決定部７ｅの処理について説明する。決定部７ｅは、候補選択部１５によって選択された三つの顔点に基づいて、合焦の対象となる顔を選択する。このとき、決定部７ｅの中心決定部８ｅは、この三つの顔点の中心（斜線の円）を取得する。そして、この中心に基づいて、所定の基準（ここでは画像（フレーム）の中心（中央点）に最も近いもの）に従って、決定部７ｅの顔決定部９ｅは、一つの顔点（ここでは、太枠によって囲まれた顔点（最大顔））を選択する。

〔動作例〕
次に、第五実施形態における撮像装置１ｅの動作例について説明する。撮像装置１ｅの動作は、第一実施形態における撮像装置１ａの動作と、Ｓ１３の処理の内容を除けば同じである。このため、撮像装置１ｅの動作例について、Ｓ１３の処理の内容についてのみ説明する。

図２２は、第五実施形態における合焦対象決定部５ｅの処理の一部、即ち図６におけるＳ１３の処理の内容を示すフローチャートである。このように、第五実施形態は、Ｓ１３において図７に示す処理の代わりに図２２に示す処理を実行する点で、第一実施形態と異なる。

Ｓ１３の処理が開始すると、最大顔選択部１４は、顔検出部６ａによって検出された複数の顔のうち、最大の顔を選択する（Ｓ２９）。次に、候補選択部１５は、最大顔選択部１４によって選択された顔（最大顔）の大きさに基づいて、候補となる顔を選択する（Ｓ３０）。

次に、決定部７ｅの中心決定部８ｅは、候補選択部１５によって選択された候補となる顔（最大顔、及びこの最大顔を基準とした所定範囲に属する大きさを持つ少なくとも一つの他の顔）に基づいて、顔点の中心を取得する（Ｓ３１）。そして、決定部７ｅの顔決定部９ｅは、取得された中心に基づいて、一つの顔、即ち合焦の対象となる顔を選択する（Ｓ３２）。なお、上記処理によれば、他の顔に相当する顔が検出されない場合には、最大顔が対象顔として決定される。

〔作用／効果〕
第五実施形態における撮像装置１ｅによれば、ある程度の大きさをもった顔のみに基づいて、合焦の対象となる顔が選択される。ある程度の大きさは、最大の顔の大きさに基づいて判断される。

このため、背景として写ってしまった人、即ちユーザが被写体として意識していない人の顔が処理の対象として含まれることが防止される。従って、合焦の対象となる顔を含む集合を選択する処理や、集合に含まれる顔に基づいた中心を取得する処理や、合焦の対象となる顔を選択する処理の精度が向上する。

〔変形例〕
最大顔選択部１４は、検出された顔の肌の色の領域の大きさを元に選択を行うように構成されても良い。

１ａ，１ｂ，１ｃ，１ｄ，１ｅ 撮像装置
２ 入力部
３ 撮像部
４ 画像記憶部
５ａ，５ｂ，５ｃ，５ｄ，５ｅ 合焦対象決定部
６ａ，６ｄ 顔検出部
７ａ，７ｂ，７ｃ，７ｄ，７ｅ 決定部
８ａ，８ｂ，８ｄ，８ｅ 中心決定部
９ａ，９ｂ，８ｄ，８ｅ 顔決定部
１０ 測距部
１１ 分類部
１２ 集合決定部
１３ ブロック決定部
１４ 最大顔選択部
１５ 候補選択部

Claims (12)

1. 入力された画像から人の顔を検出する検出手段と、
   前記検出手段で複数の人の顔が検出されたときに、検出された顔の数を基準としてその真ん中に位置する人の顔を、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔として決定する決定手段とを含む対象決定装置。
2. 前記検出手段で複数の人の顔が検出されたときに、検出された複数の人の顔を、それぞれの位置に基づいて複数の集合に分類する分類手段と、
   前記複数の集合の中から、前記対象となる顔を決定するための選択集合を決定する集合決定手段と、
   をさらに含み、
   前記決定手段は、前記選択集合に含まれる人の顔に基づいて、前記対象となる顔を決定する請求項１に記載の対象決定装置。
3. 前記決定手段によって決定された人の顔を、他の顔と区別して表示する表示手段をさらに含む請求項１〜２のいずれかに記載の対象決定装置。
4. 入力された画像から人の顔を検出する検出手段と、
   前記検出手段で複数の人の顔が検出されたときに、検出された複数の人の顔を、複数の集合に分類する分類手段と、
   前記複数の集合それぞれについて、当該集合に含まれる人の顔から、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔を決定する暫定決定手段と
   前記暫定決定手段によって決定された顔の中から、前記対象となる顔を最終的に決定する最終決定手段とを含む対象決定装置。
5. 入力された画像が分割された複数のブロックそれぞれにおいて人の顔を検出する検出手段と、
   前記検出手段による検出結果に基づいて、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔を決定するための選択ブロックを決定するブロック決定手段と、
   前記選択ブロックに含まれる顔から、前記対象となる顔を決定する決定手段とを含む対象決定装置。
6. 入力された画像から人の顔を検出する検出手段と、
   前記検出手段で複数の人の顔が検出されたときに、検出された人の顔のうち最大の顔を判断する判断手段と、
   前記検出された顔から、前記最大の顔、及びこの最大の顔の大きさを基準とした所定の範囲内の大きさを有する顔を選択する選択手段と、
   前記選択された顔の中から、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔を前記選択された顔から決定する決定手段とを含む対象決定装置。
7. 入力された画像から人の顔を検出する検出手段と、
   前記検出手段で複数の人の顔が検出されたときに、検出された複数の人の顔を、それぞれの位置に基づいて複数の集合に分類する分類手段と、
   前記複数の集合の中から、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔を決定するための選択集合を決定する集合決定手段と、
   前記集合決定手段によって決定された選択集合に含まれる顔から、前記対象となる顔を
   決定する決定手段とを含む対象決定装置。
8. 入力された画像から人の顔を検出するステップと、
   複数の人の顔が検出されたときに、検出された顔の数を基準としてその真ん中に位置する人の顔を、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔として決定するステップとを情報処理装置に実行させるためのプログラム。
9. 入力された画像から人の顔を検出するステップと、
   複数の人の顔が検出されたときに、検出された複数の人の顔を、それぞれの位置に基づいて複数の集合に分類するステップと、
   前記複数の集合それぞれについて、当該集合に含まれる人の顔から、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔を決定するステップと
   前記各集合において決定された顔の中から、前記対象となる顔を最終的に決定するステップとを情報処理装置に実行させるためのプログラム。
10. 入力された画像が分割された複数のブロックそれぞれにおいて人の顔を検出するステップと、
    前記ブロック毎における検出結果に基づいて、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔を決定するための選択ブロックを決定するステップと、
    前記選択ブロックに含まれる顔から、前記対象となる顔を決定するステップとを情報処理装置に実行させるためのプログラム。
11. 入力された画像から人の顔を検出するステップと、
    複数の人の顔が検出されたときに、検出された複数の人の顔のうち最大の顔を判断するステップと、
    前記検出された顔から、前記最大の顔、及びこの最大の顔の大きさを基準とした所定の範囲内の大きさを有する顔を選択するステップと、
    前記選択された顔の中から、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔を前記選択された顔から決定するステップとを情報処理装置に実行させるためのプログラム。
12. 入力された画像から人の顔を検出するステップと、
    複数の人の顔が検出されたときに、検出された複数の人の顔を、それぞれの位置に基づいて複数の集合に分類するステップと、
    前記複数の集合の中から、撮像が実施される際に焦点を合わせる対象となる顔及び／又は露出制御を行う対象となる顔を決定するための選択集合を決定するステップと、
    決定された前記選択集合に含まれる顔から、前記対象となる顔を決定するステップとを情報処理装置に実行させるためのプログラム。

Images