JP6514140B2 - 撮像支援装置、方法及びプログラム - Google Patents

Description

本発明の実施形態は、撮像支援装置、方法及びプログラムに関する。

従来から、撮像部により撮像された対象者の顔の画像を用いて対象者を認識する顔認識技術が知られている。

このような顔認識技術において、複数台の撮像部を用いて対象者の顔の画像を撮像し、撮像された複数の顔の画像の中から顔認識に好適な画像を選択し、選択した画像を用いて当該対象者を認識する技術が知られている。

特開２００５−３１０１０３号公報

しかしながら、上述した従来技術のように、複数の撮像部を用いて対象者の顔の画像を撮像する場合、対象者は、複数の撮像部のうちのいずれの撮像部が対象者の顔の画像の撮像に適した所定撮像部であるか分からず、所定撮像部による撮像のために向けるべき方向に顔を向けられないおそれがある。この場合、所定撮像部であっても顔認識に好適な画像を撮像できない。

本発明が解決しようとする課題は、顔認識に好適な画像の撮像を支援することができる撮像支援装置、方法及びプログラムを提供することである。

実施形態の撮像支援装置は、取得部と、抽出部と、特定部と、提示制御部と、を備える。取得部は、複数の撮像部で対象者の顔を撮像した複数の画像を取得する。抽出部は、前記複数の画像それぞれから、顔領域を抽出する。特定部は、前記複数の画像それぞれにおける前記顔領域の位置に基づいて、前記複数の撮像部の中から前記対象者の顔の撮像に適した撮像部である所定撮像部を特定する。提示制御部は、前記所定撮像部による撮像のために前記対象者が向けるべき顔の方向を提示部に提示させる。

第１実施形態の撮像支援装置の例を示す構成図。 第１実施形態の撮像部の一例を示す模式図。 第１実施形態の撮像部により撮像された画像の例を示す図。 第１実施形態の撮像部により撮像された画像の例を示す図。 第１実施形態の撮像部により撮像された画像の例を示す図。 第１実施形態の発光部の例を示す模式図。 第１実施形態の処理例を示すフローチャート。 変形例１の発光部の例を示す模式図。 変形例２の識別情報の例を示す模式図。 変形例２の提示部の例を示す模式図。 変形例３の識別情報の例を示す模式図。 変形例３の提示部の例を示す模式図。 変形例４の提示部の例を示す模式図。 第２実施形態の撮像支援装置の例を示す構成図。 第２実施形態の処理例を示すフローチャート。 第２実施形態の撮像支援装置の例を示す構成図。 第２実施形態の処理例を示すフローチャート。 各実施形態及び各変形例の撮像支援装置のハードウェア構成例を示す構成図。

以下、添付図面を参照しながら、実施形態を詳細に説明する。

（第１実施形態）
図１は、第１実施形態の撮像支援装置１の一例を示す構成図である。図１に示すように、撮像支援装置１は、撮像部１０−１〜１０−Ｎ（Ｎは２以上の自然数）と、取得部１１と、抽出部１３と、特定部１５と、提示制御部１７と、提示部３０と、を備える。

撮像部１０−１〜１０−Ｎは、例えば、動画像を撮像可能なビデオカメラや静止画を連続して撮像可能なカメラなどの撮像装置により実現できる。なお、以下の説明では、撮像部の台数が３台（Ｎ＝３）である場合を例に取り説明するが、これに限定されるものではない。また、以下の説明では、撮像部１０−１〜１０−Ｎを各々区別する必要がない場合は、単に撮像部１０と称する場合がある。

取得部１１、抽出部１３、特定部１５、及び提示制御部１７は、例えば、ＣＰＵ（Central Processing Unit）などの処理装置にプログラムを実行させること、即ち、ソフトウェアにより実現してもよいし、ＩＣ（Integrated Circuit）などのハードウェアにより実現してもよいし、ソフトウェア及びハードウェアを併用して実現してもよい。

第１実施形態では、提示部３０は、発光部３１−１〜３１−Ｍ（Ｍは２以上の自然数）により構成される。発光部３１−１〜３１−Ｍは、例えば、ＬＥＤ（Light Emitting Diode）やランプなどの発光装置により実現できる。なお、以下の説明では、発光部の台数が３台（Ｍ＝３）である場合を例に取り説明するが、これに限定されるものではない。また、以下の説明では、発光部３１−１〜３１−Ｍを各々区別する必要がない場合は、単に発光部３１と称する場合がある。

撮像部１０−１〜１０−３は、対象者の顔を撮像する。対象者は、顔認識の対象となる人物である。第１実施形態では、撮像部１０−１〜１０−３を縦方向に配置しており、撮像部１０−１〜１０−３の配置位置及び向きは固定されている。これは、対象者の身長が高い場合であっても低い場合であっても、撮像部１０の配置位置や向きを変更せずに、撮像部１０−１〜１０−３のいずれかで顔認識に好適な顔の画像を撮像できるようにするためである。

第１実施形態における顔認識に好適な顔の画像とは、顔が正面を向き、かつ顔に歪みが生じていない（顔の歪みが抑えられた）画像である。画像上に写る顔の歪みは、撮像部１０が有する撮像レンズ（図示省略）の影響で生じ、撮像レンズの光軸から離れるほど歪みが大きくなる。このため、第１実施形態における顔認識に好適な顔の画像は、対象者の顔が向いた方向に正対して位置する撮像部１０から対象者を撮像することで得られる。

第１実施形態では、上述のように、撮像部１０−１〜１０−３を縦方向に配置しているので、対象者の身長が高い場合であっても低い場合であっても、撮像部１０−１〜１０−３のいずれかが対象者の顔と略同一の高さに位置することになる。ここで、上述した顔認識に好適な顔の画像を撮像するためには、対象者は、自身の顔と略同一の高さに位置する撮像部１０に自身の顔を向ける必要がある。しかしながら、対象者は、自身の顔と略同一の高さに位置する撮像部１０が、対象者の顔の撮像に適した撮像部１０であることが分からず、いずれの方向（詳細には、いずれの撮像部１０）に自身の顔を向ければよいか分からないことが想定される。

このため、第１実施形態の撮像支援装置１は、撮像部１０により顔認識に好適な顔の画像を撮像できるようにするために、対象者に対し、顔を向けるべき方向を提示する。以下では、第１実施形態の手法について説明する。

撮像部１０−１〜１０−３は、対象者の顔を撮像する。なお、この時点での撮像部１０−１〜１０−３による対象者の顔の撮像では、対象者は、いずれの方向に顔を向けていても構わない。

図２は、第１実施形態の撮像部１０−１〜１０−３の一例を示す模式図である。図２に示す例では、撮像部１０−１〜１０−３は、縦方向に一列に配置されており、撮像地点に位置する対象者５１の顔を撮像する。但し、撮像部１０−１〜１０−３は、縦方向に配置されていればよく、必ずしも一列に配置されている必要はない。例えば、撮像部１０−１〜１０−３をマトリクス上に配置したり、円状に配置したりしてもよい。また、撮像部１０−１〜１０−３は、それぞれ、正面を向くように固定されており、俯角や仰角はついていない。

取得部１１は、撮像部１０−１〜１０−３で対象者の顔を撮像した複数の画像を取得する。

図３は、第１実施形態の撮像部１０−１により撮像された画像の一例を示す図であり、図４は、第１実施形態の撮像部１０−３により撮像された画像の一例を示す図であり、図５は、第１実施形態の撮像部１０−２により撮像された画像の一例を示す図である。

図２に示すように、撮像部１０−１は、対象者５１の顔よりも高い位置に配置されているため、対象者５１の顔は、撮像部１０−１の撮像レンズの光軸よりも下側に位置する。このため、撮像部１０−１で対象者５１の顔を撮像した画像では、図３に示すように、対象者５１の顔５２が、画像の下側に位置し、撮像レンズのレンズ歪みの影響を受けてしまう。

また図２に示すように、撮像部１０−３は、対象者５１の顔よりも低い位置に配置されているため、対象者５１の顔は、撮像部１０−３の撮像レンズの光軸よりも上側に位置する。このため、撮像部１０−３で対象者５１の顔を撮像した画像では、図４に示すように、対象者５１の顔５２が、画像の上側に位置し、撮像レンズのレンズ歪みの影響を受けてしまう。

また図２に示すように、撮像部１０−２は、対象者５１の顔と略同一の高さの位置に配置されているため、対象者５１の顔は、撮像部１０−２の撮像レンズの光軸近辺に位置する。このため、撮像部１０−２で対象者５１の顔を撮像した画像では、図５に示すように、対象者５１の顔５２が、画像の中心付近に位置し、撮像レンズのレンズ歪みの影響を受けていない（レンズ歪みの影響が抑えられている）。

抽出部１３は、取得部１１により取得された複数の画像それぞれから、顔領域を抽出する。顔領域の抽出は、公知の顔検出技術を用いて行えばよく、例えば、Takeshi Mita, Toshimitsu Kaneko, Bjorn Stenger, Osamu Hori: “Discriminative Feature Co-Occurrence Selection for Object Detection”. IEEE Transaction Pattern Analysis and Machine Intelligence Volume 30, Number 7, July 2008, pp. 1257-1269に開示されている技術などを用いればよい。なお、抽出される顔領域の形状は、矩形や円などどのような形状であってもよい。

特定部１５は、取得部１１により取得された複数の画像それぞれにおける抽出部１３により抽出された顔領域の位置に基づいて、撮像部１０−１〜１０−３の中から対象者の顔の撮像に適した撮像部１０である所定撮像部を特定する。所定撮像部は、対象者の顔と略同一の高さに位置する撮像部１０である。

具体的には、特定部１５は、取得部１１により取得された画像毎に、当該画像の中心と抽出部１３により当該画像から抽出された顔領域の中心との距離を計算する。そして特定部１５は、取得部１１により取得された複数の画像の中から、画像の中心と顔領域の中心との距離が最も短い画像を撮像した撮像部１０を所定撮像部に特定する。

これにより、図２〜図５に示す例であれば、図５に示す画像を撮像した撮像部１０−２が所定撮像部に特定される。

提示制御部１７は、特定部１５により特定された所定撮像部による撮像のために対象者が向けるべき顔の方向を提示部３０に提示させる。

第１実施形態では、前述したように、提示部３０は、発光部３１−１〜３１−３により構成されており、図６に示すように、発光部３１−１〜３１−３は、それぞれ、撮像部１０−１〜１０−３に対応付けて設けられている。

そして提示制御部１７は、特定部１５により特定された所定撮像部に対応付けて設けられた発光部３１を発光させる。図２〜図６に示す例であれば、図５に示す画像を撮像した撮像部１０−２に対応付けて設けられた発光部３１−２が発光される。

これにより、対象者に対し、発光した発光部３１の方向（詳細には、発光した発光部３１に対応付けられた所定撮像部の方向）に顔を向けることが提示される。この結果、対象者が、発光した発光部３１の方向に顔を向ければ、対象者の顔は、対象者の顔に略正対して位置する所定撮像部の方向に向けられるため、所定撮像部は、顔認識に好適な顔の画像、即ち、顔が正面を向き、かつ顔に歪みが生じていない（顔の歪みが抑えられた）画像の撮像が可能となる。

図７は、第１実施形態の撮像支援装置１で行われる処理の流れの一例を示すフローチャートである。

まず、取得部１１は、撮像部１０−１〜１０−３それぞれから、対象者の顔を撮像した画像を取得する（ステップＳ１０１）。

続いて、抽出部１３は、取得部１１により取得された複数の画像それぞれから、顔領域を抽出する（ステップＳ１０３）。

続いて、特定部１５は、取得部１１により取得された複数の画像それぞれにおける抽出部１３により抽出された顔領域の位置に基づいて、撮像部１０−１〜１０−３の中から対象者の顔の撮像に適した撮像部１０である所定撮像部を特定する（ステップＳ１０５）。

続いて、提示制御部１７は、特定部１５により特定された所定撮像部に対応付けて設けられた発光部３１を発光させる（ステップＳ１０７）。

なお、ステップＳ１０３において、顔領域が抽出できない場合は、ステップＳ１０１に戻り、処理をやり直せばよい。

以上のように第１実施形態では、撮像部１０−１〜１０−３のうちいずれの撮像部１０が、対象者の顔の撮像に適した（対象者の顔と略同一の高さに位置する）所定撮像部であるか、及び当該所定撮像部の方向に顔を向けることが提示される。従って第１実施形態によれば、所定撮像部は、顔認識に好適な顔の画像、即ち、顔が正面を向き、かつ顔に歪みが生じていない（顔の歪みが抑えられた）画像の撮像が可能となり、顔認識に好適な画像の撮像を支援することができる。

（変形例１）
上記第１実施形態では、撮像部１０と発光部３１とが１対１で対応している場合を例に取り説明したがこれに限定されるものではない。例えば、撮像部１０の台数よりも発光部３１の台数を多くしてもよい（Ｎ＜Ｍとしてもよい）。

例えば、図８に示す例では、発光部の台数が１２台（Ｍ＝１２）であり、撮像部１０−１〜１０−３の周囲に発光部３１−１〜３１−１２が配置されている。そして提示制御部１７は、所定撮像部による撮像のために対象者が向けるべき顔の方向に位置する発光部３１を発光させる。

変形例１によれば、第１実施形態よりも詳細に、対象者に顔を向けさせる方向を提示できる。

なお変形例１では、提示制御部１７は、特定部１５により特定された所定撮像部だけでなく、所定撮像部により撮像された画像の中心と当該画像上の顔領域の中心との位置関係を用いて、発光部３１−１〜３１−１２の中から発光させる発光部３１を決定してもよい。

例えば、特定部１５により撮像部１０−２が所定撮像部に特定され、所定撮像部により撮像された画像の中心よりも上に顔領域の中心が位置するとする。この場合、対象者の顔の位置は、所定撮像部よりもやや高いことが想定されるため、提示制御部１７は、対象者の顔と最も正対すると考えられる発光部３１−５を発光させるようにしてもよい。

（変形例２）
上記第１実施形態では、発光部３１が撮像部１０に対応付けられて設けられている場合を例に取り説明したがこれに限定されるものではない。例えば、撮像部１０に当該撮像部１０を識別するための識別情報を対応付けて設けておき、提示制御部１７は、所定撮像部に対応付けられた識別情報を提示部３０に提示させるようにしてもよい。この場合、提示部３０は、ディスプレイや、ＬＥＤやランプなどが埋め込まれたボードなどにより実現できる。

なお提示部３０は、撮像部１０と並べて設けられていてもよいし、対象者の手元に設けられていてもよいし、どこに設けられていてもよい。例えば、撮像部１０による撮像に対象者による操作が必要な場合には、操作盤上に提示部３０を設けてもよいし、顔認識のための顔認識情報（例えば、写真）などの読み取りが必要な場合には、読み取り装置に併設して提示部３０を設けてもよい。

例えば、図９に示す例では、撮像部１０−１に当該撮像部１０−１を識別するためのマーク３２−１が対応付けられ、撮像部１０−２に当該撮像部１０−２を識別するためのマーク３２−２が対応付けられ、撮像部１０−３に当該撮像部１０−３を識別するためのマーク３２−３が対応付けられている。

また、図１０に示す例では、提示部３０は、ＬＥＤが埋め込まれたボードなどにより実現されている。詳細には、提示部３０には、マーク３２−１〜３２−３にそれぞれ対応するマーク３３−１〜３３−３が描かれており、埋め込まれたＬＥＤによりマーク３３−１〜３３−３を個々に点灯できるように構成されている。

なお、以下の説明では、マーク３２−１〜３２−３を各々区別する必要がない場合は、単にマーク３２と称し、マーク３３−１〜３３−３を各々区別する必要がない場合は、単にマーク３３と称する場合がある。

この場合、提示制御部１７は、提示部３０において、特定部１５により特定された所定撮像部に対応付けて設けられたマーク３２に対応するマーク３３を点灯する。これにより、対象者に対し、点灯したマーク３３に対応するマーク３２の方向（詳細には、当該マーク３２に対応付けられた所定撮像部の方向）に顔を向けることが提示される。

（変形例３）
上記変形例２では、撮像部１０と識別情報とが１対１で対応している場合を例に取り説明したがこれに限定されるものではない。例えば、撮像部１０の台数よりも識別情報の数を多くしてもよい。

例えば、図１１に示す例では、撮像部１０−１〜１０−３の周囲に、識別情報として身長を表す数値（１１０〜１９０）が配置されている。

また、図１２に示す例では、提示部３０には、身長を表す数値（１１０〜１９０）が描かれており、埋め込まれたＬＥＤにより身長を表す数値（１１０〜１９０）を個々に点灯できるように構成されている。

この場合、提示制御部１７は、提示部３０において、所定撮像部による撮像のために対象者が向けるべき顔の方向に位置する数値を点灯する。変形例３によれば、変形例２よりも詳細に、対象者に顔を向けさせる方向を提示できる。

なお変形例３でも、変形例１と同様の手法により、提示制御部１７は、特定部１５により特定された所定撮像部だけでなく、所定撮像部により撮像された画像の中心と当該画像上の顔領域の中心との位置関係を用いて、身長を表す数値（１１０〜１９０）の中から点灯させる数値を決定してもよい。

（変形例４）
上記第１実施形態では、発光部３１が撮像部１０に対応付けられて設けられている場合を例に取り説明したがこれに限定されるものではない。例えば、提示制御部１７は、所定撮像部の方向に対象者の顔を向けさせることを提示部３０に提示させるようにしてもよい。この場合、提示部３０は、ディスプレイなどにより実現できる。

なお提示部３０は、撮像部１０と並べて設けられていてもよいし、対象者の手元に設けられていてもよいし、どこに設けられていてもよい。例えば、撮像部１０による撮像に対象者による操作が必要な場合には、操作盤上に提示部３０を設けてもよいし、顔認識のための顔認識情報（例えば、写真）などの読み取りが必要な場合には、読み取り装置に併設して提示部３０を設けてもよい。

この場合、提示制御部１７は、図１３に示すように、撮像部１０−１〜１０−３のいずれが所定撮像部であるかを提示部３０上で提示させるとともに、所定撮像部の方向に対象者の顔を向けさせることを提示部３０に提示させる。

（第２実施形態）
第２実施形態では、所定撮像部により撮像された顔認識に好適な顔の画像を用いた顔認識処理について説明する。以下では、第１実施形態との相違点の説明を主に行い、第１実施形態と同様の機能を有する構成要素については、第１実施形態と同様の名称・符号を付し、その説明を省略する。

図１４は、第２実施形態の撮像支援装置１０１の一例を示す構成図である。図１４に示すように、第２実施形態の撮像支援装置１０１では、取得部１１１、抽出部１１３、判定部１１９、読取部１２１、認識部１２３、及び制御部１２５が、第１実施形態と相違する。

なお、対象者に対する顔を向けるべき方向の提示までは、第１実施形態と同様である。

取得部１１１は、提示部３０による提示後に所定撮像部により対象者の顔を撮像した認識用画像を更に取得する。つまり、取得部１１１は、所定撮像部から、顔認識に好適な顔の画像、即ち、対象者の顔が正面を向き、かつ対象者の顔に歪みが生じていない（対象者の顔の歪みが抑えられた）画像を取得する。

抽出部１１３は、取得部１１１により取得された認識用画像から顔領域を抽出する。なお、顔領域の抽出手法は、第１実施形態と同様である。

判定部１１９は、抽出部１１３により抽出された顔領域に基づいて、当該顔領域が照合に適しているか否かを判定する。具体的には、判定部１１９は、取得部１１１により取得された認識用画像における抽出部１１３により抽出された顔領域の位置や向きなどに基づいて、当該顔領域が照合に適しているか否かを判定する。

例えば、判定部１１９は、取得部１１１により取得された認識用画像の中心と抽出部１１３により抽出された顔領域の中心との距離を計算し、計算した距離が距離用の閾値以下であれば、顔に歪みが生じておらず（対象者の顔の歪みが抑え）、当該顔領域が照合に適し、計算した距離が距離用の閾値を超えていれば、顔に歪みが生じており（顔の歪みが大きく）、当該顔領域が照合に適さないと判定する。

また例えば、判定部１１９は、抽出部１１３により抽出された顔領域（認識用画像に写る顔）が正面を向いていれば当該顔領域が照合に適し、正面を向いていなければ当該顔領域が照合に適さないと判定する。

なお、顔の向きの識別は、公知の識別技術を用いて行えばよく、例えば、Tomoki Watanabe, Satoshi Ito, Kentaro Yoko: “Co-occurrence Histogram of Oriented Gradients for Human Detection”, IPSJ Transaction on Computer Vision and Applications Volume 2 March 2010, pp.39-47に開示されている技術などを用いればよい。但し、この技術では、２クラス識別器を用いて、入力されたパターンが「人物」であるか「非人物」であるかを識別するものであるため、第２実施形態では、この２クラス識別器を、「正面を向いた顔」であるか「正面を向いていない顔」であるかを識別する識別器とすればよい。

読取部１２１は、照合元人物の顔情報を読み取る。第２実施形態では、読取部１２１は、対象者が所持するカードや冊子に埋め込まれたＩＣから照合元人物の顔情報を読み取るものとするが、これに限定されるものではない。第２実施形態では、照合元人物の顔情報は、照合元人物の顔画像であるものとするが、これに限定されず、照合元人物の顔の特徴量などであってもよい。

認識部１２３は、判定部１１９により、抽出部１１３により抽出された顔領域が照合に適していると判定された場合、読取部１２１から照合元人物の顔情報を取得し、当該顔情報に基づいて抽出部１１３により抽出された顔領域に写る顔を照合し、対象者が照合元人物であるか否かを認識する。

具体的には、認識部１２３は、取得部１１１により取得された認識用画像から抽出部１１３により抽出された顔領域を切り出し、顔画像とする。なお、顔領域の矩形の左上の座標を（ｘ１、ｙ１）、右下の座標を（ｘ２、ｙ２）とすると、切り出された横幅ｘ２−ｘ１、縦幅ｙ２−ｙ１の顔領域の画像が顔画像となる。但し、顔画像は、これに限定されず、認識部１２３は、例えば、認識用画像に対する顔特徴点検出及び特徴点に基づく顔領域の正規化で生成した画像を顔画像としてもよい。

なお、認識部１２３は、読取部１２１から取得した照合元人物の顔情報（顔画像）についても、必要であれば、認識用画像と同様の処理を施す。

次に、認識部１２３は、両顔画像それぞれから顔特徴量を抽出する。第２実施形態では、顔特徴量は、輝度値を並べたベクトルを長さ１に正規化した特徴量とするが、これに限定されず、顔画像にソーベルフィルタやガボールフィルタを掛けて得られる画像の輝度値を並べたベクトルとしてもよい。なお、認識部１２３は、抽出した顔特徴量に白色化変換などの線型変換を更に施してもよい。

次に、認識部１２３は、両顔特徴量の顔類似度を算出する。第２実施形態では、顔類似度は、顔特徴量同士の内積であるものとするが、これに限定されず、ベクトルの距離などとしてもよい。なお、顔特徴量は長さ１のベクトルなので、内積は単純類似度と同じである。

従って、第２実施形態では、顔類似度は、ｘ１ｙ１＋ｘ２ｙ２＋・・・＋ｘｄｙｄとなる。但し、（ｘ１、．．．、ｘｄ）、及び（ｙ１、．．．、ｙｄ）は顔特徴量の長さ１のベクトルである。

なお、照合元人物の顔情報が照合元人物の顔の特徴量である場合、認識部１２３は、認識用画像の顔画像から抽出した顔特徴量と照合元人物の顔の特徴量との顔類似度を、上述の手法で算出する。

そして認識部１２３は、算出した顔類似度が顔認識用の閾値を超えていれば、対象者が照合元人物であると認識し、顔認識用の閾値以下であれば、対象者が照合元人物でないと認識する。

制御部１２５は、認識部１２３の認識結果に応じた制御を行う。例えば、制御部１２５は、認識部１２３により対象者が照合元人物であると認識されれば、ゲートを開けたり、扉を開錠したりする制御を行い、認識部１２３により対象者が照合元人物でないと認識されれば、ゲートを開けたり、扉を開錠したりする制御を行わない。

図１５は、第２実施形態の撮像支援装置１０１で行われる処理の流れの一例を示すフローチャートである。

まず、取得部１１１は、提示部３０による提示後に所定撮像部により対象者の顔を撮像した認識用画像を取得する（ステップＳ２０１）。

続いて、抽出部１１３は、取得部１１１により取得された認識用画像から顔領域を抽出する（ステップＳ２０３）。

続いて、判定部１１９は、抽出部１１３により抽出された顔領域に基づいて、当該顔領域が照合に適しているか否かを判定する（ステップＳ２０５）。なお、顔領域が照合に適していない場合は（ステップＳ２０５でＮｏ）、ステップＳ２０１に戻り、処理をやり直す。

一方、顔領域が照合に適している場合（ステップＳ２０５でＹｅｓ）、読取部１２１は、照合元人物の顔情報を読み取り、認識部１２３は、読取部１２１から照合元人物の顔情報を取得し、当該顔情報に基づいて抽出部１１３により抽出された顔領域に写る顔を照合し、対象者が照合元人物であるか否かを認識する（ステップＳ２０７）。

続いて、制御部１２５は、認識部１２３の認識結果に応じた制御を行う（ステップＳ２０９）。

なお、ステップＳ２０３において、顔領域が抽出できない場合は、ステップＳ２０１に戻り、処理をやり直せばよい。

以上のように第２実施形態では、認識用画像は、顔認識に好適な顔の画像、即ち、顔が正面を向き、かつ顔に歪みが生じていない（顔の歪みが抑えられた）画像であるため、顔認識における認識精度を向上できる。

（第３実施形態）
第３実施形態では、所定撮像部により最初に撮像された画像が顔認識に好適な顔の画像であれば、この画像を用いて顔認識処理を行う例について説明する。以下では、第２実施形態との相違点の説明を主に行い、第２実施形態と同様の機能を有する構成要素については、第２実施形態と同様の名称・符号を付し、その説明を省略する。

図１６は、第３実施形態の撮像支援装置２０１の一例を示す構成図である。図１６に示すように、第３実施形態の撮像支援装置２０１では、判定部２１９が、第２実施形態と相違する。

判定部２１９は、特定部１５により特定された所定撮像部により撮像された画像から抽出された顔領域に基づいて、当該顔領域が照合に適しているか否かを判定する。なお、顔領域が照合に適しているか否かの判定手法は、第１実施形態と同様である。

図１７は、第３実施形態の撮像支援装置２０１で行われる処理の流れの一例を示すフローチャートである。

まず、ステップＳ３０１〜Ｓ３０５までの処理は、図７に示すフローチャートのステップＳ１０１〜Ｓ１０５までの処理と同様である。

続いて、判定部２１９は、特定部１５により特定された所定撮像部により撮像された画像から抽出部１１３により抽出された顔領域に基づいて、当該顔領域が照合に適しているか否かを判定する（ステップＳ３０７）。なお、顔領域が照合に適している場合は（ステップＳ３０７でＹｅｓ）、ステップＳ３１７に進む。

一方、顔領域が照合に適していない場合（ステップＳ３０７でＮｏ）、提示制御部１７は、特定部１５により特定された所定撮像部に対応付けて設けられた発光部３１を発光させる（ステップＳ３０９）。

以降のステップＳ３１１〜Ｓ３１９までの処理は、図１５に示すフローチャートのステップＳ２０１〜Ｓ２０９までの処理と同様である。

以上のように第３実施形態では、所定撮像部により最初に撮像された画像が顔認識に好適な顔の画像であれば、この画像を用いて顔認識を行うため、認識に要する時間（詳細には、認識までに要する時間）を短縮できる。

（変形例５）
上記第２、３実施形態では、照合元人物の顔情報を読取部１２１が読み取る場合を例にとり説明したが、これに限定されず、照合元人物の顔情報を撮像支援装置が備える記憶部などに予め記憶しておいてもよい。

（ハードウェア構成）
図１８は、上記各実施形態及び各変形例の撮像支援装置のハードウェア構成の一例を示す構成図である。図１８に示すように、上記各実施形態及び各変形例の撮像支援装置は、ＣＰＵなどの制御装置９０１と、ＲＯＭやＲＡＭなどの主記憶装置９０２と、ＨＤＤやＳＳＤなどの補助記憶装置９０３と、ＬＥＤ、ランプ、又はディスプレイなどの提示装置９０４と、マウスやキーボードなどの入力装置９０５と、カメラなどの撮像装置９０６とを、備えており、通常のコンピュータを利用したハードウェア構成で実現できる。

上記各実施形態及び各変形例の撮像支援装置で実行されるプログラムは、ＲＯＭ等に予め組み込んで提供される。

また、上記各実施形態及び各変形例の撮像支援装置で実行されるプログラムを、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、ＣＤ−Ｒ、メモリカード、ＤＶＤ、フレキシブルディスク（ＦＤ）等のコンピュータで読み取り可能な記憶媒体に記憶されて提供するようにしてもよい。

また、上記各実施形態及び各変形例の撮像支援装置で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するようにしてもよい。また、上記各実施形態及び各変形例の撮像支援装置で実行されるプログラムを、インターネット等のネットワーク経由で提供または配布するようにしてもよい。

上記各実施形態及び各変形例の撮像支援装置で実行されるプログラムは、上述した各部をコンピュータ上で実現させるためのモジュール構成となっている。実際のハードウェアとしては、例えば、制御装置９０１が補助記憶装置９０３からプログラムを主記憶装置９０２上に読み出して実行することにより、上記各部がコンピュータ上で実現されるようになっている。

以上説明したとおり、上記各実施形態及び各変形例によれば、顔認識に好適な画像の撮像を支援することができる。

なお本発明は、上記各実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化することができる。また上記各実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成することができる。例えば、実施形態に示される全構成要素からいくつかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせても良い。

例えば、上記実施形態のフローチャートにおける各ステップを、その性質に反しない限り、実行順序を変更し、複数同時に実施し、あるいは実施毎に異なった順序で実施してもよい。

１、１０１、２０１ 撮像支援装置
１０−１〜１０−Ｎ（１０） 撮像部
１１、１１１ 取得部
１３、１１３ 抽出部
１５ 特定部
１７ 提示制御部
３０ 提示部
３１−１〜３１−Ｍ（３１） 発光部
１１９、２１９ 判定部
１２１ 読取部
１２３ 認識部
１２５ 制御部

Claims (13)

1. 複数の撮像部で対象者の顔を撮像した複数の画像を取得する取得部と、
   前記複数の画像それぞれから、顔領域を抽出する抽出部と、
   前記複数の画像それぞれにおける前記顔領域の位置に基づいて、前記複数の撮像部の中から前記対象者の顔の撮像に適した撮像部である所定撮像部を特定する特定部と、
   前記所定撮像部による撮像のために前記対象者が向けるべき顔の方向を提示部に提示させる提示制御部と、
   を備える撮像支援装置。
2. 前記提示部は、前記複数の撮像部にそれぞれ対応付けて設けられた複数の発光部であり、
   前記提示制御部は、前記所定撮像部に対応付けて設けられた発光部を発光させる請求項１に記載の撮像支援装置。
3. 前記提示部は、複数の発光部であり、
   前記提示制御部は、前記対象者が向けるべき顔の方向に位置する発光部を発光させる請求項１に記載の撮像支援装置。
4. 前記複数の撮像部それぞれには、当該撮像部を識別するための識別情報が対応付けて設けられおり、
   前記提示制御部は、前記所定撮像部に対応付けられた識別情報を前記提示部に提示させる請求項１に記載の撮像支援装置。
5. 前記複数の撮像部の周辺には、複数の識別情報が設けられており、
   前記提示制御部は、前記所定撮像部による撮像のために前記対象者が向けるべき顔の方向に位置する識別情報を前記提示部に提示させる請求項１に記載の撮像支援装置。
6. 前記提示制御部は、前記所定撮像部の方向に前記対象者の顔を向けさせることを前記提示部に提示させる請求項１に記載の撮像支援装置。
7. 前記複数の撮像部は、縦方向に配置されている請求項１に記載の撮像支援装置。
8. 前記取得部は、前記提示部による提示後に前記所定撮像部により撮像された認識用画像を更に取得し、
   前記抽出部は、前記認識用画像から顔領域を抽出し、
   照合元人物の顔情報を取得し、当該顔情報に基づいて前記顔領域に写る顔を照合し、前記対象者が前記照合元人物であるか否かを認識する認識部を更に備える請求項１に記載の撮像支援装置。
9. 前記顔領域に基づいて、当該顔領域が照合に適しているか否かを判定する判定部を更に備え、
   前記認識部は、前記顔領域が照合に適している場合、前記対象者が前記照合元人物であるか否かを認識する請求項８に記載の撮像支援装置。
10. 前記所定撮像部により撮像された前記画像から抽出された前記顔領域に基づいて、当該顔領域が照合に適しているか否かを判定する判定部と、
    前記顔領域が照合に適している場合、照合元人物の顔情報を取得し、当該顔情報に基づいて前記顔領域に写る顔を照合し、前記対象者が前記照合元人物であるか否かを認識する認識部と、
    を更に備える請求項１に記載の撮像支援装置。
11. 前記複数の撮像部及び前記提示部を更に備える請求項１に記載の撮像支援装置。
12. 複数の撮像部で対象者の顔を撮像した複数の画像を取得する取得ステップと、
    前記複数の画像それぞれから、顔領域を抽出する抽出ステップと、
    前記複数の画像それぞれにおける前記顔領域の位置に基づいて、前記複数の撮像部の中から前記対象者の顔の撮像に適した撮像部である所定撮像部を特定する特定ステップと、
    前記所定撮像部による撮像のために前記対象者が向けるべき顔の方向を提示部に提示させる提示制御ステップと、
    を備える撮像支援方法。
13. 複数の撮像部で対象者の顔を撮像した複数の画像を取得する取得ステップと、
    前記複数の画像それぞれから、顔領域を抽出する抽出ステップと、
    前記複数の画像それぞれにおける前記顔領域の位置に基づいて、前記複数の撮像部の中から前記対象者の顔の撮像に適した撮像部である所定撮像部を特定する特定ステップと、
    前記所定撮像部による撮像のために前記対象者が向けるべき顔の方向を提示部に提示させる提示制御ステップと、
    をコンピュータに実行させるためのプログラム。

Images