JPWO2018109869A1 - 監視カメラシステム、監視カメラ - Google Patents

Abstract

ズーム映像を用いた顔認証処理中に対象人物が急な動きをした場合、対象人物がズームレンズの撮影領域から外れてしまうとの課題があった。本発明によれば、監視カメラは、常時、監視領域を撮影する広角レンズと、パン方向、チルト方向へ動作可能なズームレンズと、広角レンズにて撮影された広角映像を用いて顔検出処理を実施する顔検出部と、検出された顔領域をズームレンズにて撮影し、撮影されたズーム映像を用いて顔認証処理を実施する顔認証部とを備える。

Description

本発明は、顔認証を行う監視カメラシステム、及び監視カメラに関するものである。

監視カメラシステムでは、監視領域全体を監視する必要があるため、広角映像を用いて顔検出処理を行い、顔が検出された注目領域のズーム映像を用いて顔認証処理を行うことがある。また、広角レンズとズームレンズを通して入射する光の光軸上に撮像センサをそれぞれ配置し、被写体からの光を、反射面を用いて２つのレンズに選択的に入射させるカメラ技術が開示されている（例えば、特許文献１を参照）。

特開２０１０−１６６５９

特許文献１の技術は、広角レンズとズームレンズを選択的に用いるため、広角映像とズーム映像とは同時に取得しない。そのため、ズーム映像を用いた顔認証処理中に対象人物が急な動きをした場合、対象人物がズームレンズの撮影領域から外れてしまうとの課題がある。本発明は上記のような課題を解消するためになされたものである。

この発明は上述のような課題を解消するためになされたもので、本発明によれば、監視カメラは、常時、監視領域を撮影する広角レンズと、パン方向、チルト方向へ動作可能なズームレンズと、広角レンズにて撮影された広角映像を用いて顔検出処理を実施する顔検出部と、検出された顔領域をズームレンズにて撮影し、撮影されたズーム映像を用いて顔認証処理を実施する顔認証部とを備える。

この発明によれば、ズーム映像を用いた顔認証処理中に対象人物が急な動きをした場合、対象人物がズームレンズの撮影領域から外れてしまうことを防止する効果がある。

この発明の実施の形態１による監視カメラを含む監視システム全体の構成図である。 この発明の実施の形態１による監視カメラの機能構成図である。 広角レンズにて撮影した映像の概念図である。 この発明の実施の形態１による座標変換情報の具体例である。 この発明の実施の形態１による監視カメラのハードウェア構成図である。 この発明の実施の形態１による動作フロー図である。 この発明の実施の形態２による監視カメラの機能構成図である。 この発明の実施の形態２による動作フロー図である。 この発明の実施の形態３による監視カメラの機能構成図である。 この発明の実施の形態３による動作フロー図である。

実施の形態１．
以下、この発明の実施の形態を図に基づいて説明する。
図１は、この発明の実施の形態１による監視カメラを含む監視システム全体の構成図である。図１において、監視カメラ１０１、監視用ＰＣ１０２及びレコーダ１０３はそれぞれ、ネットワーク１０４に接続されている。そして、監視カメラ１０１により対象領域を撮影することで得られた映像は、監視用ＰＣ１０２により監視され、レコーダ１０３に記録され、モニタ１０５に表示される。また、監視カメラ１０１は、撮影した映像から顔を検出し、予め登録された顔情報に基づき顔認証を実施する。映像は、画像でもよい。また、監視用ＰＣ１０２とレコーダ１０３、レコーダ１０３とモニタ１０５、監視用ＰＣ１０２とレコーダ１０３とモニタ１０５は一体の装置であってもよい。

図２は、この発明の実施の形態１による監視カメラの機能構成図である。
広域範囲を撮影可能な広角レンズ２０１と水平方向（パン方向）・垂直方向（チルト方向）に動作可能なズームレンズ（望遠レンズ）２０２との双方にて監視領域を撮影する。広角レンズとは、ズームレンズと比較して焦点距離の短いレンズであり、監視領域を広く写すことができる。広角レンズ２０１は、常時、監視領域を撮影する。

広角レンズ２０１から入ってきた光は、第一撮像素子２０３（イメージセンサ、ＣＣＤ：Ｃｈａｒｇｅ−Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅとも称される）で電気信号である広角映像信号に常時変換される。図示は省略しているが、第一撮像素子２０３にて変換された広角映像信号は、映像送信部２０４よりネットワーク１０４経由にて、監視用ＰＣ１０２へ送信され表示される。また、広角映像信号は、映像送信部２０４よりネットワーク１０４経由にて、レコーダ１０３へ送信され、記録される。また、広角映像信号は、映像送信部２０４よりネットワーク１０４を介してレコーダ１０３へ常時送信され、レコーダ１０３にて常時記録されてもよい。なお、広角映像信号は、映像送信部２０４よりネットワーク１０４を介さず、監視用ＰＣ１０２、レコーダ１０３へ送信されてもよい。なお、広角レンズ２０１と第一撮像素子２０３は、複数セットあってもよい。

顔検出部２０５は、広角映像信号を用いて顔検出処理を常時実施する。顔検出部２０５は、顔が検出された場合、検出有情報を座標変換部２０６へ通知する。検出有情報を受信した座標変換部２０６は、座標変換処理を実施する。座標変換処理の具体例としては、広角レンズ２０１で撮影された広角映像における顔が検出された顔領域の位置情報である検出座標情報と顔領域の大きさを決定する。次に、決定した検出座標情報と、顔領域の大きさと例えば座標記憶部２０７に予め保存された座標変換情報に基づいてズームレンズのパン方向、チルト方向への駆動制御、ズーム制御、フォーカス制御に用いるズームレンズ駆動情報を決定する。座標変換処理の詳細は、後述する。座標変換部２０６は、駆動情報を制御部２０８へ通知する。また図示は省略しているが、顔検出部２０５は、検出有情報を映像送信部２０４、第二撮像素子２１３、顔認証部２１４へも通知しても良い。制御部２０８は、駆動情報に基づいて、ズームレンズ駆動部２０９を制御し、ズームレンズ２０２を駆動させる。ズームレンズ駆動部２０９は、パン・チルト駆動部２１０、ズーム駆動部２１１、フォーカス駆動部２１２を有する。

ズームレンズ２０２から入ってきた光は、第二撮像素子２１３で電気信号であるズーム映像信号に変換される。第二撮像素子２１３は、顔検出部２０５より検出有情報を受信した場合に変換処理を実施してもよい。図示は省略しているが、第二撮像素子２１３にて変換されたズーム映像信号は、映像送信部２０４よりネットワーク１０４経由にて、監視用ＰＣ１０２へ送信され表示される。また、ズーム映像信号は、映像送信部２０４よりネットワーク１０４経由にて、レコーダ１０３へ送信され、記録される。また、顔検出部２０５にて顔が検出された場合、ズーム映像信号は、監視カメラ１０１からネットワーク１０４を介してレコーダ１０３へ送信され、レコーダ１０３に記録されてもよい。なお、ズーム映像信号は、映像送信部２０４よりネットワーク１０４を介さず、監視用ＰＣ１０２、レコーダ１０３へ送信されてもよい。映像送信部２０４は、顔検出部２０５より検出有情報を受信した場合にズーム映像信号を送信しても良い。つまり、顔検出部２０５にて顔が検出されない場合、ズーム映像信号は、監視カメラ１０１にて作成されず、あるいは破棄されレコーダ１０３へ送信されなくてもよい。顔領域のズーム映像がレコーダ１０３へ記録される。なお、ズームレンズ２０２と第二撮像素子２１３は、複数セットあってもよい。

顔認証部２１４は、ズーム映像信号を用いて顔認証処理を実施する。顔認証部２１４は、顔検出部２０５より検出有情報を受信した場合に顔認証処理を実施してもよい。顔認証部２１４は、顔情報保存部２１５に予め登録された顔情報に基づき顔認証処理を実施する。顔認証部２１４は、認証結果である一致情報、不一致情報を認証結果送信部２１６へ通知する。認証結果送信部２１６は、認証結果をネットワーク１０４経由にて、監視用ＰＣ１０２、レコーダ１０３へ送信する。なお、認証結果は、認証結果送信部２１６よりネットワーク１０４を介さず、監視用ＰＣ１０２、レコーダ１０３へ送信されてもよい。認証結果のみではなく、ズーム映像も認証結果送信部２１６よりネットワーク１０４経由にて監視用ＰＣ１０２、レコーダ１０３へ送信しても良い。また、顔情報保存部２１５は、レコーダ１０３や、他の装置である認証サーバーや認証装置に設けても良い。また、顔認証部２１４、認証結果送信部２１６もレコーダ１０３や認証装置に設けても良い。その場合、監視カメラ１０１の顔検出部２０５から検出有情報とズーム映像とをレコーダ１０３や認証装置へ通知すればよい。さらに、顔検出部２０５、座標変換部２０６、座標記録部２０７についても、各々レコーダ１０３や認証装置に設けても良い。その場合、レコーダ１０３や認証装置から監視カメラ１０１の制御部２０８へ駆動情報を通知すればよい。

次に座標変換処理の詳細について図３、図４を用いて説明する。
広角レンズ２０１にて撮影した映像の概念図を図３に示す。映像は、複数のブロックに分割し、各ブロックに識別情報を付与する。識別情報の具体例を以下に示す。第一の具体例としては、Ｘ座標とＹ座標で識別し、（Ｘ座標、Ｙ座標）で示す方法である。例えば、図３のブロック３０１は（１、１）、ブロック３０２は（２、１）、顔領域のブロック３０３は（１４、３）、ブロック３０４は（１０、５）、ブロック３０５は（９、６）、広域映像の中心ブロック３０６は（１０、６）、ブロック３０７は（１１、６）、ブロック３０８は（１０、７）ブロックとなる。第二の具体例としては、各ブロックに識別番号を付加する方法である。例えば、図３の左上から右へ順番に識別番号を付け、右端へ到達した後左端へ戻り一段下がり再度右へ順番に識別番号を付ける。例えば、図３のブロック３０１は（１）、ブロック３０２は（２）、顔領域のブロック３０３は（５２）、ブロック３０４は（８６）、ブロック３０５は（１０４）、広域映像の中心ブロック３０６は（１０５）、ブロック３０７は（１０６）、ブロック３０８は（１２４）となる。

次に、座標記憶部２０７に予め保存された座標変換情報の具体例を図４に示す。
座標記憶部２０７に、各ブロック毎の、その領域をズームレンズ２０２にて撮影するためのパン角度、チルト角度を予め保存する。図４の（Ａ）では、の識別情報（識別番号）毎にズームレンズ２０２を駆動させるためのパン角度、チルト角度が対応付けられ保存される。以降、「位置情報と角度対応表」と称することもある。パン角度、チルト角度の決定方法は、例えば各ブロックにて、広角映像の中心座標が、ズーム映像の中心座標と一致するようにズームレンズ２０２のパン角度とチルト角度を決定する。この例では、図３の広角レンズ２０１にて撮影した映像の中心ブロック３０６（１０５）をズームレンズ２０２で撮影するためのパン角度を「０度」とし、１つ右側のブロック３０７（１０６）をズームレンズ２０２で撮影するためのパン角度を「＋１０度」とし、１つ左側のブロック３０５（１０４）をズームレンズ２０２で撮影するためのパン角度を「−１０度」としている。また、中心ブロック３０６（１０５）をズームレンズ２０２で撮影するためのチルト角度を「０度」とし、１つ上のブロック３０４（８６）をズームレンズ２０２で撮影するためのチルト角度を「＋１０度」とし、１つ下のブロック３０８（１２４）をズームレンズ２０２で撮影するためのパン角度を「−１０度」としている。

図４の（Ｂ）では、顔領域の大きさ（ブロック数）毎にズームレンズ２０２の倍率、フォーカス調整値が対応付けられ保存される。以降、「大きさと倍率対応表」と称することもある。例えば、顔検出部２０５は、図３の広域映像にて顔を検出する。検出有情報を受信した座標変換部２０６は、顔が検出されたブロック３０３の検出座標情報を（５２）、顔領域の大きさをブロック数１と決定する。なお、図４の（Ｂ）を省略しても本発明の効果を得ることができる。座標変換部２０６は、検出座標情報と顔領域の大きさと座標変換情報（図４（Ａ）、図４（Ｂ））に基づいてズームレンズ駆動情報を決定する。検出座標情報を（５２）に基づきパン角度「＋４０度」、チルト角度「＋３０度」が、顔領域の大きさブロック数１に基づき倍率「１０倍」、フォーカス調整値「Ａ」が決定し、制御部２０８へ通知する。制御部２０８は、駆動情報であるパン角度、チルト角度に応じてパン・チルト駆動部２１０を制御し、倍率に応じてズーム駆動部２１１を制御し、フォーカス調整値に応じてフォーカス駆動部２１２を制御し、ピントを調整する。これにより、顔領域がズームレンズ２０２で撮影できるようになる。

座標変換部２０６で顔領域の大きさが２ブロック以上の場合、検出座標情報を決定する方法の具体例を以下開示する。顔領域の中心に最も近い中心座標を持つブロックに基づいて検出座標情報を決定する。

図５は、この発明の実施の形態１による監視カメラのハードウェア構成図である。
監視カメラ１０１は、広角レンズ５０１、ズームレンズ５０２、第一撮像素子５０３、送信装置５０４、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）５０５、メモリ５０６、駆動装置５０７、第二撮像素子５０８などによりハードウェア的に実現される。ＣＰＵは、中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、プロセッサ、ＤＳＰともいう。メモリは、例えば、ＲＡＭ、ＲＯＭ、フラッシュメモリー、ＥＰＲＯＭ、ＥＥＰＲＯＭ等の、不揮発性または揮発性の半導体メモリや、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、ＤＶＤ等が該当する。なお、監視カメラ１０１のハードウェア構成は、図３の構成に限らない。

監視カメラ１０１の各機能構成とハードウェアとの対応関係の１例を示す。広角レンズ２０１は広角レンズ５０１によって構成される。ズームレンズ２０２はズームレンズ５０２によって構成される。第一撮像素子２０３は第一撮像素子５０３によって構成される。映像送信部２０４、認証結果送信部２１６は送信装置５０４によって構成される。顔検出部２０５、座標変換部２０６、制御部２０８、顔認証部２１４はＣＰＵ５０５によって構成される。座標記憶部２０７、顔情報保存部２１５はメモリ５０６によって構成される。ズームレンズ駆動部２０９、パン・チルト駆動部２１０、ズーム駆動部２１１、フォーカス駆動部２１２は駆動装置５０７によって構成される。第二撮像素子２１３は第二撮像素子５０８によって構成される。

次に動作について説明する。図６は、この発明の実施の形態１による動作フロー図である。
ステップＳＴ６０１にて、第一撮像素子２０３は、広角レンズ２０１から入手した信号を電気信号である広角映像信号へ変換する。
ステップＳＴ６０２にて、顔検出部２０５は、広角映像信号を用いて顔検出処理を実施する。
ステップＳＴ６０３にて、顔検出部２０５は、ステップＳＴ６０２の顔検出処理にて顔が検出されたか否か判断する。顔が検出された場合は、検出有情報を座標変換部２０６へ通知し、ステップＳＴ６０４とステップＳＴ６０６へ移行する。顔が検出されない場合は、ステップＳＴ６０１の処理へ戻る。

ステップＳＴ６０４にて、座標変換部２０６は、広角レンズ２０１で撮影された領域における顔が検出された顔領域の位置情報である検出座標情報を決定する。
ステップＳＴ６０５にて、座標変換部２０６は、「位置情報と角度対応表」とステップＳＴ６０４にて決定した位置情報である検出座標情報とに基づいてズームレンズを駆動制御するための駆動情報であるパン角度・チルト角度を決定する。
ステップＳＴ６０６にて、座標変換部２０６は、顔領域の大きさを決定する。
ステップＳＴ６０７にて、座標変換部２０６は、「大きさと倍率対応表」とステップＳＴ６０６にて決定した顔領域の大きさとに基づいてズームレンズを駆動制御するための駆動情報である倍率・フォーカス値を決定する。なお、ステップＳＴ６０６、ステップＳＴ６０７の処理を省略しても本発明の効果を得ることはできる。

ステップＳＴ６０８にて、座標変換部２０６は、駆動情報を制御部２０８へ通知する。
ステップＳＴ６０９にて、制御部２０８は、ズームレンズ駆動部２０９を介して、ステップＳＴ６０８にて受信した駆動情報に従ってズームレンズを駆動制御する。具体的には、パン角度、チルト角度に応じてパン・チルト駆動部２１０を制御しズームレンズ２０２の水平方向、垂直方向の駆動を制御する。また、倍率に応じてズーム駆動部２１１を制御しズームレンズ２０２のズーム倍率を制御する。また、フォーカス調整値に応じてフォーカス駆動部２１２を制御しピントを調整する。これにより、顔領域がズームレンズ２０２で撮影できるようになる。

ステップＳＴ６１０にて、第二撮像素子２０３は、ズームレンズ２０２から入手した信号を電気信号であるズーム映像信号へ変換する。第二撮像素子２０３は、ズームレンズ２０２から入手した顔領域のズーム映像信号を電気信号であるズーム映像信号へ変換する。
ステップＳＴ６１１にて、顔認証部２１４は、ズーム映像信号を用いて顔認証処理を実施する。
ステップＳＴ６１２にて、認証結果送信部２１６は、認証結果を監視用ＰＣ１０２、レコーダ１０３などへ送信する。

以上説明したように、この実施の形態１によれば、広角レンズを用いて常時広域範囲を撮影し、広角レンズで撮影した広角映像信号を用いて顔検出処理を実施するため、顔領域の位置情報を常に更新することができる。広角映像信号を用いた顔検出処理で得た位置情報に基づきズームレンズを駆動制御し、常に顔領域がズームレンズで撮影できるようになる。よって、対象人物が急な動きをした場合であっても対象人物がズームレンズの撮影領域から外れてしまうとの課題を解決することができる。
また、取得した映像を用いて顔検出処理を行い、顔領域に対して電子ズームによる拡大処理された映像を用いて顔認証処理が行われる場合がある。電子ズームによる拡大処理は、画素情報が増えるのではなく、推測にて補った補間画素を用いて拡大映像を作成する。実施の形態１によれば、ズームレンズを用いて高倍率撮影することができ、顔領域の画像の画素情報が増える。これにより、高画質の画像を用いて顔認証を実施することができ、顔認証の制度が向上する。

実施の形態２．
実施の形態１では、顔検出処理にて複数の顔が検出された場合についての処理方法が開示されていない。実施の形態２では、顔検出処理にて複数の顔が検出された場合についての処理方法について開示する。実施の形態１とは異なる点を主に説明する。

この発明の実施の形態２による監視カメラを含む監視システム全体の構成図は、実施の形態１と同様であるので、説明を省略する。

図７は、この発明の実施の形態２による監視カメラの機能構成図である。図７において図２と同一の符号は、同一または相当するものであるので、説明は省略する。顔検出部７０１は、広角映像信号を用いて顔検出処理を常時実施する。顔検出部７０１は、顔が検出された場合、検出有情報を座標変換部７０２へ通知する。顔検出部７０１は、複数の顔が検出された場合、その旨、あるいは検出された顔の数を座標変換部７０２へ通知しても良い。

検出有情報を受信した座標変換部７０２は、顔が複数検出されているか否かを判断する。顔が複数検出されている場合、検出箇所はズームレンズの搭載数より多いか否か判断する。検出箇所がズームレンズの搭載数より多い場合、ズームレンズ撮影箇所の顔領域を決定する。ズームレンズ撮影箇所の顔領域の決定方法の具体例を以下に示す。第一の具体例としては、広域映像の中心に最も近いものをズームレンズ撮影箇所の顔領域とする。第二の具体例としては、顔領域の最も大きいものをズームレンズ撮影箇所の顔領域とする。ズームレンズ撮影箇所の数は、ズームレンズ２０２の搭載数とすればよい。顔検出処理にて検出された顔の回数分、顔領域の位置情報である検出座標情報と顔領域の大きさを決定する。次に、ズームレンズ撮影箇所の顔領域については、決定した検出座標情報と、顔領域の大きさと例えば座標記憶部２０７に予め保存された座標変換情報に基づいてズームレンズのパン方向、チルト方向への駆動制御、ズーム制御、フォーカス制御に用いるズームレンズ駆動情報を決定し、制御部２０８へ通知する。ズームレンズ撮影箇所とは異なる顔領域については、顔領域の大きさと例えば座標記憶部２０７に予め保存された座標変換情報に基づいてズーム制御に用いる倍率を決定し、顔領域の位置情報である検出座標情報とともに制御部２０８へ通知する。顔が複数検出されていない場合、あるいは検出箇所がズームレンズ２０２の搭載数以下の場合、実施の形態１と同様の処理であるので説明を省略する。

制御部７０３は、ズームレンズ撮影箇所の顔領域については、駆動情報に基づいて、ズームレンズ駆動部２０９を制御し、ズームレンズ２０２を駆動させる。ズームレンズ撮影箇所とは異なる顔領域については、倍率と位置情報に基づいて、電子ズーム部７０４を制御する。電子ズーム部７０４は、受信した位置情報と電子ズームの中心座標を一致させ、受信した倍率に合せて第一撮像素子２０３にて変換された広角映像信号の一部を拡大処理し、ズームレンズ撮影箇所とは異なる顔領域の電子ズーム映像信号を作成する。顔認証部７０５は、ズームレンズ撮影箇所の顔領域については第二撮像素子からのズーム映像信号を用いて顔認証処理を実施する。ズームレンズ撮影箇所とは異なる顔領域については、電子ズーム部７０４からの電子ズーム映像信号を用いて顔認証処理を実施する。

この発明の実施の形態２による監視カメラのハードウェア構成図は、実施の形態１と同様である。監視カメラ１０１の各機能構成とハードウェアとの対応関係の１例を示す。顔検出部７０１、座標変換部７０２、制御部７０３、電子ズーム部７０４、顔認証部７０５はＣＰＵ５０５によって構成される。

次に動作について説明する。図８は、この発明の実施の形態２による動作フロー図である。図８において図６と同一の符号は、同一または相当するものであるので、説明は省略する。
ステップＳＴ８０１にて、座標変換部７０２は、顔が検出された顔の数がズームレンズの搭載数より多いか否か判断する。ズームレンズが１つ搭載されている場合は、顔が複数検出されているか否かを判断するとしてもよい。顔の数がズームレンズの搭載数以下の場合、ステップＳＴ６０４とステップＳＴ６０６へ移行する。顔の数がズームレンズの搭載数より多い場合ステップＳＴ８０２へ移行する。
ステップＳＴ８０２にて、座標変換部７０２は、ズームレンズ撮影箇所の顔領域を決定する。
ステップＳＴ８０３にて、座標変換部７０２は、各顔領域がズームレンズ撮影箇所か否か判断する。ズームレンズ撮影箇所と判断された顔領域に関しては、ステップＳＴ６０４とステップＳＴ６０６へ移行する。ズームレンズ撮影箇所ではないと判断された顔領域に関しては、ステップＳＴ８０４とステップＳＴ８０５へ移行する。

ステップＳＴ８０４にて、座標変換部２０６は、広角レンズ２０１で撮影された領域における顔が検出された顔領域の位置情報である検出座標情報を決定する。
ステップＳＴ８０５にて、座標変換部２０６は、顔領域の大きさを決定する。
ステップＳＴ８０６にて、座標変換部２０６は、「大きさと倍率対応表」とステップＳＴ６０６にて決定した顔領域の大きさとに基づいて電子ズーム部７０４にて実施する電子ズームを制御するための情報である倍率を決定する。なお、ステップＳＴ８０５、ステップＳＴ８０６の処理を省略しても本発明の効果を得ることはできる。

ステップＳＴ８０７にて、座標変換部２０６は、位置情報と倍率を制御部２０８へ通知する。
ステップＳＴ８０８にて、制御部２０８は、ステップＳＴ６０８にて受信した位置情報と倍率に従って電子ズーム部７０４を制御する。具体的には、位置情報に電子ズームの中心座標を一致させる。また、倍率に応じて電子ズーム倍率を制御する。これにより、顔領域が電子ズームにて拡大されるようになる。
ステップＳＴ８０９にて、電子ズーム部７０４は、第一撮像素子２０３から入手した広角映像信号の一部を画素補間などにて拡大し、電子ズーム映像信号を作成する。
ステップＳＴ８１０にて、顔認証部２１４は、電子ズーム映像信号を用いて顔認証処理を実施する。

以上説明したように、この実施の形態２によれば、実施の形態１の効果に加えて、複数の顔が検出された場合でも複数の顔領域に対して顔認証処理が行える効果を有する。

実施の形態３．
実施の形態３では、実施の形態２同様の課題についての解決策を開示する。実施の形態１とは異なる点を主に説明する。

この発明の実施の形態３による監視カメラを含む監視システム全体の構成図は、実施の形態１と同様であるので、説明を省略する。

図９は、この発明の実施の形態３による監視カメラの機能構成図である。図９において図２と同一の符号は、同一または相当するものであるので、説明は省略する。顔検出部９０１は、広角映像信号を用いて顔検出処理を常時実施する。顔検出部９０１は、顔が検出された場合、検出有情報を座標変換部９０２へ通知する。顔検出部９０１は、複数の顔が検出された場合、その旨、あるいは検出された顔の数を座標変換部９０２へ通知しても良い。

検出有情報を受信した座標変換部９０２は、顔が複数検出されているか否かを判断する。顔が複数検出されている場合、検出箇所はズームレンズの搭載数より多いか否か判断する。検出箇所がズームレンズの搭載数より多い場合、順序決定部９０３にて、ズームレンズ撮影箇所とする順序（順番）を決定する。ズームレンズ撮影箇所とする順序の決定方法の具体例を以下に示す。第一の具体例としては、ランダムに決定する。第二の具体例としては、広域映像の中心に近いものから順に決定する。第三の具体例としては、顔領域の最も大きいものから順に決定する。

座標変換部９０２は、順序決定部９０３にて決定された順序に従って、顔領域の位置情報である検出座標情報と顔領域の大きさを決定する。ズームレンズが複数搭載されている場合は、同時に搭載数の処理を実施する。順序を次の検出箇所へ移行させるタイミングとしては、予め決められた条件を満たした場合とする。具体例を以下に示す。第一の具体例としては、予め決められた時間が経過した時点とする。第二の具体例としては予め決められた画像の枚数（フレーム数）の処理が完了した時点とする。その後の処理については実施の形態１と同様であるので説明を省略する。
顔が複数検出されていない場合、あるいはズームレンズ２０２の搭載数以下の場合、実施の形態１と同様の処理であるので説明を省略する。

この発明の実施の形態３による監視カメラのハードウェア構成図は、実施の形態１と同様であるので、説明を省略する。

次に動作について説明する。図１０は、この発明の実施の形態３による動作フロー図である。図１０において図６と同一の符号は、同一または相当するものであるので、説明は省略する。
ステップＳＴ１００１にて、座標変換部９０２は、顔の検出箇所がズームレンズ搭載数より多いか否かを判断する。ズームレンズが１つ搭載されている場合は、顔が複数検出されているか否かを判断するとしてもよい。顔の検出箇所がズームレンズ搭載数より多い場合は、ステップＳＴ１００２へ移行する。顔の検出箇所がズームレンズ搭載数以下の場合は、ステップＳＴ１００２の処理を省略する。
ステップＳＴ１００２にて、順序決定部９０３は、ズームレンズ撮影箇所とする順序（順番）を決定する。座標変換部９０２は、順序決定部９０３にて決定された順序に従って、ステップＳＴ６０４にて顔領域の位置情報である検出座標情報を決定し、ステップＳＴ６０６にて顔領域の大きさを決定する。

ステップＳＴ１００３にて、座標変換部９０２は、顔の検出箇所がズームレンズ搭載数より多いか否かを判断する。ズームレンズが１つ搭載されている場合は、顔が複数検出されているか否かを判断するとしてもよい。顔の検出箇所がズームレンズ搭載数より多い場合は、ステップＳＴ１００４へ移行する。顔の検出箇所がズームレンズ搭載数以下の場合は、処理を終了する。
ステップＳＴ１００４にて、座標変換部９０２は、順序を次の検出箇所へ移行させる条件を満たすか否かを判断する。満たすと判断した場合は、ステップＳＴ１００５へ移行する。満たさないと判断した場合は、ステップＳＴ６０４とステップＳＴ６０６の処理へ戻る。
ステップＳＴ１００５にて、座標変換部９０２は、順序を次の検出箇所へ移行させる。

以上説明したように、この実施の形態３によれば、実施の形態１の効果に加えて、複数の顔が検出された場合でも複数の顔領域に対して顔認証処理が行える効果を有する。また、実施の形態２と比較して電子ズーム機能が不要のため、カメラの処理負荷軽減との効果を得ることができる。

さらに、実施の形態２と実施の形態３は組み合わせて用いることができる。組み合わせることで、実施の形態２での、ズームレンズ撮影箇所とは異なる顔領域と決定された顔領域については、ズームレンズを用いて撮影した高画質の画像を用いた顔認証を実施することができないとの課題を解決することができる。実施の形態３での、ズームレンズ撮影箇所の順序となっていない顔領域については、顔認証を実施することができない、あるいは拡大画像を用いた顔認証を実施することができないとの課題を解決することができる。

２０１ 広角レンズ、２０２ ズームレンズ、２０５ 顔検出部、２０６ 座標変換部、２１４ 顔認証部、７０４ 電子ズーム部。

Claims (6)

1. 常時、監視領域を撮影する広角レンズと、
   パン方向、チルト方向へ動作可能なズームレンズと、
   前記広角レンズにて撮影された広角映像を用いて顔検出処理を実施する顔検出部と、
   検出された顔領域をズームレンズにて撮影し、撮影されたズーム映像を用いて顔認証処理を実施する顔認証部と、
   を備えた監視カメラ。
2. 前記検出された顔領域の位置情報を決定し、ズームレンズの駆動情報であるパン角度、チルト角度を決定する座標変換部
   を備えることを特徴とする請求項１記載の監視カメラ。
3. 前記座標変換部は、前記検出された顔領域の大きさを決定し、ズームレンズの駆動情報である倍率を決定すること
   を特徴とする請求項１または請求項２に記載の監視カメラ。
4. 前記検出部にて複数の顔領域が検出された場合、ズームレンズ撮影箇所とは異なる顔領域について拡大処理を実施する電子ズーム部
   を備えることを特徴とする請求項１ないし請求項３のいずれか１項に記載の監視カメラ。
5. 前記座標変換部は、前記検出部にて複数の顔領域が検出された場合、ズームレンズ撮影箇所の順序を決定すること
   を特徴とする請求項１ないし請求項４のいずれか１項に記載の監視カメラ。
6. 常時、監視領域を撮影する広角レンズと、
   パン方向、チルト方向へ動作可能なズームレンズと、
   前記広角レンズにて撮影された広角映像を用いて顔検出処理を実施する顔検出部と、
   検出された顔領域をズームレンズにて撮影し、撮影されたズーム映像を用いて顔認証処理を実施する顔認証部と、
   を備えた監視カメラシステム。

Images