JP2008236425A - 監視システム、監視方法、および監視プログラム - Google Patents

Abstract

【課題】監視領域の監視に適切な情報を取得する。
【解決手段】本発明に係る監視システムは、可視光により監視領域の可視光動画を撮像する可視光動画撮像部と、赤外光により監視領域の赤外光動画を撮像する赤外光動画撮像部と、可視光動画または赤外光動画に含まれるオブジェクトが予め定められた条件に適合するか否かを判断する適合判断部と、オブジェクトが予め定められた条件に適合するか否かに応じて、可視光動画および赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力する出力部とを備える。
【選択図】図２

Description

本発明は、監視システム、監視方法、および監視プログラムに関する。特に、本発明は、監視領域の動画を撮像する監視システム、監視方法、および監視プログラムに関する。

特許文献１には、人物が撮像領域内へ侵入したことを検知する検出手段と、デジタル映像信号の圧縮時のフレームレートおよびＭＰＥＧのＧＯＰ（Ｇｒｏｕｐ ｏｆ Ｐｉｃｔｕｒｅ）構成等を変更する可変圧縮手段と、検出手段の検知結果に応じて可変圧縮手段および解像度変換手段を制御する制御手段とを備えることにより、ネットワークの伝送能力を越えるデータの伝送を防止するデジタル監視システムについて提案されている。

特許文献２には、撮像範囲内に含まれる被写体に動きがない場合にはカラー画像を出力して、撮像範囲内に含まれる被写体に動きがある場合には近赤外光領域の波長成分を含む白黒画像を出力すべく映像信号の出力を切り換えるテレビジョンカメラについて提案されている。特許文献３には、第１の方向または第２の方向のうち、一方の方向からの所定値以上の音量状態等に応じて第１の方向の画像と第２の方向の画像とをフレームレートおよび／または圧縮処理の圧縮レートを変更して撮像する撮像装置について提案されている。

特許文献４には、画像を記録用データとして記録媒体に記録する場合のフレームレートおよび／または圧縮処理の圧縮レートと、画像を送信用データとして外部に送信する場合のフレームレートおよび／または圧縮処理の圧縮レートとを、所定値以上の音量の状態等に応じて変更する撮像装置について提案されている。特許文献５には、監視領域全体を撮像した広角画像と動体を高解像度で撮像した拡大画像とを一台のビデオカメラで取得すべく、広角画像と拡大画像とを撮像する各撮像素子に対する入射光学系を単一化する監視システムについて提案されている。
特開２００２−２６２２７３号公報 特開２００２−２７１６８８号公報 特開２００３−２７４３５８号公報 特開２００３−２７４３５９号公報 特開２００５−１１７３４３号公報

しかしながら、特許文献１に記載の発明においては、人物が撮像領域内に存在するにもかかわらず、当該人物が撮像領域内の死角に位置する場合等においては撮像画像の画質が低下してしまう場合があり、人物の撮像領域内への侵入を適切に監視できない。また、特許文献２に記載の発明においては、カラー画像および近赤外光の波長成分を含む白黒画像の双方を同時には撮像することができないので、撮像範囲内に存在する侵入者等の識別を適切に実行することができない。そして、特許文献３に記載の発明においては、高品位で画像を撮像すべき場合であっても、所定値以上の音量状態等の変化がない場合には高品位の画像を撮像できない。

また、特許文献４に記載の発明においては、音量状態等の変化が所定値以上であるか否かに応じて記録用データを記録媒体に記録する場合のフレームレートおよび／または圧縮レートと、送信用データのフレームレートおよび／または圧縮レートとを互いに同期させて、単位時間当たりに記録または送信する画像データのデータ量を略一定に保つことはできない。更に、特許文献５に記載の発明においては、広角画像と拡大画像とを常に一定の解像度で撮像しているので、広角画像および拡大画像を記録媒体に保存すると記録領域が不足する場合があり、また広角画像および拡大画像を外部に送信すると、ネットワークのトラフィックが混雑している場合には、画像データの送信に遅延が生じる場合がある。

そこで本発明は、上記課題を解決することができる監視システム、監視方法、および監視プログラムを提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。

上記課題を解決するために、本発明の第１の形態においては、監視領域を監視する監視システムであって、可視光により監視領域の可視光動画を撮像する可視光動画撮像部と、赤外光により監視領域の赤外光動画を撮像する赤外光動画撮像部と、可視光動画または赤外光動画に含まれるオブジェクトが予め定められた条件に適合するか否かを判断する適合判断部と、オブジェクトが予め定められた条件に適合するか否かに応じて、可視光動画および赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力する出力部とを備える。また、出力部は、単位時間当たりに出力する可視光動画のデータ量と赤外光動画のデータ量との合計量を略一定にする。

また、本発明の第２の形態においては、監視領域を監視する監視方法であって、可視光により監視領域の可視光動画を撮像する可視光動画撮像段階と、赤外光により監視領域の赤外光動画を撮像する赤外光動画撮像段階と、可視光動画または赤外光動画に含まれるオブジェクトが予め定められた条件に適合するか否かを判断する適合判断段階と、オブジェクトが予め定められた条件に適合するか否かに応じて、可視光動画および赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力する出力段階とを備える。

また、本発明の第３の形態においては、監視領域を監視する監視システム用の監視プログラムであって、監視システムを、可視光により監視領域の可視光動画を撮像する可視光動画撮像部、赤外光により監視領域の赤外光動画を撮像する赤外光動画撮像部、可視光動画または赤外光動画に含まれるオブジェクトが予め定められた条件に適合するか否かを判断する適合判断部、オブジェクトが予め定められた条件に適合するか否かに応じて、可視光動画および赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力する出力部として機能させる。

また、本発明の第４の形態においては、監視領域を監視する監視システムであって、光により監視領域の光動画を撮像する動画撮像部と、監視領域から音声を集音する集音部と、光動画に含まれるオブジェクトが予め定められた条件に適合するか否か、および音声が予め定められた条件に適合するか否かを判断する適合判断部と、オブジェクトが予め定められた条件に適合するか否か、および音声が予め定められた条件に適合するか否かに応じて、光動画および音声のうちの一方のデータ量を低減して、他方のデータ量を増加して出力する出力部とを備える。なお、光動画とは、可視光動画と赤外光動画とを含む動画であってよい。

また、本発明の第５の形態においては、監視領域を監視する監視方法であって、光により監視領域の光動画を撮像する動画撮像段階と、監視領域における音声を集音する集音段階と、光動画に含まれるオブジェクトが予め定められた条件に適合するか否か、および音声が予め定められた条件に適合するか否かを判断する適合判断段階と、オブジェクトが予め定められた条件に適合するか否か、および音声が予め定められた条件に適合するか否かに応じて、光動画および音声のうちの一方のデータ量を低減して、他方のデータ量を増加して出力する出力段階とを備える。

また、本発明の第６の形態においては、監視領域を監視する監視システム用の監視プログラムであって、監視システムを、光により監視領域の光動画を撮像する動画撮像部、監視領域から音声を集音する集音部、光動画に含まれるオブジェクトが予め定められた条件に適合するか否か、および音声が予め定められた条件に適合するか否かを判断する適合判断部、オブジェクトが予め定められた条件に適合するか否か、および音声が予め定められた条件に適合するか否かに応じて、光動画および音声のうちの一方のデータ量を低減して、他方のデータ量を増加して出力する出力部として機能させる。

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションもまた、発明となりうる。

本発明によれば、監視領域の監視に適切な情報を取得することができる。

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲に係る発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。

図１は、本発明の一実施形態に係る監視システム１０の概要を示す。監視システム１０は、監視領域の可視光動画および監視領域の赤外光動画を撮像する撮像ユニット１００および撮像領域において生じた音声を取得する集音部１１０を備える。監視システム１０は、撮像ユニット１００が撮像した可視光動画を示す可視光動画データおよび赤外光動画を示す赤外光動画データ、並びに集音部１１０が集音した音声を示す音声データを、監視システム１０が取得した動画データおよび音声データを管理するサーバ２０に出力する。本実施形態に係る監視システム１０は、監視領域の監視に適切な情報を取得することを目的とする。

以下、監視システム１０が監視する監視領域に人物１が侵入した場合を一例として、監視システム１０の概要について説明する。監視システム１０の撮像ユニット１００は、監視領域に含まれる人物１の可視光動画および赤外光動画を撮像する。また、監視システム１０の集音部１１０は、監視領域において人物１の動作により発生した音声（例えば、人物１が発した声を示す音声および人物１が動いたことにより発生した音）を集音する。

なお、可視光動画とは、可視光の波長範囲（例えば、波長４００ｎｍから７００ｎｍの範囲）において撮像ユニット１００が有する撮像素子が受光した光から取得した動画である。また、赤外光動画とは、赤外光の波長範囲（例えば、波長７００ｎｍから１０００ｎｍの範囲）において撮像ユニット１００が有する撮像素子が受光した光から取得した動画である。更に、監視領域とは、撮像ユニット１００が可視光動画および赤外光動画の撮像ができる撮像領域である。

監視システム１０は、監視領域に含まれるオブジェクト（例えば、人物１）が予め定められた条件を満たすまで、単位時間当たりに外部に出力できるデータ量の範囲を、撮像した動画および集音した音声のそれぞれに予め定められた比率で割り振って出力する。すなわち、監視システム１０は、撮像ユニット１００が撮像した可視光動画のデータ量および赤外光動画のデータ量、並びに集音部１１０が集音した音声のデータ量の合計量が、単位時間当たりに出力するデータ量と適合すべく、可視光動画のデータ量、赤外光動画のデータ量、および音声のデータ量を予め定められた比率に適合させて調整する。そして、監視システム１０は、データ量を調整したうえで、可視光動画のデータ、赤外光動画のデータ、および音声データをサーバ２０に出力する。

例えば、監視領域に人物１が侵入した場合であって、撮像ユニット１００の撮像方向と、人物１の正面とが略相対する場合を考える。係る場合、監視システム１０は、可視光動画データの可視光動画データ量３、赤外光動画データの赤外光動画データ量４、および音声データの音声データ量５の順に単位時間当たりにサーバ２０に出力するデータ量が多くなるべく、可視光動画データ量３、赤外光動画データ量４、および音声データ量５を調整する（グラフ７０参照）。すなわち、監視システム１０は、可視光動画データに割り当てられるデータ量が最も多く、次に赤外動画データに割り当てられるデータ量が多く、音声データに割り当てられるデータ量が最も少なくなるべく調整する。これにより、人物１の正面の顔を撮像した可視光動画について、赤外光動画および音声よりも多くの通信帯域を割り当てることができるので、高解像度の人物１の顔の可視光動画をサーバ２０に格納できる。

一方、撮像ユニット１００の撮像方向と撮像範囲に含まれる人物２の正面とが略同一となった場合、すなわち、人物２が撮像ユニット１００に対して背を向けた場合を考える。係る場合、監視システム１０は、人物２が撮像ユニット１００に背を向けた時刻（Ｔ１０００）までは、可視光動画データ量３、赤外光動画データ量４、および音声データ量５の順に単位時間当たりにサーバ２０に出力するデータ量が多くなるべく、可視光動画データ量３、赤外光動画データ量４、および音声データ量５を調整する。そして、監視システム１０は、当該時刻（Ｔ１０００）より後は、赤外光動画データ量４、音声データ量５、および可視光動画データ量３の順に単位時間当たりにサーバ２０に出力するデータ量が多くなるべく、可視光動画データ量３、赤外光動画データ量４、および音声データ量５を調整する（グラフ７２参照）。

また、監視システム１０は、監視領域の明るさに応じて単位時間当たりに出力する可視光動画データ、赤外光動画データ、および音声データのそれぞれのデータ量の比率を調整する。具体的には、監視領域の明るさ（例えば、照度または輝度）が予め定められた基準値が示す明るさよりも明るい場合、監視システム１０は、少なくとも赤外光動画データよりも可視光動画データのデータ量が多くなるべく、単位時間当たりに出力するデータ量の割り当てを調整する。一方、監視領域の明るさが予め定められた基準値が示す明るさ以下の場合、監視システム１０は、少なくとも可視光動画データよりも赤外光動画データのデータ量が多くなるべく、単位時間当たりに出力するデータ量の割り当てを調整する。

更に、監視システム１０は、監視領域において集音される音声の音量の変化量が略一定の場合、可視光動画データおよび赤外光動画データのデータ量が音声データのデータ量よりも多くなるべく、単位時間当たりに出力するデータ量の割り当てを調整する。一方、監視システム１０は、監視領域において集音される音声の音量の変化量が予め定められた木変化量よりも大きい場合、または監視領域の可視光動画および赤外光動画を撮像できない場合、音声データのデータ量が可視光動画データおよび赤外光動画データのデータ量よりも多くなるべく、単位時間当たりに出力するデータ量の割り当てを調整する。

なお、監視システム１０は、単位時間当たりの可視光動画データ量３、単位時間当たりの赤外光動画データ量４、および単位時間当たりの音声データ量５の合計量が略一定となるべく調整する。これにより、監視システム１０とサーバ２０との間の通信速度に適合させて、適切な比率で可視光動画データ、赤外光動画データ、および音声データを出力できる。

例えば、監視システム１０は、監視システム１０とサーバ２０との間の通信速度が１Ｍｂｐｓである場合、監視領域に含まれる人物等の動体が予め定められた条件を満たすまでは、可視光動画データ、赤外光動画データ、および音声データのそれぞれのデータ量の比率を、例えば７：２：１と予め設定して、可視光動画データを０．７Ｍｂｐｓで、赤外光動画データを０．２Ｍｂｐｓで、そして音声データを０．１Ｍｂｐｓで出力する。一方、監視システム１０は、監視領域に含まれる人物等の動体が予め定められた条件を満たした場合（例えば、人物の顔を可視光動画で撮像できないという条件を満たした場合）、可視光動画データ、赤外光動画データ、および音声データのそれぞれのデータ量の比率を、例えば１：７：２として、可視光動画データを０．１Ｍｂｐｓで、赤外光動画データを０．７Ｍｂｐｓで、そして音声データを０．２Ｍｂｐｓで出力する。

これにより、可視光動画を用いて監視領域に含まれる人物２の顔の認識が困難な場合等、予め定められた条件が満たされる場合に可視光動画を高画質で出力することを防止して、赤外光動画の出力および音声の出力を優先するので、監視領域に含まれる人物２の挙動を適切に解析することができる情報を優先的に取得することができる。また、可視光動画を用いて監視領域に含まれる人物１の顔の認識ができる場合には、赤外光動画および音声の出力よりも可視光動画を高画質で撮像して出力することを優先するので、監視システム１０とサーバ２０との間の通信帯域が限られている場合であっても、監視システム１０は、監視領域に侵入した人物等の動体の解析に用いられる情報を適切に出力できる。

図２は、本実施形態に係る監視システム１０の機能構成の一例を示す。監視システム１０は、撮像ユニット１００、集音部１１０、動画取得部１２０、オブジェクト抽出部１３０、解析ユニット１４０、適合判断部１５０、情報格納部１６０、出力部１７０、およびデータ送受信部１８０を備える。また、撮像ユニット１００は、可視光動画撮像部１０２および赤外光動画撮像部１０４を有する。更に、解析ユニット１４０は、変化量検出部１４２、大きさ検出部１４４、向き特定部１４６、および動き速さ検出部１４８を有する。

撮像ユニット１００が有する可視光動画撮像部１０２は、可視光により監視領域の可視光動画を撮像する。可視光動画撮像部１０２は、複数の色情報を含む可視光動画を撮像する。可視光動画撮像部１０２は、撮像した可視光動画を可視光動画データとして動画取得部１２０に供給する。また、撮像ユニット１００が有する赤外光動画撮像部１０４は、赤外光により監視領域の赤外光動画を撮像する。赤外光動画撮像部１０４は、撮像した赤外光動画を赤外光動画データとして動画取得部１２０に供給する。なお、請求項に記載の動画撮像部は、撮像ユニット１００の一例である。また、請求項に記載の光とは、可視光および赤外光の双方を含み、請求項に記載の光動画とは、可視光動画および赤外光動画の双方を含む動画を示すことを意図する。

ここで、本実施形態においては、撮像ユニット１００が可視光動画撮像部１０２および赤外光動画撮像部１０４を有しているが、他の実施形態においては、監視システム１０は、可視光動画撮像部１０２と赤外光動画撮像部１０４とを別個独立に備えていてもよい。例えば、監視システム１０は、撮像ユニット１００の代わりに、可視光により監視領域の可視光動画を撮像する可視光動画撮像部１０２を有する可視光動画撮像ユニットと、赤外光により監視領域の赤外光動画を撮像する赤外光動画撮像部１０４を有する赤外光動画撮像ユニットとを備えていてもよい。

また、撮像ユニット１００は、監視領域に含まれるオブジェクトの動きを検知する動き検知部と、動き検知部が検知したオブジェクトの監視領域における位置であるオブジェクト位置を取得するオブジェクト位置取得部と、オブジェクト位置取得部が取得したオブジェクト位置へ可視光動画撮像部１０２および／または赤外光動画撮像部１０４の撮像方向を移動させる駆動部を更に有していてもよい。係る構成により、撮像ユニット１００は、実質的な監視領域を拡大することができると共に、オブジェクトを追尾して可視光動画および赤外光動画を撮像できる。

動画取得部１２０は、可視光動画撮像部１０２が撮像した可視光動画を可視光動画データとして取得する。また、動画取得部１２０は、赤外光動画撮像部１０４が撮像した赤外光動画を赤外光動画データとして取得する。動画取得部１２０は、取得した可視光動画データおよび赤外光動画データを、オブジェクト抽出部１３０、情報格納部１６０、および出力部１７０に供給する。集音部１１０は、監視領域における音声を集音する。集音部１１０は、集音した音声を、音声データとして適合判断部１５０、情報格納部１６０、および出力部１７０に供給する。なお、集音部１１０は、撮像ユニット１００が有していてもよい。すなわち、撮像ユニット１００が監視カメラである場合には、当該監視カメラが集音部１１０を有していてもよい。

情報格納部１６０は、動画取得部１２０が取得した可視光動画および赤外光動画、並びに集音部１１０が集音した音声の音声データを格納する。情報格納部１６０は、可視光動画撮像部１０２が可視光動画を撮像した時刻、または赤外光動画撮像部１０４が赤外光動画を撮像した時刻、若しくは集音部１１０が音声を集音した時刻に対応づけて、可視光動画および赤外光動画、並びに音声データを格納する。なお、情報格納部１６０は、可視光動画、赤外光動画、および音声データを、それぞれのデータ量を低減させずに格納してもよい。また、他の実施例においては、動画取得部１２０は、可視光動画および赤外光動画のそれぞれのデータ量を予め定められた圧縮方式（例えば、ＭｏｔｉｏｎＪＰＥＧ方式、またはＭＰＥＧ方式等）に従って低減して情報格納部１６０に格納してもよい。

オブジェクト抽出部１３０は、動画取得部１２０が取得した可視光動画データが示す可視光動画に含まれるオブジェクトのオブジェクト画像を抽出する。また、オブジェクト抽出部１３０は、動画取得部１２０が取得した赤外光動画データが示す赤外光動画に含まれるオブジェクトのオブジェクト画像を抽出する。例えば、オブジェクト抽出部１３０は、可視光動画および赤外光動画を構成するそれぞれの動画構成画像を画像処理（例えば、テンプレートマッチング、エッジ抽出、および閾値処理等）することによって、可視光動画および赤外光動画に含まれるオブジェクトのオブジェクト画像を抽出する。また、オブジェクト抽出部１３０は、可視光動画および赤外光動画を構成する複数の動画構成画像間の差分画像から、動きのあるオブジェクトを抽出してもよい。

なお、動画構成画像とは、動画を構成する複数の画像のそれぞれを意図しており、例えばフレーム画像またはフィールド画像は動画構成画像の一例である。そして、赤外光動画は複数の動画構成画像（以下、赤外光動画構成画像とする）を含み、また可視光動画は複数の動画構成画像（以下、可視光動画構成画像とする）を含む。

オブジェクト抽出部１３０は、抽出したオブジェクト画像を解析ユニット１４０および適合判断部１５０に供給する。具体的には、オブジェクト抽出部１３０は、可視光動画を構成する複数の可視光動画構成画像のそれぞれを識別する可視光動画構成画像識別子に対応づけて、可視光動画構成画像識別子で識別される可視光動画構成画像に含まれるオブジェクトのオブジェクト画像を解析ユニット１４０に供給する。また、オブジェクト抽出部１３０は、赤外光動画を構成する複数の赤外光動画構成画像のそれぞれを識別する赤外光動画構成画像識別子に対応づけて、赤外光動画構成画像識別子で識別される赤外光動画構成画像に含まれるオブジェクトのオブジェクト画像を解析ユニット１４０に供給する。

解析ユニット１４０が有する変化量検出部１４２は、可視光動画または赤外光動画におけるオブジェクトの変化量を検出する。具体的には、変化量検出部１４２は、オブジェクトの位置の変化量を検出する。

例えば、変化量検出部１４２は、オブジェクト抽出部１３０から、可視光動画構成画像に対するオブジェクトの位置を示す位置情報を更に受け取り、受け取った複数の位置情報がそれぞれ示す、可視光動画構成画像のそれぞれにおけるオブジェクトの位置から、オブジェクトの可視光動画構成画像上における位置の変化量を算出する。すなわち、変化量検出部１４２は、第１の可視光動画構成画像におけるオブジェクトの位置と、第２の可視光動画構成画像におけるオブジェクトの位置との差分から、オブジェクトの位置の変化量を検出する。

ここで、第１の可視光動画構成画像と第２の可視光動画構成画像とは時間的に相互に隣接している必要はなく、第２の可視光動画構成画像は第１の可視光動画構成画像から予め定められた時間が経過した後に撮像された可視光動画構成画像であってよい。また、係る場合においては、第１の可視光動画構成画像と第２の可視光動画構成画像とが撮像する監視領域は、略同一であることを前提とする。なお、オブジェクトの位置情報が示す位置は、可視光動画構成画像中に予め基準位置（例えば、可視光動画構成画像の中心点）を定めておき、基準位置からオブジェクトを構成する複数の部分（例えば、オブジェクトの外縁およびオブジェクトの重心）までの、可視光動画構成画像上における複数の距離によって規定される位置であってよい。

なお、変化量検出部１４２は、オブジェクト抽出部１３０から、赤外光動画構成画像に対するオブジェクトの位置を示す位置情報を更に受け取り、上記説明における可視光動画構成画像の場合と同様に、オブジェクトの位置の変化量を検出する。変化量検出部１４２が赤外光動画構成画像を用いてオブジェクトの位置の変化量を検出する方法は、可視光動画構成画像の場合と略同一なので、詳細な説明は省略する。また、変化量検出部１４２は、オブジェクト抽出部１３０からオブジェクト画像ではなく、複数の可視光動画構成画像および複数の赤外光動画構成画像を受け取ってもよい。係る場合には、変化量検出部１４２は、複数の可視光動画構成画像の差分または複数の赤外光動画構成画像の差分からオブジェクトの位置の変化量を算出してもよい。

また、変化量検出部１４２は、可視光動画または赤外光動画におけるオブジェクトの変化量として、オブジェクトの大きさの変化量を検出する。例えば、変化量検出部１４２は、オブジェクト抽出部１３０から可視光動画構成画像および／または赤外光動画構成画像が撮像された時刻の時系列に沿って、可視光動画構成画像および／または赤外光動画構成画像に含まれるオブジェクトの複数のオブジェクト画像を受け取る。そして、変化量検出部１４２は、受け取った複数のオブジェクト画像の差分を当該時系列に沿って算出して、オブジェクトの大きさの変化量を検出する。

すなわち、変化量検出部１４２は、第１の時刻において撮像された可視光動画構成画像および／または赤外光動画構成画像に含まれるオブジェクトの第１のオブジェクト画像と、第２の時刻において撮像された可視光動画構成画像および／または赤外光動画構成画像に含まれるオブジェクトの第２のオブジェクト画像との差分から、当該オブジェクトの大きさの変化量を検出する。なお、変化量検出部１４２は、オブジェクトの位置の変化量とオブジェクトの大きさの変化量とを同時に検出してもよい。変化量検出部１４２は、検出したオブジェクトの位置の変化量を示すデータ、および／またはオブジェクトの大きさの変化量を示すデータを適合判断部１５０に供給する。

大きさ検出部１４４は、可視光動画および／または赤外光動画に含まれるオブジェクトの大きさを検出する。大きさ検出部１４４は、可視光動画構成画像および／または赤外光動画構成画像に対するオブジェクトの相対的な大きさを検出する。例えば、大きさ検出部１４４は、オブジェクト抽出部１３０からオブジェクト画像と共に、可視光動画構成画像および／または赤外光動画構成画像を受け取る。そして、大きさ検出部１４４は、可視光動画構成画像および／または赤外光動画構成画像に対してオブジェクト画像が占める可視光動画構成画像および／または赤外光動画構成画像上における面積を、オブジェクトの大きさとして検出する。

また、大きさ検出部１４４は、可視光動画構成画像および／または赤外光動画構成画像に対してオブジェクトのオブジェクト画像が占める可視光動画構成画像および／または赤外光動画構成画像上における面積の割合を、オブジェクトの大きさとして検出してもよい。大きさ検出部１４４は、検出したオブジェクトの大きさを示すデータを適合判断部１５０に供給する。

向き特定部１４６は、可視光動画または赤外光動画に含まれるオブジェクトである人物の向きを特定する。例えば、向き特定部１４６は、オブジェクト抽出部１３０から受け取ったオブジェクト画像と、人物の正面の顔を示すテンプレート画像、人物の横の顔を示すテンプレート画像、および人物の斜めの顔を示すテンプレート画像等の複数のテンプレート画像とをマッチングすることにより、人物の向きとして人物の顔の向きを検出する。なお、向き特定部１４６は、複数のテンプレート画像を記録しているテンプレート画像格納部を含んでいてよい。

また、向き特定部１４６は、可視光動画構成画像からオブジェクト抽出部１３０が抽出したオブジェクト画像に含まれる人物の肌が露出した部分を、肌色抽出等の画像処理により抽出してもよい。そして、向き特定部１４６は、人物の顔を複数の方向から観察した場合に観察される複数の顔の輪郭を示す複数のテンプレート画像と抽出した人物の肌が露出した部分の画像とをマッチングすることにより、人物の顔の向きを検出する。なお、係る場合において、向き特定部１４６は、テンプレート画像を拡大、縮小、および回転処理してマッチングしてよい。向き特定部１４６は、特定した人物の向きを示すデータを適合判断部１５０に供給する。

動き速さ検出部１４８は、オブジェクトが動く速さを検出する。動き速さ検出部１４８は、可視光動画構成画像および／または赤外光動画構成画像が撮像された時刻を更に対応づけて、オブジェクト抽出部１３０から可視光動画構成画像に含まれるオブジェクトの複数のオブジェクト画像、および／または赤外光動画構成画像に含まれるオブジェクトの複数のオブジェクト画像を受け取ってよい。そして、動き速さ検出部１４８は、複数のオブジェクト画像が示すオブジェクトの可視光動画構成画像および／または赤外光動画構成画像における位置の変化量と、オブジェクト画像を含む可視光動画構成画像および／または赤外光動画構成画像のそれぞれに対応づけられている時刻から算出される時間とからオブジェクトの速さを検出する。なお、動き速さ検出部１４８がオブジェクトの可視光動画構成画像および／または赤外光動画構成画像における位置の変化量を算出する方法は、上記説明における変化量検出部１４２が実施する方法と略同一なので、詳細な説明は省略する。動き速さ検出部１４８は、検出した速さを示すデータを適合判断部１５０に供給する。

適合判断部１５０は、可視光動画または赤外光動画に含まれるオブジェクトが予め定められた条件に適合するか否かを判断する。適合判断部１５０は、オブジェクトが予め定められた条件に適合するか否かと共に、音声データが示す音声が予め定められた条件に適合するか否かを判断する。例えば、適合判断部１５０は、音声データが示す音声の音量の変化量が予め定められた音声変化量より大きいか否かを判断する。そして、適合判断部１５０は、音量の変化量が予め定められた音声変化量より大きい場合に、オブジェクトが予め定められた条件に適合すると判断する。すなわち、音量の変化量が予め定められた音声変化量より大きい場合は、音声の音量の変化の前後で監視領域に変化が生じている場合が多いので、適合判断部１５０は、係る場合にオブジェクトが予め定められた条件に適合すると判断する。

また、適合判断部１５０は、変化量検出部１４２が検出したオブジェクトの変化量が予め定められた変化量より大きいか否かを判断する。例えば、適合判断部１５０は、変化量検出部１４２が検出したオブジェクトの位置の変化量が予め定められた位置の変化量より大きいか否かを判断する。そして、適合判断部１５０は、オブジェクトの位置の変化量が予め定められた位置の変化量より大きい場合に、オブジェクトが予め定められた条件に適合すると判断する。すなわち、オブジェクトの位置の変化量が予め定められた位置の変化量より大きい場合は、オブジェクトの位置の変化の前後で監視領域におけるオブジェクトの動作が大きく変化している場合が多いので、適合判断部１５０は、係る場合にオブジェクトが予め定められた条件に適合すると判断する。

また、適合判断部１５０は、大きさ検出部１４４が検出した大きさの変化量が予め定められた大きさの変化量より大きいか否かを判断する。そして、適合判断部１５０は、大きさ検出部１４４が検出した大きさの変化量が予め定められた大きさの変化量より大きい場合に、オブジェクトが予め定められた条件に適合すると判断する。また、適合判断部１５０は、大きさ検出部１４４が検出したオブジェクトの大きさが予め定められた大きさより大きいか否かを判断してもよい。そして、適合判断部１５０は、大きさ検出部１４４が検出した大きさが予め定められた大きさより大きい場合に、オブジェクトが予め定められた条件に適合すると判断してよい。

また、適合判断部１５０は、向き特定部１４６が特定した人物の向きが予め定められた向きであるか否かを判断してもよい。例えば、適合判断部１５０は、向き特定部１４６が特定した人物の顔の向きが、撮像ユニット１００の撮像方向から予め定められた角度、ずれていた場合に、オブジェクトが予め定められた条件に適合すると判断してよい。すなわち、撮像ユニット１００において人物の正面の顔を撮像できない場合に、オブジェクトが予め定められた条件に適合すると判断してよい。

また、適合判断部１５０は、監視領域の明るさが予め定められた明るさであるか否かを判断してもよい。具体的には、適合判断部１５０は、可視光動画撮像部１０２が有する撮像素子の受光量に応じて、監視領域の明るさが予め定められた明るさであるか否かを判断する。例えば、適合判断部１５０は、可視光動画撮像部１０２が有する複数の撮像素子が受光する可視光の合計の受光量、または複数の撮像素子が受光する可視光の平均の受光量が、予め定められた基準の受光量より多い場合に、監視領域の明るさが予め定められた明るさであると判断する。

また、適合判断部１５０は、赤外光動画撮像部１０４が有する撮像素子の受光量に応じて、監視領域の明るさが予め定められた明るさであるか否かを判断する。例えば、適合判断部１５０は、赤外光動画撮像部１０４が有する複数の撮像素子が受光する赤外光の合計の受光量、または複数の撮像素子が受光する赤外光の平均の受光量が、予め定められた基準の受光量より多い場合に、監視領域の明るさが予め定められた明るさであると判断する。

更に、適合判断部１５０は、可視光動画撮像部１０２が撮像した可視光動画を構成する可視光動画構成画像が含む複数の画素のうち、最大の輝度を示す画素の輝度と最小の輝度を示す画素の輝度との差に応じて、オブジェクトが予め定められた条件に適合するか否かを判断してもよい。例えば、適合判断部１５０は、輝度の差が予め定められた基準値より小さい場合にオブジェクトが予め定められた条件に適合しないと判断する。一方、適合判断部１５０は、輝度の差が予め定められた基準値以上の場合にオブジェクトが予め定められた条件に適合すると判断する。

また、適合判断部１５０は、監視領域の可視光動画構成画像または赤外光動画構成画像の複数の画素が示す輝度分布に応じて、オブジェクトが予め定められた条件に適合するか否かを判断してもよい。例えば、適合判断部１５０は、輝度分布が略均一の場合にオブジェクトが予め定められた条件に適合すると判断する。一方、適合判断部１５０は、輝度分布が予め定められた輝度値よりも明るい輝度の側に偏っている場合、および輝度分布が予め定められた輝度値よりも暗い輝度の側に偏っている場合、オブジェクトが予め定められた条件に適合しないと判断する。

なお、適合判断部１５０は、オブジェクト抽出部１３０から可視光動画構成画像および赤外光動画構成画像からオブジェクト画像を抽出できなかったことを示す情報を取得した場合、オブジェクトが予め定められた条件に適合していないと判断する。また、適合判断部１５０は、集音部１１０から音声を示す音声データを受け取らない場合、オブジェクトが予め定められた条件に適合していないと判断してよい。適合判断部１５０は、判断結果を出力部１７０に供給する。

出力部１７０は、監視領域に含まれるオブジェクトが予め定められた条件に適合するか否かに応じて、可視光動画および赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力する。係る場合において、出力部１７０は、単位時間当たりに出力する可視光動画のデータ量と赤外光動画のデータ量との合計量を略一定に調整する。また、出力部１７０は、監視領域に含まれるオブジェクトが予め定められた条件に適合するか否か、および集音部１１０から受け取った音声データが示す音声が予め定められた条件に適合するか否かに応じて、可視光動画、赤外光動画、および音声のうちの少なくともいずれかのデータ量を低減して、他のデータ量を増加して出力してもよい。

また、出力部１７０は、オブジェクトが予め定められた条件に適合するか否か、および音声が予め定められた音声変化量より大きいか否かに応じて、可視光動画、赤外光動画、および音声のうちの少なくともいずれかのデータ量を低減して、他のデータ量を増加して出力してもよい。例えば、適合判断部１５０が、音量の変化量が予め定められた音声変化量より大きいことにより、オブジェクトが予め定められた条件に適合すると判断した場合、出力部１７０は、可視光動画および赤外光動画のデータ量を低減して、音声のデータ量を増加する。

また、出力部１７０は、オブジェクトの変化量が予め定められた変化量より大きいか否かに応じて、可視光動画および赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力してもよい。具体的には、出力部１７０は、オブジェクトの位置の変化量が予め定められた位置の変化量より大きいか否かに応じて、可視光動画および赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力する。例えば、適合判断部１５０が、オブジェクトの位置の単位時間当たりの変化量が、予め定められた単位置の位時間当たりの変化量より大きいことにより、オブジェクトが予め定められた条件に適合すると判断した場合、すなわち、オブジェクトの位置の単位時間当たりの変化量が予め定められた位置の単位時間当たりの変化量より大きいと判断した場合は、出力部１７０は、可視光動画のデータ量を低減して、赤外光動画および音声のデータ量を増加してよい。これにより、可視光動画ではオブジェクトの輪郭を適切に判断できない場合でも、赤外光動画においてオブジェクトの輪郭を適切に判断できる。

また、出力部１７０は、オブジェクトの大きさの変化量が予め定められた大きさの変化量より大きいか否かに応じて、可視光動画および赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力してもよい。例えば、大きさ検出部１４４が検出した大きさの変化量が予め定められた大きさの変化量より大きいと判断したことにより、オブジェクトが予め定められた条件に適合すると適合判断部１５０が判断した場合、出力部１７０は、可視光動画のデータ量を低減して、赤外光動画および音声のデータ量を増加してよい。なお、他の実施例において、出力部１７０は、可視光動画のデータ量を増加して、赤外光動画および音声のデータ量を低減してもよく、あるいは、出力部１７０は、赤外光動画のデータ量を増加して、可視光動画および音声のデータ量を低減してもよい。

また、出力部１７０は、オブジェクトの大きさが予め定められた大きさより大きいか否かに応じて、可視光動画および赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力してもよい。例えば、大きさ検出部１４４が検出したオブジェクトの大きさが予め定められたオブジェクトの大きさより大きいことにより、適合判断部１５０が、オブジェクトが予め定められた条件に適合すると判断した場合（例えば、可視光動画撮像部１０２の焦点距離からオブジェクトがずれることにより、オブジェクトの大きさが予め定められたオブジェクトの大きさより大きい場合等）、出力部１７０は、可視光動画のデータ量を低減して、赤外光動画および音声のデータ量を増加してよい。なお、他の実施例において、出力部１７０は、可視光動画のデータ量を増加して、赤外光動画および音声のデータ量を低減してもよく、あるいは、出力部１７０は、赤外光動画のデータ量を増加して、可視光動画および音声のデータ量を低減してもよい。

また、出力部１７０は、人物の向きが予め定められた向きであるか否かに応じて、可視光動画および赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力してもよい。具体的には、向き特定部１４６が特定した人物の顔の向きが、撮像ユニット１００の撮像方向から予め定められた角度ずれていることにより、適合判断部１５０が、オブジェクトが予め定められた条件に適合すると判断した場合、例えば、撮像ユニット１００において人物の正面の顔を撮像できないと適合判断部１５０が判断した場合に、出力部１７０は、可視光動画のデータ量を低減して、赤外光動画および音声のデータ量を増加する。

なお、出力部１７０は、オブジェクトが予め定められた条件に適合するか否かに応じて、可視光動画および赤外光動画のうちの一方の解像度および／または階調数を低減して出力してもよい。すなわち、出力部１７０は、監視領域に侵入したオブジェクトの解析に資する動画について高画質および／または高階調数で撮像すべく、オブジェクトが予め定められた条件に適合するか否かに応じて、可視光動画および赤外光動画のうちの一方の解像度および／または階調数を低減して出力する。

具体的には、出力部１７０は、解析ユニット１４０における解析結果と、適合判断部１５０における判断結果とを用いて、可視光画像および赤外光画像のいずれか一方の解像度および／または階調数を低減して出力する。例えば、出力部１７０は、大きさ検出部１４４が検出した大きさが予め定められた大きさより大きいことを条件として、オブジェクトが予め定められた条件（例えば、オブジェクトが人物であって、当該人物の正面の顔を撮像ユニット１００が撮像できる場合に合致する条件）に適合するか否かに応じて、可視光動画および赤外光動画のうちの一方の解像度および／または階調数を低減して出力する。例えば、適合判断部１５０が、オブジェクトである人物の顔の大きさが予め定められた大きさより大きいことにより、人物の顔を認識できると判断したうえで、更に、当該人物の顔の正面を撮像できると判断した場合に、出力部１７０は、赤外光動画の解像度および／または階調数を低減して、可視光画像および赤外光画像を出力する。

なお、出力部１７０は、可視光動画のデータ量を低減して出力する場合に、可視光動画に含まれる色数を低減して出力してもよい。出力部１７０は、可視光動画に含まれる色数を、予め定められた間隔で選択した複数の画素の色数を低減して出力してもよい。また、出力部１７０は、オブジェクトが予め定められた条件に適合するか否かに応じて、可視光動画および赤外光動画のうちの一方の表示レートを低下して出力することにより、データ量を低減してもよい。更に、出力部１７０は、オブジェクトが予め定められた条件に適合するか否かに応じて、可視光動画および赤外光動画のうちの一方の圧縮率を上げることによりデータ量を低減してもよい。

また、出力部１７０は、動き速さ検出部１４８が検出した速さが予め定められた速さより小さいことを条件として、オブジェクトが予め定められた条件に適合するか否かに応じて、可視光動画および赤外光動画のうちの一方の表示レートを低下して出力してもよい。例えば、オブジェクトが人物であり、動き速さ検出部１４８が検出した人物の速さが予め定められた速さより小さい場合であって、人物の正面の顔を撮像ユニット１００が撮像できない場合には、出力部１７０は、可視光動画の表示レートを低下して出力してよい。

また、出力部１７０は、監視領域の明るさが予め定めら得た明るさよりも明るいことを条件として、可視光動画データのデータ量を赤外光動画データのデータ量よりも多くして出力する。係る場合において出力部１７０は、赤外光動画データのデータ量をゼロにしてもよい。一方、出力部１７０は、監視領域の明るさが予め定められた明るさよりも暗いことを条件として、赤外光動画データのデータ量を可視光動画データのデータ量よりも多くして出力する。なお、出力部１７０は、監視領域の明るさが予め定められた明るさよりも暗いことを条件として、赤外光動画データのデータ量と音声データのデータ量との合計量を、可視光動画データのデータ量より多くして出力してもよい。

また、出力部１７０は、適合判断部１５０が、可視光動画構成画像が含む複数の画素のうち、最大の輝度を示す画素の輝度と最小の輝度を示す画素の輝度との差が予め定められた基準値より小さいことにより、オブジェクトが予め定められた条件に適合しないと判断した場合、可視光動画データのデータ量を低減して、赤外光動画データのデータ量を増加して出力する。また、出力部１７０は、適合判断部１５０が、当該差が予め定められた基準値より大きいことにより、オブジェクトが予め定められた条件に適合すると判断した場合、可視光動画データのデータ量を増加させて、赤外光動画のデータ量を低減して出力する。

また、出力部１７０は、適合判断部１５０が、監視領域の可視光動画構成画像または赤外光動画構成画像の複数の画素が示す輝度分布が略均一であることにより、オブジェクトが予め定められた条件に適合すると判断した場合、可視光動画のデータ量を低減して、赤外光動画データのデータ量を増加して出力してよい。また、出力部１７０は、適合判断部１５０が、監視領域の可視光動画構成画像または赤外光動画構成画像の複数の画素が示す輝度分布が予め定められた輝度値よりも明るい輝度の側に偏っていることにより、および輝度分布が予め定められた輝度値よりも暗い輝度の側に偏っていることにより、オブジェクトが予め定められた条件に適合しないと判断した場合、可視光動画のデータ量を増加して、赤外光動画データのデータ量を低減して出力してよい。

出力部１７０は、出力すべき可視光動画データ、赤外光動画データ、および音声データを、単位時間当たりに出力するデータ量に対する可視光動画データ量、赤外光動画データ量、および音声データ量の比率を調整したうえで、データ送受信部１８０に供給する。

データ送受信部１８０は、出力部１７０から受け取った可視光動画データ、赤外光動画データ、および音声データを、可視光動画データ、赤外光動画データ、および音声データを管理するサーバ２０に送信する。データ送受信部１８０は、サーバ２０が監視システム１０の外部に存在する場合、インターネット等のネットワークを介して可視光動画データ、赤外光動画データ、および音声データをサーバ２０に送信する。また、データ送受信部１８０は、監視システム１０とサーバ２０との間の通信トラフィックを示すトラフィック情報を外部のサーバ２０から受け取ってもよい。データ送受信部１８０は、トラフィック情報を出力部１７０に供給する。

データ送受信部１８０からトラフィック情報を受け取った出力部１７０は、当該トラフィック情報が示す通信トラフィックに応じて、可視光動画データのデータ量、赤外光動画データのデータ量、および音声データのデータ量の合計量を調整してもよい。例えば、出力部１７０は、通信トラフィックが予め定められた通信量を超えていた場合、サーバ２０に送信すべき可視光動画データ、赤外光動画データ、および音声データそれぞれのデータ量の比率を略一定に保ったまま、データ量の合計量を低減させて出力する。これにより、監視システム１０とサーバ２０との間の通信トラフィックが変動した場合であっても、監視領域の解析に適切な種類の動画および／または音声をサーバ２０に出力することができる。

本実施形態に係る監視システム１０によれば、出力すべき可視光動画データ、赤外光動画データ、および音声データのデータ量の比率を、監視領域に含まれるオブジェクトが予め定められた条件に適合するか否かに応じて変化させることができる。これにより、監視領域に含まれるオブジェクトの解析に適した動画を高画質で撮像できると共に、データ量を低減させた動画についても、監視領域に含まれるオブジェクトの解析に補助的に用いることができる。

図３は、本実施形態に係る監視システム１０の処理の一例を示す。まず、監視領域３００についての可視光動画を可視光動画撮像部１０２が撮像すると共に、監視領域３００についての赤外光動画を赤外光動画撮像部１０４が撮像する。係る場合において、監視領域３００に人物３０５が存在しない場合、および人物３０５が存在する場合であっても、人物３０５の正面の顔を撮像できる場合には、出力部１７０は、可視光動画データ量３、赤外光動画データ量４、および音声データ量５の順にデータ量が低減する順で、監視領域３００の可視光動画データ、赤外光動画データ、および音声データを出力する（グラフ７４参照）。

続いて、監視領域３００と同一の監視領域である監視領域３１０を参照する。監視領域３１０においては、人物３０５の顔は撮像ユニット１００に対して正面を向いていない。係る場合には、適合判断部１５０は、予め定められた条件の１つである、人物の正面の顔を撮像することができないという条件に合致すると判断する。そして、適合判断部１５０は当該判断の結果を出力部１７０に通知する。出力部１７０は、当該結果を受け取ると、当該結果を受け取った時刻（Ｔ１０１０）から可視光動画データ量３を低減させ、赤外光動画データ量４および音声データ量５を増加させて、可視光動画データ、赤外光動画データ、および音声データをサーバ２０に出力する（グラフ７６参照）。

これにより、監視システム１０は、監視領域３００に可視光動画撮像部１０２が撮像する可視光動画では死角がある場合には、可視光動画の撮像よりも赤外光動画の撮像および音声の集音を優先することができるので、監視領域３００の状況を適切に把握できる情報を確実に得ることができる。

図４は、本発明の他の実施形態に係る監視システム５０の概要を示す。監視システム５０は、監視領域の全体を撮像する広域動画撮像部５０２および監視領域に含まれ、広域動画撮像部５０２よりも狭い領域を撮像する細部動画撮像部６０２を備える。まず、監視領域に人物等の動体が含まれていない場合、監視システム５０は、広域動画撮像部５０２で監視領域を撮像する。一方、細部動画撮像部６０２は動作させない。従って、細部動画撮像部６０２は細部動画データを出力しない。例えば、非撮像状態４０２および非撮像状態４１２に示すべく、細部動画データは存在しない。

係る場合において、監視システム５０は、単位時間当たりに出力するデータ量を広域動画撮像部５０２が撮像した広域動画データの出力に割り当てる。すなわち、グラフ７７に示すべく、監視システム５０は、監視システム５０とサーバ２０との間の通信帯域を広域動画データの送信に割り当て、通信データ量を広域動画データ量６４に調整して広域動画像４００をサーバ２０に出力する。

続いて、監視領域に人物１が存在する場合、監視システム５０は、細部動画撮像部６０２に人物１の特定部分、例えば、人物１の顔、手、または体の一部などの高解像度の動画を撮像させる（例えば、細部動画像４２２および細部動画像４３２）。一方、広域動画撮像部５０２は、監視領域の全体の撮像を続行するものの（例えば、広域動画像４２０および広域動画像４３０）、監視領域に人物１が存在しない場合に比べて、サーバ２０に出力する広域動画データ量６４を低減させる。例えば、監視システム５０は、広域動画撮像部５０２が撮像する動画の解像度の低減、または表示レートの低下等によりデータ量を低減させる。

そして、監視システム５０は、グラフ７８に示すべく、人物１が監視領域に侵入した時刻（Ｔ１０２０）から、広域動画撮像部５０２が撮像した広域動画の広域動画データ量６４を低減させる一方で、細部動画撮像部６０２に人物１の顔領域の動画を撮像させる。そして、監視システム５０は、細部動画撮像部６０２が撮像した細部動画を、細部動画データ量６６に調整して出力する。なお、係る場合において、監視システム５０は、監視領域に人物１が存在する前後における単位時間当たりに出力するデータ量が略一定となるべく、出力する広域動画データおよび細部動画データのそれぞれのデータ量を予め定められた比率に適合させるべく調整する。

図５は、本発明の他の実施形態に係る監視システム５０の機能構成の一例を示す。監視システム５０は、広域監視ユニット５００、細部監視ユニット６００、出力部１７０、およびデータ送受信部１８０を備える。また、広域監視ユニット５００は、広域動画撮像部５０２、広域動画取得部５１０、動体検出部５２０、および広域動画格納部５３０を有する。更に、細部監視ユニット６００は、細部動画撮像部６０２、動体位置取得部６１０、位置合わせ部６２０、細部動画取得部６３０、および細部動画格納部６４０を有する。

ここで、出力部１７０およびデータ送受信部１８０については、図１から図３の上記説明における出力部１７０およびデータ送受信部１８０と略同一の機能を有するので、詳細な説明は省略する。なお、監視システム５０は、図１から図３の上記説明における監視システム１０の説明において説明した機能および／または構成の一部または全部を更に備えていてもよい。

広域動画撮像部５０２は、光により監視領域の光動画である広域動画を撮像する。広域動画撮像部５０２は、撮像した広域動画を示す広域動画データを広域動画取得部５１０に供給する。広域動画取得部５１０は、広域動画撮像部５０２から広域動画データを取得する。そして、広域動画取得部５１０は、取得して広域動画データを、動体検出部５２０、広域動画格納部５３０、および出力部１７０に供給する。広域動画格納部５３０は、広域動画取得部５１０が取得した広域動画データを、広域動画データが示す広域動画が撮像された時刻に対応づけて格納する。

動体検出部５２０は、広域動画取得部５１０が取得した広域動画データを構成する複数の動画構成画像（以下、広域動画構成画像とする）を解析して、広域動画構成画像に動体が含まれているか否かを検出する。例えば、動体検出部５２０は、テンプレートマッチング、エッジ抽出、および閾値処理等の画像処理により広域動画構成画像に含まれるオブジェクトをオブジェクト画像として抽出する。そして、動体検出部５２０は、広域動画データが示す広域動画が撮像された時刻ごとに抽出したオブジェクト画像の差分を取ることにより、監視領域に含まれるオブジェクトが移動していることを検出する。動体検出部５２０は検出結果を動体位置取得部６１０に供給する。

動体位置取得部６１０は、動体検出部５２０からオブジェクトが移動していることを示す検出結果を受け取ったことを契機として、監視領域に含まれるオブジェクトの監視領域上における位置を取得する。動体位置取得部６１０は、取得したオブジェクトの位置を示す情報を位置合わせ部６２０に供給する。なお、オブジェクトの位置の取得方法は、図２の解析ユニット１４０における説明で説明したオブジェクトの位置の取得方法と同様にして取得できるので、詳細な説明は省略する。

位置合わせ部６２０は、動体位置取得部６１０からオブジェクトの位置を示す情報を受け取った場合、細部動画撮像部６０２を起動させると共に、細部動画撮像部６０２の撮像方向を、当該オブジェクトを撮像可能な位置に合わせる。そして、位置合わせ部６２０は、細部動画撮像部６０２に撮像方向を当該オブジェクトの移動に合わせて制御する。位置合わせ部６２０は、当該オブジェクトの特定部分、例えば、当該オブジェクトが人物である場合、当該人物の顔、手、および体の一部の細部動画を細部動画撮像部６０２が撮像可能となるべく、細部動画撮像部６０２の撮像方向を制御する。

例えば、位置合わせ部６２０は、人物の眼、鼻、口、耳、眉、顔の輪郭、手、足、首、胴体、および着衣等のテンプレート画像を有していてよく、テンプレートマッチングによって人物の特定部分を特定する。そして、位置合わせ部６２０は、細部動画撮像部６０２の撮像方向を当該人物の特定部分を撮像可能な位置に合わせる。なお、位置合わせ部６２０が特定する人物の特定部分が複数ある場合、特定する特定部分に優先順位を規定していてよい。優先順位が規定されている場合には、位置合わせ部６２０は、優先順位の高い順に人物の特定部分の特定を実行する。

細部動画撮像部６０２は、監視領域に含まれるオブジェクトの特定部分を高解像度および高い表示レートで撮像して、細部動画を撮像する。細部動画撮像部６０２は、監視領域における撮像方向を移動させる駆動部を含んでいてよく、駆動部は、位置合わせ部６２０に制御されて、細部動画撮像部６０２の撮像方向を調整する。細部動画撮像部６０２は、撮像した細部動画を示す細部動画データを細部動画取得部６３０に供給する。細部動画取得部６３０は、細部動画撮像部６０２が撮像した細部動画を示す細部動画データを取得する。細部動画取得部６３０は、取得した細部動画を、細部動画格納部６４０および出力部１７０に供給する。細部動画格納部６４０は、細部動画取得部６３０が取得した細部動画データを、細部動画データが示す細部動画が撮像された時刻に対応づけて格納する。

出力部１７０は、監視領域にオブジェクトが存在するか否かに応じて、広域動画および細部動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力する。出力部１７０は、監視領域にオブジェクトが存在しない場合、広域動画だけを出力してもよい。データ送受信部１８０は、出力部１７０が出力する広域動画データおよび／または細部動画データを、インターネット等のネットワークを介してサーバ２０に送信する。

本実施形態に係る監視システム５０によれば、監視領域において動体を検出した場合には、監視領域全体を撮像している広域動画の解像度、表示レート、および圧縮率等を変更してデータ量を低減させて出力すると共に、当該動体の特定の部分の高解像度の細部動画を撮像して出力する。係る場合において、監視システム５０は、広域動画のデータ量を低減させることにより生じた通信帯域の空き部分を、細部動画データの出力に用いることができる。これにより、監視システム５０は、監視領域の状況を適切に把握できる情報を優先的に出力することができる。

図６は、本実施形態に係る監視システム１０および監視システム５０のハードウェア構成の一例を示す。本実施形態に係る監視システム１０および監視システム５０は、ホスト・コントローラ１５８２により相互に接続されるＣＰＵ１５０５、ＲＡＭ１５２０、グラフィック・コントローラ１５７５、および表示装置１５８０を有するＣＰＵ周辺部と、入出力コントローラ１５８４によりホスト・コントローラ１５８２に接続される通信インターフェイス１５３０、ハードディスクドライブ１５４０、およびＣＤ−ＲＯＭドライブ１５６０を有する入出力部と、入出力コントローラ１５８４に接続されるＲＯＭ１５１０、フレキシブルディスク・ドライブ１５５０、および入出力チップ１５７０を有するレガシー入出力部とを備える。

ホスト・コントローラ１５８２は、ＲＡＭ１５２０と、高い転送レートでＲＡＭ１５２０をアクセスするＣＰＵ１５０５およびグラフィック・コントローラ１５７５とを接続する。ＣＰＵ１５０５は、ＲＯＭ１５１０およびＲＡＭ１５２０に格納されたプログラムに基づいて動作して、各部を制御する。グラフィック・コントローラ１５７５は、ＣＰＵ１５０５等がＲＡＭ１５２０内に設けたフレーム・バッファ上に生成する画像データを取得して、表示装置１５８０上に表示させる。これに代えて、グラフィック・コントローラ１５７５は、ＣＰＵ１５０５等が生成する画像データを格納するフレーム・バッファを、内部に含んでもよい。

入出力コントローラ１５８４は、ホスト・コントローラ１５８２と、比較的高速な入出力装置である通信インターフェイス１５３０、ハードディスクドライブ１５４０、ＣＤ−ＲＯＭドライブ１５６０を接続する。通信インターフェイス１５３０は、ネットワークを介して他の装置と通信する。ハードディスクドライブ１５４０は、監視システム１０および監視システム５０内のＣＰＵ１５０５が使用するプログラムおよびデータを格納する。ＣＤ−ＲＯＭドライブ１５６０は、ＣＤ−ＲＯＭ１５９５からプログラムまたはデータを読み取り、ＲＡＭ１５２０を介してハードディスクドライブ１５４０に提供する。

また、入出力コントローラ１５８４には、ＲＯＭ１５１０と、フレキシブルディスク・ドライブ１５５０、および入出力チップ１５７０の比較的低速な入出力装置とが接続される。ＲＯＭ１５１０は、監視システム１０および監視システム５０が起動時に実行するブート・プログラム、監視システム１０および監視システム５０のハードウェアに依存するプログラム等を格納する。フレキシブルディスク・ドライブ１５５０は、フレキシブルディスク１５９０からプログラムまたはデータを読み取り、ＲＡＭ１５２０を介してハードディスクドライブ１５４０に提供する。入出力チップ１５７０は、フレキシブルディスク・ドライブ１５５０、例えばパラレル・ポート、シリアル・ポート、キーボード・ポート、マウス・ポート等を介して各種の入出力装置を接続する。

ＲＡＭ１５２０を介してハードディスクドライブ１５４０に提供される監視プログラムは、フレキシブルディスク１５９０、ＣＤ−ＲＯＭ１５９５、またはＩＣカード等の記録媒体に格納されて利用者によって提供される。監視プログラムは、記録媒体から読み出され、ＲＡＭ１５２０を介して監視システム１０および監視システム５０内のハードディスクドライブ１５４０にインストールされ、ＣＰＵ１５０５において実行される。

監視システム１０および監視システム５０にインストールされて実行される監視プログラムは、ＣＰＵ１５０５等に働きかけて、監視システム１０および監視システム５０を、図１から図５にかけて説明した可視光動画撮像部１０２、赤外光動画撮像部１０４、集音部１１０、動画取得部１２０、オブジェクト抽出部１３０、変化量検出部１４２、大きさ検出部１４４、向き特定部１４６、動き速さ検出部１４８、適合判断部１５０、情報格納部１６０、出力部１７０、データ送受信部１８０、広域動画撮像部５０２、広域動画取得部５１０、動体検出部５２０、広域動画格納部５３０、細部動画撮像部６０２、動体位置取得部６１０、位置合わせ部６２０、細部動画取得部６３０、および細部動画格納部６４０として機能させる。

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加え得ることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。

監視システム１０の概要図である。 監視システム１０の機能構成を示すブロック図である。 監視システム１０における処理を示す図である。 監視システム５０の概要図である。 監視システム５０の機能構成を示すブロック図である。 監視システム１０および監視システム５０のハードウェア構成を示すブロック図である。

符号の説明

１、２、３０５ 人物
３ 可視光動画データ量
４ 赤外光動画データ量
５ 音声データ量
１０ 監視システム
２０ サーバ
５０ 監視システム
６４ 広域動画データ量
６６ 細部動画データ量
７０、７２、７４、７６、７７、７８ グラフ
１００ 撮像ユニット
１０２ 可視光動画撮像部
１０４ 赤外光動画撮像部
１１０ 集音部
１２０ 動画取得部
１３０ オブジェクト抽出部
１４０ 解析ユニット
１４２ 変化量検出部
１４４ 大きさ検出部
１４６ 向き特定部
１４８ 動き速さ検出部
１５０ 適合判断部
１６０ 情報格納部
１７０ 出力部
１８０ データ送受信部
３００、３１０ 監視領域
４００、４１０、４２０、４３０ 広域動画像
４０２、４１２ 非撮像状態
４２２、４３２ 細部動画像
５００ 広域監視ユニット
５０２ 広域動画撮像部
５１０ 広域動画取得部
５２０ 動体検出部
５３０ 広域動画格納部
６００ 細部監視ユニット
６０２ 細部動画撮像部
６１０ 動体位置取得部
６２０ 位置合わせ部
６３０ 細部動画取得部
６４０ 細部動画格納部
１５０５ ＣＰＵ
１５１０ ＲＯＭ
１５２０ ＲＡＭ
１５３０ 通信インターフェイス
１５４０ ハードディスクドライブ
１５５０ フレキシブルディスク・ドライブ
１５６０ ＣＤ−ＲＯＭドライブ
１５７０ 入出力チップ
１５７５ グラフィック・コントローラ
１５８０ 表示装置
１５８２ ホスト・コントローラ
１５８４ 入出力コントローラ
１５９０ フレキシブルディスク
１５９５ ＣＤ−ＲＯＭ

Claims (23)

1. 可視光により監視領域の可視光動画を撮像する可視光動画撮像部と、
   赤外光により前記監視領域の赤外光動画を撮像する赤外光動画撮像部と、
   前記可視光動画または前記赤外光動画に含まれるオブジェクトが予め定められた条件に適合するか否かを判断する適合判断部と、
   前記オブジェクトが予め定められた条件に適合するか否かに応じて、前記可視光動画および前記赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力する出力部と
   を備える監視システム。
2. 前記出力部は、単位時間当たりに出力する前記可視光動画のデータ量と前記赤外光動画のデータ量との合計量を略一定にする
   請求項１に記載の監視システム。
3. 前記監視領域における音声を集音する集音部
   を更に備え、
   前記適合判断部は、前記オブジェクトが予め定められた条件に適合するか否か、および前記音声が予め定められた条件に適合するか否かを判断し、
   前記出力部は、前記オブジェクトが予め定められた条件に適合するか否か、および前記音声が予め定められた条件に適合するか否かに応じて、前記可視光動画、前記赤外光動画、および前記音声のうちの少なくともいずれかのデータ量を低減して、他のデータ量を増加して出力する
   請求項１に記載の監視システム。
4. 前記適合判断部は、前記音声の音量の変化量が予め定められた音声変化量より大きいか否かを判断し、
   前記出力部は、前記オブジェクトが予め定められた条件に適合するか否か、および前記音声が予め定められた音声変化量より大きいか否かに応じて、前記可視光動画、前記赤外光動画、および前記音声のうちの少なくともいずれかのデータ量を低減して、他のデータ量を増加して出力する
   請求項３に記載の監視システム。
5. 前記可視光動画または前記赤外光動画における前記オブジェクトの変化量を検出する変化量検出部
   を更に備え、
   前記適合判断部は、前記変化量検出部が検出した前記オブジェクトの変化量が予め定められた変化量より大きいか否かを判断し、
   前記出力部は、前記オブジェクトの変化量が予め定められた変化量より大きいか否かに応じて、前記可視光動画および前記赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力する
   請求項１に記載の監視システム。
6. 前記変化量検出部は、前記オブジェクトの位置の変化量を検出し、
   前記適合判断部は、前記変化量検出部が検出した前記オブジェクトの位置の変化量が予め定められた位置の変化量より大きいか否かを判断し、
   前記出力部は、前記オブジェクトの位置の変化量が予め定められた位置の変化量より大きいか否かに応じて、前記可視光動画および前記赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力する
   請求項５に記載の監視システム。
7. 前記変化量検出部は、前記オブジェクトの大きさの変化量を検出し、
   前記適合判断部は、前記大きさ検出部が検出した大きさの変化量が予め定められた大きさの変化量より大きい場合に、前記オブジェクトが予め定められた条件に適合すると判断し、
   前記出力部は、前記オブジェクトの大きさの変化量が予め定められた大きさの変化量より大きいか否かに応じて、前記可視光動画および前記赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力する
   請求項５に記載の監視システム。
8. 前記オブジェクトの大きさを検出する大きさ検出部
   を更に備え、
   前記適合判断部は、前記大きさ検出部が検出した前記オブジェクトの大きさが予め定められた大きさより大きいか否かを判断し、
   前記出力部は、前記オブジェクトの大きさが予め定められた大きさより大きいか否かに応じて、前記可視光動画および前記赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力する
   請求項１に記載の監視システム。
9. 前記可視光動画または前記赤外光動画に含まれる人物の向きを特定する向き特定部
   を更に備え、
   前記適合判断部は、前記向き特定部が特定した人物の向きが予め定められた向きであるか否かを判断し、
   前記出力部は、前記人物の向きが予め定められた向きであるか否かに応じて、前記可視光動画および前記赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力する
   請求項１に記載の監視システム。
10. 前記出力部は、前記オブジェクトが予め定められた条件に適合するか否かに応じて、前記可視光動画および前記赤外光動画のうちの一方の解像度を低減して出力する
    請求項１に記載の監視システム。
11. 前記オブジェクトの大きさを検出する大きさ検出部
    を更に備え、
    前記出力部は、前記大きさ検出部が検出した大きさが予め定められた大きさより大きいことを条件として、前記オブジェクトが予め定められた条件に適合するか否かに応じて、前記可視光動画および前記赤外光動画のうちの一方の解像度を低減して出力する
    請求項１０に記載の監視システム。
12. 前記出力部は、前記オブジェクトが予め定められた条件に適合するか否かに応じて、前記可視光動画および前記赤外光動画のうちの一方の階調数を低減して出力する
    請求項１に記載の監視システム。
13. 前記可視光動画撮像部は複数の色情報を含む可視光動画を撮像し、
    前記出力部は、前記可視光動画のデータ量を低減して出力する場合に、前記可視光動画に含まれる色数を低減して出力する
    請求項１に記載の監視システム。
14. 前記出力部は、前記オブジェクトが予め定められた条件に適合するか否かに応じて、前記可視光動画および前記赤外光動画のうちの一方の表示レートを低下して出力する
    請求項１に記載の監視システム。
15. 前記オブジェクトが動く速さを検出する動き速さ検出部
    を更に備え、
    前記出力部は、前記動き速さ検出部が検出した速さが予め定められた速さより小さいことを条件として、前記オブジェクトが予め定められた条件に適合するか否かに応じて、前記可視光動画および前記赤外光動画のうちの一方の表示レートを低下して出力する
    請求項１４に記載の監視システム。
16. 前記出力部は、前記オブジェクトが予め定められた条件に適合するか否かに応じて、前記可視光動画および前記赤外光動画のうちの一方の圧縮率を上げる
    請求項１に記載の監視システム。
17. 可視光により監視領域の可視光動画を撮像する可視光動画撮像段階と、
    赤外光により前記監視領域の赤外光動画を撮像する赤外光動画撮像段階と、
    前記可視光動画または前記赤外光動画に含まれるオブジェクトが予め定められた条件に適合するか否かを判断する適合判断段階と、
    前記オブジェクトが予め定められた条件に適合するか否かに応じて、前記可視光動画および前記赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力する出力段階と
    を備える監視方法。
18. 監視領域を監視する監視システム用の監視プログラムであって、前記監視システムを、
    可視光により監視領域の可視光動画を撮像する可視光動画撮像部、
    赤外光により前記監視領域の赤外光動画を撮像する赤外光動画撮像部、
    前記可視光動画または前記赤外光動画に含まれるオブジェクトが予め定められた条件に適合するか否かを判断する適合判断部、
    前記オブジェクトが予め定められた条件に適合するか否かに応じて、前記可視光動画および前記赤外光動画のうちの一方のデータ量を低減して他方のデータ量を増加して出力する出力部
    として機能させる監視プログラム。
19. 光により監視領域の光動画を撮像する動画撮像部と、
    前記監視領域から音声を集音する集音部と、
    前記光動画に含まれるオブジェクトが予め定められた条件に適合するか否か、および前記音声が予め定められた条件に適合するか否かを判断する適合判断部と、
    前記オブジェクトが予め定められた条件に適合するか否か、および前記音声が予め定められた条件に適合するか否かに応じて、前記光動画および前記音声のうちの一方のデータ量を低減して、他方のデータ量を増加して出力する出力部と
    を備える監視システム。
20. 前記出力部は、単位時間当たりに出力する前記光動画のデータ量と前記音声のデータ量との合計量を略一定にする
    請求項１９に記載の監視システム。
21. 前記適合判断部は、前記音声の音量の変化量が予め定められた音声変化量より大きいか否かを判断し、
    前記出力部は、前記音声の変化量が予め定められた音声変化量より大きいか否かに応じて、前記光動画および前記音声のうちの一方のデータ量を低減して、他方のデータ量を増加して出力する
    請求項１９に記載の監視システム。
22. 光により監視領域の光動画を撮像する動画撮像段階と、
    前記監視領域における音声を集音する集音段階と、
    前記光動画に含まれるオブジェクトが予め定められた条件に適合するか否か、および前記音声が予め定められた条件に適合するか否かを判断する適合判断段階と、
    前記オブジェクトが予め定められた条件に適合するか否か、および前記音声が予め定められた条件に適合するか否かに応じて、前記光動画および前記音声のうちの一方のデータ量を低減して、他方のデータ量を増加して出力する出力段階と
    を備える監視方法。
23. 監視領域を監視する監視システム用の監視プログラムであって、前記監視システムを、
    光により監視領域の光動画を撮像する動画撮像部、
    前記監視領域から音声を集音する集音部、
    前記光動画に含まれるオブジェクトが予め定められた条件に適合するか否か、および前記音声が予め定められた条件に適合するか否かを判断する適合判断部、
    前記オブジェクトが予め定められた条件に適合するか否か、および前記音声が予め定められた条件に適合するか否かに応じて、前記光動画および前記音声のうちの一方のデータ量を低減して、他方のデータ量を増加して出力する出力部
    として機能させる監視プログラム。

Images