JP2006245746A

JP2006245746A - 監視システム

Info

Publication number: JP2006245746A
Application number: JP2005055708A
Authority: JP
Inventors: Wataru Ito; 渡伊藤; Mitsue Ito; 光恵伊藤
Original assignee: Hitachi Kokusai Electric Inc
Current assignee: Hitachi Kokusai Electric Inc
Priority date: 2005-03-01
Filing date: 2005-03-01
Publication date: 2006-09-14

Abstract

【課題】監視対象領域を効果的に監視する監視システムを提供する。。
【解決手段】監視装置１では、画像撮像手段１１が監視対象領域の画像を撮像し、入力画像変化検出手段１５が撮像した画像の変化を検出し、第1の画像送信手段１２、１３、１６、１７が画像の変化を検出していない状態で第１の画質の画像を監視端末装置２へ送信し、第２の画像送信手段１２、１４、１６、１７が画像の変化を検出した状態で第１の画質と比べて高画質な第２の画質の画像を監視端末装置２へ送信し、通信手段１６が送信する画像に優先順位を付加し、該優先順位に基づいて画質調整手段１８が送信する画像の画質を調整し、画像分割手段１９が画像を分割して分割画像を作成する。監視端末装置２では、画像受信手段が監視装置１から画像を受信し、画像表示手段が受信画像を表示する。
【選択図】図１

Description

本発明は、撮像装置で得られる画像によって監視対象となる領域（監視対象領域）を監視する監視システムに関し、特に、少なくとも２種類の画像を用いて監視対象領域を効果的に監視することができる監視システムに関する。

例えば、CCD（Charge Coupled Device）やCMOS（Complementary Metal-Oxide Semiconductor）などといった固体撮像素子によるテレビジョンカメラなどの撮像装置を用いた監視装置は、従来より広く用いられている。

このような監視装置を用いた監視システムにおける有人監視では、監視対象領域に存在する不審な人物や物体、侵入者、或いは火災などの異常の検出を、監視員（オペレータ）がモニタに表示される画像を見ながら行う。このような有人監視では、監視員の熟練度や健康状態などによって監視能力に差が生じ、不審者などの異常の見逃しなどの問題が発生する場合があった。

そこで、従来の有人による監視システムに、カメラ等の画像入力手段から入力される画像に基づいて不審者や異常を自動的に検出して所定の報知や警報処置が得られる機能を付加したシステムが数多く提案されている。

一例として、カメラにより得られた入力画像と、予め作成した基準背景画像すなわち検出すべき物体が映っていない画像とを比較して、画素毎に輝度値の差分を求めることで入力画像中の輝度値が変化している領域を検出し、当該検出した変化領域の位置変化を処理フレーム毎に判定することにより、監視対象領域内の不審者などの異常（注目領域）を検出することができる。このようにして入力画像中の輝度値が変化している領域を検出する処理は、一般的に、差分法と呼ばれており、従来より広く用いられている（例えば、特許文献１参照。）。

また、このような監視システムでは、不審者などの異常を検出した場合における機能として、カメラのズームレンズや雲台（電動旋回台）を操作して不審者の顔や異常の種類をズームアップして映す機能（ここで、第１の機能と言う）や、カメラから高画質（高精細）の画像を得られるようにする機能（ここで、第２の機能と言う）が必要となると考えられる。

前記第１の機能としては、例えば、テンプレートマッチングを用いて対象物体の動きを検出し、当該対象物体の動きに応じてカメラの雲台を制御することができる。
前記第２の機能としては、例えば、入力画像の変化を検出し、変化が検出された場合には高画質の静止画像を得られるようにし、変化が検出されない場合には低画質の動画像を得られるようにすることができる。
特開２０００−１０５８３５号公報

しかしながら、従来の監視システムにおいては、例えば、不審者などの異常を検出した場合にカメラのズームレンズや雲台を操作する方法では、監視対象領域の一部分の領域しか監視することができず、それ以外の領域は死角になってしまうという問題があった。また、例えば、通常は監視対象領域を撮像した標準画質の画像（標準画像）を用いて監視を行い、不審者などの異常を検出した場合にはカメラから標準画像よりも画質の高い高精細の画像（高精細画像）を得られるようにする方法では、不審者などの異常を検出している間における高精細画像のデータ量が膨大なものとなってしまい、特に、ネットワークなどを用いて遠隔地へ画像を伝送するような用途では、画像のデータ量が伝送路のデータ伝送容量を超えてしまう可能性があり、画像を正常に送ることができなくなるという問題があった。このような場合、撮像装置で撮像した標準画像でさえもオペレータが見ることができなくなってしまい、監視システムとしての機能を失ってしまう。また、画像のデータ量が伝送路のデータ伝送容量を超えていない場合であっても、監視対象領域を撮像した標準画像と高精細画像の双方を同時に送ると、高精細画像のデータ量が膨大であるために伝送時間が長くなってしまい、オペレータが監視する画像のリアルタイム性が低下すると言う問題があった。

本発明は、このような従来の事情に鑑み為されたもので、監視対象となる領域を効果的に監視することができる監視システムを提供することを目的とする。
更に具体的には、本発明では、例えば、異常を検出した場合においても監視対象領域の全体を見ることを可能とすることや、異常を検出したときに高精細画像を取得する場合においても伝送路のデータ伝送効率を向上させることで高精細画像の伝送時間を小さくすることを可能とすることを実現する。

上記目的を達成するため、本例に係る監視システムでは、監視対象となる領域の画像を撮像する監視装置と、前記監視装置により撮像された画像を表示する監視端末装置を有し、前記監視装置が撮像した少なくとも２種類の画像を前記監視端末装置へ送信する監視システムであって、前記監視装置は、前記監視対象となる領域を第一の画質、及び、第一の画質と異なる第二の画質の少なくとも２種類の画質の画像を撮像する画像撮像手段と、前記画像撮像手段により撮像された第一の画質の画像を前記監視端末装置に対して送信する第一の画像送信手段と、前記画像撮像手段により撮像された第二の画質の画像を前記監視端末装置に対して送信する第二の画像送信手段と、を備え、前記監視端末装置は、前記監視装置から送信される画像を受信する画像受信手段と、前記画像受信手段により受信された画像を表示する画像表示手段と、を備えた。

従って、例えば、監視端末装置では、入力画像の変化を検出して、当該変化が検出されない場合には、標準画質の第一の画像が監視装置から監視端末装置へ送信されて表示され、当該変化を検出した場合には、高精細画質の第二の画像が監視装置から監視端末装置へ送信されて表示されることにより、監視対象となる領域を効果的に監視することができる。

ここで、標準画像と高精細画像の送信タイミングは重なってもよく、前記画像送信手段が、例えば、高精細画像を送信中でも伝送路の空いている帯域を利用して標準画像を伝送するようにしてもよい。これには、前記画像送信手段が、例えば、標準画像と高精細画像のデータをパケットと呼ばれる所定の大きさ以下のデータに分割したデータを交互に送信したり、高精細画像と標準画像を多重化して送信するようにしてもよい。

また、上記目的を達成するため、本例に係る監視システムにおいて、前記監視装置は、前記画質の異なる少なくとも２種類の画像に対して優先度を割り当てる優先度割り当て手段と、前記第一の画像送信手段、及び、前記第二の画像送信手段から送信する画像の伝送量を前記優先度に基づいて制御する画像送信制御手段と、を備えた。

従って、例えば、標準画像と高精細画像の内、監視上有益な情報を含む画像に高い優先度を割り当てるようにすることで、監視端末装置では、優先度の高い画像を優先的に表示でき、監視対象となる領域を効果的に監視することができる。

ここで、前記画像送信手段が、上記優先度の高い画像の割合をすべて伝送した後で、残りの伝送路容量で優先度の低い画像を伝送するようにしてもよい。
また、上記目的を達成するため、本例に係る監視システムにおいて、前記画像送信制御手段は、送信する画像を部分画像に分割する画像分割手段と、前記画像分割手段によって分割された部分画像のそれぞれに対して送信順位を付加する部分画像送信順位付加手段と、を備え、前記画像送信制御手段は、前記送信順位に基づいて前記部分画像を前記第一の画像送信手段、及び、前記第二の画像送信手段の少なくとも一方から送信する。

また、上記目的を達成するため、本例に係る監視システムにおいて、前記部分画像送信順位付加手段によって前記部分画像に付加される送信順位は、前記監視端末装置の前記画像表示手段に表示される画像の順番によって決定される。

また、上記目的を達成するため、本例に係る監視システムにおいて、前記画像送信制御手段は、画像の画質を調整する画質調整手段を備え、前記画質調整手段は、第一の画像送信手段、及び、第二の画像送信手段から送信する画像の少なくとも一方の画像の画質を落とす。

以上説明したように、本発明に係る監視システムによると、監視対象となる領域の画像を撮像する監視装置と、前記監視装置により撮像された画像を表示する監視端末装置を有し、前記監視装置から前記監視端末装置へ画像を送信する構成において、監視対象となる領域を効果的に監視することができ、例えば、入力画像の変化を検出した場合においても監視対象となる領域の全体をリアルタイムで見ることを可能とすることや、入力画像の変化を検出したときに高精細画像を前記監視装置から前記監視端末装置へ送信する場合においても監視対象となる領域の全体をリアルタイムで見ながら高精細画像を前記監視端末へ送信することができる。

本発明に係る実施例を図面を参照して説明する。

本発明の第１実施例を説明する。
図１には、本例の監視システムの構成例を示してある。
本例の監視システムは、監視装置１と、監視端末装置２と、ネットワーク３と、監視装置１とネットワーク３とを接続する回線（アクセスライン）４と、監視端末装置２とネットワーク３とを接続する回線（アクセスライン）５を有している。ここで、ネットワーク３としては、種々なものが用いられてもよく、例えば、アナログ電話網や、ISDN（Integrated Services Digital Network）網や、デジタル専用線網や、インターネットなどを用いることができる。

監視装置１は、ハードウエアの構成例として、テレビジョンカメラなどから構成された撮像装置１１と、切替スイッチなどから構成された映像切替部１２と、標準画像符号化部１３と、高精細画像符号化部１４と、入力画像変化検出部１５と、通信部１６と、撮像装置制御部１７と、画質調整部１８と、画像分割部１９を備えている。

本例の監視装置１により行われる動作の一例を示す。
撮像装置１１は、監視対象となる領域（監視対象領域）を撮像し、当該撮像により得られた画像（映像）の信号を映像切替部１２へ出力する。

このとき、撮像装置１１では、撮像装置制御部１７から入力される制御信号により、標準画像を撮像する標準画像モードと、高精細画像を撮像する高精細画像モードとのいずれかが選択されて切り替えられる。本例では、標準画像としては例えば横６４０画素×高さ４８０画素の秒３０フレームの画像が用いられ、高精細画像としては例えば横２５６０画素×高さ１９２０画素の秒１．５フレームの画像が用いられる。

映像切替部１２は、映像装置制御部１７から入力される制御信号により、撮像装置１１から出力される画像信号の入力先を切り替える。本例では、映像切替部１２は、撮像装置１１に標準画像モードが設定される場合には撮像装置１１の出力端と標準画像符号化部１３の入力端及び入力画像変化検出部１５の入力端とが接続されるように信号経路を切り替え、撮像装置１１に高精細画像モードが設定される場合には撮像装置１１の出力端と高精細画像符号化部１４の入力端とが接続されるように信号経路を切り替える。これにより、撮像装置１１が標準画像を撮像した場合には撮像装置１１から出力される標準画像が標準画像符号化部１３及び入力画像変化検出部１５へ供給され、撮像装置１１が高精細画像を撮像した場合には撮像装置１１から出力される高精細画像が高精細画像符号化部１４へ供給される。

標準画像符号化部１３は、撮像装置１１から映像切替部１２を介して入力された標準画像の画像信号を、所定の動画像符号化方式によって符号化し、当該符号化したデータを通信部１６へ出力する。ここで、動画像符号化方式としては、種々な方式が用いられてもよく、例えば、MPEG-1や、MPEG-2や、MPEG-4や、モーションJPEGなどを用いることができる。

入力画像変化検出部１５は、撮像装置１１から映像切替部１２を介して入力された標準画像の画像信号を、例えば差分法などによって処理して、監視対象領域内について不審者などの異常を入力画像の変化として検出する。

ここで、図２及び図３を参照して、差分法を用いた処理の例を説明する。
図２を参照して、入力画像変化検出部１５において、差分法によって、撮像装置１１から逐次入力される標準画像について輝度値が変化した領域を検出する処理の一例を示す。

まず、撮像装置１１から逐次入力される標準画像（入力画像）２１と、予め用意した検出すべき対象物体が映っていない画像（基準背景画像）２２との２枚の画像を入力する差分器３１により、画素毎の輝度値の差分を計算して、差分画像２３を取得する。次に、差分画像２３を入力する二値化器２４により、当該差分画像２３の各画素を所定の閾値ｔｈで閾値処理し、値（差分値）が当該閾値ｔｈ未満である画素の輝度値を“０”値とし、値（差分値）が当該閾値ｔｈ以上である画素の輝度値を“２５５”として、二値化画像２４を取得する。なお、当該閾値ｔｈは、例えば実験的に決定され、一例として、ｔｈ＝２０が設定される。また、本例では、１画素の輝度値を８ビットで計算しており、１画素が“０”から“２５５”までの値を有する。図２の例では、二値化画像２４において、入力画像２１に映った人型の物体４１が、差分器３１によって差分が生じた領域４２（入力画像２１の輝度の変化領域）として計算され、二値化器３２によって輝度値“２５５”の画像部４３として検出される。

図３を参照して、差分法を応用した監視方式により行われる処理の手順の一例を示す。
まず、差分法による監視方式の処理を実行するための初期化処理として、外部機器や、変数や、画像メモリ等の初期化を行う（ステップＳ１）。次に、入力画像変化検出部１５では、撮像装置１１から標準画像を入力し（ステップＳ２）、当該入力画像２１と予め作成しておいた基準背景画像２２との各画素毎の輝度値の差分を計算して差分画像２３を取得し（ステップＳ３）、当該差分画像２３の画素値（差分値）が所定の閾値ｔｈ未満である画素の輝度値を“０”として当該閾値ｔｈ以上である画素の輝度値を“２５５”として二値化画像２４を取得する（ステップＳ４）。次に、入力画像変化検出部１５では、取得した二値化画像２４の中で輝度値が“２５５”となる画素のかたまり（変化領域となる画像部４３）を検出して、各々に番号を付けて（ラベリングして）区別できるようにする（ステップＳ５）。次に、入力画像変化検出部１５では、番号付けした変化領域のそれぞれに対して、大きさや、面積や、速度や、検出位置等に関する所定の検出条件に基づいてそれぞれの変化領域が当該検出条件に合致するか否かを判定し（ステップＳ６）、検出条件に合致する場合には検出すべき物体が存在するとみなし、検出条件に合致しない場合には検出すべき物体が存在しないとみなす。そして、検出すべき物体が存在するとみなされた場合には、入力画像変化検出部１５或いは他の処理部によって、警報や検出情報の表示などが行われ、例えば、検出すべき物体が存在することを、監視モニタや、警告灯や、警告ブザー等の１つ以上を用いて、視覚や、聴覚や、嗅覚や、触覚や、味覚等の刺激として監視員に伝えることが行われる（ステップＳ７）。その後や、或いは、検出すべき物体が存在しないとみなされた場合には、画像入力処理以降の処理が繰り返して行われる（ステップＳ２〜ステップＳ７）。

本例では、入力画像変化検出部１５は、差分法などによって検出すべき物体が存在すると判定した場合に、それを不審者などの異常として検出する。
また、入力画像変化検出部１５は、異常を検出した場合には、撮像装置制御部１７に対して高精細画像を取得するためのリクエスト信号を送信（出力）し、また、検出した不審者などの異常によって入力画像変化が存在することを監視端末装置２へ報知するために、不審者などの入力画像の変化が存在する位置の情報や、検出した時刻の情報や、検出に係る番号の情報などと共に入力画像変化の検出結果を通信部１６に対して送信（出力）し、また、高精細画像符号化部１４に対して検出した不審者などの異常による入力画像変化が存在する画像範囲を特定する情報を送信（出力）する。

ここで、不審者などの異常による入力画像変化が存在する画像範囲は、例えば、図２に示される二値化画像２４中の変化領域となる画像部４３に基づいて算出される。具体的には、まず、当該変化領域となる画像部４３に対して当該変化領域の外接矩形４４を算出し、次に、当該外接矩形４４の上下左右を所定の画素数広げた画像範囲４５を取得して、当該画像範囲４５を不審者などの異常による入力画像変化が存在する画像範囲とする。

また、上下左右に広げる当該所定の画素数としては、例えば３０画素などが用いられる。このように外接矩形４４に対して所定の画素数広げる理由は、不審者などの異常によって入力画像変化が存在するところの画像だけではなくその周りの画像も含めることによって、不審者などの異常によって入力画像変化がどの部分で検出されたのかや、より広く見るとどのような状態であるのかを視覚的に理解し易くするためである。

なお、本例では、差分法による処理の検出結果に基づいて不審者などの異常によって入力画像変化が存在する範囲を決定する構成を示したが、他の種々な構成が用いられてもよい。

一例として、監視対象領域に設置した、磁気センサや、赤外線センサや、圧力センサや、熱センサや、振動センサ等の外部センサからの入力に基づいて、画像上における当該外部センサによる検知範囲を特定して、当該検知範囲を不審者などの異常が存在する範囲として決定するようなことができる。この場合、入力画像変化検出部１５は、外部センサからの入力に基づいて、異常を検出した場合には、撮像装置制御部１７に対して高精細画像を取得するためのリクエスト信号を送信（出力）することや、検出した不審者などの異常が存在することを監視端末装置２へ報知するために不審者などの異常が存在する位置の情報や、検出した時刻の情報や、検出に係る番号の情報などと共に異常の検出結果を通信部１６に対して送信（出力）することや、高精細画像符号化部１４に対して検出した不審者などの異常が存在する画像範囲を特定する情報を送信（出力）することを行う。

高精細画像符号化部１４は、撮像装置１１から映像切替部１２を介して入力された高精細画像の画像信号を、所定の静止画像符号化方式によって符号化し、当該符号化したデータを通信部１６へ出力する。ここで、静止画像符号化方式としては、種々な方式が用いられてもよく、例えば、JPEGや、JPEG2000などを用いることができる。

また、高精細画像符号化部１４は、例えば、入力される高精細画像から不審者などの異常が存在する画像範囲の部分画像を切り出して、当該部分画像のみを符号化して通信部１６へ出力することも可能である。ここで、当該画像範囲としては、本例では、入力画像変化検出部１５から通知される画像範囲が用いられる。また、不審者などの異常が存在する複数の画像範囲が入力画像変化検出部１５により検出されて通知された場合には、高精細画像符号化部１４は、これら複数の画像範囲のそれぞれに対応する複数の部分画像を切り出して、これら複数の部分画像を符号化して通信部１６へ出力することも可能である。

また、高精細画像符号化部１４は、入力画像変化検出部１５から入力される入力画像変化の検出結果の情報を符号化したデータのヘッダ領域に記録して通信部１６へ出力する。
ここで、符号化方式としてJPEGを用いる場合には、当該ヘッダ領域に記録する情報としては、JPEGのヘッダ領域の記録規格であるExifに則ったものを用いることができる。また、符号化方式としてJPEG2000を用いる場合には、例えば、JPEG2000のROI（Region Of Interest）機能によって、不審者などの異常が存在する可能性のある入力画像の変化を起こしている範囲を低圧縮率で圧縮するとともにそれ以外の範囲を高圧縮率で圧縮することにより、高精細画像のデータ量を効率良く少なくすることができる。

また、検出された入力画像の変化領域の大きさに基づいて符号化の際の圧縮率を変化させるような構成とすることもでき、この場合、例えば、変化領域が大きい場合には圧縮率を高くし、変化領域が小さい場合には圧縮率を低くする。変化領域が大きい場合には変化領域全体を見るために細部の情報は要らないことが多く、変化領域が小さい場合には変化領域の細部を見るために細部の情報が必要になることが多いと考えられる。

通信部１６は、アクセスライン４を介してネットワーク３と接続されており、これら及びアクセスライン５を介して監視端末装置２と通信することができる。
通信部１６は、標準画像符号化部１３から出力される動画像符号化データや、高精細画像符号化部１４から出力される静止画像符号化データや、入力画像変化検出部１５から出力される不審者などの異常による入力画像変化の検出結果に関する情報（検出結果データ）を入力し、これらのデータを監視端末装置２に宛ててアクセスライン４を介してネットワーク３へ送信出力する。

また、本例では、監視端末装置２から、高精細画像を取得するためのリクエスト信号が、監視装置１に宛ててアクセスライン５を介してネットワーク３へ送信出力される。
通信部１６は、当該リクエスト信号をネットワーク３からアクセスライン４を介して受信入力し、当該受信入力したリクエスト信号を撮像装置制御部１７へ送信（出力）する。

撮像装置制御部１７は、高精細画像を取得するためのリクエスト信号が入力画像変化検出部１５から入力された場合や或いは監視端末装置２から通信部１６を介して入力された場合には、撮像装置１１を制御信号により制御して高精細画像を撮像する高精細画像モードに設定するとともに、映像切替部１２を制御信号により制御して高精細画像符号化部１４側へ切り替える。これにより、入力画像変化検出部１５において入力画像中に不審者などの異常による入力画像変化を検出した場合や、監視端末装置２から高精細画像を取得するためのリクエスト信号を受けた場合に、撮像装置１１で高精細画像を撮像してその画像を高精細画像符号化部１４へ入力することができる。

また、撮像装置制御部１７は、他の場合には、撮像装置１１を制御信号により制御して標準画像を撮像する標準画像モードに設定するとともに、映像切替部１２を制御信号により制御して標準画像符号化部１３及び入力画像変化検出部１５側へ切り替える。

次に、クライアント端末側となる監視端末装置２において行われる処理の例を示す。
監視端末装置２は、例えば、パーソナルコンピュータ（PC）などを用いて構成されており、監視装置１の撮像装置１１により撮像されて送信されてきた入力画像を表示する処理や、当該監視端末装置２を操作する監視員（オペレータ）により行われる操作に対応した処理などを行う。

図４には、監視端末装置２が有する操作画面５１の表示の一例を示してある。
本例の操作画面５１は、標準画像表示部６１と、高精細画像表示部６２と、１つ以上の（本例では、３つの）高精細画像拡大表示部６３、６４、６５と、シャッタボタン７１と、拡大表示選択ボタン７２、７３、７４と、上下左右に対応した４つの拡大表示位置移動ボタン７５、７６、７７、７８を有している。各種のボタン７１〜７８などは、監視員により操作されることが可能である。

標準画像表示部６１には、監視装置１からネットワーク３を介して得られた標準画像の符号化データを再生（復号化）した画像を表示する。本例では、標準画像表示部６１には、標準画像の動画像が表示される。

高精細画像表示部６２には、監視装置１からネットワーク３を介して得られた高精細画像の符号化データを再生（復号化）した画像を、例えば画像の画素を間引くなどして縮小して、表示する。本例では、高精細画像表示部６２には、高精細画像の静止画像が縮小されて表示される。

なお、本例では、監視装置１から監視端末装置２へ送信される標準画像の撮像領域と高精細画像の撮像領域とは同一としてあり、監視端末装置２の操作画面５１の標準画像表示部６１に表示される標準画像の対象領域と高精細画像表示部６２に表示される高精細画像の対象領域とは同一となっている。

高精細画像拡大表示部６３〜６５のそれぞれには、監視装置１からネットワーク３を介して得られた高精細画像の符号化データを再生（復号化）した画像の部分画像を拡大して表示する。

ここで、高精細画像拡大表示部６３〜６５に拡大して表示する部分画像の画像中における位置は、例えば、PCのマウスやジョイスティックなどのポインティングデバイスを用いて高精細画像表示部６２上の位置を指定することにより、指定することが可能であり、指定された位置に対応する高精細画像の部分画像を高精細画像拡大表示部６３〜６５に表示する。図４の例では、高精細画像表示部６２上に３つの表示枠８２、８３、８４が表示されており、それぞれの表示枠８２、８３、８４の内側の位置の部分画像がそれぞれの高精細画像拡大表示部６３、６４、６５に表示されている。

本例では、高精細画像表示部６２には高精細画像を縮小して表示しているが、高精細画像は元々の画素の密度が標準画像と比べて高いため、例えば、高精細画像拡大表示部６３〜６５に表示しても標準画像よりも精細な画像を表示することが可能である。

また、本例では、複数の高精細画像拡大表示部６３、６４、６５が設けられており、それぞれの高精細画像拡大表示部６３、６４、６５に対応して同数の拡大表示選択ボタン７２、７３、７４が設けられている。そして、いずれかの拡大表示選択ボタン７２、７３、７４を操作して表示する高精細画像拡大表示部６３、６４、６５を選択した後に、そこに拡大表示する高精細画像の位置を指定するようにする。

また、本例では、拡大表示する高精細画像の位置（それぞれの表示枠８２、８３、８４の位置）は、拡大表示位置移動ボタン７５〜７８を操作することにより、上下左右の方向で微調整することが可能である。

シャッタボタン７１は、監視装置１に対して高精細画像を取得するためのリクエスト信号を送信するためのボタンである。本例では、任意の時間（タイミング）にシャッタボタン７１を押すと、高精細画像を取得するためのリクエスト信号が監視端末装置２から監視装置１へ送信され、これにより、高精細画像を取得する処理（マニュアル撮像の処理）を行うことができる。

また、本例では、監視装置１の入力画像変化検出部１５が不審者などの異常による入力画像変化を検出した場合には、監視装置１からネットワーク３を介して伝送された入力画像変化の検出結果に関する情報が監視端末装置２により受信されたことに応じて、入力画像変化の発生を報知するためのメッセージ（報知メッセージ）８１を標準画像表示部６１に表示する。このような報知メッセージ８１が表示される場合には、例えば入力画像変化が検出されたときなどにおける高精細画像を取得する処理（自動撮像の処理）を行うことができる。

次に、図５を参照して、マニュアル撮像時において監視装置１や監視端末装置２により行われる動作の例を示す。
図５には、時刻ｔ０から時刻（ｔ０＋４）までの間において、監視装置１や監視端末装置２により行われる動作の一例を、概念的に、時間を追って示してある。

まず、時刻ｔ０では、監視装置１は標準画像を撮像しており、撮像された標準画像が動画像符号化されて得られる画像データが伝送信号９１によりネットワーク３を介して監視端末装置２に伝送され、監視端末装置２において当該標準画像の画像１０１が操作画面５１の標準画像表示部６１に表示される。

同様に、時刻（ｔ０＋１）においても、監視装置１は標準画像を撮像しており、撮像された標準画像が動画像符号化されて得られる画像データが伝送信号９２によりネットワーク３を介して監視端末装置２に伝送され、監視端末装置２において当該標準画像の画像１０２が操作画面５１の標準画像表示部６１に表示される。

次に、時刻（ｔ０＋２）においても、同様に、監視装置１は標準画像を撮像しており、撮像された標準画像が動画像符号化されて得られる画像データが伝送信号９３によりネットワーク３を介して監視端末装置２に伝送され、監視端末装置２において当該標準画像の画像１０３が操作画面５１の標準画像表示部６１に表示される。

この時、監視対象領域内には不審者が存在し、監視員が不審者を拡大表示するために操作画面５１のシャッタボタン７１を押下したとすると、高精細画像を取得するためのリクエスト信号が伝送信号９４として監視端末装置２からネットワーク３を介して監視装置１へ伝送される。この場合、監視装置１では、当該リクエスト信号が通信部１６を介して撮像装置制御部１７に到達し、これに応じて高精細画像モードが設定されて、撮像装置１１により高精細画像が撮像されるとともに、映像切替部１２により撮像装置１１で撮像された高精細画像が高精細画像符号化部１４へ入力される状態とされ、そして、高精細画像符号化部１４により入力された高精細画像が静止画像符号化されて、当該符号化された画像データが通信部１６を介してネットワーク３へ送信出力される。

時刻（ｔ０＋３）では、上記のようにしてリクエスト信号に応じて監視装置１から送信出力された高精細画像の符号化データがネットワーク３を介して伝送信号９５により操作端末装置２で受信され、操作端末装置２において当該受信された高精細画像の画像１０４が操作画面５１の高精細画像表示部６２に表示される。このようにして得られた高精細画像については、例えばPCのジョイスティックやマウスなどといったポインティングデバイスを用いることにより、任意の位置を高精細画像拡大表示部６３〜６５に自由に拡大表示させることができる。そして、次の時刻（ｔ０＋４）では、再び標準画像を監視するモードへ移行して、監視装置１は標準画像を撮像し、撮像された標準画像が動画像符号化されて得られる画像データが伝送信号９６によりネットワーク３を介して監視端末装置２に伝送され、監視端末装置２において当該標準画像の画像１０５が操作画面５１の標準画像表示部６１に表示される。

なお、本例では、監視装置１は、マニュアル撮像のためのリクエスト信号を監視端末装置２から受信した場合には、撮像装置制御部１７による制御により、高精細画像モードへ移行して撮像装置１１により１フレーム分の高精細画像を撮像すると、再び標準画像モードへ移行して撮像装置１１により標準画像を撮像する状態へ戻る。

このように、本例では、図５に示される操作画面５１のように、精細度が異なる画像を用いて、監視対象領域の全体を標準画像により常に動画で表示しつつ、異常による入力画像変化が発生などした特定の１つ又は複数の箇所を高精細画像により部分的に拡大して静止画で表示することができ、これらを同一の画面に同時に表示することが可能である。

具体的には、操作画面５１では、標準画像表示部６１により監視対象領域の全体の動画像をリアルタイムで常に表示すると同時に、高精細画像表示部６２により監視対象領域の全体の或る時点における高精細静止画像を間引いて表示し、更に、当該高精細静止画像中における１つ又は複数の箇所の部分画像を電子的に拡大して高精細拡大表示部６３〜６５により表示する。本例では、標準画像表示部６１の標準画像により監視対象領域の全体がリアルタイムで常に表示されているため、異常の見逃しを防止することができ、また、拡大表示においては高精細画像を使用しているため拡大しても画像がはっきりと見える。

ここで、本例の高精細画像拡大表示部６３による拡大表示では、例えば、従来のようにカメラのズームレンズや雲台といった機器の制御を伴わず、更に、監視対象領域全体の画像が標準画像表示部６１に表示されるため、従来のようにカメラのズームレンズや雲台を操作して不審者などの異常を監視する場合に生じる死角の問題を解消することができる。また、高精細画像の部分画像を電子的に切り出して拡大表示するため、複数の部分画像を切り出すことにより、複数の場所を同時に拡大表示することも可能である。

ここで、本例の監視装置１において、通信部１６は、標準画像符号化部１３及び高精細画像符号化部１４のいずれかから出力される符号化された画像を受信し、アクセス回線４に出力する。このとき、高精細画像はデータ量が大きいため、通信部１６が高精細画像の送信を完了する前に、次の画像を標準画像符号化部１３及び高精細画像符号化部１４から受信する。従って、何ら特別な制御を行わない場合、通信部１６は、高精細画像の伝送が完了するまでは次の画像を送信できなくなる。高精細画像として、例えば横２５６０画素×高さ１９２０画素の画像（１画素２４ビットで構成される）を用い、符号化による圧縮率が１／１０であるとすると、高精細画像のデータ量は約１．５Ｍバイトになる（高精細画像は静止画像であるため、画像１フレーム当たりのバイト数でそのデータ量を表現する）。このときアクセス回線４に割り当てられている伝送容量が１．０Ｍｂｐｓ（bit per second）であるとすると、高精細画像の画像データ伝送時間は、１２秒になる。つまり、１２秒間は、監視端末装置２で画像が見られなくなってしまう。ここで、本例の通信部１６では、標準画像に優先順位１を、高精細画像に優先順位２の優先度を割り当てる。通信部１６は、優先度に基づき優先順位が小さい方を優先的にアクセス回線４に送信する。具体的には、標準画像のデータ量が８００ｋｂｐｓであったとすると（標準画像は動画像であるため、１秒当たりの平均ビット数でそのデータ量を表現する）、アクセス回線４に割り当てられている伝送容量１．０Ｍｂｐｓに対し、その８００ｋｂｐｓ分を標準画像送信に使用し、残りの２００ｋｂｐｓ分を高精細画像の送信に使用する。このようにすることで、標準画像のリアルタイム性を損なわずに、高精細画像の送信が行える。

さらに、本例の撮像装置１において、画質調整部１８は、送信する画像の画質を調整する。また、画像分割手段１９は、画像を複数の部分画像に分割する。上記の例では、高精細画像の送信に２００ｋｂｐｓを割り当てており、この場合、高精細画像伝送に６０秒かかる。ここで、画質調整部１８において、画素の間引き等により、標準画像の画像サイズの横幅、高さを半分にすると、標準画像の送信は約２００ｋｂｐｓの伝送路容量ですみ、残りの８００ｋｂｐｓを高精細画像の送信に割り当てることができる。従って、高精細画像の送信時間は、１５秒に短縮できる。このようにすることで、高精細画像送信中の１５秒間は標準画像の画質は低くなるものの、標準画像のリアルタイム性は損なわずに、高精細画像の送信が行える。

なお、上記例では、画質の調整を画像調整部１８が、標準画像の画像サイズを調整することによって画像のデータ量を削減している（画質を落としている）が、同様に画像の画像調整部１８によって圧縮率、フレームレート、解像度、画像分割部１９によって画像の分割、の少なくとも１つを調整することで、同様に画像のデータ量を削減すること（画質を落とすこと）が可能となる。どの項目を調整するかは、監視システムの使用用途によるが、例えば、図４で表示される前期監視端末装置２の画像表示部５１の例では、画像調整部１８が、監視対象となる領域の動きを監視できるようにするため標準画像の圧縮率を下げ（画像６１として表示）、画像調整部１８が、監視対象となる領域全体を監視するため高精細画像の解像度を下げ（画像６２として表示）、画像分割部１９が、監視対象となる領域の詳細を監視するため高精細画像を部分画像に分割する（画像６３〜６５として表示）。このようにすることで、標準画像のリアルタイム性を損なわず、効率のよい画像伝送が行える。

ここで、画像分割部１９によって画像を分割した場合、分割した各画像について、監視端末装置２で表示される順番に従って高い優先順位を付けることができる。表示される順番とは、例えば、画像を縦３ブロック、横３ブロックに分割した場合、中央の分割された画像を一番早く表示するようにするため、中央の画像に高い送信順位を付け、中央から離れるに従って低い送信順位を付けるようにすれば良い。

また、監視端末装置２では、監視装置１から受信される高精細画像の符号化データのヘッダ領域に記録された入力画像変化の検出結果に関する情報を用いて、例えば、操作画面５１の高精細画像表示部６２上の表示枠８２、８３、８４の初期位置として、入力画像変化が検出された１つ以上の画像範囲を用いることができる。この場合、初期的には、入力画像変化の検出結果に基づいて部分拡大画像が高精細画像拡大表示部６３〜６５に表示され、その後は、ユーザである監視員が拡大表示選択ボタン７２〜７４や拡大表示位置移動ボタン７５〜７８を操作して、部分的に拡大する画像範囲を任意の好みの場所に変えることができる。

また、本例では、ネットワーク３を介して監視装置１で撮像した画像のデータを監視端末装置２へ送信する構成を示したが、他の構成例として、USBや、IEEE1394などのシリアル通信機能を用いて構成することも可能であり、同様な効果を得ることができる。

また、本例では、カメラ側である監視装置１に入力画像変化検出部１５を備えた構成を示したが、例えば、クライアント側である監視端末装置２に入力画像変化検出部の機能を備える構成や、監視装置１と監視端末装置２との両方に入力画像変化検出部の機能を備える構成とすることも可能である。監視端末装置２に入力画像変化検出部の機能が備えられる場合には、例えば、監視端末装置２の入力画像変化検出部の機能により発せられるリクエスト信号をネットワーク３を介して監視装置１へ送信することができる。

また、一構成例として、監視装置１の入力画像変化検出部１５による検出結果に基づいて不審者などの異常による入力画像変化が存在しない領域の画像データ量を削減して送信することが可能であり、この構成では、例えば、不審者などの異常による入力画像変化が検出されたときに、当該入力画像変化を詳細に監視するために、通常時に送信される標準画像と比べて精細度、画質、画素数、１画素当たりの階調数、圧縮率、符号化方式などの１つ以上の特性が優れている画質の良い画像を送信する場合においても、画像のデータ量を小さくすることができ、画像のデータ量が標準画像と比べて大きくなってしまうことなどを回避することができる。

具体的には、本例では、精細度が異なる２種類の画像（標準画像と高精細画像）を切り替えて監視を行ったが、例えば、このような切替を行わずに、不審者などの異常による入力画像変化が検出されていない場合には撮像装置１１により撮像された画像を高圧縮率で符号化して送信する一方、不審者などの異常による入力画像変化が検出されている場合には撮像装置１１により撮像された画像を低圧縮率で符号化して送信するように、入力画像変化の検出結果に応じて圧縮率を２段階以上で変更して符号化を行うことも可能である。また、圧縮率以外についても、例えば、画像の１画素当たりの階調数を２段階以上で変更して符号化を行うような構成としても、同様な効果を得ることができる。

また、例えば、入力画像変化の検出結果に関する情報に基づいて、特定部分のみの高精細な部分画像を送信することや、特定部分のみが低圧縮率で符号化された高精細な全体画像を送信するようなことが可能である。

一例として、画像認識や外部センサによる検出結果を用いて、撮影領域のうちの特定の部分のみを切り出した高精細な部分画像を監視装置１から監視端末装置２へ送信することが可能である。他の例として、画像認識や外部センサによる検出結果を用いて、撮影領域のうちの特定の部分のみを低圧縮率で符号化して、他の領域部分を高圧縮率で符号化した全体画像を監視装置１から監視端末装置２へ送信することが可能である。これらの構成では、監視装置１から監視端末装置２へ伝送する高精細な画像のデータ量を小さくすることができる。

また、不審者などの異常による入力画像変化が存在する場合に、画質の良い高精細画像と、それに比べて画質の劣る標準画像とを同時に送信するような構成とすることも可能である。

本例では、映像切換部１２により撮像装置１１が画像を撮像する段階で標準画像を撮像するか或いは高精細画像を撮像するかが決められる構成を示したが、他の構成例として、撮像装置１１は常に高精細画像を撮像して、当該高精細画像の信号が標準画像符号化部１３及び高精細画像符号化部１４の両方に供給され、標準画像符号化部１３は入力される高精細画像の品質（精細度）をダウンコンバートして標準品質の動画像を生成するような構成とすることも可能である。このような構成では、例えば、図５に示される時刻（ｔ０＋３）を含む任意の時刻において、撮像画像を静止画及び動画の両方で同時に出力することが可能である。

一構成例として、監視対象領域を撮像する撮像装置１１と、監視対象領域内で異常による入力画像変化が発生した注目領域を検出する入力画像変化検出部１５と、入力画像変化検出部１５による検出結果に基づいて撮像装置１１で得られた少なくとも２種類の画質の画像のうちの１つ以上の画像を処理する画像処理機能（本例では、標準画像符号化部１３や高精細画像符号化部１４）を用いて、入力画像変化検出部１５による検出結果に基づいて撮像した画像の注目領域以外の画像部分のデータ量を低減させることができる。

以上のように、本例の監視システムにおける監視装置１では、監視対象領域を撮像する撮像装置１１と、監視対象領域内の異常による入力画像変化に係る注目領域を検出する入力画像変化検出部１５と、当該入力画像変化検出部１５による検出結果に基づいて撮像装置１１で得られた少なくとも２種類の画質の画像のうちの１つ以上の画像を処理する画像処理部（本例では、標準画像符号化部１３や高精細画像符号化部１４）と、当該画像処理部によって処理された画像を出力する画像出力部（本例では、通信部１６）を設け、監視対象領域内における不審者などの異常による入力画像変化を検出して、当該異常を監視することができる。

また、本例の監視装置１では、入力画像変化検出部１５は、撮像装置１１で得られた少なくとも２種類の画質の画像のうちの少なくとも１つに基づいて監視対象領域内の注目領域を検出する。

また、例えば、監視対象領域内における所定の変化の有無を検出するセンサを設けて、入力画像変化検出部１５が当該センサによる検出結果に基づいて監視対象領域内の注目領域を検出する構成とすることもできる。

また、例えば、画像処理部（例えば、高精細画像符号化部１４）では、入力画像変化検出部１５による検出結果に基づいて、処理する画像の範囲を決定することにより、符号化した画像のデータ量を低減させることが可能である。

また、例えば、画像処理部（例えば、高精細画像符号化部１４）では、入力画像変化検出部１５による検出結果に基づいて、処理する画像の精細度、画質、画素数、１画素当たりの階調数、圧縮率、符号化方式などの少なくとも１つを決定することにより、符号化した画像のデータ量を低減させることが可能である。

また、本例の監視システムにおける監視端末装置２では、監視員（オペレータ）による操作の内容を入力して当該操作に応じて監視装置１から入力した画像を表示する表示部（本例では、操作画面５１）を設け、監視員の操作に基づいて、監視装置１から入力した画像やその部分画像などを表示部に表示することにより、例えばカメラのズームレンズや雲台を操作しなくとも、監視対象領域内における不審者などの異常を監視することができる。

例えば、本例の監視端末装置２では、少なくとも１つの画像を表示する表示部を設けてあり、監視員の操作に基づいて、監視装置１から入力した少なくとも１つの画像の部分画像などを表示部により表示する。

また、例えば、本例の監視端末装置２では、少なくとも１つの画像を表示する表示部を設けてあり、監視員の操作に基づいて、監視装置１から入力した画像の少なくとも１つの部分画像を表示部により表示する。

従って、本例の監視システムでは、監視装置１で検出された入力画像変化に応じて撮像装置１１を制御することにより、適切な画像を取得することができる。また、本例の監視システムでは、例えば高画質な画像によってカメラのズームレンズや雲台を操作しなくとも、不審者などの異常による入力画像変化に係る監視対象物体の拡大表示を行うことができ、また、高画質な画像を選択的に遠隔地へ伝送することができ、不審者などの異常の見逃しが少ないシステムや、伝送するデータ量の増加を抑制するシステムを実現することができる。

なお、本例の監視装置１では、撮像装置１１の機能により画像撮像手段が構成されており、通信部１６の機能によりリクエスト信号受信手段が構成されており、標準画像符号化部１３の機能や通信部１６の機能や映像切替部１２の機能や撮像装置制御部１７の機能により第１の画像送信手段が構成されており、高精細画像符号化部１４の機能や通信部１６の機能や映像切替部１２の機能や撮像装置制御部１７の機能により第２の画像送信手段が構成されており、入力画像変化検出部１５の機能により入力画像変化検出手段が構成されている。

また、本例の監視端末装置２では、監視装置１からの画像を受信する機能により画像受信手段が構成されており、図４に示されるような操作画面５１に画像を表示する機能により画像表示手段が構成されており、シャッタボタン７１の機能によりリクエスト信号送信指示受付手段が構成されており、リクエスト信号を送信する機能によりリクエスト信号送信手段が構成されており、図４に示されるような操作画面５１における拡大表示選択ボタン７２〜７４の機能や拡大表示位置移動ボタン７５〜７８の機能により拡大表示画像部分特定指示受付手段が構成されている。

また、本例の監視端末装置２により表示される操作画面５１では、標準画像表示部６１により第１の画質の画像を表示する領域が構成されており、高精細画像表示部６２により第２の画質の画像を表示する領域が構成されており、高精細画像拡大表示部６３〜６５により第２の画質の画像中の画像部分を拡大して表示する領域が構成されている。

また、本例の監視システムでは、標準画像により比較的に低画質な第１の画質の画像が構成されており、高精細画像により比較的に高画質な第２の画質の画像が構成されている。

本発明の第２実施例を説明する。
図６には、本例の監視システムの構成例を示してある。
本例の監視システムは、監視装置１１１と、監視端末装置１１２と、ネットワーク１１３と、監視装置１１１とネットワーク１１３とを接続する回線（アクセスライン）１１４と、監視端末装置１１２とネットワーク１１３とを接続する回線（アクセスライン）１１５を有している。

監視装置１１１は、ハードウエアの構成例として、テレビジョンカメラなどから構成された撮像装置１２１と、切替スイッチなどから構成された映像切替部１２２と、標準画像符号化部１２３と、高精細画像符号化部１２４と、入力画像変化検出部１２５と、通信部１２６と、撮像装置制御部１２７と、画像記録部１２８と、読み出し制御部１２９と、画質調整部１６０と、画像分割部１６１を備えている。

ここで、本例の監視システムは、例えば、図１に示される構成において、監視装置１１１に更に画像記録部１２８及び読み出し制御部１２９を備えた構成となっている。監視装置１１１に備えられた他の処理部１２１〜１２７、１６０、１６１の構成や動作については、図１に示される監視装置１に備えられた対応する処理部１１〜１９の構成や動作と概略的には同様である。

本例の監視装置１１１により行われる動作の一例を示す。なお、図１に示される監視装置１により行われるのと同様な動作については説明を省略する。
本例では、高精細画像符号化部１２４は高精細画像を符号化したデータを画像記録部１２８へ出力し、通信部１２６は画像記録部１２８から符号化データを入力する。また、本例では、通信部１２６は、監視端末装置１１２からネットワーク１１３を介して受信されるリクエスト信号を読み出し制御部１２９へ出力する。

画像記録部１２８は、例えばメモリから構成されており、高精細画像符号化部１２４によって符号化された高精細画像のデータを入力して記録する。これに際して、画像記録部１２８は、当該画像のデータと対応付けて、入力画像変化検出部１２５により得られた入力画像変化の検出時刻を含む入力画像変化の検出結果に関する情報を合わせて記録する。

読み出し制御部１２９は、監視端末装置１１２からネットワーク１１３を介して得られるリクエスト信号を通信部１２６から入力し、当該リクエスト信号に基づいて画像記録部１２８を制御して、当該画像記録部１２８に記録された高精細画像の符号化データを読み出して通信部１２６へ出力する。当該高精細画像の符号化データは、通信部１２６によりネットワーク１１３を介して監視端末装置１１２へ送信される。

次に、図７を参照して、自動撮像時において監視装置１１１や監視端末装置１１２により行われる動作の例を示す。なお、本例の監視端末装置１１２は、図４に示されるのと同様な操作画面５１を用いて画像を表示する。

図７には、時刻ｔ１から時刻（ｔ１＋４）までの間において、監視装置１１１や監視端末装置１１２により行われる動作の一例を、概念的に、時間を追って示してある。また、各時刻ｔ１、（ｔ１＋１）、（ｔ１＋２）、（ｔ１＋３）、（ｔ１＋４）における画像１３１、１３２、１３３、１３４、１３５は、それぞれの時刻において監視装置１１１の撮像装置１２１に入力されるものであり、それぞれの時刻における監視対象領域の様子を映したものである。

なお、図７には、複数の撮像装置１２１や、複数の標準画像符号化部１２３や、高精細画像符号化部１２４や、複数の入力画像変化検出部１２５や、画像記録部１２８を示してあり、これらは本例の監視装置１１１に備えられた処理部を表している。

まず、時刻ｔ１では、撮像装置１２１は標準画像モードで画像１３１を撮像し、撮像された画像は標準画像符号化部１２３及び入力画像変化検出部１２５に入力される。標準画像符号化部１２３は入力された画像を符号化し、符号化された画像は通信部１２６及びネットワーク１１３を介して監視端末装置１１２へ送信され、当該画像は監視端末装置１１２の標準画像表示部６１に画像１４１のように表示される。また、入力画像変化検出部１２５では、差分法などの手法によって監視対象領域内における不審者などの異常による入力画像変化の検出を行う。ここでは、画像１４１中には不審者などの異常による入力画像変化が存在しないため、入力画像変化検出部１２５では不審者などの異常による入力画像変化は検出されない。

次に、時刻（ｔ１＋１）では、撮像装置１２１は標準画像モードで画像１３２を撮像し、撮像された画像は標準画像符号化部１２３及び入力画像変化検出部１２５に入力される。標準画像符号化部１２３は入力された画像を符号化し、符号化された画像は通信部１２６及びネットワーク１１３を介して監視端末装置１１２へ送信され、当該画像は監視端末装置１１２の標準画像表示部６１に画像１４２のように表示される。また、当該画像１４２には不審者が映っているため、入力画像変化検出部１２５では、監視対象領域内に不審者が存在することを異常による入力画像変化として検出し、これに応じて、撮像装置制御部１２７を介して撮像装置１２１により高精細画像を取得させるように制御する。また、入力画像変化検出部１２５では、不審者などの異常による入力画像変化の検出位置や検出時刻を含む検出結果に関する情報を高精細画像符号化部１２４へ出力する。また、入力画像変化検出部１２５による入力画像変化の検出結果に関する情報が、通信部１２６やネットワーク１１３を介して、監視端末装置１１２へ伝送信号１５１により伝送される。すると、監視端末装置１１２では、監視装置１１１から入力画像変化の発生を通知する情報を受信したことに応じて、操作画面５１の標準画像表示部６１中に報知メッセージ８１が表示される。

次に、時刻（ｔ１＋２）では、撮像装置１２１は時刻（ｔ１＋１）における入力画像変化検出部１２５による検出結果に応じて高精細画像モードで画像１３３を撮像し、撮像された画像は高精細画像符号化部１２４に入力される。高精細画像符号化部１２４は入力された高精細画像を符号化し、符号化された画像は入力画像変化検出部１２５からの検出結果情報と共に画像記録部１２８に記録される。ここで、画像の符号化としては、例えば、入力画像変化の検出結果に基づいて、高精細画像の部分画像を符号化することが行われてもよく、或いは、JPEG2000のROI機能のように部分的に圧縮率を変化させるような手法による符号化が行われてもよい。また、監視端末装置１１２から高精細画像を取得するリクエスト信号１５２が送信されて監視装置１１１の読み出し制御部１２９に到達すると、当該リクエスト信号に基づいて、画像記録部１２８に記録された高精細画像が読み出し制御部１２９により読み出されて通信部１２６やネットワーク１１３を介して伝送信号１５３により監視端末装置１１２へ送信される。当該高精細画像は、監視端末装置２において、操作画面５１の高精細画像表示部６２に表示される。

ここで、本例では、監視端末装置１１２から送信されるリクエスト信号には時刻を特定する情報（時刻特定情報）が含まれており、この時刻は入力画像変化検出部１２５により不審者などの異常による入力画像変化を検出した時刻に対応するものである。読み出し制御部１２９は、入力されたリクエスト信号に含まれる時刻特定情報と、画像記録部１２８に記録された画像に付された検出時刻を特定する情報とを比較して、リクエスト信号に含まれる時刻情報により特定される時刻と一致する時刻或いは最も近い時刻を検出時刻とする画像を画像記録部１２８から読み出して通信部１２６へ出力する。これにより、画像記録部１２８に複数の高精細画像が記録されている場合においても、リクエスト信号に基づいて、所望の高精細画像を読み出すことができる。

また、本例の監視端末装置１１２では、監視装置１１１から受信した入力画像変化の検出結果に関する情報をメモリに記憶しておき、当該情報に基づいて、過去の入力画像変化の検出時刻を特定する情報を一覧などにより表示することが可能であり、このように表示された入力画像変化の検出時刻の中から監視員は任意の検出時刻を選択して当該検出時刻を特定する情報をリクエスト信号に含めて監視装置１１１へ送信することができる。

また、本例の監視端末装置１１２では、監視員から入力画像変化の検出時刻を特定する情報を受け付けたときや、或いは、このような時刻特定情報とシャッタボタン７１の押下との両方を受け付けたときなどに、受け付けた時刻特定情報を含むリクエスト信号を監視装置１１１に対して送信する。なお、例えば、時刻特定情報が受け付けられずにシャッタボタン７１が押下された場合には、最新の入力画像変化に係る高精細画像を取得するためのリクエスト信号を送信するような構成を用いることも可能である。

次に、時刻（ｔ１＋３）では、撮像装置１２１は標準画像モードで画像１３４を撮像し、撮像された画像は標準画像符号化部１２３及び入力画像変化検出部１２５に入力される。標準画像符号化部１２３は入力された画像を符号化し、符号化された画像は通信部１２６及びネットワーク１１３を介して監視端末装置１１２へ送信され、当該画像は監視端末装置１１２の標準画像表示部６１に画像１４３のように表示される。また、入力画像変化検出部１２５では、差分法などの手法によって監視対象領域内における不審者などの異常による入力画像変化の検出を行う。ここでは、画像１４３中には不審者などの異常による入力画像変化が存在しないため、入力画像変化検出部１２５では不審者などの入力画像変化は検出されない。

同様に、時刻（ｔ１＋４）においても、撮像される画像１３５には不審者などの異常による入力画像変化が存在しないため、符号化された標準画像だけが監視端末装置２へ送信されて、画像１４４のように表示される。

なお、本例では、監視装置１１１は、入力画像変化検出部１２５から出力されるリクエスト信号を撮像装置制御部１２７により受信した場合には、撮像装置制御部１２７による制御により、高精細画像モードへ移行して撮像装置１２１により１フレーム分の高精細画像を撮像すると、再び標準画像モードへ移行して撮像装置１２１により標準画像を撮像する状態へ戻る。

本例では、標準画像としては常に最新の画像が監視装置１１１から監視端末装置１１２へ送信され、高精細画像としてはリクエスト信号に含まれた不審者などの異常による入力画像変化の検出時刻を示す情報に基づいて画像記録部１２８から選択的に読み出されて監視端末装置２により受信することができる。このため、高精細の画像を選択的に遠隔地へ伝送することができ、高精細画像を伝送する際に伝送するデータ量の増加を抑制することが可能となる。

以上のように、本例の監視システムにおける監視装置１１１では、画像符号化機能（本例では、高精細画像符号化部１２４）によって符号化された画像を記録する画像記録部１２８を備えた。

また、本例の監視システムにおける監視端末装置１１２では、監視員（オペレータ）による操作の内容を入力して当該操作に応じて監視装置１１１から入力した画像を表示する表示部（本例では、操作画面５１）を設け、監視員の操作に基づいて、監視装置１１１の画像記録部１２８に記録した画像やその部分画像などを表示部に表示することにより、例えばカメラのズームレンズや雲台を操作しなくとも、監視対象領域内における不審者などの異常を監視することができる。

例えば、本例の監視端末装置１１２では、少なくとも１つの画像を表示する表示部を設けてあり、監視員の操作に基づいて、監視装置１１１の画像記録部１２８に記録した少なくとも１つの画像の部分画像などを表示部により表示する。

また、例えば、本例の監視端末装置１１２では、少なくとも１つの画像を表示する表示部を設け、監視員の操作に基づいて、監視装置１１１の画像記録部１２８に記録した画像の少なくとも１つの部分画像を表示部により表示する。

また、本例では、監視装置１１１の画像記録部１２８は、１つ又は複数の画像を当該画像を特定する所定の情報（本例では、時刻の情報）を付加して記録する。また、監視端末装置１１２は、例えば、監視装置１１１の画像記録部１２８に記録された画像を特定する情報の一覧を表示する一覧表示機能を有しており、監視員の操作に基づいて選択された画像を特定する情報（画像特定情報）を監視装置１１１へ送信する。監視装置１１１では監視端末装置１１２から入力される画像特定情報に対応する画像を画像記録部１２８に記録した画像の中から読み出して監視端末装置１１２へ送信し、当該送信された画像が監視端末装置１１２により受信されて表示部に表示される。

このように、本例では、監視装置１１１は画像処理部（本例では、高精細画像符号化部１２４）によって処理された画像を画像記録部１２８により記録し、監視端末装置１１２は監視員の操作を入力して当該操作に基づいて監視装置１１１の画像記録部１２８に記録した画像やその部分画像などを表示することにより、例えばカメラのズームレンズや雲台を操作しなくとも、監視対象領域内における不審者などの異常を監視することができる。

ここで、本例では、カメラ側である監視装置１１１に入力画像変化検出部１２５を備えた構成を示したが、例えば、クライアント側である監視端末装置１１２に入力画像変化検出部の機能を備える構成や、監視装置１１１と監視端末装置１１２との両方に入力画像変化検出部の機能を備える構成とすることも可能である。監視端末装置１１２に入力画像変化検出部の機能が備えられる場合には、例えば、監視端末装置１１２の入力画像変化検出部の機能により発せられるリクエスト信号をネットワーク１１３を介して監視装置１１１へ送信することができ、一例として、自動撮像時において、クライアント側の監視員がシャッタボタン７１を押すことなどをしなくとも、高精細画像のリクエスト信号を自動的にクライアント側の監視端末装置１１２からカメラ側の監視装置１１１へ送信することができる。

また、本例では、自動撮像時において、クライアント側である監視端末装置１１２の監視員がシャッタボタン７１を押すことなどにより、クライアント側からカメラ側である監視装置１１１へリクエスト信号が送信される。本例では、カメラ側である監視装置１１１において自動撮像の処理が実行されている場合においても、クライアント側からのリクエスト信号が無い限り、カメラ側から自動撮像処理で取得した高精細画像をクライアント側へ送信することはせずに、高精細画像の送信はあくまでクライアント側からのリクエストに基づく。このように、例えば、マニュアル撮像の場合に限らず、自動撮像の場合においても、クライアント側からリクエストがあった時だけ監視装置１１１から高精細画像を送信することにより、伝送するデータ量の増加を抑制することが可能である。なお、自動撮像時において、監視装置１１１から監視端末装置１１２へ高精細画像を自動的に送信するような構成とすることも可能である。

また、本例では、クライアント側である監視端末装置１１２において、入力画像変化が検知された日時などのリストが表示され、当該リストの中から参照を希望する日時などをユーザにより指定することが行われ、この場合に、例えば、図４に示されるような操作画面５１に、マニュアル撮像用のシャッタボタン７１とは別に自動録画画像取得ボタンが用意されて、当該自動録画画像取得ボタンがユーザにより押されると監視装置１１１の画像記録部１２８に記録された画像を取得するための処理が行われるような構成を用いることもできる。

また、例えば、図４に示される操作画面５１において、標準画像表示部６１に入力画像変化が検出されたことを示す報知メッセージ８１が表示されているときにユーザによりシャッタボタン７１が押されると、これにより発せられるリクエスト信号（ここで、リクエスト信号Ａと言う）に応じて、自動撮像による高精細画像を監視装置１１１から取得することができ、この場合、例えば、シャッタボタン７１が押されたときにおける最新の入力画像変化検知日時の画像が監視装置１１１から監視端末装置１１２へ送信される。なお、このような画像取得は、例えば図１に示されるような監視システムにおいても可能であり、一例として、監視装置１では、最新の高精細画像については高精細画像符号化部１４で一時的に記憶していて、監視端末装置２から前記リクエスト信号Ａを受信した場合には、高精細画像符号化部１４内の最新の高精細画像を読み出して監視端末装置２へ配信するような構成を用いることができる。

なお、本例の監視装置１１１では、画像記録部１２８の機能により入力画像変化画像記憶手段が構成されており、通信部１２６の機能や読み出し制御部１２９の機能により第２の画像送信手段が構成されている。

また、本例の監視端末装置１１２では、監視装置１１１から受信した入力画像変化に関する日時を特定する情報を記憶する機能により入力画像変化情報記憶手段が構成されており、このような情報をリスト表示する機能により入力画像変化情報出力手段が構成されている。

ここで、本発明に係る監視システムや監視装置や監視端末装置などの構成としては、必ずしも以上に示したものに限られず、種々な構成が用いられてもよい。また、本発明は、例えば、本発明に係る処理を実行する方法或いは方式や、このような方法や方式を実現するためのプログラムや当該プログラムを記録する記録媒体などとして提供することも可能であり、また、種々な装置やシステムとして提供することも可能である。

また、本発明の適用分野としては、必ずしも以上に示したものに限られず、本発明は、種々な分野に適用することが可能なものである。
また、本発明に係る監視システムや監視装置や監視端末装置などにおいて行われる各種の処理としては、例えばプロセッサやメモリ等を備えたハードウエア資源においてプロセッサがROM（Read Only Memory）に格納された制御プログラムを実行することにより制御される構成が用いられてもよく、また、例えば当該処理を実行するための各機能手段が独立したハードウエア回路として構成されてもよい。

また、本発明は上記の制御プログラムを格納したフロッピー（登録商標）ディスクやCD（Compact Disc）-ROM等のコンピュータにより読み取り可能な記録媒体や当該プログラム（自体）として把握することもでき、当該制御プログラムを当該記録媒体からコンピュータに入力してプロセッサに実行させることにより、本発明に係る処理を遂行させることができる。

本発明の第１実施例に係る監視システムの構成例を示す図である。差分法による処理の手順の一例を説明するための図である。差分法を用いた監視方式による処理の手順の一例を示す図である。監視端末装置の操作画面の表示の一例を示す図である。マニュアル撮像における動作の一例を説明するための図である。本発明の第２実施例に係る監視システムの構成例を示す図である。自動撮像における動作の一例を説明するための図である。

符号の説明

１、１１１‥監視装置、２、１１２‥監視端末装置、３、１１３‥ネットワーク、４、５、１１４、１１５‥アクセスライン、１１、１２１‥撮像装置、１２、１２２‥映像切替部、１３、１２３‥標準画像符号化部、１４、１２４‥高精細画像符号化部、１５、１２５‥入力画像変化検出部、１６、１２６‥通信部、１７、１２７‥撮像装置制御部、１８、１６０‥画質調整部、１９、１６１‥画像分割部、２１〜２４、１０１〜１０５、１３１〜１３５、１４１〜１４４‥画像、３１‥差分器、３２‥二値化器、４１〜４３‥画像部、４４‥外接矩形、４５‥画像範囲、５１‥操作画面、６１‥標準画像表示部、６２‥高精細画像表示部、６３〜６５‥高精細画像拡大表示部、７１‥シャッタボタン、７２〜７４‥拡大表示選択ボタン、７５〜７８‥拡大表示位置移動ボタン、８１‥報知メッセージ、８２〜８４‥表示枠、９１〜９６、１５１〜１５３‥伝送信号、１２８‥画像記録部、１２９‥読み出し制御部

Claims

監視対象となる領域の画像を撮像する監視装置と、前記監視装置により撮像された画像を表示する監視端末装置を有し、前記監視装置が撮像した少なくとも2種類の画像を前記監視端末装置へ送信する監視システムであって、
前記監視装置は、前記監視対象となる領域を第一の画質、及び、第一の画質と異なる第二の画質の少なくとも２種類の画質の画像を撮像する画像撮像手段と、前記画像撮像手段により撮像された第一の画質の画像を前記監視端末装置に対して送信する第一の画像送信手段と、前記画像撮像手段により撮像された第二の画質の画像を前記監視端末装置に対して送信する第二の画像送信手段と、を備え、
前記監視端末装置は、前記監視装置から送信される画像を受信する画像受信手段と、前記画像受信手段により受信された画像を表示する画像表示手段と、
を備えたことを特徴とする監視システム。
請求項１に記載の監視システムにおいて、
前記監視装置は、前記画質の異なる少なくとも２種類の画像に対して優先度を割り当てる優先度割り当て手段と、前記第一の画像送信手段、及び、前記第二の画像送信手段から送信する画像の伝送量を前記優先度に基づいて制御する画像送信制御手段と、
を備えたことを特徴とする監視システム。
請求項２に記載の監視システムにおいて、
前記画像送信制御手段は、送信する画像を部分画像に分割する画像分割手段と、前記画像分割手段によって分割された部分画像のそれぞれに対して送信順位を付加する部分画像送信順位付加手段と、を備え、
前記画像送信制御手段は、前記送信順位に基づいて前記部分画像を前記第一の画像送信手段、及び、前記第二の画像送信手段の少なくとも一方から送信する、
ことを特徴とする監視システム。
請求項３に記載の監視システムにおいて、
前記部分画像送信順位付加手段によって前記部分画像に付加される送信順位は、前記監視端末装置の前記画像表示手段に表示される画像の順番によって決定される、
ことを特徴とする監視システム。
請求項２に記載の監視システムにおいて、
前記画像送信制御手段は、画像の画質を調整する画質調整手段を備え、
前記画質調整手段は、第一の画像送信手段、及び、第二の画像送信手段から送信する画像の少なくとも一方の画像の画質を落とす、
ことを特徴とする監視システム。