JP5155279B2 - 複数監視カメラによる集中監視システムおよび集中監視方法 - Google Patents

Description

本発明は、複数の監視カメラで広域監視をする集中監視システムおよび集中監視方法に関するものである。

複数の監視カメラ映像をセンターの管理室で集中管理する際、複数の監視カメラ映像を一つの画面に配列してモニタリングする。このとき、多数の監視カメラ映像を同時にモニタリングすることは、監視員にとって非常に退屈な作業であり、２５台の監視カメラ映像を同時にモニタリングする場合、２０分も経つとほとんど集中力が無くなると言われている。さらに、監視領域がエスカレータや動く歩道のように、背景が常に動いているシーンをモニタリングする場合、複数画面の全てが常に動いており、監視員はこれを見るだけで疲労が蓄積する。これらのような状況では複数映像中に事故が生じた場合、その事象を見逃す可能性が高くなる。

従来このような異常事象の発見漏れを防ぐために、例えば従来技術として、監視カメラ映像中に異常が発生した際に、表示の大きさや表示時間を変えることで、異常発生を視覚的に見やすくすることが行われている。

特開平１０−１８７２３０号公報 特開昭６２−８６９９０号公報

複数監視カメラによる集中監視システムにおいて、異常事象を検知して強調表示やポップアップ表示をする機能は従来提案されている。背景が静的な状態では、視覚的な負担は大きくないが、エスカレータステップや動く歩道、歩行者天国の雑踏など、背景が動的に変化しているシーンでは、常に動いている複数画面をモニタリングすることになり、視覚的な負担が大きくなる。

また、複数監視カメラによる集中監視システムの異常事象を検知して強調表示やポップアップ表示をする機能において、複数の異常事象が同時に発生した場合に、異常事象の度合いが分からないと、異常事象の強調表示は発生順に行われることになり、後から発生した重大事象の発見が遅れる危険性が考えられる。

また、発生した異常事象が監視カメラ間の境界領域で発生した場合、異常事象が複数の監視カメラ映像中で時間遅れを伴いながら連続的、あるいは断続的に発生することが考えられる。このため、異常事象が発生している監視カメラ映像が集中監視画面上で離れた位置に配置されている場合、視点の移動が増え、監視員の視覚的負担が増える。

本発明の目的は、複数の監視カメラの映像を並べて表示しながら集中監視する監視システムにおいて、監視者の負担を和らげつつ、異常の発生を見落とす可能性を低減できる集中監視システムを提供することである。

本発明は、複数の監視カメラの映像を並べて表示しながら集中監視する監視システムにおいて、複数監視カメラの映像中の人物動作の異常度をカメラ毎に画像処理によって計算し、この異常度が高いほど該当監視カメラからの映像の表示フレームレートを高くするとともに、前記異常度が所定値を超えた監視カメラの映像と、当該監視カメラに空間的に隣接している他の監視カメラまたは当該監視カメラと共通の視野を有する他の監視カメラの映像とを、監視画面上において連繋線で結ぶことを特徴とする。

本発明の望ましい実施態様によれば、複数の監視カメラの映像を並べて表示しながら集中監視する監視システムにおいて、監視者の負担を和らげつつ、異常の発生を見落とす可能性を低減することができる。

本発明の好適な適用例として、例えばエスカレータでの異常事象モニタリングにおいて、定常時におけるステップの動きや人の流れの表示等を止め静止画像表示にするなど、フレームレートを極限まで小さくすることで、監視員のモニタリング負荷を低減する。異常が検知されると画面が動き出すので、監視員にとって、それがトリガとなり、異常事象の発生と、どの監視カメラの映像上に異常が発生したかを即座に認知できる。このため、異常事象の見逃しの確率を大きく低減でき、異常事象に対する対応を素早く行うことができる。すなわち、オンライン監視時の表示フレームレートを、画像処理によって認知した異常度に基づいて可変にすることで、監視員の負荷を低減できる。

また、人物動作の異常度に応じて、監視画面上における複数監視カメラ映像の配置を変更することにより、監視員の視線移動を減らし、モニタリングの負荷をさらに低減できる。これにより、一度に監視できる監視カメラ台数を増やし、監視効率を向上できる。

一度計算した人物異常度は画像検索のためのメタデータとしても、用いることができる。すなわち、異常度が低いシーンは早送りし、異常度が高いシーンはゆっくり再生することで、詳しく異常事象の解析を行うことができる。これにより、詳細解析が必要なシーンの選択を半自動で行うことができ、例えば、大量映像データから犯罪捜査支援につながるシーンを取り出す作業の負荷を大幅に低減できる。この場合、あくまで人間による目視確認により解析を行うことを想定しており、異常度計算に誤りがあり、異常事象であるにも関わらず異常度が低くでてしまった場合においても、人間が確認することで、異常度の計算エラーによる見逃しを低減できる。すなわち、オフライン監視時において、動作異常度に基づいて表示速度を可変にすることで、オフライン監視の効率を上げることができる。

本発明の好適な実施例としての監視カメラ付き保護板を備えたエスカレータ集中監視システムの全体構成図である。 同じく監視カメラ付き保護板を備えるエスカレータ画像監視装置の構成図である。 本発明の実施例による複数の監視カメラ映像を一画面上で集中モニタリングする表示画面例図である。 本発明の実施例による複数の監視カメラ映像を人物動作の異常度に応じて表示変更するための制御処理フローチャートである。 本発明の実施例による複数の監視カメラ映像を人物動作の異常度に応じてフレームレートを調整して表示する動作説明図である 本発明の実施例による複数監視カメラ映像を人物動作の異常度に応じて表示変更する際のバリエーションを説明する図その１である。 本発明の実施例による複数監視カメラ映像を人物動作の異常度に応じて表示変更する際のバリエーションを説明する図その２である。 本発明の実施例による異常事象が生じる際に複数監視カメラ映像を連結して表示する機能その１を説明する図である。 本発明の実施例による異常事象が生じる際に複数監視カメラ映像を連結して表示する機能その２を説明する図である。

以下、本発明の実施形態について説明する。

本発明の実施形態を、オフィスビルまたは店舗ビルにおけるエスカレータに取り付けた監視カメラを備えた集中監視システム図を用いて説明する。

図１は、エスカレータの狭角部に取り付けた監視カメラ付き保護板を備えたエスカレータに適用した本発明の実施例による集中監視システムの全体構成図である。図１において、１０１は監視カメラ付き可動式保護板、１０２はエスカレータのハンドレールである。オフィスビルや店舗ビルでは、各階に監視カメラを取り付ける必要がある（１０３、１０４）。これらの監視カメラは同軸ケーブル、またはイーサネット（登録商標）・ケーブル１０５でハードディスクレコーダ１０７へ接続される。同軸ケーブルで接続するか、イーサネット・ケーブルで接続するかは、使用する監視カメラがアナログカメラかディジタルＩＰカメラかによって変わる。ケーブル１０５はハードディスクレコーダ１０７に直接接続してもよいが、一旦ルータを経由してレコーダ１０７へ接続してもよい。また、監視カメラがディジタルＩＰカメラを使用する場合においては、ケーブル１０５の代わりに無線ＬＡＮを使用できる。画像処理装置１０８は、ハードディスクレコーダ１０７で記録した映像を画像処理し、映像中の人物の動作を解析する。例えば、特願２００８−２２６１０２号に記載の時空間情報による例外行動検知装置を用いると、エスカレータのようにステップが常に動く動的背景シーン中の人物の転倒事象を検知できる。このとき、人物動作の異常度が画像処理装置１０８で計算され、異常動作の検知結果と異常度の時間変化のチャートがモニタ１０９に表示される。モニタ１０９では、複数の監視カメラ映像が同時に表示される。画像処理装置１０８は、ＰＣまたは組み込み機器で構成される。ＰＣ１１０は、画像処理装置１０８のパラメータを変更したり、画像処理装置１０８からの出力結果を保存したりするための保守用ＰＣである。画像処理装置１０８からの検知結果は、接点出力１１１を通して警告灯やスピーカーなどの外部機器１１２に送られ、人物動作の異常度に応じた発報を行う。ハードディスクレコーダ１０７から外部機器１１２までは、集中監視センター１０６に設置され、監視員は一台のモニタ１０９で、複数の監視カメラの映像をモニタリングする。

図２は、特願２００８−２３８２６０号に記載した監視カメラ付き可動式保護板を用いたローカルの監視カメラ構成部に焦点を当てたエスカレータの斜視図である。図２において、２０１はエスカレータのステップ、２０２はエスカレータのハンドレールである。２０３は映像監視用のカメラであり、ステップ上の乗客の搭乗状態を監視する。２０４は注意喚起放送用のスピーカーであり、乗客が異常搭乗、または危険搭乗をしている場合に注意喚起を行い、乗客に危険を認知させる。２０５は可動式保護板の取付具、２０６は乗客の衝突防止用の可動式保護板であり、乗客が衝突すると揺れる構造になっている。２０７は画像認識装置であり、監視カメラ２０３で撮影された画像を処理して、異常搭乗や危険搭乗を検知する。２０８は映像録画装置であり、常時録画したり、画像認識装置２０７で検知した異常事象をトリガ信号として、異常事象前後のみに映像を録画したりする。画像認識装置２０７から出力されるトリガ信号はエスカレータ制御装置（図示せず）につながっており、異常事象発生時にエスカレータを停止、または緩停止させることができる。また、画像認識装置２０７から出たトリガ信号は有線または無線のネットワーク１０５を経由して集中監視センター１０６へアラーム信号として送られ（図１）、監視員の監視効率を高めるために用いられる。また、このような異常度または異常度に基づくトリガ信号、アラーム信号を、メタデータとして動画ファイルのヘッダー領域または動画像データ中に直接格納するメタデータ格納部を備えることができる。このようにして、映像データ中に埋め込まれたり、映像データにメタデータとして別ファイルで付加されたりして、事故検証のためにオフラインで事後的に映像検索する場合に用いることができる。なお、２０９は異常搭乗中の乗客、２１０は上階の床面または天井である。

次に、図３を用いて表示モニタ１０９で表示される複数の監視カメラ映像の一括表示について説明する。図３において、３０１はモニタ画面である。３０２、３０３は複数画面の表示形態を変更するパラメータボタンを有するＧＵＩ（Graphical User Interface）である。３０４がローカルに点在配置した複数の監視カメラからの映像である。

図１のハードディスクレコーダ１０７は、マルチチャネルの映像を同時に表示・録画でき、画像処理装置１０８は、それらのマルチチャネル映像を同時に画像処理できる。モニタ１０９は、マルチチャネル映像、およびそれらを同時に画像処理した結果を表示することができる。

この図では、多数のエスカレータを、すべて同一方向、同一角度から見た映像となっているが、すべての監視カメラをそのように配置することは困難である。そこで、この実施例においては、画像処理装置１０８は、同一の形状の別物を背景にもつ複数の監視カメラの映像を、ほぼ同じ位置でほぼ同じ角度に設置された監視カメラの映像に見えるように、監視カメラの映像を画像処理によって補正する補正部を備えている。この補正部は、ソフトウェアまたは画像処理回路によって実現可能である。

図４は、本発明の実施例による複数の監視カメラ映像を人物動作の異常度に応じて表示変更するための制御処理フローチャートである。図４を用いて、表示モニタ１０９の表示形態を画像処理装置１０８が出力する人物の動作異常度に応じて変更するフローについて説明する。ステップ４０１では、画像処理装置１０８に映像を入力する。ステップ４０２では、乗客の乗車の異常度を計算する。例えば特願２００８−２２６１０２号に記載した時空間情報から計算される連続ランク増分値を計算する。連続ランク増分とは、ある領域内における動きの定常・非定常性を評価する値であり、この値が小さいときは領域内の動きがコヒーレントであり、動きの複雑さが小さいことを示す。例えば、乗客がいない状態のエスカレータステップの動きである。逆に、連続ランク増分の値が大きいと領域内の動きが複雑なことを示し、例えばエスカレータステップ上の人物が転倒したり、駆け上がったりした場合に連続ランク増分の値が大きくなる。

さて、ステップ４０３で、異常度の値がしきい値より大きいか否かを判断する。もし、異常度（連続ランク増分の値）がしきい値より小さければ、ステップ４０４にて、画面の表示形態を変更しないか、前のフレームで表示形態を変えていれば表示形態を元に戻し、再び異常度の計算ステップ４０２に戻る。異常度がしきい値より大きければ、ステップ４０５にて、その異常度に応じてモニタ１０９の画面表示形態を変更する。

異常画面の表示形態の変更の仕方には複数の手法があり、これらは後ほど図５−９を用いて説明する。

異常画面の表示形態が変更された後、ステップ４０６では、隣接監視カメラ映像の連結表示フラグの状態を確認する。連結フラグがオンになっていれば、ステップ４０７では、少なくとも２台以上の監視カメラ映像を連結して表示する。この詳細は後ほど図８−９を用いて説明する。

ステップ４０５による異常表示形態の変更と、ステップ４０７による隣接監視カメラ映像の連結が行われた後、ステップ４０８では、ステップ４０２で計算された異常度を、メタデータとして外部記録媒体に保存する。これは、ハードディスクレコーダ１０７に録画された映像をオフラインで再生するとき、ステップ４０１から４０７までの処理を、画像処理を行わずに効率的に映像再生するために行う。例えば、長時間録画した映像データから犯罪捜査支援のために使えそうなシーンを切り出すとき、人物の動作特徴の異常度を用いて映像再生をする。すなわち、異常度が小さなシーンは人物の動きが複雑ではなく、異常が生じていないとして再生速度を上げて短時間で調査し、逆に異常度が大きなシーンは人物動作が複雑であり、何らかの異常が生じているとして再生速度を遅くして、詳細に調査できるようにする。

図５は、本発明の一実施例による集中監視システムにおける表示速度（フレームレート）変更の説明図である。

監視カメラの映像から画像処理によって計算した異常度に基づいて、画面表示の速度（フレームレート）を変更できる。これには２つの場合があり、１つは、図５の左側に示すように、撮影映像をオンライン表示する場合であり、もう１つは、図５の右側に示すように、録画した映像を後からオフラインで再生表示する場合である。

まず、図５の左側に示すオンライン表示の場合、通常時（異常が発生していない場合）は、図５の左下段に示すように、表示する映像のフレームレートを下げる。この場合、映像は間欠的にのみ変化する状態で十分であり、極端な場合には、映像中に人物が存在せず、画面の変化が全く無い場合にフレームレートを０、すなわち表示を止めてしまうこともできる。

一方、異常が発生した場合は、図５の左上段に示すように、画像処理によって計算された異常度に応じて表示フレームレートを連続的、または一定レート幅ずつ上げる。このとき、最大で３０ｆｐｓ、すなわち通常のフレームレートで表示させる。

すなわち、複数の監視カメラの映像を並べて表示しながら集中監視する監視システムにおいて、複数の監視カメラの映像中の人物動作の異常度を監視カメラ毎に画像処理によって計算する異常度計算部と、この異常度が高いほど該当監視カメラからの映像の表示フレームレートを高くするフレームレート調整部とを備えている。異常度計算部およびフレームレート調整部は、画像処理装置１０８に設けられ、ソフトウェアまたは画像処理回路で実現可能である。尚、異常度計算部を画像認識装置２０７に設け、映像と共に画像処理装置１０８に入力するようにしても良い。

次に、図５の右側に示すオフライン表示の場合、通常時は、図５の右下段に示すように、「早送り」再生を行う。極端な場合では、もし、画面に全く変化が無い場合は、次に異常が発生したフレームまで再生スキップすることもできる。

図５の右上段に示す異常が発生したシーンでは、画像処理によって計算された異常度に応じて「スロー再生」の速度を連続的、または一定速度幅ずつ下げていく。このとき、通常の再生速度（等倍速：１．０倍）まで下げる。ただし、そのシーンをより詳細に観たい場合は、さらに再生速度を下げる（１．０倍未満にする）ようにしても良い。

すなわち、複数の監視カメラの映像を録画し、これら複数の監視カメラの映像を並べて同時に再生しながら集中監視する監視システムにおいて、複数の監視カメラの映像中の人物動作の異常度を監視カメラ毎に画像処理によって計算する異常度計算部と、この異常度が低いほど、該当監視カメラによる録画映像の再生速度を上げる再生速度調整部とを備えている。異常度計算部および再生速度調整部は、画像処理装置１０８に設けられ、ソフトウェアまたは画像処理回路で実現可能である。異常度計算部が異常度を得る方法として、動画ファイルのヘッダー領域または動画像データ中に直接格納されたメタデータを利用しても良い。あるいは、次回再生するときのために、異常度をメタデータとして動画ファイルのヘッダー領域または動画像データ中に直接格納するメタデータ格納部を備えていても良い。メタデータ格納部についても、ソフトウェアまたは画像処理回路で実現可能である。

次に、本発明の実施例による具体的なモニター画面の表示例について説明する。

図６は、フレームレートの調整、ポップアップ表示、および異常度の遷移表示による監視支援画面の説明図である。図６（ａ）では、異常が生じた監視カメラ映像を一旦メモリバッファに保存しておき、その監視カメラ映像を監視画面上でポップアップ表示させる。この例は、監視カメラ７からの映像を画像処理して得られた異常度がしきい値を越えている場合で、監視カメラ７からの映像を画面中央にポップアップ表示６０１している様子を表している。このときのポップアップ表示６０１の映像は、オンライン監視中であれば高いフレームレートで表示させ、オフラインで再生監視する場合には、スロー再生させる。このように、異常度が所定値を超えた監視カメラの映像を表示画面の中央に拡大表示する拡大表示部は、画像処理装置１０８に設けられ、ソフトウェアまたは画像処理回路で実現可能である。

図６（ｂ）の表示形態は、図３で説明したように、全１６台の監視カメラの映像を一括表示するモニター画面の例である。この例は、オンライン映像監視、またはオフライン録画後の再生監視のいずれにも適用できるが、図６（ｂ）には、オフライン再生時の再生速度の調整例として図示し、図６（ｃ）に、オンライン監視時のフレームレートの調整例として図示している。

図６（ｂ）で、ステップ４０２（図４）で計算した異常度の大きさに応じて、各監視カメラ映像の動画のオフライン再生速度を変える場合、連続ランク増分の値は０から１の間の値をとるため、次式を用いることにより、所望の機能を実現できる。

「補正再生速度」＝「標準再生速度」×α×（１．０−「連続ランク増分値」）
ここで、αは１より大きい正の定数である。監視領域内の人物の動作が定常的、または監視領域に人物が存在していない場合、連続ランク増分の値は、例えばエスカレータのステップが動いている状態でも低い値をとる。よって上式を用いると、乗客がいない場合、または、乗客がいても動作が複雑ではない場合は、例えば６０２に示すように、監視カメラ１１からの録画映像を２．０倍速で再生するように表示の再生速度を上げる。このように、変化の無いシーンを飛ばしながら再生するため、オフラインで映像調査をする際の監視員の視覚的な疲労が減る。

逆に、連続ランク増分の値が大きい場合は乗客の動作が複雑であることを示し、この場合は、詳細に見る必要がある。そこで、例えば６０３に示すように、監視カメラ１２からの録画映像を０．２倍速でゆっくりと再生し、再生時のコマ落ち無しで異常事象を詳細に見ることができる。このような表示は、前述したフレームレート調整部により実現できる。

図６（ｃ）は、オンライン集中監視時に、連続ランク増分を用いて表示フレームレートを可変にする監視画面の例である。すなわち、連続ランク増分が０から１の間の値をとるとする時、標準の表示フレームレートである３０［ｆｐｓ］に連続ランク増分値をかけた値を表示フレームレートとする。もし、連続ランク増分の値が１．０に近い場合、表示フレームレートは高くなり、例えば、６０４で示すカメラ１１からの映像のように、コマ落ちが無いフレームレート３０［ｆｐｓ］に近い状態で、異常動作状態を観察できる。

逆に、連続ランク増分が０に近い場合、表示フレームレートを低下させる。例えば、６０５に示すカメラ１からの映像のように、表示フレームレートの値は０に近く、定常状態の映像を見続ける際の監視員の視覚的な疲労を低減できる。

このような表示フレームレートの調整には、別の効果も期待できる。すなわち、表示フレームレートが低い映像は、連続ランク増分の定義から異常度が小さい映像である。一方、異常度が高くなると表示フレームレートが上がり、どの監視カメラ映像を見ればよいか、視覚的に強調される。このため、異常事象を素早く察知できることや、異常事象の見逃しを低減できることが期待できる。このような表示は、前述した再生速度調整部により実現できる。

図６（ｄ）は、上記のような監視カメラ映像のフレームレートの調整に対して、異常度そのものの時間遷移を、グラフやチャートを各監視カメラ映像に重畳して表示するものである。例えば、６０６として、カメラ４からの画像に重畳して異常度の時間遷移を折れ線グラフ表示している。これにより、エスカレータステップ上の転倒のような瞬間的な異常ではなく、ある程度長時間に亘って変化する異常、例えば人流の混雑度を視覚的に見ることができる。このように、各監視カメラの映像毎に、異常度の時間遷移を示すグラフまたはチャートを、各監視カメラの映像に重畳して表示する拡大表示部は、画像処理装置１０８に設けられ、ソフトウェアまたは画像処理回路で実現可能である。

次に、図７を用いて、異常画面の表示形態の他の変更例のバリエーションについて説明する。図７（ａ）はどの監視カメラ映像にも異常が生じていない、定常状態を表している。このとき、監視カメラ配置は設置順に左上から右下に向けて並んでいる。図７（ｂ）は人物動作異常度の大きさに応じて、映像の輝度値を変えた表示例である。上記の連続ランク増分は０から１の間の値をとるので、画面上で表示できる最高輝度値に連続ランク増分値を乗算するだけで、所望の機能を実現できる。図７（ｂ）では、７０１で示すカメラ６，７および１０からの映像のように、異常度が大きい監視カメラ映像が、明るく表示される。一方、定常状態の監視カメラ映像は暗くなる。図示の例では、カメラ１−５および１３−１６が異常度が最も小さいので、最も暗く、カメラ８，９，１１および１２の異常度が中程度であるため、薄暗く表示されている。すなわち、異常度に応じて、複数の監視カメラの映像を、複数段階の輝度レベルに分けて表示する輝度調整表示部を備えている。輝度調整表示部は、画像処理装置１０８に設けられ、ソフトウェアまたは画像処理回路で実現可能である。この機能により、監視員は優先的に見るモニタを視覚的に把握できるため、全ての監視カメラを同じ重みで見るより、監視による疲労を低減できる。

図７（ｃ）では、異常が検出された監視カメラの映像を他の監視カメラの映像よりも暗く表示している。いずれを、相対的に明るく表示するかについては、適宜に選択できる。ここで、異常が検出された監視カメラの映像７０２に加えて、その監視カメラの近傍に設置されている監視カメラ、または視野が重複、あるいは視野が近い監視カメラ映像７０３も同じように輝度補正して、この例では、暗く見せる表示例である。すなわち、異常度が大きな第１の監視カメラの映像と、この第１の監視カメラの映像に関連する映像をもつ第２の監視カメラの映像とを、その他の監視カメラの映像と区別して表示する関連映像表示部を備えている。関連映像表示部は、画像処理装置１０８に設けられ、ソフトウェアまたは画像処理回路で実現可能である。

これは、発生した異常事象が監視カメラ間の境界領域で発生した場合、異常事象が複数の監視カメラ映像中で時間遅れを伴いながら連続的、あるいは断続的に発生することが考えられるためである。異常事象が発生している監視カメラ映像が集中監視画面上で離れた位置に配置されている場合、視点の移動が増え、監視員の視覚的負担が増える。

本実施例の機能によって、異常事象が発生している監視カメラ映像に加え、その監視カメラに近接している、または視野が近いなどの関連を持つ監視カメラ映像の画面上における場所を視覚的に把握できるため、監視員の視線の移動量が減り、疲労低減につながる。

図７（ｄ）は、図７（ｂ）の機能を拡張してさらに視線の移動量を減らした表示例を示す。図７（ｄ）では、異常度の大きさに応じて、監視カメラ映像の配置を動的に変えている。この表示例では、異常度の大きな監視カメラ映像が左上に配置されるため、監視員は左上の監視カメラ映像に重みをおいて集中的にモニタリングできる。このように、一画面内に配列された複数の監視カメラの映像を、異常度に応じて並べ替えを行う並べ替え表示は、画像処理装置１０８に設けられ、ソフトウェアまたは画像処理回路で実現可能である。

以上は、画面表示の明るさと監視カメラ配置の変更に関する監視支援機能であるが、この実施例においても、監視カメラ毎に、異常度に応じた表示フレームレートあるいは再生速度の調整を併用すれば、より効果は大きい。

次に、図８および図９を用いて、異常状態映像の連結表示機能について説明する。オフィスビルや店舗ビルのエスカレータを監視する場合において、監視カメラはエスカレータ毎に設置されるものとする。このような場合、エスカレータは常に動いているため、エスカレータステップ上での乗客の転倒が生じた場合、ある監視カメラ視野で生じた転倒事象はエスカレータステップの移動に伴い、別の監視カメラでも見えることになる。

図８（ａ）は、図７（ｃ）と同じ表示画面（但し、７０２，７０３はそれぞれ８０１，８０２となっている）であり、このような事象を視覚的に見やすくするために異常が発生した監視カメラ映像に加えて、その監視カメラに隣接する監視カメラの映像も強調表示するものである。

図８（ｂ）では、この機能をさらに拡張して、異常事象が発生した際に、隣接監視カメラ映像同士８０３（カメラ６に対応）と８０４（カメラ１６に対応）を線８０５と８０６で結び、または図９（ａ）では、ビデオモザイキングにより、隣接監視カメラ映像同士９０１（カメラ６に対応）と９０２（カメラ１６に対応）を直接連結して表示させている。

具体的には、まず、図８（ａ）において、異常が発生した監視カメラ映像８０１（カメラ６に対応）とその隣接監視カメラの映像８０２（カメラ１６に対応）がそれぞれ異常度計算ステップ４０２（図４）の結果に応じて強調表示されている。引き続いて、図８（ｂ）または図９（ａ）のように、隣接監視カメラ映像が線で結ばれたり、あるいは、モザイキングされたりする。

図８（ｂ）では、ステップの移動方向が揃うように線表示８０５，８０６で結ばれ、人物が画像間でどこからどこへ移動するかが視覚的に分かるようにしている。これにより、監視員の視線移動のガイダンスをすることができ、監視に伴う疲労を低減できる。

すなわち、異常度が所定値を超えた監視カメラの映像と、当該監視カメラに空間的に隣接している他の監視カメラまたは当該監視カメラと共通の視野を有する他の監視カメラの映像とを、監視画面上において連繋線で結ぶ連繋表示部を備えている。連繋表示部は、画像処理装置１０８に設けられ、ソフトウェアまたは画像処理回路で実現可能である。

この機能をさらに拡張したものが図９（ａ）である。図９（ａ）では、ステップの移動先が連続してつながるように、監視カメラ６の映像９０１に対して、監視カメラ１６の映像９０２の上下方向を反転させて、貼り合わせている。このように監視カメラ映像をビデオモザイキングし、監視カメラ間の視線移動を最小にできる監視を実現している。

すなわち、異常度が所定値を超えた監視カメラの映像と、当該監視カメラに空間的に隣接している他の監視カメラまたは当該監視カメラと共通の視野を有する他の監視カメラの映像とを、映像同士が繋がりをもつように監視画面上においてそれらの監視カメラ映像を貼り合わせて表示する貼り合わせ表示部を備えている。あるいは、前記複数の映像を、連続した映像に見えるように画像処理して表示する連続映像表示部を備えている。貼り合わせ表示部あるいは連続映像表示部は、画像処理装置１０８に設けられ、ソフトウェアまたは画像処理回路で実現可能である。

図８（ｂ）または図９（ａ）の拡張処理結果は、図９（ｂ）のように、監視画面上にポップアップして連結映像９０３として表示される。

以上は、複数の監視カメラからの異常状態映像の連結表示機能であるが、この実施例においても、監視カメラ毎に、異常度に応じた表示フレームレートあるいは再生速度の調整を併用すれば、より効果は大きい。

すなわち、図５〜図９で説明した表示のバリエーションは、互いに矛盾しない限り組み合わせて適用しても良い。

１０１…監視カメラ付き可動式保護板、１０２…エスカレータのハンドレール、１０３…監視カメラ付き可動式保護板、１０４…監視カメラ付き可動式保護板、１０５…アナログ同軸ケーブルまたはイーサネット・ケーブル、１０６…集中監視センター、１０７…ハードディスクレコーダ、１０８…画像処理装置、１０９…表示用モニタ、１１０…調整用ＰＣ、１１１…接点出力、１１２…警告灯またはスピーカー、２０１…エスカレータのステップ、２０２…エスカレータのハンドレール、２０３…監視カメラ、２０４…スピーカー、２０６…衝突防止保護板、２０７…画像認識装置部、２０８…映像録画装置部、２０９…乗客、２１０…天井、３０１…監視画面、３０２，３０３…表示形態変更用ＧＵＩ、３０４…監視カメラ映像、６０１…ポップアップ監視カメラ映像、６０２…再生速度を上げた監視カメラ映像、６０３…再生速度を下げた監視カメラ映像、６０４…フレームレートを上げた監視カメラ映像、６０５…フレームレートを下げた監視カメラ映像、６０６…カメラ画像に重畳して異常度の時間遷移を折れ線グラフ表示した画面、７０１，７０２，８０１…高異常度監視カメラの高輝度映像、７０３，８０２…高異常度監視カメラに隣接した監視カメラの高輝度映像、８０３，９０１…高異常度監視カメラ映像、８０４…高異常度監視カメラに隣接した監視カメラの映像、８０５，８０６…画像間連結線、９０２…高異常度監視カメラに隣接した監視カメラからの反転・変形した画像、９０３…連結画像のポップアップ表示。

Claims (5)

1. 複数の監視カメラの映像を並べて表示しながら集中監視する監視システムにおいて、
   複数の監視カメラの映像中の人物動作の異常度を監視カメラ毎に画像処理によって計算する異常度計算部と、
   前記異常度が高いほど該当監視カメラからの映像の表示フレームレートを高くするフレームレート調整部と、
   前記異常度が所定値を超えた監視カメラの映像と、当該監視カメラに空間的に隣接している他の監視カメラまたは当該監視カメラと共通の視野を有する他の監視カメラの映像とを、監視画面上において連繋線で結ぶ連繋表示部
   を備えたことを特徴とする複数監視カメラによる集中監視システム。
2. 請求項１において、前記異常度が所定値を超えた監視カメラの映像を表示画面の中央に拡大表示する拡大表示部を備えたことを特徴とする複数監視カメラによる集中監視システム。
3. 請求項１または２において、同一の形状の別物を背景にもつ複数の監視カメラの映像を、ほぼ同じ位置でほぼ同じ角度に設置された監視カメラの映像に見えるように、監視カメラの映像を画像処理によって補正する補正部を備えたことを特徴とする複数監視カメラによる集中監視システム。
4. 請求項１〜３のいずれかにおいて、前記異常度に応じて、複数の監視カメラの映像を、複数段階の輝度レベルに分けて表示する輝度調整表示部を備えたことを特徴とする複数監視カメラによる集中監視システム。
5. 複数の監視カメラの映像を並べて表示しながら集中監視する監視方法において、
   前記複数の監視カメラの映像中の人物動作の異常度を監視カメラ毎に画像処理によって計算する異常度計算ステップと、
   前記異常度が高いほど該当監視カメラからの映像の表示フレームレートを高くするフレームレート調整ステップと、
   前記異常度が所定値を超えた監視カメラの映像と、当該監視カメラに空間的に隣接している他の監視カメラまたは当該監視カメラと共通の視野を有する他の監視カメラの映像とを、監視画面上において連繋線で結ぶ連繋表示ステップ
   を備えたことを特徴とする複数監視カメラによる集中監視方法。

Images