JP2018137565A

JP2018137565A - 監視システム及び制御プログラム

Info

Publication number: JP2018137565A
Application number: JP2017029725A
Authority: JP
Inventors: 誠司宇山; Seiji Uyama
Original assignee: Individual
Current assignee: Individual
Priority date: 2017-02-21
Filing date: 2017-02-21
Publication date: 2018-08-30
Anticipated expiration: 2037-02-21
Also published as: JP6244488B1

Abstract

【課題】移動をする監視対象において監視を行う場合に、異常が発生した際における監視対象の動向を確認することが可能な技術を提供する。【解決手段】監視対象に設置され、当該監視対象における監視領域４０を撮影するカメラ装置ＣＣ１０が撮影した映像に基づき特定事象の発生を検出し、監視対象に設置され、当該監視対象の位置情報を取得する位置情報取得部Ｇ１０が取得した位置情報に基づき、少なくとも監視対象の位置を特定する対象情報を生成し、特定事象の発生を検出したとき、当該特定事象に関する情報と当該特定事象の発生時における対象情報とを関連付けて特定連動情報として生成し、特定連動情報を特定事象記録部３０２に記録する。【選択図】図１

Description

本発明は、監視システム、監視情報の記録方法及び制御プログラムに関する。

従来、監視対象である施設に複数の監視カメラを設置することで、監視カメラの撮影可能な範囲である監視エリアにおける不審者や異物の侵入、その監視エリアに滞在する人間の挙動、火災等の異常の発生について監視及び映像の記録を行うことが知られている。特に、特許文献１に開示されているように、複数の監視カメラとしてＰＴＺ（Ｐａｎ−Ｔｉｌｔ−Ｚｏｏｍ）カメラと固定式の監視カメラを用いて撮影を行い、撮影された映像から侵入検知を行う警備システムが知られている。また、撮影された映像は撮影された日付等の情報と共にＨＤＤ（ＨａｒｄＤｉｓｋＤｒｉｖｅ）等の記録装置に記録されるのが一般的である。

特開２０１３−００５３３６号公報

上述のように、監視カメラが設置される場所が施設ならば監視を行っている期間において外的環境の変化は少なく、異常が発生した際に撮影された映像を確認する場合であっても異常が発生した日付や時間が特定可能であれば事足りる。

しかし、監視対象が船舶や列車、車両、航空機のように移動をするものである場合には、監視を行っている期間において外的環境の変化が大きい。具体的には、監視対象の現在位置における搭乗人員の変化、天候や気候の変化、更には監視対象の移動速度等の変化に伴って監視対象における監視エリアの状況は大きく異なる。

従って、監視を行っている期間において同じ種類の異常が複数発生したとき、異常が発生した際における監視対象の位置や動向に応じて、それぞれの異常の詳細を正しく把握できず、また原因の解明が困難になる可能性がある。

そこで、本発明は、上記の問題を解決するためになされたものであって、移動をする監視対象において監視を行う場合に、異常が発生した際における監視対象の動向を確認することが可能な監視システム、監視情報の記録方法及び制御プログラムの提供を目的とする。

上述した目的を達成するために、本発明は次のように構成されている。

（１）本発明に係る監視システムは、監視対象に設置され、当該監視対象における監視領域を撮影するカメラ装置と、前記カメラ装置が撮影した映像に基づき特定事象の発生を検出する映像分析部と、前記監視対象に設置され、当該監視対象の位置情報を取得する位置情報取得部と、前記位置情報取得部が取得した前記位置情報に基づき、少なくとも前記監視対象の位置を特定する対象情報を生成する対象情報特定部と、前記映像分析部が前記特定事象の発生を検出したとき、当該特定事象に関する情報と当該特定事象の発生時における前記対象情報とを関連付けて特定連動情報として生成する特定事象連動処理部と、前記特定連動情報を記録する特定事象記録部と、を備えることを特徴とする。

（２）また、本発明に係る監視システムは、前記カメラ装置が撮影した映像を前記対象情報と関連付けて記録する映像記録部と、前記映像記録部に記録された映像を表示可能な表示装置と、前記映像記録部に記録された複数の映像からいずれかを選択して前記表示装置に表示させる表示制御部と、を備え、前記表示制御部は、選択した映像と同時に、当該映像に関連付けられた前記対象情報を表示装置に表示させることを特徴とする。

（３）また、本発明に係る監視システムは、外部特定事象の発生を検出するための検出センサと、を備え、前記特定事象連動処理部は、前記検出センサが前記外部特定事象の発生を検出したとき、当該外部特定事象に関する情報と当該外部特定事象の発生時における前記対象情報とを関連付けて特定連動情報として生成することを特徴とする。

（４）また、本発明に係る監視システムは、前記対象情報特定部が生成する前記対象情報は、前記監視対象の移動速度及び当該監視対象の移動方向についても特定することを特徴とする。

（５）また、本発明に係る監視情報の記録方法は、監視対象に設置されたカメラ装置によって、当該監視対象における監視領域を撮影するステップと、撮影した映像に基づき特定事象の発生を検出するステップと、前記監視対象に設置された位置情報取得部によって、当該監視対象の位置情報を取得するステップと、取得した前記位置情報に基づき、少なくとも前記監視対象の位置を特定する対象情報を生成するステップと、前記特定事象の発生を検出したとき、当該特定事象に関する情報と当該特定事象の発生時における前記対象情報とを関連付けて特定連動情報として生成するステップと、前記特定連動情報を記録するステップと、を有することを特徴とする。

（６）また、本発明に係る制御プログラムは、コンピュータに、監視対象に設置されたカメラ装置によって、当該監視対象における監視領域を撮影するステップと、撮影した映像に基づき特定事象の発生を検出するステップと、前記監視対象に設置された位置情報取得部によって、当該監視対象の位置情報を取得するステップと、取得した前記位置情報に基づき、少なくとも前記監視対象の位置を特定する対象情報を生成するステップと、前記特定事象の発生を検出したとき、当該特定事象に関する情報と当該特定事象の発生時における前記対象情報とを関連付けて特定連動情報として生成するステップと、前記特定連動情報を記録するステップと、を実行させることを特徴とする。

本発明によれば、移動をする監視対象において監視を行う場合に、異常が発生した際における監視対象の動向を確認することが可能な監視システム、監視情報の記録方法及び制御プログラムを提供することができる。

本発明の実施形態に係る監視システムの構成例を示した概念図である。本発明の実施形態に係るイベント連動処理部の処理を説明するためのフローチャートである。本発明の実施形態に係る表示画面の構成例を示す図である。本発明の実施形態に係る表示画面における左上領域３２ａの拡大図である。本発明の実施形態に係るイベントリストの例を示す図である。本発明の他の実施形態に係る監視システムの構成例を示した概念図である。

以下、図面を用いて本発明の実施形態を詳細に説明する。以下の説明により、本発明がそれに限定されるものではなく、当業者にとって容易に実施できる程度の設計変更は本発明の技術的思想に属するものである。

（監視システム１の概要）
図１は、本発明の監視システム１を適用した場合の構成概念図である。本実施形態では貨物船を監視対象として、貨物船において監視システム１を適用した例となる。

監視システム１は、検出センサＳ１０、Ｓ２０（検出センサ）と、ＰＴＺカメラＰＣ１０、ＰＣ２０（カメラ装置）と、ＣＣＴＶカメラＣＣ１０、ＣＣ２０（カメラ装置）と、ＧＰＳアンテナＧ１０（位置情報取得部）と、ＧＰＳ受信機Ｇ２０（対象情報特定部）と、中央監視装置１００と、記録装置３００と、入力装置１０と、表示装置２０とからなる。

監視システム１では、貨物船（監視対象）における監視エリア４０（監視領域）を、当該貨物船に設置されたＰＴＺカメラＰＣ１０、ＰＣ２０及びＣＣＴＶカメラＣＣ１０、ＣＣ２０によって撮影する。撮影された映像は中央監視装置１００における情報送受信部２０２において受信される。受信された映像は映像分析部２１１（映像分析部）にて分析が行われ、イベント（特定事象）の検出条件が満たされると当該イベントの発生が検出される。また、当該貨物船に設置されたＧＰＳアンテナＧ１０はＧＰＳ衛星からＧＰＳ信号（位置情報）を受信し、ＧＰＳ受信機Ｇ２０によって貨物船の緯度や経度、移動速度や移動方向等を特定する情報（対象情報）を生成し、中央監視装置１００や記録装置３００に送信する。

そして、映像分析部２１１がイベントの発生を検出したとき又は検出センサＳ１０、Ｓ２０が異常熱源の感知等の外部イベント（外部特定事象）の発生を検出したとき、イベント連動処理部（特定事象連動処理部）によって、検出されたイベント又は外部イベントとイベント又は外部イベントの発生時における貨物船の緯度や経度、移動速度や移動方向等の情報を関連付けてイベント情報（特定連動情報）を生成する。生成されたイベント情報は記録装置３００に送信されてイベントＤＢ３０２（特定事象記録部）に記録される。

また、映像受信部２０２において受信された映像は記録装置３００に送信される。記録装置３００では、受信した映像と当該映像の受信時における貨物船の緯度や経度、移動速度や移動方向等の情報を関連付けて映像ＤＢ３０１（映像記録部）に記録する。

以上のように記録装置３００におけるイベントＤＢ３０２に記録されたイベント情報や映像ＤＢ３０２に記録された映像は、監視システム１のユーザーである監視者による入力装置１０を介した要求操作によって表示装置２０に表示される。

これらが監視システム１の概要となる。以下では、監視システム１を構成する各装置や各機能部の説明を行う。

（ＰＴＺカメラＰＣ１０、ＰＣ２０）
ＰＴＺカメラＰＣ１０、ＰＣ２０はＰＴＺカメラであり、ネットワーク４００を介して撮影した映像を送信することができるネットワークカメラとして構成される。当該カメラの機能として、カメラ制御部２１２の制御によりパン、チルト、ズームを変更可能とする機能を有する。当該機能により、監視エリアにおいて広範囲な撮影が可能となり、またイベントが発生した際には適切な撮影角度にカメラを動作させ、またズームイン、ズームアウトを行うことで適切な映像を撮影することができる。

また、撮影した映像をＭＪＰＥＧ、ＭＰＥＧ４、Ｈ．２６４等の映像圧縮方式によりデータ圧縮処理をする機能を備え、且つ撮影した映像の重要度に応じて、異なる映像圧縮方式や映像圧縮率を選択してデータ圧縮することが可能である。例えば、イベントの発生時にズームインをして撮影をした場合には、映像圧縮率を通常の場合よりも低めて処理することができる。

なお、本実施形態ではＰＴＺカメラＰＣ１０、ＰＣ２０の２つをＰＴＺカメラとして備えているが、個数についてはこれに限られず、１つでもよいし３つ以上のＰＴＺカメラを備えてもよい。また、ＰＴＺカメラを備えずＣＣＴＶカメラのみでカメラ装置を構成してもよい。

（ＣＣＴＶカメラＣＣ１０、ＣＣ２０）
ＣＣＴＶカメラＣＣ１０、ＣＣ２０はＣＣＴＶ（Ｃｌｏｓｅｄ−ＣｉｒｃｕｉｔＴｅｌｅｖｉｓｉｏｎ）カメラであり、ネットワーク４００を介して撮影した映像を送信することができるネットワークカメラとして構成される。当該カメラの機能として、カメラ制御部２１２の制御によりズームを変更可能とする機能を有する。ＣＣＴＶカメラはＰＴＺカメラと異なりパン、チルトを変更することはできないが、小型である等の利点がある。

また、ＰＴＺカメラＰＣ１０、ＰＣ２０と同様に撮影した映像についてデータ圧縮処理をする機能を備え、且つ撮影した映像の重要度に応じて、異なる映像圧縮方式や映像圧縮率を選択してデータ圧縮することが可能である。

なお、本実施形態ではＣＣＴＶカメラＣＣ１０、ＣＣ２０の２つをＣＣＴＶカメラとして備えているが、個数についてはこれに限られず、１つでもよいし３つ以上のＣＣＴＶカメラを備えてもよい。また、ＣＣＴＶカメラを備えずＰＴＺカメラのみでカメラ装置を構成してもよい。

そして、本実施形態ではＰＴＺカメラＰＣ１０、ＰＣ２０のパン、チルト、ズームや、ＣＣＴＶカメラＣＣ１０、ＣＣ２０のズームを中央監視装置１００におけるカメラ制御部２１２によって制御可能としているが、ＰＴＺカメラ及びＣＣＴＶカメラにも映像分析機能及びカメラ制御機能を内蔵させ、予め定めた検出条件によってイベントの発生を検出し、検出結果に応じてパン、チルト、ズームを変更可能としてもよい。この場合には、映像と共に検出したイベントに関する情報を送信してもよい。また、各ＰＴＺカメラ及びＣＣＴＶカメラに対して映像分析機能及びカメラ制御機能を備える処理装置を別個に接続させ、当該処理装置を介してネットワークに接続するようにしてもよい。

（検出センサＳ１０、Ｓ２０）
検出センサＳ１０は熱感知センサであり、また検出センサＳ２０は距離測定センサであって、中央監視装置１００における外部イベント受信部２０１とセンサの種類に応じた所定の接続方式で接続されることで映像分析以外によるイベントである外部イベントの発生を検出する検出センサとして構成される。

熱感知センサは、監視エリア４０において火災等による予め定めた温度上昇率以上の温度上昇を検出することができる。本実施形態では、熱感知センサによる異常な温度上昇の検出をイベントの１つとしている。

距離測定センサは、レーザー光の照射と反射されたパルス光の受信とにより監視エリア４０や貨物船に対する異物の接近や侵入を検出することができる。本実施形態では、距離測定センサによる異物の接近や侵入の検出をイベントの１つとしている。

なお、本実施形態では検出センサＳ１０、Ｓ２０として熱感知センサと距離測定センサを１つずつ備えているが、検出センサの個数及び種類はこれに限られない。例えば、他に振動センサや音声センサ、煙センサ、ジャイロセンサ等の種々の公知のセンサを検出センサとして採用してもよい。

（ＧＰＳアンテナＧ１０及びＧＰＳ受信機Ｇ２０）
ＧＰＳアンテナＧ１０及びＧＰＳ受信機Ｇ２０はＧＰＳ（ＧｌｏｂａｌＰｏｓｉｔｉｏｎｉｎｇＳｙｓｔｅｍ：全地球測位システム）機能を利用するための機材として構成される。ＧＰＳアンテナＧ１０は複数のＧＰＳ衛星からＧＰＳ信号を受信し、ＧＰＳ受信機Ｇ２０に送信する。ＧＰＳ受信機Ｇ２０は内蔵する演算処理部によって、ＧＰＳ衛星がＧＰＳ信号を送信した時刻とＧＰＳアンテナＧ１０がＧＰＳ信号を受信した時刻とからＧＰＳアンテナＧ１０の位置、すなわち貨物船の経度及び緯度を特定する。

ＧＰＳ受信機Ｇ２０は経度及び緯度を特定するだけでなく、ＧＰＳ信号に基づいて移動方向や船首方向、移動速度等についても特定することができ、ＧＰＳコンパスとしても機能する。また、ＧＰＳ受信機Ｇ２０にはジャイロコンパス（図示省略）が接続されており、ジャイロコンパスからの情報に基づき貨物船の航行状況に関する種々の情報を特定することもできる。

ＧＰＳ受信機Ｇ２０は中央監視装置１００及び記録装置３００と接続されており、特定した貨物船の位置等に関する情報及び航行状況に関する情報（以下、対象情報という）をＮＭＥＡ０８１３フォーマットによって中央監視装置１００及び記録装置３００に送信する。対象情報の送信は２４時間行われており、送信間隔については１秒間隔、１分間隔等の予め設定した時間間隔によって送信される。また、接続方式としては有線ＬＡＮ（ＬｏｃａｌＡｒｅａＮｅｔｗｏｒｋ）や無線ＬＡＮ、ＩＳＤＮ回線等を採用することができ、またネットワーク４００に接続させてもよい。

なお、中央監視装置１００及び記録装置３００に送信する情報は上述ものに限られず、ＮＭＥＡ０８１３フォーマットにおけるセンテンス表に含まれる種々の情報を採用することができる。また、ＮＭＥＡ２０００等の他のフォーマットを採用することもできる。

なお、ＧＰＳ受信機Ｇ２０から直接的に中央監視装置１００及び記録装置３００に各種情報を送信する構成に限られず、ＧＰＳ受信機やジャイロコンパス、ソナーや風速計等が接続された一の処理装置が対象情報を取りまとめて中央監視装置１００及び記録装置３００に送信することもできる。

（中央監視装置１００）
中央監視装置１００は中央制御部２１０、外部イベント受信部２０１、情報送受信部２０２を備えるパーソナルコンピューターとして構成される。

中央制御部２１０は、イベント連動処理部として後述するイベント連動処理を実行するほか、外部イベント受信部２０１を介して得た検出センサＳ１０、Ｓ２０の検出結果に基づき外部イベントの発生を検出する処理や、マウスやキーボードから構成される入力装置１０からの入力信号に基づいてカメラ制御部２１２を機能させたり、表示制御部２１３を機能させたりする等の処理を実行する。なお、本形態では、中央監視装置１００が備えるＨＤＤ等により構成されるデータ記憶装置（特に図示しておらず）に上述又は後述の各種処理を実行するためのプログラムが記憶されており、中央制御部２１０は当該プログラムを読み出してこれらの処理を実行する。

映像分析部２１１は、ネットワーク４００を介して得たデータ圧縮された映像データを解凍し、その映像に基づき後述の映像分析処理を実行する。また、分析結果に基づきカメラ制御部２１２を機能させる処理を実行する。

カメラ制御部２１２は、中央制御部２１０又は映像分析部２１１からの指定に基づき情ネットワーク４００を介して制御信号をＰＴＺカメラＰＣ１０、ＰＣ２０やＣＣＴＶカメラＣＣ１０、ＣＣ２０に送信することで各カメラを制御する処理を実行する。例えば、入力装置１０からの入力信号に基づいて中央制御部２１０がＰＴＺカメラＰＣ１０のチルトを変更することを決定した場合に、ＰＴＺカメラＰＣ１０にチルトを変更する旨の制御信号を送信する。また、映像分析部２１１が映像分析処理の結果に基づいてＣＣＴＶカメラＣＣ２０のズームを変更することを決定した場合に、ＣＣＴＶカメラＣＣ２０にズームを変更する旨の制御信号を送信する。

表示制御部２１３は、中央制御部２１０からの指令に基づき、液晶ディスプレイから構成される表示装置２０に種々の映像や画像を表示させる処理を実行する。具体的には、後述するＧＵＩ（ＧｒａｐｈｉｃａｌＵｓｅｒＩｎｔｅｒｆａｃｅ）３０や後述するイベントリスト、ストリーム伝送される各カメラにより撮影された現在の映像、ＤＢ３０１に記録された映像等を表示させる。

外部イベント受信部２０１は、中央監視装置１００と検出センサＳ１０、Ｓ２０を接続するための接続ポートである。ポートの形式は検出センサＳ１０、Ｓ２０の接続方式に応じて適宜採用することができる。また、検出センサＳ１０、Ｓ２０の制御を行うための制御信号の送信部としても機能することができる。

情報送受信部２０２は、中央監視装置１００とネットワーク４００を接続するための接続ポートである。本実施形態では接続ポートとしてＬＡＮポートを採用しているが、ネットワークの種類に応じて適宜変更することができる。

（記録装置３００）
記録装置３００は映像ＤＢ３０１、イベントＤＢ３０２としての機能を備える記録用サーバーとして構成される。記録媒体として複数のＨＤＤを備えており、また接続ポートとして、ネットワーク４００と接続するためのＬＡＮポート及びＧＰＳ受信機Ｇ２０との接続方式に応じた接続ポートを備える。

映像ＤＢ（Ｄａｔａｂａｓｅ）３０１は、ネットワーク４００を介してストリーム伝送される各カメラにより撮影された映像を記録する記録領域である。

イベントＤＢ（Ｄａｔａｂａｓｅ）３０２は、ネットワーク４００を介して受信した後述するイベント情報を記録する記録領域である。

また、記録装置３００におけるユーザーが設定をした所定の記録領域には、ＧＰＳ受信機Ｇ２０から送信された対象情報が記録される。そして、記録装置３００において、映像ＤＢ３０１に記録された映像と対象情報とが受信時刻等に基づき関連付けられる。

（ネットワーク４００）
ネットワーク４００はＬＡＮによる通信網として構成され、ＬＡＮケーブルやＨＵＢ、スイッチングＨＵＢ等のネットワーク機器を備える。

なお、ネットワークとしては有線ＬＡＮに限られず、無線ＬＡＮやＷＡＮ（ＷｉｄｅＡｒｅａＮｅｔｗｏｒｋ）、ＶＡＮ（Ｖａｌｕｅ-ＡｄｄｅｄＮｅｔｗｏｒｋ）、衛星通信網や移動通信網を採用してもよい。

次に、監視システム１における特徴的な処理について説明をする。以下で説明をする処理手順は一例であり、一部について処理順序を変更しても同様の結果を得られるのであれば、適宜変更することが許容される。また、一部処理の追加や削除についても求められる機能に応じて許容される。

（映像分析処理）
映像分析処理は、映像分析部２１１が実行する処理であって、ネットワーク４００を介してストリーム伝送される映像データを解凍し、その映像に基づきイベントの発生を検出するための分析を行う処理である。

具体的には、映像におけるモーションピクセル（動きがある部分のピクセル）を検出し、検出したモーションピクセルをグループ化してモーションピクセル群を生成する。当該生成されたモーションピクセル群を利用して、移動する物体の移動経路を特定し、予め設定された行動パターン情報と一致するか否かを判定する。行動パターン情報と一致すると判定された場合には、イベントが発生したものとして検出される。

行動パターン情報としては、監視エリア４０への侵入、監視エリア４０からの離脱、監視エリア４０における指定箇所の通過、うろつき、転倒、物の置き去り等が設定されている。従って、これらの行動パターンが検出対象のイベントとなる。

（イベント連動処理）
イベント連動処理は、中央制御部２１０（イベント連動処理部）が実行する処理であって、イベント情報を生成するための処理である。以下、図２に示すフローチャートを参照しながら説明をする。

Ｓ１０１において、映像分析処理によってイベントの発生を検出したか否かを判断する。イベントの発生を検出した場合には、Ｓ１０３に進む。一方、イベントの発生を検出しなかった場合にはＳ１０２に進む。

Ｓ１０２において、検出センサＳ１０、Ｓ２０によって外部イベントの発生を検出したか否かを判断する。外部イベントの発生を検出した場合には、Ｓ１０３に進む。一方、イベントの発生を検出しなかった場合にはＳ１０１に戻る。

Ｓ１０３において、発生したイベント又は外部イベントに関する情報を特定する。具体的には、イベント又は外部イベントが発生した監視エリア、発生したイベント又は外部イベントの種類、イベント又は外部イベントが発生した時間、イベント又は外部イベントが終了した時間、イベント又は外部イベントが発生していた期間、等を特定する。そして、次のステップであるＳ１０４に進む。

Ｓ１０４において、イベント又は外部イベントの発生時の対象情報を取得する。具体的には、ＧＰＳ受信機Ｇ２０から受信したＮＭＥＡ０８１３フォーマットの情報から貨物船の緯度や経度、移動速度や移動方向、船首方向を取得する。そして、次のステップであるＳ１０５に進む。

Ｓ１０５において、Ｓ１０３で特定したイベント又は外部イベントに関する情報と、Ｓ１０４で取得した対象情報とを関連付けて一のイベント情報を生成する。そして、次のステップであるＳ１０６に進む。

Ｓ１０６において、生成されたイベント情報をイベントＤＢ３０２に記録する。このように記録されたイベント情報は、イベントＤＢ３０２においてリスト化されてイベントリストとして参照可能となる。そして、最初のステップであるＳ１０１に戻る。

このように、イベント連動処理においては全ての種類のイベント及び外部イベントの発生を検出し、また発生したイベント又は外部イベントに関する情報と対象情報とを関連付けたイベント情報をイベントＤＢ３０２に記録することで、当該イベント情報を表示装置２０に表示する又はプリントアウトする等によって参照すれば、発生したイベント又は外部イベントの種類等のみならず、イベント又は外部イベントの発生時における貨物船の位置や移動方向等も一括して確認することができる。
すなわち、異常が発生した際における監視対象の動向を簡単且つ迅速に確認することが可能となる。

次に、監視システム１における表示装置２０の表示内容について説明をする。以下で説明をする表示内容は一例であり、表示内容の表示態様（位置や大きさ等）を変更しても同様の効果を得られるのであれば、適宜変更することが許容される。また、表示内容の追加や削除についても求められる機能に応じて許容される。

（ＧＵＩ３０）
ＧＵＩ３０は、表示装置２０に表示される監視用画面のなかでも基本的な画面（すなわち、各詳細機能を実行する前の初期画面）となる。主な表示内容として、機能アイコン領域３１、監視映像領域３２、ＰＴＺカメラ操作領域３３、ＧＰＳ情報領域３４が表示される。以下、図３に示すＧＵＩ３０の模式図を参照しながら説明をする。

機能アイコン領域３１は、表示画面の最上部において横方向に並べられた複数のアイコンから成るツールバーである。各アイコンの表示態様及び機能の説明は省略するが、例えば表示させる監視映像の検索及び選択をする機能を呼び出すためのアイコンや、イベントリストの検索及び選択をする機能を呼び出すためのアイコン、各種情報の保存先をユーザーが指定する機能を呼び出すためのアイコンが表示されている。

監視映像領域３２は、各カメラが撮影した映像（リアルタイム映像、過去に記録した映像）を表示する映像表示領域であって、表示画面の略中央に表示画面の大半を占める大きさで表示される。図３の状態では、監視映像領域３２の映像表示領域を更に左上領域３２ａ、左下領域３２ｂ、右上領域３２ｃ、右下領域３２ｄに分けている。各領域ではいずれも撮影された映像を表示するが（右上領域３２ｃ及び右下領域３２ｄは図示省略）、各領域に応じて異なる日時、異なる監視エリアの映像を表示することができる。

ＰＴＺカメラ操作領域３３は、映像監視領域３２の左側且つＧＰＳ情報領域３４の上側に表示される操作ウィンドウである。ＰＴＺカメラ操作領域３３には、パン・チルト操作領域３３ａ、カメラ機能アイコン３３ｂ、ズーム操作領域３３ｃが含まれる。パン・チルト操作領域３３ａ及びズーム操作領域３３ｃに対してユーザーが要求操作を行うことで、現在撮影をしているＰＴＺカメラのパン、チルト、ズームを変更することができる。カメラ機能アイコン３３ｂにおける各アイコンの表示態様及び機能の説明は省略するが、例えば、特定の対象を追従するようにパン、チルト、ズームを変更しながら撮影をする追跡撮影機能の対象を指定する機能を呼び出すためのアイコンや、ＰＴＺカメラの撮影モード（フォーカスや撮影状況に応じた最適化）を選択する機能を呼び出すためのアイコンが表示されている。

ＧＰＳ情報領域３４は、映像監視領域３２の左側且つＰＴＺカメラ操作領域３３の下側に表示される、現在の対象情報に関する情報表示ウィンドウである。図３の状態では、「０２／０６／１０１２：２１：０２」は現在の日時を表示しており、「３８°０２．４００′Ｎ」は貨物船の緯度を表示しており、「１２３°３１．６５３′Ｗ」は貨物船の経度を表示しており、「ＳＯＧ２０．０Ｋｎ」は対地速度を表示しており、「ＣＯＧ２８１．０°」は対地方位を表示している。表示内容についてはこれに限られず、ユーザーの要求操作によってＨＤＴ（船首方位）等の種々の対象情報を表示することができる。

（映像表示領域）
図４は、映像表示領域に表示される映像の内容を例示するための模式図である。また、当該模式図は左上領域３２ａを拡大した図となる。左上領域３２ａでは、洋上における貨物船の甲板を撮影した映像を表示している。具体的には、図の中央における台形状のものが甲板となり、甲板の左右部分が海となる。また、甲板上には作業員や貨物が存在していることを表している。

この図においては、甲板が監視エリア４０として指定されている。具体的には、ユーザーの指定操作によって、カメラの撮影範囲に含まれる全景（図４の表示内容すべて）のうち、甲板の部分のみが監視エリア４０として指定されている。
このように、本実施形態ではユーザーの指定操作に応じて撮影範囲における任意の範囲を監視エリア４０として指定することができる。

また、映像表示領域に表示される内容としては、撮影された映像の他にも映像の下部に対象情報表示４１が表示される。この対象情報表示４１は表示されている映像の撮影時点における対象情報であり、図４においては緯度及び経度が表示されている。
このように、本実施形態では記録した映像と当該映像を記録した時点における対象情報が関連付けて記録されているため、当該映像を表示するに際して同時に対象情報が表示することが可能となる。従って、異常が発生した際における監視対象の動向を、実際の映像を交えながら簡単且つ迅速に確認することが可能となる。なお、表示する対象情報は緯度及び経度に限られずユーザーの要求操作によって種々の対象情報を表示することができる。

（イベントリスト（ＥｖｅｎｔＬｉｓｔ））
図５は、表示装置２０に表示されるイベントリストの内容を例示するための模式図である。イベントリストにおける一番上の行には列毎にイベント情報における各項目が表示される。そして、２行目以降からは記録されたイベント情報が表示される。以下では、具体的な表示内容を２行目に表示されているイベント情報を参照しながら説明する。なお、以下の説明における「イベント」では映像分析に基づくイベントと外部イベントの両方を指す。

項目「ＣａｍｅｒａＩＤ」では、イベントを撮影したカメラのＩＤが表示される。項目「ＳｙｓｔｅｍＮａｍｅ」では、イベントを撮影した監視システムの名称が表示される。項目「ＣａｍｅｒａＮａｍｅ」では、イベントを撮影したカメラの名称が表示される。項目「ＥｖｅｎｔＺｏｎｅＮａｍｅ」では、イベントの発生を検出した監視エリアの名称が表示される。

項目「ＥｖｅｎｔＴｙｐｅ」では、発生したイベントの種類が表示される。すなわち、２行目のイベント情報ではイベントである「Ｌｏｉｔｅｒｉｎｇ（うろつき）」の発生が映像分析処理によって検出されたことを示している。なお、４行目のイベント情報ではイベントである「Ｈｅａｔ（熱感知）」の発生が検出センサＳ１０によって検出されたことを示している。

項目「ＳｔａｒｔＴｉｍｅ」では、イベントの発生が検出された時間が表示される。項目「ＥｎｄＴｉｍｅ」では、発生したイベントが終了した時間が表示される。項目「Ｄｕｒａｔｉｏｎ（ｓｅｃ）」では、イベントが発生していた期間（秒単位）が表示される。

項目「Ｌａｔｉｔｕｄｅ」では、イベントの発生時における緯度が表示される。項目「Ｌｏｎｇｉｔｕｄｅ」では、イベントの発生時における経度が表示される。項目「ＨＤＴ」では、イベントの発生時における船首方位が表示される。
このように、本実施形態ではイベントの発生に関する情報のみならず同時に対象情報についてもリスト形式で表示することが可能となる。従って、異常が発生した際における監視対象の動向を、一体的な情報表示によって簡単且つ迅速に確認することが可能となる。なお、表示する対象情報は緯度及び経度に限られずユーザーの要求操作によって種々の対象情報を表示することができる。

最後に、上述の実施の形態の変形例について説明する。
上述の実施の形態では、記録した映像と当該映像を記録した時点における対象情報を、当該映像を記録する時点で関連付けて記録させていたが、これに限定されるものではなく、映像を記録する時点では対象情報との関連付けを行わず、記録された映像を表示するときに、表示する映像の撮影時間に対応した対象情報を別途呼び出して同時に表示するようにしてもよい。
このようにした場合でも、異常が発生した際における監視対象の動向を、実際の映像を交えながら簡単且つ迅速に確認することが可能となる。

上述の実施の形態では、対象情報を取得するためにＧＰＳ機能を利用しているが、これに限定されるものではなく、ＧＰＳ機能以外の衛星測位システムを利用してもよい。また、監視対象が貨物列車や輸送車両など陸上を移動するものであるならば、衛星測位システム以外の位置測位システムを利用してもよい。例えば、携帯通信端末を利用して携帯通信端末と通信基地局との通信状況から携帯通信端末の所在である監視対象の位置を特定することが考えられる。

上述の実施の形態では、図１に示すような装置構成及び接続構成によって監視システム１が構築され、本発明に係る監視システムが実現されているが、図６に示すような装置構成及び接続構成による監視システム２であっても本発明に係る監視システムを実現することができる。

監視システム２と監視システム１とで大きく異なる点としては、監視システム１における中央監視装置１００の代わりにネットワークビデオレコーダー５００がネットワーク４００に接続されている点、監視システム１では記録用サーバーとして記録装置３００が独立してネットワーク４００に接続されていたが、監視システム２ではネットワークビデオレコーダー５００に搭載される記録装置（ＨＤＤ）となっている点、クライアントＰＣ６００、６０１、６０２がネットワーク４００に接続されている点、となる。

ネットワークビデオレコーダー５００は、制御部２００、情報送受信部２０２、記録装置３００を備える処理装置である。ネットワーク４００を介して、検出センサＳ１０、Ｓ２０、ＰＴＺカメラＰＣ１０、ＰＣ２０、ＣＣＴＶカメラＣＣ１０、ＣＣ２０、ＧＰＳ受信機Ｇ２０から映像データや各種情報を取得し、各機能部によって処理を実行する。取得する情報や実行する処理の内容は、監視システム１における各機能部が実行する処理と同一であるため説明を省略する。
また、ネットワークビデオレコーダー５００には入力装置や表示装置が接続されておらず、クライアントＰＣからの処理命令に基づいて記録された映像、イベントリストの呼び出しを行い、処理命令を行ったクライアントＰＣに対して映像データやイベントリストに関する情報等を送信する。

クライアントＰＣ６００、６０１、６０２は、ユーザーが直接的に利用をする端末であり、各クライアントＰＣにおける入力装置と表示装置によってユーザーは監視を行う。上述のＧＵＩはクライアントＰＣにインストールされたソフトウェアの一機能として、表示装置に表示される。ユーザーがＧＵＩを利用して要求操作を行うことでネットワークビデオレコーダー５００において処理が実行される。また、ネットワークビデオレコーダー５００から受信をした映像データや各種情報に基づき、クライアントＰＣの表示制御部が記録された映像やイベントリスト等を当該クライアントＰＣの表示装置に表示させる処理を実行する。

１監視システム
Ｓ１０、Ｓ２０検出センサ
ＰＣ１０、ＰＣ２０ＰＴＺカメラ
ＣＣ１０、ＣＣ２０ＣＣＴＶカメラ
Ｇ１０ＧＰＳアンテナ
Ｇ２０ＧＰＳ受信機
１００中央監視装置
２００制御部
２１０中央制御部（イベント連動処理部）
２１１映像分析部
３００記録装置
３０１映像ＤＢ
３０２イベントＤＢ
４００ネットワーク
２監視システム
５００ネットワークビデオレコーダー
６００〜６０２クライアントＰＣ

そこで、本発明は、上記の問題を解決するためになされたものであって、移動をする監視対象において監視を行う場合に、異常が発生した際における監視対象の動向を確認することが可能な監視システム及び制御プログラムの提供を目的とする。

（１）本発明に係る監視システムは、監視対象に設置され、当該監視対象における監視領域を撮影するカメラ装置と、前記カメラ装置が撮影した映像に基づき特定事象の発生を検出する映像分析部と、前記監視対象に設置され、当該監視対象の位置情報を取得する位置情報取得部と、前記位置情報取得部が取得した前記位置情報に基づき、少なくとも前記監視対象の位置を特定する対象情報を生成する対象情報特定部と、前記映像分析部が前記特定事象の発生を検出したとき、当該特定事象に関する情報と当該特定事象の発生時における前記対象情報とを関連付けて特定連動情報として生成する特定事象連動処理部と、前記特定連動情報を記録する特定事象記録部と、前記カメラ装置が撮影した映像を前記対象情報と関連付けて記録する映像記録部と、前記映像記録部に記録された映像を表示可能な表示装置と、前記映像記録部に記録された複数の映像からいずれかを選択して前記表示装置に表示させる表示制御部と、を備え、前記表示制御部は、前記表示装置において、少なくとも撮影された日時が異なる複数の映像を、表示領域を異ならせて同時に表示させることが可能であり、選択した映像と当該映像に関連付けられた前記対象情報とを重ねて１つの映像として同時に表示させることを特徴とする。

（２）また、本発明に係る監視システムは、前記表示制御部は、前記表示装置において、監視領域の現状を表すリアルタイム映像と前記映像記録部に記録された過去の映像を、表示領域を異ならせて同時に表示させることが可能であることを特徴とする。

（３）また、本発明に係る監視システムは、前記表示制御部は、前記表示装置において、選択した映像及び当該映像に関連付けられた前記対象情報と、現在の前記対象情報とを、表示領域を異ならせて同時に表示させることが可能であることを特徴とする。

（４）また、本発明に係る監視システムは、前記映像分析部は、映像における動きがある部分のピクセルに基づき移動する物体の移動経路を特定し、予め定められた複数の行動パターン情報と一致するか否かを判定し、一致すると判定した場合に一致した前記行動パターン情報に対応した前記特定事象の発生を検出することを特徴とする。

（５）また、本発明に係る監視システムは、外部特定事象の発生を検出するための検出センサと、を備え、前記特定事象連動処理部は、前記検出センサが前記外部特定事象の発生を検出したとき、当該外部特定事象に関する情報と当該外部特定事象の発生時における前記対象情報とを関連付けて前記特定連動情報として生成し、前記対象情報特定部が生成する前記対象情報は、前記監視対象の移動速度及び当該監視対象の移動方向についても特定することを特徴とする。

（６）また、本発明に係る制御プログラムは、コンピュータに、監視対象に設置されたカメラ装置によって、当該監視対象における監視領域を撮影するステップと、撮影した映像に基づき特定事象の発生を検出するステップと、前記監視対象に設置された位置情報取得部によって、当該監視対象の位置情報を取得するステップと、取得した前記位置情報に基づき、少なくとも前記監視対象の位置を特定する対象情報を生成するステップと、前記特定事象の発生を検出したとき、当該特定事象に関する情報と当該特定事象の発生時における前記対象情報とを関連付けて特定連動情報として生成するステップと、前記特定連動情報を記録するステップと、前記カメラ装置が撮影した映像を前記対象情報と関連付けて記録するステップと、記録された複数の映像から、少なくとも撮影された日時が異なる複数の映像を選択して表示装置において表示領域を異ならせて同時に表示させるステップと、選択した映像と当該映像に関連付けられた前記対象情報とを重ねて１つの映像として同時に表示させるステップと、を実行させることを特徴とする。

本発明によれば、移動をする監視対象において監視を行う場合に、異常が発生した際における監視対象の動向を確認することが可能な監視システム及び制御プログラムを提供することができる。

Claims

監視対象に設置され、当該監視対象における監視領域を撮影するカメラ装置と、
前記カメラ装置が撮影した映像に基づき特定事象の発生を検出する映像分析部と、
前記監視対象に設置され、当該監視対象の位置情報を取得する位置情報取得部と、
前記位置情報取得部が取得した前記位置情報に基づき、少なくとも前記監視対象の位置を特定する対象情報を生成する対象情報特定部と、
前記映像分析部が前記特定事象の発生を検出したとき、当該特定事象に関する情報と当該特定事象の発生時における前記対象情報とを関連付けて特定連動情報として生成する特定事象連動処理部と、
前記特定連動情報を記録する特定事象記録部と、
を備えることを特徴とする監視システム。
前記カメラ装置が撮影した映像を前記対象情報と関連付けて記録する映像記録部と、
前記映像記録部に記録された映像を表示可能な表示装置と、
前記映像記録部に記録された複数の映像からいずれかを選択して前記表示装置に表示させる表示制御部と、を備え、
前記表示制御部は、
選択した映像と同時に、当該映像に関連付けられた前記対象情報を表示装置に表示させることを特徴とする請求項１記載の監視システム。
外部特定事象の発生を検出するための検出センサと、を備え、
前記特定事象連動処理部は、
前記検出センサが前記外部特定事象の発生を検出したとき、当該外部特定事象に関する情報と当該外部特定事象の発生時における前記対象情報とを関連付けて前記特定連動情報として生成することを特徴とする請求項１又は２記載の監視システム。
前記対象情報特定部が生成する前記対象情報は、前記監視対象の移動速度及び当該監視対象の移動方向についても特定することを特徴とする請求項１乃至３のいずれか１項に記載の監視システム。
監視対象に設置されたカメラ装置によって、当該監視対象における監視領域を撮影するステップと、
撮影した映像に基づき特定事象の発生を検出するステップと、
前記監視対象に設置された位置情報取得部によって、当該監視対象の位置情報を取得するステップと、
取得した前記位置情報に基づき、少なくとも前記監視対象の位置を特定する対象情報を生成するステップと、
前記特定事象の発生を検出したとき、当該特定事象に関する情報と当該特定事象の発生時における前記対象情報とを関連付けて特定連動情報として生成するステップと、
前記特定連動情報を記録するステップと、
を有することを特徴とする監視情報の記録方法。
コンピュータに、
監視対象に設置されたカメラ装置によって、当該監視対象における監視領域を撮影するステップと、
撮影した映像に基づき特定事象の発生を検出するステップと、
前記監視対象に設置された位置情報取得部によって、当該監視対象の位置情報を取得するステップと、
取得した前記位置情報に基づき、少なくとも前記監視対象の位置を特定する対象情報を生成するステップと、
前記特定事象の発生を検出したとき、当該特定事象に関する情報と当該特定事象の発生時における前記対象情報とを関連付けて特定連動情報として生成するステップと、
前記特定連動情報を記録するステップと、
を実行させることを特徴とする制御プログラム。