JP6704360B2

JP6704360B2 - 映像表示システム及び方法

Info

Publication number: JP6704360B2
Application number: JP2017003728A
Authority: JP
Inventors: 小山　貴之; 貴之小山; 紘樹松岡; 桂山本; 小林　祐一; 祐一小林
Original assignee: Hitachi Building Systems Co Ltd
Current assignee: Hitachi Building Systems Co Ltd
Priority date: 2017-01-12
Filing date: 2017-01-12
Publication date: 2020-06-03
Anticipated expiration: 2037-01-12
Also published as: JP2018113628A

Description

本発明は、映像表示システム及び方法に関し、例えば防犯カメラの撮影映像の映像データに基づく監視用映像を表示する映像表示システムに適用して好適なものである。

従来、建物の玄関や、廊下などの通路及びエレベータの乗りかご内などに防犯カメラを設置し、これら防犯カメラにより撮影された映像を記録装置に蓄積するようになされた映像監視システムが広く用いられている。この種の映像監視システムによれば、要時に記録装置に蓄積された映像を検索及び再生することにより、不審者や侵入者の特定や、設備機器の故障監視を行うことができる。

また、特に中規模以上の建物に設置される映像監視システムでは、一般的に防犯カメラが複数台設置され、これら防犯カメラからそれぞれ出力された映像に基づく複数の映像を一画面内に分割表示する表示機能が搭載されている。これにより有事の際に建物全体の状況を容易に確認することができる。

この種の映像データ蓄積システムの１つとして、例えば特許文献１には、１つの画面に同時に表示されている複数台の防犯カメラの撮影映像の映像データを高精細に保存することにより、有事の際、保存された防犯カメラの鮮明な撮影映像により状況の確認を行い得るようする技術が開示されている。

特開２０１１−１７６４０５号公報

ところが、かかる特許文献１に開示された技術によると、保存された防犯カメラの撮影映像が高精細であればあるほど映像表示の応答性が低下するため、防犯カメラにより撮影された映像を確認する際、確認したい映像の詳細な日時が曖昧な場合や、注目すべき防犯カメラの映像を何度も確認したい場合などに、その箇所の撮影映像を素早く検索し難い問題があった。

本発明は以上の点を考慮してなされたもので、保存された防犯カメラの撮影映像の検索を素早く行い得るようにし、有事の際の状況確認に要する時間を低減させ得る映像表示システム及び方法を提案しようとするものである。

かかる課題を解決するため本発明においては、複数のカメラの撮影映像の映像データをそれぞれ蓄積し、蓄積した映像データに基づく映像を端末に表示する映像表示システムにおいて、前記複数のカメラの各前記映像データをそれぞれ格納する第１の映像記録装置と、前記複数のカメラの各前記映像データにそれぞれ基づく各前記撮影映像の縮小映像を一つの画面に集約した合成映像を生成する合成映像生成部と、前記合成映像の映像データを格納する第２の映像記録装置と、前記カメラが設置された各監視箇所にそれぞれ設置され、当該監視箇所における異常を検出する防犯センサと、各前記防犯センサの出力に基づいて各前記監視箇所における異常の有無を判定する監視端末装置と、前記第２の映像記録装置に格納された前記映像データを出力する検索映像出力部、前記第１の映像記録装置に格納された前記映像データを出力する詳細映像出力部及び詳細映像の指定を受け付ける映像指定受付部とを有し、前記合成映像生成部は、前記監視端末装置の判定結果に基づいて、当該監視端末装置がいずれかの前記監視箇所の異常を検出した場合には、当該監視箇所に設置された前記カメラの前記撮影映像の前記縮小映像を強調した前記合成映像を生成し、前記検索映像出力部は、前記合成映像の前記映像データを前記端末に送信し、前記映像指定受付部は、前記検索映像出力部から出力された前記映像データに基づき前記端末に表示された前記合成映像の各前記縮小映像のうちのいずれかの前記縮小映像が指定されたときに当該端末から与えられる当該縮小映像に対応する前記カメラの識別子と撮影時刻の指定を受け付け、前記詳細映像出力部は、前記映像指定受付部が受け付けた前記カメラの識別子及び前記撮影時刻に対応する前記撮影映像の前記映像データを前記第１の映像記録装置から読み出して前記端末に送信し、前記合成映像生成部は、同一時刻に前記複数のカメラによりそれぞれ撮影された各前記撮影映像を所定時間ごとに区切って合成した前記合成映像を順次生成して前記第２の映像記録装置に格納すると共に、各前記合成映像を前記第２の映像記録装置に格納した日時と、前記第２の映像記録装置における当該合成映像が格納された記憶領域へのポインタとを対応づけて合成映像管理テーブルに格納し、前記検索映像出力部は、前記端末から日時を指定した前記合成映像の映像データの転送要求が与えられた場合に、当該転送要求において指定された前記日時と対応づけられた前記ポインタを前記合成映像管理テーブル上で検索し、当該検索により検出した前記ポインタで示された前記第２の映像記録装置内の前記記憶領域から前記合成映像の映像データを読み出して前記端末に送信するようにした。

また本発明においては、複数のカメラの撮影映像の映像データをそれぞれ蓄積し、蓄積した映像データに基づく映像を端末に表示する映像表示システムにおける映像表示方法であって、前記映像表示システムは、前記複数のカメラの各前記映像データをそれぞれ格納する第１の映像記録装置と、前記複数のカメラの各前記映像データにそれぞれ基づく各前記撮影映像の縮小映像を一つの画面に集約した合成映像を生成する合成映像生成部と、前記合成映像の映像データを格納する第２の映像記録装置と、前記カメラが設置された各監視箇所にそれぞれ設置され、当該監視箇所における異常を検出する防犯センサと、各前記防犯センサの出力に基づいて各前記監視箇所における異常の有無を判定する監視端末装置と、前記第２の映像記録装置に格納された前記映像データを出力する検索映像出力部、前記第１の映像記録装置に格納された前記映像データを出力する詳細映像出力部及び詳細映像の指定を受け付ける映像指定受付部とを有し、前記合成映像生成部が、前記監視端末装置の判定結果に基づいて、当該監視端末装置がいずれかの前記監視箇所の異常を検出した場合には、当該監視箇所に設置された前記カメラの前記撮影映像の前記縮小映像を強調した前記合成映像を生成する第１のステップと、前記検索映像出力部が、前記合成映像の前記映像データを前記端末に送信する第２のステップと、前記映像指定受付部が、前記検索映像出力部から出力された前記映像データに基づき前記端末に表示された前記合成映像の各前記縮小映像のうちのいずれかの前記縮小映像が指定されたときに当該端末から与えられる当該縮小映像に対応する前記カメラの識別子と撮影時刻の指定を受け付ける第３のステップと、前記詳細映像出力部が、前記映像指定受付部が受け付けた前記カメラの識別子及び前記撮影時刻に対応する前記撮影映像の前記映像データを前記第１の映像記録装置から読み出して前記端末に送信する第４のステップとを設け、前記第１のステップにおいて、前記合成映像生成部は、同一時刻に前記複数のカメラによりそれぞれ撮影された各前記撮影映像を所定時間ごとに区切って合成した前記合成映像を順次生成して前記第２の映像記録装置に格納すると共に、各前記合成映像を前記第２の映像記録装置に格納した日時と、前記第２の映像記録装置における当該合成映像が格納された記憶領域へのポインタとを対応づけて合成映像管理テーブルに格納し、前記第２のステップにおいて、前記検索映像出力部は、前記端末から日時を指定した前記合成映像の映像データの転送要求が与えられた場合に、当該転送要求において指定された前記日時と対応づけられた前記ポインタを前記合成映像管理テーブル上で検索し、当該検索により検出した前記ポインタで示された前記第２の映像記録装置内の前記記憶領域から前記合成映像の映像データを読み出して前記端末に送信するようにした。

本映像表示システム及び方法によれば、データ量が少ない合成映像により映像の検索を行うことができ、必要時には合成映像よりも高精細な防犯カメラの撮影映像によって監視箇所の状況を確認することができる。

本発明によれば、保存された防犯カメラの撮影映像の検索を素早く行い得るようにし、有事の際の状況確認に要する時間を低減させ得る映像表示システム及び方法を実現できる。

本実施の形態による映像表示システムの全体構成を示す概念図である。本実施の形態による映像フォーマットの構成を示す概念図である。（Ａ）は本実施の形態による第１の合成映像の構成を示す概念図であり、（Ｂ）は本実施の形態による第２の合成映像の構成を示す概念図である。第２の映像記録装置における合成映像データのデータフォーマットを示す概念図である。合成映像管理テーブルの構成を示す概念図である。映像データ蓄積処理の処理手順を示すフローチャートである。合成映像生成処理の処理手順を示すフローチャートである。映像表示処理の処理手順を示すフローチャートである。映像データ提供処理の処理手順を示すフローチャートである。

以下図面について、本発明の一実施の形態を詳述する。

（１）本実施の形態による監視用映像表示システムの構成
図１において、１は全体として本実施の形態による監視用映像表示システムを示す。この監視用映像表示システム１は、被監視対象システム１０、監視拠点システム１５及び監視センタシステム２０を備えて構成され、これらがインターネットなどのネットワーク６を介して相互に接続されている。

被監視対象システム１０は、監視対象の建物に設置されたシステムであり、通信装置１１、監視端末装置１２、第１〜第４の防犯カメラ１３Ａ〜１３Ｄ、及び、第１〜第４の防犯センサ１４Ａ〜１４Ｄを備える。

第１〜第４の防犯カメラ１３Ａ〜１３Ｄは、それぞれ監視対象の建物における監視対象となる箇所（以下、これらを監視箇所と呼ぶ）に設置される高精細の防犯用のカメラ装置である。以下においては、第１の防犯カメラ１３Ａは、乗客が閉じ込められていないかを監視するためエレベータの乗りかご内に設置され、第２の防犯カメラ１３Ｂは、不審者の侵入を監視するため建物の裏口に設置されているものとする。また第３の防犯カメラ１３Ｃは、来訪者を撮影するため建物のエントランスに設置され、第４の防犯カメラ１３Ｄは、廊下を通過する人を撮影するため建物の廊下に設置されているものとする。

これら第１〜第４の防犯カメラ１３Ａ〜１３Ｄからは、Ｈ.２６４規格に準拠した圧縮された可変長データ形式の第１〜第４のカメラ映像データが出力される。具体的に、第１〜第４のカメラ映像データは、図２に示すように、Ｉフレーム間に所定数のＰフレームが配置された映像フォーマットを有する。ここでＩフレームは、フレーム内すべての画像データがそのまま保持された、単体で画像を表現可能な静止画像のフレームであり、Ｐフレームは、前のフレームからの差分のみの画像データからなる差分画像のフレームである。Ｐフレームの画像は、直前のＩフレームのデータ（静止画像データ）と、当該Ｉフレームから自フレームまでの各Ｐフレームのデータ（差分画像データ）とに基づいて詳細な映像が生成される。

第１〜第４の防犯センサ１４Ａ〜１４Ｄは、第１〜第４の防犯カメラ１３Ａ〜１３Ｄにそれぞれ対応させて、上述の各監視箇所にそれぞれ設置された防犯センサである。以下においては、第１の防犯センサ１４Ａは、エレベータの乗りかご内の異常を検知するための防犯センサであり、第２の防犯センサ１４Ｂは、建物の裏口の異常を検知するための防犯センサであるものとする。また第３の防犯センサ１４Ｃは、建物のエントランスの来訪者操作機器の異常を検知するための防犯センサであり、第４の防犯センサ１４Ｄは、建物の廊下において夜間などの通常は人が通行しない時間帯における人の通過を検出するための防犯センサであるものとする。

監視端末装置１２は、例えばパーソナルコンピュータ装置などから構成される。監視端末装置１２は、第１〜第４の防犯センサ１４Ａ〜１４Ｄからそれぞれ出力されるセンサ情報に基づいて各監視箇所の異常の有無をそれぞれ判定し、異常を検知したときに、その異常を検知した監視箇所に設置されている第１〜第４の防犯カメラ１４Ａ〜１４Ｄの識別番号を含むイベント情報を通信装置１１を介して監視センタシステム２０及び監視拠点システム１５に通知する。

通信装置１１は、例えばＮＩＣ（Network Interface Card）などから構成され、第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の映像データ（以下、これらをそれぞれ第１〜第４のカメラ映像データと呼ぶ）をネットワーク６を介して監視センタシステム２０に送信したり、監視端末装置１２から与えられる上述のイベント情報をネットワーク６を介して監視センタシステム２０に送信する。

監視センタシステム２０は、被監視対象システム１０から送信されてきた第１〜第４のカメラ映像データと、イベント情報とに基づいて所定構成の合成映像を生成する機能を有するシステムである。この監視センタシステム２０は、制御装置２１、通信装置２２、第１の映像記録装置２３及び第２の映像記録装置２４を備えて構成される。

制御装置２１は、被監視対象システム１０から送信されてきた第１〜第４のカメラ映像データを第１の映像記録装置２３に格納したり、第１の映像記録装置２３に格納した第１〜第４のカメラ映像データに基づいて、被監視対象システム１０の第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の縮小映像を一画面に集約した合成映像を生成する機能を有するコンピュータ装置である。制御装置２１は、生成した合成映像の映像データを第２の映像記録装置２４に格納すると共に、当該映像データを要求に応じて被監視対象システム１０に送信する。

この制御装置２１は、ＣＰＵ（Central Processing Unit）２５及びメモリ２６などの情報処理資源を備えて構成される。ＣＰＵ２５は、監視センタシステム２０の全体の動作制御を司るプロセッサである。またメモリ２６は、例えば揮発性の半導体メモリから構成され、ＣＰＵ２５のワークメモリとして利用される。ＣＰＵ２５がメモリ２６に格納されたプログラムを実行することにより、制御装置２１全体として後述のような各種処理を実行する。

第１の映像記録装置２３は、例えばハードディスク装置又はＳＳＤ（Solid State Drive）などの大容量の不揮発性記憶装置から構成され、上述のように被監視対象システム１０から送信されてきた第１〜第４のカメラ映像データをそれぞれ蓄積するために利用される。実際上、第１〜第４のカメラ映像データは、それぞれ第１の映像記録装置２３が提供する記憶領域上に定義された第１〜第４のカメラ映像データ領域５Ａ〜５Ｄのうちの対応する第１〜第４のカメラ映像データ領域５Ａ〜５Ｄにそれぞれ格納される。

また第２の映像記録装置２４は、ハードディスク装置又はＳＳＤなどの大容量の不揮発性記憶装置から構成され、制御装置２１により生成された合成映像の映像データを蓄積するために利用される。実際上、合成映像の映像データは、第２の映像記録装置２４が提供する記憶領域上に定義された合成映像データ領域５０に格納される。

通信装置２２は、ＮＩＣなどから構成され、被監視対象システム１０や監視拠点システム１５との通信時におけるプロトコル制御を行う。

監視拠点システム１５は、被監視対象システム１０を監視する監視員が常駐するための拠点に設置されたシステムである。本実施の形態の場合においては、監視拠点は被監視対象システム１０に対応付けられて設けられているため、監視拠点システム１５も被監視対象システム１０に対応付けて設けられることになる。

この監視拠点システム１５は、監視員が駐在する監視拠点に設けられ、通信装置１６及び監視端末１７を備えて構成される。通信装置１６はＮＩＣなどから構成され、被監視対象システム１０との通信時におけるプロトコル制御を行う。監視端末１７は、例えばパーソナルコンピュータ、ワークステーション又は携帯電話端末などから構成され、ネットワーク６を介して監視センタシステム２０から送信される上述の合成映像の映像に基づいて、制御装置２１により生成された合成映像を表示する。

（２）制御装置に搭載された各種機能
次に、監視センタシステム２０の制御装置２１に搭載された各種機能について説明する。本実施形態の場合、監視用映像表示システム１の制御装置２１には、被監視対象システム１０から与えられるイベント情報に基づいて、監視対象の建物内のいずれかの監視箇所において異常が検出された場合と、異常が検出されていない場合とで異なる形態の合成映像を生成する合成映像生成機能が搭載されている。

また制御装置２１には、監視員の操作に応じて監視拠点システム１５の監視端末１７から与えられる日時を指定した合成映像データの転送要求（以下、これを合成映像データ転送要求と呼ぶ）に応じて、指定された日時の合成映像の映像データをその監視端末１７に送信すると共に、その監視端末１７に表示された合成画面を構成するいずれか１つの第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の縮小映像が監視員により選択されたときに、その撮影映像の映像データ（第１〜第４のカメラ映像データ）を監視端末１７に提供する映像データ提供機能も搭載されている。

実際上、制御装置２１は、第１の映像記録装置２３に蓄積された第１〜第４のカメラ映像データに基づいて、被監視対象システム１０の第１〜第４の防犯カメラ１３Ａ〜１３Ｄにより同一時刻にそれぞれ撮影された合計４つの映像を所定時間（以下、１秒単位とする）ごとに区切って合成した合成映像を順次生成する。

この際、制御装置２１は、被監視対象システム１０からイベント情報が送信されてこなかった（つまり被監視対象システム１０の監視端末装置１２が異常を検出しなかった）時間帯については、図３（Ａ）に示すように、第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像をそれぞれ同じ大きさに縮小した各縮小映像３１〜３４を一画面内に並べた構成を有する合成映像（以下、これを第１の合成映像と呼ぶ）３０を生成する。

また制御装置２１は、被監視対象システム１０からイベント情報が送信されてきた（つまり被監視対象システム１０の監視端末装置１２が異常を検出した）時間帯については、図３（Ｂ）に示すような合成映像（以下、これを第２の合成映像４０と呼ぶ）を生成する。

この第２の合成映像４０では、監視端末装置１２が異常を検知した監視箇所に設置された第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の縮小映像４１が、監視端末装置１２が異常を検知しなかった監視箇所に設置された第１〜第４の防犯カメラ１３Ａ〜１３Ｄの第１〜第４の撮影映像の縮小映像４２〜４４よりも大きく表示される。

そして監視端末装置１２が異常を検知しなかった各監視箇所にそれぞれ設置された第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の縮小映像４２〜４４が、異常が検知された監視箇所に設置された第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の縮小映像４１の右側に上下方向に並べて表示される。

このように第２の合成映像４０では、異常が検知された監視箇所に設置された第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像を、異常が検知されていない監視箇所に設置された第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像よりも大きく表示することで強調する。なお図３（Ｂ）は、監視端末装置１２が、第１の防犯カメラ１３Ａと対応付けられた第１の防犯センサから出力されたセンサ情報に基づいて異常を検知した場合の例を示している。

さらに第２の合成映像４０では、各縮小映像４１〜４４の下側に余白４５が表示される。この余白４５には、イベント情報の種別が表示される。例えば、図３（Ｂ）では第１の防犯カメラ１３Ａと紐づく第１の防犯センサが異常を検知して対応する縮小映像４１が他の縮小映像４２〜４４よりも大きく表示されているため、例えば「カメラＡ異常検知」のように、第１の防犯カメラ１３Ａの名称と異常を検知している旨が余白４５に表示される。

ただし、余白４５を埋めるように、第１の防犯カメラ１３Ａの撮影映像の縮小映像４１が第２の防犯カメラ１３Ｂの撮影映像の縮小映像４２、第３の防犯カメラ１３Ｃの撮影映像の縮小映像４３及び第４の防犯カメラ１３Ｄの撮影映像の縮小映像４４の少なくとも１つの大きさを調整してもよい。

なお第２の映像記録装置２４における第１及び第２の合成映像３０，４０の映像データ（合成映像データ）の格納フォーマットを図４に示す。この図４からも明らかなように、制御装置２１により生成された第１及び第２の合成映像３０，４０の合成映像データは、それぞれ撮影日時や、図３（Ｂ）について上述した余白４５に表示される情報、イベントが発生した場合の当該イベントが発生した監視箇所に設置された第１〜第４の防犯カメラ１３Ａ〜１３Ｄに付与された番号（イベントカメラ番号）などの情報がヘッダ情報として付加されて、連続的に第２の映像記録装置２４の合成映像データ領域５０に順番に格納される。

また制御装置２１は、上述した合成映像データ転送要求が監視端末１７から与えられると、上述した映像データ提供機能に基づいて、指定された日時の合成映像の映像データ（合成映像データ）をその監視端末１７に送信する。

この際、制御装置２１は、指定された日時を挟む前後数分分の第１〜第４のカメラ映像データを第１の映像記録装置２３から先読みしてメモリ２６に一時的に保持しておき、その後、監視端末１７に表示された合成映像を構成するいずれか１つの第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の縮小映像が監視員により選択されたときには、先読みした対応する第１〜第４のカメラ映像データをメモリ２６から読み出して監視端末１７に送信する。

以上のような各種機能を実現するための手段として、監視センタシステム２０のメモリ２６には、図１に示すように、合成映像生成プログラム２７、映像データ提供プログラム２８及び合成映像管理テーブル２９が格納されている。

合成映像生成プログラム２７は、被監視対象システム１０から送信される第１〜第４のカメラ映像データと、イベント情報とに基づいて図３（Ａ）や図３（Ｂ）について上述した第１及び第２の合成映像３０，４０を生成する機能を有するプログラムである。

また映像データ提供プログラム２８は、監視員の操作に応じて監視端末１７から与えられる合成映像データ転送要求に応じて、指定された日時の第１又は第２の合成映像の映像データを第２の映像記録装置２４から読み出してその監視端末１７に転送する機能を有するプログラムである。映像データ提供プログラム２８は、その後、その映像データに基づいて監視端末１７に表示された第１又は第２の合成映像３０，４０内のいずれかの縮小映像３１〜３４，４１〜４４が監視員により選択された場合には、その縮小映像３１〜３４，４１〜４４の元となる第１〜第４のカメラ映像データをその監視端末１７に送信することにより、対応する第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像を監視端末１７に全画面表示させる。

一方、合成映像管理テーブル２９は、第２の映像記録装置２４に格納された合成映像の映像データを管理するために利用されるテーブルであり、図５に示す構成を有する。この合成映像管理テーブル２９では、１つのレコード（行）が１つの（１秒分の）合成映像の映像データに対応する。

合成映像管理テーブル２９では、各レコードがそれぞれ映像日時欄２８Ａ、イベントカメラ番号欄２８Ｂ及び合成映像データポインタ欄２８Ｃに区分されている。そして映像日時欄２８Ａには、対応する合成映像データが生成されて第２の映像記録装置２４に格納された日時が格納される。

またイベントカメラ番号欄２８Ｂには、対応する合成映像が撮影されていた時間帯にいずれの監視箇所においても異常が発生していなかった場合には「０」が格納され、その時間帯にいずれかの監視箇所において異常が発生していた場合には、その異常が発生した監視箇所に設置された第１〜第４の防犯カメラ１３Ａ〜１３Ｄに付与された番号（イベントカメラ番号）が格納される。なお、このときの異常の有無は、被監視対象システム１０から与えられたイベント情報に基づいて判定される。

さらに合成映像データポインタ欄２８Ｃには、第２の映像記録装置２４の合成映像データ領域５０における対応する合成映像データが格納された記憶領域の先頭アドレスがポインタ（以下、これを合成映像データポインタと呼ぶ）として格納される。

（４）合成映像生成機能及び映像データ提供機能に関する各種処理
次に、上述した合成映像生成機能及び映像データ提供機能に関連して本監視用映像表示システム１の制御装置２１により実行される各種処理について説明する。なお、以下においては、各種処理の処理主体を「プログラム」として説明するが、実際上は、その「プログラム」に基づいて制御装置２１のＣＰＵ２５によりその処理が実行されることは言うまでもない。

（４−１）合成映像生成処理
図６は、上述した合成映像生成機能に関連して合成映像生成プログラム２７により合成映像の生成周期（１秒周期）で実行される映像データ蓄積処理ＲＴ１の処理手順を示す。合成映像生成プログラム２７は、この図６に示す処理手順に従って、被監視対象システム１０から送信されてきた第１〜第４のカメラ映像データに基づいて第１又は第２の合成映像を生成する。

実際上、合成映像生成プログラム２７は、この図６に示す映像データ蓄積処理ＲＴ１を開始すると、まず、被監視対象システム１０から送信されてきた第１〜第４のカメラ映像データを受信する（ＳＰ１１）。

続いて、合成映像生成プログラム２７は、そのとき被監視対象システム１０からイベント情報が送信されてきているか否かをチェックし（ＳＰ１２）、チェック結果に基づいて、そのときの合成映像の生成周期内にいずれかの監視箇所の異常が被監視対象システム１０の監視端末装置１２により検知されたか否かを判定する（ＳＰ１３）。

そして合成映像生成プログラム２７は、この判定で否定結果を得ると、被監視対象システム１０から送信されてきた１秒分の第１〜第４のカメラ映像データに基づいて第１の合成映像３０を生成する第１の合成映像生成処理を実行し（ＳＰ１４）、この後ステップＳＰ１６へ進む。

これに対して、合成映像生成プログラム２７は、ステップＳＰ１３の判定で肯定結果を得ると、イベントが発生している監視箇所に配置された第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の縮小映像４１〜４４を他の第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の縮小映像４１〜４４よりも大きくした第２の合成映像４０を生成する第２の合成映像生成処理を実行する（ＳＰ１５）。

次いで、合成映像生成プログラム２７は、ステップＳＰ１４又はステップＳＰ１５で生成した第１又は第２の合成映像に関する必要な情報を合成映像管理テーブル２９へ格納すると共に、生成した第１又は第２の合成映像の映像データ（合成映像データ）を必要なヘッダ情報を付加して第２の映像記録装置２４の合成映像データ領域５０に格納する（ＳＰ１６）。

さらに合成映像生成プログラム２７は、被監視対象システム１０からの第１〜第４のカメラ映像データをそれぞれ第１の映像記録装置２３の第１〜第４のカメラ映像データ領域５Ａ〜５Ｄへそれぞれ格納し（ＳＰ１７）、この後、この映像データ蓄積処理ＲＴ１を終了する。

なお、合成映像データの保存期間は、１カ月や１週間などの、頻繁に監視員に検索されることが想定される一定の期間とする。

ここで図７は、図６のステップＳＰ１４について上述した第１の合成映像生成処理の具体的な処理手順を示す。

合成映像生成プログラム２７は、図６のステップＳＰ１４に進むと、この図７に示す第１の合成映像生成処理ＲＴ２を開始し、まず、第１〜第４の防犯カメラ１３Ａ〜１３Ｄのうちの未処理の１つの第１〜第４の防犯カメラ１３Ａ〜１３Ｄから送信されてきた第１〜第４のカメラ映像データから、そのとき１秒分の合成映像を生成しようとする目的の時刻に対応する第１〜第４のカメラ映像データを切り出す（Ｓ２１）。

続いて、合成映像生成プログラム２７は、ステップＳ２１で切り出した目的の時刻の第１〜第４のカメラ映像データの先頭フレームがＰフレームであるか否かを判断する（ＳＰ２２）。そして合成映像生成プログラム２７は、この判断で否定結果を得るとステップＳＰ２５に進む。

これに対して合成映像生成プログラム２７は、ステップＳＰ２２の判断で肯定結果を得ると、ステップＳＰ２１で切り出した目的の時刻の第１〜第４のカメラ映像データの先頭フレームの直前のＩフレームのデータを対応する第１〜第４のカメラ映像データから抽出する（ＳＰ２３）。

また合成映像生成プログラム２７は、ステップＳ２３で抽出したＩフレームのデータを利用して、ステップＳＰ２１で切り出した１秒分の第１〜第４のカメラ映像データに基づく圧縮されていない目的の時刻から１秒分の完全な映像の映像データを生成する（ＳＰ２４）。

さらに合成映像生成プログラム２７は、各第１〜第４のカメラ映像データについてステップＳＰ２１〜ステップＳＰ２４の処理が完了したか否かを判断し（ＳＰ２５）、否定結果を得るとステップＳＰ２１に戻って、この後、ステップＳＰ２５で肯定結果を得るまでステップＳＰ２１〜ステップＳＰ２６の処理を繰り返す。かくして、この繰返し処理により、各第１〜第４のカメラ映像データに基づく目的の時刻から１秒分の完全な映像の映像データがそれぞれ生成されることになる。

そして合成映像生成プログラム２７は、やがて各第１〜第４のカメラ映像データに基づく目的の時刻から１秒分の完全な映像の映像データをそれぞれ生成し終えることによりステップＳＰ２５で肯定結果を得ると、これら１秒分の映像を図３（Ａ）のように組み合わせた合成映像を生成する（ＳＰ２７）。

ただし、ステップＳＰ２７で生成した合成映像の縦方向及び横方向の画素数はいずれも元の第１〜第４のカメラ映像データに基づく映像の２倍となっている。そこで、合成映像生成プログラム２７は、この後、ステップＳＰ２７で生成した合成映像の縦方向及び横方向のそれぞれについて１画素おきにデータを間引きするなどして合成映像のデータサイズを調整することにより、図３（Ａ）について上述した所定サイズ及び固定長データ形式の第１の合成映像３０の映像データ（合成映像データ）を生成する（ＳＰ２８）。

そして合成映像生成プログラム２７は、この後、この第１の合成映像生成処理ＲＴ２を終了して映像データ蓄積処理ＲＴ１（図６）に戻る。

なお図６のステップＳＰ１５について上述した第２の合成映像生成処理の具体的な処理手順も図７のステップＳＰ２４で生成する合成映像の形態が異なる（第２の合成映像に応じた合成映像を生成する）だけで他の処理内容は同じであるため、ここでの詳細説明は省略する。

（４−２）映像表示処理
一方、図８は、上述した映像データ提供機能に関連して監視端末１７により実行される映像表示処理ＲＴ３の処理手順を示す。監視端末１７は、この図８に示す処理手順に従って、監視員により指定された日時の第１又は第２の合成映像の映像データ（合成映像データ）を取得し、取得した合成映像データに基づく第１又は第２の合成映像を表示する。

実際上、本実施の形態の場合、監視員は、監視拠点システム１５の監視端末１７を操作して、そのとき合成映像（第１又は第２の合成映像３０，４０）を確認したい日時を指定して、その合成映像の表示命令を入力する。

そして監視端末１７は、監視員からかかる表示命令が入力されるとこの映像表示処理を開始し、まず、監視員により指定された日時の合成映像の映像データを転送すべき旨の要求（以下、合成映像データ転送要求と呼ぶ）を監視センタシステム２０の制御装置２１に送信する（ＳＰ３１）。また監視端末１７は、この結果として制御装置２１から転送されてきた合成映像データに基づく監視員により指定された日時の１秒分の第１又は第２の合成映像３０，４０を監視端末１７の画面に表示する（ＳＰ３２）。

続いて、監視端末１７は、ステップＳＰ３２に続いて制御装置２１から転送される次の１秒分の第１又は第２の合成映像の映像データ（合成映像データ）を受信し（ＳＰ３３）、受信した合成映像データに基づく第１又は第２の合成映像３０，４０を表示する（ＳＰ３４）。

次いで、監視端末１７は、そのとき表示している第１又は第２の合成映像３０，４０を構成する、被監視対象システム１０の第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の縮小映像４１〜４４のいずれかがクリックなどにより選択されたか否かを判断する（ＳＰ３５）。

そして監視端末１７は、この判断で否定結果を得るとステップＳＰ３３に戻り、この後、ステップＳＰ３５の判定で肯定結果を得るまでステップＳＰ３３〜ステップＳＰ３５の処理を繰り返す。

これに対して、監視端末１７は、ステップＳＰ３５の判定で肯定結果を得ると、監視員により選択された第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の映像データ（第１〜第４のカメラ映像データ）の転送要求（以下、これをカメラ映像データ転送要求と呼ぶ）を監視センタシステム２０の制御装置２１に送信する（ＳＰ３６）。なお、このカメラ映像データ転送要求には、監視員により選択された縮小映像を撮影した第１〜第４の防犯カメラ１３Ａ〜１３Ｄの識別子（カメラ番号）と、その縮小映像の撮影時刻との指定が含まれる。

また監視端末１７は、この結果として制御装置２１から転送されてきた対応する第１〜第４のカメラ映像データに基づいて、監視員により選択された第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像を、そのときまで表示していた第１又は第２の合成映像３０、４０に代えて全画面表示する（ＳＰ３７）。

この後、監視端末１７は、監視員からかかる撮影映像の表示を終了すべき旨の操作入力を受け付け又はかかる撮影映像を表示し始めてから所定時間が経過したか否かを判断する（ＳＰ３８）。そして監視端末１７は、この判断で否定結果を得るとステップＳＰ３６に戻り、この後、ステップＳＰ３６〜ステップＳＰ３８の処理を繰り返す。

そして監視端末１７は、やがて監視員からかかる撮影映像の表示を終了すべき旨の操作入力を受け付け又はかかる撮影映像を表示し始めてから所定時間が経過することによりステップＳＰ３８で肯定結果を得ると、制御装置２１に映像表示終了通知を送信した後、この映像表示処理ＲＴ３を終了する。

（４−３）映像データ提供処理
他方、図９は、上述の映像データ提供機能に関連して映像データ提供プログラム２８により実行される映像データ提供処理ＲＴ３の処理手順を示す。映像データ提供プログラム２８は、この図９に示す処理手順に従って、監視拠点システム１５の監視端末１７から要求された日時の合成映像の映像データ（合成映像データ）や、監視員に選択された撮影映像の映像データ（第１〜第４のカメラ映像データ）を当該監視端末１７に送信する。

実際上、映像データ提供プログラム２８は、映像表示処理（図８）のステップＳＰ３１について上述した合成映像データ転送要求が監視拠点システム１５の監視端末１７から与えられると、この図９に示す映像データ提供処理ＲＴ４を開始し、まず、当該合成映像データ転送要求において指定された日時の第１又は第２の合成映像３０，４０の映像データ（合成映像データ）を第２の映像記録装置２４から読み出してその監視端末１７に送信する（ＳＰ４１）。

具体的に、映像データ提供プログラム２８は、まず、合成映像管理テーブル２９上で、合成映像データ転送要求において指定された日時の合成映像への合成映像データポインタを検索する。そして映像データ提供プログラム２８は、この検索により検出した合成映像データポインタで示された第２の映像記録装置２４のアドレス位置から第１又は第２の合成映像３０，４０の映像データでなる合成映像データを読み出して、これを合成映像データ転送要求の送信元の監視端末１７に送信する。

続いて、映像データ提供プログラム２８は、第１の映像記録装置２３における、合成映像データ転送要求において指定された日時の前後10分間の第１〜第４のカメラ映像データの格納位置を合成映像管理テーブル２９上でそれぞれ検索する（ＳＰ４２）。

また映像データ提供プログラム２８は、かかる検索の検索結果に基づいて、第１の映像記録装置２３における、合成映像データ転送要求において指定された日時の前後10分間の第１〜第４のカメラ映像データをそれぞれ第１の映像記録装置２３から読み出してメモリ２６（図１）に一時データとして格納する（ＳＰ４３）。

そして映像データ提供プログラム２８は、この後、映像表示処理（図８）のステップＳＰ３６について上述した監視拠点システム１５の監視端末１７からのカメラ映像データ転送要求を受け付けると、上述の一時データをメモリ２６から読み出し、カメラ映像データ転送要求において指定された日時よりも前の最も新しいＩフレームのデータと、当該Ｉフレームの撮影時刻からカメラ映像データ転送要求において指定された日時までのＰフレームのデータとに基づいて指定された映像データ（詳細映像）を生成してその監視端末１７に送信する（ＳＰ４４）。

さらに映像データ提供プログラム２８は、この後、映像表示処理（図８）のステップＳＰ３８について上述した映像表示終了通知が監視拠点システム１５の監視端末１７から与えられると、一時データを削除した後（ＳＰ４５）、この映像データ検索処理ＲＴ４を終了する。

（５）本実施の形態の効果
以上のように本実施の形態の監視用映像表示システム１では、被監視対象システム１０から送信される第１〜第４のカメラ映像データに基づいて、監視センタシステム２０の制御装置２１において第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の合成映像を生成する。また制御装置２１は、監視拠点システム１５の監視端末１７からの日時を指定した合成映像データ転送要求に応じて、指定された日時の第１又は第２の合成映像３０，４０の映像データ（合成映像データ）を監視端末１７に送信すると共に、その後、かかる第１又は第２の合成映像３０，４０を構成するいずれかの縮小映像３１〜３４，４１〜４４が選択された場合には、その縮小映像３１〜３４，４１〜４４の元の第１〜第４のカメラ映像データを監視端末１７に送信して、当該第１〜第４のカメラ映像データに基づく対応する第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像を監視端末１７に全画面表示させる。

従って、本監視用映像表示システム１によれば、監視員は監視端末１７に表示された合成映像により映像を検索することができる。この場合、合成映像の映像データ（合成映像データ）のデータ量は、第１〜第４の防犯カメラ１３Ａ〜１３Ｄの各撮影映像の映像データ（第１〜第４のカメラ映像データ）をすべて同時に監視端末１７に送信する場合のデータ量に比べて各段的に少なく、従って、映像検索時に監視端末１７に表示される合成映像の応答性が低下することを防止することができる。

また本監視用映像表示システム１によれば、検索により必要な映像が映し出された第１又は第２の合成映像３０，４０を検出した後は、その第１又は第２の合成映像を構成する各縮小映像３１〜３４，４１〜４４のうちの所望する縮小映像３１〜３４，４１〜４４をクリック等により選択することにより、その縮小映像３１〜３４，４１〜４４の元となる第１〜第４の防犯カメラ１３Ａ〜１３Ｄの高精細な撮影映像によって監視箇所の状況を確認することができる。

よって、本監視用映像表示システム１によれば、監視センタシステム２０に保存された第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の検索を素早く行うことができると共に、必要な映像については高精細で内容を確認することができ、かくして有事の際の状況確認に要する時間を低減させることができる。

さらに本監視用映像表示システム１では、第１〜第４のカメラ映像データと共に被監視対象システム１０から送信されるイベント情報に基づいて、監視センタシステム２０の制御装置２１が異なる形態の合成映像（第１及び第２の合成映像３０，４０）を生成する。従って、監視員は監視端末１７に表示された合成映像の形態に基づいていずれかの監視箇所において異常が発生したときの合成映像に素早くアクセスすることができる。

よって本監視用映像表示システム１によれば、監視センタシステム２０に保存された第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の検索をより一層と素早く行うことができ、かくして有事の際の状況確認に要する時間をより一層と低減させることができる。

（６）他の実施の形態
なお上述の実施の形態においては、第２の合成映像４０において、縮小映像３１〜３４，４１〜４４の大きさを異ならせることで異常が発生した監視箇所に設置された第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の縮小映像４１〜４４を強調表示をする場合について述べたが、本発明はこれに限らず、強調表示すべき縮小映像４１〜４４を枠で囲んだり、または着色するなどして強調するようにしてもよい。

また上述の実施の形態においては、第１〜第４の防犯カメラ１３Ａ〜１３Ｄの撮影映像の１つのみを強調表示する場合について述べたが、本発明はこれに限らず、複数の監視箇所においてそれぞれ異常が発生した場合には、これらの監視箇所にそれぞれ対応する縮小映像４１〜４４を強調表示するようにしてもよい。

さらに上述の実施の形態においては、各防犯センサ１４Ａ〜１４Ｄのセンサ情報に基づいて各監視箇所の異常の有無を判定する監視端末装置１２を被監視対象システム１０に設けるようにした場合について述べたが、本発明はこれに限らず、かかる監視端末装置１２を監視センタシステム２０に設けるようにしてもよく、さらには監視端末装置１２を省略し、その機能を制御装置２１に持たせるようにしてもよい。この場合には、被監視対象システム１０の第１〜第４の防犯センサ１４Ａ〜１４Ｄの出力をそのまま被監視対象システム１０から監視センタシステム２０に送信すればよい。

１……監視用映像表示システム、６……ネットワーク、１０……被監視対象システム、１１，１６，２２……通信装置、１２……監視端末装置、１３Ａ〜１３Ｄ……第１〜第４の防犯カメラ、１４Ａ〜１４Ｄ……第１〜第４の防犯センサ、１５……監視拠点システム、１７……監視端末、２０……監視センタシステム、２１……制御装置、２３……第１の映像記録装置、２４……第２の映像記録装置。

Claims

複数のカメラの撮影映像の映像データをそれぞれ蓄積し、蓄積した映像データに基づく映像を端末に表示する映像表示システムにおいて、
前記複数のカメラの各前記映像データをそれぞれ格納する第１の映像記録装置と、
前記複数のカメラの各前記映像データにそれぞれ基づく各前記撮影映像の縮小映像を一つの画面に集約した合成映像を生成する合成映像生成部と、
前記合成映像の映像データを格納する第２の映像記録装置と、
前記カメラが設置された各監視箇所にそれぞれ設置され、当該監視箇所における異常を検出する防犯センサと、
各前記防犯センサの出力に基づいて各前記監視箇所における異常の有無を判定する監視端末装置と、
前記第２の映像記録装置に格納された前記映像データを出力する検索映像出力部、前記第１の映像記録装置に格納された前記映像データを出力する詳細映像出力部及び詳細映像の指定を受け付ける映像指定受付部と
を備え、
前記合成映像生成部は、
前記監視端末装置の判定結果に基づいて、当該監視端末装置がいずれかの前記監視箇所の異常を検出した場合には、当該監視箇所に設置された前記カメラの前記撮影映像の前記縮小映像を強調した前記合成映像を生成し、
前記検索映像出力部は、
前記合成映像の前記映像データを前記端末に送信し、
前記映像指定受付部は、
前記検索映像出力部から出力された前記映像データに基づき前記端末に表示された前記合成映像の各前記縮小映像のうちのいずれかの前記縮小映像が指定されたときに当該端末から与えられる当該縮小映像に対応する前記カメラの識別子と撮影時刻の指定を受け付け、
前記詳細映像出力部は、
前記映像指定受付部が受け付けた前記カメラの識別子及び前記撮影時刻に対応する前記撮影映像の前記映像データを前記第１の映像記録装置から読み出して前記端末に送信し、
前記合成映像生成部は、
同一時刻に前記複数のカメラによりそれぞれ撮影された各前記撮影映像を所定時間ごとに区切って合成した前記合成映像を順次生成して前記第２の映像記録装置に格納すると共に、各前記合成映像を前記第２の映像記録装置に格納した日時と、前記第２の映像記録装置における当該合成映像が格納された記憶領域へのポインタとを対応づけて合成映像管理テーブルに格納し、
前記検索映像出力部は、
前記端末から日時を指定した前記合成映像の映像データの転送要求が与えられた場合に、当該転送要求において指定された前記日時と対応づけられた前記ポインタを前記合成映像管理テーブル上で検索し、当該検索により検出した前記ポインタで示された前記第２の映像記録装置内の前記記憶領域から前記合成映像の映像データを読み出して前記端末に送信する
ことを特徴とする映像表示システム。
前記複数のカメラの各前記映像データはそれぞれ可変長データ形式で前記第１の映像記録装置に格納され、前記合成映像の前記映像データは固定長データ形式で前記第２の映像記録装置に格納される
ことを特徴とする請求項１に記載の映像表示システム。
第１の映像記録装置に格納された前記映像データは、単体で画像を表現可能なフレームのデータでなる静止画像データと、前のフレームからの差分画像のフレームのデータでなる差分画像データとから構成され、
前記詳細映像出力部は、受け付けた前記カメラの識別子に対応する前記映像データを構成し、受け付けた前記撮影時刻よりも前で最も新しい前記静止画像データと、当該静止画像データの撮影時刻から受け付けた前記撮影時刻までの前記差分画像データとに基づいて、指定された前記詳細映像を生成する詳細映像作成部を備える
ことを特徴とする請求項２に記載の映像表示システム。
前記端末に表示される前記合成映像には、
前記監視端末装置が異常を検出した前記監視箇所に設置された前記カメラの識別子が表示される
ことを特徴とする請求項１に記載の映像表示システム。
前記合成映像生成部は、
前記監視端末装置が異常を検出した前記監視箇所に設置された前記カメラの前記撮影映像の前記縮小映像を、前記監視端末装置が異常を検出しなかった前記監視箇所に設置された他の前記カメラの前記撮影映像の各前記縮小映像よりも大きく表示するようにして強調した前記合成映像を生成する
ことを特徴とする請求項１に記載の映像表示システム。
前記詳細映像出力部は、
前記検索映像出力部が前記合成映像の前記映像データを前記端末に出力した後、当該撮影時刻の前後所定期間の各前記カメラの前記撮影映像の映像データを前記第１の映像記録装置から先読みする
ことを特徴とする請求項１に記載の映像表示システム。
複数のカメラの撮影映像の映像データをそれぞれ蓄積し、蓄積した映像データに基づく映像を端末に表示する映像表示システムにおける映像表示方法であって、
前記映像表示システムは、
前記複数のカメラの各前記映像データをそれぞれ格納する第１の映像記録装置と、
前記複数のカメラの各前記映像データにそれぞれ基づく各前記撮影映像の縮小映像を一つの画面に集約した合成映像を生成する合成映像生成部と、
前記合成映像の映像データを格納する第２の映像記録装置と、
前記カメラが設置された各監視箇所にそれぞれ設置され、当該監視箇所における異常を検出する防犯センサと、
各前記防犯センサの出力に基づいて各前記監視箇所における異常の有無を判定する監視端末装置と、
前記第２の映像記録装置に格納された前記映像データを出力する検索映像出力部、前記第１の映像記録装置に格納された前記映像データを出力する詳細映像出力部及び詳細映像の指定を受け付ける映像指定受付部と
を有し、
前記合成映像生成部が、前記監視端末装置の判定結果に基づいて、当該監視端末装置がいずれかの前記監視箇所の異常を検出した場合には、当該監視箇所に設置された前記カメラの前記撮影映像の前記縮小映像を強調した前記合成映像を生成する第１のステップと、
前記検索映像出力部が、前記合成映像の前記映像データを前記端末に送信する第２のステップと、
前記映像指定受付部が、前記検索映像出力部から出力された前記映像データに基づき前記端末に表示された前記合成映像の各前記縮小映像のうちのいずれかの前記縮小映像が指定されたときに当該端末から与えられる当該縮小映像に対応する前記カメラの識別子と撮影時刻の指定を受け付ける第３のステップと、
前記詳細映像出力部が、前記映像指定受付部が受け付けた前記カメラの識別子及び前記撮影時刻に対応する前記撮影映像の前記映像データを前記第１の映像記録装置から読み出して前記端末に送信する第４のステップと
を備え、
前記第１のステップにおいて、前記合成映像生成部は、
同一時刻に前記複数のカメラによりそれぞれ撮影された各前記撮影映像を所定時間ごとに区切って合成した前記合成映像を順次生成して前記第２の映像記録装置に格納すると共に、各前記合成映像を前記第２の映像記録装置に格納した日時と、前記第２の映像記録装置における当該合成映像が格納された記憶領域へのポインタとを対応づけて合成映像管理テーブルに格納し、
前記第２のステップにおいて、前記検索映像出力部は、
前記端末から日時を指定した前記合成映像の映像データの転送要求が与えられた場合に、当該転送要求において指定された前記日時と対応づけられた前記ポインタを前記合成映像管理テーブル上で検索し、当該検索により検出した前記ポインタで示された前記第２の映像記録装置内の前記記憶領域から前記合成映像の映像データを読み出して前記端末に送信する
ことを特徴とする映像表示方法。