JPWO2020039898A1 - 駅監視装置、駅監視方法及びプログラム - Google Patents

Abstract

表示されている合成映像から重点的に監視すべき部分を監視者が容易に認識できる駅監視装置、駅監視方法及びプログラムを提供する。映像取得部（６２）は、それぞれ互いに異なる監視対象の様子を表す複数の映像を取得する。監視優先度決定部（６６）は、映像に対応付けられる番線に進入する車両の状況に基づいて、当該映像の監視の優先度を決定する。合成映像生成部（６８）は、監視の優先度が表された、複数の映像を合成した合成映像を生成する。表示制御部（７４）は、合成映像を表示させる。

Description

本発明は、駅監視装置、駅監視方法及びプログラムに関する。

特許文献１には、監視装置が複数の映像配信装置のそれぞれから駅のプラットホームを撮影した映像を受信して、受信した複数の映像を合成した合成映像を表示させる技術が記載されている。

特開２０１４−１９２８４４号公報

合成映像に表れている個々の映像の監視の優先度は様々である。例えば近くまで車両が来ている番線、まもなく車両が進入する番線、通過する際の車両の速度が速い番線、車いすの乗客が乗車している車両が進入する番線などに対応付けられる映像の監視の優先度は高いものと思われる。

ここで特許文献１に記載の技術において、個々の映像の監視の優先度が合成映像に表れるようにすると、監視者は表示されている合成映像を見るとどの部分を重点的に監視すべきであるかを容易に認識できるため、監視の負担が軽減される。

本発明は上記課題に鑑みてなされたものであって、その目的の１つは、表示されている合成映像から重点的に監視すべき部分を監視者が容易に認識できる駅監視装置、駅監視方法及びプログラムを提供することにある。

本発明に係る駅監視装置は、駅のプラットホームを監視する駅監視装置であって、それぞれ互いに異なる監視対象の様子を表す複数の映像を取得する映像取得手段と、前記映像に対応付けられる番線に進入する車両の状況に基づいて、当該映像の監視の優先度を決定する監視優先度決定手段と、前記監視の優先度が表された、前記複数の映像を合成した合成映像を生成する合成映像生成手段と、前記合成映像を表示させる表示制御手段と、を含む。

本発明の一態様では、前記監視優先度決定手段は、前記番線がある駅と前記車両との間の距離に基づいて、当該番線に対応付けられる映像の監視の優先度を決定する。

また、本発明の一態様では、前記監視優先度決定手段は、前記番線に前記車両が到着するまでの推定時間に基づいて、当該番線に対応付けられる映像の監視の優先度を決定する。

また、本発明の一態様では、前記監視優先度決定手段は、前記番線を通過する際の前記車両の速度に基づいて、当該番線に対応付けられる映像の監視の優先度を決定する。

また、本発明の一態様では、前記監視優先度決定手段は、前記番線に進入する車両の乗客の属性に基づいて、当該番線に対応付けられる映像の監視の優先度を決定する。

また、本発明に係る駅監視方法は、駅のプラットホームを監視する駅監視方法であって、それぞれ互いに異なる監視対象の様子を表す複数の映像を取得するステップと、前記映像に対応付けられる番線に進入する車両の状況に基づいて、当該映像の監視の優先度を決定するステップと、前記監視の優先度が表された、前記複数の映像を合成した合成映像を生成するステップと、前記合成映像を表示させるステップと、を含む。

また、本発明に係るプログラムは、駅のプラットホームを監視するコンピュータに、それぞれ互いに異なる監視対象の様子を表す複数の映像を取得する手順、前記映像に対応付けられる番線に進入する車両の状況に基づいて、当該映像の監視の優先度を決定する手順、前記監視の優先度が表された、前記複数の映像を合成した合成映像を生成する手順、前記合成映像を表示させる手順、を実行させる。

本発明の一実施形態に係る駅監視システムの全体構成の一例を示す図である。 本発明の一実施形態に係る映像送信システムの構成の一例を示す図である。 撮影画像の一例を示す図である。 撮影画像の一例を示す図である。 領域特定結果画像の一例を示す図である。 撮影画像の一例を示す図である。 領域特定結果画像の一例を示す図である。 撮影画像の撮影、撮影画像に対する画像認識、及び、ターゲット領域の追尾の関係の一例を模式的に示す図である。 合成画像の一例を示す図である。 合成画像の一例を示す図である。 駅と車両との関係の一例を模式的に示す図である。 合成画像の一例を示す図である。 駅と車両との関係の一例を模式的に示す図である。 本発明の一実施形態に係る駅監視システムの機能の一例を示す機能ブロック図である。 本発明の一実施形態に係る映像送信システムで行われる処理の流れの一例を示すフロー図である。 本発明の一実施形態に係る中央監視装置で行われる処理の流れの一例を示すフロー図である。 参照撮影画像の一例を示す図である。 参照撮影画像の一例を示す図である。 領域特定結果画像の一例を示す図である。 領域特定結果画像の一例を示す図である。

以下、本発明の一実施形態について図面に基づき詳細に説明する。

図１は、本発明の一実施形態に係る駅監視システム１の全体構成の一例を示す図である。図１に示すように、本実施形態に係る駅監視システム１には、中央監視装置１０、及び、複数の映像送信システム１２、が含まれている。

中央監視装置１０と、複数の映像送信システム１２とは、インターネット等のコンピュータネットワーク１４に接続されている。そのため、中央監視装置１０と映像送信システム１２とはコンピュータネットワーク１４を介して互いに通信可能となっている。

中央監視装置１０は、例えばパーソナルコンピュータなどのコンピュータである。図１に示すように中央監視装置１０には、プロセッサ１０ａ、記憶部１０ｂ、通信部１０ｃ、全体監視モニタ１０ｄ、及び、個別監視モニタ１０ｅが含まれる。

プロセッサ１０ａは、例えば、中央監視装置１０にインストールされるプログラムに従って動作するＣＰＵ等のプログラム制御デバイスである。記憶部１０ｂは、ＲＯＭやＲＡＭ等の記憶素子やハードディスクドライブなどである。記憶部１０ｂには、プロセッサ１０ａによって実行されるプログラムなどが記憶される。通信部１０ｃは、例えば映像送信システム１２との間でデータを授受するためのネットワークボードなどの通信インタフェースである。中央監視装置１０は、通信部１０ｃを経由して映像送信システム１２との間で情報の送受信を行う。全体監視モニタ１０ｄ、及び、個別監視モニタ１０ｅは、例えば、液晶ディスプレイ等の表示デバイスであって、プロセッサ１０ａの指示に従って各種の画像を表示する。

図２は、本実施形態に係る映像送信システム１２の構成の一例を示す図である。図２に示すように、本実施形態に係る映像送信システム１２には、カメラ２０と、映像解析装置２２と、ダウンコンバータ２４と、プラットホームモニタ２６と、駅舎モニタ２８と、が含まれている。本実施形態に係る映像解析装置２２は、カメラ２０、ダウンコンバータ２４、駅舎モニタ２８と接続されている。また本実施形態に係るカメラ２０は、プラットホームモニタ２６と接続されている。

カメラ２０は、例えばデジタルカメラなどの撮影デバイスである。プラットホームモニタ２６、及び、駅舎モニタ２８は、例えば、液晶ディスプレイ等の表示デバイスである。ダウンコンバータ２４は、例えば受け付ける映像を低解像度化して出力する機器である。

映像解析装置２２は、例えばパーソナルコンピュータなどのコンピュータである。図２に示すように、本実施形態に係る映像解析装置２２には、プロセッサ２２ａ、記憶部２２ｂ、通信部２２ｃ、が含まれる。プロセッサ２２ａは、例えば、映像解析装置２２にインストールされるプログラムに従って動作するＣＰＵ等のプログラム制御デバイスである。記憶部２２ｂは、ＲＯＭやＲＡＭ等の記憶素子やハードディスクドライブなどである。記憶部２２ｂには、プロセッサ２２ａによって実行されるプログラムなどが記憶される。通信部２２ｃは、例えば中央監視装置１０との間でデータを授受するためのネットワークボードなどの通信インタフェースである。映像解析装置２２は、通信部２２ｃを経由して中央監視装置１０との間で情報の送受信を行う。

以下、一例として、駅監視システム１に、９個の映像送信システム１２（１２ａ〜１２ｉ）が含まれる場合について説明する。なお、駅監視システム１に含まれる映像送信システム１２の数はもちろん９個には限定されない。

図３は、本実施形態に係る映像送信システム１２ｅに含まれるカメラ２０が生成する、駅のプラットホーム３０等の監視対象を撮影した撮影映像に含まれる１つのフレーム画像の一例を示す図である。以下、撮影映像に含まれるフレーム画像を撮影画像３２と呼ぶこととする。図４は、当該撮影映像に含まれる別の１つの撮影画像３２の一例を示す図である。本実施形態では例えば、カメラ２０が所定のフレームレートで撮影画像３２を生成する。そしてここでは例えば、図３に示す撮影画像３２が生成されたフレームよりも後のフレームにおいて、図４に示す撮影画像３２が生成されることとする。

本実施形態では例えば、９個の映像送信システム１２（１２ａ〜１２ｉ）のそれぞれにおいて、当該映像送信システム１２に含まれるカメラ２０により撮影映像が生成される。カメラ２０により生成される撮影映像は、当該カメラ２０が監視するプラットホーム３０に設置されたプラットホームモニタ２６に表示されてもよい。

以下の説明では、９個の映像送信システム１２（１２ａ〜１２ｉ）のそれぞれは、互いに異なる駅に配置されており、１つの駅では１つのカメラ２０によって当該駅のプラットホーム３０が監視されることとする。

そして本実施形態では例えば、映像解析装置２２において撮影画像３２に対して公知の画像認識技術による画像認識処理が実行され、当該撮影画像３２に所与のオブジェクトが表れているか否かが判定される。なお当該画像認識処理が、学習済の機械学習モデルを用いて実行されてもよい。以下、当該所与のオブジェクトをターゲットオブジェクト３４と呼ぶこととする。ターゲットオブジェクト３４の例としては、白杖を持った人物や、盲導犬や聴導犬等の補助犬など、重点的に注意を向けることが望ましいオブジェクトが挙げられる。なおターゲットオブジェクト３４は、１つの種類のオブジェクトである必要はなく、複数の種類のオブジェクトであっても構わない。

ここで図３に示す撮影画像３２には、ターゲットオブジェクト３４は表れていない。一方、図４に示す撮影画像３２には、ターゲットオブジェクト３４が表れている。そのため図３に示す撮影画像３２についてはターゲットオブジェクト３４が表されていないと判定され、図４に示す撮影画像３２についてはターゲットオブジェクト３４が表れていると判定される。

そして本実施形態では例えば、ターゲットオブジェクト３４が表れていると判定された撮影画像３２については、ターゲットオブジェクト３４が表れている領域が特定される。以下、ターゲットオブジェクト３４が表れている領域をターゲット領域と呼ぶこととする。

そして本実施形態では例えば、ターゲット領域を示すターゲット領域情報が生成される。図５は、ターゲット領域情報の一例である領域特定結果画像３６の一例を示す図である。図５に示す領域特定結果画像３６では、図４に示す撮影画像３２にターゲットオブジェクト３４を囲む枠状のターゲット領域画像３８が重畳されている。

図６は、図４に示す撮影画像３２が生成されたフレームよりも後のフレームにおいてカメラ２０によって生成される撮影画像３２の一例を示す図である。図６に示す撮影画像３２についてもターゲットオブジェクト３４が表れている。

ここで例えば、映像解析装置２２において、図４に示す撮影画像３２に対する画像認識処理において特定されたターゲット領域を追尾する公知の追尾処理を実行することによって、図６に示す撮影画像３２内におけるターゲット領域が特定されてもよい。そしてこのようにして特定されるターゲット領域を示す、図７に例示する領域特定結果画像３６が生成されてもよい。図７に示す領域特定結果画像３６では、図６に示す撮影画像３２にターゲットオブジェクト３４を囲む枠状のターゲット領域画像３８が重畳されている。

図８は、１６個のフレームに着目した、本実施形態における、撮影画像３２の撮影、撮影画像３２に対する画像認識、及び、ターゲット領域の追尾の関係の一例を模式的に示す図である。以下、当該１６個のフレームを、第１フレーム〜第１６フレームと呼ぶこととする。

本実施形態では例えば、上述の画像認識処理が、機械学習モデルを用いて実装されており、その処理の実行には時間がかかることとする。一方、上述の追尾処理は、ターゲット領域内の画素の画素値の分布などといった特徴量を用いたパターンマッチング技術などによって実装されており、上述の画像認識処理よりも１つの画像に対する処理の実行時間が短いこととする。以下の説明では、一例として、１つの撮影画像３２に対する画像認識処理には、３フレームに相当する時間がかかることとし、１つの撮影画像３２に対する追尾処理には、１フレームに相当する時間よりも短い時間しかかからないこととする。

図８では、第ｎフレームで撮影される撮影画像３２がｐ（ｎ）と表現されている（ｎは１以上１６以下の整数）。また第ｎフレームで撮影される撮影画像３２（ｐ（ｎ））に対する画像認識の結果は、ｒ（ｐ（ｎ））と表現されている。例えば、図５に例示する領域特定結果画像３６が、画像認識の結果ｒ（ｐ（ｎ））の一例に相当する。

図８に示すように、第１フレームの撮影画像３２（ｐ（１））の画像認識の結果（ｒ（ｐ（１）））は、第４フレームの撮影画像３２（ｐ（４））の撮影タイミングに特定される。

そしてその後、本実施形態では例えば、第４フレームの撮影画像３２（ｐ（４））に対して画像認識が実行される。そして当該画像認識の結果（ｒ（ｐ（４）））は、第７フレームの撮影画像３２（ｐ（７））の撮影タイミングに特定される。

以下、同様にして、第１０フレームの撮影画像３２（ｐ（１０））に対する画像認識の結果（ｒ（ｐ（１０）））は、第１３フレームの撮影画像３２（ｐ（１３））の撮影タイミングに特定される。また第１３フレームの撮影画像３２（ｐ（１３））に対する画像認識の結果（ｒ（ｐ（１３）））は、第１６フレームの撮影画像３２（ｐ（１６））の撮影タイミングに特定される。

そして本実施形態では例えば、撮影画像３２に対して、当該撮影画像３２の撮影タイミングにおいて利用可能な最新の画像認識の結果によって特定されたターゲット領域を追尾する処理が実行されることで当該撮影画像３２内におけるターゲット領域が特定される。例えば第４フレーム〜第６フレームの撮影画像３２（ｐ（４）〜ｐ（６））については、第１フレームの撮影画像３２に対する画像認識の結果（ｒ（ｐ（１）））によって特定されたターゲット領域を追尾する処理が実行される。この追尾処理の結果が、図８では、ｔ（ｐ（４），ｒ（ｐ（１）））、ｔ（ｐ（５），ｒ（ｐ（１）））、ｔ（ｐ（６），ｒ（ｐ（１）））と表現されている。例えば、図７に例示する領域特定結果画像３６が、追尾処理の結果ｔの一例に相当する。

同様にして、例えば第７フレーム〜第９フレームの撮影画像３２（ｐ（７）〜ｐ（９））については、第４フレームの撮影画像３２に対する画像認識の結果（ｒ（ｐ（４）））によって特定されたターゲット領域を追尾する処理が実行される。この追尾処理の結果が、図８では、ｔ（ｐ（７），ｒ（ｐ（４）））、ｔ（ｐ（８），ｒ（ｐ（４）））、ｔ（ｐ（９），ｒ（ｐ（４）））と表現されている。以下、同様にして、第１０フレーム以降の撮影画像３２についても、ターゲット領域を追尾する処理が実行される。

本実施形態では以上のようにして、撮影画像３２に対して当該撮影画像３２の撮影タイミングにおいて利用可能な最新の画像認識の結果によって特定されたターゲット領域を追尾する処理が実行されることで当該撮影画像３２内におけるターゲット領域が特定される。そのため本実施形態では、撮影画像３２の撮影から短い時間で当該撮影画像３２内におけるターゲット領域の特定が可能となる。

そして本実施形態では例えば、撮影映像を低解像度化した低解像度映像と当該撮影映像にターゲットオブジェクト３４が表れているか否かの判定の結果とを示す送信データが生成される。

ここで例えば、撮影画像３２にターゲット領域画像３８が重畳された、図７に示す領域特定結果画像３６をダウンコンバータ２４によって低解像度化した画像である低解像度画像をフレーム画像として含む映像が送信データとして生成されてもよい。この場合は、当該低解像度画像は、撮影映像を低解像度化した低解像度映像のフレーム画像でもあり、撮影画像３２にターゲットオブジェクト３４が表れているか否かの判定の結果を示す画像でもあることとなる。

また例えば、撮影映像を低解像度化した低解像度化映像と含むとともに、ヘッダ等に、撮影映像に含まれるそれぞれの撮影画像３２についてのターゲットオブジェクト３４が表れているか否かの判定の結果を示すフラグを含む送信データが生成されてもよい。この場合、当該低解像度映像は、撮影画像３２を低解像度化した低解像度化画像をフレーム画像として含むこととなる。またこの場合は、送信データに含まれるフラグが、撮影映像にターゲットオブジェクト３４が表れているか否かの判定の結果を示していることとなる。

また例えば、撮影映像を低解像度化した低解像度化映像、及び、ターゲット領域情報を含む送信データが生成されてもよい。ここでターゲット領域情報は、例えば、低解像度化映像に含まれるフレーム画像である低解像度画像のうち、ターゲットオブジェクト３４が表れている低解像度画像について、当該低解像度画像内におけるターゲット領域の位置や形状を示す情報であってもよい。例えばターゲット領域情報が、低解像度画像内におけるターゲット領域に相当する枠の４つの角の位置の座標値を示す情報であってもよい。またターゲット領域情報は、ターゲット領域画像３８のような画像の形式の情報であってもよい。この場合は、送信データに含まれるターゲット領域情報が、撮影映像にターゲットオブジェクト３４が表れているか否かの判定の結果を示していることとなる。

以下、撮影画像３２、又は、当該撮影画像３２とターゲット領域画像３８とが重畳された領域特定結果画像３６を低解像度化した低解像度画像を、当該撮影画像３２に対応付けられる低解像度画像と呼ぶこととする。

そして本実施形態ではこのようにして生成される送信データが中央監視装置１０に送信される。同様にして、他の映像送信システム１２（１２ａ〜１２ｄ、及び、１２ｆ〜１２ｉ）からも、当該映像送信システム１２で生成される送信データが中央監視装置１０に送信される。

また本実施形態において例えば、撮影映像、又は、低解像度映像が、駅舎に設置された駅舎モニタ２８に表示されてもよい。ここで駅舎モニタ２８に表示される映像に含まれるフレーム画像にターゲット領域が示されていてもよい。例えば、一連の領域特定結果画像３６をフレーム画像として含む映像が駅舎モニタ２８に表示されてもよい。

本実施形態では例えば、中央監視装置１０が、複数の映像送信システム１２（１２ａ〜１２ｉ）のそれぞれから送信される上述の送信データを受信する。

そして中央監視装置１０において、当該複数の送信データに基づいて、当該複数の送信データのうちの少なくとも１つが示す上述の判定の結果が表された、当該複数の送信データのそれぞれが示す低解像度映像を合成した合成映像が生成される。そして生成された合成映像が全体監視モニタ１０ｄに表示される。図９及び図１０は、それぞれ、合成映像に含まれる１つのフレーム画像である合成画像４０の一例を示す図である。

図９には、受信するすべての送信データにおいてターゲットオブジェクト３４が表れていないことが上述の判定の結果として示されている場合における合成画像４０の一例が示されている。図１０には、受信する２つの送信データにおいてターゲットオブジェクト３４が表れていることが上述の判定の結果として示されている場合における合成画像４０の一例が示されている。

合成画像４０には、例えばそれぞれ互いに異なる映像送信システム１２に対応付けられる複数の個別画像領域４２が含まれている。図９及び図１０に例示されている合成画像４０には、９個の映像送信システム１２（１２ａ〜１２ｉ）にそれぞれ対応付けられる、９つの個別画像領域４２（４２ａ〜４２ｉ）が含まれている。ここで例えば、図３、図４、及び、図６に示す撮影画像３２を撮影したカメラ２０を含む映像送信システム１２ｅは、個別画像領域４２ｅに対応付けられることとなる。

本実施形態では例えば、映像送信システム１２から受信した送信データが示す低解像度映像に含まれるフレーム画像である低解像度画像が、当該映像送信システム１２に対応付けられる個別画像領域４２に配置される。

そして本実施形態では例えば、中央監視装置１０が、複数の個別画像領域４２のそれぞれについて、当該個別画像領域４２に配置される低解像度画像に対応付けられる撮影画像３２にターゲットオブジェクト３４が表れているか否かの判定の結果を特定する。ここで例えば、送信データに含まれるフラグに基づいて、当該判定の結果が特定されてもよい。また例えば、撮影画像３２を低解像度化した低解像度画像内におけるターゲット領域の位置や形状を示すターゲット領域情報が送信データに含まれている場合に、当該撮影画像３２にターゲットオブジェクト３４が表れていると判定されてもよい。また例えば、送信データが示す低解像度画像からターゲット領域画像３８を検出する処理が実行されるようにしてもよい。そしてターゲット領域画像３８が検出できた場合に、当該低解像度画像が低解像度化される前の撮影画像３２にターゲットオブジェクト３４が表れていると判定されてもよい。

そして本実施形態では例えば、上述の判定の結果が表された合成画像４０が生成される。ここで例えば、配置される低解像度画像に対応付けられる撮影画像３２にターゲットオブジェクト３４が表れていると判定された個別画像領域４２を囲む枠状の判定識別画像４４が重畳された合成画像４０が生成されてもよい。図１０には、一例として、個別画像領域４２ｅを囲む判定識別画像４４ａ、及び、個別画像領域４２ｇを囲む判定識別画像４４ｂが示されている。

また本実施形態では例えば、図１０に示すように、低解像度画像内においてターゲットオブジェクト３４が表れているターゲット領域が、当該低解像度画像が配置される個別画像領域４２に示される。ここで例えば、図１０に示すように、領域特定結果画像４６がターゲット領域を表す情報として個別画像領域４２に示されるようにしてもよい。ここで領域特定結果画像４６は、例えば、領域特定結果画像３６を低解像度化した画像であってもよい。あるいは、領域特定結果画像４６は、例えば、ターゲット領域情報が示す座標値によって表現される位置を角とする枠状の画像であってもよい。

また本実施形態において例えば、送信データに対応付けられる番線に進入する車両の状況に基づいて、映像の監視の優先度が決定されてもよい。ここで送信データに対応付けられる番線とは、例えば、送信データを送信する映像送信システム１２が配置されている駅にある番線や、送信データを送信する映像送信システム１２のカメラ２０によって監視されるプラットホーム３０に隣接する番線などを意味する。なお１つのカメラ２０に１つの番線が対応付けられてもよいし、１つのカメラ２０に複数の番線が対応付けられてもよい。また、撮影画像３２にターゲットオブジェクト３４が表れていると判定された個別画像領域４２について、映像の監視の優先度が決定されるようにしてもよい。

以下、映像の監視の優先度の決定の一例について説明する。

図１１には、９個の映像送信システム１２（１２ａ〜１２ｉ）のそれぞれが配置されている駅と、これらの駅の間を運行する車両との関係の一例が模式的に示されている。図１１には、９個の映像送信システム１２（１２ａ〜１２ｉ）が配置されている駅にそれぞれ対応付けられる９つの駅オブジェクト５０（５０ａ〜５０ｉ）と、運行する車両に対応付けられる４つの車両オブジェクト５２（５２ａ〜５２ｄ）が示されている。また図１１には、車両の進行方向が矢印で表現されている。ここでは例えば、図１０に例示する合成画像４０に対応付けられる撮影画像３２の撮影タイミングにおける車両の位置が、車両オブジェクト５２の位置として図１１に示されていることとする。

ここで例えば、駅オブジェクト５０ｅと車両オブジェクト５２ｃとの間の長さは、駅オブジェクト５０ｇと車両オブジェクト５２ｄとの間の長さよりも短い。このことは、映像送信システム１２ｅが配置されている駅と当該駅に接近する車両との間の距離が、映像送信システム１２ｇが配置されている駅と当該駅に接近する車両との間の距離よりも短いことを意味する。例えばこのような場合に、映像送信システム１２ｅに含まれるカメラ２０により撮影される映像の監視の優先度が、映像送信システム１２ｇに含まれるカメラ２０により撮影される映像の監視の優先度よりも高いと決定されてもよい。

図１０には、以上のようにして決定された映像の監視の優先度に応じた態様の判定識別画像４４が合成画像４０に配置される。なお本実施形態では、映像の監視の優先度に応じた態様が予め定められていることとする。例えば、最も優先度が高い態様が判定識別画像４４ａのような塗りつぶされた模様で、次に優先度が高い態様が判定識別画像４４ｂのようなハッチの模様であることとする。そのため図１０の例では、判定識別画像４４ａは、個別画像領域４２ｅを囲むよう配置され、判定識別画像４４ｂは、個別画像領域４２ｇを囲むよう配置されることとなる。

なお、以上の例では、送信データに対応付けられる番線がある駅と車両との間の距離に基づいて、映像の監視の優先度が決定された。ここで例えば、送信データに対応付けられる番線に車両が到着するまでの推定時間に基づいて、映像の監視の優先度が決定されてもよい。例えば当該推定時間が短いものほど優先度が高く決定されてもよい。

また例えば、送信データに対応付けられる番線を通過する際の車両の速度に基づいて、映像の監視の優先度が決定されてもよい。例えば当該速度が速いものほど優先度が高く決定されてもよい。

また例えば、送信データに対応付けられる番線に進入する際の車両の乗客の属性に基づいて、映像の監視の優先度が決定されてもよい。ここで車両の乗客の属性の例としては、車いすを使用している、補助犬を連れている、などの属性が挙げられる。ここで例えば、次に番線に進入する車両に車いすを使用している乗客や補助犬を連れている乗客がいる場合は、そうでない場合よりも優先度が高く決定されてもよい。

また映像の監視の優先度に応じた態様は図１０に示すような模様には限定されない。例えば、映像の監視の優先度に応じた色の判定識別画像４４が合成画像４０に配置されてもよい。また例えば、映像の監視の優先度に応じた大きさの個別画像領域４２が合成画像４０内に配置されてもよい。この場合例えば、優先度が高いほど大きな個別画像領域４２が合成画像４０に配置されてもよい。

以上で説明した車両の状況は、例えば、公知の運行管理システムによって管理されていてもよい。そして、中央監視装置１０は、運行管理システムから取得する各種のデータに基づいて、上述した距離、推定時間、速度、乗客の属性、などといった車両の状況を特定してもよい。また本実施形態において、距離、推定時間、速度、乗客の属性のうちの複数の組合せに基づいて、映像の監視の優先度が決定されてもよい。

また本実施形態において、中央監視装置１０は、映像送信システム１２に、撮影映像の送信要求を送信してもよい。例えば、合成画像４０を監視している監視者（中央監視装置１０のユーザ）による個別画像領域４２を指定する操作に応じて、当該個別画像領域４２に対応付けられる送信データの送信元である映像送信システム１２に、撮影映像の送信要求が送信されてもよい。また例えば、映像の監視の優先度に基づいて決定される映像送信システム１２に撮影映像の送信要求が送信されてもよい。例えば監視の優先度が最も高い映像を撮影するカメラ２０を含む映像送信システム１２に撮影映像の送信要求が送信されてもよい。

そして撮影映像の送信要求を受信した映像送信システム１２は、当該送信要求に応じて撮影映像を中央監視装置１０に送信してもよい。そして中央監視装置１０は、受信した撮影映像を個別監視モニタ１０ｅに表示させてもよい。このようにすれば監視者が高解像度の撮影映像を中央監視装置１０において詳細に監視できることとなる。

ここで例えば、映像送信システム１２は、送信要求の受信に応じて、撮影映像と上述の判定の結果とを示す代替送信データを中央監視装置１０に送信してもよい。そして中央監視装置１０は、代替送信データが示す上述の判定の結果が表された、当該代替送信データが示す撮影映像を個別監視モニタ１０ｅに表示させてもよい。ここで例えば、撮影映像に含まれる撮影画像３２に基づいて生成される領域特定結果画像３６をフレーム画像として含む映像が代替送信データとして映像送信システム１２から中央監視装置１０に送信されるようにしてもよい。そして当該映像が個別監視モニタ１０ｅに表示されるようにしてもよい。

撮影映像の解像度が高いほど当該撮影映像の解析精度は高くなる。ここで例えば白杖を持った人物や補助犬などがプラットホーム３０にいるかどうかの判定や白杖を持った人物や補助犬が撮影映像内において表れている領域の特定などといった精細な解析を行う場合は、解像度が高い映像を解析する必要がある。一方で、解像度が高い撮影映像が映像送信システム１２から中央監視装置１０に送信されるとコンピュータネットワーク１４に負荷がかかる。

本実施形態では、映像の解析は高解像度の撮影映像に対して実行されるので、映像の解析精度は確保される。また送信される映像は低解像度映像なので、コンピュータネットワーク１４の負荷は軽減できる。このようにして本実施形態によれば、駅のプラットホーム３０を撮影した映像の解析精度を確保しつつ送信によりかかるコンピュータネットワーク１４の負荷を低減できることとなる。

以上の説明では、撮影画像３２にターゲットオブジェクト３４が表れていると判定された個別画像領域４２について、映像の監視の優先度が決定されるようにした。ここで例えば、撮影画像３２にターゲットオブジェクト３４が表れていると判定されたか否かに関係なく、すべての個別画像領域４２について、映像の監視の優先度が決定されてもよい。

図１２は、合成画像４０の別の一例を示す図である。図１３は、９個の映像送信システム１２（１２ａ〜１２ｉ）のそれぞれが配置されている駅と、これらの駅の間を運行する車両との関係の別の一例が模式的に示されている。また図１３には、車両の進行方向が矢印で表現されている。図１３には、図１２に例示する合成画像４０に対応付けられる撮影画像３２の撮影タイミングにおける車両の位置が、車両オブジェクト５２の位置として示されていることとする。

ここで図１３に示すように、駅オブジェクト５０ｇと車両オブジェクト５２ｄとの間の長さは、駅オブジェクト５０ｃと車両オブジェクト５２ｂとの間の長さよりも短い。また駅オブジェクト５０ｆと車両オブジェクト５２ｃとの間の長さは、駅オブジェクト５０ｇと車両オブジェクト５２ｄとの間の長さよりも短い。また駅オブジェクト５０ｂと車両オブジェクト５２ａとの間の長さは、駅オブジェクト５０ｆと車両オブジェクト５２ｃとの間の長さよりも短い。例えばこのような場合に、映像の監視の優先度が高い方から順に、個別画像領域４２ｂ、個別画像領域４２ｆ、個別画像領域４２ｇ、個別画像領域４２ｃと決定されてもよい。

図１２には、以上のようにして決定された映像の監視の優先度に応じた態様の判定識別画像４４が示されている。なお本実施形態では、映像の監視の優先度に応じた態様が予め定められていることとする。例えば、最も優先度が高い態様が判定識別画像４４ａのような塗りつぶされた模様で、次に優先度が高い態様が判定識別画像４４ｂのようなハッチの模様で、その次に優先度が高い態様が判定識別画像４４ｃのような白抜きの模様であることとする。また優先度が４番目以降である個別画像領域４２には、判定識別画像４４が配置されないこととする。そのため図１２の例では、判定識別画像４４ａは、個別画像領域４２ｂを囲むよう配置され、判定識別画像４４ｂは、個別画像領域４２ｆを囲むよう配置され、判定識別画像４４ｃは、個別画像領域４２ｇを囲むよう配置されることとなる。

なお、以上の例では、送信データに対応付けられる番線がある駅と車両との間の距離に基づいて、映像の監視の優先度が決定された。ここで例えば、上述したように、番線に車両が到着するまでの推定時間、番線を通過する際の車両の速度、番線に進入する際の車両の乗客の属性、などに基づいて、映像の監視の優先度が決定されてもよい。また上述したように、映像の監視の優先度に応じた態様は図１２に示すような模様には限定されない。

合成映像に表れている個々の映像の監視の優先度は様々であるにも関わらず、優先度が合成映像に表れていないと重点的に監視すべき部分を監視者が容易に認識できない。

本実施形態によれば、以上のようにすることで、表示されている合成映像から重点的に監視すべき部分を監視者が容易に認識できることとなる。

以下、本実施形態に係る駅監視システム１の機能、並びに、本実施形態に係る駅監視システム１で実行される処理についてさらに説明する。

図１４は、駅のプラットホーム３０を監視する本実施形態に係る駅監視システム１に含まれる、中央監視装置１０、及び、映像送信システム１２で実装される機能の一例を示す機能ブロック図である。なお、本実施形態に係る中央監視装置１０、及び、映像送信システム１２で、図１４に示す機能のすべてが実装される必要はなく、また、図１４に示す機能以外の機能が実装されていても構わない。

図１４に示すように、本実施形態に係る中央監視装置１０には、機能的には例えば、送信データ受信部６０、映像取得部６２、車両状況データ取得部６４、監視優先度決定部６６、合成映像生成部６８、撮影映像送信要求部７０、撮影映像受信部７２、表示制御部７４、が含まれる。送信データ受信部６０、撮影映像送信要求部７０、撮影映像受信部７２は、通信部１０ｃを主として実装される。映像取得部６２、車両状況データ取得部６４、監視優先度決定部６６、合成映像生成部６８は、プロセッサ１０ａを主として実装される。表示制御部７４は、プロセッサ１０ａ、全体監視モニタ１０ｄ、及び、個別監視モニタ１０ｅを主として実装される。中央監視装置１０は、本実施形態における、駅のプラットホーム３０を監視する駅監視装置としての役割を担うこととなる。

以上の機能は、コンピュータである中央監視装置１０にインストールされた、以上の機能に対応する指令を含むプログラムをプロセッサ１０ａで実行することにより実装されてもよい。このプログラムは、例えば、光ディスク、磁気ディスク、磁気テープ、光磁気ディスク、フラッシュメモリ等のコンピュータ読み取り可能な情報記憶媒体を介して、あるいは、インターネットなどを介して中央監視装置１０に供給されてもよい。

図１４に示すように、本実施形態に係る映像送信システム１２には、機能的には例えば、撮影映像取得部８０、判定部８２、送信データ生成部８４、送信データ送信部８６、送信要求受信部８８、撮影映像送信部９０、が含まれる。また判定部８２には、画像認識部８２ａと、追尾部８２ｂと、が含まれる。撮影映像取得部８０は、カメラ２０、及び、映像解析装置２２のプロセッサ２２ａを主として実装される。判定部８２は、映像解析装置２２のプロセッサ２２ａを主として実装される。送信データ生成部８４は、映像解析装置２２のプロセッサ２２ａ、通信部２２ｃ、及び、ダウンコンバータ２４を主として実装される。送信データ送信部８６、送信要求受信部８８、撮影映像送信部９０は、映像解析装置２２の通信部２２ｃを主として実装される。本実施形態に係る映像解析装置２２は、送信データを中央監視装置１０に送信する送信装置としての役割を担うこととなる。

以上の機能は、コンピュータである映像解析装置２２にインストールされた、以上の機能に対応する指令を含むプログラムをプロセッサ２２ａで実行することにより実装されてもよい。このプログラムは、例えば、光ディスク、磁気ディスク、磁気テープ、光磁気ディスク、フラッシュメモリ等のコンピュータ読み取り可能な情報記憶媒体を介して、あるいは、インターネットなどを介して映像解析装置２２に供給されてもよい。

また、送信データ生成部８４が、ダウンコンバータ２４等のハードウェア及び映像解析装置２２で動作するソフトウェアで実装されてもよい。また、送信データ生成部８４が、ダウンコンバータ２４等のハードウェアのみ、あるいは、映像解析装置２２で動作するソフトウェアのみにより実装されてもよい。

送信データ受信部６０は、本実施形態では例えば、それぞれ互いに異なる映像送信システム１２から送信される複数の上述の送信データを受信する。ここで上述のように、送信データには、撮影映像を低解像度化した低解像度映像と当該撮影映像にターゲットオブジェクト３４が表れているか否かの判定の結果とが示されている。

映像取得部６２は、本実施形態では例えば、それぞれ互いに異なる監視対象の様子を表す複数の映像を取得する。ここで映像取得部６２は、送信データ受信部６０が受信する複数の送信データのそれぞれが示す低解像度映像を取得してもよい。

以上の説明では、１つのプラットホーム３０は１つのカメラ２０によって撮影されていた。ここで例えば１つのプラットホーム３０の互いに異なる部分がそれぞれ別のカメラ２０によって撮影されてもよい。この場合、１つのカメラ２０によって撮影されるプラットホーム３０の一部と、別のカメラ２０によって撮影される当該プラットホーム３０の別の一部とは、互いに異なる監視対象であることとなる。また１つのカメラ２０によって複数のプラットホーム３０が撮影されてもよい。この場合、当該複数のプラットホーム３０が１つの監視対象に相当することとなる。

車両状況データ取得部６４は、本実施形態では例えば、監視対象の様子を表す映像に対応付けられる番線に進入する車両の状況を示す車両状況データを取得する。ここで上述のように、車両状況データ取得部６４は、公知の運行管理システムから車両状況データを取得してもよい。

監視優先度決定部６６は、本実施形態では例えば、監視対象の様子を表す映像に対応付けられる番線に進入する車両の状況に基づいて、当該映像の監視の優先度を決定する。ここで例えば、車両状況データ取得部６４が取得する車両状況データに基づいて、映像の監視の優先度が決定されてもよい。

上述のように、監視優先度決定部６６は、監視対象の様子を表す映像に対応付けられる番線がある駅と車両との間の距離に基づいて、当該番線に対応付けられる映像の監視の優先度を決定してもよい。

また、監視優先度決定部６６は、監視対象の様子を表す映像に対応付けられる番線に車両が到着するまでの推定時間に基づいて、当該番線に対応付けられる映像の監視の優先度を決定してもよい。

また、監視優先度決定部６６は、監視対象の様子を表す映像に対応付けられる番線を通過する際の車両の速度に基づいて、当該番線に対応付けられる映像の監視の優先度を決定してもよい。

また、監視優先度決定部６６は、監視対象の様子を表す映像に対応付けられる番線に進入する車両の乗客の属性に基づいて、当該番線に対応付けられる映像の監視の優先度を決定してもよい。

また、監視優先度決定部６６は、上述の距離、推定時間、速度、乗客の属性のうちの複数の組合せに基づいて、映像の監視の優先度を決定してもよい。

合成映像生成部６８は、本実施形態では例えば、それぞれ互いに異なる監視対象の様子を表す複数の映像を合成した合成映像を生成する。ここで合成映像生成部６８は、映像の監視の優先度が表された合成映像を生成してもよい。

また合成映像生成部６８は、複数の送信データのそれぞれが示す低解像度映像を合成した合成映像を生成してもよい。ここで合成映像生成部６８は、映像取得部６２が取得する映像を合成した合成映像を生成してもよい。また合成映像生成部６８は、複数の送信データのうちの少なくとも１つが示す上述の判定の結果が表された合成映像を生成してもよい。また合成映像生成部６８は、複数の送信データのそれぞれが示す上述の判定の結果が当該送信データを送信する映像送信システム１２に対応付けられる番線に進入する車両の状況に応じた態様で表された合成映像を生成してもよい。

撮影映像送信要求部７０は、本実施形態では例えば、映像送信システム１２に当該映像送信システム１２が設置されているプラットホーム３０を撮影した撮影映像の送信要求を送信する。ここで例えば監視者等のユーザによって指定された映像送信システム１２に撮影映像の送信要求が送信されてもよい。また例えば、映像の監視の優先度に基づいて決定される映像送信システム１２に撮影映像の送信要求が送信されてもよい。ここで例えば監視の優先度が最も高い映像を撮影するカメラ２０を含む映像送信システム１２に撮影映像の送信要求が送信されてもよい。

撮影映像受信部７２は、本実施形態では例えば、撮影映像の送信要求の受信に応じて映像送信システム１２が送信する撮影映像を受信する。

表示制御部７４は、本実施形態では例えば、合成映像生成部６８が生成する合成映像を表示させる。また表示制御部７４は、本実施形態では例えば、撮影映像受信部７２が受信する撮影映像を表示させる。上述の例では表示制御部７４は、合成映像を全体監視モニタ１０ｄに表示させ、撮影映像を個別監視モニタ１０ｅに表示させる。

また表示制御部７４は、複数の撮影映像を切替表示させてもよい。例えば監視の優先度の高い複数の撮影映像が、自動的に所定の時間ずつ繰り返し切替表示されるようにしてもよい。また撮影映像送信要求部７０が、表示の切替タイミングに応じて、撮影映像の送信要求の送信先である映像送信システム１２を変更するようにしてもよい。

撮影映像取得部８０は、本実施形態では例えば、監視対象を撮影した撮影映像を取得する。ここで例えば、映像送信システム１２が設置されているプラットホーム３０を撮影した撮影映像が取得されてもよい。

判定部８２は、本実施形態では例えば、撮影映像取得部８０が取得する撮影映像に基づいて、当該撮影映像に所与のオブジェクトが表れているか否かを判定する。ここで例えば上述のターゲットオブジェクト３４が当該所与のオブジェクトに相当する。

画像認識部８２ａは、本実施形態では例えば、撮影画像３２に対する画像認識処理を実行することによって当該撮影画像３２内においてターゲットオブジェクト３４が表れている領域を特定する。

追尾部８２ｂは、本実施形態では例えば、撮影画像３２内においてターゲットオブジェクト３４が表れている領域を、当該撮影画像３２よりも前に撮影された撮影画像３２について画像認識部８２ａが特定した領域を追尾することにより特定する。

送信データ生成部８４は、本実施形態では例えば、撮影映像と上述の判定の結果とに基づいて、当該撮影映像を低解像度化した低解像度映像と当該判定の結果とを示す送信データを生成する。

送信データ送信部８６は、本実施形態では例えば、送信データ生成部８４が生成する送信データを中央監視装置１０に送信する。

送信要求受信部８８は、本実施形態では例えば、中央監視装置１０の撮影映像送信要求部７０が送信する撮影映像の送信要求を受信する。

撮影映像送信部９０は、本実施形態では例えば、送信要求受信部８８による撮影映像の送信要求の受信に応じて、撮影映像を中央監視装置１０に送信する。ここで撮影映像送信部９０は、撮影映像取得部８０が取得する撮影映像を中央監視装置１０に送信してもよい。

また撮影映像送信部９０は、送信要求受信部８８による撮影映像の送信要求の受信に応じて、撮影映像と上述の判定の結果とを示す代替送信データを中央監視装置１０に送信してもよい。ここで上述のように、例えば撮影映像に含まれる撮影画像３２に基づいて生成される領域特定結果画像３６をフレーム画像として含む映像が代替送信データとして送信されてもよい。

この場合、中央監視装置１０の表示制御部７４は、代替送信データの受信に応じて、当該代替送信データが示す上述の判定の結果が表された、当該代替送信データが示す撮影映像を表示させてもよい。例えば中央監視装置１０の表示制御部７４は、領域特定結果画像３６をフレーム画像として含む映像を表示させてもよい。

以下、本実施形態に係る映像送信システム１２において所定のフレームレートで繰り返し行われる処理の流れの一例を、図１５に例示するフロー図を参照しながら説明する。

まず、撮影映像取得部８０が、撮影画像３２を取得する（Ｓ１０１）。ここで取得される撮影画像３２は、撮影映像における当該フレームのフレーム画像である。

そして、撮影映像取得部８０が、画像認識部８２ａによる画像認識が可能であるか否かを判定する（Ｓ１０２）。ここで例えば当該フレームよりも前のフレームで取得された撮影画像３２に対する画像認識を画像認識部８２ａが実行中である場合は、画像認識が可能でないことが判定される。一方、撮影画像３２に対する画像認識を画像認識部８２ａが実行していない場合は、画像認識が可能であることが判定される。

画像認識部８２ａによる画像認識が可能であると判定された場合は（Ｓ１０２：Ｙ）、画像認識部８２ａは、Ｓ１０１に示す処理で取得された撮影画像３２に対して、画像認識処理の実行を開始する（Ｓ１０３）。当該画像認識処理によって、当該撮影画像３２内においてターゲットオブジェクト３４が表れているターゲット領域が特定されることとなる。ここで上述の領域特定結果画像３６が生成されてもよい。また例えばターゲット領域の位置や形状を示すターゲット領域情報が生成されてもよい。

画像認識部８２ａによる画像認識が可能でないと判定された場合は（Ｓ１０２：Ｎ）、追尾部８２ｂは、Ｓ１０３に示す処理での画像認識処理の結果である、利用可能なターゲット領域の特定結果があるか否かを確認する（Ｓ１０４）。Ｓ１０３に示す処理が実行された後も同様に、追尾部８２ｂは、Ｓ１０３に示す処理での画像認識処理の結果である、利用可能なターゲット領域の特定結果があるか否かを確認する（Ｓ１０４）。

ここで特定結果があることが確認された場合は（Ｓ１０４：Ｙ）、追尾部８２ｂは、追尾処理を実行する（Ｓ１０５）。ここでは図８を参照して説明したように、例えばＳ１０３に示す処理での画像認識処理における最新の利用可能な特定結果が特定される。そして当該特定結果が示す撮影画像３２内におけるターゲット領域を追尾することにより、Ｓ１０１に示す処理で取得された撮影画像３２内においてターゲットオブジェクト３４が表れているターゲット領域が特定される。ここで上述の領域特定結果画像３６が生成されてもよい。また例えばターゲット領域の位置や形状を示すターゲット領域情報が生成されてもよい。

利用可能なターゲット領域の特定結果がないことが確認された場合は（Ｓ１０４：Ｎ）、追尾部８２ｂが、Ｓ１０１に示す処理で取得された撮影画像３２にターゲットオブジェクト３４が表れているか否かを判定する（Ｓ１０６）。Ｓ１０５に示す処理が終了した場合も同様に、追尾部８２ｂが、Ｓ１０１に示す処理で取得された撮影画像３２にターゲットオブジェクト３４が表れているか否かを判定する（Ｓ１０６）。ここでは例えば、Ｓ１０５に示す処理でターゲット領域が特定された場合は、撮影画像３２にターゲットオブジェクト３４が表れていると判定される。また、Ｓ１０５に示す処理で追尾できず、ターゲット領域が特定されなかった場合は、撮影画像３２にターゲットオブジェクト３４が表れていないと判定される。また、Ｓ１０４に示す処理で利用可能なターゲット領域の特定結果がないことが確認された場合も、撮影画像３２に所与のオブジェクトが表れていないと判定される。

そして送信データ生成部８４は、Ｓ１０１に示す処理で取得された撮影画像３２を低解像度化することにより、低解像度画像を生成する（Ｓ１０７）。ここで上述のように、領域特定結果画像３６を低解像度化することにより低解像度画像が生成されてもよい。

そして送信データ生成部８４は、Ｓ１０６に示す処理での判定の結果とＳ１０７に示す処理で生成された低解像度画像とに基づいて、送信データを生成する（Ｓ１０８）。ここでは例えばＳ１０７に示す処理で生成された、低解像度化された領域特定結果画像３６を含む送信データが生成されてもよい。また例えば、ヘッダ等に、Ｓ１０６に示す処理での判定の結果を示すフラグを含む送信データが生成されてもよい。また例えば、撮影画像３２を低解像度化した低解像度画像と、当該低解像度画像内におけるターゲット領域の位置や形状を示すターゲット領域情報と、を含む送信データが生成されてもよい。

そして送信データ送信部８６は、Ｓ１０８に示す処理で生成された送信データを中央監視装置１０に送信して（Ｓ１０９）、Ｓ１０１に示す処理に戻る。

本処理例では、Ｓ１０１〜Ｓ１０９に示す処理が所定のフレームレートで繰り返し実行される。なお上述の処理例に示す処理では、送信データの送信が毎フレーム行われるが、例えば、Ｓ１０１〜Ｓ１０８に示す処理が複数回繰り返し実行された後に、生成された複数の送信データがまとめて中央監視装置１０に送信されてもよい。

以下、本実施形態に係る中央監視装置１０において所定のフレームレートで繰り返し行われる処理の流れの一例を、図１６に例示するフロー図を参照しながら説明する。なお本処理例に示す処理では、送信データ受信部６０は、複数の映像送信システム１２のそれぞれから受信する送信データをバッファすることとする。

まず、映像取得部６２が、当該フレームにおける複数の送信データを送信データ受信部６０のバッファから取得する（Ｓ２０１）。当該複数の送信データは、複数の映像送信システム１２のそれぞれから送信されたものである。なお本処理例では、送信データにはフレーム番号が含まれており、当該フレームにおける複数の送信データは映像取得部６２が特定できることとする。

そして、合成映像生成部６８が、Ｓ２０１に示す処理で取得した複数の送信データのそれぞれについて、当該送信データに対応付けられる撮影画像３２にターゲットオブジェクト３４が表れているか否かの判定の結果を特定する（Ｓ２０２）。上述したように例えば、送信データが示す低解像度画像からのターゲット領域画像３８の検出結果、送信データに含まれるフラグが示す判定の結果、送信データに含まれるターゲット領域情報、などに基づいて、判定の結果は特定される。

そして車両状況データ取得部６４が、当該フレームにおける車両の状況を示す車両状況データを取得する（Ｓ２０３）。

そして監視優先度決定部６６が、Ｓ２０３に示す処理で取得した車両状況データに基づいて、Ｓ２０１に示す処理で取得された複数の送信データのそれぞれについて、映像の監視の優先度を決定する（Ｓ２０４）。ここでＳ２０２において撮影画像３２にターゲットオブジェクト３４が表れていると判定された送信データについてのみ、映像の監視の優先度が決定されてもよい。

そして合成映像生成部６８が、当該フレームにおける合成画像４０を生成する（Ｓ２０５）。ここでは例えば、Ｓ２０１に示す処理で取得された送信データに含まれる低解像度映像、Ｓ２０２に示す処理で特定された判定の結果、及び、Ｓ２０４に示す処理で決定された優先度に基づいて、合成画像４０が生成される。

そして表示制御部７４が、Ｓ２０５に示す処理で生成された合成画像４０を表示させて（Ｓ２０６）、Ｓ２０１に示す処理に戻る。

本処理例では、Ｓ２０１〜Ｓ２０６に示す処理が所定のフレームレートで繰り返し実行される。

なお、本発明は上述の実施形態に限定されるものではない。

例えば、図１７及び図１８に示すように、改札口などの特定の場所におけるターゲットオブジェクト３４の検出に応じて当該特定の場所の画像が撮影されてもよい。以下、このようにして撮影される、ターゲットオブジェクト３４の検出に応じて撮影される当該ターゲットオブジェクト３４が検出された場所の画像を参照撮影画像９２と呼ぶこととする。ここで参照撮影画像９２は、例えば、駅のプラットホーム３０等の監視対象を撮影するカメラ２０とは異なるカメラ２０により撮影される。

図１７には、ターゲットオブジェクト３４を改札口において前方から撮影した参照撮影画像９２ａの一例が示されている。図１８には、ターゲットオブジェクト３４を改札口において後方から撮影した参照撮影画像９２ｂの一例が示されている。このように、ＩＣタグの検出に応じて互いに異なる方向から複数の参照撮影画像９２が撮影されるようにしてもよい。

ここで例えば白杖に埋め込まれたＩＣタグ、白杖を持った人物が持参しているＩＣカード、補助犬にぶらさげられているＩＣカード、などを検出するセンサが、改札口などの特定の場所に設置されていてもよい。そして当該センサによるＩＣタグやＩＣカードの検出に応じて、１または複数の参照撮影画像９２が撮影されるようにしてもよい。なおターゲットオブジェクト３４がＩＣタグやＩＣカードの検出とは異なる方法で検出されてもよい。

なおターゲットオブジェクト３４の検出が行われる場所は、改札口には限定されない。例えば、ホームドアなどに上述のセンサが設置されていてもよい。そして当該センサによるターゲットオブジェクト３４の検出に応じて、ホームドア及びその周辺の場所の参照撮影画像９２が撮影されるようにしてもよい。

そして撮影映像取得部８０が、このようにして撮影される参照撮影画像９２を取得してもよい。ここで撮影映像取得部８０が、互いに異なる方向から撮影される複数の参照撮影画像９２を取得してもよい。

そして画像認識部８２ａが、上述の参照撮影画像９２に対して公知の画像認識技術による画像認識処理を実行し、当該参照撮影画像９２においてターゲットオブジェクト３４が表れているターゲット領域を特定してもよい。そして画像認識部８２ａが、当該ターゲット領域を示す上述のターゲット領域情報を生成してもよい。

図１９は、図１７に示す参照撮影画像９２ａに基づいて生成されるターゲット領域情報の一例である領域特定結果画像９４ａの一例を示す図である。図２０は、図１８に示す参照撮影画像９２ｂに基づいて生成されるターゲット領域情報の一例である領域特定結果画像９４ｂの一例を示す図である。

図１９に示す領域特定結果画像９４ａでは、図１７に示す参照撮影画像９２ａにターゲットオブジェクト３４を囲む枠状のターゲット領域画像９６ａが重畳されている。図２０に示す領域特定結果画像９４ｂでは、図１８に示す参照撮影画像９２ｂにターゲットオブジェクト３４を囲む枠状のターゲット領域画像９６ｂが重畳されている。

そして判定部８２が、参照撮影画像９２と、駅のプラットホーム３０等の監視対象を撮影した撮影映像とに基づいて、当該撮影映像にターゲットオブジェクト３４が表れているか否かを判定してもよい。ここで互いに異なる方向から撮影される複数の参照撮影画像９２と、撮影映像とに基づいて、当該撮影映像にターゲットオブジェクト３４が表れているか否かが判定されてもよい。

例えば画像認識部８２ａが、参照撮影画像９２に基づいて特定されるターゲット領域を用いて撮影画像３２に対する画像認識処理を実行することによって、当該撮影画像３２内においてターゲットオブジェクト３４が表れている領域を特定してもよい。

あるいは、追尾部８２ｂが、撮影画像３２内においてターゲットオブジェクト３４が表れている領域を、上述の参照撮影画像９２について画像認識部８２ａが特定したターゲット領域を追尾することにより特定してもよい。

ターゲットオブジェクト３４の検出に応じて撮影される参照撮影画像９２には、ターゲットオブジェクト３４が鮮明に表れている可能性が高い。そのため以上のようにすることで、駅のプラットホーム３０等の監視対象を撮影した撮影画像３２からより的確にターゲットオブジェクト３４が検出できることとなる。

またここで互いに異なる方向から複数の参照撮影画像９２が撮影されるようにすることで、より多くの情報を用いて駅のプラットホーム３０等の監視対象を撮影した撮影画像３２に対する画像認識処理や追尾処理が実行できる。そのため、駅のプラットホーム３０等の監視対象を撮影した撮影画像３２からより的確にターゲットオブジェクト３４が検出できることとなる。

また例えば中央監視装置１０と映像送信システム１２との役割分担は上述のものには限定されない。例えば、監視対象の様子を表す映像に対応付けられる番線に進入する車両の状況は、映像送信システム１２において特定されてもよい。そして当該車両の状況を示す車両状況データが映像送信システム１２から中央監視装置１０に送信されてもよい。そして中央監視装置１０が、映像送信システム１２から受信した車両状況データに基づいて、映像の監視の優先度を決定してもよい。

また例えば、１つの映像送信システム１２で複数の駅の監視対象を監視してもよい。この場合は、１つの映像送信システム１２は、互いに異なる複数の駅に設置される複数のカメラ２０を含むこととなる。そして１つの映像送信システム１２が、当該複数のカメラ２０のそれぞれが撮影する映像に基づいて、当該映像に対応付けられる送信データを生成してもよい。

また中央監視装置１０の機能の一部又は全部が、１つの映像送信システム１２に実装されてもよい。また例えば１つの映像送信システム１２が、複数の駅のプラットホーム３０を監視してもよい。また例えば１つの映像送信システム１２が、当該映像送信システム１２が配置されている駅に設置されている複数のプラットホーム３０を監視してもよい。このように本発明は、中央監視装置１０における複数の駅の監視のみならず、１つの駅における複数のプラットホーム３０の監視にも適用可能である。

また、上述の具体的な文字列や数値、並びに、図面中の具体的な文字列は例示であり、これらの文字列や数値には限定されない。

Claims (7)

1. 駅のプラットホームを監視する駅監視装置であって、
   それぞれ互いに異なる監視対象の様子を表す複数の映像を取得する映像取得手段と、
   前記映像に対応付けられる番線に進入する車両の状況に基づいて、当該映像の監視の優先度を決定する監視優先度決定手段と、
   前記監視の優先度が表された、前記複数の映像を合成した合成映像を生成する合成映像生成手段と、
   前記合成映像を表示させる表示制御手段と、
   を含むことを特徴とする駅監視装置。
2. 前記監視優先度決定手段は、前記番線がある駅と前記車両との間の距離に基づいて、当該番線に対応付けられる映像の監視の優先度を決定する、
   ことを特徴とする請求項１に記載の駅監視装置。
3. 前記監視優先度決定手段は、前記番線に前記車両が到着するまでの推定時間に基づいて、当該番線に対応付けられる映像の監視の優先度を決定する、
   ことを特徴とする請求項１又は２に記載の駅監視装置。
4. 前記監視優先度決定手段は、前記番線を通過する際の前記車両の速度に基づいて、当該番線に対応付けられる映像の監視の優先度を決定する、
   ことを特徴とする請求項１から３のいずれか一項に記載の駅監視装置。
5. 前記監視優先度決定手段は、前記番線に進入する車両の乗客の属性に基づいて、当該番線に対応付けられる映像の監視の優先度を決定する、
   ことを特徴とする請求項１から４のいずれか一項に記載の駅監視装置。
6. 駅のプラットホームを監視する駅監視方法であって、
   それぞれ互いに異なる監視対象の様子を表す複数の映像を取得するステップと、
   前記映像に対応付けられる番線に進入する車両の状況に基づいて、当該映像の監視の優先度を決定するステップと、
   前記監視の優先度が表された、前記複数の映像を合成した合成映像を生成するステップと、
   前記合成映像を表示させるステップと、
   を含むことを特徴とする駅監視方法。
7. 駅のプラットホームを監視するコンピュータに、
   それぞれ互いに異なる監視対象の様子を表す複数の映像を取得する手順、
   前記映像に対応付けられる番線に進入する車両の状況に基づいて、当該映像の監視の優先度を決定する手順、
   前記監視の優先度が表された、前記複数の映像を合成した合成映像を生成する手順、
   前記合成映像を表示させる手順、
   を実行させることを特徴とするプログラム。

Images