JP2017054367A - 監視システム - Google Patents

Abstract

【課題】利用者が所持する荷物の所持状況を監視することができる監視システムを提供することである。
【解決手段】実施形態の監視システムは、第１撮像部と、第１荷物検出部と、第２撮像部と、第２荷物検出部と、利用者抽出部と、判定部とを持つ。第１撮像部は、駅構外から自動改札機を通過し駅構内に向かう利用者の第１画像を撮像する。第１荷物検出部は、第１撮像部により撮像された利用者が所持する荷物の数を検出する。第２撮像部は、鉄道施設内において利用者の第２画像を撮像する。第２荷物検出部は、第２撮像部により撮像された利用者が所持する荷物の数を検出する。利用者抽出部は、第１画像と第２画像とを比較して、同一の利用者を撮像した画像を抽出する。判定部は、第１荷物検出部および第２荷物検出部により検出された利用者が所持する荷物の数を参照し、利用者抽出部により抽出された同一の利用者が所持する荷物の数の増減を判定する。
【選択図】図１

Description

本発明の実施形態は、監視システムに関する。

駅や空港等の公共交通機関において、施設内の様子を監視カメラによって撮像し、撮像された画像を監視するシステムが知られている。しかしながら、従来の技術では、施設を利用する利用者が所持する荷物の所持状況について、適切に監視することができない場合があった。

特開２０１０−９７２７２号公報

本発明が解決しようとする課題は、利用者が所持する荷物の所持状況を監視することができる監視システムを提供することである。

実施形態の監視システムは、第１撮像部と、第１荷物検出部と、第２撮像部と、第２荷物検出部と、利用者抽出部と、判定部とを持つ。第１撮像部は、駅構外から自動改札機を通過し駅構内に向かう利用者の第１画像を撮像する。第１荷物検出部は、前記第１撮像部により撮像された利用者が所持する荷物の数を検出する。第２撮像部は、鉄道施設内において利用者の第２画像を撮像する。第２荷物検出部は、前記第２撮像部により撮像された利用者が所持する荷物の数を検出する。利用者抽出部は、前記第１撮像部により撮像された第１画像と前記第２撮像部により撮像された第２画像とを比較して、同一の利用者を撮像した画像を抽出する。判定部は、前記第１荷物検出部および前記第２荷物検出部により検出された利用者が所持する荷物の数を参照し、前記利用者抽出部により抽出された同一の利用者が所持する荷物の数の増減を判定する。

監視システム１の構成の一例を示す図。 自動改札機１００を上方から見た図。 自動改札機１００の主機１１０を通路側から見た図。 透過型光電センサＳｔと、正面側距離センサ１２０と、通路側距離センサ１２２とについて説明するための図。 自動改札機１００の機能構成の一例を示す図。 データ管理部１６０により対応付けられた同一の利用者に関する情報Ｄの一例を示す図。 列車ＴＲの車内配置の一例を示す図。 列車制御装置４５０の機能構成の一例を示す図。 中央サーバ装置５００の機能構成の一例を示す図。 上方カメラ３００により撮像された画像とセンサ情報処理部５１８による処理結果とを対比して示す図。 正面側距離センサ１２０の検出結果とセンサ情報処理部５１８による処理結果とを対比して示す図。 通路側距離センサ１２２の検出結果とセンサ情報処理部５１８による処理結果とを対比して示す図。 利用者が所持する荷物の数Ｄ４が記憶された中央側利用者データベースＤＢの一例を示す図。 荷物増減リストＬＳの一例を示す図。 監視システム１の処理の流れの一例を示すシーケンス図。 自動改札機１００の処理の流れの一例を示すフローチャート。 中央サーバ装置５００により実行される処理の流れの一例を示すフローチャート。 荷物判定部５２０により実行される詳細な処理（ステップＳ３１２）の流れを示すフローチャート。 端末装置６００の表示部に表示される画像ＩＭの一例を示す図。

以下、実施形態の監視システムを、図面を参照して説明する。

図１は、監視システム１の構成の一例を示す図である。本実施形態の監視システム１は、例えば、鉄道の駅における入出場を管理するために用いられる。また、一例として、複数の駅を代表して、２つの駅について説明する。監視システム１は、例えば、複数の自動改札機１００と、駅サーバ装置２００−１および２００−２と、複数の上方カメラ３００と、列車ＴＲと、列車サーバ装置４００と、中央サーバ装置５００と、端末装置６００とを備える。以下、駅サーバ装置２００−１と２００−２とを区別しない場合は、単に駅サーバ装置２００という。

自動改札機１００は、例えば、駅の改札口に複数台設けられる。駅に改札口が複数存在する場合、自動改札機１００は、この改札口ごとに設けられる。自動改札機１００は、図示しない券売機等により発行された乗車券ＴＩＸから情報を読み取ることによって、利用者の入出場を制限する。本実施形態において、この乗車券ＴＩＸを、券の表面あるいは裏面に磁気記録面を有する磁気券として説明する。例えば、この磁気記録面には、乗車券情報が記録される。乗車券情報には、例えば、有効期間、乗車駅（発駅）、乗車可能区間、乗車券のそれぞれを識別する乗車券識別情報（乗車券ＩＤ）、乗車時刻、駅構内からの出場、或いは駅構内への入場を示す入出場情報等の情報が含まれる。

駅サーバ装置２００は、例えば駅ごとに設けられ、無線や有線によって上述した自動改札機１００と通信を行う。駅サーバ装置２００は、自動改札機１００から取得した情報を処理し、ＬＡＮ（Local Area Network）やＷＡＮ（Wide Area Network）等を含むネットワークＮＷを介して、他駅に設けられた駅サーバ装置２００、列車サーバ装置４００、または中央サーバ装置５００に処理した情報を送信する。

上方カメラ３００は、例えば、ＣＣＤ（Charge-Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等のイメージセンサを有する。上方カメラ３００は、例えば、自動改札機１００の主機１１０と従機１３０との間に形成された通路の上部（例えば天井）に配置される。上方カメラ３００は、例えば、自動改札機１００の主機１１０と従機１３０との間に形成された通路を通過する利用者を撮像する。上方カメラ３００は、専用線やＬＡＮ等を介して俯瞰的に撮像した画像を駅サーバ装置２００または中央サーバ装置５００に送信する。

列車ＴＲは、列車の車両の内部に設置されたカメラにより撮像された画像の画像データや、利用者および利用者が所持する荷物を検出するセンサの検出結果を、列車サーバ装置４００に無線通信を用いて送信する。

列車サーバ装置４００は、例えば、アンテナ４１０を用いて無線通信することによって上述した列車ＴＲと通信を行う。列車サーバ装置４００は、列車ＴＲから取得した情報を処理し、ネットワークＮＷを介して他駅に設けられた駅サーバ装置２００または中央サーバ装置５００に処理した情報を送信する。

中央サーバ装置５００は、無線や有線によって上述した駅サーバ装置２００または列車サーバ装置４００と通信を行い、駅サーバ装置２００または列車サーバ装置４００から取得した情報を処理し、処理した結果を駅サーバ装置２００、列車サーバ装置４００、または駅の施設を監視する駅係員が操作する端末装置６００に送信する。

以下、上述した自動改札機１００、列車ＴＲ、および中央サーバ装置５００について説明する。まず自動改札機１００について説明を行う。

図２は、自動改札機１００を上方から見た図である。自動改札機１００は、例えば、通路を挟んで対向配置される主機１１０と従機１３０とを備える。主機１１０は、例えば、読取部１１１と、上面表示部１１２と、正面表示部１１３と、扉部１１４および１１５と、乗車券投入口１１６と、乗車券排出口１１７と、カメラ１１８と、接近センサＳｃと、正面側距離センサ１２０と、改札機側制御部１５０とを備える。また、従機１３０は、例えば、読取部１３１と、上面表示部１３２と、正面表示部１３３と、扉部１３４および１３５と、乗車券投入口１３６と、乗車券排出口１３７と、カメラ１３８と、接近センサＳｃと、正面側距離センサ１４０とを備える。

主機１１０の読取部１１１は、図２に示すａ方向に通過しようとする利用者によって乗車券投入口１１６に投入された乗車券ＴＩＸに記録された乗車券情報を読み取り、読み取った乗車券情報を改札機側制御部１５０に送信する。また、読取部１１１は、改札機側制御部１５０により出力された情報に基づいて、乗車券ＴＩＸの乗車券情報を書き換え、乗車券排出口１１７から排出する。上面表示部１１２は、乗車券投入口１１６に乗車券ＴＩＸが投入された場合に、改札機側制御部１５０によって処理された結果、または駅サーバ装置２００から受信した情報に基づく画像を表示する。正面表示部１１３は、図２に示すａ方向に通過可能であるか否かを示すマークや図形、文字等を表示する。正面表示部１１３の表示内容または表示の有無は、改札機側制御部１５０によって決定される。

一方、従機１３０の読取部１３１は、図２に示すｂ方向に通過しようとする利用者によって乗車券投入口１３６に投入された乗車券ＴＩＸに記録された乗車券情報を読み取り、読み取った乗車券情報を改札機側制御部１５０に送信する。また、読取部１３１は、改札機側制御部１５０により出力された情報に基づいて、乗車券ＴＩＸの乗車券情報を書き換え、乗車券排出口１３７から排出する。上面表示部１３２は、乗車券投入口１３６に乗車券ＴＩＸが投入された場合に、改札機側制御部１５０によって処理された結果、または駅サーバ装置２００から受信した情報に基づく画像を表示する。正面表示部１３３は、図２に示すｂ方向に通過可能であるか否かを示すマークや図形、文字等を表示する。正面表示部１３３の表示内容または表示の有無は、改札機側制御部１５０によって決定される。

改札機側制御部１５０は、図２に示すａ方向への利用者の通過を制御する動作モードに自動改札機１００が設定されている場合、扉部１１５および１３５を開放状態に維持すると共に、扉部１１４および１３４を開放状態または閉止状態に制御することで、ａ方向の利用者の通過を許可または禁止する。また、改札機側制御部１５０は、図２に示すｂ方向への利用者の通過を制御する動作モードに自動改札機１００が設定されている場合、扉部１１４および１３４を開放状態に維持すると共に、扉部１１５および１３５を開放状態または閉止状態に制御することで、ｂ方向の利用者の通過を許可または禁止する。

また、自動改札機１００の動作モードには、図２に示すａ方向の通過とｂ方向の通過との双方を制御する動作モードが含まれていてもよい。この場合、改札機側制御部１５０は、例えば、利用者が通過中でなければ正面表示部１１３と正面表示部１３３の双方に通過を許可することを示すマークや図形、文字等を表示させる制御を行う。また、改札機側制御部１５０は、例えば、利用者がａ方向およびｂ方向のいずれかの側から進入し、乗車券投入口１１６と乗車券投入口１３６とのいずれか一方に乗車券ＴＩＸが投入されると、他方の乗車券投入口の開口を閉ざして乗車券ＴＩＸの投入を禁止すると共に、利用者が進入してきていない側の表示部（正面表示部１１３または正面表示部１３３）に、通過を禁止することを示すマークや図形、文字等を表示させる制御を行う。

なお、図２では、自動改札機１００は、乗車券情報が磁気記録面に記録された磁気券の専用機であるものとして説明したが、自動改札機１００は、更に、ＱＲコード（登録商標）等の二次元コードが印刷された紙券や、電子マネー等の情報を記憶することができる交通系ＩＣカードを処理可能な装置であってもよい。また、自動改札機１００は、利用者が双方向に通過可能なものに限らず、主機と補機により構成される、利用者が一方向にのみ通過可能なものであってもよい。

接近センサＳｃは、自動改札機１００に接近する利用者を検出する。接近センサＳｃは、例えば赤外線センサや、発光素子と受光素子を用いたセンサなどにより実現される。接近センサＳｃは、自動改札機１００に接近する利用者を検出した場合、利用者を検出したことを示す検出信号を改札機側制御部１５０に出力する。

カメラ１１８は、例えば、ＣＣＤやＣＭＯＳ等のイメージセンサを有する。図３は、自動改札機１００の主機１１０を通路側から見た図である。例えば、カメラ１１８のアングルは、接近センサＳｃの検出結果に基づいて、乗車券投入口１１６に乗車券ＴＩＸを投入する利用者の顔が視野角ＦＯＶ内に収まるように設定される。カメラ１１８は、改札機側制御部１５０の制御によって、乗車券投入口１１６に乗車券ＴＩＸを投入しようとする、あるいは投入した利用者を撮像する。カメラ１１８は、例えば、５から１０程度のｆｐｓ（frame per second）によって、時系列に連続した画像、すなわち動画を撮像する。カメラ１１８は、撮像した動画データ（画像データ）を改札機側制御部１５０に出力する。なお、従機１３０のカメラ１３８も、カメラ１１８と同様に、アングルが乗車券投入口１３６に乗車券ＴＩＸを投入する利用者の顔が視野角ＦＯＶ内に収まるように設定される。これによって、カメラ１３８は、改札機側制御部１５０の制御によって、乗車券投入口１３６に乗車券ＴＩＸを投入しようとする、あるいは投入した利用者を撮像する。カメラ１３８は、撮像した動画データ（画像データ）を改札機側制御部１５０に出力する。

また、自動改札機１００の主機１１０は、透過型光電センサＳｔと、正面側距離センサ１２０と、通路側距離センサ１２２とを更に備える。図４は、透過型光電センサＳｔと、正面側距離センサ１２０と、通路側距離センサ１２２とについて説明するための図である。透過型光電センサＳｔは、例えば、主機１１０の筐体面のうち、通路側の筐体面に等間隔に複数個設けられる。本実施形態では、投光器として機能する透過型光電センサＳｔと、受光器として機能する透過型光電センサＳｔとを１対として用いる。例えば、主機１１０に設けられる透過型光電センサＳｔが投光器である場合、従機１３０側に設けられる透過型光電センサＳｔは、受光器として機能する。後述する改札機側制御部１５０は、この複数の透過型光電センサＳｔの検出信号と、配置位置とに基づいて、利用者が通路内のどの位置にいるのかを特定する。

正面側距離センサ１２０（１４０）は、例えば主機１１０（従機１３０）の筐体面のうち、通路側の筐体面に設けられる。正面側距離センサ１２０（１４０）は、投光部と受光部とを有する。正面側距離センサ１２０（１４０）は、投光部が自動改札機１００の長手方向に対して投光した光が対象物に当たって反射光として受光部に受光されるまでの時間を測定する。対象物とは、例えば自動改札機を通過する利用者または利用者が所持する荷物である。正面側距離センサ１２０（１４０）は、検出結果を改札機側制御部１５０のセンサ制御部１５６に出力する。

通路側距離センサ１２２（１４２）は、例えば主機１１０（従機１３０）の筐体面のうち、通路側の筐体面に設けられる。正面側距離センサ１２２（１４２）は、投光部が従機１３０の筐体に対して投光した光が対象物に当たって反射光として受光部に受光されるまでの時間を測定する。正面側距離センサ１２２（１４２）は、検出結果を改札機側制御部１５０のセンサ制御部１５６に出力する。

図５は、自動改札機１００の機能構成の一例を示す図である。自動改札機１００は、図２に示す構成の他、改札機側制御部１５０の指示に従って、音声を出力するスピーカ１４８と、種々の情報を格納する改札機側記憶部１７０とを更に備える。また、改札機側制御部１５０は、改札機側通信部１５２と、利用者検出部１５３と、撮像制御部１５４と、センサ制御部１５６と、通過可否判定部１５８と、データ管理部１６０とを備える。

改札機側制御部１５０の機能部のうち一部または全部は、ＣＰＵ（Central Processing Unit）等のプロセッサが図示しない記憶部に記憶されたプログラムを実行することにより実現される。プログラムは、例えば、ネットワークＮＷを介してアプリケーションサーバからダウンロードされてもよいし、ＳＤカードなどの可搬型記憶媒体に格納されたものが自動改札機１００にインストールされてもよい。また、改札機側制御部１５０の機能部のうち一部または全部は、ＬＳＩ（Large Scale Integration）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-Programmable Gate Array）等のハードウェアによって実現されてもよい。

改札機側記憶部１７０は、例えば、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＨＤＤ（Hard Disk Drive）、ＳＤカード等の不揮発性の記憶媒体と、ＲＡＭ（Random Access Memory）、レジスタ等の揮発性の記憶媒体とによって実現される。改札機側記憶部１７０は、プロセッサが実行するプログラムや、各駅間の運賃が記憶された運賃テーブルを格納する他、後述する改札機識別情報等を格納する。

改札機側通信部１５２は、例えば、カメラ１１８（１３８）によって撮像された動画と、正面側距離センサ１２０（１４０）または通路側距離センサ１２２（１４２）により検出された検出結果に関する情報と、改札機側制御部１５０の処理結果を示す情報とを、互いに対応付けて駅サーバ装置２００に送信する。例えば、駅構内に入場する利用者の通過を制御する動作モードに自動改札機１００が設定されている場合、この自動改札機１００の改札機側通信部１５２は、処理対象の乗車券ＴＩＸの乗車券識別情報と、入場を許可したか否かを示す入場ステータス情報と、処理を行った時刻情報と、自動改札機を識別する改札機識別情報とを含む入場改札処理情報を、改札機側制御部１５０の処理結果を示す情報として送信する。改札機識別情報は、例えば、予め改札機側記憶部１７０に格納される。

また、駅構内から出場する利用者の通過を制御する動作モードに自動改札機１００が設定されている場合、この自動改札機１００の改札機側通信部１５２は、処理対象の乗車券ＴＩＸの乗車券識別情報と、出場を許可したか否かを示す出場ステータス情報と、処理を行った時刻情報と、自動改札機を識別する改札機識別情報とを含む出場改札処理情報を、改札機側制御部１５０の処理結果を示す情報として送信する。

利用者検出部１５３は、接近センサＳｃにより検出された結果に基づいて、利用者が自動改札機１００に接近したタイミングを検出する。利用者検出部１５３は、利用者が自動改札機１００に接近したタイミングを撮像制御部１５４またはセンサ制御部１５６に出力する。

また、利用者検出部１５３は、透過型光電センサＳｔにより検出された結果に基づいて、利用者が自動改札機１００の通路内のどの位置にいるかを特定する。利用者検出部１５３は、利用者が存在する位置を示す情報を含む信号をセンサ制御部１５６に送信する。

撮像制御部１５４は、利用者が自動改札機１００に接近したタイミングで、カメラ１１８（１３８）に動画の撮像を開始させる。また、撮像制御部１５４は、例えば読取部１１１（１３１）による乗車券ＴＩＸの読み取り処理が開始されてから、通過可否判定部１５８による判定処理が終了するまでの一連の処理に応じて、カメラ１１８（１３８）の動画の撮像を終了させる。

センサ制御部１５６は、利用者が自動改札機１００に接近したタイミングで、正面側距離センサ１２０（１４０）を動作させる。また、センサ制御部１５６は、利用者が自動改札機１００に接近したタイミングで、透過型光電センサＳｔを動作させる。センサ制御部１５６は、透過型光電センサＳｔの検出結果に基づいて、利用者が自動改札機１００の通路の所定の位置に存在する場合、通路側距離センサ１２２（１４３）を動作させる。

センサ制御部１５６は、例えば利用者が自動改札機１００に接近してから、または読取部１１１（１３１）による乗車券ＴＩＸの読み取り処理が開始されてから、乗車券ＴＩＸを投入部１１６（１３６）に投入した利用者が自動改札機１００を通過するまでの間において、正面側距離センサ１２０（１４０）または通路側距離センサ１２２（１４３）から検出結果を取得する。

通過可否判定部１５８は、読取部１１１（１３１）により読み取られた乗車券情報に基づいて、利用者の通過を許可、あるいは禁止する制御を行う。例えば、通過可否判定部１５８は、乗車券情報に含まれる有効期間、乗車駅（発駅）、乗車可能区間等の情報と運賃テーブルとを照合することにより、自装置である自動改札機１００が設置された駅と乗車駅とが一致するか否か、自動改札機１００が設置された駅が乗車可能区間内か否か、すなわち利用者の乗車区間が乗車券時の購入金額に見合うか否か、乗車券ＴＩＸが乗車券投入口１１６（１３６）に投入された時刻が有効期間内か否か等といったことを判定し、全ての判定条件を満たす場合に利用者の通過を許可し、いずれか１つ以上の判定条件を満たさない場合に利用者の通過を禁止する。通過可否判定部１５８は、通過の許可または禁止の判定に応じて、扉部１１４、１１５、１３４、１３５、スピーカ１４８、上面表示部１１２、１３２、正面表示部１１３、１３３、またはこれらを組み合わせたものを制御する。

データ管理部１６０は、正面側距離センサ１２０（１４０）または通路側距離センサ１２２（１４３）の検出結果に関する情報、およびカメラ１１８（１３８）により検出された画像情報、および読取部１１１（１３１）に読み取られた情報のうち、同一の利用者に関する情報を互いに対応付けて、自装置の記憶領域に記憶させる。データ管理部１６０は、カメラ１１８（１３８）により撮像された動画から、利用者が自動改札機１００の乗車券投入口１１６（１３６）に乗車券ＴＩＸを投入した際の姿を収めたフレーム画像をカメラ１１８（１３８）により検出された画像情報として選択する。ここで、「乗車券ＴＩＸを投入した姿」とは、例えば、人の胸部より上側の身体であり、さらに好ましくは利用者の顔を含む頭部である。

図６は、データ管理部１６０により対応付けられた同一の利用者に関する情報Ｄの一例を示す図である。情報Ｄは、距離検出結果情報Ｄ１、画像情報Ｄ２、および読取情報Ｄ３が対応付けられた情報である。距離検出結果情報Ｄ１は、正面側距離センサ１２０（１４０）または通路側距離センサ１２２（１４３）の検出結果ごとに、当該検出結果が取得された取得時刻と、自動改札機や位置の識別情報とが対応付けられたデータ列の集合である。カメラ１１８（１３８）により撮像された画像情報Ｄ２は、フレーム画像ごとに、当該フレーム画像が撮像された撮像時刻と、改札機識別情報とが対応付けられたデータ列の集合である。読取部１１１（１３１）に読み取られた読取情報Ｄ３は、例えば、乗車券識別情報（乗車券ＩＤ）ごとに、入出場のステータスと、各自動改札機の処理時刻と、自動改札機や位置の識別情報（位置ＩＤ）とが対応付けられたデータ列の集合である。

上述した自動改札機１００における各機能部の処理の詳細な内容については、後にシーケンス図およびフローチャートを用いて説明する。

以下、列車ＴＲの説明を行う。列車ＴＲは、例えば、車内カメラＣＡＭａ−１、ＣＡＭｂ−１、ＣＡＭａ−２、およびＣＡＭｂ−２と、車内距離センサ４８０−１から４８０−４と、列車制御装置４５０とを搭載する。

図７は、列車ＴＲの車内配置の一例を示す図である。列車ＴＲの車内には、車内カメラＣＡＭａ−１、ＣＡＭｂ−１、ＣＡＭａ−２、およびＣＡＭｂ−２と、車内距離センサ４８０−１から４８０−４とが配置される。以下、車内カメラＣＡＭａ−１、ＣＡＭｂ−１、ＣＡＭａ−２、およびＣＡＭｂ−２を区別しない場合は車内カメラＣＡＭといい、車内距離センサ４８０−１から４８０−４を区別しない場合は車内距離センサ４８０という。

車内カメラＣＡＭは、例えば、列車ＴＲに乗車し、または列車ＴＲから降車する利用者を撮像する。車内カメラＣＡＭは、撮像した画像、車内カメラＣＡＭに予め付与された車内カメラ識別情報、および撮像時刻を互いに対応付けて列車制御装置４５０に送信する。

車内カメラＣＡＭａ−１およびＣＡＭａ−２が、列車ＴＲの側面の両側のうち、列車ＴＲの一側面に設けられた乗降口を列車ＴＲの内側から撮像し、車内カメラＣＡＭｂ−１およびＣＡＭｂ−２が列車ＴＲの他側面に設けられた乗降口を列車ＴＲの内側から撮像する。以下、代表してＣＡＭａ−１およびＣＡＭｂ−１について説明する。

車内カメラＣＡＭａ−１は、例えば、列車ＴＲ内の天井面に設けられ、対向する位置に設置された乗降口のドアＤＲ１およびＤＲ３のうち、Ｂ側のドアＤＲ３を背にしてドアＤＲ１の方向を撮像する。また、車内カメラＣＡＭｂ−１は、例えば、列車ＴＲ内の天井面に設けられ、対向する位置に設置された乗降口のドアＤＲ１およびＤＲ３のうち、Ａ側のドアＤＲ１を背にしてドアＤＲ３の方向を撮像する。

例えば、列車ＴＲが駅に停車する際に駅のプラットフォームがＡ側に位置する場合、乗降口のドアＤＲ１が開閉する。この場合、車内カメラＣＡＭｂ−１は、乗降口のドアＤＲ１から乗車してくる利用者を背面から撮像するとともに、ドアＤＲ１から降車する利用者を正面から撮像する。また、車内カメラＣＡＭａ−１は、乗降口のドアＤＲ１から乗車してくる利用者を正面から撮像するとともに、ドアＤＲ１から降車する利用者を背面から撮像する。従って、Ａ側の乗降口のドアＤＲ１が開閉する場合、車内カメラＣＡＭｂ−１によって撮像される画像には、列車ＴＲから降車する利用者の顔等が写りこみ、車内カメラＣＡＭａ−１によって撮像される画像には、列車ＴＲから乗車する利用者の顔等が写りこむ。

一方、駅のプラットフォームがＢ側に位置する場合、車内カメラＣＡＭａ−１およびＣＡＭｂ−１の役割は互いに切り替わる。すなわち、車内カメラＣＡＭａ−１は、乗降口のドアＤＲ３から乗車してくる利用者を背面から撮像するとともに、ドアＤＲ３から降車する利用者を正面から撮像する。また、車内カメラＣＡＭｂ−１は、乗降口のドアＤＲ３から乗車してくる利用者を正面から撮像するとともに、ドアＤＲ３から降車する利用者を背面から撮像する。

また、乗降車の判定手法は、前述した手法に限らず、例えば時系列画像における移動方向に基づいて判定してもよい。

車内距離センサ４８０は、例えば列車の出入口ＤＲ付近の天井や壁に配置される。車内距離センサ４８０は、投光部が床面に対して投光した光が対象物に当たって反射光として受光部に受光されるまでの時間を測定する。車内距離センサ４８０は、検出結果を列車制御装置４５０に出力する。

図８は、列車制御装置４５０の機能構成の一例を示す図である。列車制御装置４５０は、例えば、列車側通信部４５２と、列車側情報管理部４５４とを備える。列車側通信部４５２は、列車制御装置４５０が取得した情報を列車サーバ装置４００に送信する。列車側通信部４５２は、例えば列車サーバ装置４００と無線通信する無線通信モジュールである。

列車側情報管理部４５４は、車内カメラＣＡＭにより撮像された画像の画像データを取得する。また、列車側情報管理部４５４は、車内距離センサ４８０の検出結果を取得する。車内距離センサ４８０は、例えば、乗降車口などに存在する利用者を異なる角度から撮像できるように複数個配置されている。列車側情報管理部４５４は、車内カメラＣＡＭにより撮像された画像の画像データと、車内距離センサ４８０の検出結果とを、互いに対応付けて記憶領域に記憶させる。列車側情報管理部４５４は、車内カメラＣＡＭにより画像が撮像された時刻と、車内距離センサ４８０により検出された距離のデータが検出された時刻とに基づいて、画像および検出結果を互いに対応付ける。

以下、中央サーバ装置５００の説明を行う。図９は、中央サーバ装置５００の機能構成の一例を示す図である。中央サーバ装置５００は、例えば、中央サーバ側制御部５１０と、中央サーバ側記憶部５３０とを備える。

中央サーバ側制御部５１０は、例えば、中央サーバ側通信部５１２と、情報管理部５１４と、画像処理部５１６と、センサ情報処理部５１８と、荷物判定部５２０とを備える。

中央サーバ側記憶部５３０は、プロセッサが実行するプログラムを格納する他、例えば、上方カメラ３００により撮像された動画や、中央側利用者データベースＤＢ、後述する荷物増減リスト等を格納する。中央側データベースＤＢは、前述した同一の利用者に関する情報Ｄと同様の情報に、更に列車制御装置４５０から送信された情報、および上方カメラ３００から送信された情報を加えたデータベースである。

中央サーバ側通信部５１２は、自動改札機１００によって送信された情報を受信する。また、中央サーバ側通信部５１２は、中央サーバ側制御部５１０の処理結果、または中央サーバ側記憶部５３０に記憶された情報を、駅サーバ装置２００や、端末装置６００に送信する。

情報管理部５１４は、自動改札機１００または列車ＴＲから送信された情報を中央サーバ側記憶部５３０に格納し、駅構内に入場した利用者、駅構内から出場した利用者、列車ＴＲに乗車した利用者、列車ＴＲから降車した利用者を特定するための中央側利用者データベースＤＢを構築する。

画像処理部５１６は、自動改札機１００のカメラ１１８（１３８）、上方カメラ３００、または列車ＴＲの車内カメラＣＡＭにより撮像された画像の画像データに基づいて、利用者の顔の特徴を抽出する。顔の特徴とは、例えば、耳、鼻、口、目等の特徴点や顔の輪郭（エッジ）等である。

画像処理部５１６は、各カメラにより撮像されたフレーム画像内の人物との間において、特徴点や輪郭等の位置関係を比較することによって、合致（類似）する人物が存在しているか否かを判定する。例えば、異なるフレーム画像間の人物において特徴点や輪郭等の位置関係が完全一致している場合を、合致すると定義してもよいし、アフィン変換等を施すことによって一致する、或いは所定割合以上一致することを合致すると定義してもよい。

画像処理部５１６は、例えば、各カメラにより撮像された駅構内に入場した利用者、駅構内から出場した利用者、列車ＴＲに乗車した利用者、および列車ＴＲから降車した利用者の画像をそれぞれ比較することによって、顔の特徴が合致する利用者が存在しているか否かを判定する。顔の特徴が合致する利用者が存在する場合、画像処理部５１６は、比較対象とした画像を、同一の利用者が撮像された画像と判定する。

センサ情報処理部５１８は、自動改札機１００の正面側距離センサ１２０（１４０）、自動改札機１００の通路側距離センサ１２２（１４２）の検出結果、および上方カメラ３００の画像、または列車ＴＲの車内距離センサ４８０の検出結果に基づいて、利用者が所持する荷物の数を検出する。以下、正面側距離センサ１２０（１４０）、通路側距離センサ１２２（１４２）、および上方カメラ３００を区別しない場合は、単に荷物検出用センサという。

ここで、センサ情報処理部５１８が、利用者が所持する荷物の数を検出する手法について説明する。センサ情報処理部５１８は、例えば、荷物検出用センサの検出結果を統合し、利用者と荷物を含めた立体物の立体モデルを生成する。そして、センサ情報処理部５１８は、予め設定された人の形状を簡易化した簡易モデルを立体モデルに当てはめ、立体モデルから人の簡易モデルに相当する空間を切り取る。簡易モデルとは、例えば、人の形状を頭部と胴体の二つに分けて考え、頭部を示す楕円球と、胴体を示す楕円柱とを結合させた立体モデルである。センサ情報処理部５１８は、簡易モデルに対して拡大、縮小、または回転処理を施すことによって、立体モデルに最も合致する簡易モデルを生成する。

更に、センサ情報処理部５１８は、簡易モデルに相当する空間を切り取った後の立体モデルの形状を補正する。センサ情報処理部５１８は、例えば、簡易モデルに相当する空間を立体モデルから切り取った後、残存する空間領域に簡易モデルの一部と合致する凹部が形成された場合、凹部を復元する補正を行う。そして、センサ情報処理部５１８は、復元後の立体モデルが所定の条件を満たす場合、復元後の立体モデルが荷物であると判定する。所定の条件とは、例えば、物体の床面に対する高さや、物体の大きさ等に関する条件である。例えば、所定の条件は、高さが数十［ｃｍ］から百数十［ｃｍ］、物体の大きさ（体積）が数［Ｌ］から数千［Ｌ］というふうに設定される。

図１０は、上方カメラ３００により撮像された画像とセンサ情報処理部５１８による処理結果とを対比して示す図である。センサ情報処理部５１８は、上記説明した手法によって、簡易モデルＨを生成する（左図）。センサ情報処理部５１８は、立体モデルから簡易モデルＨに相当する空間を切り取り取った後、補正することで荷物Ｌの形状を検出する（右図）。

図１１は、正面側距離センサ１２０の検出結果とセンサ情報処理部５１８による処理結果とを対比して示す図である。センサ情報処理部５１８は、上記説明した手法によって、簡易モデルＨを生成する（左図）。センサ情報処理部５１８は、立体モデルから簡易モデルＨに相当する空間を切り取り取った後、補正することで荷物Ｌの形状を検出する（右図）。

図１２は、通路側距離センサ１２２の検出結果とセンサ情報処理部５１８による処理結果とを対比して示す図である。センサ情報処理部５１８は、上記説明した手法によって、簡易モデルＨを生成する（左図）。センサ情報処理部５１８は、立体モデルから簡易モデルＨに相当する空間を切り取り取った後、補正することで荷物Ｌの形状を検出する（右図）。

また、センサ情報処理部５１８は、上記の処理を行った結果、物理的に分離した複数の空間領域、或いは、結合しているが結合部が他の部分に比して小さい複数の空間領域が残存する場合、複数の荷物を検出したものとして扱う。

センサ情報処理部５１８は、検出した利用者が所持する荷物の数を、中央側利用者データベースＤＢに記憶された利用者の情報に対応付けて記憶させる。図１３は、利用者が所持する荷物の数Ｄ４が記憶された中央側利用者データベースＤＢの一例を示す図である。中央側利用者データベースＤＢには、距離検出結果情報Ｄ１、画像情報Ｄ２、読取情報Ｄ３、および利用者が所持する荷物の数Ｄ４が互いに対応付けられて記憶される。

情報管理部５１４は、自動改札機が保持する情報Ｄを取得し、駅構外から駅構内への入場時、および駅構内から駅構外への出場時における距離検出結果情報Ｄ１に、距離検出結果情報Ｄ１が取得された時刻と同時刻に上方カメラ３００により撮像された画像データを追加し、ステータスとして列車乗車、列車降車等の情報を追加し、更にセンサ情報処理部５１８により検出された荷物の個数を付加して中央側利用者データベースＤＢを構築する。図中、ＳＩＧ−１１およびＳＩＧ−１２は、それぞれ列車内の車内距離センサ４８０により検出された検出データおよび車内カメラＣＡＭにより撮像された画像を示すデータ列である。ここには、自動改札機周辺で取得された検出データは含まれず、車内距離センサ４８０により取得された検出データが含まれる。また、荷物の個数は、車内距離センサ４８０の検出結果により得られたものである。

荷物判定部５２０は、画像処理部５１６により、同一の利用者を撮像したと判定された画像に対応する利用者が所持する荷物の数を比較し、比較結果に基づいて荷物増減リストＬＳを生成する。荷物判定部５２０は、駅構内への入場時、駅構内から駅構外への出場時、列車ＴＲへの乗車時、または列車ＴＲからの降車時に利用者が所持していた荷物の数に増減があった場合、中央側データベースＤＢに記憶された当該利用者に関する情報を荷物増減リストＬＳに記憶させる。

図１４は、荷物増減リストＬＳの一例を示す図である。荷物増減リストＬＳは、中央側利用者データベースＤＢにおいて、顔の特徴から同一の利用者であると推定される利用者であって、荷物が増減した利用者に関するデータ列を抽出したものである。荷物増減リストＬＳのデータ列Ｃ１は、駅構外から駅構内への入場時における距離検出結果情報Ｄ１、画像情報Ｄ２、読取情報Ｄ３、および利用者が所持する荷物の数Ｄ４が、対応付けられた情報である。データ列Ｃ２は、列車乗車時における距離検出結果情報Ｄ１、画像情報Ｄ２、読取情報Ｄ３、および利用者が所持する荷物の数Ｄ４が、対応付けられた情報である。データ列Ｃ３は、列車降車時における距離検出結果情報Ｄ１、画像情報Ｄ２、読取情報Ｄ３、および利用者が所持する荷物の数Ｄ４が、対応付けられた情報である。データ列Ｃ４は、駅構内から駅構外への出場時における距離検出結果情報Ｄ１、画像情報Ｄ２、読取情報Ｄ３、および利用者が所持する荷物の数Ｄ４が、対応付けられた情報である。

上述した中央サーバ装置５００における各機能部の処理の詳細な内容については、後にシーケンス図およびフローチャートを用いて説明する。

図１５は、監視システム１の処理の流れの一例を示すシーケンス図である。まず、自動改札機１００が、同一の利用者に関する情報を取得し、取得した同一の利用者に関する情報を互いに対応付ける（ステップＳ１００）。次に、自動改札機１００は、対応付けた同一利用者に関する情報を中央サーバ装置５００に送信する（ステップＳ１０２）。

次に、中央サーバ装置５００が、ステップＳ１０２で取得した自動改札機１００から受信した同一の利用者に関する情報を中央利用者データベースＤＢに記憶させる（ステップＳ１０４）。次に、上方カメラ３００が、利用者および利用者が所持する荷物を撮像する（ステップＳ１０６）。次に、上方カメラ３００が、自装置が撮像した画像を、撮像時刻および予め設定された自装置の識別情報と共に中央サーバ装置５００に送信する（ステップＳ１０８）。

次に、中央サーバ装置５００が、ステップＳ１０２で送信された自動改札機１００から送信された同一の利用者に関する情報に対して、ステップＳ１０８で送信された上方カメラ３００により撮像された画像を対応付けて中央利用者データベースＤＢに記憶させる（ステップＳ１１０）。中央サーバ装置５００は、例えば、利用者が自動改札機１００の主機１１０と従機１３０とにより形成された通路の所定の位置を通過した時刻を基準に、上方カメラ３００に撮像された画像の対応付けを行う。次に、中央サーバ装置５００は、ステップＳ１１０で中央利用者データベースＤＢに記憶された情報に基づいて、利用者が所持する荷物の数を検出する（ステップＳ１１２）。

次に、列車ＴＲは、車内カメラＣＡＭにより利用者を撮像し、車内距離センサ４８０により利用者および利用者が所持する荷物を検出する（ステップＳ１１４）。次に、列車ＴＲは、車内カメラＣＡＭにより撮像された画像の画像データ、および車内距離センサ４８０の検出結果を互いに対応付けて中央サーバ装置５００に送信する（ステップＳ１１６）。

次に、中央サーバ装置５００は、ステップＳ１１６で送信された車内距離センサ４８０の検出結果に基づいて、利用者が所持する荷物の数を検出する（ステップＳ１１８）。次に、中央サーバ装置５００は、車内カメラＣＡＭにより撮像された画像の画像データ、車内距離センサ４８０の検出結果、およびステップＳ１１８で検出した荷物の数を対応付けて中央側利用者データベースＤＢに記憶させる（ステップＳ１２０）。

図１６は、自動改札機１００の処理の流れの一例を示すフローチャートである。まず、自動改札機１００の利用者検出部１５３が、利用者が自動改札機１００に接近してきたか否かを判定する（ステップＳ２００）。利用者が自動改札機１００に接近すると、撮像制御部１５４が、カメラ１１８（１３８）に接近してきた利用者を撮像させる（ステップＳ２０２）。次に、センサ制御部１５６が、正面側距離センサ１２０（１４０）および通路側距離センサ１２２（１４２）に利用者および利用者が所持する荷物の検出を開始させる（ステップＳ２０４）。次に、読取部１１１（１３１）が、利用者に投入された乗車券ＴＩＸを読み取る（ステップＳ２０６）。

次に、通過可否判定部１５８が、ステップＳ２０６で読み取られた乗車券ＴＩＸに記憶された乗車券情報に基づいて、利用者の通過を許可するか、または不許可とするか否かを判定する（ステップＳ２０８）。利用者の通過を不許可とする場合、通過可否判定部１５８が、扉部１１４および１３４（１１５、１３５）を閉止状態に制御する（ステップＳ２１０）。利用者の通過を許可する場合、通過可否判定部１５８が、読取部１１１（１３１）を制御して乗車券ＴＩＸの乗車券情報に入場を許可した旨を示す情報を書き込ませる（ステップＳ２１２）。次に、通過可否判定部１５８は、扉部１１４および１３４（１１５、１３５）を開放状態に制御する（ステップＳ２１４）。

次に、データ管理部１６０が、ステップＳ２０２で撮像された画像の画像データ、ステップＳ２０４で検出された検出結果、およびステップＳ２１２で処理された乗車券情報を互いに対応付ける（ステップＳ２１６）。次に、改札機側通信部１５２が、ステップＳ２１６で対応付けられた同一の利用者に関する情報を中央サーバ装置５００に送信する（ステップＳ２１８）。これにより本フローチャートの１ルーチンの処理は終了する。

図１７は、中央サーバ装置５００により実行される処理の流れの一例を示すフローチャートである。まず、中央サーバ装置５００が、自動改札機１００から同一の利用者に関する情報および上方カメラ３００により撮像された画像、または列車ＴＲから画像データおよび車内距離センサ４８０の検出結果を取得するまで待機する（ステップＳ３００）。ステップＳ３００で情報を取得すると、情報管理部５１４が、ステップＳ３００で取得した情報を中央利用者データベースＤＢに記憶させる（ステップＳ３０２）。

次に、センサ情報処理部５１８が、ステップＳ３０２で中央利用者データベースＤＢに記憶された情報に基づいて、利用者が所持する荷物の数を検出し（ステップＳ３０４）、検出した荷物の数を中央利用者データベースＤＢに記憶された利用者の情報に対応付けて記憶させる（ステップＳ３０６）。

次に、画像処理部５１６は、中央利用者データベースＤＢに記憶された自動改札機１００のカメラ１１８（１３８）、列車ＴＲの車内カメラＣＡＭにより撮像された画像の画像データを解析し（ステップＳ３０８）、顔の特徴が合致（類似）する利用者が存在しているか否かを判定する（ステップＳ３１０）。

顔の特徴が合致する利用者が存在していない場合、画像処理部５１６は、ステップＳ３１２の処理をスキップする。顔の特徴が合致する利用者が存在する場合、画像処理部５１６は、顔の特徴が合致する利用者の情報を抽出する（ステップＳ３１２）。

次に、荷物判定部５２０が、抽出された利用者の荷物の数を比較して、時系列で利用者が所持する荷物の数が減少しているか否かを判定する（ステップＳ３１４）。利用者が所持する荷物の数が減少していない場合、本フローチャートの処理は終了する。利用者が所持する荷物の数が減少している場合、荷物の数が減少している利用者に関する情報を荷物増減リストＬＳに記憶させ、利用者に関する情報を他装置に送信する（ステップＳ３１６）。これにより本フローチャートの１ルーチンの処理は終了する。

図１８は、荷物判定部５２０により実行される詳細な処理（ステップＳ３１２）の流れを示すフローチャートである。まず、荷物判定部５２０が、利用者が自動改札機を通過し駅構内に入場するときに所持していた荷物の数（以下、入場時の荷物数）が、利用者が列車ＴＲに乗車するときに所持していた荷物の数（以下、乗車時の荷物数）に比して多いか否かを判定する（ステップＳ４００）。入場時の荷物数が、乗車時の荷物数に比して多い場合、荷物判定部５２０は、利用者が入場するときに所持していた荷物が入場駅の構内に存在すると判定する（ステップＳ４０２）。例えば利用者が、所持していた荷物を出場駅の施設に置き忘れていたり、放置していたりする可能性があるためである。

入場時の荷物数が、乗車時の荷物数と同じ、または少ない場合、荷物判定部５２０は、入場時の荷物数が、利用者が列車ＴＲを降車するときに所持していた荷物の数（以下、降車時の荷物数）に比して多いか否かを判定する（ステップＳ４０４）。入場時の荷物数が、降車時の荷物数に比して多い場合、荷物判定部５２０は、利用者が入場するときに所持していた荷物が列車ＴＲの車内に存在すると判定する（ステップＳ４０６）。例えば利用者が、所持していた荷物を列車の車内に置き忘れていたり、放置していたりする可能性があるためである。

入場時の荷物数が、降車時の荷物数と同じ、または少ない場合、荷物判定部５２０は、入場時の荷物数が、利用者が駅構内から自動改札機を通過し駅構外に出場しようとするときに所持していた荷物の数（以下、出場時の荷物数）に比して多いか否かを判定する（ステップＳ４０８）。入場時の荷物数が、出場時の荷物数に比して多い場合、荷物判定部５２０は、利用者が入場するときに所持していた荷物が出場駅の構内に存在すると判定する（ステップＳ４１０）。例えば利用者が、所持していた荷物を出場駅の構内に置き忘れていたり、放置していたりする可能性があるためである。

次に、情報管理部５１４が、上述したステップＳ４００からステップＳ４１０の判定結果を荷物増減リストＬＳに記憶させ、駅サーバ装置２００や、列車サーバ装置４００、端末装置６００に送信する（ステップＳ４１２）。情報管理部５１４は、例えば利用者により置かれた荷物が存在する駅の駅サーバ装置２００や、列車ＴＲと通信する列車サーバ装置４００に判定結果を送信する。図１９は、端末装置６００の表示部に表示される画像ＩＭの一例である。情報管理部５１４が、荷物を鉄道の施設に置き忘れたり、放置したりした利用者の情報および荷物が存在していると場所を、利用者の現在位置と共に端末装置６００の表示部に表示させる。端末装置６００の表示部には、例えば、利用者および利用者が所持していた荷物の画像、乗車中の列車、利用者が入場駅に入場したときに所持していた荷物の数、利用者が列車に乗車したときに所持していた荷物の数が対比可能な態様で表示される。

なお、本フローチャートの処理では、入場時の荷物数と、乗車時の荷物数、降車時の荷物数、または出場時の荷物数を比較するものとしたが、入場時の荷物数、乗車時の荷物数、降車時の荷物数、および出場時の荷物数のうち、２つ以上の時点における荷物数を比較してもよい。

以上説明した実施形態の監視システム１によれば、荷物判定部５２０が、センサ情報処理部５１８により検出された利用者が所持する荷物の数を参照し、画像処理部５１６により抽出された同一の利用者が所持する荷物の数の増減を判定することで、利用者が所持する荷物の所持状況を監視することができる。また、荷物判定部５２０は、例えば、同一の利用者が所持する荷物の数が減少した場合、端末装置６００の表示部に所持する荷物の数が減少した利用者の情報を表示させる。これにより監視装置１は、利用者や、利用者が所持していた荷物を追跡することができる。

また、本実施形態で例示した、利用者や荷物の立体的形状を認識するための構成は、あくまで一例であり、ステレオカメラ、各種レーダ装置、超音波センサなど、如何なるものを使用してもよい。

また、中央サーバ装置５００が備える情報管理部５１４と、画像処理部５１６と、センサ情報処理部５１８と、荷物判定部５２０とは、複数の装置に分散されていてもよいし、一部の機能部が他の装置に搭載されていてもよい。これらの機能部が含まれる複数の装置は、例えばネットワークＮＷを介して通信することで、監視システム１と同様の機能を実現してもよい。

以上説明した少なくともひとつの実施形態によれば、駅構外から自動改札機を通過し駅構内に向かう利用者の第１画像を撮像する第１撮像部と、前記第１撮像部により撮像された利用者が所持する荷物の数を検出する第１荷物検出部と、鉄道施設内において利用者の第２画像を撮像する第２撮像部と、前記第２撮像部により撮像された利用者が所持する荷物の数を検出する第２荷物検出部と、第１撮像部により撮像された第１画像と第２撮像部により撮像された第２画像とを比較して、同一の利用者を撮像した画像を抽出する利用者抽出部と、前記第１荷物検出部および前記第２荷物検出部により検出された利用者が所持する荷物の数を参照し、前記利用者抽出部により抽出された同一の利用者が所持する荷物の数の増減を判定する判定部とを持つことにより、利用者が所持する荷物の所持状況を監視することができる。

上記説明した実施形態は、以下のように表現することができる。
駅構外から自動改札機を通過し駅構内に向かう利用者の第１画像を撮像する第１撮像部と、
前記利用者が処理する荷物の外形を測定するセンサの検出結果に基づいて立体モデルを生成することにより、前記第１撮像部により撮像された利用者が所持する荷物の数を検出する第１荷物検出部と、
鉄道施設内において利用者の第２画像を撮像する第２撮像部と、
前記利用者が処理する荷物の外形を測定するセンサの検出結果に基づいて立体モデルを生成することにより、前記第２撮像部により撮像された利用者が所持する荷物の数を検出する第２荷物検出部と、
前記第１撮像部により撮像された第１画像と前記第２撮像部により撮像された第２画像とにおける顔の特徴が合致するか否かを判定し、顔の特徴が合致する場合に、前記第１画像と前記第２画像とを同一の利用者を撮像した画像として抽出する利用者抽出部と、
前記第１荷物検出部および前記第２荷物検出部により検出された利用者が所持する荷物の数を参照し、前記利用者抽出部により抽出された同一の利用者が所持する荷物の数の増減を判定する判定部と、
を備える監視システム。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。

１…監視システム、１００…自動改札機、１１１、１３１…読取部、１１６、１３６…乗車券投入口、１１８、１３８…カメラ、１２０，１４０…正面側距離センサ、１２２，１４２…通路側距離センサ、１５０…改札機側制御部、１５２…改札機側通信部、１５３…利用者検出部、１５４…撮像制御部、１５６…センサ制御部、１５８…通過可否判定部、１６０…データ管理部、１７０…改札機側記憶部、２００…駅サーバ装置、３００…上方カメラ、４００…列車サーバ装置、４８０…車内距離センサ、５００…中央サーバ装置、５１２…駅サーバ側通信部、５１４…情報管理部、５１６…画像処理部、５１８…センサ情報処理部、５２０…荷物判定部、５３０…中央サーバ側記憶部、６００…端末装置、ＣＡＭ…車内カメラ、ＬＳ…荷物増減リスト、ＤＢ…中央側利用者データベース、ＴＲ…車列

Claims (7)

1. 駅構外から自動改札機を通過し駅構内に向かう利用者の第１画像を撮像する第１撮像部と、
   前記第１撮像部により撮像された利用者が所持する荷物の数を検出する第１荷物検出部と、
   鉄道施設内において利用者の第２画像を撮像する第２撮像部と、
   前記第２撮像部により撮像された利用者が所持する荷物の数を検出する第２荷物検出部と、
   前記第１撮像部により撮像された第１画像と前記第２撮像部により撮像された第２画像とを比較して、同一の利用者を撮像した画像を抽出する利用者抽出部と、
   前記第１荷物検出部および前記第２荷物検出部により検出された利用者が所持する荷物の数を参照し、前記利用者抽出部により抽出された同一の利用者が所持する荷物の数の増減を判定する判定部と、
   を備える監視システム。
2. 前記第１撮像部により撮像された第１画像および前記第１荷物検出部により検出された荷物の数を互いに対応付けて記憶部に記憶させると共に、前記第２撮像部により撮像された第２画像および前記第２荷物検出部により検出された荷物の数を互いに対応付けて記憶部に記憶させる情報管理部を、更に備える、
   請求項１記載の監視システム。
3. 前記判定部は、前記利用者抽出部により抽出された同一の利用者について、前記第１荷物検出部により検出された荷物の数が、前記第２荷物検出部により検出された荷物の数に比して多いか否かを判定し、前記第１荷物検出部により検出された荷物の数が、前記第２荷物検出部により検出された荷物の数に比して多いと判定した場合、前記第１画像、前記第２画像、前記第１荷物検出部により検出された荷物の数、および前記第２荷物検出部により検出された荷物の数を互いに対応付けて記憶部に記憶させる、
   請求項１又は請求項２記載の監視システム。
4. 前記第２撮像部は、列車に乗車する前記利用者の第２画像を撮像し、
   前記第２荷物検出部は、前記列車に乗車する前記利用者が所持する荷物の数を検出し、
   前記判定部は、前記第１荷物検出部により検出された荷物の数が、前記第２荷物検出部により検出された荷物の数に比して多いか否かを判定し、前記第１荷物検出部により検出された荷物の数が、前記第２荷物検出部により検出された荷物の数に比して多いと判定した場合、前記第１荷物検出部により検出された前記利用者が所持していた荷物のうち少なくとも１つは、前記自動改札機が設置された前記駅構内に存在すると判定する、
   請求項１乃至請求項３のいずれか１項記載の監視システム。
5. 前記第２撮像部は、列車から降車する前記利用者の第２画像を撮像し、
   前記第２荷物検出部は、前記列車から降車する前記利用者が所持する荷物の数を検出し、
   前記判定部は、前記第１荷物検出部により検出された荷物の数が、前記第２荷物検出部により検出された荷物の数に比して多いか否かを判定し、前記第１荷物検出部により検出された荷物の数が、前記第２荷物検出部により検出された荷物の数に比して多いと判定した場合、前記第１荷物検出部により検出された前記利用者が所持していた荷物のうち少なくとも１つは、前記列車内に存在すると判定する、
   請求項１乃至請求項４のいずれか１項記載の監視システム。
6. 前記第２撮像部は、駅構内から自動改札機を通過し駅構外に出場する前記利用者の第２画像を撮像し、
   前記第２荷物検出部は、前記駅構内から自動改札機を通過し駅構外に出場する前記利用者が所持する荷物の数を検出し、
   前記判定部は、前記第１荷物検出部により検出された荷物の数が、前記第２荷物検出部により検出された荷物の数に比して多いか否かを判定し、前記第１荷物検出部により検出された荷物の数が、前記第２荷物検出部により検出された荷物の数に比して多いと判定した場合、前記第１荷物検出部により検出された前記利用者が所持していた荷物のうち少なくとも１つは、前記出場した駅の構内に存在すると判定する、
   請求項１乃至請求項５のいずれか１項記載の監視システム。
7. 前記判定部により判定された荷物の存在位置を示す情報を出力する出力部を、更に備える、
   請求項４乃至請求項６のいずれか１項記載の監視システム。

Images