JP7513186B2 - Server device, image processing method and program - Google Patents
Server device, image processing method and program Download PDFInfo
- Publication number
- JP7513186B2 JP7513186B2 JP2023500596A JP2023500596A JP7513186B2 JP 7513186 B2 JP7513186 B2 JP 7513186B2 JP 2023500596 A JP2023500596 A JP 2023500596A JP 2023500596 A JP2023500596 A JP 2023500596A JP 7513186 B2 JP7513186 B2 JP 7513186B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- platform
- train
- event
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims description 19
- 238000012545 processing Methods 0.000 claims description 176
- 238000010191 image analysis Methods 0.000 claims description 80
- 238000003384 imaging method Methods 0.000 claims description 55
- 238000004458 analytical method Methods 0.000 claims description 28
- 238000001514 detection method Methods 0.000 claims description 10
- 230000005540 biological transmission Effects 0.000 claims description 2
- 238000000034 method Methods 0.000 description 29
- 230000008569 process Effects 0.000 description 25
- 238000010586 diagram Methods 0.000 description 18
- 230000006870 function Effects 0.000 description 10
- 230000008859 change Effects 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 7
- 238000009434 installation Methods 0.000 description 5
- 238000010801 machine learning Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000011664 signaling Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 239000002131 composite material Substances 0.000 description 1
- 230000008094 contradictory effect Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B61—RAILWAYS
- B61B—RAILWAY SYSTEMS; EQUIPMENT THEREFOR NOT OTHERWISE PROVIDED FOR
- B61B1/00—General arrangement of stations, platforms, or sidings; Railway networks; Rail vehicle marshalling systems
- B61B1/02—General arrangement of stations and platforms including protection devices for the passengers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B61—RAILWAYS
- B61L—GUIDING RAILWAY TRAFFIC; ENSURING THE SAFETY OF RAILWAY TRAFFIC
- B61L25/00—Recording or indicating positions or identities of vehicles or trains or setting of track apparatus
- B61L25/02—Indicating or recording positions or identities of vehicles or trains
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Mechanical Engineering (AREA)
- Transportation (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Train Traffic Observation, Control, And Security (AREA)
Description
本発明は、公共交通機関のプラットホームにおける映像監視技術に関する。 The present invention relates to video surveillance technology on public transportation platforms.
鉄道駅などのプラットホームにおいて、安全を確保するために、監視カメラの映像を用いた監視が行われている。プラットホームにおける映像監視技術の一例が、例えば、下記特許文献1乃至3に開示されている。
To ensure safety, surveillance is carried out on platforms at railway stations and other locations using images from surveillance cameras. Examples of video surveillance technology for platforms are disclosed in, for example,
特許文献1には、画像の差分比較に基づいて車両ドアにおける挟み込みを検知した場合、モニタに出力されている映像上に赤枠を描画する技術が開示されている。特許文献2には、プラットホームに設けられた監視カメラの映像から要支援者を検出した場合に、当該要支援者の映像とその他の監視カメラの映像とを並べて合成し、合成した映像をミリ波通信によって列車側表示モニタに送信する技術が開示されている。特許文献3には、3次元ステレオカメラによって取得された画像情報を解析することによって、接車の危険性があるエリアに人が侵入したか否かを判定し、その危険性がある場合に警報を作動させる技術が開示されている。
特許文献1乃至3に開示される技術のように、映像を用いてプラットホームを監視する場合において、プラットホームでの安全性を確保するためには、公共交通機関の従業員がプラットホームの状況について正確かつ迅速に把握する必要がある。When monitoring a platform using video, as in the technologies disclosed in
本発明は、上記の課題に鑑みてなされたものである。本発明の目的の一つは、プラットホームの映像を確認する公共交通機関の従業員がプラットホームの状況を正確かつ迅速に把握することを支援する技術を提供することである。The present invention has been made in consideration of the above problems. One of the objectives of the present invention is to provide a technology that helps public transportation employees who check platform images to accurately and quickly grasp the platform situation.
本開示におけるサーバ装置は、
駅のプラットホームの少なくとも一部を含む領域の画像を処理し、前記領域における注意事象を検出する画像解析手段と、
前記画像から注意事象が検出された場合、前記注意事象の存在を知らせる表示を前記画像に付与する画像処理を実行し、前記画像処理後の画像をディスプレイに表示させる表示処理手段と、
前記注意事象の存在を知らせる表示の内容を、設定により変更可能とする表示内容設定手段と、
を備える。
The server device in the present disclosure includes:
image analysis means for processing an image of an area including at least a portion of a station platform and detecting events of interest in said area;
a display processing means for executing image processing for adding a display notifying the presence of a caution event to the image when a caution event is detected from the image, and displaying the image after the image processing on a display;
a display content setting means for changing the content of the display notifying the user of the presence of the caution event by setting the display content;
Equipped with.
本開示における画像処理方法は、コンピュータによって実行される。
当該画像処理方法は、
駅のプラットホームの少なくとも一部を含む領域の画像を処理し、前記領域における注意事象を検出し、
前記画像から注意事象が検出された場合、前記注意事象の存在を知らせる表示を前記画像に付与する画像処理を実行し、前記画像処理後の画像をディスプレイに表示させ、
前記注意事象の存在を知らせる表示の内容を、設定により変更可能とする、
ことを含む。
The image processing methods disclosed herein are implemented by a computer.
The image processing method includes:
processing images of an area including at least a portion of a station platform to detect events of interest in said area;
When a caution event is detected from the image, image processing is performed to add a display notifying the presence of the caution event to the image, and the image after the image processing is displayed on a display.
The content of the display notifying the user of the presence of the caution event can be changed by setting.
This includes:
本開示におけるプログラムは、
駅のプラットホームの少なくとも一部を含む領域の画像を処理し、前記領域における注意事象を検出する画像解析手段、
前記画像から注意事象が検出された場合、前記注意事象の存在を知らせる表示を前記画像に付与する画像処理を実行し、前記画像処理後の画像をディスプレイに表示させる表示処理手段、
前記注意事象の存在を知らせる表示の内容を、設定により変更可能とする表示内容設定手段、
として機能させる。
The program in this disclosure is
image analysis means for processing images of an area including at least a portion of a station platform and detecting events of interest in said area;
a display processing means for executing image processing for adding a display notifying the presence of a caution event to the image when a caution event is detected from the image, and displaying the image after the image processing on a display;
a display content setting means for changing the content of the display notifying the user of the presence of the caution event by setting the display content;
Function as.
本発明によれば、公共交通機関の従業員がプラットホームの映像から現在の状況を正確かつ迅速に把握することが可能となる。 The present invention enables public transport employees to accurately and quickly grasp the current situation from platform images.
以下、本発明の実施形態について、図面を用いて説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。また、特に説明する場合を除き、各ブロック図において、各ブロックは、ハードウエア単位の構成ではなく、機能単位の構成を表している。また、図中に矢印がある場合、その矢印の向きは、情報の流れを分かり易く示すためのものに過ぎず、特に説明のない限り通信の方向(一方向/双方向)を限定しない。 Below, an embodiment of the present invention will be described with reference to the drawings. Note that in all drawings, similar components are given similar symbols and descriptions will be omitted as appropriate. Also, unless otherwise specified, in each block diagram, each block represents a functional configuration rather than a hardware configuration. Also, when there is an arrow in the figure, the direction of the arrow is merely intended to clearly indicate the flow of information, and does not limit the direction of communication (one-way/two-way) unless otherwise specified.
[第1実施形態]
図1は、第1実施形態における画像処理システムの構成を例示する図である。図1に例示される画像処理システム1は、サーバ装置10、撮像装置20、送信機30、受信機40、乗務員用モニタ50を含んで構成されている。
[First embodiment]
Fig. 1 is a diagram illustrating an example of the configuration of an image processing system in the first embodiment. The
サーバ装置10は、撮像装置20から取得される画像(プラットホームの映像)を処理し、列車Tの乗務員用のディスプレイ装置(乗務員用モニタ50)または駅構内で勤務している駅員用のディスプレイ装置(駅員用モニタ60)に処理後の画像を表示させる。本実施形態に係るサーバ装置10の機能については後述する。The
撮像装置20は、図示されていないが、駅のプラットホームの様々な場所に設けられており、当該プラットホームの少なくとも一部を含む領域の画像(映像)を生成する。撮像装置20により生成された画像(映像)は、サーバ装置10によって解析される。Although not shown, the
送信機30は、サーバ装置10により処理された画像を、例えばミリ波周波数帯の電波(搬送波)を使って、外部に送信する。受信機40は、列車T毎に備えられており、送信機30から送信された電波を受信する。受信機40は、図示しない内部の電子回路を介して、受信した電波から画像データを取り出す。取り出された画像データは、乗務員用モニタ50に送信される。これにより、乗務員用モニタ50に、サーバ装置10によって処理された画像が表示される。乗務員用モニタ50は、例えば、列車Tに組み込まれる据え置き型のモニタ装置であってもよいし、乗務員が使用するスマートフォンやタブレット端末といった、携帯型のモニタ装置であってもよい。The
駅員用モニタ60は、例えば、駅構内の駅員室に設けられている。駅員用モニタ60は、例えば、図示しないネットワークを介して、サーバ装置10と通信可能に接続されている。このネットワークを介して、サーバ装置10によって処理された画像が、駅員用モニタ60に送信される。そして、サーバ装置10によって処理された画像が、駅員用モニタ60に表示される。The
<サーバ装置10の機能構成例>
図1に例示されるように、本実施形態のサーバ装置10は、画像解析部110、表示処理部120、および表示内容設定部130を備える。
<Example of functional configuration of
As illustrated in FIG. 1, the
画像解析部110は、駅のプラットホームの少なくとも一部を含む領域の画像を処理し、当該領域における注意事象を検出する。ここで、「注意事象」とは、駅のプラットホームに存在する人の安全を脅かすまたは脅かし得る様々な事象、換言すると、列車Tの乗務員や駅構内で勤務している駅員が必要に応じて適切な措置を取らなければならない様々な事象を指す。The
「注意事象」の例としては、プラットホームに設けられたホームドアに人が寄りかかっていること、ホームドアまたは列車のドアに異物(人または持ち物)が挟み込まれること、プラットホームに存在する列車へ人が駆け込んできていること、プラットホームが混雑している(所定の閾値以上の人数が存在している)こと、プラットホームにベビーカーや車いすが存在していること、プラットホームに白杖使用者が存在していること、喧嘩や言い争いが発生していること、人が倒れこんだ/倒れこんでいること、および、犯罪行為または犯罪に関連する行為(例:不審者のうろつきなど)が発生していること、などが挙げられる。画像解析部110は、撮像装置20によって生成された画像を解析して、ここで挙げた例の少なくとも1つを「注意事象」として検出する。なお、画像解析部110は、例えば、既知の機械学習アルゴリズムを用いて上述の「注意事象」の少なくとも1つを検出可能に学習された機械学習モデルを用いることで、入力された画像から注意事象を検出することができる。Examples of "attention events" include a person leaning on a platform door installed on a platform, a foreign object (person or belongings) being caught in a platform door or train door, a person rushing into a train on the platform, a crowded platform (a number of people equal to or greater than a predetermined threshold), a stroller or wheelchair on the platform, a person using a white cane on the platform, a fight or argument occurring, a person falling/falling down, and a criminal act or a crime-related act (e.g., a suspicious person loitering, etc.). The
表示処理部120は、画像解析部110によって画像から何らかの注意事象が検出された場合、注意事象の存在を知らせる表示(以下、「注意表示」とも表記)を当該画像に付与する画像処理を実行する。表示処理部120は、例えば、画像の外縁部を強調する表示および注意事象が検出された画像内の領域を強調する表示の少なくとも一方を、上述の注意表示として画像に付与する。また、表示処理部120は、画像処理後の画像(注意表示を含む画像)をディスプレイ装置に表示させる。例えば、表示処理部120は、画像処理後の画像を、列車Tの乗務員が使用する乗務員用モニタ50、または、駅構内で勤務する駅員が使用する駅員用モニタ60に送信し、乗務員用モニタ50または駅員用モニタ60上に表示させる。乗務員や駅員は、画像に付与された注意表示によって、注意事象の存在(注意事象が発生しているか否か)を容易に判断できる。When the
図13および図14は、第1実施形態の表示処理部120によってディスプレイ装置上に表示される、画像処理後の画像の一例を示す図である。図13の例では、表示処理部120は、画像の外縁部を強調する表示D1を、処理対象の画像に付与している。図14の例では、表示処理部120は、注意事象が検出された画像内の領域を強調する表示D2(ヒートマップ)を、処理対象の画像に付与している。表示処理部120は、複数の撮像装置20から得られる複数の画像をそれぞれ処理した後、これら複数の画像処理後の画像を結合して1つの画像を生成するように構成されていてもよい。この場合、例えば、表示処理部120は、複数の撮像装置20によって略同時刻に生成された複数の画像の各々について、画像解析部110による注意事象の検出結果に基づいて、注意表示を付与する画像処理を実行するか否かを決定する。そして、表示処理部120は、それぞれの画像を所定の出力用レイアウトに従って配置することによって、1枚の画像を生成することができる。この場合において、出力用レイアウトを定義するデータは、例えば、サーバ装置10に備えられるメモリやストレージデバイスなどの記憶領域に予め記憶されている。13 and 14 are diagrams showing an example of an image after image processing displayed on a display device by the
表示内容設定部130は、表示処理部120の画像処理によって画像に付与される注意表示の内容を、設定に応じて変更可能とする。注意表示の設定を示す情報は、例えば、表示処理部120が処理の中で参照する所定の設定ファイルに登録されている。表示内容設定部130は、ユーザからの入力に基づいて、当該設定ファイルに情報を新たに登録する機能および当該設定ファイルの既存の情報を更新する機能を有する。例えば、設定ファイルには、路線単位または鉄道会社単位といった所定の単位で注意表示の設定が登録される。また、表示内容設定部130は、例えば、乗務員や駅員が使用する従業員端末(図示せず)からの入力に応じて、設定ファイルの登録内容を任意のタイミングで変更することができる。表示内容設定部130によって設定が変更されると、表示処理部120は、画像処理において画像に対して付与する注意表示の種類を、変更後の設定に対応する種類に切り替える。The display
<ハードウエア構成例>
サーバ装置10の各機能構成部は、各機能構成部を実現するハードウエア(例:ハードワイヤードされた電子回路など)で実現されてもよいし、ハードウエアとソフトウエアとの組み合わせ(例:電子回路とそれを制御するプログラムの組み合わせなど)で実現されてもよい。以下、サーバ装置10の各機能構成部がハードウエアとソフトウエアとの組み合わせで実現される場合について、さらに説明する。
<Hardware configuration example>
Each functional component of the
図2は、サーバ装置10のハードウエア構成を例示する図である。図2に例示されるサーバ装置10は、バス1010、プロセッサ1020、メモリ1030、ストレージデバイス1040、入出力インタフェース1050、及びネットワークインタフェース1060を有する。
Figure 2 is a diagram illustrating an example of the hardware configuration of the
バス1010は、各ハードウエア構成要素の間でデータを送受信するためのデータ伝送路である。ただし、サーバ装置10の各ハードウエア構成要素を接続する方法は、バス接続に限定されない。The
プロセッサ1020は、CPU(Central Processing Unit)やGPU(Graphics Processing Unit)などで実現されるプロセッサである。
メモリ1030は、RAM(Random Access Memory)などで実現される主記憶装置である。
ストレージデバイス1040は、HDD(Hard Disk Drive)、SSD(Solid State Drive)、メモリカード、又はROM(Read Only Memory)などで実現される補助記憶装置である。ストレージデバイス1040は、サーバ装置10の各機能(画像解析部110、表示処理部120、表示内容設定部130など)を実現するプログラムモジュールを記憶している。プロセッサ1020がこれらのプログラムモジュールをそれぞれメモリ1030上に読み込んで実行することで、各プログラムモジュールに対応する各機能が実現される。The
入出力インタフェース1050は、サーバ装置10と各種入出力機器とを接続するためのインタフェースである。図2の例では、入出力インタフェース1050には、キーボード、マウス、タッチパネル、ディスプレイ、スピーカーといった入出力機器(図示せず)が接続され得る。The input/
ネットワークインタフェース1060は、サーバ装置10をネットワークに接続するためのインタフェースである。ネットワークインタフェース1060は、有線または無線によって、サーバ装置10をネットワークに接続する。このネットワークは、例えばLAN(Local Area Network)やWAN(Wide Area Network)である。サーバ装置10は、ネットワークインタフェース1060を介して、ネットワーク上の他の装置と通信して様々なデータを送受信することができる。例えば、サーバ装置10は、ネットワークインタフェース1060を介して撮像装置20と通信し、撮像装置20により撮像された映像(画像)を取得することができる。また、サーバ装置10は、ネットワークインタフェース1060を介して送信機30と通信し、乗務員用モニタ50に表示させる画像(表示処理部120により処理された画像を含む)を送信機30に送信することができる。また、サーバ装置10は、ネットワークインタフェース1060を介して駅員用モニタ60と通信し、画像(表示処理部120により処理された画像を含む)を駅員用モニタ60に送信することができる。The
なお、図2の構成はあくまで一例であり、本発明は図2に示される内容に限定されない。例えば、サーバ装置10の各機能の少なくとも一部が、サーバ装置10と通信可能に接続された別のサーバ装置(図示せず)に備えられていてもよい。また、複数の撮像装置20がそれぞれプラットホームの様々な位置に設置されている場合に、複数の撮像装置20それぞれによって生成される各映像(各画像)を、乗務員用モニタ50に送信する映像(画像)と、そうでない映像(画像)とに分配する他のサーバ装置が更に設けられていてもよい。また、そのような分配を行う機能は、サーバ装置10が備えていてもよい。また、図2の例では、サーバ装置10が送信機30および受信機40間の情報のやり取りを制御しているが、送信機30および受信機40間の情報のやり取りを制御する他のサーバ装置が、ネットワークを介してサーバ装置10と接続されていてもよい。この場合、サーバ装置10は、送信機30から送信すべき映像(画像)のデータを当該他のサーバ装置に渡し、当該他のサーバ装置が送信機30を制御して映像(画像)を受信機40に送信する。2 is merely an example, and the present invention is not limited to the contents shown in FIG. 2. For example, at least some of the functions of the
<処理の流れ>
図3は、第1実施形態のサーバ装置10により実行される処理の流れを例示するフローチャートである。
<Processing flow>
FIG. 3 is a flowchart illustrating the flow of a process executed by the
画像解析部110は、撮像装置20により生成された画像を解析し、注意事象を検出する(S102)。画像解析部110は、例えば、入力画像を受け付けて注意事象の検出結果を出力するように構築された機械学習モデルに撮像装置20から取得した画像を入力する。画像解析部110は、機械学習モデルからの出力に基づいて、注意事象が発生しているか否か、および、発生している場合にはその注意事象の種類を判定することができる。The
撮像装置20により生成された画像から注意事象が検出された場合(S104:YES)、表示処理部120は、当該画像に注意表示を付与する画像処理を実行する。表示処理部120は、まず、注意表示に関する設定(画像に付与すべき注意表示の種類)を取得する(S106)。例えば、表示処理部120は、ストレージデバイス1040などに保存されている設定ファイルを読み出し、当該設定ファイルに格納されている情報に基づいて、画像に付与すべき注意表示の種類を特定する。そして、表示処理部120は、S106の処理で取得した設定に従って、注意表示を画像に付与する画像処理を実行する(S108)。そして、表示処理部120は、注意表示を付与した画像を、対象のディスプレイに表示させる(S110)。例えば、表示処理部120は、送信機30を制御して、注意表示を付与した画像のデータを搬送する電波を送信機30から送信させる。送信機30から送信された電波は受信機40によって受信される。乗務員用モニタ50は、受信機40によって電波から取り出しされる画像データを、表示領域上に表示する。また例えば、表示処理部120は、ネットワークを介して接続された駅員用モニタ60に、注意表示を付与した画像のデータを送信する。駅員用モニタ60は、ネットワークを介して取得した画像データに基づいて、表示領域に画像を表示する。When a warning event is detected from an image generated by the imaging device 20 (S104: YES), the
一方、撮像装置20により生成された画像から注意事象が検出されなかった場合(S104:NO)、表示処理部120は、注意表示を付与する画像処理を実行しない。この場合、注意表示のない画像が対象のディスプレイに表示される(S110)。On the other hand, if no warning event is detected from the image generated by the imaging device 20 (S104: NO), the
また、表示内容設定部130は、注意表示の設定を変更するためのユーザ入力がないかどうかを監視している(S112)。ここで、注意表示の設定を変更するためのユーザ入力を検出した場合(S112:YES)、表示内容設定部130は、そのユーザ入力に基づいて、注意表示の設定を更新する(S114)。例えば、表示内容設定部130は、ストレージデバイス1040など保存されている設定ファイルの情報を、ユーザ入力に従って更新する。このように設定ファイルが更新された後、表示処理部120による画像処理の内容(画像に付与される注意表示の種類)も変更されることになる。The display
上述の処理は、画像の出力が終了するまで繰り返し実行される(S116)。例えば、列車Tが出発してプラットホームから離れたことを各種センサ(図示せず)で検知した場合に、乗務員用モニタ50に対して画像を出力する処理が終了する。また例えば、駅員の使用する端末(図示せず)上で画像の出力を停止させる入力が実行された場合に、駅員用モニタ60に対して画像を出力する処理が終了する。The above-mentioned process is repeated until the output of the image is completed (S116). For example, when various sensors (not shown) detect that the train T has departed and left the platform, the process of outputting the image to the crew monitor 50 is completed. Also, for example, when an input to stop the output of the image is executed on a terminal (not shown) used by a station staff member, the process of outputting the image to the station staff monitor 60 is completed.
本実施形態で説明したように、画像上に注意事象の存在を知らせる表示(注意表示)を付与することにより、乗務員や駅員が、撮像装置20の映像(画像)から注意事象が発生していることを容易に認識できる。また、本実施形態で説明したように注意表示の種類を変更可能とすることで、乗務員や駅員が、プラットホームで発生した注意事象に対して、正確かつ迅速に対処することができるようになる。例えば、画像に付与された注意表示は、その表示の種類によっては、発生している事象の状況を画像上で分かりにくくする可能性もある。ここで、本実施形態で説明したように、表示内容設定部130によって注意表示の種類を変更することができれば、乗務員や駅員が、画像を見辛くする要素を排除して、画像上で状況をより的確に把握できるようになる。例えば、乗務員や駅員が、注意表示の種類を、注意事象が発生している画像領域に所定の表示要素(ヒートマップなど)を重畳させるようなタイプのものから、画面の枠外を強調するタイプのものへと変更することで、画像の視認性を向上させることができる。また、乗務員や駅員が注意表示を視認して注意事象の発生に気づいた場合、注意表示を出力することによる目的は既に達成されているため、その後に注意表示を画像上に付与し続けなくてもよい。この場合、乗務員や駅員が、注意表示を付与しないように設定を適宜変更することで、画像の視認性を更に向上させることができる。このように注意表示の種類を適宜変更可能とすることによって、乗務員や駅員が注意事象の状況(注意事象の内容や発生場所など)を正確かつ迅速に把握できるようになる。そして、プラットホーム上で注意事象が発生した場合に乗務員や駅員が適切かつ迅速に動くことによって、プラットホームの安全性が確保される。As described in this embodiment, by adding a display (attention display) that notifies the presence of a caution event on the image, crew members and station staff can easily recognize that a caution event has occurred from the image (image) of the
[第2実施形態]
本実施形態の画像処理システム1およびサーバ装置10は、以下で説明する点を除き、第1実施形態と同様の構成(例:図1)を有する。
[Second embodiment]
The
本実施形態において、表示処理部120は、画像解析部110により注意事象が検出された場合、その注意事象が検出された場所を示す文字情報を画像に付与する処理を更に実行する。一例として、表示処理部120は、注意事象が検出された画像を撮影したカメラを示す文字情報を画像に付与する。表示処理部120は、例えば、画像に付加されたメタデータを参照することで、その画像を撮影したカメラの識別情報(シリアル番号など)を取得することができる。この場合、表示処理部120は、取得したカメラの識別情報を文字情報として画像に付与してもよい。また、カメラの識別情報とカメラの設置場所または撮影場所とを対応付けて記憶するデータベースなどが用意されている場合、表示処理部120は、当該データベースから、取得したカメラの識別情報に対応付けられているカメラの設置場所または撮影場所の情報を取得することができる。この場合、表示処理部120は、カメラの識別情報に基づいて取得したカメラの設置場所または撮影場所を、文字情報として画像に付与してもよい。また、カメラの撮影場所を示す情報が取得できた場合、表示処理部120は、当該画像の撮影場所に対応する車両の番号を特定し、当該車両の番号を示す文字情報を画像に付与するように構成されていてもよい。In this embodiment, when the
また、表示処理部120は、注意事象が検出された場所を示す文字情報に加えて(あるいは代えて)、注意事象の種類を示す文字情報を表示するように構成されていてもよい。例えば、画像解析部110が「ホームドアまたは列車のドアに異物(人または持ち物)が挟み込まれる」という注意事象を画像から検出したとする。この場合、表示処理部120は、検出された注意事象の種別を示す文字情報(例:「挟み込みを検知!」といった所定のメッセージ)を、当該画像に付与してもよい。この場合、例えば、画像解析部110により検出された注意事象の種別を示す情報と、出力すべき文字情報との対応関係を定義する定義情報が、メモリ1030やストレージデバイス1040などの所定の記憶領域に予め記憶される。表示処理部120は、画像解析部110により検出された注意事象の種別の情報を用いて、当該定義情報の中から出力すべき文字情報を取得することができる。
The
<処理の流れ>
図4は、第2実施形態のサーバ装置10により実行される処理の流れを例示するフローチャートである。図4のフローチャートは、S202の工程を更に含んでいる点を除き、図3のフローチャートと同様である。以下では、図3と同様の処理については説明を適宜省略する。
<Processing flow>
Fig. 4 is a flowchart illustrating the flow of processing executed by the
撮像装置20から取得した画像を解析した結果、注意事象が検出された場合(S104:YES)、表示処理部120は、設定に従って注意表示を画像に付与する(S106、S108)。本実施形態では、表示処理部120は、更に、注意事象の発生場所を示す文字情報を画像に付与する(S202)。例えば、表示処理部120は、画像のメタデータから、当該画像を撮像したカメラ(撮像装置20)の識別情報を取得し、当該カメラの識別情報を文字情報として画像に付与する。また、表示処理部120は、カメラの設置場所や撮影場所を示す情報がカメラの識別情報に対応付けられている場合、取得したカメラの識別情報に対応付けられている設置場所や撮影場所を示す情報を取得して、画像に付与してもよい。また、表示処理部120は、カメラの識別情報または撮影場所と列車の車両(車両番号)との対応関係を記憶するデータベースなどが準備されている場合、当該データベースを参照して取得される列車の車両番号を示す文字情報を、画像に付与してもよい。
When an attention event is detected as a result of analyzing the image acquired from the imaging device 20 (S104: YES), the
本実施形態で画像に付与される文字情報に基づいて、乗務員や駅員は、注意事象が発生した場所(乗務員や駅員が向かうべき場所または目線を向けるべき場所)を即座に判断することができる。その結果として、乗務員や駅員が注意事象に対して早期に措置を取ることができ、プラットホームでの安全性を高める効果が期待できる。Based on the text information added to the image in this embodiment, the crew or station staff can immediately determine the location where the event of interest has occurred (where the crew or station staff should head or look). As a result, the crew or station staff can take measures against the event of interest early on, which is expected to have the effect of improving safety on the platform.
[第3実施形態]
図5は、第3実施形態における画像処理システムの構成を例示する図である。図4に例示される画像処理システム1は、第1実施形態の構成に加えて、信号設備70を更に備えている。
[Third embodiment]
Fig. 5 is a diagram illustrating an example of the configuration of an image processing system according to the third embodiment. The
信号設備70は、プラットホーム内に列車が存在しているか否かを検知し、その結果をサーバ装置10に提供する。例えば、信号設備70は、プラットホームに到着した列車の車軸によって生じる短絡を検出し、その検出結果に応じて出力する信号を切り替えるように構成される。この場合、信号設備70は、短絡が検出されている間は、プラットホームに列車が存在することを示す信号をサーバ装置10に提供する。一方、信号設備70は、短絡が検出されていない間は、プラットホームに列車が存在しないことを示す信号をサーバ装置10に提供する。また、信号設備70は、図示しないプラットホーム近傍の線路を撮像範囲に含むカメラ(図示せず)の映像を解析して、プラットホームに進入する列車の存在を検知するように構成されていてもよい。また、信号設備70は、プラットホームの手前に設置されたセンサ類からの出力に基づいて、プラットホームに進入する列車の存在を検知するように構成されていてもよい。The
本実施形態のサーバ装置10は、以下で説明する点を除き、第1または第2の実施形態と同様の構成を有する。The
本実施形態において、画像解析部110は、注意事象の検出に関する画像解析を行う前に、プラットホームに列車が存在するか否かを判定する。一例として、画像解析部110は、列車の存在を検知する外部装置(例:信号設備70)からの信号を用いて、プラットホームに列車が存在するか否かを判定することができる。また、画像解析部110は、注意事象を検出する処理を対象の画像に対して行う前に、列車が存在するか否かを判定する処理を実行してもよい。この場合、画像解析部110は既知のオブジェクト認識技術を用いて、画像内に列車が存在するか否かを判定することができる。またこの場合、画像解析部110は、信号設備70の信号を取得または使用しなくてもよい。そして、画像解析部110は、プラットホームに列車が存在するか否かの判定結果に応じて、画像の解析対象領域(注意事象の検出処理が行われる画像領域)を変更する。In this embodiment, the
一例として、プラットホームに列車が存在することを示す判定結果が得られた場合、画像解析部110は、撮像装置20により生成された画像の解析対象領域を、プラットホームに列車が存在していない場合よりも狭くする。具体的な例を、図6および図7を用いて説明する。図6は、プラットホームに列車が存在する場合において表示処理部120が設定する、画像の解析対象領域を例示する図である。図7は、プラットホームに列車が存在しない場合において表示処理部120が設定する、画像の解析対象領域を例示する図である。図6および図7に例示される画像は、同一のカメラによって異なるタイミングで撮影されたものである。ここで、図6および図7において、画像の解析対象領域として設定される領域が斜線で表されている。図示されるように、図6における画像の解析対象領域は、図7における画像の解析対象領域よりも狭くなっている。
As an example, when a determination result indicating that a train is present on the platform is obtained, the
<処理の流れ>
図8は、第3実施形態のサーバ装置10によって実行される処理の流れを例示するフローチャートである。図8のフローチャートで示される処理は、図3および図4のフローチャートで示される処理の前に実行される。
<Processing flow>
Fig. 8 is a flowchart illustrating the flow of a process executed by the
画像解析部110は、プラットホームに列車が存在するか否かを判定する(S302)。例えば、画像解析部110は、信号設備70から提供される列車の在線状態を示す信号に基づいて、プラットホームに列車が存在するか否かを判別することができる、また例えば、画像解析部110は、撮像装置20から取得した映像(画像)に、列車と推定される領域があるか否かを判定し、その判定結果に基づいてプラットホームに列車が存在するか否かを判別することができる。この場合、画像解析部110は、例えば、既知のオブジェクト認識技術を用いて、画像の中から列車の領域を抽出することができる。The
プラットホームに列車が存在していると判定された場合(S302:YES)、画像解析部110は、プラットホームに列車が存在していない場合よりも狭い画像領域を、解析対象領域(第1の解析対象領域)として設定する(S304)。一方、プラットホームに列車が存在していると判定された場合(S302:YES)、画像解析部110は、第1の解析対象領域よりも広い画像領域を、解析対象領域(第2の解析対象領域)として設定する(S306)。第1の解析対象領域および第2の解析対象領域を決定するアルゴリズムは、例えば、ストレージデバイス1040に記憶されている。画像解析部110は、このアルゴリズムに基づいて、注意事象を検出する処理が行われる画像領域(解析対象領域)を決定することができる。If it is determined that a train is present on the platform (S302: YES), the
列車の出発に関与しない注意事象が過剰に検出および通知された場合、乗務員の業務効率が低下する虞がある。本実施形態では、上述のとおり、プラットホームに列車が存在する場合に、列車の出発に関与する可能性が高い領域(例えば、列車またはホームドアの周辺領域)に画像の解析対象領域を絞り込んでいる。このようにすることで、列車の出発に関与する可能性の低い、プラットホーム中央部分での注意事象について乗務員に通知されなくなり、列車の出発について安全を確保しながら、乗務員の業務効率を維持することができる。 If excessive caution events that are not related to train departure are detected and notified, there is a risk that the work efficiency of the crew will decrease. In this embodiment, as described above, when a train is present on the platform, the area to be analyzed in the image is narrowed down to an area that is likely to be related to the train's departure (for example, the area around the train or the platform doors). In this way, the crew will not be notified of caution events in the center of the platform that are unlikely to be related to the train's departure, and the work efficiency of the crew can be maintained while ensuring safety for train departures.
<第1の変形例>
本実施形態において、画像解析部110は、先に説明した処理に加えて、プラットホームに列車が存在するか否かに応じて、注意事象として検出する事象の種類を変更するように構成されていてもよい。
<First Modification>
In this embodiment, in addition to the processing described above, the
例えば、画像解析部110は、プラットホームに列車が存在する場合、様々な注意事象のうち、列車の出発に関係のある種類の注意事象に絞って検出するように構成される。ここで、「列車の出発に関係のある種類の注意事象」の具体例としては、プラットホームに設けられたホームドアに人が寄りかかっていること、ホームドアに異物(人または持ち物)が挟み込まれること、プラットホームに存在する列車へ人が駆け込んできていること、プラットホームが混雑している(所定の閾値以上の人数が存在している)こと、プラットホームにベビーカーや車いすが存在していること、プラットホームに白杖使用者が存在していること、などが挙げられる。For example, when a train is present on a platform, the
一方、画像解析部110は、プラットホームに列車が存在していない場合、プラットホームに列車が存在する場合に検出する注意事象に加えて、プラットホーム上での安全を確保するために検出すべき他の事象を検出するように構成される。例えば、プラットホームに列車が存在していない場合、画像解析部110は、喧嘩や言い争いが発生していること、人が倒れこんだこと、および、犯罪行為または犯罪に関連する行為(例:不審者のうろつきなど)が発生していることなどを、更に検出する。On the other hand, when there is no train on the platform, the
図9は、第3実施形態の第1の変形例のサーバ装置10によって実行される処理の流れを例示するフローチャートである。図9のフローチャートは、S308およびS310の処理を更に有している点で、図8のフローチャートと相違している。
Figure 9 is a flowchart illustrating the flow of processing executed by the
第1の変形例において、画像解析部110は、プラットホームに列車が存在するか否かの判定結果に応じて、画像から検出すべき注意事象の種類を選択する(S308、S310)。例えば、注意事象の種類別に学習モデルが準備されている場合、プラットホームに列車が存在しているときに使用する学習モデルと、プラットホームに列車が存在していないときに使用する学習モデルとをそれぞれ指定する情報が、所定の記憶領域(例:ストレージデバイス1040)に格納される。画像解析部110は、この情報に基づいて、それぞれのケースにおいて使用する学習モデルを選択することができる。これにより、画像解析部110は、それぞれのケースにおいて検出すべき注意事象の種別を選別することができる。In the first modified example, the
<第2の変形例>
また、表示処理部120は、プラットホームに列車が存在しているか否かの判定結果に基づいて、画像処理後の画像の送信先を変更してもよい。具体的には、表示処理部120は、プラットホームに列車が存在している場合には、乗務員用モニタ50に対して画像処理後の画像を送信し、プラットホームに列車が存在していない場合には、駅員用モニタ60に対して画像処理後の画像を送信する。
<Second Modification>
The
図10は、第3実施形態の第2の変形例のサーバ装置10によって実行される処理の流れを例示するフローチャートである。図10のフローチャートは、S312およびS314の処理を更に有している点で、図8および図9のフローチャートと相違している。また、図示されるように、本変形例のサーバ装置10は、第1の変形例の処理(S308、S310の処理)を更に実行するように構成されていてもよい。
Figure 10 is a flowchart illustrating the flow of processing executed by the
本変形例において、表示処理部120は、プラットホームに列車が存在するか否かの判定結果に応じて、画像解析部110によって処理された画像の送信先を選択する(S312、S314)。例えば、プラットホームに列車が存在している場合における画像の送信先(乗務員用モニタ50)を示す情報と、プラットホームに列車が存在していない場合における画像の送信先(駅員用モニタ60)を示す情報が、所定の記憶領域(例:ストレージデバイス1040)に格納される。表示処理部120は、この情報に基づいて、それぞれのケースにおける画像の送信先を特定することができる。なお、表示処理部120は、S312およびS314の処理を、S110の処理の前の任意のタイミングで実行すればよい。In this modified example, the
このようにすることで、画像解析部110がプラットホームに列車が存在するか否かによって注意事象として検出する事象の種類が変わる場合において、画像処理後の画像を適切な人物に提示することができる。
In this way, in cases where the type of event that the
[第4実施形態]
第3実施形態のサーバ装置10は、プラットホームに列車が存在しているか否かに応じて、画像の解析対象領域、検出すべき注視事象の種類、または、処理後の画像の送信先を変更するように構成されている。本実施形態では、第3実施形態とは異なり、画像の送信先に応じて、画像の解析対象領域および検出すべき注視事象の種類が変更されるケースについて説明する。
[Fourth embodiment]
The
本実施形態のサーバ装置10は、以下で説明する点を除き、第3実施形態と同様の構成(例:図5)を有する。The
第3実施形態で説明したように、列車がプラットホームに存在しているときに、列車の出発に関与しない注意事象が過剰に検出されて通知されると、乗務員の業務効率が低下し得る。そのため、第3実施形態のサーバ装置10は、列車の出発に関与する可能性の低い注意事象(例:プラットホームの中央付近で発生する注意事象)を検出しないよう、画像の解析対象領域が調節するように構成された。一方で、列車がプラットホームに存在しているときに、サーバ装置10がプラットホームの中央部分などで発生する注意事象を検出しないと、その注意事象への対処が遅れてしまう可能性もある。As explained in the third embodiment, if excessive detection and notification of caution events that are not related to the departure of the train occurs when a train is on the platform, the work efficiency of the crew may decrease. Therefore, the
そこで、本実施形態のサーバ装置10は、例えば以下のように構成される。まず、画像解析部110は、列車がプラットホームに存在している場合に、乗務員用モニタ50に送る画像(乗務員用画像)と、駅員用モニタ60に送る画像(駅員用画像)とで、画像の解析対象領域および検出する注意事象の種類に関する設定を取得する。乗務員用画像および駅員用画像の設定に関する情報は、例えば、メモリ1030やストレージデバイス1040に予め記憶される。そして、画像解析部110は、乗務員用画像および駅員用画像の各々の設定に基づいて、撮像装置20により生成された画像に画像処理を実行する。そして、表示処理部120は、乗務員用画像の設定に基づく画像解析部110の画像処理結果に基づいて注意表示を付与した乗務員用画像と、駅員用画像の設定に基づく画像解析部110の画像処理結果に基づいて注意表示を付与した駅員用画像とを生成する。そして、表示処理部120は、乗務員用画像を送信機30から送信する。送信機30から送信された乗務員用画像は、受信機40を介して乗務員用モニタ50に送られ、乗務員用モニタ50に表示される。また、表示処理部120は、駅員用画像を、ネットワークを介して駅員用モニタ60に送信する。送信された駅員用画像は、駅員用モニタ60に表示される。
Therefore, the
本実施形態によれば、乗務員および駅員それぞれの業務に合わせてカスタマイズされた画像が、それぞれのモニタに表示される。例えば、第3実施形態の構成と同様に、乗務員用モニタ50上では、列車の出発に関与する注意事象のみが通知される。一方で、乗務員用モニタ50では通知されない、プラットホーム中央付近で発生した注意事象は、駅員用画像の生成時に検出され、駅員用モニタ60上に表示される。このようにすることで、プラットホームの安全性の確保と、業務効率の維持とを、より高い精度で実現できる。
According to this embodiment, images customized to the duties of each crew member and station staff are displayed on the respective monitors. For example, similar to the configuration of the third embodiment, only caution events related to train departure are notified on the
[第5実施形態]
図11は、第5実施形態における画像処理システムの構成を例示する図である。本実施形態のサーバ装置10は、他の実施形態で説明した構成に加え、ホームドア制御部140を更に備える。なお、図11に例示されているサーバ装置10は、第1の実施形態の構成をベースとして、ホームドア制御部140を更に備えている。
[Fifth embodiment]
Fig. 11 is a diagram illustrating an example of the configuration of an image processing system in a fifth embodiment. In addition to the configurations described in the other embodiments, the
ホームドア制御部140は、プラットホームに設けられたホームドア(複数のホームドアユニット80)の開閉状態を制御する。本実施形態のホームドア制御部140は、画像解析部110による注意事象の検出結果に応じて、複数のホームドアユニット80を一括制御する第1の制御モードと、複数のホームドアユニット80の各々を個別に制御する第2の制御モードとを切り替える。具体的には、ホームドア制御部140は、画像解析部110により注意事象が検出されていない場合、第1の制御モードで複数のホームドアユニット80を制御する。一方、ホームドア制御部140は、画像解析部110により注意事象が検出された場合、第2の制御モードで複数のホームドアユニット80を制御する。The platform door control unit 140 controls the open/closed state of the platform doors (multiple platform door units 80) installed on the platform. In this embodiment, the platform door control unit 140 switches between a first control mode in which the multiple
第1の制御モードが設定されている場合、ホームドア制御部140は、例えば乗務員の操作によってサーバ装置10に送信される信号(ドアの開閉を要求する信号)の受信に応じて、全てのホームドアユニット80を一括して開閉するように動作する。When the first control mode is set, the platform door control unit 140 operates to open and close all
第2の制御モードが設定されている場合、ホームドア制御部140は、例えば乗務員の操作によってサーバ装置10に送信される信号(ドアの開閉を要求する信号)の受信に応じて、安全が確認されたホームドアユニット80のみを開閉するように動作する。例えば、ホームドア制御部140は、プラットホーム上で注意事象が検出された場所に対応するホームドアユニット80を特定し、当該ホームドアユニット80の識別情報をメモリ1030やストレージデバイス1040などの記憶領域に一時的に記憶する。このようにして、ホームドア制御部140によって特定されたホームドアユニット80は、ドア開閉動作の対象外のホームドアユニット80として認識される。その後、ホームドア制御部140は、ドアの開閉を要求する信号を受信すると、ドア開閉動作の対象外とされたホームドアユニット80を除く、全てのホームドアユニット80を開閉する。なお、後の時点において注意事象が解消された場合には、ホームドア制御部140は、記憶領域に一時的に記憶した情報を削除する。これによって、ホームドア制御部140は、ドア開閉動作の対象外とされていたホームドアユニット80を開閉できるようになる。When the second control mode is set, the platform door control unit 140 operates to open and close only the
本実施形態では、注意事象が検出されている場合には各々のホームドアユニット80が個別に制御され、安全が確認できたホームドアユニット80から開閉動作が実行される。これにより、プラットホームに設置されたホームドア近辺での安全性を向上させることができる。In this embodiment, when a caution event is detected, each
[第6実施形態]
プラットホームには、通常、複数の撮像装置(監視カメラ)が設けられる。乗務員や駅員が、ディスプレイ装置上でこれら複数の撮像装置の映像(画像)の全てを一度に確認することは困難である。また、送信機30および受信機40がミリ波周波数帯の電波を用いる場合に、一度に送受信できる画像データの数が制限されることもある。本実施形態のサーバ装置10は、上述の問題に対する更なる機能を備える点で、他の実施形態と異なる。本実施形態のサーバ装置10は、基本的には、以下で説明する点を除き、上述の他の実施形態のいずれかと同様の構成(例:図1、図5、図11)を有する。
Sixth Embodiment
A platform is usually provided with a plurality of imaging devices (surveillance cameras). It is difficult for train crew or station staff to check all of the images (images) from the plurality of imaging devices on a display device at once. In addition, when the
本実施形態において、画像解析部110は、プラットホームに備えられた複数の撮像装置から取得された複数の画像の各々の優先度を決定するように構成される。一例として、画像解析部110は、プラットホームに設けられた複数の撮像装置20から取得された複数の画像それぞれについて、画像に写っている人物の数を算出する。例えば、画像解析部110は、既知のオブジェクト認識技術を用いて、画像内の個々の人物の領域を検出し、検出された領域の数を人物の数として算出することができる。そして、画像解析部110は、複数の画像それぞれについて算出された人物の数に基づいて、複数の画像それぞれの優先度を決定する。例えば、画像解析部110は、画像に写っている人物の数が多いほど、その画像の優先度を高く設定することができる。In this embodiment, the
また、本実施形態において、表示処理部120は、画像解析部110により決定された優先度に基づいて、ディスプレイ装置に表示させる画像を複数の画像の中から選択するように構成される。例えば、表示処理部120は、優先度の高い順に予め決められた数の画像を選択する。一度に送信することができる画像の数に上限がある場合、表示処理部120は、その上限数に達するまで、優先度の高い順に画像を選択する。そして、表示処理部120は、選択した画像を対象のディスプレイ装置に表示させる(例:図12)。Furthermore, in this embodiment, the
図12は、第6実施形態の表示処理部120によってディスプレイ装置に出力される画像の一例を示す図である。図12の例では、表示領域が4つのサブ領域に分割されている。また、図12の例では、表示処理部120によって選択された4つの画像はそれぞれ対応するサブ領域に割り当てられ、1つの合成画像としてディスプレイ装置に出力されている。図12の例では、左下のサブ領域の画像と、右上のサブ領域の画像において注意事象が検出されている。表示処理部120は、左下のサブ領域の画像に対しては、画像の外枠部を強調する表示を付与する処理を実行している。また、表示処理部120は、右上のサブ領域の画像に対しては、注意事象が検知された画像領域を強調する表示(ヒートマップ)を付与する処理を実行している。図示していないが、表示処理部120は、第2実施形態で説明したように、注意事象が検出された場所を示す文字情報を更に付与してもよい。
Figure 12 is a diagram showing an example of an image output to a display device by the
表示処理部120は、ディスプレイ装置に表示させる画像が優先度に基づいて選択されるまでは、複数の撮像装置20の中で予め定められた特定の撮像装置20(以下、「特定撮像装置」とも表記)によって撮影された画像を、ディスプレイ装置に表示させる画像として選択する。ここで、プラットホームの構造上、人が集まりやすい場所、危険度が高いと推測される場所、または乗務員が視認しにくい場所を撮像範囲に含む撮像装置20が特定撮像装置として設定され得る。「プラットホームの構造上、人が集まりやすい場所」とは、例えば、階段、エスカレータ、またはエレベータが設置されている場所の周辺などである。「プラットホームの構造上、危険度が高いと推測される場所」とは、例えば、プラットホームが湾曲しており、停車時にプラットホームと車両との間に比較的大きな隙間が生じる場所などである。「プラットホームの構造上、乗務員が視認しにくい場所」とは、例えば、プラットホームが湾曲しており、停車中の車両によって乗務員の視界から遮られる可能性のある場所などである。The
なお、本実施形態において、画像解析部110によって決定された優先度に関係なく、撮影した画像がディスプレイ装置に常に表示される撮像装置が、予め設定されていてもよい。表示処理部120は、そのような撮像装置によって撮影された画像を、ディスプレイ装置に表示する画像として常に選択する。この場合、例えば、常に画像を選択することを示すフラグ情報が、該当する撮像装置の情報に関連付けて所定の記憶領域(例えば、ストレージデバイス1040)に予め登録される。表示処理部120は、そのようなフラグ情報の有無に基づいて、画像解析部110により決定された優先度にかかわらず、常に選択すべき画像を識別することができる。また、画像解析部110は、このようなフラグ情報が付与されている撮像装置の画像について、人物の数を検出する処理をスキップするように構成されていてもよい。このようにすることで、全体的な画像処理量を削減することができる。In this embodiment, an imaging device whose captured image is always displayed on the display device may be set in advance, regardless of the priority determined by the
以上、本実施形態によれば、プラットホームに設けられた複数の撮像装置20によって撮影された複数の画像それぞれについて、画像から検出される人物の数に基づいて優先度が決定される。そして、決定された優先度に基づいて、所定の数の画像がディスプレイ装置に表示される画像として選択される。そして、多くの人が写っており注意事象が発生する可能性の高い画像が、従業員や駅員の確認するモニタ上に優先的に表示される。これにより、一度に伝送できる映像(画像)の数に何らかの制約が課されている場合であっても、映像に基づいてプラットホームの安全性を効率的に確認することができる。
As described above, according to this embodiment, a priority is determined for each of the multiple images captured by the
以上、図面を参照して本発明の実施の形態について述べたが、本発明はこれらに限定されて解釈されるべきものではなく、本発明の要旨を逸脱しない限りにおいて、当業者の知識に基づいて、種々の変更、改良等を行うことができる。また、実施形態に開示されている複数の構成要素は、適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素からいくつかの構成要素を削除してもよいし、異なる実施形態の構成要素を適宜組み合わせてもよい。 Although the embodiments of the present invention have been described above with reference to the drawings, the present invention should not be interpreted as being limited to these, and various modifications, improvements, etc. can be made based on the knowledge of those skilled in the art as long as they do not deviate from the gist of the present invention. Furthermore, the multiple components disclosed in the embodiments can be appropriately combined to form various inventions. For example, some components may be deleted from all the components shown in the embodiments, or components of different embodiments may be appropriately combined.
また、上述の説明で用いた複数のフローチャートでは、複数の工程(処理)が順番に記載されているが、各実施形態で実行される工程の実行順序は、その記載の順番に制限されない。各実施形態では、図示される工程の順番を内容的に支障のない範囲で変更することができる。また、上述の各実施形態は、内容が相反しない範囲で組み合わせることができる。 In addition, in the multiple flow charts used in the above explanation, multiple steps (processing) are described in order, but the order of execution of the steps performed in each embodiment is not limited to the order described. In each embodiment, the order of the steps shown in the figures can be changed to the extent that does not cause any problems in terms of content. In addition, each of the above-mentioned embodiments can be combined to the extent that the content is not contradictory.
上記の実施形態の一部または全部は、以下の付記のようにも記載されうるが、以下に限られない。
1.
駅のプラットホームの少なくとも一部を含む領域の画像を処理し、前記領域における注意事象を検出する画像解析手段と、
前記画像から注意事象が検出された場合、前記注意事象の存在を知らせる表示を前記画像に付与する画像処理を実行し、前記画像処理後の画像をディスプレイに表示させる表示処理手段と、
前記注意事象の存在を知らせる表示の内容を、設定により変更可能とする表示内容設定手段と、
を備えるサーバ装置。
2.
前記表示処理手段は、前記画像の外縁を強調する表示および前記注意事象が検出された画像領域を強調する表示の少なくとも一方を、前記注意事象の存在を知らせる表示として前記画像に付与する、
1.に記載のサーバ装置。
3.
前記画像解析手段は、前記プラットホームに設けられたホームドアへの寄りかかり、前記ホームドアでの異物の挟み込み、前記プラットホームに存在する列車への駆け込み、所定の閾値以上の人の存在、ベビーカーの存在、および車いすの存在のうち少なくとも1つを、前記注意事象として検出する、
1.または2.に記載のサーバ装置。
4.
前記表示処理手段は、前記注意事象が検出された場所を示す文字情報を前記画像に付与する、
1.から3.のいずれか1つに記載のサーバ装置。
5.
前記表示処理手段は、前記画像を撮影した撮像装置を示す文字情報、または、前記画像の撮影場所に対応する車両番号を示す文字情報を前記画像に付与する、
4.に記載のサーバ装置。
6.
前記画像解析手段は、
前記プラットホームに列車が存在するか否かを判定し、
前記列車が存在するか否かによって、前記画像の解析対象領域を変更する、
1.から5.のいずれか1つに記載のサーバ装置。
7.
前記画像解析手段は、前記プラットホームに列車が存在する場合、前記プラットホームに列車が存在している場合よりも前記解析対象領域を狭くする、
6.に記載のサーバ装置。
8.
前記画像解析手段は、前記プラットホームに列車が存在していない場合と、前記プラットホームに列車が存在している場合とで、前記注意事象として検出する事象の種類を変更する、
6.または7.に記載のサーバ装置。
9.
前記表示処理手段は、前記プラットホームに列車が存在するか否かについての判定結果に基づいて、前記画像処理後の画像の送信先を変更する、
6.から8.のいずれか1つに記載のサーバ装置。
10.
前記画像解析手段は、列車の存在を検知する外部装置からの信号を用いて、前記プラットホームに列車が存在するか否かを判定する、
6.から9.のいずれか1つに記載のサーバ装置。
11.
前記プラットホームに設けられた複数のホームドアの開閉状態を制御するホームドア制御手段を更に備え、
前記ホームドア制御手段は、前記画像解析手段による前記注意事象の検出結果に応じて、前記複数のホームドアを一括制御する第1の制御モードと、前記複数のホームドアの各々を個別に制御する第2の制御モードとを切り替える、
1.から10.のいずれか1つに記載のサーバ装置。
12.
前記画像解析手段は、
前記プラットホームに設けられた複数の撮像装置の各々から画像を取得し、
前記複数の撮像装置から取得された複数の画像それぞれについて、画像に写っている人物の数を算出し、
前記複数の画像それぞれについて算出された人物の数に基づいて優先度を決定し、
前記表示処理手段は、
決定された前記優先度に基づいて、前記ディスプレイに表示させる画像を前記複数の画像の中から選択する、
1.から11.のいずれか1つに記載のサーバ装置。
13.
前記表示処理手段は、
前記ディスプレイに表示させる画像が前記優先度に基づいて選択されるまで、前記複数の撮像装置の中で特定撮像装置として予め定められた撮像装置から取得された画像を、前記ディスプレイに表示させる画像として選択する、
12.に記載のサーバ装置。
14.
コンピュータによって実行される画像処理方法であって、
駅のプラットホームの少なくとも一部を含む領域の画像を処理し、前記領域における注意事象を検出し、
前記画像から注意事象が検出された場合、前記注意事象の存在を知らせる表示を前記画像に付与する画像処理を実行し、前記画像処理後の画像をディスプレイに表示させ、
前記注意事象の存在を知らせる表示の内容を、設定により変更可能とする、
ことを含む画像処理方法。
15.
前記コンピュータが、前記画像の外縁を強調する表示および前記注意事象が検出された画像領域を強調する表示の少なくとも一方を、前記注意事象の存在を知らせる表示として前記画像に付与する、
ことを含む14.に記載の画像処理方法。
16.
前記コンピュータが、前記プラットホームに設けられたホームドアへの寄りかかり、前記ホームドアでの異物の挟み込み、前記プラットホームに存在する列車への駆け込み、所定の閾値以上の人の存在、ベビーカーの存在、および車いすの存在のうち少なくとも1つを、前記注意事象として検出する、
ことを含む14.または15.に記載の画像処理方法。
17.
前記コンピュータが、前記注意事象が検出された場所を示す文字情報を前記画像に付与する、
ことを含む14.から16.のいずれか1つに記載の画像処理方法。
18.
前記コンピュータが、前記画像を撮影した撮像装置を示す文字情報、または、前記画像の撮影場所に対応する車両番号を示す文字情報を前記画像に付与する、
ことを含む17.に記載の画像処理方法。
19.
前記コンピュータが
前記プラットホームに列車が存在するか否かを判定し、
前記列車が存在するか否かによって、前記画像の解析対象領域を変更する、
ことを含む14.から18.のいずれか1つに記載の画像処理方法。
20.
前記コンピュータが、前記プラットホームに列車が存在する場合、前記プラットホームに列車が存在している場合よりも前記解析対象領域を狭くする、
ことを含む19.に記載の画像処理方法。
21.
前記コンピュータが、前記プラットホームに列車が存在していない場合と、前記プラットホームに列車が存在している場合とで、前記注意事象として検出する事象の種類を変更する、
ことを含む19.または20.に記載の画像処理方法。
22.
前記コンピュータが、前記プラットホームに列車が存在するか否かについての判定結果に基づいて、前記画像処理後の画像の送信先を変更する、
ことを含む19.から21.のいずれか1つに記載の画像処理方法。
23.
前記コンピュータが、列車の存在を検知する外部装置からの信号を用いて、前記プラットホームに列車が存在するか否かを判定する、
ことを含む19.から22.のいずれか1つに記載の画像処理方法。
24.
前記コンピュータが、
前記プラットホームに設けられた複数のホームドアの開閉状態を制御し、
前記ホームドアの開閉状態の制御において、前記注意事象の検出結果に応じて、前記複数のホームドアを一括制御する第1の制御モードと、前記複数のホームドアの各々を個別に制御する第2の制御モードとを切り替える、
ことを含む14.から23.のいずれか1つに記載の画像処理方法。
25.
前記コンピュータが、
前記プラットホームに設けられた複数の撮像装置の各々から画像を取得し、
前記複数の撮像装置から取得された複数の画像それぞれについて、画像に写っている人物の数を算出し、
前記複数の画像それぞれについて算出された人物の数に基づいて優先度を決定し、
決定された前記優先度に基づいて、前記ディスプレイに表示させる画像を前記複数の画像の中から選択する、
ことを含む14.から24.のいずれか1つに記載の画像処理方法。
26.
前記コンピュータが、
前記ディスプレイに表示させる画像が前記優先度に基づいて選択されるまで、前記複数の撮像装置の中で特定撮像装置として予め定められた撮像装置から取得された画像を、前記ディスプレイに表示させる画像として選択する、
ことを含む25.に記載の画像処理方法。
27.
コンピュータを、
駅のプラットホームの少なくとも一部を含む領域の画像を処理し、前記領域における注意事象を検出する画像解析手段、
前記画像から注意事象が検出された場合、前記注意事象の存在を知らせる表示を前記画像に付与する画像処理を実行し、前記画像処理後の画像をディスプレイに表示させる表示処理手段、
前記注意事象の存在を知らせる表示の内容を、設定により変更可能とする表示内容設定手段、
として機能させるためのプログラム。
28.
前記表示処理手段は、前記画像の外縁を強調する表示および前記注意事象が検出された画像領域を強調する表示の少なくとも一方を、前記注意事象の存在を知らせる表示として前記画像に付与する、
27.に記載のプログラム。
29.
前記画像解析手段は、前記プラットホームに設けられたホームドアへの寄りかかり、前記ホームドアでの異物の挟み込み、前記プラットホームに存在する列車への駆け込み、所定の閾値以上の人の存在、ベビーカーの存在、および車いすの存在のうち少なくとも1つを、前記注意事象として検出する、
27.または28.に記載のプログラム。
30.
前記表示処理手段は、前記注意事象が検出された場所を示す文字情報を前記画像に付与する、
27.から29.のいずれか1つに記載のプログラム。
31.
前記表示処理手段は、前記画像を撮影した撮像装置を示す文字情報、または、前記画像の撮影場所に対応する車両番号を示す文字情報を前記画像に付与する、
30.に記載のプログラム。
32.
前記画像解析手段は、
前記プラットホームに列車が存在するか否かを判定し、
前記列車が存在するか否かによって、前記画像の解析対象領域を変更する、
27.から31.のいずれか1つに記載のプログラム。
33.
前記画像解析手段は、前記プラットホームに列車が存在する場合、前記プラットホームに列車が存在している場合よりも前記解析対象領域を狭くする、
32.に記載のプログラム。
34.
前記画像解析手段は、前記プラットホームに列車が存在していない場合と、前記プラットホームに列車が存在している場合とで、前記注意事象として検出する事象の種類を変更する、
32.または33.に記載のプログラム。
35.
前記表示処理手段は、前記プラットホームに列車が存在するか否かについての判定結果に基づいて、前記画像処理後の画像の送信先を変更する、
32.から34.のいずれか1つに記載のプログラム。
36.
前記画像解析手段は、列車の存在を検知する外部装置からの信号を用いて、前記プラットホームに列車が存在するか否かを判定する、
32.から35.のいずれか1つに記載のプログラム。
37.
前記プラットホームに設けられた複数のホームドアの開閉状態を制御するホームドア制御手段を更に備え、
前記ホームドア制御手段は、前記画像解析手段による前記注意事象の検出結果に応じて、前記複数のホームドアを一括制御する第1の制御モードと、前記複数のホームドアの各々を個別に制御する第2の制御モードとを切り替える、
27.から36.のいずれか1つに記載のプログラム。
38.
前記画像解析手段は、
前記プラットホームに設けられた複数の撮像装置の各々から画像を取得し、
前記複数の撮像装置から取得された複数の画像それぞれについて、画像に写っている人物の数を算出し、
前記複数の画像それぞれについて算出された人物の数に基づいて優先度を決定し、
前記表示処理手段は、
決定された前記優先度に基づいて、前記ディスプレイに表示させる画像を前記複数の画像の中から選択する、
27.から37.のいずれか1つに記載のプログラム。
39.
前記表示処理手段は、
前記ディスプレイに表示させる画像が前記優先度に基づいて選択されるまで、前記複数の撮像装置の中で特定撮像装置として予め定められた撮像装置から取得された画像を、前記ディスプレイに表示させる画像として選択する、
38.に記載のプログラム。
A part or all of the above-described embodiments may be described as, but is not limited to, the following supplementary notes.
1.
image analysis means for processing an image of an area including at least a portion of a station platform and detecting events of interest in said area;
a display processing means for executing image processing for adding a display notifying the presence of the caution event to the image when the caution event is detected from the image, and displaying the image after the image processing on a display;
a display content setting means for changing the content of the display notifying the user of the presence of the caution event by setting the display content;
A server device comprising:
2.
the display processing means applies at least one of a display emphasizing an outer edge of the image and a display emphasizing an image region in which the attention event is detected to the image as a display notifying the presence of the attention event;
1. The server device according to
3.
The image analysis means detects, as the attention event, at least one of leaning against a platform door provided on the platform, a foreign object being caught in the platform door, running towards a train on the platform, the presence of a predetermined threshold or more of people, the presence of a stroller, and the presence of a wheelchair.
1. The server device according to 1 or 2.
4.
The display processing means adds text information indicating a location where the attention event was detected to the image.
1. The server device according to any one of 1 to 3.
5.
The display processing means adds character information indicating an imaging device that captured the image, or character information indicating a vehicle number corresponding to a location where the image was captured, to the image.
4. The server device according to .
6.
The image analysis means
determining whether a train is present at the platform;
changing an analysis target area of the image depending on whether the train is present or not;
5. The server device according to any one of 1 to 5.
7.
the image analysis means narrows the analysis target area when a train is present on the platform compared to when a train is not present on the platform;
6. The server device according to .
8.
the image analysis means changes a type of event to be detected as the attention event depending on whether a train is not present on the platform or a train is present on the platform.
6. The server device according to 6. or 7.
9.
the display processing means changes a destination of the image after the image processing based on a determination result as to whether or not a train is present at the platform.
9. The server device according to any one of 6. to 8.
10.
the image analysis means determines whether or not a train is present on the platform using a signal from an external device that detects the presence of a train;
6. The server device according to any one of 6. to 9.
11.
The system further includes a platform door control means for controlling the open/closed states of a plurality of platform doors provided on the platform,
the platform door control means switches between a first control mode for collectively controlling the plurality of platform doors and a second control mode for individually controlling each of the plurality of platform doors, according to a detection result of the caution event by the image analysis means;
1. The server device according to any one of 1. to 10.
12.
The image analysis means
acquiring images from each of a plurality of imaging devices provided on the platform;
Calculating the number of people appearing in each of the multiple images acquired from the multiple image capture devices;
determining a priority based on the calculated number of people for each of the plurality of images;
The display processing means includes:
selecting an image to be displayed on the display from among the plurality of images based on the determined priority;
12. The server device according to any one of 1 to 11.
13.
The display processing means includes:
selecting, as the image to be displayed on the display, an image acquired from an imaging device that is predetermined as a specific imaging device among the plurality of imaging devices, until the image to be displayed on the display is selected based on the priority.
12. The server device according to .
14.
1. A computer-implemented image processing method, comprising the steps of:
processing images of an area including at least a portion of a station platform to detect events of interest in said area;
When a caution event is detected from the image, image processing is performed to add a display notifying the presence of the caution event to the image, and the image after the image processing is displayed on a display.
The content of the display notifying the user of the presence of the caution event can be changed by setting.
An image processing method comprising:
15.
the computer applies at least one of a display emphasizing an outer edge of the image and a display emphasizing an image region in which the attention event is detected to the image as a display notifying the presence of the attention event;
14. The image processing method according to claim 13, further comprising:
16.
The computer detects, as the attention event, at least one of leaning against a platform door provided on the platform, a foreign object getting caught in the platform door, running towards a train on the platform, the presence of a predetermined threshold or more of people, the presence of a stroller, and the presence of a wheelchair.
16. The image processing method according to 14. or 15.,
17.
the computer adds text information indicating a location where the attention event was detected to the image;
17. The image processing method according to any one of 14. to 16.,
18.
The computer adds character information indicating an imaging device that captured the image, or character information indicating a vehicle number corresponding to a location where the image was captured, to the image.
17. The image processing method according to claim 16, further comprising:
19.
The computer determines whether a train is present at the platform;
changing an analysis target area of the image depending on whether the train is present or not;
19. The image processing method according to any one of 14. to 18.,
20.
the computer narrows the analysis target area when a train is present on the platform compared to when a train is not present on the platform;
19. The image processing method according to 19.,
21.
the computer changes the type of event to be detected as the attention event depending on whether a train is not present on the platform or a train is present on the platform;
21. The image processing method according to 19. or 20.,
22.
the computer changes a destination of the image after the image processing based on a determination result as to whether or not a train is present at the platform;
22. The image processing method according to any one of 19. to 21.,
23.
The computer determines whether a train is present at the platform using a signal from an external device that detects the presence of a train.
23. The image processing method according to any one of 19. to 22.,
24.
The computer,
Controlling the opening and closing states of a plurality of platform doors provided on the platform;
In controlling the open/closed state of the platform doors, switching is performed between a first control mode in which the plurality of platform doors are collectively controlled and a second control mode in which each of the plurality of platform doors is individually controlled in response to the detection result of the caution event.
24. The image processing method according to any one of 14. to 23.,
25.
The computer,
acquiring images from each of a plurality of imaging devices provided on the platform;
Calculating the number of people appearing in each of the multiple images acquired from the multiple image capture devices;
determining a priority based on the calculated number of people for each of the plurality of images;
selecting an image to be displayed on the display from among the plurality of images based on the determined priority;
25. The image processing method according to any one of 14. to 24.,
26.
The computer,
selecting, as the image to be displayed on the display, an image acquired from an imaging device that is predetermined as a specific imaging device among the plurality of imaging devices, until the image to be displayed on the display is selected based on the priority.
25. The image processing method according to claim 25, further comprising:
27.
Computer,
image analysis means for processing images of an area including at least a portion of a station platform and detecting events of interest in said area;
a display processing means for executing image processing for adding a display notifying the presence of a caution event to the image when a caution event is detected from the image, and displaying the image after the image processing on a display;
a display content setting means for changing the content of the display notifying the user of the presence of the caution event by setting the display content;
A program to function as a
28.
the display processing means applies at least one of a display emphasizing an outer edge of the image and a display emphasizing an image region in which the attention event is detected to the image as a display notifying the presence of the attention event;
27. The program described in .
29.
The image analysis means detects, as the attention event, at least one of leaning against a platform door provided on the platform, a foreign object being caught in the platform door, running towards a train on the platform, the presence of a predetermined threshold or more of people, the presence of a stroller, and the presence of a wheelchair.
27. The program according to 28.
30.
The display processing means adds text information indicating a location where the attention event was detected to the image.
27. The program according to any one of 27. to 29.
31.
The display processing means adds character information indicating an imaging device that captured the image, or character information indicating a vehicle number corresponding to a location where the image was captured, to the image.
30. The program described in .
32.
The image analysis means
determining whether a train is present at the platform;
changing an analysis target area of the image depending on whether the train is present or not;
27. The program according to any one of 27. to 31.
33.
the image analysis means narrows the analysis target area when a train is present on the platform compared to when a train is not present on the platform;
32. The program according to
34.
the image analysis means changes a type of event to be detected as the attention event depending on whether a train is not present on the platform or a train is present on the platform.
32. The program according to 33.
35.
the display processing means changes a destination of the image after the image processing based on a determination result as to whether or not a train is present at the platform.
32. The program according to any one of 32. to 34.
36.
the image analysis means determines whether or not a train is present on the platform using a signal from an external device that detects the presence of a train;
32. The program according to any one of 32. to 35.
37.
The system further includes a platform door control means for controlling the open/closed states of a plurality of platform doors provided on the platform,
the platform door control means switches between a first control mode for collectively controlling the plurality of platform doors and a second control mode for individually controlling each of the plurality of platform doors, according to a detection result of the caution event by the image analysis means;
27. The program according to any one of 27. to 36.
38.
The image analysis means
acquiring images from each of a plurality of imaging devices provided on the platform;
Calculating the number of people appearing in each of the multiple images acquired from the multiple image capture devices;
determining a priority based on the calculated number of people for each of the plurality of images;
The display processing means includes:
selecting an image to be displayed on the display from among the plurality of images based on the determined priority;
27. The program according to any one of claims 27 to 37.
39.
The display processing means includes:
selecting, as the image to be displayed on the display, an image acquired from an imaging device that is predetermined as a specific imaging device among the plurality of imaging devices, until an image to be displayed on the display is selected based on the priority.
38. The program according to
この出願は、2021年2月19日に出願された日本出願特願2021-024954号を基礎とする優先権を主張し、その開示の全てをここに取り込む。 This application claims priority based on Japanese Patent Application No. 2021-024954, filed on February 19, 2021, the disclosure of which is incorporated herein in its entirety.
1 画像処理システム
10 サーバ装置
110 画像解析部
120 表示処理部
130 表示内容設定部
140 ホームドア制御部
1010 バス
1020 プロセッサ
1030 メモリ
1040 ストレージデバイス
1050 入出力インタフェース
1060 ネットワークインタフェース
20 撮像装置
30 送信機
40 受信機
50 乗務員用モニタ
60 駅員用モニタ
70 信号設備
80 ホームドアユニット
1
Claims (11)
前記画像から注意事象が検出された場合、前記注意事象の存在を知らせる表示を前記画像に付与する画像処理を実行し、前記画像処理後の画像をディスプレイに表示させる表示処理手段と、
前記注意事象の存在を知らせる表示の内容を、設定により変更可能とする表示内容設定手段と、
を備え、
前記表示処理手段は、前記プラットホームに列車が存在しているか否かの判定結果に基づいて、前記画像処理後の画像の送信先を変更して、当該画像処理後の画像を当該送信先の前記ディスプレイに表示させる、サーバ装置。 image analysis means for processing an image of an area including at least a portion of a station platform and detecting events of interest in said area;
a display processing means for executing image processing for adding a display notifying the presence of a caution event to the image when a caution event is detected from the image, and displaying the image after the image processing on a display;
a display content setting means for changing the content of the display notifying the user of the presence of the caution event by setting the display content;
Equipped with
The display processing means is a server device that changes the destination of the image after image processing based on the determination result of whether or not a train is present on the platform, and displays the image after image processing on the display of the destination .
請求項1または2に記載のサーバ装置。 the display processing means applies at least one of a display emphasizing an outer edge of the image and a display emphasizing an image region in which the attention event is detected to the image as a display notifying the presence of the attention event;
3. The server device according to claim 1 or 2 .
請求項1から3のいずれか1項に記載のサーバ装置。 The image analysis means detects, as the attention event, at least one of leaning against a platform door provided on the platform, a foreign object being caught in the platform door, running towards a train on the platform, the presence of a predetermined threshold or more of people, the presence of a stroller, and the presence of a wheelchair.
The server device according to any one of claims 1 to 3 .
請求項1から4のいずれか1項に記載のサーバ装置。 The display processing means adds text information indicating a location where the attention event was detected to the image.
The server device according to any one of claims 1 to 4 .
請求項5に記載のサーバ装置。 The display processing means adds character information indicating an imaging device that captured the image, or character information indicating a vehicle number corresponding to a location where the image was captured, to the image.
The server device according to claim 5 .
前記プラットホームに列車が存在するか否かを判定し、
前記列車が存在するか否かによって、前記画像の解析対象領域を変更する、
請求項1から6のいずれか1項に記載のサーバ装置。 The image analysis means
determining whether a train is present at the platform;
changing an analysis target area of the image depending on whether the train is present or not;
The server device according to claim 1 .
前記ホームドア制御手段は、前記画像解析手段による前記注意事象の検出結果に応じて、前記複数のホームドアを一括制御する第1の制御モードと、前記複数のホームドアの各々を個別に制御する第2の制御モードとを切り替える、
請求項1から7のいずれか1項に記載のサーバ装置。 The system further includes a platform door control means for controlling the open/closed states of a plurality of platform doors provided on the platform,
the platform door control means switches between a first control mode for collectively controlling the plurality of platform doors and a second control mode for individually controlling each of the plurality of platform doors, according to a detection result of the caution event by the image analysis means;
The server device according to any one of claims 1 to 7 .
前記プラットホームに設けられた複数の撮像装置の各々から画像を取得し、
前記複数の撮像装置から取得された複数の画像それぞれについて、画像に写っている人物の数を算出し、
前記複数の画像それぞれについて算出された人物の数に基づいて優先度を決定し、
前記表示処理手段は、
決定された前記優先度に基づいて、前記ディスプレイに表示させる画像を前記複数の画像の中から選択する、
請求項1から8のいずれか1項に記載のサーバ装置。 The image analysis means
acquiring images from each of a plurality of imaging devices provided on the platform;
Calculating the number of people appearing in each of the multiple images acquired from the multiple image capture devices;
determining a priority based on the calculated number of people for each of the plurality of images;
The display processing means includes:
selecting an image to be displayed on the display from among the plurality of images based on the determined priority;
The server device according to any one of claims 1 to 8 .
駅のプラットホームの少なくとも一部を含む領域の画像を処理し、前記領域における注意事象を検出し、
前記画像から注意事象が検出された場合、前記注意事象の存在を知らせる表示を前記画像に付与する画像処理を実行し、前記画像処理後の画像をディスプレイに表示させ、
前記注意事象の存在を知らせる表示の内容を、設定により変更可能とし、
前記プラットホームに列車が存在しているか否かの判定結果に基づいて、前記画像処理後の画像の送信先を変更して、当該画像処理後の画像を当該送信先の前記ディスプレイに表示させる、
ことを含む画像処理方法。 1. A computer-implemented image processing method, comprising the steps of:
processing images of an area including at least a portion of a station platform to detect events of interest in said area;
When a caution event is detected from the image, image processing is performed to add a display notifying the presence of the caution event to the image, and the image after the image processing is displayed on a display.
The content of the display notifying the presence of the caution event can be changed by setting,
changing a destination of the image after the image processing based on a result of the determination of whether or not a train is present at the platform, and displaying the image after the image processing on the display of the destination;
An image processing method comprising:
駅のプラットホームの少なくとも一部を含む領域の画像を処理し、前記領域における注意事象を検出する画像解析手段、
前記画像から注意事象が検出された場合、前記注意事象の存在を知らせる表示を前記画像に付与する画像処理を実行し、前記画像処理後の画像をディスプレイに表示させる表示処理手段、
前記注意事象の存在を知らせる表示の内容を、設定により変更可能とする表示内容設定手段、
として機能させ、
前記表示処理手段は、前記プラットホームに列車が存在しているか否かの判定結果に基づいて、前記画像処理後の画像の送信先を変更して、当該画像処理後の画像を当該送信先の前記ディスプレイに表示させる、プログラム。 Computer,
image analysis means for processing images of an area including at least a portion of a station platform and detecting events of interest in said area;
a display processing means for executing image processing for adding a display notifying the presence of a caution event to the image when a caution event is detected from the image, and displaying the image after the image processing on a display;
a display content setting means for changing the content of the display notifying the user of the presence of the caution event by setting the display content;
Function as a
The display processing means is a program that changes the destination of the image after image processing based on the result of determining whether or not a train is present on the platform, and displays the image after image processing on the display of the destination.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021024954 | 2021-02-19 | ||
JP2021024954 | 2021-02-19 | ||
PCT/JP2021/048532 WO2022176402A1 (en) | 2021-02-19 | 2021-12-27 | Server device, image processing method, and program |
Publications (3)
Publication Number | Publication Date |
---|---|
JPWO2022176402A1 JPWO2022176402A1 (en) | 2022-08-25 |
JPWO2022176402A5 JPWO2022176402A5 (en) | 2023-11-14 |
JP7513186B2 true JP7513186B2 (en) | 2024-07-09 |
Family
ID=82930700
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023500596A Active JP7513186B2 (en) | 2021-02-19 | 2021-12-27 | Server device, image processing method and program |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7513186B2 (en) |
WO (1) | WO2022176402A1 (en) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011104983A1 (en) | 2010-02-26 | 2011-09-01 | 日本電気株式会社 | Monitoring status display device, monitoring status display method, and monitoring status display program |
JP2011240846A (en) | 2010-05-19 | 2011-12-01 | Hitachi Kokusai Electric Inc | Monitoring device of monitoring system |
JP2014040221A (en) | 2012-08-23 | 2014-03-06 | Hitachi Building Systems Co Ltd | Video monitoring system |
JP2014148300A (en) | 2013-01-09 | 2014-08-21 | Use Co Ltd | Monitoring device, method, program, or system |
JP2018082281A (en) | 2016-11-15 | 2018-05-24 | キヤノン株式会社 | Information processor, control method of information processor and program |
WO2018180311A1 (en) | 2017-03-28 | 2018-10-04 | 株式会社日立国際電気 | Monitoring system and monitoring method |
WO2019102935A1 (en) | 2017-11-21 | 2019-05-31 | シャープ株式会社 | Display device, imaging and display system, and train |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11152034A (en) * | 1997-11-20 | 1999-06-08 | Fujitsu General Ltd | Train monitoring system |
-
2021
- 2021-12-27 JP JP2023500596A patent/JP7513186B2/en active Active
- 2021-12-27 WO PCT/JP2021/048532 patent/WO2022176402A1/en active Application Filing
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011104983A1 (en) | 2010-02-26 | 2011-09-01 | 日本電気株式会社 | Monitoring status display device, monitoring status display method, and monitoring status display program |
JP2011240846A (en) | 2010-05-19 | 2011-12-01 | Hitachi Kokusai Electric Inc | Monitoring device of monitoring system |
JP2014040221A (en) | 2012-08-23 | 2014-03-06 | Hitachi Building Systems Co Ltd | Video monitoring system |
JP2014148300A (en) | 2013-01-09 | 2014-08-21 | Use Co Ltd | Monitoring device, method, program, or system |
JP2018082281A (en) | 2016-11-15 | 2018-05-24 | キヤノン株式会社 | Information processor, control method of information processor and program |
WO2018180311A1 (en) | 2017-03-28 | 2018-10-04 | 株式会社日立国際電気 | Monitoring system and monitoring method |
WO2019102935A1 (en) | 2017-11-21 | 2019-05-31 | シャープ株式会社 | Display device, imaging and display system, and train |
Also Published As
Publication number | Publication date |
---|---|
WO2022176402A1 (en) | 2022-08-25 |
JPWO2022176402A1 (en) | 2022-08-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5988472B2 (en) | Monitoring system and congestion rate calculation method | |
EP3606053B1 (en) | Monitoring system and monitoring method | |
JP6829165B2 (en) | Monitoring system and monitoring method | |
KR100956978B1 (en) | The system which integrated manages a traffic accident notice area | |
US11270562B2 (en) | Video surveillance system and video surveillance method | |
JP4845580B2 (en) | Train congestion notification system | |
JP5832749B2 (en) | In-train monitoring system and in-train monitoring method | |
EP3606055A1 (en) | Video processing device, video analysis system, method, and program | |
JP7459916B2 (en) | Object tracking method, object tracking device, and program | |
KR100916960B1 (en) | Monitoring system in railway station | |
WO2018179202A1 (en) | Information processing device, control method, and program | |
JP5340123B2 (en) | In-vehicle monitoring system, in-vehicle monitoring method, imaging apparatus, and imaging method | |
JP6483214B1 (en) | Elevator system and elevator lost child detection method | |
KR102246925B1 (en) | Integrated bus information and disease management systems and methods | |
JP2009279970A (en) | System for detecting door-pinching for vehicle, and method for detecting door-pinching | |
JP7513186B2 (en) | Server device, image processing method and program | |
JPH10285586A (en) | Image processor, monitoring image display system, image processing method and monitoring image display method | |
Miller et al. | Intelligent Sensor Information System For Public Transport–To Safely Go… | |
JP7138547B2 (en) | store equipment | |
CN116740617A (en) | Data processing method, device, electronic equipment and storage medium | |
KR101167605B1 (en) | Intelligent controller using camera and method thereof | |
KR101509223B1 (en) | Security system with an auto capturing for monitoring screen and method of the same | |
JP7447915B2 (en) | Processing equipment, processing method and program | |
JP2012001302A (en) | Screen display device inside car | |
EP3936408B1 (en) | Train monitoring system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230809 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230809 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231219 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240213 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240528 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7513186 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |