JP2019098846A - Error calculation device and error calculation system - Google Patents

Error calculation device and error calculation system Download PDF

Info

Publication number
JP2019098846A
JP2019098846A JP2017229835A JP2017229835A JP2019098846A JP 2019098846 A JP2019098846 A JP 2019098846A JP 2017229835 A JP2017229835 A JP 2017229835A JP 2017229835 A JP2017229835 A JP 2017229835A JP 2019098846 A JP2019098846 A JP 2019098846A
Authority
JP
Japan
Prior art keywords
marker
train
captured image
unit
error calculation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017229835A
Other languages
Japanese (ja)
Other versions
JP7042596B2 (en
Inventor
勝大 堀江
Katsuhiro Horie
勝大 堀江
雄介 高橋
Yusuke Takahashi
雄介 高橋
横井 謙太朗
Kentaro Yokoi
謙太朗 横井
勇人 戸田
Isato Toda
勇人 戸田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Toshiba Infrastructure Systems and Solutions Corp
Original Assignee
Toshiba Corp
Toshiba Infrastructure Systems and Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Toshiba Infrastructure Systems and Solutions Corp filed Critical Toshiba Corp
Priority to JP2017229835A priority Critical patent/JP7042596B2/en
Publication of JP2019098846A publication Critical patent/JP2019098846A/en
Application granted granted Critical
Publication of JP7042596B2 publication Critical patent/JP7042596B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

To provide an error calculation device capable of highly accurately grasping an error between an actual stop position when a train stops at a station and a predefined target stop position.SOLUTION: An error calculation device 10 is provided with an acquisition unit 102, an identification unit 103 and a calculation unit 104. The acquisition unit acquires a captured image from an imaging device installed in a train. The identification unit identifies a marker set at a station where the train stops from the captured image. The calculation unit acquires a difference between the position of a prescribed part in the identified marker in the captured image and a reference position which is the position of a prescribed part in the captured image captured in advance when the train stops at a predefined target stop position, and calculates an error between the stop position and the target stop position of the train on the basis of the difference.SELECTED DRAWING: Figure 2

Description

本発明の実施形態は、誤差算出装置および誤差算出システムに関する。   Embodiments of the present invention relate to an error calculation device and an error calculation system.

従来から、ATO(Automatic Train Operation)のように列車を自動運転制御する技術や、TASC(Train Automatic Stop-position Controller)のように列車が定められた目標停止位置に停止することを支援する技術が知られている。   Conventionally, there are technologies that control trains to operate automatically, such as ATO (Automatic Train Operation), and technologies that help a train stop at a defined target stop position, such as Train Automatic Stop-position Controller (TASC). Are known.

特許第6045483号公報Patent No. 6045483 特許第5634951号公報Patent No. 5634951 gazette 特許第6081549号公報Patent No. 6081549 特許第6091294号公報Patent No. 6091294 特許第5484280号公報Patent No. 5484280

しかしながら、従来技術においては、列車が駅に停車した際の実際の停止位置と、予め定められた目標停止位置との誤差を高精度に把握することが困難であった。   However, in the prior art, it has been difficult to accurately grasp an error between an actual stop position when a train stops at a station and a predetermined target stop position.

実施形態の誤差算出装置は、取得部と、特定部と、算出部とを備える。取得部は、列車に設置された撮像装置から撮像画像を取得する。特定部は、列車が停止する駅に設置されたマーカーを、撮像画像から特定する。算出部は、特定されたマーカー内の所定部位の撮像画像における位置と、列車が予め定められた目標停止位置に停止した際に予め撮像された撮像画像における所定部位の位置である基準位置と、の差分を求め、差分に基づいて、列車の停止位置と目標停止位置との誤差を算出する。   The error calculation device of the embodiment includes an acquisition unit, a specification unit, and a calculation unit. The acquisition unit acquires a captured image from an imaging device installed in a train. The identification unit identifies, from the captured image, a marker installed at a station at which the train stops. The calculation unit includes a position in a captured image of a predetermined portion in the specified marker, and a reference position which is a position of the predetermined portion in the captured image captured in advance when the train is stopped at a predetermined target stop position. And calculate an error between the stop position of the train and the target stop position based on the difference.

図1は、第1の実施形態にかかる誤差算出システムの全体構成の一例を示す図である。FIG. 1 is a diagram showing an example of the entire configuration of the error calculation system according to the first embodiment. 図2は、第1の実施形態にかかる誤差算出装置が備える機能の一例を示すブロック図である。FIG. 2 is a block diagram showing an example of the function of the error calculation device according to the first embodiment. 図3は、第1の実施形態にかかるマーカーが撮像された撮像画像の一例を示す図である。FIG. 3 is a view showing an example of a captured image obtained by capturing the marker according to the first embodiment. 図4は、第1の実施形態にかかる誤差算出処理の流れの一例を示すフローチャートである。FIG. 4 is a flowchart showing an example of the flow of the error calculation process according to the first embodiment. 図5は、第1の実施形態にかかるマーカー特定処理の流れの一例を示すフローチャートである。FIG. 5 is a flowchart showing an example of the flow of the marker identification process according to the first embodiment. 図6は、第2の実施形態にかかるマーカーを特定する手法の一例を示す図である。FIG. 6 is a diagram showing an example of a method of identifying a marker according to the second embodiment. 図7は、第2の実施形態にかかるマーカー特定処理の流れの一例を示すフローチャートである。FIG. 7 is a flowchart showing an example of the flow of the marker identification process according to the second embodiment. 図8は、変形例1にかかるマーカーの設置位置の一例を示す図である。FIG. 8 is a view showing an example of the installation position of the marker according to the first modification. 図9は、変形例2にかかるマーカーの設置位置の一例を示す図である。FIG. 9 is a view showing an example of the installation position of the marker according to the second modification. 図10は、変形例3にかかるマーカーの設置位置の一例を示す図である。FIG. 10 is a view showing an example of the installation position of the marker according to the third modification. 図11は、変形例4にかかるマーカーの設置位置の一例を示す図である。FIG. 11 is a view showing an example of the installation position of the marker according to the fourth modification. 図12は、第3の実施形態にかかる誤差算出システムの全体構成の一例を示す図である。FIG. 12 is a diagram showing an example of the entire configuration of the error calculation system according to the third embodiment. 図13は、第3の実施形態にかかるマーカーの一例を示す側面図である。FIG. 13 is a side view showing an example of the marker according to the third embodiment. 図14は、第3の実施形態にかかるマーカーが撮像された撮像画像の一例を示す図である。FIG. 14 is a view showing an example of a captured image obtained by capturing a marker according to the third embodiment. 図15は、第3の実施形態にかかる誤差算出処理の流れの一例を示すフローチャートである。FIG. 15 is a flowchart showing an example of the flow of the error calculation process according to the third embodiment.

(第1の実施形態)
一般に、列車が停車する駅においては、列車の目標停止位置が予め定められている。しかしながら、実際には列車が目標停止位置の手前で停止したり、目標停止位置を通過してから停止したりすることで、列車が停車駅で停止した位置(停止位置)と目標停止位置とに誤差が生じる場合がある。本実施形態の誤差算出システムでは、列車の停止位置と目標停止位置との誤差を高精度に算出する。
First Embodiment
Generally, at a station where a train stops, a target stop position of the train is predetermined. However, in practice, the train stops before the target stop position or stops after passing the target stop position, so that the position at which the train stopped at the stop station (stop position) and the target stop position Errors may occur. In the error calculation system of the present embodiment, the error between the train stop position and the target stop position is calculated with high accuracy.

図1は、本実施形態にかかる誤差算出システムSの全体構成の一例を示す図である。本実施形態の誤差算出システムSは、マーカー2と、誤差算出装置10と、カメラ3a,3bと、制御装置11と、を備える。   FIG. 1 is a view showing an example of the entire configuration of an error calculation system S according to the present embodiment. The error calculation system S of the present embodiment includes the marker 2, the error calculation device 10, the cameras 3 a and 3 b, and the control device 11.

マーカー2は、予め定められた目標停止位置と、列車1が駅に停車した際の実際の停止位置との誤差の算出に用いられる目印である。図1に示すように、本実施形態のマーカー2は、複数の列と複数の行とが交差するように配列された複数の円である。マーカー2の幅方向の中心は、本実施形態におけるマーカー2内の所定部位の一例である。所定部位は、これに限定されるものではない。   The marker 2 is a mark used to calculate an error between a predetermined target stop position and an actual stop position when the train 1 stops at the station. As shown in FIG. 1, the marker 2 of the present embodiment is a plurality of circles arranged so that a plurality of columns and a plurality of rows intersect. The center in the width direction of the marker 2 is an example of a predetermined portion in the marker 2 in the present embodiment. The predetermined site is not limited to this.

また、本実施形態においては、マーカー2は、駅のホーム4の床に、列車1の前後方向と平行になるように設置される。マーカー2は、ホーム4の床に塗料等で記載されても良いし、マーカー2が表示された板やシート等がホーム4の床に貼附されても良い。マーカー2の表面には、公知の技術によって、光の反射を抑制する加工が施されても良い。   Moreover, in this embodiment, the marker 2 is installed on the floor of the platform 4 of the station so as to be parallel to the front-rear direction of the train 1. The marker 2 may be described on the floor of the home 4 with paint or the like, or a plate, a sheet or the like on which the marker 2 is displayed may be affixed to the floor of the home 4. The surface of the marker 2 may be processed to suppress the reflection of light by a known technique.

カメラ3a,3bは、列車1に設置された撮像装置である。以下、カメラ3aとカメラ3bとを特に区別しない場合は、カメラ3という。より詳細には、カメラ3は、駅のホーム4に設置されたマーカー2を撮像可能な撮像角度で列車1に設置される。本実施形態では、カメラ3は、列車1の車両の上部に、ホーム4を向いて斜め下向きの撮像角度で設置される。また、カメラ3は、列車1の車両から突出して、下向きの撮像角度で設置されても良い。カメラ3は、例えばCCTV(Closed-Circuit Television)カメラであるが、これに限定されるものではない。また、カメラ3は、動画を撮像するものでも良いし、静止画を撮像するものでも良い。   The cameras 3 a and 3 b are imaging devices installed in the train 1. Hereinafter, when the camera 3a and the camera 3b are not particularly distinguished from one another, it is referred to as the camera 3. More specifically, the camera 3 is installed on the train 1 at an imaging angle at which the marker 2 installed on the station home 4 can be imaged. In the present embodiment, the camera 3 is installed on the upper part of the train 1's vehicle at an imaging angle that faces the home 4 and obliquely downward. Moreover, the camera 3 may be protruded from the vehicle of the train 1 and installed at a downward imaging angle. The camera 3 is, for example, a CCTV (Closed-Circuit Television) camera, but is not limited thereto. Further, the camera 3 may capture a moving image or may capture a still image.

また、図1の例では、カメラ3a,3bは、列車1の左右にそれぞれ設置されているが、これは、ホーム4が列車1の左右のいずれの方向に位置してもマーカー2を撮像可能にするためである。全ての駅において、ホーム4と列車1との位置関係が同じである場合は、カメラ3a,3bは、いずれか1台でも良い。   Also, in the example of FIG. 1, the cameras 3a and 3b are respectively installed on the left and right of the train 1, but it is possible to pick up the marker 2 even if the home 4 is located in either direction of the train 1 In order to When the positional relationship between the home 4 and the train 1 is the same at all the stations, any one of the cameras 3a and 3b may be used.

制御装置11は、列車1の運転を制御する装置であり、列車1に搭載される。制御装置11は、例えば、ATO等の自動列車運転装置とする。また、制御装置11は、列車1の運転に関する各種の情報を有する。制御装置11と誤差算出装置10とはネットワーク等を介して互いに通信可能に接続されている。制御装置11は、例えば、列車1の次の停車駅を示す情報を誤差算出装置10に送信する。また、制御装置11は、列車1が駅に停車した場合に、列車1が停止したことを示す停止信号を誤差算出装置10に送信する。   The control device 11 is a device that controls the operation of the train 1 and is mounted on the train 1. The control device 11 is, for example, an automatic train operating device such as ATO. Further, the control device 11 has various types of information related to the operation of the train 1. The control device 11 and the error calculation device 10 are communicably connected to each other via a network or the like. The control device 11 transmits, for example, information indicating the next stop station of the train 1 to the error calculation device 10. Further, when the train 1 stops at the station, the control device 11 transmits to the error calculation device 10 a stop signal indicating that the train 1 has stopped.

また、制御装置11は、後述する誤差算出装置10から送信された列車1の停止位置と目標停止位置との誤差を保存する。制御装置11は、機械学習等の手法を用いて分析することにより、列車1の停止位置と目標停止位置との誤差がより小さくなるように、自動運転制御の制御パラメータの値を調整する。   Further, the control device 11 stores the error between the stop position of the train 1 and the target stop position transmitted from the error calculation device 10 described later. The control device 11 adjusts the value of the control parameter of the automatic operation control so that the error between the stop position of the train 1 and the target stop position becomes smaller by performing analysis using a method such as machine learning.

誤差算出装置10は、列車1に搭載され、カメラ3が撮像した撮像画像内のマーカー2の画像の位置に基づいて、列車1の停止位置と、目標停止位置との誤差を算出する。誤差算出装置10の機能の詳細は後述する。   The error calculation device 10 is mounted on the train 1 and calculates an error between the stop position of the train 1 and the target stop position based on the position of the image of the marker 2 in the captured image captured by the camera 3. Details of the function of the error calculation device 10 will be described later.

本実施形態の制御装置11および誤差算出装置10は、CPU(Central Processing Unit)等の制御装置と、ROM(Read Only Memory)やRAM(Random Access Memory)等の記憶装置と、HDD(Hard Disk Drive)等の外部記憶装置と、ネットワーク等に接続可能な通信インタフェース等を備えており、通常のコンピュータを利用したハードウェア構成となっている。具体的には、制御装置11および誤差算出装置10は、PC(Personal Computer)やサーバーである。   The control device 11 and the error calculation device 10 according to the present embodiment include a control device such as a central processing unit (CPU), a storage device such as a read only memory (ROM) or a random access memory (RAM), and a hard disk drive (HDD). Etc., and a communication interface etc. which can be connected to a network etc., and has a hardware configuration using a normal computer. Specifically, the control device 11 and the error calculation device 10 are a PC (Personal Computer) or a server.

次に、本実施形態の誤差算出装置10の機能について詳細を説明する。図2は、本実施形態にかかる誤差算出装置10が備える機能の一例を示すブロック図である。図2に示すように、本実施形態の誤差算出装置10は、受信部101と、取得部102と、特定部103と、算出部104と、送信部105と、記憶部150とを備える。   Next, the function of the error calculation device 10 of the present embodiment will be described in detail. FIG. 2 is a block diagram showing an example of the function of the error calculation device 10 according to the present embodiment. As shown in FIG. 2, the error calculation device 10 of the present embodiment includes a reception unit 101, an acquisition unit 102, a specification unit 103, a calculation unit 104, a transmission unit 105, and a storage unit 150.

本実施形態の記憶部150は、ホーム位置情報と、マーカー長と、基準位置のX座標と、算出可能な誤差の最大値と、を記憶する。記憶部150は、例えばHDD等の記憶装置である。   The storage unit 150 of the present embodiment stores home position information, a marker length, the X coordinate of the reference position, and the maximum value of the computable errors. The storage unit 150 is, for example, a storage device such as an HDD.

ホーム位置情報は、列車1の停車駅と、当該停車駅におけるホーム4が列車1の左右のいずれの方向に位置するか、とを対応付けた情報である。   The home position information is information in which the stop station of the train 1 is associated with which direction the home 4 at the stop station is located to the left or right of the train 1.

マーカー長は、実空間におけるマーカー2の幅方向(横方向、左右方向)の長さである。より詳細には、本実施形態のマーカー長は、マーカー2の複数の円のうち、一番左端の円の中心と、一番右端の円の中心との間の距離である。   The marker length is the length in the width direction (horizontal direction, left-right direction) of the marker 2 in the real space. More specifically, the marker length in the present embodiment is the distance between the center of the leftmost circle and the center of the rightmost circle among the plurality of circles of the marker 2.

基準位置のX座標は、列車1が目標停止位置に停止した際に予め撮像された撮像画像におけるマーカー2の幅方向の中心(所定部位)の座標である。本実施形態では、基準位置のX座標が撮像画像の幅方向の中心となるように、マーカー2とカメラ3との位置関係が予め設定されているものとする。基準位置のX座標はこれに限定されるものではない。   The X coordinate of the reference position is a coordinate of the center (predetermined portion) in the width direction of the marker 2 in the captured image captured in advance when the train 1 stops at the target stop position. In the present embodiment, the positional relationship between the marker 2 and the camera 3 is set in advance so that the X coordinate of the reference position is at the center in the width direction of the captured image. The X coordinate of the reference position is not limited to this.

また、算出可能な誤差の最大値は、本実施形態の誤差算出装置10が撮像画像から算出可能な列車1の停止位置と目標停止位置との誤差の最大値である。本実施形態においては、マーカー2の全体がカメラ3の撮像範囲に含まれない場合は、列車1の停止位置と目標停止位置との誤差を撮像画像から求めることができない。このため、マーカー2の全体がカメラ3の撮像範囲に含まれる誤差の上限を、算出可能な誤差の最大値とする。本実施形態では、算出可能な誤差の最大値を“Xcm”とする。   Moreover, the maximum value of the errors that can be calculated is the maximum value of the errors between the stop position of the train 1 and the target stop position that can be calculated from the captured image by the error calculation device 10 of the present embodiment. In the present embodiment, when the entire marker 2 is not included in the imaging range of the camera 3, the error between the stop position of the train 1 and the target stop position can not be determined from the captured image. For this reason, the upper limit of the error in which the whole of the marker 2 is included in the imaging range of the camera 3 is set as the maximum value of the computable errors. In this embodiment, the maximum value of errors that can be calculated is “X cm”.

受信部101は、制御装置11から列車1の運行に関する情報を取得する。より詳細には、受信部101は、列車1の次の停車駅を示す情報を、制御装置11から受信する。また、受信部101は、列車1が停止したことを示す停止信号を、制御装置11から受信する。   The receiving unit 101 acquires information on the operation of the train 1 from the control device 11. More specifically, the receiving unit 101 receives, from the control device 11, information indicating the next stop station of the train 1. The receiving unit 101 also receives a stop signal indicating that the train 1 has stopped from the control device 11.

取得部102は、カメラ3から撮像画像を取得する。より詳細には、取得部102は、受信部101が制御装置11から受信した次の停車駅を示す情報に基づいて、次の停車駅のホーム4の方向を、記憶部150のホーム位置情報から検索する。そして、取得部102は、次の停車駅のホーム4側のカメラ3の撮像画像を取得する。取得部102は、例えば、一定時間ごとにカメラ3から撮像画像を繰り返し取得するものとする。   The acquisition unit 102 acquires a captured image from the camera 3. More specifically, based on the information indicating the next stopping station received by the receiving unit 101 from the control device 11, the acquiring unit 102 determines the direction of the home 4 of the next stopping station from the home position information of the storage unit 150. Search for. Then, the acquisition unit 102 acquires a captured image of the camera 3 on the home 4 side of the next stop station. The acquiring unit 102 repeatedly acquires, for example, a captured image from the camera 3 at predetermined time intervals.

特定部103は、受信部101が停止信号を受信した場合に、取得部102が取得した撮像画像からマーカー2を特定する。   The identifying unit 103 identifies the marker 2 from the captured image acquired by the acquiring unit 102 when the receiving unit 101 receives the stop signal.

より詳細には、特定部103は、撮像画像90から、マーカー2を構成する複数の円を抽出する。複数の円を抽出する手法として、公知のハフ変換(Hough transform)等の画像処理の手法を採用しても良い。図3は、本実施形態にかかるマーカー2が撮像された撮像画像90の一例を示す図である。本実施形態のマーカー2を構成する12個の円21a〜21lは、縦に4列、横に3行の格子状に配列される。また、撮像画像90の縦方向(上下方向)の位置はY座標、横方向(幅方向、左右方向)の位置はX座標で示される。以下、円21a〜21lを特に区別しない場合は、円21という。   More specifically, the specifying unit 103 extracts a plurality of circles forming the marker 2 from the captured image 90. As a method of extracting a plurality of circles, a known image processing method such as Hough transform may be adopted. FIG. 3 is a view showing an example of a captured image 90 obtained by capturing the marker 2 according to the present embodiment. Twelve circles 21a to 21l constituting the marker 2 of the present embodiment are arranged in a grid of four columns vertically and three rows horizontally. Further, the position in the vertical direction (vertical direction) of the captured image 90 is indicated by Y coordinates, and the position in the horizontal direction (width direction, horizontal direction) is indicated by X coordinates. Hereinafter, when the circles 21a to 21l are not particularly distinguished, they are referred to as a circle 21.

また、特定部103が複数の円21を抽出する際に、マーカー2とは無関係の円形状の汚れや模様等が抽出される場合がある。例えば、図3では、円Pはマーカー2とは無関係の円形状の模様である。特定部103は、抽出された複数の円21を列ごとおよび行ごとにグループ化し、各列または各行のいずれにも含まれない円Pを除外する。より詳細には、特定部103は、撮像画像90におけるX座標の差異が第1の閾値以下である円21は同じ列に含まれると判断し、Y座標の差異が第2の閾値以下である円21は同じ行に含まれると判断する。特定部103は、円Pを除外した上で、各列および各行に含まれる円21の数が、マーカー2の円21の数“12”と一致する場合に、各列および各行に含まれる円21をマーカー2として特定する。特定部103は、マーカー2として特定した円21のX座標を、算出部104に送出する。   In addition, when the identifying unit 103 extracts a plurality of circles 21, circular stains, patterns, and the like that are unrelated to the marker 2 may be extracted. For example, in FIG. 3, the circle P is a circular pattern unrelated to the marker 2. The identifying unit 103 groups the extracted plurality of circles 21 into columns and rows, and excludes a circle P that is not included in any column or row. More specifically, the identifying unit 103 determines that the circles 21 whose difference in X coordinates in the captured image 90 is less than or equal to the first threshold are included in the same column, and the difference in Y coordinates is less than or equal to the second threshold. It is determined that the circle 21 is included in the same line. The identifying unit 103 excludes the circle P, and if the number of the circles 21 included in each column and each row matches the number “12” of the circles 21 of the marker 2, the circles included in each column and each row Identify 21 as marker 2. The identifying unit 103 sends the X coordinate of the circle 21 identified as the marker 2 to the calculating unit 104.

第1の閾値と第2の閾値は、予め定められる。本実施形態では、第1の閾値と第2の閾値は同じ値とするが、異なる値であっても良い。同じ列に含まれる円21のX座標およびまたは同じ行に含まれる円21のY座標は略同じ値となるが、撮像条件等によって差異が生じる場合がある。このような差異を許容するために、特定部103は、第1の閾値と第2の閾値とを用いる。また、マーカー2の円21の数は、本実施形態における予め定められた所定の数の一例である。   The first threshold and the second threshold are predetermined. In the present embodiment, the first threshold and the second threshold are the same value, but may be different values. Although the X coordinate of the circle 21 included in the same column and / or the Y coordinate of the circle 21 included in the same row have substantially the same value, differences may occur depending on imaging conditions and the like. In order to allow such difference, the identifying unit 103 uses a first threshold and a second threshold. Further, the number of circles 21 of the marker 2 is an example of a predetermined predetermined number in the present embodiment.

また、特定部103は、円Pを除外した上で、抽出した円21の個数が、マーカー2の円21の数と一致しない場合は、撮像画像90にマーカー2が含まれないと判断する。   Further, after excluding the circle P, when the number of extracted circles 21 does not match the number of circles 21 of the marker 2, the identifying unit 103 determines that the captured image 90 does not include the marker 2.

図2に戻り、算出部104は、特定部103から撮像画像90から特定したマーカー2の幅方向の中心(マーカー2内の所定部位の撮像画像90における位置)と、基準位置との差分を算出する。具体的には、算出部104は、マーカー2の幅方向の中心のX座標から、記憶部150に保存された基準位置のX座標を減算して、差分を求める。当該差分は、例えば、撮像画像90におけるピクセル数で算出される。そして、算出部104は、当該差分に基づいて、列車1の停止位置と目標停止位置との誤差を算出する。   Returning to FIG. 2, the calculating unit 104 calculates the difference between the center in the width direction of the marker 2 identified from the captured image 90 from the identifying unit 103 (the position in the captured image 90 of a predetermined part in the marker 2) and the reference position. Do. Specifically, the calculation unit 104 subtracts the X coordinate of the reference position stored in the storage unit 150 from the X coordinate of the center in the width direction of the marker 2 to obtain a difference. The difference is calculated, for example, by the number of pixels in the captured image 90. Then, the calculation unit 104 calculates an error between the stop position of the train 1 and the target stop position based on the difference.

また、算出部104は、記憶部150に記憶されたマーカー長を、撮像画像90におけるマーカー2の幅方向の長さのピクセル数で除算することによって撮像画像90の1ピクセルあたりの実空間における長さを算出する。以下、撮像画像90の1ピクセルあたりの実空間における長さを変換パラメータという。   In addition, the calculation unit 104 divides the marker length stored in the storage unit 150 by the number of pixels in the width direction of the marker 2 in the captured image 90 to obtain the length in real space per pixel of the captured image 90. Calculate the Hereinafter, the length in real space per pixel of the captured image 90 is referred to as a conversion parameter.

算出部104は、算出した差分を、実空間における長さに変換することによって、列車1の停止位置と目標停止位置との誤差を算出する。より詳細には、算出部104は、算出した差分のピクセル数に変換パラメータを乗算することによって、算出した差分を実空間における長さに変換する。なお、撮像画像90上の差分を変換する手法は、これに限定されるものではない。   The calculation unit 104 calculates an error between the stop position of the train 1 and the target stop position by converting the calculated difference into a length in the real space. More specifically, the calculation unit 104 converts the calculated difference into a length in the real space by multiplying the calculated number of pixels of the difference by the conversion parameter. In addition, the method of converting the difference on the captured image 90 is not limited to this.

送信部105は、算出部104が算出した列車1の停止位置と目標停止位置との誤差を制御装置11に送信する。また、送信部105は、特定部103が撮像画像90にマーカー2が含まれないと判断した場合は、列車1の停止位置と目標停止位置との誤差が算出可能な誤差の最大値“Xcm”よりも大きいことを、誤差の算出結果として制御装置11に送信する。   The transmission unit 105 transmits the error between the stop position of the train 1 calculated by the calculation unit 104 and the target stop position to the control device 11. In addition, when the identifying unit 103 determines that the marker 2 is not included in the captured image 90, the transmitting unit 105 determines that the error between the stop position of the train 1 and the target stop position can be calculated as the maximum value “X cm” of the error. The larger value is transmitted to the control device 11 as the calculation result of the error.

次に、以上のように構成された誤差算出装置10で実行される誤差算出処理について説明する。図4は、本実施形態にかかる誤差算出処理の流れの一例を示すフローチャートである。   Next, an error calculation process performed by the error calculation device 10 configured as described above will be described. FIG. 4 is a flowchart showing an example of the flow of the error calculation process according to the present embodiment.

受信部101は、列車1の次の停車駅を示す情報を、制御装置11から受信する(S1)。そして、取得部102は、次の停車駅におけるホーム4の方向を、記憶部150のホーム位置情報から検索する(S2)。   The receiving unit 101 receives, from the control device 11, information indicating the next stop station of the train 1 (S1). Then, the acquisition unit 102 searches for the direction of the home 4 at the next stop station from the home position information of the storage unit 150 (S2).

取得部102は、列車1に設置されたカメラ3のうち、次の停車駅のホーム4側のカメラ3から撮像画像90を取得する(S3)。   The acquisition unit 102 acquires a captured image 90 from the camera 3 on the home 4 side of the next stop station among the cameras 3 installed in the train 1 (S3).

受信部101は、制御装置11から停止信号を受信したか否かを判断する(S4)。受信部101は、停止信号を受信した場合に、停止信号を受信したことを特定部103に通知する。特定部103は、受信部101が停止信号を受信した場合に(S4“Yes”)、マーカー特定処理を開始する(S5)。S5のマーカー特定処理の詳細については、図5で後述する。   The receiving unit 101 determines whether a stop signal has been received from the control device 11 (S4). When the receiving unit 101 receives the stop signal, the receiving unit 101 notifies the identifying unit 103 that the stop signal has been received. When the receiving unit 101 receives the stop signal (S4 “Yes”), the identifying unit 103 starts the marker identifying process (S5). Details of the marker identification process of S5 will be described later with reference to FIG.

また、受信部101が停止信号を受信していない場合は(S4“No”)、S3およびS4の処理が繰り返される。   When the reception unit 101 has not received the stop signal (S4 “No”), the processes of S3 and S4 are repeated.

S5のマーカー特定処理で、特定部103が撮像画像90からマーカー2を特定した場合(S6“Yes”)、算出部104は、特定部103から、図3に示す撮像画像90における円21a〜21lのX座標を取得する。算出部104は、マーカー2の左から1列目の円21a,21e,21iのX座標の平均値“x1”を、マーカー2の最小X座標として算出する。また、算出部104は、マーカー2の左から4列目の円21d,21h,21lのX座標の平均値“x2”を、マーカー2の最大X座標として算出する。算出部104は、マーカー2の最小X座標“x1”と最大X座標と“x2”との中間地点のX座標を算出することによって、マーカー2の幅方向の中心のX座標“x3”を求める。   When the identifying unit 103 identifies the marker 2 from the captured image 90 in the marker identifying process of S5 (S6 “Yes”), the calculating unit 104 causes the identifying unit 103 to circle 21a to 21l in the captured image 90 illustrated in FIG. Get X coordinate of. The calculation unit 104 calculates the average value “x1” of the X coordinates of the circles 21a, 21e and 21i in the first row from the left of the marker 2 as the minimum X coordinates of the marker 2. In addition, the calculation unit 104 calculates the average value “x2” of the X coordinates of the circles 21 d, 21 h, 21 l in the fourth row from the left of the marker 2 as the maximum X coordinates of the marker 2. The calculation unit 104 calculates the X coordinate of the center in the width direction of the marker 2 by calculating the X coordinate of the middle point between the minimum X coordinate “x1” of the marker 2 and the maximum X coordinate and “x2”. .

また、図3に示す例では、基準位置のX座標は“x4”である。算出部104は、X座標“x4”からX座標“x3”を減算することによって、撮像画像90におけるマーカー2の幅方向の中心と、基準位置との差分D1を算出する(S7)。列車1が目標停止位置で停止した場合には、差分D1は“0”となる。また、図3に示す撮像画像90では、列車1が目標停止位置を通過してから停止した場合は差分D1は正の数になり、列車1が目標停止位置の手前で停止した場合は差分D1は負の数になる。   Further, in the example shown in FIG. 3, the X coordinate of the reference position is "x4". The calculation unit 104 calculates the difference D1 between the center in the width direction of the marker 2 in the captured image 90 and the reference position by subtracting the X coordinate "x3" from the X coordinate "x4" (S7). When the train 1 stops at the target stop position, the difference D1 is "0". Further, in the captured image 90 shown in FIG. 3, when the train 1 stops after passing the target stop position, the difference D1 becomes a positive number, and when the train 1 stops before the target stop position, the difference D1 Is a negative number.

そして、算出部104は、撮像画像90におけるマーカー2の最大X座標からマーカー2の最小X座標を減算して、撮像画像90におけるマーカー2の幅方向の長さを求める。算出部104は、記憶部150に記憶されたマーカー長と、撮像画像90におけるマーカー2の幅方向の長さから変換パラメータを算出する。算出部104は、算出した差分D1に変換パラメータを乗算して実空間における長さに変換して、列車1の停止位置と目標停止位置との誤差を算出する(S8)。   Then, the calculation unit 104 subtracts the minimum X coordinate of the marker 2 from the maximum X coordinate of the marker 2 in the captured image 90 to obtain the length in the width direction of the marker 2 in the captured image 90. The calculation unit 104 calculates a conversion parameter from the marker length stored in the storage unit 150 and the length in the width direction of the marker 2 in the captured image 90. The calculation unit 104 multiplies the calculated difference D1 by the conversion parameter to convert it into a length in the real space, and calculates an error between the stop position of the train 1 and the target stop position (S8).

送信部105は、算出部104が算出した列車1の停止位置と目標停止位置との誤差を、制御装置11に送信する(S9)。   The transmission unit 105 transmits the error between the stop position of the train 1 calculated by the calculation unit 104 and the target stop position to the control device 11 (S9).

また、S5のマーカー特定処理で、特定部103が撮像画像90からマーカー2を特定しなかった場合(S6“No”)、送信部105は、列車1の停止位置と目標停止位置との誤差が算出可能な誤差の最大値“Xcm”よりも大きいことを、制御装置11に送信する(S10)。   Moreover, when the specification part 103 does not specify the marker 2 from the captured image 90 in the marker specification process of S5 (S6 "No"), the transmission part 105 is the difference between the stop position of the train 1 and the target stop position. It is transmitted to the control device 11 that it is larger than the maximum value “X cm” of the computable error (S10).

次に、S5のマーカー特定処理の詳細について説明する。図5は、本実施形態にかかるマーカー特定処理の流れの一例を示すフローチャートである。   Next, the details of the marker identification process of S5 will be described. FIG. 5 is a flow chart showing an example of the flow of the marker identification process according to the present embodiment.

特定部103は、公知の画像処理の手法によって、撮像画像90から円21を抽出する(S101)。また、この際、円21以外の円Pが抽出される場合がある。   The identifying unit 103 extracts the circle 21 from the captured image 90 by a known image processing method (S101). At this time, a circle P other than the circle 21 may be extracted.

特定部103は、抽出した円21および円Pを、列ごとにグループ化する(S102)。グループ化の際、特定部103は、X座標の差異が第1の閾値以下である円21は同じ列に含まれると判断する。図3に示すマーカー2の例では、特定部103は、円21a,21e,21iが1列目、円21b,21f,21jが2列目、円21c,21g,21kが3列目、円21d,21h,21lが4列目に含まれると判断する。   The identifying unit 103 groups the extracted circle 21 and circle P into columns (S102). At the time of grouping, the identifying unit 103 determines that the circles 21 whose difference in X coordinates is equal to or less than the first threshold are included in the same column. In the example of the marker 2 shown in FIG. 3, the identifying unit 103 determines that the circles 21 a, 21 e, 21 i are in the first row, the circles 21 b, 21 f, 21 j are in the second row, the circles 21 c, 21 g, 21 k are in the third row, the circle 21 d , 21h and 21l are determined to be included in the fourth column.

そして、特定部103は、いずれの列にも含まれない円Pの有無を判断する(S103)。円PのX座標は、いずれの列に含まれる円21のX座標と比較しても、互いのX座標の差異が第1の閾値以下にならないため、4つの列のいずれにも含まれない。   Then, the identifying unit 103 determines the presence or absence of a circle P which is not included in any row (S103). The X coordinate of the circle P is not included in any of the four columns because the difference between the X coordinates of each other does not fall below the first threshold when compared with the X coordinate of the circle 21 included in any column .

抽出した円21および円Pの中に、いずれの列にも含まれない円Pがある場合(S103“Yes”)、特定部103は、抽出した円21および円Pから、いずれの列にも含まれない円Pを除外し(S104)、S105の処理に進む。   When there is a circle P which is not included in any column among the extracted circles 21 and circles P (S103 “Yes”), the identifying unit 103 determines from the extracted circle 21 and circle P in any column. The circle P not included is excluded (S104), and the process proceeds to the process of S105.

また、抽出した円21および円Pの中に、いずれの列にも含まれない円Pがない場合(S103“No”)、特定部103は、S104の除外の処理を行わずに、S105の処理に進む。   In addition, when there is no circle P which is not included in any column among the extracted circle 21 and circle P (S103 “No”), the specifying unit 103 does not perform the exclusion process of S104, and the process of S105 is performed. Proceed to processing.

次に、特定部103は、抽出した円21を、行ごとにグループ化する(S105)。グループ化の際、特定部103は、Y座標の差異が第2の閾値以下である円21は同じ行に含まれると判断する。図3に示すマーカー2の例では、特定部103は、円21a〜21dが1行目、円21e〜21hが2行目、円21i〜21lが3行目に含まれると判断する。   Next, the identifying unit 103 groups the extracted circles 21 into rows (S105). At the time of grouping, the identifying unit 103 determines that the circles 21 whose difference in Y coordinate is equal to or less than the second threshold are included in the same row. In the example of the marker 2 shown in FIG. 3, the identifying unit 103 determines that the circles 21 a to 21 d are included in the first line, the circles 21 e to 21 h are included in the second line, and the circles 21 i to 21 l are included in the third line.

そして、特定部103は、いずれの行にも含まれない円21の有無を判断する(S106)。抽出した円21の中に、いずれの行にも含まれない円21がある場合(S106“Yes”)、特定部103は、いずれの行にも含まれない円21を除外して(S107)、S108の処理に進む。このように、特定部103は、列と行の両方を用いて円Pを除外する処理を行うので、より高精度に円Pを除外することができる。   Then, the identifying unit 103 determines the presence or absence of the circle 21 not included in any row (S106). When there is a circle 21 not included in any row among the extracted circles 21 (S106 “Yes”), the specifying unit 103 excludes the circle 21 not included in any row (S107) , And proceeds to the process of S108. As described above, since the specifying unit 103 performs the process of excluding the circle P using both the column and the row, the circle P can be excluded with higher accuracy.

抽出した円21の中に、いずれの行にも含まれない円21がない場合(S106“No”)、特定部103は、S107の除外の処理を行わずに、S108の処理に進む。   When there is no circle 21 not included in any row among the extracted circles 21 (S106 “No”), the identifying unit 103 proceeds to the process of S108 without performing the exclusion process of S107.

次に、特定部103は、撮像画像90から抽出した円21および円Pのうち、円Pを除外した後に残った円21の個数が、“12”であるか否かを判断する(S108)。残った円21の個数が、“12”である場合(S108“Yes”)、特定部103は、残った円21は、マーカー2であると特定する(S109)。   Next, the specifying unit 103 determines whether the number of the circles 21 remaining after the circle P is excluded among the circles 21 and the circles P extracted from the captured image 90 is “12” (S108). . When the number of remaining circles 21 is “12” (S108 “Yes”), the identifying unit 103 identifies the remaining circles 21 as a marker 2 (S109).

円Pを除外した後に残った円21の個数が、“12”ではない場合(S108“No”)、特定部103は、撮像画像90内にマーカー2は含まれないと判断する(S110)。ここで、当フローチャートの処理は終了し、図4のフローチャートの処理に戻る。   If the number of circles 21 remaining after excluding the circle P is not “12” (S108 “No”), the identifying unit 103 determines that the marker 2 is not included in the captured image 90 (S110). Here, the processing of this flowchart ends, and the processing returns to the processing of the flowchart of FIG. 4.

このように、本実施形態の誤差算出装置10は、撮像画像90からマーカー2を特定し、特定されたマーカー2内の所定部位の撮像画像90における位置と、撮像画像90上の基準位置と、の差分D1に基づいて、列車1の停止位置と目標停止位置との誤差を算出する。このため、本実施形態の誤差算出装置10によれば、列車1が駅に停車した際の実際の停止位置と、予め定められた目標停止位置との誤差を高精度に把握することができる。   As described above, the error calculation device 10 of the present embodiment identifies the marker 2 from the captured image 90, and the position in the captured image 90 of the predetermined part in the identified marker 2, the reference position on the captured image 90, The difference between the stop position of the train 1 and the target stop position is calculated on the basis of the difference D1. For this reason, according to the error calculation device 10 of the present embodiment, it is possible to grasp with high accuracy the error between the actual stop position when the train 1 stops at the station and the predetermined target stop position.

さらに、本実施形態の誤差算出装置10は、所定部位の撮像画像90における位置と基準位置との差分D1を、実空間における長さに変換することによって、列車1の停止位置と目標停止位置との誤差を算出する。このため、本実施形態の誤差算出装置10によれば、列車1の停止位置と、目標停止位置との誤差を、原寸大の数値で高精度に把握することができる。   Furthermore, the error calculation device 10 of the present embodiment converts the difference D1 between the position in the captured image 90 of the predetermined part and the reference position into the length in the real space, thereby stopping the train 1 and the target stop position. Calculate the error of For this reason, according to the error calculation device 10 of the present embodiment, the error between the stop position of the train 1 and the target stop position can be grasped with high precision with a full size numerical value.

さらに、本実施形態の誤差算出装置10は、撮像画像90から複数の円21を抽出し、抽出された円21の撮像画像90におけるX座標の差異とY座標の差異から、各円21が含まれる行と列とを判断し、各列および各行に含まれる複数の円21の数が、予め定められた所定の数と一致する場合に、各列および各行に含まれる複数の円21をマーカー2と特定する。このため、本実施形態の誤差算出装置10によれば、駅のホーム4の汚れや模様等による影響を低減して、列車1の停止位置と目標停止位置との誤差を、高精度に把握することができる。   Furthermore, the error calculation device 10 according to the present embodiment extracts a plurality of circles 21 from the captured image 90, and each circle 21 is included from the difference in X coordinates and the difference in Y coordinates in the captured image 90 of the extracted circles 21. To determine which rows and columns are to be used, and when the number of circles 21 included in each column and each row matches a predetermined number determined in advance, the circles 21 included in each column and each row are marked as markers Identify as 2. For this reason, according to the error calculation device 10 of the present embodiment, the influence of dirt, patterns and the like on the station platform 4 is reduced to accurately grasp the error between the stop position of the train 1 and the target stop position. be able to.

また、本実施形態の誤差算出装置10は、制御装置11から停止信号を受信した場合に、撮像画像90からマーカー2を特定するため、列車1が停止した場合にのみ、列車1の停止位置と目標停止位置との誤差を算出する処理を行う。このため、本実施形態の誤差算出装置10によれば、処理負荷を低減することができる。   In addition, when the error calculation device 10 according to the present embodiment receives the stop signal from the control device 11, the marker 2 is identified from the captured image 90, so the stop position of the train 1 is detected only when the train 1 stops. A process of calculating an error from the target stop position is performed. Therefore, according to the error calculation device 10 of the present embodiment, the processing load can be reduced.

また、本実施形態の誤差算出装置10は、列車1の停止位置と目標停止位置との誤差を制御装置11に送信することで、制御装置11の自動運転制御に対するフィードバックをする。このため、本実施形態の誤差算出装置10によれば、制御装置11による自動運転制御の精度の向上に寄与することができる。   In addition, the error calculation device 10 of the present embodiment transmits an error between the stop position of the train 1 and the target stop position to the control device 11 to provide feedback for the automatic operation control of the control device 11. Therefore, according to the error calculation device 10 of the present embodiment, it is possible to contribute to the improvement of the accuracy of the automatic driving control by the control device 11.

なお、本実施形態では、カメラ3が列車1の先頭車両に設置されているが、マーカー2を撮像可能な位置に設置されれば良く、設置位置はこれに限定されるものではない。また、マーカー2の設置位置は、列車1の目標停止位置付近に限定されるものではなく、停止した列車1の車長の範囲内であれば、ホーム4の後方や、中央付近に設置されても良い。   In the present embodiment, the camera 3 is installed at the leading vehicle of the train 1, but it may be installed at a position where the marker 2 can be imaged, and the installation position is not limited to this. In addition, the installation position of the marker 2 is not limited to the vicinity of the target stop position of the train 1 and is installed behind the center 4 or near the center of the home 4 within the range of the length of the stopped train 1 Also good.

また、本実施形態の誤差算出装置10の取得部102は、列車1が停止しているか否かに関わらずカメラ3から撮像画像90を取得しているが、撮像画像90を取得するタイミングはこれに限定されるものではない。例えば、取得部102は、受信部101が停止信号を受信した場合に、カメラ3から撮像画像90を取得する構成を採用しても良い。   Moreover, although the acquisition part 102 of the error calculation apparatus 10 of this embodiment is acquiring the captured image 90 from the camera 3 irrespective of whether the train 1 has stopped, the timing which acquires the captured image 90 is this. It is not limited to For example, the acquisition unit 102 may adopt a configuration for acquiring the captured image 90 from the camera 3 when the reception unit 101 receives the stop signal.

また、本実施形態の誤差算出装置10は、撮像画像90にマーカー2が含まれないと判断した場合、誤差が算出可能な誤差の最大値“Xcm”よりも大きいことを制御装置11に送信していたが、送信内容はこれに限定されるものではない。例えば、誤差算出装置10は、単にマーカー2が特定されなかったことを送信しても良い。   Further, when it is determined that the marker 2 is not included in the captured image 90, the error calculation device 10 of the present embodiment transmits to the control device 11 that the error is larger than the maximum value “X cm” of the errors that can be calculated. However, the transmission content is not limited to this. For example, the error calculation device 10 may simply transmit that the marker 2 has not been identified.

また、特定部103は、全ての円21のX座標ではなく、円21の最小X座標と最大X座標のみを算出部104に送出しても良い。   Further, the identifying unit 103 may send only the minimum X coordinate and the maximum X coordinate of the circle 21 to the calculating unit 104 instead of the X coordinates of all the circles 21.

また、本実施形態の誤差算出装置10は、制御装置11から停止信号を受信する構成を採用していたが、列車1の停止を判断する手法はこれに限定されるものではない。例えば、誤差算出装置10は、列車1の車輪の回転と連動する不図示のタコジェネレータの出力値から列車1の速度を検出することによって、列車1が停止したことを判断しても良い。   Moreover, although the error calculation apparatus 10 of this embodiment employ | adopted the structure which receives a stop signal from the control apparatus 11, the method of judging the stop of the train 1 is not limited to this. For example, the error calculation device 10 may determine that the train 1 has stopped by detecting the speed of the train 1 from the output value of a tacho generator (not shown) interlocked with the rotation of the wheels of the train 1.

また、本実施形態の誤差算出装置10の記憶部150が記憶する各情報は、制御装置11や、他の外部システム等から送信される構成を採用しても良い。   Further, each piece of information stored in the storage unit 150 of the error calculation device 10 of the present embodiment may adopt a configuration in which it is transmitted from the control device 11 or another external system or the like.

また、本実施形態では、制御装置11が列車1の運転を制御するとしたが、制御装置11は、TASCのように、運転の一部を支援する装置であっても良い。また、列車1は運転士によって手動で運転される構成を採用しても良い。また、当該構成を採用する場合、列車1の次の停車駅を示す情報は、運転士によって手動で入力されても良いし、他の外部システムから誤差算出装置10に送信されるものとしても良い。   Further, although the control device 11 controls the operation of the train 1 in the present embodiment, the control device 11 may be a device that supports a part of the operation, such as the TASC. Moreover, the train 1 may employ | adopt the structure manually operated by the driver. Moreover, when the said structure is employ | adopted, the information which shows the next stop station of the train 1 may be manually input by the driver, and it is good also as what is transmitted to the error calculation apparatus 10 from another external system. .

(第2の実施形態)
第1の実施形態では、マーカー2は、複数の列と複数の行とが交差するように配列された複数の円であった。本実施形態では、マーカー2を列車1の路線ごとに異なる色をした矩形状とすることで、同一駅に目標停止位置の異なる複数の路線が乗り入れしている場合でも、列車1の停止位置と目標停止位置との誤差を高精度に算出する。
Second Embodiment
In the first embodiment, the marker 2 is a plurality of circles arranged such that a plurality of columns and a plurality of rows intersect. In this embodiment, the marker 2 has a rectangular shape with different colors for each route of the train 1 so that the stop position of the train 1 can be obtained even when a plurality of routes with different target stop positions are installed in the same station. An error with the target stop position is calculated with high accuracy.

本実施形態の誤差算出システムSの全体構成は、第1の実施形態と同様である。また、制御装置11および誤差算出装置10のハードウェア構成は、第1の実施形態と同様である。   The overall configuration of the error calculation system S of this embodiment is the same as that of the first embodiment. The hardware configuration of the control device 11 and the error calculation device 10 is the same as that of the first embodiment.

本実施形態の誤差算出装置10は、第1の実施形態と同様に、受信部101と、取得部102と、特定部103と、算出部104と、送信部105と、記憶部150とを備える。受信部101と、取得部102と、送信部105とは、第1の実施形態と同様の機能を備える。   The error calculation device 10 according to the present embodiment includes the receiving unit 101, the acquiring unit 102, the identifying unit 103, the calculating unit 104, the transmitting unit 105, and the storage unit 150, as in the first embodiment. . The receiving unit 101, the acquiring unit 102, and the transmitting unit 105 have the same functions as in the first embodiment.

本実施形態の記憶部150は、ホーム位置情報と、マーカー長と、基準位置のX座標と、算出可能な誤差の最大値と、抽出対象の色とを記憶する。ホーム位置情報と、基準位置のX座標と、算出可能な誤差の最大値とは、第1の実施形態と同様である。   The storage unit 150 of the present embodiment stores home position information, a marker length, the X coordinate of the reference position, the maximum value of the computable errors, and the color to be extracted. The home position information, the X coordinate of the reference position, and the maximum value of errors that can be calculated are the same as in the first embodiment.

本実施形態のマーカー長は、矩形状のマーカー2の左端から右端までの長さである。   The marker length in the present embodiment is the length from the left end to the right end of the rectangular marker 2.

抽出対象の色は、誤差算出装置10が搭載された列車1が走行する路線において、停止位置の誤差の算出に用いられるマーカー2の色である。抽出対象の色は、本実施形態における特定の色の一例である。   The color to be extracted is the color of the marker 2 used to calculate the error of the stop position on the route on which the train 1 on which the error calculation device 10 is mounted travels. The color to be extracted is an example of a specific color in the present embodiment.

本実施形態の特定部103は、第1の実施形態の機能を備えた上で、撮像画像から抽出対象の色の画像範囲を抽出することによって、自装置(誤差算出装置10)が搭載された列車1が走行する路線のマーカー2を特定する。   The specifying unit 103 according to the present embodiment includes the function according to the first embodiment, and extracts the image range of the color to be extracted from the captured image, whereby the own device (error calculation device 10) is mounted. The marker 2 of the route on which the train 1 travels is identified.

図6は、本実施形態にかかるマーカー2を特定する手法の一例を示す図である。図6に示すように、撮像画像2090には、マーカー2a〜2cが表されている。マーカー2a〜2cは、矩形状で、かつ列車1の路線ごとに異なる色を有している。マーカー2a〜2cの色は特に限定しないが、ホーム4上に存在する可能性が高い黒色、灰色、黄色(点字ブロックの色)等は使用されないものとしても良い。   FIG. 6 is a diagram showing an example of a method of identifying the marker 2 according to the present embodiment. As shown in FIG. 6, markers 2 a to 2 c are shown in the captured image 2090. The markers 2 a to 2 c are rectangular and have different colors for each train 1 route. The color of the markers 2a to 2c is not particularly limited, but black, gray, yellow (color of the Braille block) and the like which are likely to be present on the home 4 may not be used.

図6の例では、記憶部150に記憶された抽出対象の色と一致する色は、マーカー2bの色であるとする。特定部103は、画像処理の手法を用いて撮像画像2090から抽出対象の色の画像範囲を抽出することによって、マーカー2bを特定する。   In the example of FIG. 6, it is assumed that the color matching the color to be extracted stored in the storage unit 150 is the color of the marker 2b. The identifying unit 103 identifies the marker 2 b by extracting an image range of the color to be extracted from the captured image 2090 using an image processing method.

より詳細には、特定部103は、撮像画像2090から抽出対象の色と一致する画像範囲を抽出する。特定部103は、画像範囲の抽出に使用する色の識別の手法として、RGB色空間を用いても良いし、HSV色空間を用いても良い。そして、特定部103は、抽出対象の色以外の画像範囲を黒色に変換した画像91を生成する。本実施形態では、より高精度にマーカー2bの画像範囲を特定するために、特定部103は、さらに公知の2値化やノイズ除去等の画像処理を行う。そして、特定部103は、画像処理後の画像93から、矩形状のマーカー2bを特定する。   More specifically, the specifying unit 103 extracts, from the captured image 2090, an image range that matches the color to be extracted. The identifying unit 103 may use an RGB color space or an HSV color space as a method of identifying colors used to extract an image range. Then, the specifying unit 103 generates an image 91 in which the image range other than the color to be extracted is converted to black. In the present embodiment, in order to specify the image range of the marker 2b more accurately, the specifying unit 103 further performs known image processing such as binarization and noise removal. Then, the specifying unit 103 specifies the rectangular marker 2b from the image 93 after image processing.

特定部103は、特定したマーカー2bの最小X座標と最大X座標とを算出部104に送出する。   The identifying unit 103 sends the minimum X coordinate and the maximum X coordinate of the identified marker 2 b to the calculator 104.

本実施形態の算出部104は、第1の実施形態と同様の機能を備えた上で、特定部103から取得したマーカー2bの最小X座標“x1”と最大X座標“x2”とから、マーカー2bの幅方向の中心のX座標“x3”を求める。そして、算出部104は、記憶部150に記憶された基準位置のX座標“x4”と、X座標“x3”との差分D1を実空間における長さに変換することによって、列車1の停止位置と目標停止位置との誤差を算出する。   The calculation unit 104 of the present embodiment has the same function as that of the first embodiment, and then, based on the minimum X coordinate "x1" and the maximum X coordinate "x2" of the marker 2b acquired from the identification unit 103, The X coordinate "x3" of the center in the width direction of 2b is determined. Then, the calculation unit 104 converts the difference D1 between the X coordinate “x4” of the reference position stored in the storage unit 150 and the X coordinate “x3” into the length in the real space, whereby the stop position of the train 1 The error between the and the target stop position is calculated.

次に、以上のように構成された本実施形態の誤差算出装置10で実行される処理について説明する。本実施形態の誤差算出処理の流れは、図4で説明した第1の実施形態の処理の流れと同様であるが、マーカー特定処理の流れは、第1の実施形態と異なる。   Next, processing executed by the error calculation device 10 of the present embodiment configured as described above will be described. The flow of the error calculation process of this embodiment is the same as the flow of the process of the first embodiment described with reference to FIG. 4, but the flow of the marker identification process is different from that of the first embodiment.

図7は、本実施形態にかかるマーカー特定処理の流れの一例を示すフローチャートである。   FIG. 7 is a flowchart showing an example of the flow of the marker identification process according to the present embodiment.

特定部103は、公知の画像処理の手法によって、撮像画像2090から、記憶部150に記憶された抽出対象の色の画像範囲を抽出する(S201)。   The identifying unit 103 extracts the image range of the extraction target color stored in the storage unit 150 from the captured image 2090 by a known image processing method (S201).

S201の画像処理後の画像91に対して、特定部103は抽出精度を高めるための画像処理を行う。例えば、図6に示す画像91では、抽出対象の色ではないマーカー2cの一部が混入している。特定部103は、画像91に対して、特定閾値による2値化や大津の2値化(判別分析法)等の公知技術を用いて、2値化処理を行う(S202)。そして、特定部103は、2値化処理後の画像92に対して、公知の膨張処理や収縮処理等の技術を用いて、ノイズ除去を行う(S203)。   The identifying unit 103 performs image processing for enhancing the extraction accuracy on the image 91 after the image processing of S201. For example, in the image 91 shown in FIG. 6, a part of the marker 2c which is not the color of the extraction target is mixed. The identifying unit 103 performs binarization processing on the image 91 using a known technique such as binarization with a specific threshold value or binarization of Otsu (discrimination analysis method) (S202). Then, the specifying unit 103 performs noise removal on the image 92 after the binarization processing using a known technique such as expansion processing and contraction processing (S203).

特定部103は、ノイズ除去の画像処理後の画像93における矩形形状の有無を判断する(S204)。より詳細には、特定部103は、画像93から、白画素(白色の画素)が横に連続して第3の閾値以上存在する画像範囲を検出する。画像93に白画素が横に連続してそれぞれ一定数以上存在する画像範囲が存在する場合、特定部103は、画像処理後の画像93に矩形があると判断する(S204“Yes”)。この場合、特定部103は、画像処理後の画像93から検出した矩形を、マーカー2bと特定する(S205)。第3の閾値は、予め定められているものとする。   The identifying unit 103 determines the presence or absence of a rectangular shape in the image 93 after image processing for noise removal (S204). More specifically, the specifying unit 103 detects, from the image 93, an image range in which white pixels (white pixels) are continuously present in the horizontal direction at a third threshold value or more. When the image 93 has an image range in which a predetermined number or more of white pixels are continuously present in the horizontal direction, the specifying unit 103 determines that the image 93 after the image processing has a rectangle (S204 “Yes”). In this case, the identifying unit 103 identifies the rectangle detected from the image 93 after image processing as the marker 2b (S205). The third threshold is assumed to be predetermined.

また、画像処理後の画像93に白画素が横に連続して第3の閾値以上存在する画像範囲が存在しない場合、特定部103は、画像処理後の画像93に矩形がないと判断する(S204“No”)。この場合、特定部103は、撮像画像2090内にマーカー2bが含まれないと判断する(S206)。ここで、当フローチャートの処理は終了し、誤差算出処理に戻る。   In addition, when there is no image range in which white pixels are continuously present in the horizontal direction and the third threshold or more exists in the image 93 after image processing, the specifying unit 103 determines that the image 93 after image processing does not have a rectangle ( S204 "No"). In this case, the identifying unit 103 determines that the marker 2b is not included in the captured image 2090 (S206). Here, the processing of this flowchart ends and returns to the error calculation processing.

このように、本実施形態の誤差算出装置10は、撮像画像2090から特定の色の画像範囲を抽出することによって、自装置が搭載された列車1が走行する路線の矩形状のマーカー2bを特定する。このため、本実施形態の誤差算出装置10によれば、同一駅に目標停止位置の異なる複数の路線が乗り入れしている場合でも、列車1の停止位置と目標停止位置との誤差を高精度に算出することができる。   As described above, the error calculation device 10 according to the present embodiment extracts the image range of the specific color from the captured image 2090 to specify the rectangular marker 2 b of the route along which the train 1 on which the own device is mounted travels. Do. For this reason, according to the error calculation device 10 of the present embodiment, even when a plurality of routes having different target stop positions get into the same station, the error between the stop position of the train 1 and the target stop position can be made with high accuracy. It can be calculated.

また、本実施形態では、マーカー2が矩形状であるため、誤差算出装置10は、画像処理後の画像93からマーカー2bを容易に特定することができる。   Further, in the present embodiment, since the marker 2 has a rectangular shape, the error calculation device 10 can easily identify the marker 2 b from the image 93 after image processing.

なお、本実施形態では、誤差算出装置10の特定部103は、白画素が横に連続する長さを条件として矩形を検出していたが、白画素が縦に連続する長さをさらに条件として追加しても良い。また、マーカー2として、他の形状を採用しても良い。   In the present embodiment, the identifying unit 103 of the error calculation device 10 detects the rectangle on the condition that the length of the white pixel is continuous in the horizontal direction, but the length of the continuous white pixel is the condition on the other You may add it. In addition, another shape may be adopted as the marker 2.

また、本実施形態では、誤差算出装置10の記憶部150は、自装置が搭載された列車1の路線の抽出対象の色のみを記憶するのではなく、各路線と、各路線の列車1の停止位置の誤差の算出に用いられるマーカー2の色とを対応付けて記憶する構成を採用しても良い。また、抽出対象の色は、制御装置11に保存されて、制御装置11から誤差算出装置10に送信される構成を採用しても良い。   Further, in the present embodiment, the storage unit 150 of the error calculation device 10 does not store only the extraction target color of the route of the train 1 on which the own device is mounted, but the route of the train 1 of each route You may employ | adopt the structure which matches and memorize | stores the color of the marker 2 used for calculation of the difference | error of a stop position. Further, the color to be extracted may be stored in the control device 11 and may be transmitted from the control device 11 to the error calculation device 10.

(変形例1)
上述の第1の実施形態および第2の実施形態では、マーカー2は、駅のホーム4の床に設置されていたが、マーカー2の設置位置はこれに限定されるものではない。
(Modification 1)
In the above-described first and second embodiments, the marker 2 is installed on the floor of the station home 4, but the installation position of the marker 2 is not limited to this.

図8は、本変形例にかかるマーカー2の設置位置の一例を示す図である。図8に示すように、本変形例のマーカー2は、ホーム4の柱41に、線路側(列車1側)を向いて設置される。マーカー2は、柱41に塗料等で記載されても良いし、マーカー2が表示された板やシート等が柱41に貼附されても良い。また、マーカー2は、ホーム4の壁に、線路側を向いて設置されても良い。本変形例では、第1の実施形態と第2の実施形態のいずれのマーカー2を採用しても良い。   FIG. 8 is a view showing an example of the installation position of the marker 2 according to the present modification. As shown in FIG. 8, the marker 2 of the present modification is installed on the pillar 41 of the home 4 so as to face the track side (the train 1 side). The marker 2 may be described with a paint etc. in the pillar 41, and the board, sheet, etc. on which the marker 2 is displayed may be stuck on the pillar 41. The marker 2 may be installed on the wall of the home 4 so as to face the track side. In this modification, any marker 2 of the first embodiment and the second embodiment may be employed.

また、本変形例では、カメラ3は、ホーム4の柱41または壁等に設置されたマーカー2と向き合うように、列車1の車両の上部に横向きの撮像角度で設置される。   Moreover, in this modification, the camera 3 is installed at an upper imaging angle of the sideways of the train 1 so as to face the marker 41 installed on the pillar 41 or the wall of the home 4 or the like.

本変形例のようにマーカー2を設置することで、マーカー2が列車1の乗客等に踏まれたり、雨等によってマーカー2が劣化することを低減することができる。   By installing the marker 2 as in the present modified example, it is possible to reduce that the marker 2 is stepped on by a passenger of the train 1 or that the marker 2 is deteriorated due to rain or the like.

(変形例2)
また、ホームドアが設置された駅においては、マーカー2をホームドアの線路側に設置しても良い。図9は、本変形例にかかるマーカー2の設置位置の一例を示す図である。本変形例のマーカー2は、ホーム4の端に設置されたホームドア42の線路側の側面に、列車1に面して設置される。本変形例では、第1の実施形態と第2の実施形態のいずれのマーカー2を採用しても良い。
(Modification 2)
In the station where the home door is installed, the marker 2 may be installed on the track side of the home door. FIG. 9 is a view showing an example of the installation position of the marker 2 according to the present modification. The marker 2 of this modification is installed on the side of the track side of the home door 42 installed at the end of the home 4 so as to face the train 1. In this modification, any marker 2 of the first embodiment and the second embodiment may be employed.

また、本変形例では、カメラ3は、ホームドア42に設置されたマーカー2と向き合うように、列車1の車両の下部に横向きの撮像角度で設置される。   Moreover, in this modification, the camera 3 is installed at the lower part of the vehicle of the train 1 at a lateral imaging angle so as to face the marker 2 installed on the home door 42.

本変形例のようにマーカー2を設置することで、マーカー2とカメラ3との間が乗客や障害物等によって遮蔽されることを低減することができ、列車1の停止位置と目標停止位置との誤差を、より高精度に把握することができる。   By installing the marker 2 as in the present modification, it is possible to reduce that the space between the marker 2 and the camera 3 is shielded by a passenger, an obstacle or the like, and the stop position and the target stop position of the train 1 The error of can be grasped with higher accuracy.

(変形例3)
また、マーカー2の設置位置は、ホーム4の上に限定されるものではなく、ホーム4の下でも良い。図10は、本変形例にかかるマーカー2の設置位置の一例を示す図である。本変形例のマーカー2は、ホーム4の床下の側面に、列車1に面して設置される。本変形例では、第1の実施形態と第2の実施形態のいずれのマーカー2を採用しても良い。
(Modification 3)
Further, the installation position of the marker 2 is not limited to the top of the home 4 and may be below the home 4. FIG. 10 is a view showing an example of the installation position of the marker 2 according to the present modification. The marker 2 of the present modification is installed on the side of the floor 4 below the floor 4 so as to face the train 1. In this modification, any marker 2 of the first embodiment and the second embodiment may be employed.

また、本変形例では、カメラ3は、ホーム4の床下の側面に設置されたマーカー2と向き合うように、変形例2のカメラ3の設置位置よりもさらに下方に、横向きの撮像角度で設置される。   Further, in this modification, the camera 3 is installed at a lateral imaging angle further below the installation position of the camera 3 of the modification 2 so as to face the marker 2 installed on the side under the floor of the home 4 Ru.

本変形例のようにマーカー2を設置することで、乗客の通行や天候等によるマーカー2の劣化を低減すると共に、マーカー2とカメラ3との間が乗客や障害物等によって遮蔽されることを低減することができる。さらに、本変形例のマーカー2の設置位置は管理者等以外が接触することが困難であるため、マーカー2に対するいたずら等を防止することができる。   By installing the marker 2 as in this modification, deterioration of the marker 2 due to passage of passengers, weather, etc. is reduced, and between the marker 2 and the camera 3 is shielded by passengers, obstacles, etc. It can be reduced. Furthermore, since it is difficult for anyone other than the administrator or the like to contact the installation position of the marker 2 of this modification, it is possible to prevent tampering with the marker 2 and the like.

(変形例4)
また、マーカー2は、ホーム4ではなく、線路上に設置されても良い。図11は、本変形例にかかるマーカー2の設置位置の一例を示す図である。本変形例のマーカー2は、線路のレール6a,6bの間等に設置される。本変形例では、第1の実施形態と第2の実施形態のいずれのマーカー2を採用しても良い。
(Modification 4)
Moreover, the marker 2 may be installed on a track instead of the home 4. FIG. 11 is a view showing an example of the installation position of the marker 2 according to the present modification. The marker 2 of this modification is installed between the rails 6a and 6b of the track. In this modification, any marker 2 of the first embodiment and the second embodiment may be employed.

また、本変形例の列車1には、1台のカメラ3cが設置される。カメラ3cは列車1の底部に、マーカー2と向き合うように下向きの撮像角度で設置される。   Moreover, one camera 3c is installed in the train 1 of this modification. The camera 3 c is installed at the bottom of the train 1 at a downward imaging angle so as to face the marker 2.

本変形例のようにマーカー2を設置することで、マーカー2とカメラ3との間が乗客や障害物等によって遮蔽されることを低減することができる。また、本変形例のマーカー2の設置位置は管理者等以外が接触することが困難であるため、マーカー2に対するいたずら等を防止することができる。   By installing the marker 2 as in the present modification, it is possible to reduce the blocking between the marker 2 and the camera 3 by a passenger, an obstacle or the like. In addition, since it is difficult for anyone other than the administrator or the like to contact the installation position of the marker 2 of this modification, it is possible to prevent tampering with the marker 2 and the like.

(第3の実施形態)
第1の実施形態では、駅のホーム4には1つのマーカー2が設置されていた。本実施形態では、複数のマーカーが、それぞれ異なる角度で設置される。
Third Embodiment
In the first embodiment, one marker 2 was installed at the station home 4. In the present embodiment, a plurality of markers are installed at different angles.

図12は、本実施形態にかかる誤差算出システムSの全体構成の一例を示す図である。本実施形態の誤差算出システムSは、複数のマーカー2n,2mと、誤差算出装置7010と、カメラ3と、制御装置11と、を備える。   FIG. 12 is a diagram showing an example of the entire configuration of the error calculation system S according to the present embodiment. The error calculation system S of the present embodiment includes a plurality of markers 2 n and 2 m, an error calculation device 7010, a camera 3, and a control device 11.

制御装置11は、第1の実施形態と同様の機能を備える。また、本実施形態のカメラ3は、マーカー2n,2mを撮像可能なように、列車1の車両の下部に、横向きの撮像角度で設置される。カメラ3は、第1の実施形態と同様の機能を備える。   The control device 11 has the same function as that of the first embodiment. Moreover, the camera 3 of this embodiment is installed in the lower part of the vehicle of the train 1 by the imaging angle of horizontal direction so that the markers 2 n and 2 m can be imaged. The camera 3 has the same function as that of the first embodiment.

マーカー2n,2mは、駅のホーム4にそれぞれ異なる角度で設置される。以下、マーカー2n,2mを特に区別しない場合には、単にマーカー2という。より詳細には、マーカー2は、カメラ3に対して、それぞれ異なる角度で撮像されるように設置される。例えば、マーカー2は、ホーム4の床にそれぞれ異なる角度で斜めに設置されたプレート7a,7bに表示される。当該設置方法は一例であり、これに限定されるものではない。なお、マーカー2の数は複数であれば良く、2台に限定されるものではない。   The markers 2n and 2m are installed at different angles on the station home 4 respectively. Hereinafter, when the markers 2 n and 2 m are not particularly distinguished, they are simply referred to as the marker 2. More specifically, the markers 2 are set to be imaged at different angles with respect to the camera 3. For example, the markers 2 are displayed on the plates 7a and 7b installed obliquely on the floor of the home 4 at different angles. The installation method is an example, and is not limited thereto. The number of markers 2 is not limited to two as long as it is plural.

図13は、本実施形態にかかるマーカー2の一例を示す側面図である。このようにマーカー2nとマーカー2mとが異なる角度で設置されることにより、いずれか一方が光の反射等によって撮像画像から特定が困難な場合でも、もう一方が撮像画像から特定できる可能性が高くなる。マーカー2の設置角度は、図13に示す例に限定されるものではない。   FIG. 13 is a side view showing an example of the marker 2 according to the present embodiment. As described above, by arranging the markers 2 n and 2 m at different angles, there is a high possibility that one of them can be identified from the captured image even if it is difficult to identify from the captured image due to light reflection or the like. Become. The installation angle of the marker 2 is not limited to the example shown in FIG.

図14は、本実施形態にかかるマーカー2が撮像された撮像画像7090の一例を示す図である。本実施形態のマーカー2nは、2本の直線が交差した形状である。また、マーカー2mは、楕円形状である。マーカー2の形状は、これに限定されるものではない。   FIG. 14 is a view showing an example of a captured image 7090 obtained by capturing the marker 2 according to the present embodiment. The marker 2n of the present embodiment has a shape in which two straight lines cross each other. Moreover, the marker 2m is an elliptical shape. The shape of the marker 2 is not limited to this.

本実施形態の誤差算出装置7010は、第1の実施形態と同様に、受信部101と、取得部102と、特定部103と、算出部104と、送信部105と、記憶部150とを備える。受信部101と、取得部102と、送信部105とは、第1の実施形態と同様の機能を備える。   The error calculation device 7010 according to the present embodiment includes the receiving unit 101, the acquiring unit 102, the identifying unit 103, the calculating unit 104, the transmitting unit 105, and the storage unit 150, as in the first embodiment. . The receiving unit 101, the acquiring unit 102, and the transmitting unit 105 have the same functions as in the first embodiment.

本実施形態の記憶部150は、ホーム位置情報と、マーカー長と、基準位置のX座標と、算出可能な誤差の最大値と、オフセット用パラメータとを記憶する。ホーム位置情報と、算出可能な誤差の最大値とは、第1の実施形態と同様である。   The storage unit 150 of the present embodiment stores home position information, a marker length, the X coordinate of the reference position, the maximum value of the computable errors, and the offset parameter. The home position information and the maximum value of the computable errors are the same as in the first embodiment.

本実施形態のマーカー長は、マーカー2nの幅方向の中心と、マーカー2mの幅方向の中心との間の幅方向の長さである。マーカー2nの幅方向の中心は、2本の直線が交差する位置である。また、マーカー2mの幅方向の中心は、楕円形状の中心である。   The marker length in the present embodiment is the length in the width direction between the center in the width direction of the marker 2 n and the center in the width direction of the marker 2 m. The center in the width direction of the marker 2 n is a position where two straight lines intersect. The center in the width direction of the marker 2m is the center of the oval shape.

本実施形態の基準位置のX座標は、第1の実施形態と同様に、列車1が目標停止位置に停止した際に予め撮像された撮像画像におけるマーカー2の幅方向の中心の座標である。本実施形態の基準位置は、列車1が目標停止位置に停止した場合に撮像された撮像画像7090において、複数のマーカー2全体の幅方向の中心となる位置である。本実施形態におけるマーカー2全体の幅方向の中心は、撮像画像7090におけるマーカー2nの幅方向の中心と、マーカー2mの幅方向の中心との中間とする。マーカー2全体の幅方向の中心は、本実施形態における所定部位の一例である。   The X coordinate of the reference position of the present embodiment is, as in the first embodiment, the coordinate of the center in the width direction of the marker 2 in the captured image captured in advance when the train 1 stops at the target stop position. The reference position in the present embodiment is a position that is the center in the width direction of all of the plurality of markers 2 in the captured image 7090 captured when the train 1 stops at the target stop position. The center in the width direction of the entire marker 2 in this embodiment is intermediate between the center in the width direction of the marker 2 n in the captured image 7090 and the center in the width direction of the marker 2 m. The center in the width direction of the entire marker 2 is an example of the predetermined portion in the present embodiment.

オフセット用パラメータは、撮像画像7090上のマーカー2nの幅方向の中心または撮像画像7090上のマーカー2mの幅方向の中心を、マーカー2全体の幅方向の中心に補正するためのパラメータである。より詳細には、オフセット用パラメータは、マーカー2nの幅方向の中心またはマーカー2mの幅方向の中心から、マーカー2全体の幅方向の中心との間の撮像画像7090上の距離の推定値である。撮像画像7090上の距離は、例えばピクセル数で表される。   The offset parameter is a parameter for correcting the center in the width direction of the marker 2 n on the captured image 7090 or the center in the width direction of the marker 2 m on the captured image 7090 to the center in the width direction of the entire marker 2. More specifically, the offset parameter is an estimate of the distance on the captured image 7090 between the center in the width direction of the marker 2 n or the center in the width direction of the marker 2 m and the center in the width direction of the entire marker 2 . The distance on the captured image 7090 is represented by, for example, the number of pixels.

本実施形態の特定部103は、第1の実施形態の機能を備えた上で、撮像画像7090から、公知のテンプレートマッチング等の技術を用いてマーカー2を特定する。より詳細には、特定部103は、マーカー2nまたはマーカー2mの少なくともいずれか一方を特定した場合、撮像画像7090からマーカー2を特定したと判断する。特定部103は、特定したマーカー2nまたはマーカー2mの幅方向の中心のX座標を、算出部104に送出する。   The identification unit 103 of the present embodiment identifies the marker 2 from the captured image 7090 using a known technique such as template matching after having the function of the first embodiment. More specifically, when at least one of the marker 2 n and the marker 2 m is specified, the specifying unit 103 determines that the marker 2 is specified from the captured image 7090. The identifying unit 103 sends the X coordinate of the center in the width direction of the identified marker 2 n or marker 2 m to the calculating unit 104.

本実施形態の算出部104は、第1の実施形態の機能を備えた上で、特定部103がマーカー2を特定した場合、特定された1つまたは2つのマーカー2の幅方向の中心の位置から、マーカー2全体の幅方向の中心のX座標を求める。   The calculation unit 104 of the present embodiment has the function of the first embodiment, and if the identification unit 103 identifies the marker 2, the position of the center of the identified one or two markers 2 in the width direction From this, the X coordinate of the center in the width direction of the entire marker 2 is determined.

また、算出部104は、撮像画像7090上におけるマーカー2の幅方向の長さと、記憶部150に保存されたマーカー長とを比較して、撮像画像7090上の長さを実空間における長さに変換するための変換パラメータを求める。そして、算出部104は、記憶部150に記憶された基準位置のX座標“x4”と、マーカー2全体の幅方向の中心のX座標“x73”との差分D7を実空間における長さに変換することによって、列車1の停止位置と目標停止位置との誤差を算出する。   In addition, the calculating unit 104 compares the length in the width direction of the marker 2 on the captured image 7090 with the marker length stored in the storage unit 150, and sets the length on the captured image 7090 to the length in real space. Determine conversion parameters for conversion. Then, the calculation unit 104 converts the difference D7 between the X coordinate “x4” of the reference position stored in the storage unit 150 and the X coordinate “x73” of the center in the width direction of the entire marker 2 into a length in real space. By doing this, the error between the stop position of the train 1 and the target stop position is calculated.

次に、以上のように構成された本実施形態の誤差算出装置7010で実行される誤差算出処理について説明する。図15は、本実施形態にかかる誤差算出処理の流れの一例を示すフローチャートである。   Next, an error calculation process performed by the error calculation device 7010 of the present embodiment configured as described above will be described. FIG. 15 is a flowchart showing an example of the flow of the error calculation process according to the present embodiment.

S1の次の停車駅を示す情報の受信から、S4の停止信号の受信の処理までは、第1の実施形態の処理と同様である。   The processes from the reception of the information indicating the stop station next to S1 to the process of reception of the stop signal of S4 are the same as the processes of the first embodiment.

本実施形態の特定部103は、受信部101が停止信号を受信した場合に(S4“Yes”)、公知の手法で撮像画像7090からマーカー2を特定する(S71)。   When the receiving unit 101 receives the stop signal (S4 “Yes”), the specifying unit 103 of the present embodiment specifies the marker 2 from the captured image 7090 by a known method (S71).

本実施形態の特定部103は、撮像画像7090からマーカー2nまたはマーカー2mの少なくとも一方を特定した場合、撮像画像7090からマーカー2を特定したと判断する(S6“Yes”)。   When at least one of the marker 2 n and the marker 2 m is specified from the captured image 7090, the specifying unit 103 of the present embodiment determines that the marker 2 is specified from the captured image 7090 (S 6 “Yes”).

特定部103が特定したマーカー2の数が“2”である場合(S72“Yes”)、換言すれば、特定部103がマーカー2n,2mの両方を特定した場合、算出部104は、特定されたマーカー2nの幅方向の中心のX座標“x71”と、特定されたマーカー2mの幅方向の中心のX座標“x72”との幅方向の中心のX座標“x73”を求める(S73)。   When the number of markers 2 specified by the specifying unit 103 is “2” (S72 “Yes”), in other words, when the specifying unit 103 specifies both of the markers 2 n and 2 m, the calculating unit 104 is specified. The X coordinate "x73" of the center in the width direction between the X coordinate "x71" of the center in the width direction of the marker 2n and the X coordinate "x72" of the center in the width direction of the specified marker 2m is determined (S73).

また、特定部103が撮像画像7090から特定したマーカー2の数が“1”である場合(S72“No”)、算出部104は、マーカー2nまたはマーカー2mの幅方向の中心のX座標から、記憶部150に保存されたオフセット用パラメータを加算または減算することによってマーカー2全体の幅方向の中心のX座標“x73”を求める(S74)。   Further, when the number of markers 2 specified from the captured image 7090 by the specifying unit 103 is “1” (S72 “No”), the calculating unit 104 calculates the X coordinates of the center in the width direction of the markers 2n or 2m. The X coordinate "x 73" of the center in the width direction of the entire marker 2 is determined by adding or subtracting the offset parameter stored in the storage unit 150 (S74).

そして、算出部104は、S73またはS74の処理で求めたマーカー2全体の幅方向の中心のX座標“x73”と、基準位置のX座標“x4”との差分D7を算出する(S75)。   Then, the calculation unit 104 calculates a difference D7 between the X coordinate "x73" of the center of the entire marker 2 in the width direction obtained in the process of S73 or S74 and the X coordinate "x4" of the reference position (S75).

S8の変換の処理と、S9の送信の処理とは、第1の実施形態と同様である。また、特定部103が撮像画像7090からマーカー2を特定しない場合(S6“No”)のS10の送信の処理も、第1の実施形態と同様である。   The conversion process of S8 and the transmission process of S9 are the same as in the first embodiment. Further, the process of S10 transmission when the specifying unit 103 does not specify the marker 2 from the captured image 7090 (S6 “No”) is also the same as that of the first embodiment.

このように、本実施形態の誤差算出装置7010は、異なる角度で設置された複数のマーカー2のうちの1つ以上を撮像画像7090から特定した場合、特定したマーカー2の中心の位置から、所定部位の位置を求める。このため、本実施形態の誤差算出装置7010によれば、照明条件等によってマーカー2が撮像画像7090から特定され難い場合でも、いずれか1つのマーカー2を撮像画像7090から特定することができれば、列車1の停止位置と目標停止位置との誤差を算出することができる。このため、本実施形態の誤差算出装置7010によれば、照明条件等の影響を低減して、列車1の停止位置と目標停止位置との誤差を、高精度に把握することができる。   As described above, when one or more of the plurality of markers 2 installed at different angles are specified from the captured image 7090, the error calculation device 7010 according to the present embodiment determines the predetermined position from the center position of the specified marker 2. Find the position of the site. For this reason, according to the error calculation device 7010 of the present embodiment, even if it is difficult to specify the marker 2 from the captured image 7090 due to the illumination condition etc., if any one marker 2 can be specified from the captured image 7090, the train An error between the stop position of 1 and the target stop position can be calculated. For this reason, according to the error calculation device 7010 of the present embodiment, it is possible to reduce the influence of the illumination conditions and the like and grasp the error between the stop position of the train 1 and the target stop position with high accuracy.

なお、本実施形態のマーカー2n,2mの形状は一例であり、第1の実施形態または第2の実施形態のマーカー2を本実施形態に適用しても良い。また、第1の実施形態のマーカー2と、第2の実施形態のマーカー2とを組み合わせて本実施形態に適用しても良い。   In addition, the shape of the markers 2n and 2m of this embodiment is an example, and you may apply the marker 2 of 1st Embodiment or 2nd Embodiment to this embodiment. Also, the marker 2 of the first embodiment and the marker 2 of the second embodiment may be combined and applied to the present embodiment.

以上説明したとおり、第1から第3の実施形態によれば、列車1の停止位置と、目標停止位置との誤差を高精度に把握することができる。   As described above, according to the first to third embodiments, the error between the stop position of the train 1 and the target stop position can be grasped with high accuracy.

本実施形態の誤差算出装置10で実行される誤差算出プログラムは、インストール可能な形式又は実行可能な形式のファイルでCD−ROM、フレキシブルディスク(FD)、CD−R、DVD(Digital Versatile Disk)等のコンピュータで読み取り可能な記録媒体に記録されて提供される。   The error calculation program executed by the error calculation device 10 of the present embodiment is a file of an installable format or an executable format, such as a CD-ROM, a flexible disk (FD), a CD-R, a DVD (Digital Versatile Disk), etc. Is provided by being recorded on a computer readable recording medium.

また、本実施形態の誤差算出装置10で実行される誤差算出プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態の誤差算出装置10で実行される誤差算出プログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。また、本実施形態の誤差算出プログラムを、ROM等に予め組み込んで提供するように構成してもよい。   Further, the error calculation program executed by the error calculation apparatus 10 of the present embodiment may be stored on a computer connected to a network such as the Internet and provided by being downloaded via the network. Further, the error calculation program executed by the error calculation device 10 of the present embodiment may be provided or distributed via a network such as the Internet. In addition, the error calculation program of the present embodiment may be provided by being incorporated in advance in a ROM or the like.

本実施形態の誤差算出装置10で実行される誤差算出プログラムは、上述した各部(受信部、取得部、特定部、算出部、送信部)を含むモジュール構成となっており、実際のハードウェアとしてはCPU(プロセッサ)が上記記憶媒体から誤差算出プログラムを読み出して実行することにより上記各部が主記憶装置上にロードされ、受信部、取得部、特定部、算出部、送信部が主記憶装置上に生成されるようになっている。   The error calculation program executed by the error calculation device 10 of the present embodiment has a module configuration including the above-described units (reception unit, acquisition unit, identification unit, calculation unit, transmission unit), and as an actual hardware The above units are loaded onto the main storage device by the CPU (processor) reading and executing the error calculation program from the storage medium, and the reception unit, acquisition unit, identification unit, calculation unit, and transmission unit are on the main storage device. Is supposed to be generated.

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。   While certain embodiments of the present invention have been described, these embodiments have been presented by way of example only, and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other forms, and various omissions, substitutions, and modifications can be made without departing from the scope of the invention. These embodiments and modifications thereof are included in the scope and the gist of the invention, and are included in the invention described in the claims and the equivalent scope thereof.

1 列車
2,2a〜2c,2n,2m マーカー
3,3a,3b カメラ
4 ホーム
10,7010 誤差算出装置
11 制御装置
21,21a〜21l 円
90,2090,7090 撮像画像
91,92,93 画像
101 受信部
102 取得部
103 特定部
104 算出部
105 送信部
150 記憶部
D1,D7 差分
S 誤差算出システム
1 Train 2, 2a to 2c, 2n, 2m Marker 3, 3a, 3b Camera 4 Home 10, 7010 Error Calculation Device 11 Control Device 21, 21a to 21l Circle 90, 2090, 7090 Captured Image 91, 92, 93 Image 101 Received Part 102 Acquisition part 103 Identification part 104 Calculation part 105 Transmission part 150 Storage part D1, D7 Difference S error calculation system

Claims (8)

列車に設置された撮像装置から撮像画像を取得する取得部と、
前記列車が停止する駅に設置されたマーカーを、前記撮像画像から特定する特定部と、
特定された前記マーカー内の所定部位の前記撮像画像における位置と、前記列車が予め定められた目標停止位置に停止した際に予め撮像された撮像画像における前記所定部位の位置である基準位置と、の差分を求め、前記差分に基づいて、前記列車の停止位置と前記目標停止位置との誤差を算出する算出部と、
を備える誤差算出装置。
An acquisition unit configured to acquire a captured image from an imaging device installed on a train;
An identifying unit for identifying from the captured image a marker installed at a station at which the train stops;
A position in the captured image of the predetermined portion in the specified marker, and a reference position which is a position of the predetermined portion in the captured image captured in advance when the train is stopped at a predetermined target stop position; Calculating a difference between the stop position of the train and the target stop position based on the difference;
Error calculation device comprising:
前記所定部位は、前記マーカーの幅方向の中心であり、
前記算出部は、前記所定部位の前記撮像画像における位置と前記基準位置との差分を、実空間における長さに変換することによって、前記列車の停止位置と前記目標停止位置との誤差を算出する、
請求項1に記載の誤差算出装置。
The predetermined site is the center in the width direction of the marker,
The calculation unit calculates an error between the stop position of the train and the target stop position by converting the difference between the position in the captured image of the predetermined part and the reference position into a length in real space. ,
The error calculation device according to claim 1.
前記特定部は、前記撮像画像から複数の円を抽出し、抽出された前記複数の円のうち、前記撮像画像における横方向の座標の差異が第1の閾値以下である前記円は同じ列に含まれると判断し、前記撮像画像における縦方向の座標の差異が第2の閾値以下である前記円は同じ行に含まれると判断し、前記列および前記行に含まれる前記複数の円の数が予め定められた所定の数と一致する場合に、前記列および前記行に含まれる前記複数の円を前記マーカーと特定する、
請求項1または2に記載の誤差算出装置。
The specification unit extracts a plurality of circles from the captured image, and among the plurality of extracted circles, the circles having a difference in horizontal coordinates in the captured image equal to or less than a first threshold are in the same row It is determined that it is determined that the circle whose difference in vertical coordinate in the captured image is equal to or less than the second threshold is included in the same row, and the number of the plurality of circles included in the column and the row Identify the plurality of circles included in the column and the row as the marker, when the number of circles matches the predetermined number determined in advance
The error calculation device according to claim 1.
前記マーカーは、矩形状で、かつ前記列車の路線ごとに異なる色を有し、
前記特定部は、前記撮像画像から特定の色の画像範囲を抽出することによって、前記誤差算出装置が搭載された列車が走行する路線の前記マーカーを特定する、
請求項1に記載の誤差算出装置。
The marker is rectangular and has a different color for each train route,
The specification unit specifies the marker of a route on which a train on which the error calculation device is mounted travels by extracting an image range of a specific color from the captured image.
The error calculation device according to claim 1.
前記マーカーは、それぞれ異なる角度で複数設置され、
前記所定部位は、複数のマーカーの全体の幅方向の中心であり、
前記算出部は、前記特定部が前記マーカーを1つ以上特定した場合、特定された前記マーカーの中心の位置から、前記所定部位の位置を求める、
請求項1に記載の誤差算出装置。
A plurality of the markers are installed at different angles, respectively.
The predetermined site is the center in the width direction of the plurality of markers,
The calculation unit obtains the position of the predetermined site from the position of the center of the specified marker when the specifying unit specifies one or more of the markers.
The error calculation device according to claim 1.
前記列車が停止したことを示す停止信号を、前記列車の制御装置から受信する受信部、をさらに備え、
前記特定部は、前記受信部が前記停止信号を受信した場合に、前記取得部が取得した前記撮像画像から前記マーカーを特定する、
請求項1から5のいずれか1項に記載の誤差算出装置。
The receiver further comprises: a reception unit that receives a stop signal indicating that the train has stopped from the controller of the train;
The identification unit identifies the marker from the captured image acquired by the acquisition unit when the reception unit receives the stop signal.
The error calculation device according to any one of claims 1 to 5.
前記算出部が算出した前記誤差を前記制御装置に送信する送信部、をさらに備えた、
請求項6に記載の誤差算出装置。
The transmission unit further transmits the error calculated by the calculation unit to the control device.
The error calculation device according to claim 6.
マーカーと、誤差算出装置とを備える誤差算出システムであって、
前記マーカーは、列車が停止する駅に設置され、
前記誤差算出装置は、
前記列車に設置された撮像装置から撮像画像を取得する取得部と、
前記撮像画像から前記マーカーを特定する特定部と、
特定された前記マーカー内の所定部位の前記撮像画像における位置と、前記列車が予め定められた目標停止位置に停止した際に予め撮像された撮像画像における前記所定部位の位置である基準位置と、の差分を求め、前記差分に基づいて、前記列車の停止位置と前記目標停止位置との誤差を算出する算出部と、
を備える誤差算出システム。
An error calculation system comprising a marker and an error calculation device, comprising:
The marker is placed at the station where the train stops,
The error calculation device
An acquisition unit configured to acquire a captured image from an imaging device installed in the train;
An identification unit that identifies the marker from the captured image;
A position in the captured image of the predetermined portion in the specified marker, and a reference position which is a position of the predetermined portion in the captured image captured in advance when the train is stopped at a predetermined target stop position; Calculating a difference between the stop position of the train and the target stop position based on the difference;
An error calculation system comprising:
JP2017229835A 2017-11-30 2017-11-30 Error calculation device and error calculation system Active JP7042596B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017229835A JP7042596B2 (en) 2017-11-30 2017-11-30 Error calculation device and error calculation system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017229835A JP7042596B2 (en) 2017-11-30 2017-11-30 Error calculation device and error calculation system

Publications (2)

Publication Number Publication Date
JP2019098846A true JP2019098846A (en) 2019-06-24
JP7042596B2 JP7042596B2 (en) 2022-03-28

Family

ID=66975522

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017229835A Active JP7042596B2 (en) 2017-11-30 2017-11-30 Error calculation device and error calculation system

Country Status (1)

Country Link
JP (1) JP7042596B2 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110824515A (en) * 2019-10-25 2020-02-21 中铁武汉勘察设计研究院有限公司 GNSS and radar ranging combined hot metal intermodal vehicle tracking and positioning method and system
JP2020192027A (en) * 2019-05-27 2020-12-03 株式会社三洋物産 Game machine
CN112441074A (en) * 2019-08-28 2021-03-05 比亚迪股份有限公司 Parking method and device for rail transit, vehicle and electronic equipment
CN113537331A (en) * 2021-07-09 2021-10-22 东莞市科研世智能科技有限公司 Positioning method and device of train wheel set and storage medium
CN115447639A (en) * 2022-09-22 2022-12-09 中车成都机车车辆有限公司 Parking precision testing method, device and equipment and readable storage medium
EP4339072A1 (en) * 2022-09-19 2024-03-20 Siemens Mobility GmbH Method for determining at least one control parameter for an ato system

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0635538A (en) * 1992-07-14 1994-02-10 Tsubakimoto Chain Co Method and device for calibration of stop position of mobile object
JPH07225894A (en) * 1994-02-15 1995-08-22 Toshiba Corp Vehicle traveling controller and its control acknowledge acquiring method
JPH106991A (en) * 1996-06-24 1998-01-13 Toshiba Corp Train stoppage supporting system
JPH1053127A (en) * 1996-06-06 1998-02-24 Mitsubishi Heavy Ind Ltd Positioning device at time of loading
JP2000112151A (en) * 1998-08-06 2000-04-21 Sanee Giken Kk Mark for positioning, positioning method and aligning method
JP2004136754A (en) * 2002-10-17 2004-05-13 Hitachi Ltd Regular positional stop support device of train
JP2010184527A (en) * 2009-02-10 2010-08-26 Hitachi Ltd Train stop detection system and train travel speed and position detection system
JP2012011867A (en) * 2010-06-30 2012-01-19 Mitsubishi Heavy Ind Ltd Vehicle position calculation system and vehicle position calculation method, and program therefor
JP2014054898A (en) * 2012-09-12 2014-03-27 Saxa Inc Monitoring system
WO2016035597A1 (en) * 2014-09-05 2016-03-10 三菱電機株式会社 Automated train operation system

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0635538A (en) * 1992-07-14 1994-02-10 Tsubakimoto Chain Co Method and device for calibration of stop position of mobile object
JPH07225894A (en) * 1994-02-15 1995-08-22 Toshiba Corp Vehicle traveling controller and its control acknowledge acquiring method
JPH1053127A (en) * 1996-06-06 1998-02-24 Mitsubishi Heavy Ind Ltd Positioning device at time of loading
JPH106991A (en) * 1996-06-24 1998-01-13 Toshiba Corp Train stoppage supporting system
JP2000112151A (en) * 1998-08-06 2000-04-21 Sanee Giken Kk Mark for positioning, positioning method and aligning method
JP2004136754A (en) * 2002-10-17 2004-05-13 Hitachi Ltd Regular positional stop support device of train
JP2010184527A (en) * 2009-02-10 2010-08-26 Hitachi Ltd Train stop detection system and train travel speed and position detection system
JP2012011867A (en) * 2010-06-30 2012-01-19 Mitsubishi Heavy Ind Ltd Vehicle position calculation system and vehicle position calculation method, and program therefor
JP2014054898A (en) * 2012-09-12 2014-03-27 Saxa Inc Monitoring system
WO2016035597A1 (en) * 2014-09-05 2016-03-10 三菱電機株式会社 Automated train operation system

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020192027A (en) * 2019-05-27 2020-12-03 株式会社三洋物産 Game machine
CN112441074A (en) * 2019-08-28 2021-03-05 比亚迪股份有限公司 Parking method and device for rail transit, vehicle and electronic equipment
CN110824515A (en) * 2019-10-25 2020-02-21 中铁武汉勘察设计研究院有限公司 GNSS and radar ranging combined hot metal intermodal vehicle tracking and positioning method and system
CN110824515B (en) * 2019-10-25 2022-04-15 中铁武汉勘察设计研究院有限公司 GNSS and radar ranging combined hot metal intermodal vehicle tracking and positioning method and system
CN113537331A (en) * 2021-07-09 2021-10-22 东莞市科研世智能科技有限公司 Positioning method and device of train wheel set and storage medium
CN113537331B (en) * 2021-07-09 2024-02-02 广东科研世智能科技有限公司 Train wheel set positioning method, device and storage medium
EP4339072A1 (en) * 2022-09-19 2024-03-20 Siemens Mobility GmbH Method for determining at least one control parameter for an ato system
CN115447639A (en) * 2022-09-22 2022-12-09 中车成都机车车辆有限公司 Parking precision testing method, device and equipment and readable storage medium
CN115447639B (en) * 2022-09-22 2024-01-02 中车成都机车车辆有限公司 Parking precision testing method, device, equipment and readable storage medium

Also Published As

Publication number Publication date
JP7042596B2 (en) 2022-03-28

Similar Documents

Publication Publication Date Title
JP7042596B2 (en) Error calculation device and error calculation system
US9242601B2 (en) Method and device for detecting drivable region of road
KR102463647B1 (en) Position-determining system for an elevator
US8867790B2 (en) Object detection device, object detection method, and program
US9047518B2 (en) Method for the detection and tracking of lane markings
US11113543B2 (en) Facility inspection system and facility inspection method
JP4363295B2 (en) Plane estimation method using stereo images
US8743183B2 (en) Parallax calculation method and parallax calculation device
JP5075672B2 (en) Object detection apparatus and method
JP2019084881A (en) Obstacle detection device
ATE527620T1 (en) METHOD AND SYSTEM FOR AUTOMATIC DETECTION OF OBJECTS IN FRONT OF A MOTOR VEHICLE
CN111144231B (en) Self-service channel anti-trailing detection method and system based on depth image
JP2015184929A (en) Three-dimensional object detection apparatus, three-dimensional object detection method and three-dimensional object detection program
JP5760220B2 (en) Distance image camera and method for recognizing surface shape of object using the same
JP6699179B2 (en) Image processing device
JP2012150595A (en) Stop line detection device and program
JP6431299B2 (en) Vehicle periphery monitoring device
KR101560810B1 (en) Space controled method and apparatus for using template image
KR101636389B1 (en) An Automatic inspection method for Cable Harness
JP2012248004A (en) Image processing system, image recognition device and method
CN113639685B (en) Displacement detection method, device, equipment and storage medium
EP4082867A1 (en) Automatic camera inspection system
JP4842301B2 (en) Pedestrian detection device and program
KR101617540B1 (en) Method and system for recognition of moving object in the area for creation of content based on current context information
JP7210157B2 (en) Fixed position stop control device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201027

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210806

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210907

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211028

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211116

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211223

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220215

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220315

R150 Certificate of patent or registration of utility model

Ref document number: 7042596

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150