CN115916623A - 铁道线路信息取得装置以及铁道线路信息取得方法 - Google Patents

铁道线路信息取得装置以及铁道线路信息取得方法 Download PDF

Info

Publication number
CN115916623A
CN115916623A CN202180039062.1A CN202180039062A CN115916623A CN 115916623 A CN115916623 A CN 115916623A CN 202180039062 A CN202180039062 A CN 202180039062A CN 115916623 A CN115916623 A CN 115916623A
Authority
CN
China
Prior art keywords
line
unit
image
coordinate system
information acquisition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180039062.1A
Other languages
English (en)
Inventor
二神拓也
高桥雄介
大岳达哉
小林广幸
山崎世支明
间岛义喜
濑川泰诚
加藤纪康
服部阳平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Toshiba Infrastructure Systems and Solutions Corp
Original Assignee
Toshiba Corp
Toshiba Infrastructure Systems and Solutions Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Toshiba Infrastructure Systems and Solutions Corp filed Critical Toshiba Corp
Publication of CN115916623A publication Critical patent/CN115916623A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B61—RAILWAYS
    • B61L—GUIDING RAILWAY TRAFFIC; ENSURING THE SAFETY OF RAILWAY TRAFFIC
    • B61L25/00—Recording or indicating positions or identities of vehicles or trains or setting of track apparatus
    • B61L25/02—Indicating or recording positions or identities of vehicles or trains
    • B61L25/025—Absolute localisation, e.g. providing geodetic coordinates
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B61—RAILWAYS
    • B61L—GUIDING RAILWAY TRAFFIC; ENSURING THE SAFETY OF RAILWAY TRAFFIC
    • B61L23/00—Control, warning or like safety means along the route or between vehicles or trains
    • B61L23/04—Control, warning or like safety means along the route or between vehicles or trains for monitoring the mechanical state of the route
    • B61L23/041—Obstacle detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/10—Recognition assisted with metadata

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Train Traffic Observation, Control, And Security (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本实施方式所涉及的铁道线路信息取得装置具备图像取得部、线路信息取得部、变换部以及对照部。图像取得部获得铁道车辆的行进方向的拍摄图像。线路信息取得部基于铁道车辆的位置来取得铁道车辆行进的方向的第1线路的位置信息。变换部将拍摄图像与第1线路变换为共同的坐标系。对照部在共同的坐标系中取得拍摄图像内的第2线路所对应的第1线路的位置信息。

Description

铁道线路信息取得装置以及铁道线路信息取得方法
技术领域
本发明的实施方式涉及铁道线路信息取得装置以及铁道线路信息取得方法。
背景技术
一般，公知有通过利用由搭载于铁道车辆的照相机拍摄到的图像来监视前方障碍物的监视方法。在这样的监视方法中，对存在于前方的物体是否是有可能碰撞的障碍物进行判断。因此，需要对在图像中存在的预定行驶的线路进行检测的处理。由于铁道车辆直到停止为止的制动距离长，所以要求高精度并且高速地检测更远方的线路。
可是，也存在因天气、时间段、周围的状况(隧道等)而线路未被清晰拍摄的情况，可能导致难以高精度地将线路检测到远方。
现有技术文献
专利文献
专利文献1：日本特愿2016－172824号公报
专利文献2：日本特开2019－218022号公报
非专利文献
非专利文献1：Conference：2016 12th World Congress on Intelligent Controland Automation(WCICA)、“Geometry Constraints-based Visual Rail TrackExtraction”
发明内容
发明要解决的课题
提供能够更高精度地检测线路的位置信息的铁道线路信息取得装置以及铁道线路信息取得方法。
用于解决课题的手段
本实施方式所涉及的铁道线路信息取得装置具备图像取得部、线路信息取得部、变换部以及对照部。图像取得部取得铁道车辆的行进方向的拍摄图像。线路信息取得部基于铁道车辆的位置来取得铁道车辆行进的方向的第1线路的位置信息。变换部将拍摄图像和第1线路变换为共同的坐标系。对照部在共同的坐标系中取得拍摄图像内的第2线路所对应的第1线路的位置信息。
附图说明
图1是表示铁道线路信息取得装置的构成例的框图。
图2是表示本实施方式所涉及的铁道线路信息取得装置的详细的构成例的框图。
图3是表示在水平面上显示的线路的图。
图4是表示线路间的中点处的纬度、经度与设定点的关系的图。
图5是示意性地表示设定点被设定于线路的位置的图。
图6是示意性地对设定点的单应性(Homography)矩阵进行说明的图。
图7是表示使用了与设定点对应的单应性矩阵的坐标变换例的图。
图8是表示线路坐标变换部进行坐标变换而生成的模板例的图。
图9是表示线路输出部的处理例的图。
图10是表示当前位置检测部的处理例的图。
图11是表示包括尖轨(tongue rail)的设定点的图。
图12是表示将与设定点对应的线路信息变换为照相机坐标系的线路信息的图。
图13是表示由拍摄部拍摄的图像中拍摄有隧道的例子的图。
图14是表示铁道线路信息取得装置的整体的处理的流程的流程图。
图15是表示线路检测处理的详细的处理的流程的流程图。
图16是表示当前位置修正处理的详细的处理的流程的流程图。
图17是表示拍摄参数修正处理的详细的处理的流程的流程图。
图18是表示第2实施方式所涉及的铁道线路信息取得装置的构成的框图。
图19是表示与设定点对应的单应性矩阵的逆变换矩阵的图。
图20是表示图像投影部进行逆坐标变换而生成的逆模板的例子的图。
图21是表示线路输出部的处理例的图。
图22是表示第2实施方式所涉及的当前位置检测处理的详细的处理的流程的流程图。
图23是表示第3实施方式所涉及的线路检测处理的详细的处理的流程的流程图。
图24是示意性地表示铁道车辆正在水平面和倾斜面行驶的例子的图。
具体实施方式
以下，参照附图对本发明的实施方式进行说明。其中，在对本说明书附带的附图中，为了便于图示以及易于理解，适当地将比例尺以及纵横的尺寸比等与实物进行变更而进行夸张。
(第1实施方式)
首先，图1是表示本实施方式所涉及的铁道行驶线路取得系统1的构成例的框图。如图1所示，本实施方式所涉及的铁道行驶线路取得系统1是能够取得铁道行驶线路的位置信息的系统，具备搭载于铁道车辆5的拍摄装置10、铁道线路信息取得装置20、行驶位置信息收集装置30、障碍物检测装置40以及通知部50。铁道车辆5在被固定的轨道即线路上进行行驶。
拍摄装置10能够连续地拍摄R、G、B图像作为拍摄动态图像。该拍摄装置10例如被固定在铁道车辆5的前方。因此，对于构成铁道车辆5在线路上行驶过程中拍摄到的拍摄动态图像的各图像而言，例如当在相同的位置被拍摄的情况下，成为相同的角度且相同的拍摄倍率的图像。这些图像被存储于后述的存储部204。
铁道线路信息取得装置20基于线路的位置信息来核对由拍摄装置10拍摄到的拍摄图像，检测拍摄图像内的线路的位置信息并进行输出。其中，铁道线路信息取得装置20的详细情况将后述。
行驶位置信息收集装置30取得铁道车辆5的当前位置，相对于铁道车辆5的行进方向上的当前位置输出规定的线路范围的信息。
障碍物检测装置40基于由拍摄装置10拍摄到的拍摄图像以及由铁道线路信息取得装置20检测到的线路来检测铁道车辆5行进时成为障碍的障碍物。
通知部50将各种信息与拍摄装置10拍摄到的拍摄图像一起显示。另外，通知部50将与由障碍物检测装置40检测到的障碍物有关的信息例如通知给中央管理室等。
图2是表示本实施方式所涉及的铁道行驶线路取得系统1的详细的构成例的框图。如图2所示，拍摄装置10具有拍摄部101和参数设定部102。铁道线路信息取得装置20具有图像取得部201、行进预定线路位置取得部202、线路坐标变换部203、存储部204、匹配部205、线路输出部206、当前位置检测部207、当前位置输出部208、尖轨状态监视部209以及拍摄参数修正部210。行驶位置信息收集装置30具有当前位置收集部301以及行进线路输出部302。障碍物检测装置40具有线路位置/图像取得部401以及行驶妨碍物检测部402。通知部50具有显示部501以及异常通知部502。
如图2所示，拍摄装置10的拍摄部101例如是照相机，能够进行曝光的控制。参数设定部102设定拍摄部101的拍摄参数。另外，也能够进行由拍摄部101拍摄到的图像的灰度处理。
铁道线路信息取得装置20的图像取得部201从拍摄部101按顺序取得铁道车辆5的行进方向的拍摄图像。行进预定线路位置取得部202从行驶位置信息收集装置30取得铁道车辆5行进的方向的线路的位置信息。其中，铁道线路信息取得装置20例如构成为包括CPU(Central Processing Unit)。存储部204存储有用于执行监视动作的各种程序。由此，铁道线路信息取得装置20通过执行例如存储于存储部204的程序来构成各部。
线路坐标变换部203将图像取得部20所取得的拍摄图像和线路的位置信息变换为共同的坐标系。例如，线路坐标变换部203将由位置信息表示的线路的坐标变换为对拍摄图像进行了拍摄的拍摄部101的照相机坐标系。其中，线路坐标变换部203的详细情况将后述。另外，本实施方式所涉及的线路坐标变换部203对应于变换部。
存储部204例如由HDD(硬盘驱动器)、SSD(固态驱动器)等构成。存储部204将成为监视对象的线路的位置信息、成为监视对象的线路的坐标变换矩阵、拍摄部101的各种信息例如拍摄光学系统的光轴的朝向、拍摄倍率等存储为坐标变换信息。
匹配部205在共同的坐标系中取得拍摄图像内的线路所对应的线路的位置信息。其中，匹配部205的详细情况也将后述。另外，本实施方式所涉及的匹配部205对应于对照部。
线路输出部206输出由匹配部205对照了的与拍摄图像中的线路一致的线路的位置信息。
当前位置检测部207使用由匹配部205取得的线路的位置信息和拍摄部101的拍摄光学系统的信息来计算铁道车辆5的当前位置。其中，当前位置检测部207的详细情况也将后述。当前位置输出部208输出当前位置检测部207检测到的当前位置。
尖轨状态监视部209通过监视线路分岔部处的尖轨的状态并进行与行进线路位置信息的核对，来确认尖轨状态的匹配性。其中，尖轨状态监视部209的详细情况也将后述。
拍摄参数修正部210使用由匹配部205取得的线路的位置信息来修正铁道车辆5的行进方向的拍摄参数。其中，拍摄参数修正部210的详细情况也将后述。
行驶位置信息收集装置30的当前位置收集部301取得当前位置检测部207输出的铁道车辆5的当前位置。另外，当前位置收集部301通过GNSS(全球定位卫星系统：GlobalNavigation Satellite System)来取得铁道车辆5的当前位置的信息。由此，行驶位置信息收集装置30互补地使用当前位置检测部207输出的铁道车辆5的当前位置和基于GNSS的铁道车辆5的当前位置来向行进线路输出部302输出包括铁道车辆5的当前位置的信息的信号。
行进线路输出部302基于当前位置收集部301所取得的铁道车辆5的当前位置，输出铁道车辆5的行进方向上的规定范围的线路位置的信息。规定范围是行进方向上的前方的例如50～200米的范围。其中，50～200米的范围是一个例子，并不限定于此。
障碍物检测装置40的线路位置·图像取得部401取得拍摄部101所拍摄到的拍摄图像和匹配部205对照后的该拍摄图像内的线路的位置信息。
行驶妨碍物检测部402基于拍摄图像内的线路的位置信息来检测成为铁道车辆5的行驶的障碍的障碍物。行驶妨碍物检测部402若检测到障碍物，则基于拍摄图像内的线路的位置信息来将障碍物的位置通知给通知部50。
通知部50的显示部501例如是监视器，显示拍摄部101所拍摄到的拍摄图像。另外，显示部501在行驶妨碍物检测部402检测到障碍物时，对表示障碍物的位置的标记等显示方式进行显示。
异常通知部502在行驶妨碍物检测部402检测到障碍物时将表示障碍物的位置的信息等通知给中央监视室等。
这里，基于图3至图8来对线路坐标变换部203的详细情况进行说明。图3是表示在水平面上例如鸟瞰图上显示的线路R0、R1的图。如图3所示，线路R1与线路R0分岔。在存储部204中，铁道车辆5行驶的全部范围的线路的位置信息例如被以地理坐标系(X，Y)存储。
图4是表示线路间的中点处的纬度、经度与设定点(PnL，PnR)的关系的图。如图4所示，例如线路间的中点处的纬度、经度与设定点(PnL，PnR)被建立对应地存储于存储部204。这里，n为自然数，L相对于行进方向表示线路的左侧，R相对于行进方向表示线路的右侧。即，PnL表示线路的左侧的位置，PnR表示与PnL对应的线路的右侧的位置。如后所述，各设定点(PnL，PnR)被与单应性矩阵Hn，T建立对应地存储。本实施方式的单应性矩阵H是将地理坐标系(X，Y)与拍摄部101的照相机坐标系(x，y)建立对应的矩阵。
图5是示意性地表示设定点(PnL，PnR)被设定于线路R0、R1的位置的图。这样，针对铁道车辆5行驶的整个范围的线路，纬度、经度与设定点(PnL，PnR)建立了对应。
图6是示意性地对设定点(PnL，PnR)的单应性矩阵Hn，T进行说明的图。能够通过例如非专利文献1的技术来针对各设定点(PnL，PnR)运算这些单应性矩阵H。Hn，T的n表示设定点(PnL，PnR)。例如，如果n＝3，则表示设定点(P3L，P3R)。
图像500a是拍摄部101从在计算单应性矩阵Hn，T时设想的铁道车辆5的位置拍摄到的拍摄图像。另外，图像500b表示了通过设定点(PnL，PnR)的单应性矩阵Hn，T进行变换的线路信息的范围。另外，T表示从设定点(PnL，PnR)到铁道车辆5的拍摄部101为止的距离。例如，0是从设定点(PnL，PnR)到铁道车辆5的拍摄部101为止的基准距离，例如为100米。例如，对于T＝1而言，从设定点(PnL，PnR)到拍摄部101为止的距离是101米，例如对于T＝5而言，从设定点(PnL，PnR)到拍摄部101为止的距离是105米。另一方面，例如对于T＝－1而言，从设定点(PnL，PnR)到拍摄部101为止的距离是99米，例如对于T＝－5而言，从设定点(PnL，PnR)到拍摄部101为止的距离是95米。这些是一个例子，T的数以及对应的距离并不限定于这些。
在如上述那样存储于存储部204的线路信息中设定有地理坐标系(X，Y)。另外，拍摄部101如上述那样固定拍摄系统来进行拍摄。因此，通过单应性矩阵H变换为照相机坐标(x，y)的线路的地理坐标系(X，Y)与由在计算单应性矩阵Hn，T时所设想的从铁道车辆5的位置拍摄到的图像500a内的线路的照相机坐标系表示的位置一致。即，通过单应性矩阵Hn，T进行了坐标变换后的线路的地理坐标系(X，Y)被变换为从与T对应的距离拍摄到的图像500a内的线路的由照相机坐标系表示的位置坐标(x，y)。
图7是表示使用了与设定点(P0L，P0R)对应的单应性矩阵H0，0～H0，T的线路坐标变换部203涉及的坐标变换例的图。图像802是与设定点(P0L，P0R)对应的图像区域，表示由地理坐标系(X，Y)表示的线路信息。图像804～808表示将图像802内的由地理坐标系(X，Y)表示的线路信息通过单应性矩阵H0，0～H0，T变换为照相机坐标系(x，y)的线路信息。
更具体而言，H0，0表示从设定点(P0L，P0R)到铁道车辆5的拍摄部101为止的距离是基准位置的单应性矩阵，例如表示从设定点(P0L，P0R)起近前100米的位置处的单应性矩阵。图像804中的由照相机坐标(x，y)表示的线路信息对应于将与设定点(P0L，P0R)对应的图像802内的由地理坐标系(X，Y)表示的线路信息通过单应性矩阵H0，0变换为照相机坐标的线路信息。即，图像804中的由照相机坐标(x，y)表示的线路信息和将通过基准位置处的拍摄部101拍摄了与图像802对应的区域而得到的图像内的线路的照相机坐标系的位置坐标一致。
同样，图像806中的由照相机坐标(x，y)表示的线路信息对应于通过单应性矩阵H0，T－1将与设定点(P0L，P0R)对应的图像802内的由地理坐标系(X，Y)表示的线路信息变换为照相机坐标的线路信息。即，图像806中的由照相机坐标(x，y)表示的线路信息和通过由T－1表示的位置处的拍摄部101拍摄了与图像802对应的区域而得到的图像内的线路的照相机坐标系的位置坐标一致。同样，图像808中的由照相机坐标(x，y)表示的线路信息对应于通过单应性矩阵H0，T将与设定点(P0L，P0R)对应的图像802内的由地理坐标系(X，Y)表示的线路信息变换为照相机坐标的线路信息。即，图像808中的由照相机坐标(x，y)表示的线路信息和通过由T表示的位置处的拍摄部101拍摄了与图像802对应的区域而得到的图像内的线路的照相机坐标系的位置坐标一致。这样，线路坐标变换部203通过各单应性矩阵H0，T对与设定点(P0L，P0R)对应的图像802内的由地理坐标系(X，Y)表示的线路信息进行变换。这里，T表示根据拍摄状况而设定的－n≤T≤m的范围的整数。n、m是自然数。
由此，线路坐标变换部203能够将与图像802对应的区域变换为从多个拍摄位置T拍摄到的照相机坐标系的线路的位置坐标。其中，在本实施方式中，将与设定点(PnL，PnR)对应的地理坐标系(X，Y)的线路信息通过单应性矩阵Hn，T变换为照相机坐标系(x，y)，将变换后的照相机坐标系(x，y)的线路信息称为模板(n，T)。
图8是表示线路坐标变换部203进行坐标变换而生成的模板例的图。行驶位置信息收集装置30输出的铁道车辆5的位置存在产生误差的情况。鉴于此，行驶位置信息收集装置30考虑产生误差的范围，来生成相对于存在铁道车辆5的拍摄的可能性的范围中的设定点(P0L，P0R)～(PnL，PnR)的模板(0，0)～(n，T)。
这里，设对拍摄图像902进行拍摄时的铁道车辆5的当前位置是设定点(P0L，P0R)的基准位置。该情况下，线路坐标变换部203生成通过单应性矩阵H0，T分别将与设定点(P0L，P0R)对应的地理坐标系(X，Y)的线路信息变换为照相机坐标系(x，y)的线路信息。同样，生成通过单应性矩阵H1，0～Hn，T分别将与设定点(P1L，P1R)～(PnL，PnR)对应的地理坐标系(X，Y)的线路信息变换为照相机坐标系(x，y)的线路信息。根据铁道车辆5的当前位置的测定精度预先设定n以及T的范围。
匹配部205使用例如通过图8所示的单应性矩阵H进行坐标变换而生成的模板(0，T)～(n，T)，从拍摄图像902内检测线路。匹配部205例如将拍摄图像902内的线路表现为将短直线与曲线线段(segment)连结了的线成分。而且，匹配部205选择线成分与模板(0，T)～(n，T)最匹配的模板。
线路输出部206输出最匹配的模板中的线路的位置信息作为拍摄图像902内的线路位置信息。
图9是表示线路输出部206的处理例的图。图像904b～908b分别表示了与在时间T1～T3拍摄到的拍摄图像最匹配的模板。例如，图像904b对应于通过单应性矩阵H0，0对与设定点(P0L，P0R)对应的线路信息904a进行变换而生成的模板。即，线路输出部206对于在时间T1拍摄到的拍摄图像，输出由变换为照相机坐标系(x，y)的图像904b表示的线路信息。同样，图像906b对应于通过单应性矩阵H3，T－1对与设定点(P3L，P3R)对应的线路信息906a进行变换而生成的模板。即，线路输出部206对于在时间T2拍摄到的拍摄图像，输出由变换为照相机坐标系(x，y)的图像906b表示的线路信息。同样，图像908b对应于通过单应性矩阵H6，2对与设定点(P6L，P6R)对应的线路信息908a进行变换而生成的模板。即，线路输出部206对于在时间T3拍摄到的拍摄图像，输出由变换为照相机坐标系(x，y)的图像908b表示的线路信息。
由于这些图像904b～908b是对实际的线路信息904a～908a进行变换而生成的图像，所以线路输出部206输出的照相机坐标系(x，y)的线路信息与实际的线路信息几乎一致。因此，线路输出部206能够从在时间T1～T3拍摄到的拍摄图像内输出与实际的线路对应的线路信息。
图10是表示当前位置检测部207的处理例的图。图像100a表示通过匹配部205中的处理而与拍摄图像最匹配的图像。另外，图像100a是通过单应性矩阵H1，0－3对图像100b进行变换而得到的图像。单应性矩阵H0，T－3是与根据图像100b的设定点(P0L，P0R)预先决定的距离对应的单应性矩阵。即，如果选择了通过匹配部205中的处理而最匹配的图像100a，则能够根据与图像100a的生成所使用的单应性矩阵H0，T－3对应的距离信息准确地生成拍摄到图像100a的当前位置。这样，当前位置检测部207将通过匹配部205中的处理而向最匹配的模板的变换所使用的单应性矩阵H0，T－3对应的位置检测为当前位置。
这里，基于图11以及图12对尖轨状态监视部209的详细情况进行说明。
图11是表示包括尖轨的设定点(PTL，PTR)的图。图像110a是与设定点(PTL，PTR)对应的图像范围。
图12是表示将与设定点(PTL，PTR)对应的图像110a(参照图11)内的线路信息变换为照相机坐标系的线路信息的图。即，图像110b与图像110a(参照图11)对应。即，图像110b与通过匹配部205而最匹配的模板对应。
在与通过匹配部205而最匹配的模板对应的设定点(PTL，PTR)包括尖轨的情况下，尖轨状态监视部209进行尖轨的状态判定。更详细而言，尖轨状态监视部209例如对包括与尖轨所对应的设定点(PTL，PTR)建立了关联的分岔的图像区域T1的拍摄图像中的图像信息进行解析(参照专利文献2)。即，尖轨状态监视部209通过基于包括分岔的图像区域T1在拍摄图像中判定尖轨中的2个部位的开闭部分中的至少任意一个开闭部分的开闭状态，来识别铁道车辆5行进的线路。另外，尖轨状态监视部209例如从中央监视室等取得包括与行进方向有关的信息的信号。而且，尖轨状态监视部209判定开闭状态的识别结果与行进方向是否一致。尖轨状态监视部209在不一致的情况下经由通知部50来通知尖轨状态的异常。
这里，基于图13对参数修正部210详细情况进行说明。图13是表示在由拍摄部101拍摄的图像中拍摄到隧道的例子的图。拍摄部101的曝光被调整为隧道外的明亮度。因此，隧道内的图像存在全黑的可能性。
参数修正部210基于当前位置检测部207输出的铁道车辆5的当前位置向参数设定部102输出包括参数的信息的信号。在存储部204中，与线路信息建立关联还存储有隧道的位置信息。参数修正部210判定相对于铁道车辆5的当前位置由拍摄部101拍摄的图像中是否拍摄到隧道。参数修正部210在判定为拍摄到隧道的情况下，向参数设定部102输出降低曝光的参数。更详细而言，参数修正部210将隧道内的调整区域A130的对比度作为评价值而修正为成为规定的对比度的参数。
另外，参数修正部210还取得尖轨状态监视部209的状态监视信息，在分岔线路的一方有隧道、另一方没有隧道的情况下，根据行进方向来判定是否需要针对隧道内的图像进行曝光控制。例如，在向隧道侧行进的情况下，将提高曝光的参数输出给参数设定部102。另一方面，参数修正部210在即便由拍摄部101拍摄到隧道也不向隧道侧行进的情况下，维持曝光参数。这样，在向隧道侧行进的情况下，能够使曝光符合隧道内的调整区域A130的照度，容易确认隧道内的调整区域A130中的障碍物。另一方面，在不向隧道侧行进的情况下，由于即使拍摄到隧道也维持曝光参数，所以容易确认行进方向侧的障碍物。
图14是表示铁道行驶线路取得系统1的整体的处理的流程的流程图。如图14所示，首先，铁道线路信息取得装置20基于线路的位置信息来核对由拍摄装置10拍摄到的拍摄图像，检测拍摄图像内的线路信息(步骤S11)。
接下来，障碍物检测装置40基于由铁道线路信息取得装置20检测到的线路以及由拍摄装置10拍摄到的拍摄图像，来检测铁道车辆5行进时成为障碍的障碍物(步骤S12)。
接下来，在与通过匹配部205而最匹配的模板对应的设定点包括尖轨的情况下，尖轨状态监视部209进行尖轨的状态判定(步骤S13)。
接下来，行驶位置信息收集装置30将当前位置检测部207检测到的铁道车辆5的当前位置作为准确的当前位置，来修正行驶位置信息收集装置30输出的当前位置(步骤S14)。
然后，参数修正部210基于当前位置检测部207输出的铁道车辆5的当前位置，向参数设定部102输出包括参数的信息的信号(步骤S15)，并结束处理。
图15是表示线路检测处理的详细的处理的流程的流程图。如图15所示，首先，图像取得部201从拍摄部101取得铁道车辆5的行进方向的拍摄图像。(步骤S110)。
接下来，行进预定线路位置取得部202从行驶位置信息收集装置30取得铁道车辆5行进的方向的线路的位置信息。(步骤S112)。
接下来，线路坐标变换部203将图像取得部20取得的拍摄图像与线路的位置信息变换为共同的坐标系。(步骤S113)。这里，变换为照相机坐标系。
接下来，匹配部205在共同的坐标系中取得拍摄图像内的线路所对应的线路的位置信息(步骤S114)。
然后，线路输出部206输出通过匹配部205对照了的与拍摄图像中的线路一致的线路的位置信息(步骤S115)，并结束处理。
图16是表示当前位置修正处理的详细的处理的流程的流程图。如图16所示，首先，当前位置收集部301取得当前位置检测部207输出的铁道车辆5的当前位置作为线路检测结果相关信息(步骤S140)。
接下来，当前位置收集部301通过GNSS(全球定位卫星系统：Global NavigationSatellite System)取得铁道车辆5的当前位置的信息(步骤S141)。
接下来，行驶位置信息收集装置30计算当前位置检测部207输出的铁道车辆5的当前位置与由GNSS取得的铁道车辆5的当前位置的误差(步骤S142)。
然后，在误差超过规定值的情况下，行驶位置信息收集装置30基于当前位置检测部207输出的铁道车辆5的当前位置来修正输出值，经由通知部50通知修正信息(步骤S143)，并结束处理。
图17是表示拍摄参数修正处理的详细的处理的流程的流程图。这里，说明将拍摄图像内的对比度作为评价值来进行参数修正的例子。
如图17所示，首先，参数修正部210取得当前位置检测部207输出的铁道车辆5的当前位置和从当前位置起的处于拍摄范围的隧道的位置信息作为线路检测结果相关信息(步骤S150)。
接下来，参数修正部210取得与隧道的位置信息建立了关联的明亮度调整区域A130的信息(步骤S151)。
接下来，参数修正部210对拍摄图像中的调整区域A130的对比度进行评价(步骤S151)。
然后，参数修正部210将使对比度为规定值的曝光参数输出给参数设定部102(步骤S143)，并结束处理。
如以上说明那样，根据本实施方式，线路坐标变换部203将预先取得的规定范围中的地理坐标系的线路的位置信息和拍摄了规定范围的照相机坐标系的拍摄图像变换为共同的坐标系，匹配部205取得拍摄图像内的线路所对应的地理坐标系的线路的位置信息。由此，能够取得与预先取得的地理坐标系的线路的位置信息对应的拍摄图像内的线路的位置信息。这样，在照相机坐标系的拍摄图像内的线路未被清晰拍摄的情况下，通过变换为共同的坐标系，也能够取得作为拍摄图像中的线路整体而最匹配的地理坐标系中的线路的位置信息，能够更准确地取得拍摄图像中的线路的位置信息。
(第2实施方式)
第2实施方式所涉及的铁道行驶线路取得系统1与第1实施方式所涉及的铁道行驶线路取得系统1的不同点在于，图像投影部203b将照相机坐标系的拍摄图像变换为地理坐标系。以下，对与第1实施方式所涉及的铁道行驶线路取得系统1不同的点进行说明。
图18是表示第2实施方式所涉及的铁道行驶线路取得系统1的构成的框图。如图18所示，图像投影部203b将照相机坐标系的拍摄图像变换为地理坐标系。其中，本实施方式所涉及的图像投影部203b对应于变换部。
图19是表示与设定点(P0L，P0R)对应的单应性矩阵H0，0～H0，T的逆变换矩阵RH0，0～RH0，T的图。照相机坐标系的图像192是在设定点(P0L，P0R)的基准位置拍摄到的图像。因此，图像投影部203b如果通过逆变换矩阵RH0，0对图像192进行逆变换，则与设定点(P0L，P0R)所对应的地理坐标系的图像194一致。另一方面，如果通过逆变换矩阵RH0，1～RH0，T对图像192逆变换，则生成实际不存在的地理坐标系的线路信息的图像196、198。换言之，如果在图像194、196、198之中存在与设定点(P0L，P0R)所对应的地理坐标系的线路信息的图像一致的图像，则表示为从与逆变换为一致的图像的逆变换矩阵RH0，0对应的距离拍摄了与图像194对应的区域。
图20是表示图像投影部203b进行逆坐标变换而生成的逆模板的例子的图。分别表示了通过单应性矩阵H0，0～Hn，T的逆变换矩阵RH0，0～RHn，T对照相机坐标系的图像902的线路信息进行了逆变换的图像。其中，在本实施方式中，将通过单应性矩阵的逆变换矩阵RHn，T变换为地理坐标系(X，Y)的线路信息称为逆模板R(n，T)。图像投影部203b考虑铁道车辆5的位置产生误差的范围，来生成针对存在铁道车辆5的拍摄的可能性的范围中的设定点(P0L，P0R)～(PnL，PnR)的逆模板R(0，T)～R(n，T)。
匹配部205使用例如通过图20所示的单应性矩阵的逆变换矩阵RH进行逆坐标变换而生成的逆模板R(0，T)～R(n，T)，来选择与设定点(P0L，P0R)～(PnL，PnR)所对应的地理坐标系的线路信息最匹配的逆模板。
线路输出部206将最匹配的逆模板中的地理坐标系的线路的位置信息作为拍摄图像902内的线路位置信息进行输出。
图21是表示线路输出部206的处理例的图。图像904b～908b分别是在时间T1～T3拍摄到的拍摄图像，图像904c～908c表示最匹配的逆模板。例如，图像904c对应于通过与设定点(P0L，P0R)对应的逆矩阵RH0，0进行变换而生成的逆模板。即，对于在时间T1拍摄到的拍摄图像904b，线路输出部206输出与设定点(P0L，P0R)对应的地理坐标系(X，Y)的线路信息。
同样，图像906c对应于通过与设定点(P3L，P3R)对应的逆矩阵RH3，T－1进行变换而生成的逆模板。即，对于在时间T2拍摄到的拍摄图像906b，线路输出部206输出与设定点(P3L，P3R)对应的地理坐标系(X，Y)的线路信息。
同样，图像908c对应于通过与设定点(P6L，P6R)对应的逆矩阵RH6，2进行变换而生成的逆模板。即，对于在时间T3拍摄到的图像908b，线路输出部206输出与设定点(P6L，P6R)对应的地理坐标系(X，Y)的线路信息。
当前位置检测部207检测与向通过匹配部205中的处理而最匹配的逆模板的变换所使用的逆变换矩阵RHn，T对应的位置作为当前位置。例如，在通过逆矩阵RH2、T－1进行变换而生成的逆模板最匹配的情况下，对于设定点(P3L，P3R)将与T－1对应的距离检测为铁道车辆5的当前位置。
图22是表示第2实施方式所涉及的当前位置检测处理的详细的处理的流程的流程图。如图21所示，首先，图像取得部201从拍摄部101取得铁道车辆5的行进方向的拍摄图像。(步骤S220)。
接下来，行进预定线路位置取得部202从行驶位置信息收集装置30取得铁道车辆5行进的方向的线路的位置信息。(步骤S221)。
接下来，图像投影部203b将图像取得部20所取得的拍摄图像和线路的位置信息变换为共同的坐标系。(步骤S222)。这里，通过单应性矩阵的逆变换矩阵RH逆变换为地理坐标系。
接下来，匹配部205在共同的坐标系中，取得拍摄图像内的线路所对应的线路的位置信息(步骤S223)。
然后，线路输出部206输出线路的位置信息(步骤S223)，并结束整体处理。
如以上说明那样，根据本实施方式，图像投影部203b对拍摄规定范围而得到的照相机坐标系的拍摄图像进行地理坐标系变换，匹配部205取得拍摄图像内的线路所对应且预先取得的地理坐标系中的线路的位置信息。由此，能够取得与预先取得的线路的位置信息对应的拍摄图像内的线路的位置信息。
(第3实施方式)
第3实施方式所涉及的铁道行驶线路取得系统1与第1实施方式所涉及的铁道行驶线路取得系统1的不同点在于，地理坐标系的线路信息被以(X，Y，Z)的3轴的坐标保存。以下，对与第1实施方式所涉及的铁道行驶线路取得系统1不同的点进行说明。
拍摄部101(参照图2)中使用的照相机是立体照相机，照相机坐标系的图像也由(x，y，z)的3轴的坐标生成。
图23是表示第3实施方式所涉及的线路检测处理的详细的处理的流程的流程图。如图23所示，首先，图像取得部201从拍摄部101取得铁道车辆5的行进方向的立体的拍摄图像。(步骤S230)。
接下来，行进预定线路位置取得部202从行驶位置信息收集装置30取得铁道车辆5行进的方向的线路的位置信息。(步骤S231)。
图24是示意性地表示铁道车辆5在水平面F1和倾斜θ的倾斜面F2行驶的例子的图。如图24所示，在从行驶于倾斜面F2的铁道车辆5拍摄到的立体图像中，对各像素分配有与倾斜对应的z坐标的值。由此，线路坐标变换部203能够根据立体的拍摄图像的坐标信息，从图像的近前侧的z坐标和纵深侧的z坐标的值运算倾斜(步骤S232)。
线路坐标变换部203限定于与运算出的倾斜具有规定范围的倾斜的线路的位置信息(步骤S234)，将图像取得部20所取得的摄图像和线路的位置信息变换为共同的坐标系。(步骤S113)。这里，使用Z轴方向的值亦即标高信息来变换为水平面内的照相机坐标系。以该照相机坐标系变换后的图像成为所谓鸟瞰图。
接下来，匹配部205在共同的坐标系中取得拍摄图像内的线路所对应的线路的位置信息(步骤S114)。通过将倾斜不同的线路的位置信息变换为作为水平面的鸟瞰图，能够抑制倾斜的影响、更高精度地实现匹配部205中的匹配。
而且，线路输出部206输出与由匹配部205对照了的拍摄图像中的线路一致的线路的位置信息(步骤S115)，并结束处理。
如以上说明那样，3轴的地理坐标系的线路信息使用了(X，Y，Z)这3轴的照相机坐标系的立体拍摄图像。由此，线路坐标变换部203能够根据立体拍摄图像的倾斜信息来限制预先取得的规定范围中的线路的位置信息。因此，在匹配部205取得拍摄图像内的线路所对应的线路的位置信息时信息被限制，能够更高速且更高精度地取得与预先取得的线路的位置信息对应的拍摄图像内的线路的位置信息。
这些新的实施方式能够通过其他各种方式加以实施，在不脱离发明主旨的范围能够进行各种省略、置换、变更。这些实施方式及其变形包含于发明的范围、主旨并且包含在技术方案所记载的发明及其等同的范围。

Claims (12)

1.一种铁道线路信息取得装置，具备：
图像取得部，获得铁道车辆的行进方向的拍摄图像；
线路信息取得部，基于所述铁道车辆的位置来取得所述铁道车辆行进的方向的第1线路的位置信息；
变换部，将所述拍摄图像与所述第1线路变换为共同的坐标系；以及
对照部，在所述共同的坐标系中取得所述拍摄图像内的第2线路所对应的所述第1线路的位置信息。
2.根据权利要求1所述的铁道线路信息取得装置，其中，
所述变换部将由所述位置信息表示的所述第1线路的坐标变换为拍摄到所述拍摄图像的拍摄装置的坐标系。
3.根据权利要求1所述的铁道线路信息取得装置，其中，
所述变换部将所述拍摄图像的坐标系变换为所述第1线路的坐标系。
4.根据权利要求1至3中任意一项所述的铁道线路信息取得装置，其中，
所述变换部将所述拍摄图像与所述第1线路的位置信息变换为与多个距离对应的多个坐标系。
5.根据权利要求1至4中任意一项所述的铁道线路信息取得装置，其中，
所述拍摄图像是由立体照相机拍摄到的被分配了三维坐标的图像，
基于所述拍摄图像的坐标系和所述第1线路的坐标系来变换为共同的坐标系。
6.根据权利要求5所述的铁道线路信息取得装置，其中，
使用被分配了三维坐标的图像来运算相对于行进方向的倾斜，
基于所述倾斜来变换为所述共同的坐标系。
7.根据权利要求1至4中任意一项所述的铁道线路信息取得装置，其中，
所述第1线路的所述位置信息具有标高信息，
所述变换部利用标高信息来将所述第1线路的位置和图像的坐标系变换为水平坐标系。
8.根据权利要求1至7中任意一项所述的铁道线路信息取得装置，其中，
还具备：尖轨状态监视部，通过监视线路分岔部处的尖轨的状态并进行与行进线路位置信息的核对，确认尖轨状态的匹配性。
9.根据权利要求2所述的铁道线路信息取得装置，其中，
还具备：设定部，基于通过所述对照部获得的所述第1线路的位置信息，设定所述拍摄装置的拍摄参数。
10.根据权利要求9所述的铁道线路信息取得装置，其中，
所述设定部基于隧道内的规定区域内的对比度来设定拍摄参数。
11.根据权利要求1至10中任意一项所述的铁道线路信息取得装置，其中，
还具备：位置检测部，基于通过所述对照部获得的所述线路位置来检测当前位置。
12.一种铁道行驶线路取得方法，具备：
图像取得工序，获得铁道车辆的行进方向的拍摄图像；
线路信息取得工序，基于所述铁道车辆的位置来取得所述铁道车辆行进的方向的第1线路的位置信息；
变换工序，将所述拍摄图像与所述第1线路变换为共同的坐标系；以及
对照工序，在所述共同的坐标系中，取得所述拍摄图像内的线路所对应的所述第1线路的位置信息。
CN202180039062.1A 2020-07-20 2021-04-20 铁道线路信息取得装置以及铁道线路信息取得方法 Pending CN115916623A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2020123798A JP7455690B2 (ja) 2020-07-20 2020-07-20 鉄道線路情報取得装置、及び鉄道線路情報取得方法
JP2020-123798 2020-07-20
PCT/JP2021/015949 WO2022018918A1 (ja) 2020-07-20 2021-04-20 鉄道線路情報取得装置、及び鉄道線路情報取得方法

Publications (1)

Publication Number Publication Date
CN115916623A true CN115916623A (zh) 2023-04-04

Family

ID=79728596

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180039062.1A Pending CN115916623A (zh) 2020-07-20 2021-04-20 铁道线路信息取得装置以及铁道线路信息取得方法

Country Status (4)

Country Link
EP (1) EP4183660A1 (zh)
JP (1) JP7455690B2 (zh)
CN (1) CN115916623A (zh)
WO (1) WO2022018918A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023177938A (ja) * 2022-06-03 2023-12-14 株式会社東芝 位置情報検知装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4218670B2 (ja) 2005-09-27 2009-02-04 オムロン株式会社 前方撮影装置
JP6452243B2 (ja) 2015-03-17 2019-01-16 日本化薬株式会社 ポリイミド樹脂組成物、及びそれを用いた接着フィルム
JP6855712B2 (ja) 2016-09-05 2021-04-07 株式会社明電舎 分岐器進入可否判定装置及び分岐器進入可否判定方法
JP6826421B2 (ja) 2016-12-02 2021-02-03 東日本旅客鉄道株式会社 設備巡視システム及び設備巡視方法
JP2019218022A (ja) 2018-06-22 2019-12-26 株式会社東芝 線路検出装置

Also Published As

Publication number Publication date
WO2022018918A1 (ja) 2022-01-27
EP4183660A1 (en) 2023-05-24
JP2022020355A (ja) 2022-02-01
JP7455690B2 (ja) 2024-03-26

Similar Documents

Publication Publication Date Title
US10753758B2 (en) Top-down refinement in lane marking navigation
US8452467B2 (en) System and method for verifying track database information
CN103733077B (zh) 用于测量沿着导向轨道移动的车辆的速度和位置的装置、及其对应的方法和计算机程序产品
US11620837B2 (en) Systems and methods for augmenting upright object detection
JP4392389B2 (ja) 車両及び車線認識装置
EP3705371A1 (en) Obstacle detecting device
EP3415400A1 (en) System and method for determining the position of a guided vehicle
US11002553B2 (en) Method and device for executing at least one measure for increasing the safety of a vehicle
JP5698285B2 (ja) 架線位置計測装置及び方法
US11703344B2 (en) Landmark location estimation apparatus and method, and computer-readable recording medium storing computer program programmed to perform method
JP2016052849A (ja) 障害物検出装置及び方法
WO2014188536A1 (ja) ナビゲーション装置
WO2014054288A1 (ja) 車両用ナビゲーションシステム
JP7197282B2 (ja) 物体検知システム
KR101738034B1 (ko) 개선된 차선 인식 방법
CN115916623A (zh) 铁道线路信息取得装置以及铁道线路信息取得方法
JP3486239B2 (ja) 軌道狂い測定装置及び方法並びに曲率測定方法
KR101671223B1 (ko) 영상정보를 이용한 실시간 소음분석 시스템 및 이를 이용한 소음분석 방법
JP2014169940A (ja) 架線位置計測装置及び方法
WO2022097426A1 (ja) 状態判定装置、状態判定システム及び状態判定方法
JP2016168880A (ja) 渡り線設備監視装置及び方法
JP6554943B2 (ja) 画像処理装置、画像処理方法及び評価方法
WO2016038755A1 (ja) 課金処理システム
WO2019194293A1 (ja) 線路検査装置
JP2021163154A (ja) 変化点検出装置、制御方法、プログラム及び記憶媒体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination