JP5531291B2 - Image processing system for trains - Google Patents

Image processing system for trains Download PDF

Info

Publication number
JP5531291B2
JP5531291B2 JP2010070662A JP2010070662A JP5531291B2 JP 5531291 B2 JP5531291 B2 JP 5531291B2 JP 2010070662 A JP2010070662 A JP 2010070662A JP 2010070662 A JP2010070662 A JP 2010070662A JP 5531291 B2 JP5531291 B2 JP 5531291B2
Authority
JP
Japan
Prior art keywords
image
train
equipment
imaging device
line
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010070662A
Other languages
Japanese (ja)
Other versions
JP2011201426A (en
Inventor
毅 水間
希 工藤
昇 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
National Traffic Safety and Environment Laboratory
Original Assignee
National Traffic Safety and Environment Laboratory
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by National Traffic Safety and Environment Laboratory filed Critical National Traffic Safety and Environment Laboratory
Priority to JP2010070662A priority Critical patent/JP5531291B2/en
Publication of JP2011201426A publication Critical patent/JP2011201426A/en
Application granted granted Critical
Publication of JP5531291B2 publication Critical patent/JP5531291B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

この発明は、軌道を走行する列車に搭載されて軌道を撮影する列車搭載用画像処理システムに関し、詳しくは、軌道に沿って設置された沿線設置機器の画像を検出する列車搭載用画像処理システムに関する。なお、列車には一両編成のものや路面電車も含まれる。
また、本発明は、保全・保安管理対象の沿線設置機器の稼働状態の監視にも関する。
The present invention relates to a train-mounted image processing system that is mounted on a train traveling on a track and photographs the track, and more particularly, to a train-mounted image processing system that detects an image of a line-installed device installed along the track. . Trains include single-car trains and trams.
The present invention also relates to monitoring the operating state of equipment installed along the line subject to maintenance / security management.

鉄道では、軌道を走行する列車に車上装置と共にGPS受信機が搭載されて、GPS受信機が衛星航法システム(Global Positioning System)による測位を行うとともに、車上装置がGPS受信機の測位結果に基づき路線マップデータ等も利用して列車位置を得ることにより、停留所における路面電車の発着を判定したり(特許文献1参照)、信号冒進警報装置を安価に実現したり(特許文献2参照)、車両運転状況記録装置を少ない装備で実現したり(特許文献3参照)、運転管理センタでも列車位置を把握したり(特許文献4参照)、といったことができるようになっている。   In a railway, a GPS receiver is mounted on a train traveling on a track together with an on-board device, the GPS receiver performs positioning by a satellite positioning system (Global Positioning System), and the on-board device displays the positioning result of the GPS receiver. Based on the use of route map data and the like to obtain the train position, it is possible to determine the arrival and departure of a streetcar at a stop (see Patent Document 1), to realize a signal advance warning device at low cost (see Patent Document 2), The vehicle operation status recording device can be realized with a small amount of equipment (see Patent Document 3), and the train position can also be grasped at the operation management center (see Patent Document 4).

なかでも、車両運転状況記録装置では(特許文献3参照)、列車の前方の軌道を第1撮像装置で撮って前方軌道映像を得るとともに、列車の運転席を第2撮像装置で撮って運転席映像を得て、GPS利用で得た列車の位置情報と一緒に前方軌道映像と運転席映像を記録するようになっている。
そうして記録された映像は、列車走行後に行われる路線状況や運転状態の確認などに役立っている。
Among them, in the vehicle driving status recording device (see Patent Document 3), the trajectory ahead of the train is taken with the first imaging device to obtain a forward trajectory image, and the driver's seat is taken with the second imaging device. The video is obtained, and the forward trajectory video and the driver's seat video are recorded together with the train position information obtained by using the GPS.
The video recorded in this way is useful for confirming the route conditions and driving conditions performed after the train travels.

一方、沿線設置機器など保全・保安管理対象の信号保安設備に各種センサを取り付けて遠隔自動計測を行うことにより管理対象機器や設備の稼働状態を監視する定常状態監視システムが実用化されている(例えば非特許文献1参照)。
このシステムでは、測定データが各センサから情報ネットワーク経由でセンタに収集され、収集したデータや機器の稼働状態が、端末にオンライン表示されるとともに、記録もされるようになっている。
On the other hand, a steady-state monitoring system that monitors the operating status of managed devices and equipment by attaching various sensors to signal security equipment that is subject to maintenance and security management, such as equipment installed along the line, has been put into practical use ( For example, refer nonpatent literature 1).
In this system, measurement data is collected from each sensor to the center via an information network, and the collected data and the operating state of the device are displayed on-line and recorded on the terminal.

特開2006−240478号公報Japanese Patent Laid-Open No. 2006-240478 特開2007−159309号公報JP 2007-159309 A 特開2008−221902号公報JP 2008-221902 A 特開2009−234349号公報JP 2009-234349 A

黄程陽・長島高洋著「定常状態監視システム開発の変遷」DAIDO101、p.2−9、大同信号株式会社発行2002年1月“History of Steady State Monitoring System Development” by DAIDO101, p. 2-9, issued by Daido Signal Co., Ltd. January 2002

しかしながら、このような従来の定常状態監視システムでは、鉄道の沿線に分散して設置された機器にセンサを取り付けなければならないので、総ての機器を監視しようとすると必然的にセンサの個数が多くなるため、費用が嵩む。また、センタへ情報を伝送するために、各機器を有線で接続するので、信号ケーブルの屋外敷設も長距離に及び、システムが大掛かりになるため、気軽に導入できるとは言えない。
これに対し、上述した車両運転状況記録装置は、車上の撮像装置で沿線を撮ることができるので設備導入費用が比較的安くてすむうえ、GPSを利用して位置情報を得ることから列車位置の誤差が累積しないので長距離の測定に向いている。
そこで、沿線設置機器の稼働状態の監視にGPSや画像処理を上手く利用することにより、沿線設置機器稼働状態監視システムを安価で而も導入容易な列車搭載用画像処理システムとして実現することが技術的な課題となる。
However, in such a conventional steady-state monitoring system, sensors must be attached to equipment installed in a distributed manner along the railway. Therefore, when all the equipment is monitored, the number of sensors is necessarily large. Therefore, the cost increases. In addition, since each device is connected by wire to transmit information to the center, the signal cable is laid out over a long distance and the system becomes large, so it cannot be said that it can be easily introduced.
On the other hand, the above-mentioned vehicle driving situation recording device can take a line along an imaging device on the vehicle, so that the equipment introduction cost is relatively low, and the position of the train is obtained by using GPS to obtain position information. This is suitable for long distance measurement.
Therefore, it is technically possible to realize a railway-installed equipment operating state monitoring system as an image processing system for on-board installation that is inexpensive and easy to introduce by using GPS and image processing well for monitoring the operating conditions of equipment installed along the line. It becomes a difficult task.

本発明の列車搭載用画像処理システムは(解決手段1)、このような課題を解決するために創案されたものであり、鉄道の軌道を走行する列車に搭載される列車搭載用画像処理システムにおいて、車外を撮る撮像装置と、衛星航法システムによる測位を行うGPS受信機と、前記GPS受信機の測位結果に基づいて列車位置を得る列車位置検出部と、前記軌道に沿って設置された沿線設置機器に係る機器位置および機器画像をデータ保持する沿線設置機器データ記憶部と、前記列車位置の前記機器位置への接近を検知して異なる接近位置において前記撮像装置で撮った画像を取り込むとともにその複数の画像から前記機器画像を検出して検出結果を対比することにより前記沿線設置機器の動作を確認する沿線設置機器検出部とを備えていることを特徴とする。   The train-mounted image processing system of the present invention (Solution 1) was created in order to solve such a problem. In the train-mounted image processing system mounted on a train traveling on a railroad track, An imaging device that captures the outside of the vehicle, a GPS receiver that performs positioning using a satellite navigation system, a train position detection unit that obtains a train position based on the positioning result of the GPS receiver, and a line installation that is installed along the track A line-installed device data storage unit for storing device position and device image data related to the device, and detecting the approach of the train position to the device position and capturing images taken by the imaging device at different approach positions A line installation device detection unit that detects the apparatus image from the image and compares the detection results to confirm the operation of the line installation device. The features.

また、本発明の列車搭載用画像処理システムは(解決手段2)、上記解決手段1の列車搭載用画像処理システムであって、前記撮像装置が、前方軌道撮影用の第1撮像装置と後方軌道撮影用の第2撮像装置とを含んでおり、前記沿線設置機器検出部が、前記機器位置の列車通過前に前記第1撮像装置で撮った前方軌道の画像と前記機器位置の列車通過後に前記第2撮像装置で撮った後方軌道の画像とを対象にして画像処理を行うものであることを特徴とする。   The train-mounted image processing system of the present invention is (the solution means 2), the train-mounted image processing system of the solution means 1, wherein the imaging device includes a first imaging device for forward trajectory imaging and a backward trajectory. A second imaging device for photographing, and the equipment installed along the line detects the image of the forward trajectory taken by the first imaging device before passing the train at the equipment position and the train after passing the equipment position. Image processing is performed on the image of the backward trajectory taken by the second imaging device.

さらに、本発明の列車搭載用画像処理システムは(解決手段3)、上記解決手段2の列車搭載用画像処理システムであって、前記沿線設置機器検出部が、前記第1撮像装置で撮った前方軌道の画像において前記機器画像を検出する際には前記列車位置と前記機器位置とに基づいて画像探索位置を決定するが、前記第2撮像装置で撮った後方軌道の画像において前記機器画像を検出する際には前記の前方軌道の画像について検出済みの画像位置に基づいて画像探索位置を決定するようになっていることを特徴とする。   Further, the train-mounted image processing system of the present invention is (the solution means 3), the train-mounted image processing system of the above-mentioned solution means 2, wherein the along-line installation device detection unit takes the front taken by the first imaging device. When detecting the device image in the trajectory image, the image search position is determined based on the train position and the device position, but the device image is detected in the rear trajectory image taken by the second imaging device. In this case, the image search position is determined based on the detected image position for the image of the forward trajectory.

このような本発明の列車搭載用画像処理システムにあっては(解決手段1)、車上の撮像装置で沿線を撮ることができるので設備導入費用が比較的安くてすむし、GPSを利用して位置情報を得ることから列車位置の誤差が累積しないので長距離の測定に向いている、という車両運転状況記録装置の利点が引き継がれてる。そのうえ、沿線設置機器の機器位置と機器画像がデータ保持されており、それを参照して機器位置への接近検知と異なる接近位置での車外画像の取り込みと複数の車外画像からの機器画像検出と画像検出結果の対比による沿線設置機器の動作確認とが行われる。   In such a train-mounted image processing system of the present invention (Solution 1), it is possible to take a line along the vehicle with an imaging device on the vehicle, so the equipment introduction cost is relatively low, and GPS is used. Since the position information is obtained, the train position error does not accumulate, so the advantage of the vehicle operation status recording device that it is suitable for long distance measurement is inherited. In addition, the device position and the device image of the equipment installed along the line are stored, and referring to it, the detection of the approach to the device position, the capture of the outside image at a different approach position, and the detection of the device image from a plurality of outside images The operation of the equipment installed along the line is checked by comparing the image detection results.

これにより、列車の接近や通過に応じて動作する沿線設置機器の状態変化が画像により確認されることとなるので、従来の定常状態監視システムように多数の機器にセンサを取り付けたり各機器を有線接続したりする必要がなくなる。そのため、費用やシステム規模が削減されるので、従来の定常状態監視システムより、気軽に導入することができる。
したがって、この発明によれば、安価で而も導入容易な列車搭載用画像処理システムにて沿線設置機器の稼働状態を監視することができる。
As a result, changes in the status of installed equipment that operates in response to the approaching and passing of the train are confirmed by images, so sensors can be attached to many devices and each device can be wired as in a conventional steady state monitoring system. No need to connect. Therefore, since the cost and the system scale are reduced, it can be introduced more easily than the conventional steady state monitoring system.
Therefore, according to the present invention, it is possible to monitor the operation state of the equipment installed along the line with a train-mounted image processing system that is inexpensive and easy to introduce.

また、本発明の列車搭載用画像処理システムにあっては(解決手段2)、前方軌道撮影用の第1撮像装置に加えて後方軌道撮影用の第2撮像装置も装備されていて、機器位置の列車通過前に第1撮像装置で撮った前方軌道の画像と機器位置の列車通過後に第2撮像装置で撮った後方軌道の画像とが沿線設置機器検出部の画像処理の対象にされる。そのため、沿線設置機器に係る列車通過の前後の画像からの検出結果が対比されるので、列車通過に応じて動作する踏切しゃ断機や転てつ機の稼働状態を的確に監視することができる。   In addition, the train-mounted image processing system of the present invention (solution means 2) is equipped with a second imaging device for backward trajectory imaging in addition to the first imaging device for forward trajectory imaging, and the equipment position The image of the forward trajectory taken by the first imaging device before passing the train and the image of the rear trajectory taken by the second imaging device after passing the train at the equipment position are subjected to image processing by the along-line equipment detector. For this reason, the detection results from the images before and after the train passing according to the equipment installed along the line are compared, so that the operating state of the railroad crossing breaker and the turning machine operating according to the train passing can be accurately monitored.

さらに、本発明の列車搭載用画像処理システムにあっては(解決手段3)、対比のため画像探索が二度以上行われるが、第1撮像装置で撮った前方軌道の車外映像から全体画像を得て、その中から沿線設置機器検出部が機器画像を検出するときには、列車位置と機器位置とに基づいて画像探索位置が決定される。これらの列車位置と機器位置に撮像装置取付仕様など既知の撮像条件を加えれば、全体画像のうち何処に機器画像が位置しているのかが幾何的演算で判明するので、画像探索位置が容易かつ迅速に求まる。   Furthermore, in the train-mounted image processing system of the present invention (solution 3), the image search is performed twice or more for comparison, but the entire image is obtained from the outside image of the forward track taken by the first imaging device. Thus, when the equipment installed along the line detects a device image, the image search position is determined based on the train position and the device position. If known imaging conditions such as imaging device mounting specifications are added to these train positions and equipment positions, where the equipment image is located in the entire image can be determined by geometric calculation, the image search position is easy and Find quickly.

しかも、第2撮像装置で撮った後方軌道の車外映像から全体画像を得て、その中から沿線設置機器検出部が機器画像を検出するときは、前方軌道の画像について既に探索も決定も済んでいる既知の位置に基づいて新たな画像探索位置が決定されるので、画像探索位置がより容易かつ迅速に求まる。そのため、画像探索を何度か行っても、画像処理を短時間で終えることができるので、沿線設置機器の稼働状態をリアルタイムで確認することが可能となる。そして、機器異常があれば早期発見がなされ、それに応じて早期修繕することで機器が速やかに正常復帰するので、事故発生の未然防止にも貢献することとなる。   In addition, when the entire image is obtained from the rear-trajectory video taken by the second imaging device, and the installation equipment detection unit detects the equipment image from the whole image, the search for the forward-trajectory image has already been made and determined. Since a new image search position is determined based on the known position, the image search position can be obtained more easily and quickly. For this reason, even if the image search is performed several times, the image processing can be completed in a short time, so that it is possible to check the operating state of the equipment installed along the line in real time. And if there is a device abnormality, early detection is made, and early repairs are made accordingly, so that the device quickly returns to normal, contributing to the prevention of accidents.

本発明の列車搭載用画像処理システムの実施例1である運転状況記録装置の構造等を示し、(a)が列車等の平面図、(b)が運転状況記録装置の外観斜視図、(c)がデータ処理装置(演算装置)のブロック図である。The structure etc. of the driving | running condition recording apparatus which is Example 1 of the image processing system for a train of this invention are shown, (a) is a top view of a train etc., (b) is an external appearance perspective view of a driving | running condition recording apparatus, (c) ) Is a block diagram of a data processing device (arithmetic device). 列車搭載用画像処理システムの動作状態を示し、(a)が列車等の平面図、(b)が列車等の側面図、(c)が前方軌道映像の例、(d)がその画像に探索位置を示した例、(e)がマッチング対象のパターン例である。The operation state of the train-mounted image processing system is shown, (a) is a plan view of a train, etc., (b) is a side view of the train, etc., (c) is an example of a forward trajectory image, and (d) is searched for that image. An example showing the position, (e) is a pattern example to be matched. 列車搭載用画像処理システムの動作状態を示し、(a)が前方軌道映像で見つかった画像位置を示した例、(b)が後方軌道映像用の画像探索位置を示した例、(c)が後方軌道映像の例、(d)がその画像に探索位置を示した例、(e)がマッチング対象のパターン例である。The operational state of the train-mounted image processing system is shown, (a) shows an example of an image position found in a forward trajectory image, (b) shows an example of an image search position for a backward trajectory image, and (c) shows An example of a backward trajectory image, (d) is an example in which the search position is shown in the image, and (e) is a pattern example to be matched.

このような本発明の列車搭載用画像処理システムについて、これを実施するための具体的な形態を、以下の実施例1により説明する。
図1〜3に示した実施例1は、上述した解決手段1〜3(出願当初の請求項1〜3)を総て具現化したものであり、既述した特許文献3記載の運転状況記録装置30に沿線設置機器データ46と沿線設置機器検出部47と撮像条件データ48を追加するとともに、撮像装置33を車外の後方軌道撮影用に転用することにより、列車搭載用画像処理システムを運転状況記録装置30への組み込み態様で実現している。
With respect to such a train-mounted image processing system of the present invention, a specific mode for carrying out this will be described with reference to Example 1 below.
The embodiment 1 shown in FIGS. 1 to 3 embodies all of the above-described solving means 1 to 3 (claims 1 to 3 at the beginning of the application), and records the operation status described in Patent Document 3 described above. Along with the equipment installed along the equipment 30 along the line 30, the equipment installed along the equipment installed along the line 47, and the imaging condition data 48, and the imaging apparatus 33 is used for taking a picture of the rear orbit outside the vehicle. This is realized in a manner incorporated in the recording device 30.

本発明の列車搭載用画像処理システムの一実施例である運転状況記録装置30について、その具体的な構成を、図面を引用して説明する。図1は、運転状況記録装置30の構造を示し、(a)が搭載先の列車20の等の平面図、(b)が運転状況記録装置30の外観斜視図、(c)がデータ処理装置40(演算装置)のブロック図である。   A specific configuration of the driving status recording apparatus 30 which is an embodiment of the train-mounted image processing system of the present invention will be described with reference to the drawings. 1A and 1B show the structure of an operation status recording device 30, where FIG. 1A is a plan view of the installed train 20 and the like, FIG. 1B is an external perspective view of the operation status recording device 30, and FIG. It is a block diagram of 40 (arithmetic unit).

運転状況記録装置30は(図1(a)参照)、レール10(軌道)上を走行する列車20に搭載されるものである。
その列車20の先頭車両の中の前側部分には運転席21が設けられており(図1(a)参照)、そこには速度計22や高度計23が装備されている(図1(b)参照)。
速度計22は、例えば台車部に設置された速度発電機などからなるが、信号出力部に改造が施されて、信号ケーブル等で運転状況記録装置30に接続され、速度情報Vを運転状況記録装置30へ随時送出するようになっている。高度計23も、随時、高度情報Hを取得して運転状況記録装置30へ送出するものであり、市販の汎用品で足りる。
The driving status recording device 30 (see FIG. 1A) is mounted on the train 20 traveling on the rail 10 (track).
A driver's seat 21 is provided in the front portion of the leading vehicle of the train 20 (see FIG. 1 (a)), and a speedometer 22 and an altimeter 23 are equipped there (FIG. 1 (b)). reference).
The speedometer 22 is composed of, for example, a speed generator installed in the carriage unit, but the signal output unit is modified and connected to the driving status recording device 30 by a signal cable or the like, and the speed information V is recorded in the driving status. The data is sent to the device 30 at any time. The altimeter 23 also obtains altitude information H as needed and sends it to the driving status recording device 30, and a commercially available general-purpose product is sufficient.

この運転状況記録装置30(図1(b)参照)には、列車20の前方軌道11を撮る撮像装置32(第1撮像装置)と、列車20の後方軌道12を撮る撮像装置33(第2撮像装置)と、衛星航法システムによる測位を行うGPSアンテナ34及びGPS受信機35と、ハードディスク等からなり十分な記憶容量を具えた記録装置36と、プログラマブルなマイクロプロセッサシステムやデジタルシグナルプロセッサ等からなり列車位置検出部41や記録制御部44として機能するデータ処理装置40と、GPS受信機35と記録装置36とデータ処理装置40と図示しない電源ユニット等を納めた筐体31とが、設けられている。筐体31は、運転席21の下や脇などで空いているところに設置される。   The driving status recording device 30 (see FIG. 1B) includes an imaging device 32 (first imaging device) that captures the forward trajectory 11 of the train 20, and an imaging device 33 (second imaging) that captures the rear trajectory 12 of the train 20. An imaging device), a GPS antenna 34 and a GPS receiver 35 for positioning by a satellite navigation system, a recording device 36 including a hard disk or the like and a sufficient storage capacity, and a programmable microprocessor system or a digital signal processor. A data processing device 40 that functions as a train position detection unit 41 and a recording control unit 44, and a housing 31 that houses a GPS receiver 35, a recording device 36, a data processing device 40, a power supply unit (not shown), and the like are provided. Yes. The casing 31 is installed in a vacant space under the driver's seat 21 or on the side.

撮像装置32は(図1(a),(b)参照)、例えばCCDカメラからなり、撮影方向を前方軌道11に向けた状態で(図1(a)の一点鎖線を参照)、列車20の前端部たとえば運転席21上面の最前部位に設置され、撮った前方軌道映像D1を映像信号ケーブルでデータ処理装置40へ随時送出するようになっている。
撮像装置33は(図1(a),(b)参照)、例えばCCDカメラからなり、撮影方向を後方軌道12に向けた状態で(図1(a)の二点鎖線を参照)、列車20の後端部たとえば車掌室の最後尾部位に設置され、撮った運転席映像D2を映像信号ケーブルでデータ処理装置40へ随時送出するようになっている。
The imaging device 32 (see FIGS. 1 (a) and 1 (b)) is composed of, for example, a CCD camera, and in the state where the shooting direction is directed to the forward track 11 (see the dashed line in FIG. 1 (a)), It is installed at the front end portion, for example, the foremost portion of the upper surface of the driver's seat 21, and the forward trajectory image D1 taken is sent to the data processing device 40 at any time by a video signal cable.
The imaging device 33 (see FIGS. 1A and 1B) is composed of, for example, a CCD camera, and in a state where the photographing direction is directed to the rear trajectory 12 (see the two-dot chain line in FIG. 1A), the train 20 The driver's seat video D2 is installed at the rear end of the rear of the vehicle, for example, at the rearmost part of the conductor's compartment, and is sent to the data processing device 40 through the video signal cable as needed.

GPSアンテナ34は、列車20の天井などに設置されて、GPS(Global Positioning Satellite)衛星から電波を受信し、それを同軸ケーブル等でGPS受信機35へ随時送信するようになっている。
GPS受信機35は、衛星航法システム(Global Positioning System)による測位を行って、例えば緯度対応値Xと経度対応値Yと高度対応値Zの組データである測位結果[X,Y,Z]をデータ処理装置40へ随時送出するようになっている。
The GPS antenna 34 is installed on the ceiling of the train 20 or the like, receives radio waves from a GPS (Global Positioning Satellite) satellite, and transmits the radio waves to the GPS receiver 35 at any time using a coaxial cable or the like.
The GPS receiver 35 performs positioning using a satellite positioning system (Global Positioning System) and, for example, obtains a positioning result [X, Y, Z] that is a set data of a latitude corresponding value X, a longitude corresponding value Y, and an altitude corresponding value Z. The data is sent to the data processor 40 as needed.

記録装置36は(図1(c)参照)、データを多数のファイルに分けて保持するようになっており、例えば、特異事象のイベント情報は、発生時刻や発生位置の情報と共に、テキスト形式のファイルで蓄積されるようになっている。また、前方軌道映像D1や後方軌道映像D2は、30秒や1分といった時間単位で分割されて、デジタル動画規格のMPEG(Moving Picture Experts Group)形式でファイルに記録されるようになっている。さらに、そのファイルには、撮影日時が分かるように、映像D1,D2を取得した年月日と時刻とが埋め込まれるようにもなっている。   The recording device 36 (see FIG. 1 (c)) is configured to hold the data by dividing it into a number of files. For example, the event information of the singular event is in text format along with the information on the occurrence time and the occurrence position It is accumulated as a file. Further, the forward trajectory video D1 and the backward trajectory video D2 are divided in units of time such as 30 seconds or 1 minute and recorded in a file in the MPEG (Moving Picture Experts Group) format of the digital moving image standard. Further, the date and time when the videos D1 and D2 were acquired are embedded in the file so that the shooting date and time can be understood.

データ処理装置40は(図1(c)参照)、例えばマイクロプロセッサのプログラムで具現化された列車位置検出部41と記録制御部44と映像処理部45と沿線設置機器検出部47と、例えば不揮発性メモリからなるデータ記憶部に保持されたマップデータ42と沿線設置機器データ46と撮像条件データ48と、電源供給停止時も電池等で動作可能な内蔵の時計43とを具えている。
映像処理部45は、前方軌道映像D1や後方軌道映像D2をそれぞれMPEG形式のうちでも圧縮度の高い例えばAVI(Audio Video Interleave)形式に変換して記録制御部44に引き渡すとともに、前方軌道映像D1も後方軌道映像D2も取り込み要求に応じて一コマずつ沿線設置機器検出部47に引き渡すようになっている。
The data processing device 40 (see FIG. 1 (c)) includes, for example, a train position detection unit 41, a recording control unit 44, a video processing unit 45, a line installation device detection unit 47, which are embodied by a program of a microprocessor, Map data 42, along-line installation device data 46, imaging condition data 48, and a built-in clock 43 that can be operated by a battery even when power supply is stopped.
The video processing unit 45 converts the forward trajectory video D1 and the rear trajectory video D2 into, for example, an AVI (Audio Video Interleave) format having a high degree of compression in the MPEG format and delivers it to the recording control unit 44, and forward trajectory video D1. In addition, the rear trajectory image D2 is also handed over to the installation equipment detector 47 along the line one frame at a time in response to the request for capturing.

列車位置検出部41は、GPS受信機35から測位結果[X,Y,Z]を取得し、それをマップデータ42に照らして修正する等のことにより迷走を防止するとともに、速度計22から速度情報Vを取得し、高度計23から高度情報Hを取得して、速度情報Vと高度情報HをGPS受信機35の測位結果[X,Y,Z]に反映させることで、より正確な列車位置Q[X,Y,Z]を得るものである。
また、列車位置検出部41は、列車位置Q[X,Y,Z]に基づいて停車位置超過の特異事象を検出するとともに、速度情報Vに基づいて速度偏差過大の特異事象を検出して、それらの特異事象Eを記録制御部44に引き渡すようにもなっている。
The train position detection unit 41 acquires the positioning result [X, Y, Z] from the GPS receiver 35, corrects it in light of the map data 42, etc. By acquiring information V, acquiring altitude information H from altimeter 23, and reflecting speed information V and altitude information H in the positioning result [X, Y, Z] of GPS receiver 35, a more accurate train position Q [X, Y, Z] is obtained.
The train position detection unit 41 detects a singular event exceeding the stop position based on the train position Q [X, Y, Z], and detects a singular event exceeding the speed deviation based on the speed information V. Those unique events E are delivered to the recording control unit 44.

記録制御部44は、映像処理部45からAVI形式の前方軌道映像D1及び後方軌道映像D2を入力して、それぞれを上記の時間単位で分割し、さらに時計43からの日時Tを埋め込んだファイル名を付けて、記録装置36に記録するようになっている。
また、記録制御部44は、上記の特異事象Eに加えて、映像D1,D2の分割単位を記録したことを示す定時記録情報も、イベント情報Eとして扱い、それらの情報を記録装置36のファイルに追加で書き込むようにもなっている。
The recording control unit 44 receives the AVI format forward trajectory video D1 and the backward trajectory video D2 from the video processing unit 45, divides each of them in the above time unit, and further embeds the date and time T from the clock 43. And is recorded on the recording device 36.
Further, in addition to the above-described unique event E, the recording control unit 44 also handles scheduled recording information indicating that the divided units of the videos D1 and D2 are recorded as event information E, and these information is stored in the file of the recording device 36. In addition to write to.

沿線設置機器データ46には、レール10(軌道)に沿って設置された沿線設置機器のうち列車走行接近時に画像検出したい物それぞれについて機器位置Nと機器画像Pとの組データが一組ずつ予め設定されている。
沿線設置機器の典型例は、信号機や,踏切しゃ断機,転てつ機などであり、それを撮っておいた画像が機器画像Pであるが、これは、映像D1,D2の一コマからなる全体画像よりも小さい。機器位置Nは列車位置Qと同じく[X,Y,Z]で規定される。
The installed equipment data 46 along the rail line 10 (track) includes a set data of the equipment position N and the equipment image P in advance for each of the equipment installed along the rail 10 (track) for which an image is to be detected when approaching the train. Is set.
Typical examples of equipment installed along the line are traffic lights, railroad crossing breakers, turning machines, etc., and the image that has been taken is the device image P, which consists of one frame of the images D1 and D2. Smaller than the whole image. The equipment position N is defined by [X, Y, Z] like the train position Q.

撮像条件データ48は、列車20への撮像装置32,33の装着状態に係る撮像条件Mであり、撮像装置32に係る撮像条件Mには、列車位置Qと撮像装置32との前後方向差ΔXと左右方向差ΔYと上下方向差ΔZに加えて、撮像装置32の視点方向の左右方向傾きθと上下方向傾きφも含まれている。撮像装置33に係る撮像条件Mにも、列車位置Qと撮像装置33との前後方向差ΔXと左右方向差ΔYと上下方向差ΔZと、撮像装置33の視点方向の左右方向傾きθと上下方向傾きφとが、含まれている。これらの撮像条件Mも初期設定の一環として撮像条件データ48に予め設定されている。   The imaging condition data 48 is an imaging condition M related to the mounting state of the imaging devices 32 and 33 on the train 20, and the imaging condition M related to the imaging device 32 includes a longitudinal difference ΔX between the train position Q and the imaging device 32. In addition to the horizontal difference ΔY and the vertical difference ΔZ, the horizontal tilt θ and the vertical tilt φ in the viewpoint direction of the imaging device 32 are also included. Also in the imaging condition M related to the imaging device 33, the front-rear direction difference ΔX, the left-right direction difference ΔY, the up-down direction difference ΔZ between the train position Q and the imaging device 33, the left-right inclination θ in the viewpoint direction of the imaging device 33, and the up-down direction An inclination φ is included. These imaging conditions M are also preset in the imaging condition data 48 as part of the initial setting.

沿線設置機器検出部47は、列車位置検出部41から列車位置Qを得るとともに、列車進行方向に在って最も近い沿線設置機器の機器位置Nを沿線設置機器データ46から選出して、その沿線設置機器が前方軌道映像D1に映り込むところまで列車位置Qが進んだことを確認する。そして、列車位置Qの機器位置Nへの十分な接近を検知すると、前方軌道映像D1の一コマを全体画像(D1)として取り込むとともに、そのときの列車位置Qと組になっている機器画像Pを検出対象の部分画像として沿線設置機器データ46から選出するようになっている。   The along-line installation equipment detection unit 47 obtains the train position Q from the train position detection unit 41, selects the apparatus position N of the closest installation line equipment in the train traveling direction from the along-line installation equipment data 46, and It is confirmed that the train position Q has advanced to the place where the installed device is reflected in the forward track image D1. When a sufficient approach of the train position Q to the device position N is detected, one frame of the forward trajectory image D1 is captured as an entire image (D1), and the device image P paired with the train position Q at that time is captured. Are selected from the installed equipment data 46 along the line as a partial image to be detected.

また、沿線設置機器検出部47は、選出した全体画像(D1)の中をパターンマッチングにて探索することで機器画像Pが含まれて存在しているのか否か更には何処に存在しているのかを調べる機器画像検出処理も行うが、それに先立ち、画像探索時間の短縮のため、全体画像(D1)において探索を開始する位置となる画像探索位置を、列車位置Qと機器位置Nと撮像条件Mとに基づいて決定するようになっている。その算出式は種々変形が可能なので具体的な提示は割愛するが、何れの式で演算しても端数誤差は別として、幾何学的関係によって、画像探索位置は一意に定まるようになっている。   Further, the along-line installation device detection unit 47 searches the entire selected image (D1) by pattern matching to determine whether or not the device image P is included and where it exists. In order to shorten the image search time, the image search position that is the position where the search is started in the entire image (D1) is determined as the train position Q, the device position N, and the imaging condition. It is determined based on M. Since the calculation formula can be modified in various ways, the specific presentation will be omitted. However, regardless of the fractional error, the image search position is uniquely determined by the geometric relationship, regardless of the fractional error. .

そして、全体画像(D1)における画像探索位置が決まると、そこを中心にして探索範囲を広げながら全体画像(D1)の中でその部分画像と機器画像Pとのパターンマッチング処理を許容時間内で繰り返すようになっている。
さらに、沿線設置機器検出部47は、全体画像(D1)の中に機器画像Pを見つけたときには、その機器画像Pの検出結果すなわち全体画像(D1)における機器画像Pの検出位置や拡縮度などを後の対比のために一時記憶しておくようになっている。
When the image search position in the entire image (D1) is determined, pattern matching processing between the partial image and the device image P in the entire image (D1) is performed within an allowable time while expanding the search range centering on the image search position. It is supposed to repeat.
Furthermore, when the equipment installation detection unit 47 finds the device image P in the entire image (D1), the detection result of the device image P, that is, the detection position and the enlargement / reduction degree of the device image P in the entire image (D1), etc. Is temporarily stored for later comparison.

また、沿線設置機器検出部47は、列車位置Qが機器位置Nに到達するまでは上述した列車位置Qの確認と画像D1の取り込みと画像探索位置の決定とパターンマッチングの処理と画像位置の一時記憶を繰り返し、列車位置Qが機器位置Nを通過してからは列車位置Qの確認と画像D2の取り込みと画像探索位置の決定とパターンマッチング処理を繰り返すようになっている。通過前と通過後で相違する主な点は、画像の取り込み元が前方軌道映像D1から後方軌道映像D2に切り替わることと、画像探索位置の決定手順が時間短縮と簡素化のため通過前後で異なっていることであり、他には大差がない。   Further, the along-line installation device detection unit 47 confirms the train position Q, captures the image D1, determines the image search position, pattern matching processing, and temporarily stores the image position until the train position Q reaches the device position N. The storage is repeated, and after the train position Q passes the equipment position N, the confirmation of the train position Q, the capture of the image D2, the determination of the image search position, and the pattern matching process are repeated. The main differences between before and after the passage are that the source of the image is switched from the forward trajectory image D1 to the backward trajectory image D2, and the procedure for determining the image search position is different before and after the passage to shorten the time and simplify it. There are no other differences.

さらに、沿線設置機器検出部47は、画像探索位置を決定する際、列車位置Qが機器位置Nを通過する前は、上述のように撮像装置32で撮った前方軌道11の映像D1の一コマを全体画像(D1)としたうえで、列車位置Qと機器位置Nと撮像条件Mとに基づいて画像探索位置を決定するが、列車位置Qが機器位置Nを通過した後は、撮像装置33で撮った後方軌道12の映像D2の一コマを全体画像(D2)に採用するとともに、前方軌道11の全体画像(D1)について既に探索も検出も済んで一時記憶されていた画像位置を参照し、その決定済み画像位置に基づいて全体画像(D2)における新たな画像探索位置を決定する。例えば、決定済み画像位置の画像内左右対称位置を左右反転で得てから、それを撮像条件Mで修正する等のことで、画像探索位置を決定するようになっている。   Further, when determining the image search position, the line-installed equipment detection unit 47 before the train position Q passes the equipment position N, one frame D1 of the forward trajectory 11 taken by the imaging device 32 as described above. Is set as the whole image (D1), and the image search position is determined based on the train position Q, the equipment position N, and the imaging condition M. After the train position Q passes the equipment position N, the imaging device 33 is determined. One frame D2 of the rear trajectory 12 taken in step 1 is used for the entire image (D2), and the entire image (D1) of the front trajectory 11 has already been searched and detected and is temporarily stored. Based on the determined image position, a new image search position in the whole image (D2) is determined. For example, the image search position is determined by, for example, obtaining the symmetrical position in the image of the determined image position by left-right reversal and then correcting it with the imaging condition M.

また、沿線設置機器検出部47は、列車位置Qが機器位置Nに接近したことを検知してから、上述したように異なる幾つかの接近位置において、撮像装置32や撮像装置33で撮った前方軌道映像D1や後方軌道映像D2から画像を取り込むとともに、その複数の全体画像(D1,D2)から機器画像Pを検出して、それらの検出結果を対比することにより該当箇所の沿線設置機器の動作を確認する。具体的には、沿線設置機器が信号機であれば、機器位置Nの列車通過前に異なる接近位置で撮像装置32にて撮った前方軌道11の全体画像(D1)を対象として機器画像Pを検出し、更に灯器の部分を抽出して、色も含めた点灯状態の適否や変化が正常か否かを確認するようになっている。   Further, the line-installed equipment detection unit 47 detects that the train position Q has approached the equipment position N and then forwards the image taken by the imaging device 32 or the imaging device 33 at several different approach positions as described above. While capturing an image from the track image D1 and the back track image D2, the device image P is detected from the plurality of whole images (D1, D2), and the detection results are compared with each other, and the operation of the equipment installed along the line is detected. Confirm. Specifically, if the equipment installed along the line is a traffic signal, the equipment image P is detected for the entire image (D1) of the forward track 11 taken by the imaging device 32 at a different approach position before passing the train at the equipment position N. Further, the lamp portion is extracted to check whether the lighting state including the color is appropriate and whether the change is normal.

沿線設置機器が踏切しゃ断機であれば、機器位置Nの列車通過前に撮像装置32にて撮った前方軌道11の全体画像(D1)と、機器位置Nの列車通過後に撮像装置33にて撮った後方軌道12の全体画像(D2)とを対象として機器画像Pを検出し、更にしゃ断桿の部分を抽出して、踏切道を閉める状態から開ける状態へ適切に変化しているか否かを確認するようになっている。沿線設置機器が転てつ機の場合は切り替え状態を確認するようになっている。さらに、こうして得た機器動作確認結果Rを記録制御部44に引き渡して記録装置36に記録させるようにもなっている。   If the railroad installation equipment is a railroad crossing breaker, the whole image (D1) of the forward track 11 taken by the imaging device 32 before passing the train at the equipment position N, and taken by the imaging device 33 after passing the train at the equipment position N. The device image P is detected from the entire rear trajectory 12 image (D2), and the part of the blocking rod is further extracted to check whether the railroad crossing is properly changed from the closed state to the open state. It is supposed to be. If the equipment installed along the line is a tipping machine, the switching state is confirmed. Furthermore, the device operation confirmation result R obtained in this way is transferred to the recording control unit 44 and recorded in the recording device 36.

この実施例1の運転状況記録装置30(列車搭載用画像処理システム)について、その使用態様及び動作を、図面を引用して説明する。図2は、(a)が搭載先の列車20等の平面図、(b)が列車20等の側面図、(c)が前方軌道映像D1の画像例、(d)がその画像D1に探索位置(P0)を示した例、(e)がマッチング対象のパターン例P1,P2である。また、図3は、(a)が前方軌道映像で見つかった画像位置P4を示した例、(b)が後方軌道映像D2用の画像探索位置P5を示した例、(c)が後方軌道映像D2の例、(d)がその画像D2に探索位置P5を示した例、(e)がマッチング対象のパターン例P6,P7である。   About the driving | running condition recording device 30 (train-mounted image processing system) of this Example 1, the use aspect and operation | movement are demonstrated referring drawings. 2A is a plan view of the train 20 or the like on which it is mounted, FIG. 2B is a side view of the train 20 or the like, FIG. 2C is an image example of the forward trajectory image D1, and FIG. An example showing the position (P0) and (e) are pattern examples P1 and P2 to be matched. 3A is an example in which the image position P4 is found in the forward trajectory image, FIG. 3B is an example in which the image search position P5 for the backward trajectory image D2 is shown, and FIG. 3C is the backward trajectory image. An example of D2, (d) is an example in which the search position P5 is shown in the image D2, and (e) is pattern examples P6 and P7 to be matched.

列車20に搭載された運転状況記録装置30は、始発駅や折返し駅で列車20の出発態勢を調える際に起動され、終着駅や折返し駅で列車20を停めた後に停止される。そして、その間、走行状態や運転状況が記録装置36にデジタルデータで記録される。
具体的には、イベント情報Eが年月日時Tと列車位置Q[X,Y,Z]と速度情報Vなどと組にして記録装置36に記録され、前方軌道映像D1や後方軌道映像D2の連続映像が上述の時間単位で分割されて記録装置36に記録される。これらの記録情報にあっては、組データの一部や分割ファイルの名称などに事象発生時等の年月日時Tが含まれているので、それを利用して相互に対応させることができる。
The operation status recording device 30 mounted on the train 20 is activated when the starting position of the train 20 is adjusted at the start station or the turn-back station, and is stopped after the train 20 is stopped at the end station or the turn-back station. In the meantime, the running state and the driving situation are recorded in the recording device 36 as digital data.
Specifically, the event information E is recorded in the recording device 36 in combination with the year / month / day / time T, the train position Q [X, Y, Z], the speed information V, etc., and the forward trajectory image D1 and the rear trajectory image D2 are recorded. The continuous video is divided into the above-mentioned time units and recorded in the recording device 36. In these pieces of recorded information, the date / time T at the time of the event is included in a part of the group data, the name of the divided file, etc., and can be used to correspond to each other.

また、列車20の走行中には、上述した運転状況の記録と並行して、レール10の沿線に設置されている機器の画像検出と動作確認も沿線設置機器検出部47によって行われる。詳述すると、列車位置検出部41から列車位置Qが取り込まれるとともに、最も近い沿線設置機器の機器位置Nが沿線設置機器データ46から選出されて、その沿線設置機器が前方軌道映像D1に映り込むところまで列車位置Qが進んだことが確認されると、前方軌道映像D1の一コマが全体画像(D1)として取り込まれるとともに(図2(c)参照)、そのときの列車位置Qと組になっている機器画像Pが、検出対象の部分画像として、沿線設置機器データ46から選出される。   Further, while the train 20 is traveling, image detection and operation confirmation of the devices installed along the rails 10 are also performed by the along-lane installation device detection unit 47 in parallel with the recording of the operation state described above. More specifically, the train position Q is taken in from the train position detection unit 41, and the device position N of the closest installation equipment is selected from the installation equipment data 46, and the installation equipment is reflected in the forward track image D1. When it is confirmed that the train position Q has advanced, a frame of the forward trajectory image D1 is captured as an entire image (D1) (see FIG. 2C), and the train position Q at that time is combined with the train position Q. The device image P is selected from the line-installed device data 46 as a partial image to be detected.

機器画像Pの具体例を挙げると、沿線設置機器が踏切しゃ断機なら閉状態の画像P1や開状態の画像P2が使用され(図2(e)参照)、沿線設置機器が転てつ機なら本線側切替状態の画像や支線側切替状態の画像が使用され、沿線設置機器が信号機なら青色点灯状態の画像や赤色点灯状態の画像が使用される(図示せず)。
それから、全体画像(D1)において探索を開始する位置となる画像探索位置P0が決定されるが(図2(d)参照)、その位置算出は、マップデータ42と列車位置Q[X,Y,Z]と機器位置N[X,Y,Z]と撮像条件M[ΔX,ΔY,ΔZ,θ,φ]とから、幾何学的関係に基づいて(図2(a),(b)参照)、短時間で行われる。
As an example of the equipment image P, if the equipment installed along the line is a railroad crossing breaker, the image P1 in the closed state or the image P2 in the open state is used (see FIG. 2 (e)). An image in the main line side switching state and an image in the branch line side switching state are used. If the equipment installed along the line is a traffic light, an image in a blue lighting state or an image in a red lighting state is used (not shown).
Then, an image search position P0, which is a position where the search is started in the entire image (D1), is determined (see FIG. 2D), and the position calculation is performed using the map data 42 and the train position Q [X, Y, Z], device position N [X, Y, Z] and imaging condition M [ΔX, ΔY, ΔZ, θ, φ] based on the geometrical relationship (see FIGS. 2A and 2B). Done in a short time.

さらに、画像探索位置P0を中心にして探索範囲を広げながら全体画像(D1)の中で機器画像P1,P2とマッチングする部分画像が探索され、それによって、機器画像Pすなわち機器画像P1か機器画像P2が全体画像(D1)の中から見つかると、その機器画像Pの検出結果である全体画像(D1)における機器画像Pの検出位置(P4)や拡縮度などが後の画像探索位置決定や検出結果対比のために一時記憶される。沿線設置機器が踏切しゃ断機であれば、機器画像Pが機器画像P1とマッチングして閉状態が検知されたのか、機器画像Pが機器画像P2とマッチングして開状態が検知されたのか、ということも検出結果として一時記憶される。転てつ機の場合は切り替え状態が検知され、信号機の場合は点灯色が検知され、それらが検出結果として一時記憶される。   Further, a partial image that matches the device images P1 and P2 is searched in the entire image (D1) while expanding the search range centering on the image search position P0, whereby the device image P, that is, the device image P1 or the device image is searched. When P2 is found in the entire image (D1), the detection position (P4) of the device image P in the entire image (D1), which is the detection result of the device image P, the enlargement / reduction degree, etc. are determined and detected later. Temporarily stored for result comparison. If the installation equipment along the railway is a railroad crossing breaker, whether the device image P matches the device image P1 and the closed state is detected, or whether the device image P matches the device image P2 and the open state is detected. This is also temporarily stored as a detection result. In the case of a switch, the switching state is detected. In the case of a traffic light, the lighting color is detected, and these are temporarily stored as detection results.

このような処理は、列車20が沿線設置機器の所を通過する前後に渡って繰り返されるが、通過後は、画像の取り込みが前方軌道映像D1でなく後方軌道映像D2から行われて機器画像Pの検索が全体画像(D2)について行われる(図3(c)参照)。また、通過後の列車位置Qと組になる機器画像Pには、通過前とは逆向きに見た機器画像P6,P7が、検出対象の部分画像として、沿線設置機器データ46から選出される。ここでは、沿線設置機器が踏切しゃ断機の場合の具体例を挙げると、開状態の画像P6や閉状態の画像P7が使用される(図3(e)参照)。   Such a process is repeated before and after the train 20 passes along the installation equipment along the line, but after passing, the image is captured not from the forward trajectory video D1 but from the rear trajectory video D2, and the equipment image P Is searched for the entire image (D2) (see FIG. 3C). In addition, in the device image P that is paired with the train position Q after passing, device images P6 and P7 viewed in the opposite direction to that before passing are selected from the line-installed device data 46 as partial images to be detected. . Here, as a specific example when the equipment installed along the line is a railroad crossing breaker, an image P6 in an open state and an image P7 in a closed state are used (see FIG. 3E).

通過後も、先ず全体画像(D2)において探索を開始する位置となる画像探索位置P5が決定されるが(図3(d)参照)、その位置算出は通過前と異なっており、前方軌道11の全体画像(D1)について既に探索も検出も済んで一時記憶されていた画像位置P4が参照され(図3(a)参照)、その決定済み画像位置P4に基づいて短時間で全体画像(D2)における新たな画像探索位置P5が決定される(図3(b)参照)。決定済み画像位置P4は一般に最初の画像探索位置P0より小さく絞り込まれているため(図3(a)参照)、その決定済み画像位置P4の画像内左右対称位置を撮像条件Mで修正して決定された画像探索位置P5も小さくなるので、画像探索の処理負荷が一段と軽減される。   After the passage, first, the image search position P5 that is the position where the search is started in the entire image (D2) is determined (see FIG. 3D), but the position calculation is different from that before the passage, and the forward trajectory 11 For the entire image (D1), the image position P4 that has already been searched and detected and is temporarily stored is referred to (see FIG. 3A), and the entire image (D2) is quickly determined based on the determined image position P4. ) Is determined (see FIG. 3B). Since the determined image position P4 is generally narrowed down to be smaller than the first image search position P0 (see FIG. 3A), the left-right symmetrical position in the image of the determined image position P4 is corrected by the imaging condition M and determined. Since the set image search position P5 is also reduced, the processing load of the image search is further reduced.

それから、画像探索位置P5を中心にして探索範囲を広げながら全体画像(D2)の中で機器画像P6,P7とマッチングする部分画像が探索され、それによって、機器画像Pすなわち機器画像P6か機器画像P7が全体画像(D2)の中から見つかると、その機器画像Pの検出結果として、全体画像(D2)における機器画像Pの検出位置(P8)や拡縮度に加え、沿線設置機器が踏切しゃ断機であれば、機器画像Pが機器画像P6とマッチングして開状態が検知されたのか、機器画像Pが機器画像P7とマッチングして閉状態が検知されたのか、ということも判明する。転てつ機の場合は切り替え状態が検知され、信号機の場合は点灯色が検知される。   Then, partial images matching the device images P6 and P7 are searched in the entire image (D2) while expanding the search range centering on the image search position P5, and thereby the device image P, that is, the device image P6 or the device image is searched. When P7 is found in the entire image (D2), the detection result of the device image P is a detection result (P8) of the device image P in the entire image (D2) and the enlargement / reduction degree, and the installation equipment along the railroad line Then, it is also determined whether the device image P matches the device image P6 and the open state is detected, or whether the device image P matches the device image P7 and the closed state is detected. In the case of a switch, the switching state is detected, and in the case of a traffic light, the lighting color is detected.

そして、画像検出対象の沿線設置機器が踏切しゃ断機の場合は、列車位置Qが機器位置Nを通過する前に撮られた前方軌道11の全体画像(D1)を一つ以上と、列車位置Qが機器位置Nを通過した後に撮られた後方軌道12の全体画像(D2)を一つ以上とについて、検出した機器画像Pが閉状態から開状態に遷移しているか否かが調べられ、そのように状態遷移していれば沿線設置機器が正常に稼働していると判定され、そうでなければ異常があると判定される。   And when the installation equipment along the line to be detected is a railroad crossing breaker, one or more whole images (D1) of the front track 11 taken before the train position Q passes the equipment position N, and the train position Q Whether or not the detected device image P has transitioned from the closed state to the open state with respect to one or more whole images (D2) of the rear trajectory 12 taken after passing through the device position N. In this way, it is determined that the equipment installed along the line is operating normally, and if not, it is determined that there is an abnormality.

画像検出対象の沿線設置機器が転てつ機の場合も、前方軌道11の全体画像(D1)と後方軌道12の全体画像(D2)について、正常に切り替えられているか否かが調べられて、稼働状態が判別される。信号機の場合は、二つ以上の前方軌道11の全体画像(D1)について、点灯や消灯さらには点灯色の変化が調べられ、稼働状態が判別される。
こうして、運転状況記録装置30を搭載した列車20がレール10を走行すると、それに連れて沿線設置機器の稼働状態がリアルタイムで次々に確認される。また、そうして得られた機器動作確認結果Rが沿線設置機器検出部47から記録制御部44に引き渡されて記録装置36に記録される。
In the case where the installation equipment along the line to be detected is a toppling machine, it is checked whether the whole image (D1) of the front track 11 and the whole image (D2) of the rear track 12 are normally switched, The operating state is determined. In the case of a traffic light, the entire image (D1) of two or more forward tracks 11 is checked for lighting and extinction, and further, a change in lighting color, and the operating state is determined.
In this way, when the train 20 equipped with the operation status recording device 30 travels on the rail 10, the operation state of the installation equipment along the line is confirmed one after another in real time. In addition, the device operation confirmation result R thus obtained is transferred from the along-line device detection unit 47 to the recording control unit 44 and recorded in the recording device 36.

[その他]
なお、上記実施例では総ての撮像装置32,33が車外撮影用であったが、社内撮影用の撮像装置を追加して例えば運転席を撮った映像まで記録するようにしても良い。
[Others]
In the above embodiment, all of the imaging devices 32 and 33 are for shooting outside the vehicle. However, an imaging device for in-house shooting may be added to record, for example, a video of a driver's seat.

10…レール(軌道)、11…前方軌道、12…後方軌道、
20…列車、21…運転席、22…速度計、23…高度計、
30…運転状況記録装置(列車搭載用画像処理システム)、
31…筐体、32…第1撮像装置(車外の前方軌道撮影用)、
33…第2撮像装置(車外のうちの後方軌道を撮影する装置)、
34…GPSアンテナ、35…GPS受信機、36…記録装置、
40…データ処理装置、41…列車位置検出部、
42…マップデータ、43…時計、44…記録制御部、
45…映像処理部、46…沿線設置機器データ記憶部、
47…沿線設置機器検出部、48…撮像条件データ記憶部
10 ... Rail (track), 11 ... Forward track, 12 ... Back track,
20 ... train, 21 ... driver's seat, 22 ... speedometer, 23 ... altimeter,
30 ... Driving status recording device (train-mounted image processing system),
31... Housing, 32... First imaging device (for photographing forward trajectory outside the vehicle),
33 ... Second imaging device (device for photographing a rear trajectory outside the vehicle),
34 ... GPS antenna, 35 ... GPS receiver, 36 ... recording device,
40 ... Data processing device, 41 ... Train position detection unit,
42: Map data, 43: Clock, 44: Recording control unit,
45 ... Video processing unit, 46 ... Stationary equipment data storage unit,
47 ... Installed equipment detection unit along the railway line, 48 ... Imaging condition data storage unit

Claims (2)

鉄道の軌道を走行する列車に搭載される列車搭載用画像処理システムにおいて、車外を撮る撮像装置と、衛星航法システムによる測位を行うGPS受信機と、前記GPS受信機の測位結果に基づいて列車位置を得る列車位置検出部と、前記軌道に沿って設置された沿線設置機器に係る機器位置および機器画像をデータ保持する沿線設置機器データ記憶部と、前記列車位置の前記機器位置への接近を検知して異なる接近位置において前記撮像装置で撮った画像を取り込むとともにその複数の画像から前記機器画像を検出して検出結果を対比することにより前記沿線設置機器の動作を確認する沿線設置機器検出部とを備えている列車搭載用画像処理システムであって、前記撮像装置が、前方軌道撮影用の第1撮像装置と後方軌道撮影用の第2撮像装置とを含んでおり、前記沿線設置機器検出部が、前記機器位置の列車通過前に前記第1撮像装置で撮った前方軌道の画像と前記機器位置の列車通過後に前記第2撮像装置で撮った後方軌道の画像とを対象にして画像処理を行うものであることを特徴とする列車搭載用画像処理システム。 In a train-mounted image processing system mounted on a train traveling on a railroad track, an imaging device that captures the outside of the vehicle, a GPS receiver that performs positioning by a satellite navigation system, and a train position based on the positioning result of the GPS receiver A train position detection unit that obtains the data, a device data storage unit that stores data on the device position and the device image related to the device installed along the track, and detects the approach of the train position to the device position A line installation device detection unit that captures images taken by the imaging device at different approach positions, detects the device image from the plurality of images, and compares the detection results to confirm the operation of the line installation device. a train wheel mounting image processing system that features, the imaging device, a second imaging for the first imaging device and the rear track shooting for forward track shooting The equipment installed along the line detects the forward trajectory image taken by the first imaging device before passing the train at the equipment position and the second imaging device after passing the train at the equipment position. column wheel mounting image processing system that characterized in that that the image of the rear track in the target performs image processing. 前記沿線設置機器検出部が、前記第1撮像装置で撮った前方軌道の画像において前記機器画像を検出する際には前記列車位置と前記機器位置とに基づいて画像探索位置を決定するが、前記第2撮像装置で撮った後方軌道の画像において前記機器画像を検出する際には前記の前方軌道の画像について検出済みの画像位置に基づいて画像探索位置を決定するようになっていることを特徴とする請求項1記載の列車搭載用画像処理システム。 When the equipment installed along the railway line detects the equipment image in the image of the forward trajectory taken by the first imaging device, the image search position is determined based on the train position and the equipment position. When detecting the device image in the image of the backward trajectory taken by the second imaging device, the image search position is determined based on the detected image position of the image of the forward trajectory. The train-mounted image processing system according to claim 1 .
JP2010070662A 2010-03-25 2010-03-25 Image processing system for trains Active JP5531291B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010070662A JP5531291B2 (en) 2010-03-25 2010-03-25 Image processing system for trains

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010070662A JP5531291B2 (en) 2010-03-25 2010-03-25 Image processing system for trains

Publications (2)

Publication Number Publication Date
JP2011201426A JP2011201426A (en) 2011-10-13
JP5531291B2 true JP5531291B2 (en) 2014-06-25

Family

ID=44878583

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010070662A Active JP5531291B2 (en) 2010-03-25 2010-03-25 Image processing system for trains

Country Status (1)

Country Link
JP (1) JP5531291B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6225362B2 (en) 2013-11-11 2017-11-08 株式会社明電舎 Train self-position estimation device
JP5984151B2 (en) 2014-08-26 2016-09-06 インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation Data recovery method, program, and data processing system
JP6521504B2 (en) * 2014-10-14 2019-05-29 西日本電気テック株式会社 Special signal light emitting machine inspection apparatus and track and land vehicle having the special signal light emitting machine inspection apparatus
JP6986936B2 (en) * 2017-11-21 2021-12-22 株式会社日立製作所 Vehicle control system

Also Published As

Publication number Publication date
JP2011201426A (en) 2011-10-13

Similar Documents

Publication Publication Date Title
CN106462729B (en) Vehicle image data management system and method
US7593963B2 (en) Method and apparatus for remote detection and control of data recording systems on moving systems
US7965312B2 (en) Locomotive wireless video recorder and recording system
US20070216771A1 (en) System and method for capturing an image of a vicinity at an end of a rail vehicle
CN107635823B (en) System and method for video inspection of a pantograph along an overhead contact line
US9296401B1 (en) Rail vehicle event triggering system and method
US9810533B2 (en) Railway track monitoring
US9346476B2 (en) Track-data verification
JP4415330B2 (en) Train line departure detection device and train line departure detection method
US20060244830A1 (en) System and method of navigation with captured images
JP5531291B2 (en) Image processing system for trains
JP2010035159A (en) Vehicle-mounted image recording apparatus and image recording method
US9531783B2 (en) Information distribution device
JP5458282B2 (en) Image processing system for trains
JP2012098105A (en) Video collection system around accident occurrence place
JP2010198214A (en) Drive recorder and video information display method
JP6557532B2 (en) Lighting equipment management system
JP2020126357A (en) Traffic management system, control method, and vehicle
JP2012014255A (en) Information distribution apparatus
US20090276108A1 (en) System and method for processing images of wayside equipment adjacent to a route
JP3544703B2 (en) Tour inspection apparatus and display method for tour inspection
JP2012069051A (en) In-vehicle operation recording device
JP2008221902A (en) Operating condition recording device
JP5726626B2 (en) Reproduction section extraction method, program and storage medium, reproduction section extraction apparatus and transport equipment mounting apparatus
EP2078659A2 (en) A system and method for providing reliable collision hazard detection

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130308

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20130308

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131203

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131225

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140324

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140328

R150 Certificate of patent or registration of utility model

Ref document number: 5531291

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313115

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313115

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313532

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250