JP2001021321A - Instrument for measuring height of trollfy wire supporting insulator - Google Patents

Instrument for measuring height of trollfy wire supporting insulator

Info

Publication number
JP2001021321A
JP2001021321A JP11197202A JP19720299A JP2001021321A JP 2001021321 A JP2001021321 A JP 2001021321A JP 11197202 A JP11197202 A JP 11197202A JP 19720299 A JP19720299 A JP 19720299A JP 2001021321 A JP2001021321 A JP 2001021321A
Authority
JP
Japan
Prior art keywords
insulator
image
difference
trolley wire
coordinate position
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP11197202A
Other languages
Japanese (ja)
Other versions
JP3964077B2 (en
Inventor
Hiroki Sato
裕樹 佐藤
Muneo Sato
宗雄 佐藤
Motonari Kanetani
元就 金谷
Takao Yoshizawa
孝夫 吉沢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
East Japan Railway Co
Hitachi High Tech Corp
Original Assignee
Hitachi Ltd
East Japan Railway Co
Hitachi Electronics Engineering Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd, East Japan Railway Co, Hitachi Electronics Engineering Co Ltd filed Critical Hitachi Ltd
Priority to JP19720299A priority Critical patent/JP3964077B2/en
Publication of JP2001021321A publication Critical patent/JP2001021321A/en
Application granted granted Critical
Publication of JP3964077B2 publication Critical patent/JP3964077B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Length Measuring Devices By Optical Means (AREA)

Abstract

PROBLEM TO BE SOLVED: To easily measure the heights of trolley wire supporting insulators on a measurement vehicle by providing a laser light source, etc., which upwardly emits a luminous flux having a prescribed width from the measurement vehicle in a direction which is substantially perpendicular to the running direction of the vehicle. SOLUTION: A laser light source 12 upwardly emits a luminous flux having a prescribed width from a measurement vehicle 20 in a direction which is substantially perpendicular to the running direction of the vehicle 20. An image pickup device 12 which is attached to the vehicle 20 in an upside-down state picks up the videos of trolley wire supporting insulators 4 and 5 by receiving the reflected light of the luminous flux from the insulators 4 and 5. Then an inverted objective picture is obtained by binarizing the videos of the lower peripheral sections of the insulators 4 and 5 obtained from the image pickup device 13. The insulators 4 and 5 are discriminated by discriminating whether or not the outline coordinates of the insulators 4 and 5 fall within a certain range and the area of the objective picture falls within a prescribed areal range on the basis of the vortex of the objective picture when the picture is displayed on a screen. The heights of the insulators 4 and 5 are calculated based on the vertical coordinate positions of the vortex from the discriminated pictures of the insulators 4 and 5.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】この発明は、トロリ線支持碍
子の高さ測定装置に関し、詳しくは、トロリ線とトロリ
線との接続部であるエアーセクション個所に設けられ、
トロリ線を支持柱に支持固定するために使用されるトロ
リ線支持碍子の高さを検測車上において容易に測定する
ことが可能なトロリ線支持碍子の高さ測定装置に関す
る。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a trolley wire support insulator height measuring apparatus, and more particularly, to a trolley wire supporting insulator which is provided at an air section which is a connecting portion between trolley wires.
The present invention relates to a trolley wire support insulator height measuring device capable of easily measuring the height of a trolley wire support insulator used for supporting and fixing a trolley wire to a support column on an inspection vehicle.

【0002】[0002]

【従来の技術】従来、トロリ線とトロリ線との接続部で
あるエアーセクション個所のトロリ線同士の高さ測定に
は、トロリ線支持碍子の高さ検出が重要な要素となって
いる。また、エアーセクション個所では、2本のトロリ
線が平行して走るので、碍子の高さが低下すると碍子の
最下端がパンタグラフに衝突する危険性がある。そのた
めに碍子の高さ測定が必要になる。従来の碍子の高さ測
定は、人手で行われており、トロリ線の摩耗測定や曲引
金具等の測定がカメラ撮影により検測車上で行われるよ
うになってきている現在ではトロリ線支持碍子の高さ測
定も検測車上で測定できるようにする要請がある。
2. Description of the Related Art Conventionally, detecting the height of a trolley wire support insulator has been an important factor in measuring the height of trolley wires at an air section, which is a connection portion between trolley wires. In addition, since two trolley wires run in parallel in the air section, there is a risk that the lowermost end of the insulator will collide with the pantograph when the height of the insulator decreases. Therefore, it is necessary to measure the height of the insulator. Conventionally, the height measurement of insulators is performed manually, and measurement of trolley wire wear and bending metal fittings are now performed on inspection vehicles by camera photography. There is a demand that the height of the insulator can be measured on an inspection vehicle.

【0003】[0003]

【発明が解決しようとする課題】そこで、カメラ撮影に
より碍子高さを測定することが考えられる。この場合、
トロリ線の支持碍子の高さ測定は斜め横方向からカメラ
撮影をすることが好ましいが、、測定対象が高い位置に
ある上に、トロリ線とトロリ線との接続部であるエアー
セクション個所では、トロリ線が邪魔となり斜めからの
カメラ撮影が難しくなる。また、検測車上からは十分に
横方向にカメラ設定ができないために斜めからの碍子の
映像が採取し難い。さらに、カメラ撮影により種々の画
像が取り込まれるので、その中から碍子画像を取出す処
理のロードが大きくなり、検測車上で短時間に高さ測定
を行うことは難しくかつ高速な画像処理と計算処理が要
求される。この発明の目的は、このような従来技術の問
題点を解決するものであって、トロリ線支持碍子の高さ
を検測車上において容易に測定することが可能なトロリ
線支持碍子の高さ測定装置を提供することにある。
Therefore, it is conceivable to measure the height of the insulator by photographing with a camera. in this case,
It is preferable that the height of the trolley wire support insulator is measured by a camera from an oblique lateral direction.However, the measurement target is located at a high position, and in the air section where the trolley wire and the trolley wire are connected, The trolley wire is in the way, making it difficult to shoot the camera obliquely. In addition, since the camera cannot be set sufficiently in the lateral direction from the inspection vehicle, it is difficult to obtain an image of the insulator from an oblique direction. Furthermore, since various images are captured by camera shooting, the load of processing to extract insulator images from them becomes large, making it difficult to perform height measurement on an inspection car in a short time and high-speed image processing and calculation Processing is required. SUMMARY OF THE INVENTION An object of the present invention is to solve such a problem of the prior art, and the height of the trolley wire support insulator can be easily measured on an inspection vehicle. It is to provide a measuring device.

【0004】[0004]

【課題を解決するための手段】このような目的を達成す
るためのこの発明のトロリ線支持碍子の高さ測定装置の
特徴は、トロリ線を支持するトロリ線支持碍子の高さ測
定装置において、検測車から上方に向けて検測車の走行
方向と実質的に直角な方向に所定の幅の光束を発生する
レーザ光源と、検測車に天地が反転して取付けられトロ
リ線支持碍子からの光束の反射光を受光してその映像を
採取する撮像装置と、この撮像装置から得られるトロリ
線支持碍子の下側周辺部の映像を二値化して上下が反転
した対象画像を得てこの対象画像を画面表示したときの
画像の頂点を基準として水平走査ライン上の各輪郭座標
位置について手前の輪郭座標位置に対して現在の輪郭座
標位置がある範囲内に入ることおよび対象画像の面積が
所定の面積範囲にあることにより碍子と判定する碍子画
像判定手段と、この碍子画像判定手段により判定された
碍子画像について頂点の垂直方向の画像上の座標位置に
基づいてトロリ線支持碍子の高さを算出する高さ算出手
段とを備えるものである。
A feature of the trolley wire supporting insulator height measuring device of the present invention for achieving the above object is that the trolley wire supporting insulator height measuring device supports the trolley wire. A laser light source that generates a luminous flux of a predetermined width in a direction substantially perpendicular to the traveling direction of the inspection vehicle upward from the inspection vehicle, and a trolley wire support insulator that is mounted on the inspection vehicle with its top and bottom inverted. An imaging device that receives the reflected light of the luminous flux and captures the image, and an image of the lower peripheral portion of the trolley wire support insulator obtained from this imaging device is binarized to obtain a target image that is inverted upside down, With respect to each contour coordinate position on the horizontal scanning line based on the vertex of the image when the target image is displayed on the screen, the current contour coordinate position is within a certain range with respect to the previous contour coordinate position, and the area of the target image is Within a predetermined area range Means for determining an insulator by determining the height of a trolley wire support insulator based on a coordinate position of a vertex in a vertical image on the insulator image determined by the insulator image determining means Calculation means.

【0005】[0005]

【発明の実施の形態】このように、検測車から上方に向
けて撮像装置(カメラ)を設置して、碍子の映像を上下
反転させて二値化画像を採取することで、最下端を頂点
とするほぼ対称な肉厚の弓形湾曲画像を碍子の下側周辺
部の画像として得ることができる。これにより碍子画像
を特徴のある画像として撮像でき、その分、碍子部分の
判定が容易になる。その判定としては、碍子の最下端を
頂点としてこれを基準に湾曲の状態を対象画像の輪郭座
標位置で判定する。また、肉厚弓形の状態を面積として
判定する。これらのことで容易に碍子映像を判定するこ
とが可能になる。この考え方に従って、前記の構成のよ
うに碍子画像判定手段を設けて、この対象画像を画面表
示したときのその画像の頂点を基準として水平走査ライ
ン上の各輪郭座標位置について手前の輪郭座標位置に対
して現在の輪郭座標位置がある範囲内に入ることおよび
対象画像の面積が所定の面積範囲にあることにより碍子
と判定する。碍子の映像が抽出できれば、カメラの設置
位置の採取した最下端の映像の位置(頂点の画面上の座
標位置)とカメラの設置位置との関係により碍子の最下
端の高さを得ることができる。その結果、撮像された画
像から高さ測定の処理が実質的にカメラの撮像速度に近
いリアルタイムでかつ簡単にでき、高さ測定処理が検測
車上において比較的簡単な処理により実現できる。
As described above, the image pickup device (camera) is installed upward from the inspection vehicle, and the image of the insulator is turned upside down to obtain a binarized image. A bow-shaped curved image having a substantially symmetrical thickness at the top can be obtained as an image of the lower peripheral portion of the insulator. Thus, the insulator image can be captured as a characteristic image, and the insulator portion can be easily determined accordingly. As the determination, the lowermost end of the insulator is set as the vertex, and the bending state is determined based on the contour coordinate position of the target image based on the vertex. The state of the thick bow is determined as the area. Thus, it is possible to easily determine the insulator image. In accordance with this concept, the insulator image determining means is provided as in the above configuration, and each contour coordinate position on the horizontal scanning line is set to the nearer contour coordinate position on the basis of the vertex of this image when the target image is displayed on the screen. On the other hand, when the current outline coordinate position falls within a certain range and the area of the target image is within a predetermined area range, it is determined to be an insulator. If the image of the insulator can be extracted, the height of the lowermost end of the insulator can be obtained from the relationship between the position of the lowermost image (coordinate position of the vertex on the screen) where the camera is installed and the camera installation position. . As a result, the process of height measurement from the captured image can be performed in real time and easily at substantially the imaging speed of the camera, and the height measurement process can be realized by a relatively simple process on the inspection vehicle.

【0006】[0006]

【実施例】図1は、この発明のトロリ線支持碍子の高さ
測定装置を適用した一実施例のブロック図であり、図2
は、その高さ測定処理のフローチャート、図3は、高さ
測定処理における碍子判定処理のフローチャート、図4
は、その実高さ参照テーブルの説明図、図5は、画像処
理の説明図、そして図6は、エアーセクション個所に設
けられたトロリ線支持碍子と検測車との関係の説明図で
ある。図6に示すように、エアーセクション個所では、
トロリ線1とトロリ線2とがほぼ同じ高さで平行に走
り、トロリ線1が支持柱3に複数の碍子4、4…を経て
支持固定され、終点とされる。トロリ線2は、支持柱3
とレールを挟んで反対側の支持柱(図示せず)に支持固
定され、1個乃至複数の碍子5、5…を経て引継のトロ
リ線として始点とされる。碍子4と碍子5とで支持され
るそれぞれのトロリ線1、2は、実質的に高さが等し
く、数十センチ程度の間隔をおいて一定の距離の間、レ
ール上部に平行に走り、パンタグラフには2本のトロリ
線がこのとき同時に接触する。この場合には、碍子4と
碍子5の最下端の高さが問題となる。
FIG. 1 is a block diagram of an embodiment to which a height measuring apparatus for a trolley wire supporting insulator according to the present invention is applied, and FIG.
4 is a flowchart of the height measurement process, FIG. 3 is a flowchart of the insulator determination process in the height measurement process, and FIG.
Is an explanatory diagram of the actual height reference table, FIG. 5 is an explanatory diagram of the image processing, and FIG. 6 is an explanatory diagram of the relationship between the trolley wire support insulator provided at the air section and the inspection vehicle. As shown in FIG. 6, in the air section,
The trolley wire 1 and the trolley wire 2 run in parallel at substantially the same height, and the trolley wire 1 is supported and fixed to the support column 3 via a plurality of insulators 4, 4,. The trolley wire 2 is a support post 3
And is supported and fixed to a support column (not shown) on the opposite side with the rail interposed therebetween, and is set as a starting point as a takeover trolley wire via one or a plurality of insulators 5, 5,. The trolley wires 1 and 2 supported by the insulator 4 and the insulator 5 have substantially the same height and run parallel to the upper part of the rail for a certain distance at intervals of about several tens of centimeters. At this time, two trolley wires come in contact at the same time. In this case, the height of the lowermost ends of the insulators 4 and 5 becomes a problem.

【0007】図1において、10は、その碍子4と碍子
5の高さを測定するトロリ線支持碍子の高さ測定装置で
あって、映像採取タイミング検出センサ11と、レーザ
光源12と、検測車20の屋根上に天地が反転して取付
られたITVカメラ(二次元のCCDカメラ、以下カメ
ラ)13、A/D変換回路(A/D)14、そして画像
データ処理装置15とにより構成される。ここで、映像
採取タイミング検出センサ11と、レーザ光源12、そ
してカメラ13との関係は、図示するように、検測車2
0の屋根に設置されていて、カメラ13は、70度前後
の仰角で中空に向けられている。一方、レーザ光源12
は、碍子4(あるいは碍子5、以下では碍子4をもって
説明する)を挟んで反対側にカメラ13とほぼ対称とな
る位置に80度前後の仰角で中空に向けられ、帯状の光
束(帯状光,図1参照)を碍子4,5をカバーする幅で
発生する。
In FIG. 1, reference numeral 10 denotes a trolley wire supporting insulator height measuring device for measuring the heights of the insulators 4 and 5, which comprises an image pickup timing detecting sensor 11, a laser light source 12, It comprises an ITV camera (two-dimensional CCD camera, hereinafter referred to as a camera) 13, an A / D conversion circuit (A / D) 14, and an image data processing device 15, which are mounted upside down on the roof of the car 20. You. Here, the relationship between the image capturing timing detection sensor 11, the laser light source 12, and the camera 13 is shown in FIG.
0, the camera 13 is pointed hollow at an elevation angle of around 70 degrees. On the other hand, the laser light source 12
Is directed to the hollow at an elevation angle of about 80 degrees at a position almost symmetrical with the camera 13 on the opposite side of the insulator 4 (or the insulator 5, hereinafter described as the insulator 4). (See FIG. 1) in a width that covers the insulators 4 and 5.

【0008】映像採取タイミング検出センサ11は、所
定のレベルの碍子4の下側の面の反射光を受けてカメラ
13のシャッタを動作させ、同時に画像データ処理装置
15の碍子高さを測定するプログラムを起動する。これ
により碍子4の下側の輪郭映像がカメラ13により採取
され、高さ測定処理が開始される。なお、映像採取タイ
ミング検出センサ11を設けることなく、エアーセクシ
ョン個所において、常時、画像を採取する構成を採って
もよい。この場合には、映像採取タイミング検出センサ
11は不要である。映像採取タイミング検出センサ11
は、内部にホトダイオード111とアンプ(AMP)1
12とコンパレータ(COM)113とが内蔵されてい
てコンパレータ113により閾値レベルが調整され、あ
るいは、トロリ線からの反射光に反応しない感度調整が
なされる。これによりノイズが除去された検出信号dを
出力する。
[0008] The image pickup timing detection sensor 11 receives the reflected light from the lower surface of the insulator 4 at a predetermined level, operates the shutter of the camera 13 and simultaneously measures the height of the insulator of the image data processing device 15. Start As a result, a lower contour image of the insulator 4 is collected by the camera 13 and the height measurement process is started. It is to be noted that a configuration may be adopted in which an image is always collected at an air section without providing the image collection timing detection sensor 11. In this case, the image pickup timing detection sensor 11 is unnecessary. Image acquisition timing detection sensor 11
Is a photodiode 111 and an amplifier (AMP) 1 inside.
12 and a comparator (COM) 113 are built in, the threshold level is adjusted by the comparator 113, or the sensitivity is adjusted so as not to respond to the reflected light from the trolley wire. As a result, the detection signal d from which noise has been removed is output.

【0009】ここで、カメラ13の撮像映像を画素数を
640×400ドットのモノクロ画像とすれば、その1
フレーム分の画像データがA/D14によりA/D変換
されて検出信号dを受けた画像データ処理装置15に取
込まれる。先に説明したように、カメラ13は、天地が
反転して設置されているので上部の採取映像が画面上で
下側となる。画像データ処理装置15は、MPU151
とメモリ152とCRTディスプレイ153、画像メモ
リ154、そしてインタフェース155を備えて、バス
156によりこれら回路が相互に接続されている。
Here, assuming that the image picked up by the camera 13 is a monochrome image having 640 × 400 dots, the first is
The image data for the frame is A / D converted by the A / D 14 and is taken into the image data processing device 15 which has received the detection signal d. As described above, since the camera 13 is installed upside down, the upper part of the captured image is on the lower side of the screen. The image data processing device 15 includes an MPU 151
, A memory 152, a CRT display 153, an image memory 154, and an interface 155, and these circuits are interconnected by a bus 156.

【0010】メモリ152には二値化処理プログラム2
1とノイズ除去処理プログラム22、構造物除去処理プ
ログラム23、碍子画像判定プログラム24、そして碍
子実高さ算出プログラム25とが格納され、A/D14
からのデータが画像メモリ154に一旦記録される。さ
らにメモリ152には、碍子4の最下点の座標位置から
碍子の実高さを求めるために実高さ参照テーブル26が
設けられている。なお、インタフェース155を介して
接続されたハードディスク等の外部記憶装置157もこ
れには設けられていて、測定結果がこの外部記憶装置1
57に走行距離に応じて記憶される。なお、走行距離測
は、距離パルスにより測定される。この測定位置の検出
等については周知であるので割愛する。
The memory 152 has a binarization processing program 2
1 and a noise removal processing program 22, a structure removal processing program 23, an insulator image determination program 24, and an insulator actual height calculation program 25.
Is temporarily recorded in the image memory 154. Further, the memory 152 is provided with an actual height reference table 26 for obtaining the actual height of the insulator from the coordinate position of the lowest point of the insulator 4. An external storage device 157 such as a hard disk connected via the interface 155 is also provided therein, and the measurement results are stored in the external storage device 1.
57 is stored according to the running distance. The travel distance is measured by a distance pulse. The detection of the measurement position and the like are well known and will not be described.

【0011】二値化処理プログラム21は、このプログ
ラムがMPU151に実行されたときに、画像メモリ1
54に記憶された1フレーム分(あるいは1フィールド
分)のデータを所定の閾値で比較演算をして二値化処理
して画像メモリ154に再記憶する。この二値化処理に
より一定レベル以下の反射映像が検出対象から排除され
る。ノイズ除去処理プログラム22は、このプログラム
がMPU151に実行されたときに、二値化処理された
画像メモリ154のデータから画素(特に水平方向の画
素数分)を基準としていわゆるノイズに対応する映像を
テンプレート画像としてテンプレート処理により画像メ
モリ154の画像データからノイズを除去する。
When this program is executed by the MPU 151, the binarization processing program 21
One frame (or one field) of data stored in 54 is compared with a predetermined threshold value, binarized, and stored in the image memory 154 again. By this binarization processing, reflected images of a certain level or less are excluded from detection targets. When this program is executed by the MPU 151, the noise removal processing program 22 generates an image corresponding to so-called noise based on pixels (particularly the number of pixels in the horizontal direction) from the binarized data in the image memory 154. Noise is removed from the image data in the image memory 154 by template processing as a template image.

【0012】構造物除去処理プログラム23は、テンプ
レート画像として、例えば、トロリ線をレーザが横切っ
た画像を用意しておき、1画面の画像にテンプレート画
像を通過させ、その時のテンプレート画像と実質的に一
致する画像があればこれを画像から除去する。例えば、
図5(c)〜(f)に示すような碍子以外の構造物の画
像を持ち、テンプレート処理により画像メモリ154の
画像データから図5(c)〜(f)に示すような碍子以
外の構造物の映像を除去する。図5(c)は、碍子画像
Gのほかに、金具画像Kとトロリ線の画像Tが画像メモ
リ154に採取された場合であって、構造物除去処理プ
ログラム23の実行により金具画像Kとトロリ線の画像
Tが構造物ノイズとして除去される。図5(d)は、ト
ロリ線Tと曲引金具Aの構造物ノイズ画像であり、図5
(e)は、トンネル壁面等の画像Bであり、図5(d)
は、トロリ線コネクタ部Cの画像である。これらの画像
は、構造物除去処理プログラム23実行により採取画像
からテンプレート処理により除去される。最終的には図
5(c)のような湾曲した弓形の碍子画像Gが残され
る。なお、これら図5の各図において画面のX座標(水
平走査方向)は、検測車20と直角方向であり、画面の
Y座標(垂直走査方向)は、碍子4の高さ方向に対応し
ている。
The structure removal processing program 23 prepares, for example, an image in which a trolley line is crossed by a laser as a template image, passes the template image through one screen image, and substantially matches the template image at that time. If there is a matching image, it is removed from the image. For example,
5 (c) to 5 (f), and has an image of a structure other than the insulator as shown in FIGS. 5 (c) to 5 (f). Remove the image of the object. FIG. 5C shows a case where a metal fitting image K and a trolley wire image T are collected in the image memory 154 in addition to the insulator image G. The line image T is removed as structure noise. FIG. 5D is a structural noise image of the trolley wire T and the bending fitting A, and FIG.
(E) is an image B of a tunnel wall or the like, and FIG.
Is an image of the trolley wire connector section C. These images are removed from the collected images by template processing by executing the structure removal processing program 23. Finally, a curved bow-shaped insulator image G as shown in FIG. 5C is left. In each of FIGS. 5A and 5B, the X coordinate (horizontal scanning direction) of the screen is perpendicular to the inspection vehicle 20, and the Y coordinate (vertical scanning direction) of the screen corresponds to the height direction of the insulator 4. ing.

【0013】碍子画像判定プログラム24は、さらに、
二値化処理と構造物除去処理で残った画像、例えば、除
去しきれないで残った図5(c)〜(f)に示すような
構造物を含む画像から碍子を判別するプログラムであっ
て、図5(c)の碍子画像Gが本当に碍子の画像か否か
判定する処理を行うプログラムであって、このプログラ
ムがMPU151に実行されたときに、ノイズの除去さ
れた画像から各水平走査ライン上において白黒に二値化
された画像データにおいて得られた画像の頂点の座標位
置を基準として映像の水平走査ライン上の前縁と後縁の
座標に基づいて碍子形状の判定を行う。これは、碍子で
あれば、肉厚がある弓形湾曲画像であり、しかも上下を
反転させるられている二値化画像である。そこで、対象
画像を画面表示したときのその画像の頂点を基準として
水平走査ライン上の各輪郭座標位置について手前の輪郭
座標位置に対して現在の輪郭座標位置がある範囲内に入
ることおよび対象画像の面積が所定の面積範囲にあるこ
とにより碍子と判定するものである。すなわち、画像の
部分の水平走査ラインに採った前縁と後縁のエッジ画素
座標を取出して次水平走査ラインとの差を算出して、こ
の差が一定の範囲のものであって(弓形に湾曲していて
かつ画像の頂点に対してほぼ左右対称的な画像となるこ
ととによる。)、かつ、画像部分の面積が一定の基準範
囲にあるときに碍子と判定する。その詳細は後述する
が、それは、碍子の画像の外形の曲率の変化を判定する
ものである。その結果として図5(a)に示されるよう
な上下が反転し、碍子の最下端が上になった弓形の碍子
画像Gを抽出する。碍子実高さ算出プログラム25は、
このプログラムがMPU151に実行されたときに、碍
子の頂点の座標を検出してこの座標から実高さ参照テー
ブル26(図4参照)を参照して碍子の実高さを算出す
る。
The insulator image determination program 24 further includes:
A program for discriminating an insulator from an image remaining after the binarization process and the structure removal process, for example, an image including a structure as shown in FIGS. 5C is a program for determining whether the insulator image G in FIG. 5C is really an insulator image. When this program is executed by the MPU 151, each horizontal scanning line is extracted from the noise-free image. The shape of the insulator is determined based on the coordinates of the leading edge and the trailing edge on the horizontal scanning line of the image with reference to the coordinate position of the vertex of the image obtained in the image data binarized to black and white. In the case of an insulator, this is a thick bow-shaped curved image and a binarized image that is turned upside down. Therefore, for each contour coordinate position on the horizontal scanning line based on the vertex of the image when the target image is displayed on the screen, the current contour coordinate position must be within a certain range with respect to the previous contour coordinate position. Is determined to be an insulator when the area of is within a predetermined area range. That is, the difference between the next horizontal scan line and the edge pixel coordinates of the leading edge and the trailing edge taken in the horizontal scan line of the image portion is calculated, and the difference is within a certain range (in a bow shape). This is because the image is curved and substantially bilaterally symmetric with respect to the vertex of the image.) In addition, when the area of the image portion is within a certain reference range, the insulator is determined. Although the details will be described later, it is to determine a change in curvature of the outer shape of the insulator image. As a result, an arcuate insulator image G in which the top and bottom are inverted as shown in FIG. Insulator actual height calculation program 25
When this program is executed by the MPU 151, the coordinates of the vertices of the insulator are detected, and the actual height of the insulator is calculated from the coordinates by referring to the actual height reference table 26 (see FIG. 4).

【0014】以下、図2のフローチャートに従って碍子
高さ算出処理について説明する。まず、映像採取タイミ
ング検出センサ11の起動信号を受けて画像データ処理
装置15は、まず、A/D14からのデータを画像メモ
リ154に取込む(ステップ101)。そして、二値化
処理プログラム21をコールして採取した画像データの
二値化処理をし(ステップ102)、次に、ノイズ除去
処理プログラム22をコールしてノイズ除去処理をする
(ステップ103)。さらに、構造物除去処理プログラ
ム23をコールして構造物の除去を行う(ステップ10
4)。通常、各種の画像がことのとき採取されているの
で、ここでは、画像の固まりが複数個あると仮定して、
順次碍子画像か否か判定するために最終画像における各
画像のブロックに対応して名前を付けるラベリング処理
を行う(ステップ105)。そして、それぞれのラベリ
ングされた対象画像についてそれが本当に碍子の画像G
か否か判定する(ステップ106)。ここでYESとな
り、碍子と判定されたときには、碍子の頂点Pの表示画
面上の座標(Xo,Yo)のうちのY座標Yoから図5の
実高さ参照テーブル26を参照して実際の画像上での高
さYを求める。そして、最後に碍子高さをY+Yrによ
り高さHを算出する(ステップ107)。なお、Yr
は、検測車20上で決定されるのカメラ13の表示画面
Dの上端の地上からみた基準高さ(図1参照)である。
なお、ステップ106の判定で碍子でないと判定(N
O)されたときには、この処理を終了する。
Hereinafter, the insulator height calculation processing will be described with reference to the flowchart of FIG. First, upon receiving the activation signal of the image capturing timing detection sensor 11, the image data processing device 15 first loads the data from the A / D 14 into the image memory 154 (step 101). Then, binarization processing is performed on the collected image data by calling the binarization processing program 21 (step 102), and then, noise reduction processing is called by calling the noise removal processing program 22 (step 103). Further, the structure is removed by calling the structure removal processing program 23 (step 10).
4). Usually, since various images are collected at the time, here, it is assumed that there are a plurality of clusters of images,
In order to sequentially determine whether or not the image is an insulator image, a labeling process for giving a name corresponding to each image block in the final image is performed (step 105). Then, for each labeled target image, it is really an insulator image G
It is determined whether or not (step 106). Here, YES is determined, and when it is determined that the insulator is the insulator, the actual image is referred from the Y coordinate Yo of the coordinates (Xo, Yo) of the vertex P of the insulator on the display screen with reference to the actual height reference table 26 in FIG. Find the height Y above. Finally, the height H of the insulator is calculated by Y + Yr (step 107). Note that Yr
Is a reference height (see FIG. 1) viewed from the ground at the upper end of the display screen D of the camera 13 determined on the inspection vehicle 20.
Note that it is determined that the insulator is not an insulator in the determination of step 106 (N
If O), this process ends.

【0015】次に、碍子判定処理106のステップの詳
細について図3のフローチャートと図5(b)に従って
説明する。図5(b)は、ステップ106の判定の結果
得られた碍子4の画像Gの部分を取出したものである。
碍子判定処理として画像メモリ154の画像データから
上下が反転した碍子4の対象画像を画面表示したときの
画像Gについて、まず、その頂点のX座標Xoを検出し
てメモリ152に頂点Pの座標(Xo,Yo)を記憶する
(ステップ201)。次に、対象画像(碍子画像G)の
エッジのX座標を検出してそれを記憶する(ステップ2
02)。これは、図5(b)に示すように、前記頂点P
の水平走査ラインをスタート点として、次の水平走査ラ
インにおいてX座標における前縁のエッジ座標XS1と後
縁のエッジ座標XE1を検出する処理である。さらに、次
の水平走査ラインにおいてX座標における前縁のエッジ
座標XS2と後縁のエッジ座標XE2を検出し、このように
して対象画像が占める水平十数ライン〜数十ライン分
(図では説明の都合上5本の水平ライン)のエッジ座標
検出を行う。また、この場合、碍子4の内側の湾曲部の
エッジが存在したときには、そのエッジ座標を内側エッ
ジとしてそれぞれの後縁、前縁エッジをX座標をXEa、
XSaとして検出する(図5(b)参照)。なお、エッジ
の座標は、画像部分を白とすれば、黒レベルから白レベ
ルに変化した水平ライン上での最初の画素位置に相当す
る点である。
Next, the details of the steps of the insulator determination processing 106 will be described with reference to the flowchart of FIG. 3 and FIG. 5B. FIG. 5B shows a portion of the image G of the insulator 4 obtained as a result of the determination in step 106.
As an insulator determination process, for the image G when the target image of the insulator 4 is displayed on the screen from the image data in the image memory 154, first, the X coordinate Xo of the vertex is detected, and the coordinates of the vertex P are stored in the memory 152 ( Xo, Yo) are stored (step 201). Next, the X coordinate of the edge of the target image (the insulator image G) is detected and stored (step 2).
02). This is because, as shown in FIG.
Is a process of detecting the leading edge edge coordinate XS1 and the trailing edge edge coordinate XE1 of the X coordinate on the next horizontal scanning line with the horizontal scanning line as a start point. Further, in the next horizontal scanning line, the leading edge coordinate XS2 and the trailing edge edge coordinate XE2 in the X coordinate are detected, and the target image occupies more than tens of horizontal lines to several tens of lines (in FIG. Edge coordinates of five horizontal lines are detected for convenience. Further, in this case, when there is an edge of the curved portion inside the insulator 4, the edge coordinates are set as the inside edge, and the rear edge and the front edge are X coordinates of XEa and XEa, respectively.
It is detected as XSa (see FIG. 5B). The coordinates of the edge are points corresponding to the first pixel position on the horizontal line where the black level changes to the white level, assuming that the image portion is white.

【0016】次に、まず、碍子4の画像Gの頂点座標X
oからエッジ検出ができなくなるまでの対象画像(碍子
画像G)における水平走査ラインの総数Nを算出する
(ステップ203)。そして、水平走査ライン総数Nが
碍子としての所定の範囲N1〜N2の範囲にあるか否かの
判定を行う(ステップ204)。ここで所定の範囲外と
なって、NO条件が成立するとこの処理を終了する。こ
こで、YESとなると、次にX座標における各水平走査
ラインにおける碍子画像G(対象画像)のエッジ座標か
ら面積Sを総画素数により算出する(ステップ20
5)。次に、面積Sが碍子としての所定の範囲S1〜S2
の範囲にあるか否かの判定を行う(ステップ206)。
ここでNO条件となるとこの処理を終了する。
Next, first, the vertex coordinates X of the image G of the insulator 4 are set.
The total number N of the horizontal scanning lines in the target image (the insulator image G) from the point o until the edge cannot be detected is calculated (step 203). Then, it is determined whether or not the total number N of horizontal scanning lines is within a predetermined range N1 to N2 as the insulator (step 204). Here, when the value falls outside the predetermined range and the NO condition is satisfied, the process is terminated. If the result is YES, then the area S is calculated from the total number of pixels from the edge coordinates of the insulator image G (target image) in each horizontal scanning line at the X coordinate (step 20).
5). Next, the area S is within a predetermined range S1 to S2 as an insulator.
Is determined (step 206).
Here, when the NO condition is satisfied, this processing ends.

【0017】ステップ206で、YESとなると、次に
1つ前の水平走査ラインの輪郭のエッジについて、ま
ず、前縁座標XSi同士の差ΔXSi=XSi−XSi+1の算出
を行い(ステップ207)、差ΔXSiをメモリ152に
記憶して(ステップ208)、差ΔXSiが所定値Xr以
下か否かを判定する(ステップ209)。これは、碍子
4の輪郭エッジの曲率を判定しているものであって、碍
子の画像であればその水平走査ラインからみた輪郭増加
は、一定範囲で増加するはずである。これにより前縁か
らみた輪郭映像について相似形となるような類似画像を
排除する。そこで、ここでNO条件となるとこの処理を
終了する。なお、この場合、碍子4の内側の湾曲部のエ
ッジXSa、XSb…があるときには、所定値Xrは、Xiに
置き換えられてステップ209の判定が行われる。ただ
し、Xr<Xiである。なお、これら所定値Xr、Xiは、
実測値に基づいて決定される。
If YES in step 206, the difference ΔXSi = XSi−XSi + 1 between the leading edge coordinates XSi is first calculated for the edge of the contour of the immediately preceding horizontal scanning line (step 207). The difference ΔXSi is stored in the memory 152 (step 208), and it is determined whether the difference ΔXSi is equal to or smaller than a predetermined value Xr (step 209). This is to determine the curvature of the contour edge of the insulator 4, and in the case of an insulator image, the contour increase from the horizontal scanning line should increase within a certain range. As a result, a similar image having a similar shape to the contour image viewed from the leading edge is excluded. Therefore, if the NO condition is satisfied here, this process ends. In this case, when there are edges XSa, XSb... Of the curved portion inside the insulator 4, the predetermined value Xr is replaced by Xi, and the determination in step 209 is performed. However, Xr <Xi. Note that these predetermined values Xr and Xi are:
It is determined based on the actually measured value.

【0018】さて、ステップ209においてYESのと
きには、次にΔXSiが−Mより大きいか否かが判定され
る(ステップ210)。碍子の画像であればその輪郭は
増加し、負にはならないが、画像ノイズや採取条件に応
じて多少負になることもあるので、この判定を行う。碍
子は、ここで行う一定より以上の大きな負の値(−M)
にはならない。そこで、ここでNO条件となるとこの処
理を終了する。次に、対象画像に含まれる水平走査ライ
ン数N本がすべて終了か、否かの判定をして(ステップ
211)、NOのときにはiを次の水平走査ライン(i
=i+1)に更新して(ステップ212)、ステップ2
07と戻り、iを更新しながらステップ207を経て差
ΔXSiをメモリに順次記憶し、ステップ209の判定を
繰り返す。そして、差ΔXSiが所定値Xr(あるいはX
i)以上となり、ステップ209の判定でNO条件が成
立するとこの処理を終了する。ステップ210でNOと
なった場合もこの処理を終了する。なお、この場合のス
テップ207の計算は、頂点Pの座標Xoを含めるもの
である。したがって、最初の演算は、ΔXSo=XSo−X
S1の算出であって、これによりステップ208で差ΔX
Soの判定をすることになる。
If YES in step 209, it is next determined whether or not ΔXSi is larger than -M (step 210). In the case of an insulator image, its contour increases and does not become negative, but this may be slightly negative depending on image noise or sampling conditions, so this determination is made. For insulators, a large negative value (-M) above a certain level
It does not become. Therefore, if the NO condition is satisfied here, this process ends. Next, it is determined whether or not the number N of horizontal scanning lines included in the target image has all been completed (step 211). If NO, i is set to the next horizontal scanning line (i).
= I + 1) (step 212) and step 2
07, while updating i, the difference ΔXSi is sequentially stored in the memory via step 207, and the determination in step 209 is repeated. Then, the difference ΔXSi is equal to a predetermined value Xr (or Xr
i) or more, and if the NO condition is satisfied in the determination of step 209, this process ends. This process is also ended when the answer to step 210 is NO. In this case, the calculation in step 207 includes the coordinates Xo of the vertex P. Therefore, the first operation is ΔXSo = XSo−X
S1 is calculated, and the difference ΔX
So will be determined.

【0019】さて、ステップ211の判定でYESとな
ると、後縁判定か否かの判定をして(ステップ21
3)、ここで最初はNOとなるので、このときにはステ
ップ207に換わってステップ207aの選択となり、
ステップ207aへと移り、後縁座標XEi同士の差ΔX
Ei=XEi+1−XEiの算出を行う(ステップ207a)。
今度は差ΔXEiをメモリ152に記憶して(ステップ2
08)、前記と同様に差ΔXEiが所定値Xr以上か否か
を判定する(ステップ209)。この後縁座標の判定の
ときには、前記のステップ207に換えてステップ20
7aに戻る繰り返し処理になる。そして前記と同様にス
テップ209、210の判定でNO条件が成立するとこ
の処理を終する。これにより後縁からみた輪郭映像につ
いて相似形となるような類似画像を排除する。なお、こ
の場合、前記と同様に碍子4の内側の湾曲部のエッジX
Ea、XEb…があるときには、所定値Xrは、Xiに置き換
えられてステップ209の判定が行われる。
If the determination in step 211 is YES, it is determined whether or not the trailing edge is to be determined (step 21).
3) Since the answer is NO at first, step 207 is selected instead of step 207 at this time.
Moving to step 207a, the difference ΔX between the trailing edge coordinates XEi
Ei = XEi + 1−XEi is calculated (step 207a).
This time, the difference ΔXEi is stored in the memory 152 (step 2
08) In the same manner as above, it is determined whether the difference ΔXEi is equal to or greater than a predetermined value Xr (step 209). In the determination of the trailing edge coordinates, step 20 is replaced with step 20 described above.
The process returns to step 7a. Then, in the same manner as described above, if the NO conditions are satisfied in the determinations of steps 209 and 210, this processing ends. As a result, a similar image having a similar shape to the contour image viewed from the trailing edge is excluded. In this case, similarly to the above, the edge X of the curved portion inside the insulator 4 is used.
When there are Ea, XEb,..., The predetermined value Xr is replaced with Xi, and the determination in step 209 is performed.

【0020】このようにして、ステップ213の判定で
後縁とされてYESとなり、前縁の判定と後縁の判定が
行われると、ステップ214に移る。ここで、前記の頂
点を開始点として対象画像の最終水平走査ラインである
N本目について前縁と後縁のラインの差Lをそれぞれの
座標からその差として算出し(ステップ214)、差L
がLr以下かの判定(L≦Lr)をする(ステップ21
5)。この判定でNO条件が成立するとこの処理を終す
る。映像の最終ラインは、一定値以下であり、碍子は弓
形であるので、最終ラインの前縁から後縁の距離は、一
定の値以下になる。そうでない場合には、碍子ではな
い。なお、このステップ215の判定は、弓形の最終ラ
インの碍子の最小値をLqとし、碍子の最大値をLrと
して、範囲判定としてLq≦L≦Lrとして碍子である
か否かを判定してもよい。さて、ステップ215でYE
Sとなると、こんどは、二次の差値としてメモリ152
に記憶されたΔXSiを順次読出してさらにΔΔXSi=Δ
XSi-ΔXSi+1の演算を行い(ステップ216)、差Δ
ΔXSiをメモリ152に記憶して(ステップ217)、
差ΔΔXSiが所定値ΔXr以下か否かを判定する(ステ
ップ218)。ここでNO条件となるとこの処理を終了
する。これにより前縁からみた輪郭映像について曲率に
沿って段階的に所定の範囲で変化するものを抽出し、そ
れ以外のものを碍子でないものとしてここで排除する。
そして、ここでYESとなると、水平走査ラインすべて
終了か、否かの判定をして(ステップ219)、NOの
ときにはiを次の水平走査ラインとして更新(i=i+
1)し(ステップ220)、ステップ216へと戻り、
iを更新しながらステップ217を経て差ΔΔXSiをメ
モリに順次記憶するとともにステップ218の判定を繰
り返す。
In this manner, the trailing edge is determined in step 213 to be YES, and the process proceeds to step 214 when the leading edge and the trailing edge are determined. Here, the difference L between the leading edge and the trailing edge of the N-th line, which is the last horizontal scan line of the target image, is calculated as the difference from the respective coordinates with the vertex as a starting point (step 214), and the difference L
Is smaller than Lr (L ≦ Lr) (step 21).
5). This process ends if the NO condition is satisfied in this determination. Since the last line of the image is equal to or less than a certain value and the insulator has an arc shape, the distance from the leading edge to the trailing edge of the last line is equal to or less than a certain value. If not, it is not an insulator. Note that the determination in step 215 may be made such that the minimum value of the insulator on the last line of the bow is Lq, the maximum value of the insulator is Lr, and the range is determined as Lq ≦ L ≦ Lr to determine whether the insulator is used. Good. Now, in step 215, YE
When it becomes S, the next time, as a second-order difference value,
Are sequentially read out and ΔΔXSi = Δ
XSi-ΔXSi + 1 is calculated (step 216), and the difference Δ
ΔXSi is stored in the memory 152 (step 217),
It is determined whether the difference ΔΔXSi is equal to or smaller than a predetermined value ΔXr (step 218). Here, when the NO condition is satisfied, this process ends. As a result, the contour image viewed from the leading edge, which changes stepwise within a predetermined range along the curvature, is extracted, and the others are excluded here as non-insulators.
Then, if YES here, it is determined whether or not all horizontal scanning lines are completed (step 219), and if NO, i is updated as the next horizontal scanning line (i = i +
1) Do (Step 220), return to Step 216,
While updating i, the difference ΔΔXSi is sequentially stored in the memory via step 217, and the determination in step 218 is repeated.

【0021】ステップ219の判定でYESとなると、
最初は、前記ステップ213と同様に後縁判定か否かの
判定をして(図示せず)、ここでNOとなるので、この
ときにはステップ216に換わってステップ216aの
選択となり、ステップ216aへと移り、後縁座標XEi
同士の差ΔΔXEi=ΔXEi-1−XEiの算出を行い(ステ
ップ216a)。今度は差ΔXEiをメモリ152に記憶
して(ステップ217)、前記と同様に差ΔXEiが所定
値Xr以上か否かを判定する(ステップ218)。この
後縁座標の判定のときには、前記のステップ216に換
えてステップ216aに戻る繰り返しになる。そして前
記と同様にステップ217の判定でNO条件が成立する
とこの処理を終する。これにより後縁からみた輪郭映像
について曲率に沿って段階的に所定の範囲で変化するも
のを抽出し、それ以外のものを排除する。
If the determination in step 219 is YES,
At first, it is determined whether or not the trailing edge determination is performed in the same manner as in the step 213 (not shown). In this case, the result is NO. In this case, the step 216a is selected instead of the step 216, and Transition, trailing edge coordinates XEi
The difference ΔΔXEi = ΔXEi−1−XEi is calculated (step 216a). This time, the difference ΔXEi is stored in the memory 152 (step 217), and it is determined whether or not the difference ΔXEi is equal to or larger than the predetermined value Xr as described above (step 218). In the determination of the trailing edge coordinates, the process returns to step 216a instead of step 216. Then, similarly to the above, if the NO condition is satisfied in the determination of step 217, this processing ends. As a result, an image that changes stepwise within a predetermined range along the curvature of the contour image viewed from the trailing edge is extracted, and other images are excluded.

【0022】次に、ステップ219でYESとなると、
メモリ152に記憶ΔΔXSiを読出、ΔΔXSiの絶対値
│ΔΔXSi│<KおよびΔΔXEiの絶対値│ΔΔXEi│
<Kの判定をする(ステップ221)。この判定でNO
条件が成立するとこの処理を終する。すなわち、二次の
差値において絶対値が所定値Nより大きいものは曲率が
順次減少する特性ではないことを意味する。よって、碍
子ではない。以上の結果、ステップ221でYESとな
ると、碍子の画像Gが決定され、図2のフローチャート
の107へと戻る。そして、次に頂点座標(Xo,Yo)
から座標Yoの実高さを実高さ参照テーブル26を参照
して算出してY=Yo+Yrにより碍子高さを算出す
る。
Next, if "YES" in the step 219,
The stored ΔΔXSi is read out to the memory 152, and the absolute value of ΔΔXSi│K and the absolute value of ΔΔXEi│ΔΔXEi│
<K is determined (step 221). NO in this determination
When the condition is satisfied, this processing ends. In other words, a secondary difference value whose absolute value is larger than the predetermined value N means that the curvature is not a characteristic that the curvature decreases sequentially. Therefore, it is not an insulator. If the result of the above is YES in step 221, the image G of the insulator is determined, and the process returns to 107 in the flowchart of FIG. Then, the vertex coordinates (Xo, Yo)
, The actual height of the coordinates Yo is calculated with reference to the actual height reference table 26, and the insulator height is calculated by Y = Yo + Yr.

【0023】なお、前記のステップ221の判定の後
に、ステップ221でYESとなったときに、次に、Δ
ΔXSiが負の値をカウントする。そのカウント値が<Q
の判定を加えるとよい。この判定でNO条件が成立する
とこの処理を終する。二次の差値において負値が所定値
の個数P以上あるときには映像採取上の問題ではなく、
実際のものが負値の極性を持つからであり、これは、曲
率が順次減少する特性ではないことを意味する。よっ
て、この場合も碍子ではない。同様に得、次に、ΔΔX
Eiが負の値をカウントする。そのカウント値が<Qの判
定をする。この判定でNO条件が成立するとこの処理を
終する。これも前記と同じ理由である。このような判定
をさらに加えることで碍子の判定はより確実になる。と
ころで、ステップ204、ステップ206、ステップ2
09、ステップ210、ステップ215、ステップ21
8、そしてステップ221の各処理においてNOとなっ
て、ここでの処理が終了したときは次のような処理にな
る。図2の処理へと戻り、図2のステップ105におい
てラベリング処理をした判定対象となるブロックがさら
に残されたいるときには、点線で示すように、ステップ
105に戻って、ラベリングされた別のブロックについ
て再びステップ106で碍子判定処理をする。そのよう
な残りブロックがないときには、ステップ106でNO
となったときに点線で示すように処理が終了する。な
お、このとき、後述するように、常時カメラ13を撮像
状態で動作させて碍子判定するときには、ステップ10
1に戻り、処理は継続し、電源が遮断されるまで続けら
れる。
When the result of the determination in step 221 is YES in step 221, then ΔΔ
ΔXSi counts a negative value. The count value is <Q
Should be added. This process ends if the NO condition is satisfied in this determination. When the negative value of the secondary difference value is equal to or more than the predetermined number P, it is not a problem in image capturing,
This is because the actual thing has a negative polarity, which means that the curvature is not a characteristic of gradually decreasing. Therefore, this case is not an insulator. Similarly, then obtain ΔΔX
Ei counts negative values. The count value is determined to be <Q. This process ends if the NO condition is satisfied in this determination. This is also the same reason as described above. By further adding such a determination, the determination of the insulator becomes more reliable. By the way, step 204, step 206, step 2
09, step 210, step 215, step 21
8, and in each process of step 221, the result is NO, and when this process is completed, the following process is performed. Returning to the processing of FIG. 2, if there is still a block to be determined that has been subjected to the labeling processing in step 105 of FIG. 2, as indicated by the dotted line, the processing returns to step 105 and another block is labeled. In step 106, the insulator determination process is performed again. If there is no such remaining block, NO in step 106
, The process ends as indicated by the dotted line. At this time, as will be described later, when the camera 13 is constantly operated in the imaging state and the insulator is determined, step 10 is performed.
Returning to 1, the process continues and continues until the power is turned off.

【0024】図4は、その実高さ参照テーブル26の説
明図である。カメラ13により採取した映像は、下方か
ら上部に向けてカメラを設定しているので、上側と下側
とでは、水平走査の1ラインについての距離の割合が相
違し、リニアな関係になっていない。また、ここでは、
天地が逆転しているので、画像の上側に水平走査の1ラ
インの高さに対して表示画面Dにおいては、上から下に
向かって高さが圧縮された関係にある。この関係を考慮
して実際の水平走査ラインに対応した高さを示すのが、
実高さ参照テーブル26である。欄26aは、Y座標の
座標値であり、欄26bが頂点Pの座標値Yoに対する
実高さを示す。
FIG. 4 is an explanatory diagram of the actual height reference table 26. In the image taken by the camera 13, the camera is set from the lower side to the upper side, so that the ratio of the distance for one horizontal scanning line is different between the upper side and the lower side, and does not have a linear relationship. . Also, here
Since the top and bottom are reversed, on the display screen D, the height is compressed from top to bottom with respect to the height of one horizontal scanning line above the image. In consideration of this relationship, the height corresponding to the actual horizontal scanning line is shown.
It is an actual height reference table 26. The column 26a shows the coordinate value of the Y coordinate, and the column 26b shows the actual height of the vertex P with respect to the coordinate value Yo.

【0025】以上説明してきたが、実施例では、差値Δ
XSi=XSi+1−XSiについてそれぞれiを更新して判定
を最終まで行った後に、差値ΔXEi=XEi+1−XEiの判
定に移行しているが、これは、差値ΔXSi=XSi+1−X
Siと差値ΔXEi=XEi+1−XEiの算出と判定を同じiの
値について順次行って後にiの値を更新していくもので
あってもよい。また、実施例では、差ΔXEiをΔXEi=
XEi+1−XEiにより算出しているが、これは、ΔXEi=
XEi−XEi+1により算出してもよい。この場合には算出
結果が負となるので、以後の判定を負として行うことに
なる。このことは、差ΔΔXEi=ΔXEi-1−XEiの演算
についても同様である。また、差ΔXSiと差ΔXEi、そ
して差ΔΔXSiと差ΔΔXEiを個別に所定値Mあるいは
Qを基準として判定しているが、これは、それぞれ絶対
値を採って順次判定するようにしてもよい。また、実施
例では、映像採取タイミング検出センサ11を用いて碍
子画像を採取するようにしているが、このようなタイミ
ング検出センサを使用しないときには、碍子判定処理で
碍子でないと判定された後にカメラ13をシャッタ動作
させて画像を採取し、これに応じて図2のプログラムを
スタートさせるか、あるいは、画像採取として定期的に
カメラ13をシャッタ動作させて、これに応じて定期的
な割込み処理で図2のプログラムをスタートさせればよ
い。
As described above, in the embodiment, the difference value Δ
After updating i for each of XSi = XSi + 1−XSi and performing the determination to the end, the process shifts to the determination of the difference value ΔXEi = XEi + 1−XEi. This is because the difference value ΔXSi = XSi + 1 -X
The calculation and determination of the difference value of Si and the difference value ΔXEi = XEi + 1−XEi may be sequentially performed for the same value of i, and the value of i may be updated afterwards. In the embodiment, the difference ΔXEi is represented by ΔXEi =
XEi + 1−XEi, which is calculated as ΔXEi =
It may be calculated by XEi−XEi + 1. In this case, since the calculation result is negative, the subsequent determination is made negative. The same applies to the calculation of the difference ΔΔXEi = ΔXEi−1−XEi. Further, the difference ΔXSi and the difference ΔXEi and the difference ΔΔXSi and the difference ΔΔXEi are individually determined on the basis of the predetermined value M or Q. However, these may be sequentially determined by taking their absolute values. Further, in the embodiment, the insulator image is sampled by using the video sampling timing detection sensor 11. However, when such a timing detection sensor is not used, the camera 13 is determined to be not an insulator by the insulator determination processing. 2 to start the program of FIG. 2 in response to the shutter operation, or to periodically operate the shutter 13 of the camera 13 as the image acquisition and perform periodic interruption processing in response to this. You only need to start program 2.

【0026】ところで、以上の実施例では、カメラ13
のシャッタをその都度動作させて碍子の映像を採取する
ものであるが、この発明では、碍子の判定が非常に短時
間で済むので、これとは別に、カメラ13をシャッタ動
作させることなく、カメラ13を常時撮像状態設定して
おき、走行する検測車上において碍子画像をリアルタイ
ムで高速に採取することができる。このように、常時撮
像状態で高速で画像を採取するときには、二値化処理プ
ログラム21、ノイズ除去処理プログラム22、そして
構造物除去処理プログラム23は、それぞれプログラム
処理によることなく、二値化回路、ノイズ除去回路、構
造物除去回路とし、ハードウエハの回路として設けて高
速処理をするとよい。これにより、それぞれカメラ13
から採取された1フィールドあるいは1フレーム対応に
画像データをさらに高速に処理することができる。その
結果、碍子判定処理を含めた全体の処理を1フィールド
の画像に対応する、1/60秒以内で行う程度まで高速
化が可能になる。
In the above embodiment, the camera 13
In this invention, the image of the insulator is sampled by operating the shutter every time. However, in the present invention, the judgment of the insulator can be performed in a very short time. 13 is always set to an imaging state, so that an insulator image can be taken at high speed in real time on a traveling inspection vehicle. As described above, when an image is collected at a high speed in the always-imaging state, the binarization processing program 21, the noise removal processing program 22, and the structure removal processing program 23 do not use the program processing, respectively. A noise removal circuit and a structure removal circuit may be provided as circuits on a hard wafer to perform high-speed processing. Thereby, each camera 13
Image data corresponding to one field or one frame extracted from the image data. As a result, the speed can be increased to the extent that the entire process including the insulator determination process is performed within 1/60 second corresponding to an image of one field.

【0027】[0027]

【発明の効果】以上の説明のとおり、この発明にあって
は、碍子画像判定手段を設けて、この対象画像を画面表
示したときのその画像の頂点を基準として水平走査ライ
ン上の各輪郭座標位置について手前の輪郭座標位置に対
して現在の輪郭座標位置がある範囲内に入ることおよび
対象画像の面積が所定の面積範囲にあることにより碍子
と判定する。碍子の映像が抽出できれば、カメラの設置
位置の採取した最下端の映像の位置(頂点の画面上の座
標位置)とカメラの設置位置との関係により碍子の最下
端の高さを得ることができる。その結果、撮像された画
像から高さ測定の処理が実質的にカメラの撮像速度に近
いリアルタイムでかつ簡単にでき、高さ測定処理が検測
車上において比較的簡単な処理により実現できる。
As described above, according to the present invention, the insulator image judging means is provided, and each contour coordinate on the horizontal scanning line is set based on the vertex of the target image when the target image is displayed on the screen. With respect to the position, the current outline coordinate position is within a certain range with respect to the previous outline coordinate position, and the area of the target image is within a predetermined area range. If the image of the insulator can be extracted, the height of the lowermost end of the insulator can be obtained from the relationship between the position of the lowermost image (coordinate position of the vertex on the screen) where the camera is installed and the camera installation position. . As a result, the process of height measurement from the captured image can be performed in real time and easily at substantially the imaging speed of the camera, and the height measurement process can be realized by a relatively simple process on the inspection vehicle.

【図面の簡単な説明】[Brief description of the drawings]

【図1】図1は、この発明のトロリ線支持碍子の高さ測
定装置を適用した一実施例のブロック図である。
FIG. 1 is a block diagram of one embodiment to which a height measuring device for a trolley wire support insulator of the present invention is applied.

【図2】図2は、その高さ測定処理のフローチャートで
ある。
FIG. 2 is a flowchart of the height measuring process.

【図3】図3は、高さ測定処理における碍子判定処理の
フローチャートである。
FIG. 3 is a flowchart of an insulator determination process in the height measurement process.

【図4】図4は、その実高さ参照テーブルの説明図であ
る。
FIG. 4 is an explanatory diagram of the actual height reference table.

【図5】図5は、画像処理の説明図であって、(a)
は、碍子画像の説明図、(b)は、その判定処理におけ
るエッジ座標の説明図、(c)〜(f)は、碍子と認識
されそうな各種構造物の画像の説明図である。
FIG. 5 is an explanatory diagram of image processing, and (a) of FIG.
Is an explanatory diagram of an insulator image, (b) is an explanatory diagram of edge coordinates in the determination process, and (c) to (f) are explanatory diagrams of images of various structures that are likely to be recognized as insulators.

【図6】図6は、エアーセクション個所に設けられたト
ロリ線支持碍子と検測車との関係の説明図である。
FIG. 6 is an explanatory diagram of a relationship between a trolley wire support insulator provided at an air section and an inspection vehicle.

【符号の説明】[Explanation of symbols]

1,2…トロリ線、3…支持柱3、4,5…碍子、11
…映像採取タイミング検出センサ、12…レーザ光源、
13…カメラ、14…A/D変換回路(A/D)、15
…画像データ処理装置、151…MPU、152…メモ
リ、153…CRTディスプレイ、154…画像メモ
リ、155…インタフェース、156…バス、157…
外部記憶装置、21…二値化処理プログラム、22…ノ
イズ除去処理プログラム、23…構造物除去処理プログ
ラム、24…碍子画像判定プログラム、25…碍子実高
さ算出プログラム、26…実高さ参照テーブル。
1, 2, trolley wire, 3, support pillars 3, 4, 5 ... insulator, 11
… Video sampling timing detection sensor, 12… Laser light source,
13 camera, 14 A / D conversion circuit (A / D), 15
... Image data processing device, 151 ... MPU, 152 ... Memory, 153 ... CRT display, 154 ... Image memory, 155 ... Interface, 156 ... Bus, 157 ...
External storage device, 21 binarization processing program, 22 noise removal processing program, 23 structure removal processing program, 24 insulator image determination program, 25 actual insulator height calculation program, 26 actual height reference table .

フロントページの続き (72)発明者 佐藤 裕樹 東京都渋谷区代々木二丁目二番二号 東日 本旅客鉄道株式会社内 (72)発明者 佐藤 宗雄 東京都渋谷区東3丁目16番3号 日立電子 エンジニアリング株式会社内 (72)発明者 金谷 元就 東京都渋谷区東3丁目16番3号 日立電子 エンジニアリング株式会社内 (72)発明者 吉沢 孝夫 東京都渋谷区東3丁目16番3号 日立電子 エンジニアリング株式会社内 Fターム(参考) 2F065 AA24 BB12 CC34 FF04 GG04 JJ03 JJ08 JJ26 MM14 MM24 PP22 QQ31 Continued on the front page (72) Inventor Hiroki Sato 2-2-2, Yoyogi, Shibuya-ku, Tokyo Inside Japan Railway Company (72) Inventor Muneo Sato 3-163-3, Higashi 3-chome, Shibuya-ku, Tokyo Hitachi Electronics Within Engineering Co., Ltd. (72) Inventor Motonori Kanaya 3-16-3 Higashi, Shibuya-ku, Tokyo Hitachi Electronics Engineering Co., Ltd. (72) Takao Yoshizawa Inventor 3-3-1-3 Higashi, Shibuya-ku, Tokyo Hitachi Electronics Engineering Co., Ltd. F-term (reference) 2F065 AA24 BB12 CC34 FF04 GG04 JJ03 JJ08 JJ26 MM14 MM24 PP22 QQ31

Claims (4)

【特許請求の範囲】[Claims] 【請求項1】トロリ線を支持するトロリ線支持碍子の高
さ測定装置において、 検測車から上方に向けて前記検測車の走行方向と実質的
に直角な方向に所定の幅の光束を発生するレーザ光源
と、 前記検測車に天地が反転して取付けられ前記トロリ線支
持碍子からの前記光束の反射光を受光してその映像を採
取する撮像装置と、 この撮像装置から得られる前記トロリ線支持碍子の下側
周辺部の映像を二値化して上下が反転した対象画像を得
てこの対象画像を画面表示したときの画像の頂点を基準
として水平走査ライン上の各輪郭座標位置について手前
の輪郭座標位置に対して現在の輪郭座標位置がある範囲
内に入ることおよび前記対象画像の面積が所定の面積範
囲にあることにより碍子と判定する碍子画像判定手段
と、 この碍子画像判定手段により判定された碍子画像につい
て前記頂点の垂直方向の画像上の座標位置に基づいて前
記トロリ線支持碍子の高さを算出する高さ算出手段とを
備えることを特徴とするトロリ線支持碍子の高さ測定装
置。
An apparatus for measuring the height of a trolley wire supporting insulator for supporting a trolley wire, comprising: a luminous flux having a predetermined width in a direction substantially perpendicular to a traveling direction of the inspection vehicle from an inspection vehicle upward; A laser light source that is generated, an imaging device that is attached to the inspection vehicle with the top and bottom inverted, receives reflected light of the light beam from the trolley wire support insulator, and captures an image of the reflected light beam, and the imaging device obtained from the imaging device Image of the lower peripheral part of the trolley wire support insulator is binarized to obtain a target image that is inverted upside down, and when this target image is displayed on the screen, each contour coordinate position on the horizontal scanning line based on the vertex of the image An insulator image determining means for determining that the current contour coordinate position falls within a certain range with respect to the preceding contour coordinate position and that the area of the target image is within a predetermined area range; By means Height calculating means for calculating the height of the trolley wire support insulator based on the coordinate position of the vertex on the image in the vertical direction with respect to the determined insulator image, wherein the height of the trolley wire support insulator is provided. Measuring device.
【請求項2】前記手前の輪郭座標位置に対して現在の輪
郭座標位置がある範囲内に入ることの前記碍子画像判定
手段の判定は、前記対象画像におけるある水平走査ライ
ン上の前縁座標位置と次の前記水平走査ライン上の前縁
座標位置との第1の差と前記対象画像における前記ある
水平走査ライン上の後縁座標位置と前記次の前記水平走
査ライン上の後縁座標位置との第2の差とを算出して前
記第1の差および前記第2の差をそれぞれ第1の所定値
と比較することにより行う請求項1記載のトロリ線支持
碍子の高さ測定装置。
2. The insulator image judging means judges that the current outline coordinate position falls within a certain range with respect to the previous outline coordinate position, and determines the leading edge coordinate position on a horizontal scanning line in the target image. And a first difference between a leading edge coordinate position on the next horizontal scanning line, a trailing edge coordinate position on the certain horizontal scanning line in the target image, and a trailing edge coordinate position on the next horizontal scanning line in the target image. 2. The trolley wire support insulator height measuring device according to claim 1, wherein the height difference is calculated by calculating the second difference and comparing the first difference and the second difference with a first predetermined value.
【請求項3】前記手前の輪郭座標位置に対して現在の輪
郭座標位置がある範囲内に入ることの前記碍子画像判定
手段の判定は、さらに前記ある手前の水平走査ライン上
の前記第1の差と次の前記水平走査ライン上の第1の差
との差を第3の差として算出し、さらに前記ある手前の
水平走査ライン上の前記第2の差と次の水平走査ライン
上の第2の差との差を第4の差として算出して前記第3
の差および前記第4の差をそれぞれ第2の所定値と比較
することにより行う請求項2記載のトロリ線支持碍子の
高さ測定装置。
3. The insulator image judging means judges that the current outline coordinate position falls within a certain range with respect to the previous outline coordinate position, and further determines the first outline position on the horizontal scan line before the predetermined outline coordinate position. The difference between the difference and the first difference on the next horizontal scan line is calculated as a third difference, and the difference between the second difference on the previous horizontal scan line and the first difference on the next horizontal scan line is further calculated. The difference from the second difference is calculated as the fourth difference, and the third difference is calculated.
3. The trolley wire support insulator height measuring device according to claim 2, wherein the height difference of the trolley wire supporting insulator is measured by comparing the difference between the first and second values with the second predetermined value.
【請求項4】さらに、前記碍子画像判定手段は、前記対
象画像における前記水平走査ライン上の前記頂点を最初
として最後の前記水平走査ラインの前記前縁から前記後
縁までの長さが一定範囲の値であることを判定すること
により前記碍子の判定を行う請求項3記載のトロリ線支
持碍子の高さ測定装置。
4. The apparatus according to claim 1, wherein said insulator image determining means is arranged such that a length from said leading edge to said trailing edge of said last horizontal scanning line in said target image is first within a predetermined range. 4. The trolley wire supporting insulator height measuring device according to claim 3, wherein the insulator is determined by determining that the value of the insulator is equal to the value of the insulator.
JP19720299A 1999-07-12 1999-07-12 Trolley wire support insulator height measuring device Expired - Lifetime JP3964077B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP19720299A JP3964077B2 (en) 1999-07-12 1999-07-12 Trolley wire support insulator height measuring device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP19720299A JP3964077B2 (en) 1999-07-12 1999-07-12 Trolley wire support insulator height measuring device

Publications (2)

Publication Number Publication Date
JP2001021321A true JP2001021321A (en) 2001-01-26
JP3964077B2 JP3964077B2 (en) 2007-08-22

Family

ID=16370526

Family Applications (1)

Application Number Title Priority Date Filing Date
JP19720299A Expired - Lifetime JP3964077B2 (en) 1999-07-12 1999-07-12 Trolley wire support insulator height measuring device

Country Status (1)

Country Link
JP (1) JP3964077B2 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002025133A1 (en) 2000-09-19 2002-03-28 Nissan Motor Co.,Ltd. Apparatus for estimating clutch temperature
JP2014126361A (en) * 2012-12-25 2014-07-07 Meidensha Corp Inspection device for support component of rigid overhead rail
KR20150127734A (en) * 2011-06-30 2015-11-17 메이덴샤 코포레이션 Trolley wire abrasion measuring apparatus using image process
CN106403828A (en) * 2016-08-30 2017-02-15 成都唐源电气股份有限公司 Monorail contact line remain height measurement method based on checkerboard calibration and monorail contact line remain height measurement system thereof
WO2018051738A1 (en) * 2016-09-13 2018-03-22 株式会社 明電舎 Insulator detection device and insulator detection method
CN116242459A (en) * 2023-04-06 2023-06-09 广州能源检测研究院 Mechanical water meter intelligent calibrating device based on laser sensor and fixing method

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002025133A1 (en) 2000-09-19 2002-03-28 Nissan Motor Co.,Ltd. Apparatus for estimating clutch temperature
KR20150127734A (en) * 2011-06-30 2015-11-17 메이덴샤 코포레이션 Trolley wire abrasion measuring apparatus using image process
KR101627481B1 (en) 2011-06-30 2016-06-03 메이덴샤 코포레이션 Trolley wire abrasion measuring apparatus using image process
JP2014126361A (en) * 2012-12-25 2014-07-07 Meidensha Corp Inspection device for support component of rigid overhead rail
CN106403828A (en) * 2016-08-30 2017-02-15 成都唐源电气股份有限公司 Monorail contact line remain height measurement method based on checkerboard calibration and monorail contact line remain height measurement system thereof
CN106403828B (en) * 2016-08-30 2020-03-20 成都唐源电气股份有限公司 Single-track contact line residual height measuring method and system based on checkerboard calibration
WO2018051738A1 (en) * 2016-09-13 2018-03-22 株式会社 明電舎 Insulator detection device and insulator detection method
JP2018044816A (en) * 2016-09-13 2018-03-22 株式会社明電舎 Device and method for detecting insulator
TWI641515B (en) * 2016-09-13 2018-11-21 日商明電舍股份有限公司 Insulator detection device and obstacle detection method
CN116242459A (en) * 2023-04-06 2023-06-09 广州能源检测研究院 Mechanical water meter intelligent calibrating device based on laser sensor and fixing method
CN116242459B (en) * 2023-04-06 2024-02-02 广州能源检测研究院 Mechanical water meter intelligent calibrating device based on laser sensor and fixing method

Also Published As

Publication number Publication date
JP3964077B2 (en) 2007-08-22

Similar Documents

Publication Publication Date Title
EP2431706B1 (en) Device for measuring displacement of pantograph and method for detecting hard spot of trolley wire
JP3167752B2 (en) Vehicle distance detection device
JP4275345B2 (en) Pattern inspection method and pattern inspection apparatus
CN104132943B (en) A kind of vehicle-mounted high speed dynamic track surface defect video detecting method and device
EP2244056A1 (en) Crossover measuring device
JP5287177B2 (en) Trolley wire wear and displacement measuring device by image processing
JP2002174601A (en) Method and device for detecting damage on wall face
JP2008184763A (en) Method and equipment for detecting coming-off of fastening bolt from rail joint plate
JP2000193601A (en) Surface defect inspecting device
JPH0546242A (en) White line detecting device
JP2001021321A (en) Instrument for measuring height of trollfy wire supporting insulator
JP4706693B2 (en) Vehicle color determination device, vehicle color determination system, and vehicle color determination method
JP3891730B2 (en) Trolley wire support bracket mounting angle measuring device
JPH1166226A (en) License plate recognizing device for vehicle
JP3605955B2 (en) Vehicle identification device
JP7043787B2 (en) Object detection system
JP2005147879A (en) Method and apparatus for detecting hard aerial line support insulator
JPH11259792A (en) Method and device for recognizing vehicle
JP2924063B2 (en) Image processing type traffic flow measurement device
JP2001283374A (en) Traffic flow measuring system
JP2003057004A (en) Method for detecting utility pole and apparatus for recording abnormal place of route as image using the same
JPH11259641A (en) Method for observing body, body observing device using the same method, and vehicle observing device
JP2710685B2 (en) Defect detection method by visual inspection
JP3259624B2 (en) Surface condition inspection device
JP2001258054A (en) Image quality inspection device and detector for center of gravity of luminance used therefor

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050520

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20060516

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070213

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070411

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20070411

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070522

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070523

R150 Certificate of patent or registration of utility model

Ref document number: 3964077

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100601

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110601

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110601

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120601

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130601

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term