JP6002516B2 - Car shape detection device and car wash machine equipped with the same - Google Patents
Car shape detection device and car wash machine equipped with the same Download PDFInfo
- Publication number
- JP6002516B2 JP6002516B2 JP2012205886A JP2012205886A JP6002516B2 JP 6002516 B2 JP6002516 B2 JP 6002516B2 JP 2012205886 A JP2012205886 A JP 2012205886A JP 2012205886 A JP2012205886 A JP 2012205886A JP 6002516 B2 JP6002516 B2 JP 6002516B2
- Authority
- JP
- Japan
- Prior art keywords
- light emitting
- optical axis
- light
- vehicle body
- light receiving
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims description 130
- 230000003287 optical effect Effects 0.000 claims description 178
- 238000005406 washing Methods 0.000 claims description 13
- 230000005540 biological transmission Effects 0.000 claims description 8
- 238000001035 drying Methods 0.000 claims description 6
- 238000004140 cleaning Methods 0.000 claims description 3
- 238000000034 method Methods 0.000 description 21
- 238000013500 data storage Methods 0.000 description 6
- 238000002347 injection Methods 0.000 description 3
- 239000007924 injection Substances 0.000 description 3
- 230000003111 delayed effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 230000037237 body shape Effects 0.000 description 1
- 230000001680 brushing effect Effects 0.000 description 1
- 239000011248 coating agent Substances 0.000 description 1
- 238000000576 coating method Methods 0.000 description 1
- 239000002453 shampoo Substances 0.000 description 1
- 238000010977 unit operation Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Landscapes
- Vehicle Cleaning, Maintenance, Repair, Refitting, And Outriggers (AREA)
Description
本発明は、自動車の形状を検出する車形検出装置、及び同装置を備え、洗浄する自動車車体の形状に応じて、洗浄ブラシ,乾燥ノズル等の洗車処理装置を作用させて自動車車体の洗浄,乾燥等の処理を施す洗車機に関する。 The present invention includes a vehicle shape detection device for detecting the shape of an automobile, and the same device, and cleaning the automobile body by operating a car wash processing device such as a cleaning brush and a drying nozzle according to the shape of the automobile body to be cleaned. The present invention relates to a car wash machine that performs processing such as drying.
本出願人は、特許文献1に記載された車形検出装置を提案している。この装置は、自動車を幅方向に挟んで発光部と受光部を配置した車体検出器と、この車体検出器を自動車の長さ方向に移動させる走行手段と、走行手段による移動距離を検出する移動距離検出手段とを備え、車体検出器が単位距離走行する毎に車体を検出し、車形データを作成するものである。
The present applicant has proposed a vehicle shape detection device described in
この車体検出器は、上下に複数の発光素子を配列した発光部と、発光素子と対をなす受光素子を配列した受光部とからなり、各発光素子と受光素子との間に形成される光軸の透光/遮光によって車体の有無を検出する。光軸の透光/遮光は、受光素子での受光レベルが所定のしきい値に達するか否かで判定され、透光した光軸を「0」、遮光した光軸を「1」として2値画像データが作成される。 This vehicle body detector is composed of a light emitting section in which a plurality of light emitting elements are arranged above and below, and a light receiving section in which light receiving elements that are paired with the light emitting elements are arranged, and light formed between the light emitting elements and the light receiving elements. The presence / absence of the vehicle body is detected by light transmission / shading of the shaft. The light transmission / light-blocking of the optical axis is determined by whether or not the light-receiving level at the light-receiving element reaches a predetermined threshold value. The light-transmitting optical axis is “0” and the light-blocking optical axis is “1”. Value image data is created.
特許文献1において、形成される光軸は、1つの発光素子に対して、水平に対向する受光素子との水平光軸と、この受光素子の上に隣接する受光素子との上傾斜光軸と、下に隣接する受光素子との下傾斜光軸とを形成している。すなわち、発光素子Lと受光素子Rを32対備えた場合、発光素子L1・L32を除く発光素子L2〜L31に対して、それぞれ光軸Ln−Rn、光軸Ln−Rn-1、光軸Ln−Rn+1を形成している。これにより、例えば光軸L1−R1と光軸L2−R2の中間高さの2値画像データを光軸L1−R2及び光軸L2−R1の検出結果に基づいて作成し、発光素子−受光素子の組数よりも高い分解能で車体検出を行うことができる。
In
ところで、特許文献1の車形検出装置では、例えばリアミラーを装備した自動車の形状を検出する場合、リアミラーの高さ位置を精度良く検出することは可能となるが、リアミラーが車体の左右どちらに取り付けられているかを認識することはできなかった。そのため、この車形検出装置で検出した車形データに沿って洗車を行うと、リアミラーが取り付けてない側の車体も洗浄することができず、大きな洗い残しが発生するという問題がある。
By the way, in the vehicle shape detection device of
本発明の課題は、リアミラー等の装備品が車体の左右いずれかに取り付けられているかを判別することができる車形検出装置及びこの装置を備えることで安全で洗い残しの少ない洗車を実現する洗車機を提供するものである。 An object of the present invention is to provide a vehicle shape detection device capable of determining whether equipment such as a rear mirror is attached to the left or right side of a vehicle body, and a car wash that realizes a safe and less car wash by including this device. The machine is provided.
このような課題を解決するために本発明は、上下に複数の発光素子を配置した発光部と、該発光部の発光素子と対向する複数の受光素子を上下に配置した受光部とを自動車の幅方向に挟んで対向させた車体検出装置と、該車体検出装置の発光部と受光部の各素子間に形成される光軸の透光/遮光により車体の有無を検出する車形制御部とを備えた車形検出装置において、発光部における1つの発光素子と水平に対向する受光素子との間に形成される水平光軸と、発光部における1つの発光素子と水平に対向する受光素子から上に2以上離れた受光素子との間に形成される上傾斜光軸と、発光部における1つの発光素子と水平に対向する受光素子から下に2以上離れた受光素子との間に形成される下傾斜光軸とを形成し、1つの発光素子を発光させて対応する1つの受光素子で受光する単位検出動作を、各光軸と各発光素子分繰り返して車体を検出する車形制御部を備え、該車形制御部は、車体を検出した水平光軸に対して、この水平光軸と交差する上傾斜光軸の車体検出結果と下傾斜光軸の車体検出結果との論理積または論理和で水平光軸において検出された車体の左右位置を判定する機能を備えたことを特徴とする。
In order to solve such a problem, the present invention provides a light emitting unit in which a plurality of light emitting elements are arranged above and below, and a light receiving unit in which a plurality of light receiving elements opposed to the light emitting elements of the light emitting unit are arranged up and down. A vehicle body detection device opposed to each other across the width direction, and a vehicle shape control unit that detects the presence or absence of the vehicle body by translucency / light shielding of an optical axis formed between each element of the light emitting unit and the light receiving unit of the vehicle body detection device; A horizontal optical axis formed between one light emitting element in the light emitting section and the light receiving element horizontally facing, and a light receiving element horizontally facing one light emitting element in the light emitting section. an upper inclined optical axis formed between the two or more distant the light-receiving element above, is formed between one light-emitting element and the horizontally facing the light receiving element in the light emitting portion of the two or more distant receiving element under a lower inclined optical axis formed that, emit one light emitting element A unit control operation for detecting the vehicle body by repeating the unit detection operation of receiving light by one corresponding light receiving element for each optical axis and each light emitting element, and the vehicle shape control unit includes a horizontal light that detects the vehicle body. The left-right position of the vehicle body detected on the horizontal optical axis is determined by the logical product or logical sum of the vehicle body detection result of the upper inclined optical axis and the vehicle body detection result of the lower inclined optical axis that intersects the horizontal optical axis. It has the function to perform.
また、門型状に形成した洗車機本体内に、洗浄ブラシ,乾燥ノズル等の洗車処理装置を備えるとともに、該洗車処理装置より先行する位置に車体検出装置を備えた洗車機であって、車体検出装置は、上下に複数の発光素子を配置した発光部と、該発光部の発光素子と対向する複数の受光素子を上下に配置した受光部とを自動車の幅方向に挟んで対向させて設けられるとともに、該発光部と受光部の各素子間に形成される光軸の透光/遮光から車体の有無を検出する車形制御部によって制御され、該車形制御部は、発光部における1つの発光素子と水平に対向する受光素子との間に形成される水平光軸と、発光部における1つの発光素子と水平に対向する受光素子から上下いずれかに1つ離れた受光素子との間に形成される傾斜光軸とで、1つの発光素子を発光させて対応する1つの受光素子で受光する単位検出動作を、各光軸と各発光素子分繰り返して車体を検出する第1車体検出と、発光部における1つの発光素子と水平に対向する受光素子との間に形成される水平光軸と、発光部における1つの発光素子と水平に対向する受光素子から上下いずれかに2つ以上離れた受光素子との間に形成される傾斜光軸とで、1つの発光素子を発光させて対応する1つの受光素子で受光する単位検出動作を、各光軸と各発光素子分繰り返して車体を検出する第2車体検出とを実行し、第1車体検出に基づいて車体の上面輪郭を検出し、第2車体検出に基づいて車体の左右位置を検出することを特徴とする洗車機。
A car wash machine having a car wash processing device such as a washing brush and a drying nozzle in a car wash body formed in a portal shape, and a car body detection device at a position preceding the car wash processing device. The detection device is provided with a light emitting section in which a plurality of light emitting elements are arranged above and below, and a light receiving section in which a plurality of light receiving elements opposed to the light emitting elements in the light emitting section are arranged above and below in the width direction of the automobile. And is controlled by a vehicle shape control unit that detects the presence or absence of the vehicle body from light transmission / light shielding of the optical axis formed between each element of the light emitting unit and the light receiving unit. Between a horizontal optical axis formed between one light emitting element and a horizontally facing light receiving element, and one light emitting element in the light emitting portion and one light receiving element one above or below from the horizontally facing light receiving element One with a tilted optical axis formed on A unit detection operation in which a light emitting element emits light and is received by one corresponding light receiving element is repeated for each optical axis and each light emitting element to detect the vehicle body, and horizontally with one light emitting element in the light emitting unit. An inclination formed between a horizontal optical axis formed between the opposing light receiving elements and a light receiving element that is separated from one light emitting element in the light emitting portion and two or more light receiving elements horizontally above and below the light receiving element. A unit detection operation of causing one light emitting element to emit light and receiving light by a corresponding one light receiving element with the optical axis is performed for each second optical axis and each light emitting element, and second vehicle body detection for detecting the vehicle body is performed. A car wash machine that detects an upper surface contour of a vehicle body based on a first vehicle body detection and detects a left-right position of the vehicle body based on a second vehicle body detection.
また、車形制御部は、第2車体検出において、発光部における1つの発光素子と水平に対向する受光素子との間に形成される水平光軸と、発光部における1つの発光素子と水平に対向する受光素子から上に2以上離れた受光素子との間に形成される上傾斜光軸と、発光部における1つの発光素子と水平に対向する受光素子から下に2以上離れた受光素子との間に形成される下傾斜光軸とを形成し、1つの発光素子を発光させて対応する1つの受光素子で受光する単位検出動作を、各光軸と各発光素子分繰り返して車体を検出し、車体を検出した水平光軸に対して、この水平光軸と交差する上傾斜光軸の車体検出結果と下傾斜光軸の車体検出結果との論理積または論理和で水平光軸において検出された車体の左右位置を判定する機能を備えたことを特徴とする。 In the second vehicle body detection , the vehicle shape control unit horizontally extends the horizontal optical axis formed between one light emitting element in the light emitting unit and the light receiving element horizontally facing, and one light emitting element in the light emitting unit. An upper inclined optical axis formed between a light receiving element two or more upward from the opposing light receiving element, and a light receiving element two or more downward from a light receiving element horizontally facing one light emitting element in the light emitting portion; A unit detection operation in which a light emitting element emits light and is received by a corresponding one light receiving element is repeated for each light axis and each light emitting element to detect the vehicle body. For the horizontal optical axis where the vehicle body is detected, detection is performed on the horizontal optical axis by the logical product or logical sum of the vehicle body detection result of the upper tilt optical axis and the vehicle body detection result of the lower tilt optical axis that intersects the horizontal optical axis. It has a function to judge the left and right position of the The features.
本発明によれば、リアミラー等の装備品が車体の左右どちら側に取り付けられているかを判定することができる。そして、判定結果に基づいて洗浄ブラシ等の洗車処理装置を作用させることで安全で洗い残しの少ない洗車動作が実現される。 According to the present invention, it is possible to determine which equipment such as a rear mirror is attached to the left or right side of the vehicle body. A car washing operation such as a washing brush is applied based on the determination result, thereby realizing a safe and less car washing operation.
以下、図面を基に本発明の実施態様について説明する。図1は本発明を門型洗車機に使用した例を示す説明図である。
1は洗車機本体で、レール2,2間に停車させた自動車Aを跨いで往復走行する。洗車機1には、主に自動車の上面を処理する上面ブラシ・上面乾燥ノズル・上面ジェットノズル等の上面処理装置3と、主に自動車の側面を処理する側面処理装置4を備え、これらの処理装置を自動車の形状に沿って作用させて車体を自動洗浄する。5は車体検出装置で、洗車機1の前方に備えられ自動車を幅方向に挟んでそれぞれ上下に複数の発光素子と受光素子とを対向させてなり、発光・受光素子間で授受される光信号が自動車の車体によって遮られるか否かにより車体を検出する。6は走行エンコーダで、洗車機1の走行モータ7の回転を検出し、洗車機1が単位距離走行するごとにパルス信号を出力する。
Hereinafter, embodiments of the present invention will be described with reference to the drawings. FIG. 1 is an explanatory view showing an example in which the present invention is used in a gate type car wash machine.
図2は車体検出装置5の構成及び制御系を示すブロック図である。
車体検出装置5は、発光素子L1〜Lnを上下に複数配列させた発光部5aと、発光素子L1〜Lnと対をなす受光素子R1〜Rnを複数配列させた受光部5bとで構成され、発光部5aと受光部5bとの間で光信号(赤外線)を授受している。この車体検出装置5は、発光部5aの発光素子と受光部5bの受光素子とが1対1で対応するよう配列させてあり、水平に対向する素子同士で光軸を構成するのが基本であるが、1つの発光素子からの光信号はある程度の角度で拡散されるため、対応する受光素子から上下に所定数離れた別の受光素子でも光軸を構成することが可能になる。8は発光走査駆動部で、車体検出時に発光素子を上から下(もしくは下から上)に順次点灯する。9は受光走査駆動部で、発光素子の走査に対応する受光素子を順次受光状態とする。
FIG. 2 is a block diagram showing the configuration and control system of the vehicle
The vehicle
10は車形制御部で、走行位置検出部11・受光検出部12・しきい値設定部13・車体検出部14・車形データ検出部15・画像処理部16・データ記憶部17を備え、各走査駆動部8・9を周期的に動作させて自動車の上面形状を検出するものである。
走行位置検出部11は、走行エンコーダ6からのパルス信号をカウントして洗車機1の走行位置を検出する。受光検出部12は、各受光素子での受光レベルを検出する。しきい値設定部13は、発光部5aと受光部5bとの間に自動車が存在しない状態で各受光素子が受信する受光レベルに基づいて光軸の透光/遮光を判断する判別しきい値を設定する。車体検出部14は、所定周期毎に走査駆動部8,9を動作させ、受光検出部12で検出される各受光素子の受光レベルをしきい値設定部13で設定した判別しきい値と比較して各光軸の透光/遮光を判定する。車形データ検出部15は、走行位置検出部11から与えられる洗車機1の走行位置と車体検出部14から与えられる各光軸の透光/遮光判定から2値画像データを作成する。画像処理部16は、車形データ検出部15で作成した車形データを解析処理し、洗車用データを作成する。データ記憶部17は、走行位置検出部11で検出される洗車機の走行位置データ・しきい値設定部13で設定されるしきい値・車形データ検出部15で作成される2値画像データ・画像処理部16で抽出される洗車用車形データが記憶される。
A vehicle
The
18は洗車制御部で、洗車プログラムに従って、車形制御部10を駆動して洗車用車形データを作成し、その作成した洗車用車形データに基づいて洗車駆動部19を介して上面洗浄装置3・側面洗浄装置4・洗車機1の走行モータ7等を駆動し、洗車機1を走行させながら車体の洗浄・乾燥といった洗車処理をさせるものである。20は操作パネルで、洗車機1の前面に設けられ洗車内容の選択入力や洗車開始入力を行うものである。
車形制御部10では、1つの発光素子に対して5つの光軸B1〜B5を形成し、発光素子からの光を対応する受光素子で受ける単位動作を各素子毎に素子数に応じた回数行い、各光軸B1〜B5の透光/遮光を判定して車形データを作成する。
光軸は、図3に示すように、発光素子Laと水平に対向する受光素子Raとの間に形成される光軸B1と、発光素子Laと水平に対向する受光素子Raの上に隣接する受光素子Ra-1との間に形成される光軸B2と、発光素子Laと水平に対向する受光素子Raの下に隣接する受光素子Ra+1との間に形成される光軸B3と、発光素子Laと水平に対向する受光素子Raから上に所定数xずらした受光素子Ra-xとの間に形成される光軸B4と、発光素子Laと水平に対向する受光素子Raから下に所定数xずらした受光素子Ra+xとの間に形成される光軸B5とからなる。尚、光軸B1・B2・B3での車体検出を第1車体検出、光軸B1・B4・B5での車体検出を第2車体検出として以下に説明していく。
The vehicle
As shown in FIG. 3, the optical axis is adjacent to the optical axis B1 formed between the light receiving element Ra and the light receiving element Ra horizontally opposed to the light emitting element La and the light receiving element Ra horizontally opposed to the light emitting element La. An optical axis B3 formed between an optical axis B2 formed between the light receiving element Ra-1 and a light receiving element Ra + 1 adjacent to the lower side of the light receiving element Ra horizontally facing the light emitting element La; The optical axis B4 formed between the light receiving element Ra-x shifted by a predetermined number x from the light receiving element Ra horizontally facing the light emitting element La, and the light receiving element Ra horizontally facing the light emitting element La. The optical axis B5 is formed between the light receiving element Ra + x shifted by a predetermined number x. In the following description, vehicle body detection on the optical axes B1, B2, and B3 is referred to as first vehicle body detection, and vehicle body detection on the optical axes B1, B4, and B5 is referred to as second vehicle body detection.
第1車体検出は、発光素子Laの高さ位置Haにおける車体有無と、発光素子Laと隣接する発光素子La-1との中間高さ位置Hb及び発光素子La+1との中間高さ位置Hcにおける車体の有無判定に用いられ、素子間ピッチpの約2倍の分解能で車体高さ位置を検出するものである。例えば、発光素子L10の光を1個上の受光素子R9で受ける光軸B2と、発光素子L9の光を1個下の受光素子R10で受ける光軸B3との検出結果により、発光素子L9と発光素子L10との中間高さ位置Hbにおける車体検出が可能になり、発光素子L10の光を1個下の受光素子R11で受ける光軸B3と、発光素子L11の光を1個上の受光素子R10で受ける光軸B2との検出結果により、発光素子L10と発光素子L11との中間高さ位置Hcにおける車体検出が可能になる。 In the first vehicle body detection, the presence / absence of the vehicle body at the height position Ha of the light emitting element La, the intermediate height position Hb between the light emitting element La-1 and the adjacent light emitting element La-1, and the intermediate height position Hc between the light emitting element La + 1. The vehicle body height position is detected with a resolution about twice the inter-element pitch p. For example, the detection result of the optical axis B2 that receives the light of the light emitting element L10 by the upper light receiving element R9 and the optical axis B3 that receives the light of the light emitting element L9 by the lower light receiving element R10, The vehicle body can be detected at an intermediate height position Hb with respect to the light emitting element L10, the optical axis B3 for receiving the light of the light emitting element L10 by the lower light receiving element R11, and the light receiving element for receiving the light of the light emitting element L11. Based on the detection result of the optical axis B2 received at R10, the vehicle body can be detected at the intermediate height position Hc between the light emitting element L10 and the light emitting element L11.
第2車体検出は、発光素子Laと受光素子Raの素子間距離Sを光軸B1に対する光軸B4及び光軸B5による交点で分割し、分割された幅範囲における車体の有無判定に用いられ、発光部5aと受光部5bとの距離Sを分割数xで分割したピッチd(=x/S)の幅単位で左右位置を検出するものである。ここで、分割数xは、光軸B1と光軸B4との交点数(もしくは光軸B1と光軸B5との交点数)により決定されるもので、光軸B4及び光軸B5を形成するずらし数xと等しくなる。例えば、ずらし数xを『8』とした場合、発光素子L10の光軸B1-10は、光軸B4-10〜B4-18及び光軸B5-10〜B5-2が交差して8分割され、この分割される幅単位で車体検出が可能になる。
The second vehicle body detection is used to divide the inter-element distance S between the light emitting element La and the light receiving element Ra at the intersection of the optical axis B4 and the optical axis B5 with respect to the optical axis B1, and to determine the presence or absence of the vehicle body in the divided width range. The left and right positions are detected in width units of a pitch d (= x / S) obtained by dividing the distance S between the
これにより、本実施態様では、車体高さ位置に関して、発光素子Lの配列ピッチpの約2倍(32対であれば32×2−2=62)の分解能で車形検出することができ、車体左右位置に関して素子間距離Sの分割数x(ここでは8)で分割したピッチdの分解能で車体検出することができる。 Thereby, in this embodiment, the vehicle shape can be detected with a resolution of about twice the arrangement pitch p of the light emitting elements L (32 × 2-2 = 62 for 32 pairs) with respect to the vehicle body height position. The vehicle body can be detected with the resolution of the pitch d divided by the division number x (here, 8) of the inter-element distance S with respect to the vehicle body left-right position.
続いて、このように構成される洗車機の動作について説明する。
洗車機1は、操作パネル20で洗車開始入力があると、しきい値の設定を行った後、走行を開始して車形検出と洗車処理を実行する。以下、しきい値設定処理・車形検出処理・洗車処理について説明する。
Next, the operation of the car wash machine configured as described above will be described.
When there is a car wash start input on the operation panel 20, the
<しきい値設定処理>
図4はしきい値設定処理を示すフローチャート図である。尚、ここでは発光素子と受光素子の組数を32対とした場合を例に説明するが、その組数は特に限定されるものではない。
しきい値設定処理は、車体検出装置5の発光部5aと受光部5bの間に自動車が入り込んでない状態で、受光部5bの走査駆動部9を駆動し、発光素子L1を発光させる前の受光素子R1の受光レベルLvaを取り込む(1)。次に、発光部5aの走査駆動部8と受光装置5bの走査駆動部9を駆動し、発光素子L1を発光させた時の受光素子R1の受光レベルLvbを取り込む(2)。その後、処理(1)で取り込んだ受光レベルLvaと処理(2)で取り込んだ受光レベルLvbとの差分受光レベルLvcを算出し(3)、この差分受光レベルLvcに対して所定割合(例えば30%)をしきい値に設定し(4)、判別しきい値Sとしてデータ記憶部17に記憶する(5)。こうした処理(1)〜(5)までの基本動作を素子数分繰り返し、各発光素子L1〜L32の各光軸B1〜B5の判別しきい値を設定する(6)。
<Threshold setting process>
FIG. 4 is a flowchart showing the threshold setting process. Here, a case where the number of pairs of light emitting elements and light receiving elements is 32 will be described as an example, but the number of pairs is not particularly limited.
In the threshold setting process, light reception before driving the light-emitting element L1 by driving the
このような処理(1)〜(5)までの基本動作を繰り返し、各発光素子L1〜L32に対して光軸B1の判別しきい値S1-1〜S1-32、光軸B2の判別しきい値S2-2〜S2-32、光軸B3の判別しきい値S3-1〜S3-31、光軸B4の判別しきい値S4-9〜S4-32、光軸B5の判別しきい値S5-1〜S5-24を設定していく。このとき、光軸B2については、受光部5bの走査タイミングを発光部5aの走査タイミングと1素子分遅らせているため、発光素子L1には形成されない。光軸B3については、受光部5bの走査タイミングを発光部5aの走査タイミングと1素子分早めているため、発光素子L32には形成されない。光軸B4については、受光部5bの走査タイミングを発光部5aの走査タイミングと8素子分遅らせているため、発光素子L1〜L8には形成されない。光軸B5については、受光部5bの走査タイミングを発光部5aの走査タイミングと8素子分早めているため、発光素子L25〜L32には形成されない。
Such basic operations (1) to (5) are repeated, and the discrimination thresholds S1-1 to S1-32 of the optical axis B1 and the discrimination threshold of the optical axis B2 are determined for each of the light emitting elements L1 to L32. Values S2-2 to S2-32, optical axis B3 discrimination threshold S3-1 to S3-31, optical axis B4 discrimination threshold S4-9 to S4-32, optical axis B5 discrimination threshold S5 Set -1 to S5-24. At this time, the optical axis B2 is not formed in the light emitting element L1 because the scanning timing of the
こうして各光軸の判別しきい値が設定され、データ記憶部17には、図5・6に示すしきい値データが作成されることになる。このように、検出を行う各素子間のしきい値を設定するのは、各素子の器差を許容することに加え、各素子やカバー等の汚れや故障による通光の状態を事前に認識しておくことも兼ねており、正確な車体検出のために必要となる。 In this way, the discrimination threshold value for each optical axis is set, and threshold data shown in FIGS. In this way, the threshold value between each element to be detected is not only allowed to allow instrumental error of each element, but also recognizes in advance the light transmission state due to dirt or failure of each element or cover. This is also necessary for accurate vehicle body detection.
<車体検出処理>
図7は車形検出処理を示すフローチャート図である。しきい値の設定が完了すると、洗車機1の往行に伴い、走行エンコーダ6から所定数のパルス信号が入力される毎に車体検出処理が実行される。
車形検出処理は、しきい値設定処理の処理(1)〜(3)と同様に、発光素子L1を発光させる前の受光素子R1の受光レベルLvaと、発光素子L1を発光させた時の受光素子R1の受光レベルLvbとの差分受光レベルLvcを算出し(7)、データ記憶部17に記憶された判別しきい値Sと比較する(8)。ここで、差分受光レベルLvcが記憶された判別しきい値Sよりも高ければ「○透光」と判断してその光軸Bに「0」の2値データを与え(9)、判別しきい値Sよりも低ければ「×遮光」と判断して光軸Bに「1」の2値データを与えて(10)、データ記憶部17に記憶する(11)。この処理(7)〜(11)を光軸B1・B2・B3について実行すると第1車体検出完了となり(12)、第1車体検出の2値画像データを作成する(13)。次に、処理(7)〜(11)を光軸B1・B4・B5について実行すると第2車体検出完了となり(14)、第2車体検出の2値画像データを作成する(15)。
<Car body detection process>
FIG. 7 is a flowchart showing the vehicle shape detection process. When the setting of the threshold value is completed, the vehicle body detection process is executed every time a predetermined number of pulse signals are input from the traveling
In the vehicle shape detection process, the light receiving level Lva of the light receiving element R1 before causing the light emitting element L1 to emit light and the light emitting element L1 to emit light are the same as the threshold setting process (1) to (3). A difference light reception level Lvc with respect to the light reception level Lvb of the light receiving element R1 is calculated (7), and compared with the discrimination threshold S stored in the data storage unit 17 (8). Here, if the difference light reception level Lvc is higher than the stored determination threshold value S, it is determined that “○ is translucent” and binary data of “0” is given to the optical axis B (9). If it is lower than the value S, it is judged as “× light shielding”, binary data “1” is given to the optical axis B (10), and stored in the data storage unit 17 (11). When these processes (7) to (11) are executed for the optical axes B1, B2, and B3, the first vehicle body detection is completed (12), and binary image data for the first vehicle body detection is created (13). Next, when the processes (7) to (11) are executed for the optical axes B1, B4, and B5, the second vehicle body detection is completed (14), and binary image data for the second vehicle body detection is created (15).
ここで、自動車のリアミラーを検出する場合を例に、車体検出処理について詳細に説明する。
図8は第1車体検出によるリアミラーの検出を示している。
図8において、車体検出装置5は、発光素子L1〜L32と受光素子R1〜R32がそれぞれ対向して配列される発光部5aと受光部5bとで構成されている。この車体検出装置5により、図7のフローチャートに沿って光軸B1(B1-1〜B1-32)・光軸B2(B2-2〜B2-32)・光軸B3(B3-1〜B3-31)の2値データを検出し、第1車体検出の2値画像データを作成する。ここでは、リアミラーRMにより光軸B1-11〜光軸B1-13、光軸B2-11〜光軸B2-13、光軸B3-11〜光軸B3-13が遮光され、それ以外の光軸は全て透光されている。
Here, the vehicle body detection process will be described in detail by taking as an example the case of detecting a rear mirror of an automobile.
FIG. 8 shows detection of the rear mirror by the first vehicle body detection.
In FIG. 8, the vehicle
図9はこの第1車体検出で得られたリアミラーの2値データ及びこの2値データに基づく2値画像データを示している。
図9に示すように、光軸B1の検出結果が「×遮光」となった光軸B1-11〜光軸B1-13に「1」の2値データを与える。次に、光軸B2の検出結果が「×遮光」となった光軸B2-11・光軸B2-12・光軸B2-13について、それぞれ光軸B1-10と光軸B1-11の中間高さ・光軸B1-11と光軸B1-12の中間高さ・光軸B1-12と光軸B1-13の中間高さを「×遮光」とし、光軸B3の検出結果が「×遮光」となった光軸B3-11・光軸B3-12・光軸B3-13について、それぞれ光軸B1-11と光軸B1-12の中間高さ・光軸B1-12と光軸B1-13の中間高さ・光軸B1-13と光軸B1-14の中間高さを「×遮光」とする。最後に、中間高さの検出結果をOR処理して2値データを与え、結果的に光軸B1-10と光軸B1-11の中間高さから光軸B1-13と光軸B1-14の中間高さまで車体が存在する2値画像データが得られることになる。これにより、実際に設けられた発・受光素子の中間高さでのリアミラー有無を判定するので、素子の高さ位置とその中間位置とで素子数の約2倍の分解能で車体検出できる。
FIG. 9 shows binary data of the rear mirror obtained by the first vehicle body detection and binary image data based on the binary data.
As shown in FIG. 9, binary data “1” is given to the optical axes B1-11 to B1-13 where the detection result of the optical axis B1 is “× light shielding”. Next, for the optical axis B2-11, the optical axis B2-12, and the optical axis B2-13 for which the detection result of the optical axis B2 is “× light shielding”, the intermediate between the optical axis B1-10 and the optical axis B1-11, respectively. The intermediate height between the height, the optical axis B1-11 and the optical axis B1-12, and the intermediate height between the optical axis B1-12 and the optical axis B1-13 are “× light shielding”, and the detection result of the optical axis B3 is “× For the optical axis B3-11, optical axis B3-12, and optical axis B3-13 that became “shielded”, the intermediate height between the optical axis B1-11 and the optical axis B1-12, the optical axis B1-12, and the optical axis B1 respectively. The intermediate height between -13 and the intermediate height between the optical axis B1-13 and the optical axis B1-14 is defined as “× light shielding”. Finally, the intermediate height detection result is ORed to give binary data. As a result, the optical axis B1-13 and the optical axis B1-14 are obtained from the intermediate height between the optical axis B1-10 and the optical axis B1-11. Binary image data in which the vehicle body exists up to the intermediate height is obtained. As a result, the presence / absence of the rear mirror at the intermediate height of the light emitting / receiving element actually provided is determined, so that the vehicle body can be detected at a resolution of about twice the number of elements at the height position of the element and its intermediate position.
図10は第2車体検出によるリアミラーの検出を示している。
図10において、上記同様に、図7のフローチャートに沿って光軸B1(B1-1〜B1-32)・光軸B4(B4-9〜B4-32)・光軸B5(B5-1〜B5-24)の2値データを作成し、第2車体検出の2値画像データを作成する。ここでは、リアミラーRMにより光軸B1-11〜光軸B1-13、光軸B4-13〜光軸B4-16、光軸B5-9〜光軸B5-12が遮光され、それ以外の光軸は全て透光されている。
FIG. 10 shows the detection of the rear mirror by the second vehicle body detection.
10, in the same manner as described above, the optical axis B1 (B1-1 to B1-32), the optical axis B4 (B4-9 to B4-32), the optical axis B5 (B5-1 to B5) along the flowchart of FIG. -24) to create binary image data for second vehicle body detection. Here, the optical axis B1-11 to the optical axis B1-13, the optical axis B4-13 to the optical axis B4-16, and the optical axis B5-9 to the optical axis B5-12 are shielded by the rear mirror RM, and the other optical axes. Are all translucent.
図11はこの第2車体検出で得られたリアミラーの2値データ及びこの2値データに基づく2値画像データを示している。
図11に示すように、光軸B1の検出結果が「×遮光」となった光軸B1-11について、この光軸B1-11と交差する光軸B4(B4-11〜B4-19)の検出結果を光軸B1-11上の交点0〜9に与える。次に、この光軸B1-11と交差する光軸B5(B5-11〜B5-3)の検出結果を光軸B1-11上の交点0〜9に与える。最後に、各交点0〜9に与えられる検出結果をAND処理して2値データを与え、光軸B1-11におけるリアミラー位置を検出する。ここでは、光軸B1-11の交点2と交点3の間に物体が存在することが検出される。
FIG. 11 shows binary data of the rear mirror obtained by the second vehicle body detection and binary image data based on the binary data.
As shown in FIG. 11, for the optical axis B1-11 whose detection result of the optical axis B1 is “× light shielding”, the optical axis B4 (B4-11 to B4-19) intersecting the optical axis B1-11 is shown. The detection result is given to the
同様に、光軸B1の検出結果が「×遮光」となった光軸B1-12及び光軸B1-13についても、上記手順で交点0〜9での2値データを与え、リアミラー位置を検出する。ここでは、光軸B1-12の交点1から交点4の間に物体が存在することが検出され、光軸B1-13の交点2から交点3の間に物体が存在することが検出される。これにより、幅方向でのリアミラー位置を検出され、リアミラーが車体の左右どちら側に取り付けられているかを判定することができる。なお、各交点0〜9に与えられる検出結果をOR処理して得られる2値データは図11の斜線部となり、AND処理して得られる2値データよりも大きな範囲で検出されることになるが、どちらを選択しても問題ない。
Similarly, for the optical axis B1-12 and optical axis B1-13 for which the detection result of the optical axis B1 is “× light shielding”, binary data at the intersection points 0 to 9 is given in the above procedure to detect the rear mirror position. To do. Here, it is detected that an object exists between the
こうした車形検出処理は、洗車機1が往行を終了するまで連続的に実行され、走行エンコーダ6から所定数dのパルス信号が入力される毎に、透光「0」・遮光「1」とする2値データを取り込んで行くことで、走行ピッチd×検出ピッチ2pのマトリックス上に展開した2値画像データが作成される。また、同時に、走行ピッチd毎に分割ピッチx×配列ピッチpのマトリックス上に展開した2値画像データが作成される。つまり、第1車体検出と第2車体検出を実行することにより、車体を長さ方向に展開した画像と幅方向に展開した画像とを取り込むことができ、3次元的な車体形状が得られることになる。
Such a vehicle shape detection process is continuously executed until the
図12は第1車体検出で作成される2値画像データを示しており、図13は図12における各ポイントA〜Eにおける第2車体検出で作成される2値画像データを示している。
こうして作成された2値画像データは、画像処理部16において、論理フィルターをかけられて輪郭線が抽出される。洗車機1の走行とともに自動車の車体画像データが順次送られてきて展開されつつ輪郭線を追跡するので、自動車全体の2値画像データが取込み完了した時点で全体の輪郭線が抽出される。こうして得られた自動車の輪郭から、洗車機の走行方向に対する自動車高さ方向のデータを決定した洗車用データが作成される。
FIG. 12 shows binary image data created by the first vehicle body detection, and FIG. 13 shows binary image data created by the second vehicle body detection at points A to E in FIG.
The binary image data created in this way is subjected to a logical filter in the image processing unit 16 to extract a contour line. Since the vehicle body image data is sequentially sent and developed as the
<洗車処理>
以上のように構成する車形検出装置を採用した洗車機1の動作について説明する。
自動車Aを車体検出装置5で検出されない所定の停車位置に停止させ、操作パネル20で洗車コースを選択し、洗車スタートを入力すると洗車動作が開始する。洗車がスタートすると、しきい値設定部13でしきい値設定処理を行う。このとき、高圧ジェット等により飛沫した洗浄水が車体検出に影響を及ぼす可能性があるため、洗車コースによってしきい値基準を変えるのが望ましい。このしきい値設定動作が終了すると、洗車機本体1を走行させ、走行エンコーダ6がパルス信号を発信する毎に、走行位置検出部11で洗車機1の走行距離を検知し、車体検出部14で車体の有無を検知し、車形データ検出部15で車形検出処理を行い1走査分の2値画像データを作成する。尚、車形検出処理を実行するタイミングは、走行エンコーダのパルス信号をトリガにするだけでなく、一定周期で実行するようにしても良い。
<Car wash processing>
Operation | movement of the
When the automobile A is stopped at a predetermined stop position that is not detected by the vehicle
洗車機1の走行に伴い、ある程度(ここでは5走査分)の2値画像データがたまったら、画像処理部16で車形データを画像処理して洗車用データを作成する。この洗車用データの作成は、洗車機1が往路を走行する間継続して実行され、連続した自動車の上面輪郭が得られる。自動車の形状が検出されると、検出された自動車の輪郭に基づいて洗車動作が行われる。洗車動作は、洗車機1の走行に伴い、シャンプー噴射を伴う車体のブラッシングと、ワックス噴射に伴うコーティングと、高速風の噴射によるブロー等が実行される。このうち、上面ブラシ及び上面ノズルは、図14(a)に示すように、検出された自動車の上面輪郭に沿って上下制御され、リアミラー等の装備品に対しては、回避動作を与えて安全に洗車される。また、側面ブラシ及び側面ノズルは、図14(b)に示すように、自動車の側面位置に応じて開閉制御され、リアミラー等の装備品に対しては、車体の左右どちらに取り付けられているかが認識できるので、装備品がない側の車体(リアミラーであれば装備されていない側の後面)を側面ブラシで洗浄することができる。こうして、洗車動作が終了すると、自動車の退出を促して洗車を終了する。
When a certain amount of binary image data (here, 5 scans) accumulates as the
本発明はこのように構成され、車体を検出した水平光軸に対して、この水平光軸と交差する傾斜光軸の車体検出結果に基づいて水平光軸で検出された車体の左右位置を判定する機能を備えたことを特徴としている。検出される装備品は、リアミラーを例に説明したが、カスタムミラーやスモールフェンダー等でもよいことは言うまでもない。また、傾斜光軸のずらし量を可変にし、車体側面位置を検出するこもできる。 The present invention is configured as described above, and with respect to the horizontal optical axis in which the vehicle body is detected, the left and right positions of the vehicle body detected by the horizontal optical axis are determined based on the vehicle body detection result of the inclined optical axis that intersects the horizontal optical axis. It is characterized by having a function to do. The equipment to be detected has been described by taking a rear mirror as an example, but needless to say, a custom mirror or a small fender may be used. It is also possible to detect the side position of the vehicle body by making the shift amount of the tilt optical axis variable.
1 洗車機本体
5 車体検出装置
5a 発光装置
5b 受光装置
8,9 走査駆動部
10 車形制御部
11 走行位置検出部
12 受光検出部
13 しきい値設定部
14 車体検出部
15 車形データ検出部
16 画像処理部
17 データ記憶部
DESCRIPTION OF
DESCRIPTION OF
Claims (3)
前記発光部における1つの発光素子と水平に対向する受光素子との間に形成される水平光軸と、発光部における1つの発光素子と水平に対向する受光素子から上に2以上離れた受光素子との間に形成される上傾斜光軸と、発光部における1つの発光素子と水平に対向する受光素子から下に2以上離れた受光素子との間に形成される下傾斜光軸とを形成し、1つの発光素子を発光させて対応する1つの受光素子で受光する単位検出動作を、各光軸と各発光素子分繰り返して車体を検出する車形制御部を備え、
該車形制御部は、車体を検出した水平光軸に対して、この水平光軸と交差する上傾斜光軸の車体検出結果と下傾斜光軸の車体検出結果との論理積または論理和で水平光軸において検出された車体の左右位置を判定する機能を備えたことを特徴とする車形検出装置。
A vehicle body detection device in which a light emitting unit in which a plurality of light emitting elements are arranged above and below, and a light receiving unit in which a plurality of light receiving elements opposed to the light emitting elements of the light emitting unit are arranged vertically are opposed to each other in the width direction of the automobile; In a vehicle shape detection device comprising: a vehicle shape control unit that detects the presence or absence of a vehicle body by translucency / light shielding of an optical axis formed between the light emitting unit and the light receiving unit of the vehicle body detection device;
A horizontal optical axis formed between one light emitting element in the light emitting unit and a horizontally opposed light receiving element, and a light receiving element spaced two or more upwards from the light receiving element horizontally opposed to one light emitting element in the light emitting unit Forming an upper inclined optical axis formed between the light receiving element and a lower inclined optical axis formed between the light receiving element horizontally spaced from the light receiving element horizontally opposed to the light receiving element by two or more. And a vehicle-shaped control unit that detects a vehicle body by repeating a unit detection operation in which one light emitting element emits light and is received by a corresponding one light receiving element for each light axis and each light emitting element,
The vehicle shape control unit is a logical product or logical sum of the vehicle body detection result of the upper tilt optical axis and the vehicle body detection result of the lower tilt optical axis that intersects the horizontal optical axis with respect to the horizontal optical axis that has detected the vehicle body. A vehicle shape detection apparatus comprising a function of determining a left and right position of a vehicle body detected on a horizontal optical axis.
前記車体検出装置は、上下に複数の発光素子を配置した発光部と、該発光部の発光素子と対向する複数の受光素子を上下に配置した受光部とを自動車の幅方向に挟んで対向させて設けられるとともに、該発光部と受光部の各素子間に形成される光軸の透光/遮光から車体の有無を検出する車形制御部によって制御され、The vehicle body detection device opposes a light emitting section in which a plurality of light emitting elements are arranged above and below and a light receiving section in which a plurality of light receiving elements opposed to the light emitting elements of the light emitting section are arranged in the vehicle width direction. And is controlled by a vehicle shape control unit that detects the presence or absence of a vehicle body from light transmission / light shielding of an optical axis formed between each element of the light emitting unit and the light receiving unit,
該車形制御部は、発光部における1つの発光素子と水平に対向する受光素子との間に形成される水平光軸と、発光部における1つの発光素子と水平に対向する受光素子から上下いずれかに1つ離れた受光素子との間に形成される傾斜光軸とで、1つの発光素子を発光させて対応する1つの受光素子で受光する単位検出動作を、各光軸と各発光素子分繰り返して車体を検出する第1車体検出と、発光部における1つの発光素子と水平に対向する受光素子との間に形成される水平光軸と、発光部における1つの発光素子と水平に対向する受光素子から上下いずれかに2つ以上離れた受光素子との間に形成される傾斜光軸とで、1つの発光素子を発光させて対応する1つの受光素子で受光する単位検出動作を、各光軸と各発光素子分繰り返して車体を検出する第2車体検出とを実行し、第1車体検出に基づいて車体の上面輪郭を検出し、第2車体検出に基づいて車体の左右位置を検出することを特徴とする洗車機。The vehicle-shaped control unit includes a horizontal optical axis formed between one light emitting element in the light emitting unit and the light receiving element that horizontally faces, and a light receiving element that is horizontally opposed to one light emitting element in the light emitting unit. The unit detection operation in which one light emitting element emits light and is received by one corresponding light receiving element with an inclined optical axis formed between the light receiving elements separated by one, and each optical axis and each light emitting element The first vehicle body detection for detecting the vehicle body repeatedly, the horizontal optical axis formed between one light emitting element in the light emitting unit and the light receiving element facing horizontally, and one light emitting element in the light emitting unit horizontally facing A unit detection operation in which one light emitting element emits light and is received by one corresponding light receiving element, with an inclined optical axis formed between the light receiving elements two or more apart from the upper and lower sides of the light receiving element. Repeat the body for each optical axis and each light emitting element Run a second vehicle detector for detecting detects the upper surface contour of the vehicle body on the basis of the first vehicle detector, car washing machine and detecting the lateral position of the vehicle body on the basis of the second body detection.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012205886A JP6002516B2 (en) | 2012-09-19 | 2012-09-19 | Car shape detection device and car wash machine equipped with the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012205886A JP6002516B2 (en) | 2012-09-19 | 2012-09-19 | Car shape detection device and car wash machine equipped with the same |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014058282A JP2014058282A (en) | 2014-04-03 |
JP6002516B2 true JP6002516B2 (en) | 2016-10-05 |
Family
ID=50615174
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012205886A Active JP6002516B2 (en) | 2012-09-19 | 2012-09-19 | Car shape detection device and car wash machine equipped with the same |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6002516B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7062414B2 (en) * | 2017-11-24 | 2022-05-06 | エムケー精工株式会社 | Car shape detection device and car wash machine equipped with the same device |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001270428A (en) * | 2000-03-28 | 2001-10-02 | Mk Seiko Co Ltd | Car washing machine |
JP4583649B2 (en) * | 2001-04-13 | 2010-11-17 | エムケー精工株式会社 | Car wash machine |
JP4047672B2 (en) * | 2002-09-04 | 2008-02-13 | エムケー精工株式会社 | Car shape detection device and car wash machine having the same |
-
2012
- 2012-09-19 JP JP2012205886A patent/JP6002516B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2014058282A (en) | 2014-04-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6002516B2 (en) | Car shape detection device and car wash machine equipped with the same | |
JP6771984B2 (en) | Car shape detection device and car wash machine equipped with this device | |
JP7062414B2 (en) | Car shape detection device and car wash machine equipped with the same device | |
JP5492598B2 (en) | Car shape detection device and car wash machine equipped with the same | |
JP2017190004A (en) | Car shape detection device and car washing machine equipped with the same | |
JP5492665B2 (en) | Car shape detection device and car wash machine equipped with the same | |
JP4047672B2 (en) | Car shape detection device and car wash machine having the same | |
JP3902026B2 (en) | Car shape detection device and car wash machine equipped with the same | |
JP7041554B2 (en) | Car shape detection device and car wash machine equipped with the same device | |
JP7316896B2 (en) | vehicle processing equipment | |
JP5903716B2 (en) | Active object detection device | |
JP7328737B2 (en) | vehicle processing equipment | |
JP7412837B2 (en) | Vehicle processing device and object detection method | |
CN211765448U (en) | Automatic cleaning equipment for vehicle | |
JP4653554B2 (en) | Car wash machine | |
JP2021041907A (en) | Vehicle processing device | |
JP6085449B2 (en) | Car body detection device and car wash machine equipped with the same | |
JP6779077B2 (en) | Vehicle shape detection method and device in car wash machine | |
JP7409943B2 (en) | Vehicle processing equipment | |
CN111186420A (en) | Automatic cleaning equipment for vehicle | |
JP4401920B2 (en) | Vehicle shape recognition device, car wash machine and sensor controller | |
JP4641910B2 (en) | Car wash machine | |
JP4047483B2 (en) | Car wash machine | |
JP4755006B2 (en) | Car wash machine | |
JP4881616B2 (en) | Car wash machine |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150724 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160519 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160524 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160725 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160829 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160905 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6002516 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |