JP2002163784A - 進行可能範囲決定装置 - Google Patents
進行可能範囲決定装置Info
- Publication number
- JP2002163784A JP2002163784A JP2000363130A JP2000363130A JP2002163784A JP 2002163784 A JP2002163784 A JP 2002163784A JP 2000363130 A JP2000363130 A JP 2000363130A JP 2000363130 A JP2000363130 A JP 2000363130A JP 2002163784 A JP2002163784 A JP 2002163784A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- edge
- obstacle
- range
- detected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 claims abstract description 12
- 230000005764 inhibitory process Effects 0.000 claims abstract description 3
- 238000011156 evaluation Methods 0.000 claims description 4
- 239000000284 extract Substances 0.000 claims 1
- 238000000034 method Methods 0.000 description 31
- 238000007689 inspection Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 5
- 238000003708 edge detection Methods 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Landscapes
- Traffic Control Systems (AREA)
- Radar Systems Or Details Thereof (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
提供する。 【解決手段】 自動車1に前方を検出範囲とするミリ波
アンテナ11及びレーダ装置12、並びにテレビカメラ
13及びビデオ装置14を搭載し、マイクロコンピュー
タ15に接続する。テレビ画像に基づいて障害物のエッ
ジを検出し、レーダ信号に基づいてエッジ間にターゲッ
トが存在するかを判定する。エッジ間にターゲットがあ
る面、及びターゲットは存在しないが自車が通過できな
い面を進行禁止面と認識し、ターゲットが存在せず、か
つ自車が通過できる面を進行許容面と認識して進行可能
範囲を決定する。
Description
置に係り、特に自動車に搭載可能な進行可能範囲決定装
置に関する。
画像センサにより自車の前方に存在する障害物を検出
し、衝突を未然に防止しようとすることが試みられてい
る。そして確実に衝突をするためには、障害物までの距
離、自車と障害物の相対速度及び障害物の形状を確実に
検出が要求される。
及び障害物の相対速度の測定には適しているものの、障
害物の形状の検出にはあまり適していない。一方、TV
カメラをはじめとする画像センサは障害物の形状の検出
には適しているものの、障害物までの距離及び障害物の
相対速度の測定にはあまり適していない。
ンサを組み合わせて、障害物までの距離及び障害物の相
対速度だけでなく障害物の形状も検出可能な周辺監視セ
ンサをすでに提案している。
制御システムを制御して障害物への衝突を確実に防止す
るためには、単に自車の周辺を監視するだけでなく、障
害物までの距離、障害物の相対速度及び障害物の形状に
基づいて自車が進行可能な範囲を決定することが必要と
なる。
って、自動車に搭載可能な進行可能範囲決定装置を提供
することを目的とする。
能範囲決定装置は、前方に存在する障害物の有無、障害
物までの距離及び障害物の相対移動速度を検出する障害
物検出手段と、障害物検出手段の出力に基づいて自車が
進行可能な範囲を決定する進行可能範囲決定手段を具備
する。
情報に基づいて自車が進行可能な範囲が決定される。第
2の発明に係る進行可能範囲決定装置は、障害物検出手
段が、前方に存在する障害物までの距離及び該障害物の
相対移動速度を検出するミリ波レーダと、前方に存在す
る障害物を検出する画像センサと、を具備する。
ンサによって障害物が検出される。第3の発明に係る進
行可能範囲決定装置は、進行可能範囲決定手段が、画像
センサの出力を処理して障害物のエッジを抽出するエッ
ジ抽出手段と、エッジ抽出手段で抽出されたエッジを連
結して生成される面上にミリ波レーダによりターゲット
が検出されたとき、及びターゲットは検出されないが該
面を自車が通過不可能なときは該面を進行禁止面とし
て、ターゲットが検出されず、かつ該面を自車が通過可
能なときは該面を進行許容面として認識する面認識手段
と、を具備する。
され、このエッジを結ぶ面が進行禁止面又は進行許容面
として認識される。第4の発明に係る進行可能範囲決定
装置は、エッジの信頼度を評価する信頼度評価手段を具
備し、信頼性評価手段で評価された信頼度が予め定めら
れた閾値以上であるエッジだけを抽出エッジとして出力
する。
評価され、閾値以上の信頼度を有するエッジが出力され
る。第5の発明に係る進行可能範囲決定装置は、進行可
能範囲決定手段が、自車の走行車線の境界線を検出する
境界線検出手段と、進行禁止面が自車の走行車線内にあ
るときは自車に最も近いエッジを通り境界線検出手段で
検出された境界線に垂直な線と境界線で囲まれた領域
を、進行禁止面の一方のエッジが自車の走行車線内にあ
るときは当該進行禁止面と自車の走行車線の境界線との
交点で囲まれた領域を進行可能範囲として出力する出力
手段をさらに具備する。
に基づき進行可能範囲が決定される。
決定装置の構成図であって、自動車1に搭載される。即
ち本発明に係る進行可能範囲決定装置は、自動車1のフ
ロントグリルに設置されたミリ波アンテナ11及び自動
車1の屋根に搭載されたテレビカメラ13、並びに自動
車1の車内に搭載されるレーダ装置12、ビデオ装置1
4及びマイクロコンピュータシステム15から構成され
る。
信波を供給するとともに、ミリ波アンテナ11で受信さ
れた受信波を処理して、ターゲットまでの距離及びター
ゲットの相対速度を出力する。ビデオ装置14は、テレ
ビカメラ12で撮影された画像をビデオ信号として出力
する。
ス150を中心としてCPU151、メモリ152、入
力I/F(インターフェイス)153及び出力I/F1
54から構成され、入力I/F153を介してレーダ装
置12及びビデオ装置14と接続される。図2はメモリ
152に記憶され、CPU151で実行される進行可能
範囲決定ルーチンのフローチャートであって、所定時間
(例えば100ミリ秒)ごとの割り込み処理で実行され
る。
説明するための状況説明図であって、自車1の前方に3
台の自動車31〜33が走行している状態を示す。自車
1及び自動車33は走行車線34を、自動車31及び3
2は右側の追い越し車線35を走行しているものとす
る。以下図3を参照しながら進行可能範囲決定ルーチン
の処理を説明する。
れるビデオ信号を読み込み、ステップ21でレーダ装置
12から出力されるターゲット(障害物)情報を読み込
む。その後、ステップ22で面検出処理を、ステップ2
3で通過判定処理を、ステップ24でターゲットロック
処理を、さらにステップ26で出力処理を実行してこの
ルーチンを終了するが、各処理の詳細は後述する。
プ22で実行される面検出処理のフローチャートであっ
て、ステップ22aでビデオ装置から伝送されてくる画
像からエッジを検出する。そして、検出されたエッジ
に、例えば左から順に番号を付け、各エッジの座標及び
相対速度を算出する。図3においては、自車の前面中心
を原点とするX−Y座標で左から順に7個のエッジE1
=(X1,Y1)、E2=(X2,Y2)、E3=(X3,
Y3)、E4=(X 4,Y4)、E5=(X5,Y5)、E6=
(X6,Y6)及びE7=(X7,Y7)が検出された状況
を示している。
対応付けを実施する。即ちエッジを結ぶ面内にターゲッ
トが検出されるかを判定し、ターゲットが検出された面
の両端のエッジを関連付けてこのルーチンを終了する。
エッジの検出及び関連付けは周知の方法を適用すること
が可能であるが、特に本出願人が平成11年9月29日
に出願した特願平11−276930に記載された方法
を適用することが望ましく、この方法によれば検出され
たエッジの座標だけでなく、そのエッジの信頼度を付加
することも可能となる。
するミリ波レーダからの情報及びビデオ装置からの情報
に基づいて算出される。図5は進行可能範囲決定ルーチ
ンのステップ23で実行される通過判定処理のフローチ
ャートであって、ステップ23aでiを初期値 '1'
に、ステップ23bで同じくエッジの番号を示すインデ
ックjを初期値 'i+1' に設定する。
ッジEjがあるかを判定する。そして、ステップ23c
で肯定判定されたとき、即ち関連するエッジが存在する
ときは、ステップ23dで面F(i,j)を自車が通過
できないことを示すためにF(i,j)の値を '1' に
設定してステップ23kに進む。一方ステップ23cで
否定判定されたとき、即ち関連するエッジが存在しない
ときは、ステップ23eでエッジEiとエッジEjの間の
距離L(i,j)を算出する。
が検出されたエッジの総数I未満であるかを判定する。
ステップ23fで肯定判定されたとき、即ちインデック
スjが検出されたエッジの総数I未満であるときは、ス
テップ23gでインデックスjをインクリメントして、
ステップ23cに戻る。
き、即ちインデックスjが検出されたエッジの総数I以
上となったときは、ステップ23hに進む。そして、ス
テップ23hでステップ23eで算出された距離L
(i,j)(但しi+1≦j≦I)のうちの最小の距離
L(i,j)が所定値Lref以上であるか、即ちエッジ
EiとEjを結ぶ面F(i,j)を自車が通過可能であ
るかを判定する。
ち検査面F(i,j)を自車が通過できないときはステ
ップ23dでF(i,j)の値を‘1' に設定してステ
ップ24iに進む。逆に、ステップ23hで肯定判定さ
れたとき、即ち検査面F(i,j)を自車が通過できる
ときは直接ステップ24iに進む。
れたエッジの総数I未満であるかを判定し、肯定判定さ
れたときはステップ23jでインデックスiをインクリ
メントしてステップ23bに戻る。逆にステップ24k
で否定判定されたとき、即ちインデックiが検出された
エッジの総数I以上となったときは、この処理を終了す
る。
F(2,3)、F(3,4)、F(4,5)、F(5,
6)及びF(6,7)が‘1' に設定される。図6は進
行可能範囲決定ルーチンのステップ24で実行されるタ
ーゲットロック処理のフローチャートであって、誤決定
を防止するために必要に応じて実行される。
えば100ミリ秒ごと)に7個のエッジの座標を5つ記
憶し、ステップ24bでレーダ装置12から出力される
ターゲット情報を実行周期の所定倍ごとに5つ記憶す
る。例えば、所定倍を2倍とすれば、実施形態ではター
ゲット情報は200ミリ秒ごとに記憶される。ステップ
24cで平均エッジ座標としてステップ24aで記憶さ
れた5つの座標に基づいて500ミリ秒間の時間平均値
を演算し、ステップ24dで平均レーダ装置出力として
ステップ24bで記憶された5つのデータに基づいて1
秒間の時間平均値を演算する。
れている前回エッジEib,Ejbにそれぞれ対応するエッ
ジEi,Ejが存在するか、即ち同じ検出物のエッジと推
定されるエッジが存在するかを判定し、対応するエッジ
Ei,Ejが存在する場合はそのエッジを結ぶ面F(i,
j)内に今回もターゲットが存在する可能性が高いと推
定されるので、エッジEi,Ejの関連の有無、即ちF
(i,j)内にターゲットが検出されるか否かに関わら
ず、F(i,j)の値を‘1’に設定する。
ジについてステップ24eのターゲットロック処理が完
了したかを判定し、否判定されたときはステップ24e
に戻る。逆に、ステップ24fで肯定判定されたときは
この処理を終了する。図7は進行可能範囲決定ルーチン
のステップ25で実行される出力処理のフローチャート
であって、ステップ25aで最小Y座標Yminを初期化
し、ステップ25bで自車が走行しているレーンの境界
線を検出する。なお、境界線の検出には周知の方法を適
用することができるが、特に本出願人が平成12年9月
4日に出願した特願2000−266393に記載され
た方法を適用することが望ましい。
が自車の走行レーン内に存在するかを判定する。そし
て、ステップ25cで肯定判定されたとき、即ち検査面
F(i,j)=1が自車の走行レーン内に存在するとき
は、ステップ25dで次式によりエッジE i及びEj並び
に最小Y座標Yminの最小値をYminに設定した後ステッ
プ25kに進む。
F(i,j)=1が自車の走行レーン内に存在しないと
きは、ステップ25eに進み検査面F(i,j)=1の
一方のエッジEiが自車の走行レーン内に存在するかを
判定する。ステップ25eで肯定判定されたとき、即ち
エッジEiが自車の走行レーン内に存在するときは、検
査面F(i,j)=1と自車の走行レーンの境界線との
交点Pの座標(X0,Y0)を算出し、ステップ25gで
次式によりエッジEiのY座標Yi、交点P0のY座標Y0
及び最小Y座標Yminの最小値をYminに設定した後ステ
ップ25kに進む。
Eiが自車の走行レーン内にないときは、ステップ25
hに進みエッジEjが自車の走行レーン内にあるかを判
定する。ステップ25hで肯定判定されたとき、即ちエ
ッジEjが自車の走行レーン内にあるときは、ステップ
25iに進み検査面F(i,j)=1と自車の走行レー
ンの境界線との交点Pの座標(X0,Y0)を算出し、ス
テップ25jで次式によりエッジEjのY座標Yj,交点
PのY座標Y0及び最小Y座標Yminの最小値をY minに
設定した後ステップ25kに進む。
Ejが自車の走行レーン内にないときは直接ステップ2
5kに進む。ステップ25kで全ての検査面F(i,
j)=1について処理が完了したかを判定し、否定判定
されたときはステップ25cに戻る。逆に、ステップ2
5gで肯定判定されたときはステップ25hで最小Y座
標を通る自車の走行レーンの境界線に対する垂直線と自
車の走行レーンの境界線で囲まれた領域を自車の進行可
能範囲として出力しするとともに、当該垂直線と自車の
相対速度も出力してこの処理を終了する。
E5及びE6並びに交点P1及びP2の中で最小のY座標を
有する点、即ち交点P1と自車の走行レーンの境界線で
囲まれる斜線領域が進行可能範囲として出力される。進
行可能範囲及び当該垂直線の相対速度の利用方法につい
ては特に規定されないが、例えば液晶ディスプレイに進
行可能範囲を表示するとともに、当該垂直線の相対速度
に応じて自車の速度を制御することも可能である。
れば、障害物の検出状況に応じて自車の進行可能範囲を
決定することが可能である。第2の発明に係る進行範囲
決定装置によれば、障害物をミリ波レーダ及び画像セン
サによって確実に検出することが可能となる。
ば、障害物のエッジを結ぶ面の中に障害物が検出された
とき、及び障害物が検出されないが自車が通過できない
ときは該面を進行禁止面と認識し、障害物が検出され
ず、かつ自車が通過できるときは該面を進行許容面と認
識することが可能となる。第4の発明に係る進行範囲決
定装置によれば、検出信頼性の高いエッジのみを選択的
に出力することが可能となる。
ば、進行禁止面と自車の走行レーンに基づき進行可能範
囲を決定することが可能となる。
ある。
ある。
る。
る。
Claims (5)
- 【請求項1】 前方に存在する障害物の有無、障害物ま
での距離及び障害物の相対移動速度を検出する障害物検
出手段と、 前記障害物検出手段の出力に基づいて自車が進行可能な
範囲を決定する進行可能範囲決定手段を具備する進行可
能範囲決定装置。 - 【請求項2】 前記障害物検出手段が、 前方に存在する障害物までの距離及び該障害物の相対移
動速度を検出するミリ波レーダと、 前方に存在する障害物を検出する画像センサと、を具備
する請求項1に記載の進行可能範囲決定装置。 - 【請求項3】 前記進行可能範囲決定手段が、 前記画像センサの出力を処理して障害物のエッジを抽出
するエッジ抽出手段と、 前記エッジ抽出手段で抽出されたエッジを連結して生成
される面上に前記ミリ波レーダによりターゲットが検出
されたとき、及びターゲットは検出されないが該面を自
車が通過不可能なときは該面を進行禁止面として、ター
ゲットが検出されず、かつ該面を自車が通過可能なとき
は該面を進行許容面として認識する面認識手段と、を具
備する請求項2に記載の進行可能範囲決定装置。 - 【請求項4】 前記エッジ抽出手段が、 エッジの信頼度を評価する信頼度評価手段を具備し、 前記信頼性評価手段で評価された信頼度が予め定められ
た閾値以上であるエッジだけを抽出エッジとして出力す
るものである請求項3に記載の進行可能範囲決定装置。 - 【請求項5】 前記進行可能範囲決定手段が、 自車の走行車線の境界線を検出する境界線検出手段と、 前記進行禁止面が自車の走行車線内にあるときは自車に
最も近いエッジを通り前記境界線検出手段で検出された
境界線に垂直な線と境界線で囲まれた領域を、前記進行
禁止面の一方のエッジが自車の走行車線内にあるときは
当該エッジ、又は当該進行禁止面と自車の走行車線の境
界線との交点で囲まれた領域を進行可能範囲として出力
する出力手段をさらに具備する請求項3又は4に記載の
進行可能範囲決定装置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000363130A JP4812165B2 (ja) | 2000-11-29 | 2000-11-29 | 進行可能範囲決定装置及び進行可能範囲決定方法 |
| US09/929,413 US6636148B2 (en) | 2000-09-04 | 2001-08-13 | Periphery monitoring system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000363130A JP4812165B2 (ja) | 2000-11-29 | 2000-11-29 | 進行可能範囲決定装置及び進行可能範囲決定方法 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2002163784A true JP2002163784A (ja) | 2002-06-07 |
| JP2002163784A5 JP2002163784A5 (ja) | 2008-01-24 |
| JP4812165B2 JP4812165B2 (ja) | 2011-11-09 |
Family
ID=18834288
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000363130A Expired - Fee Related JP4812165B2 (ja) | 2000-09-04 | 2000-11-29 | 進行可能範囲決定装置及び進行可能範囲決定方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4812165B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2022505479A (ja) * | 2018-11-13 | 2022-01-14 | バイエリシエ・モトーレンウエルケ・アクチエンゲゼルシヤフト | 自動車の周囲におけるオブジェクトの検出 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08156723A (ja) * | 1994-12-06 | 1996-06-18 | Nissan Motor Co Ltd | 車両用障害物検出装置 |
| JPH08329393A (ja) * | 1995-05-29 | 1996-12-13 | Daihatsu Motor Co Ltd | 先行車検出装置 |
| JPH09264954A (ja) * | 1996-03-29 | 1997-10-07 | Fujitsu Ten Ltd | レーダを用いた画像処理システム |
| JPH10172098A (ja) * | 1996-12-13 | 1998-06-26 | Denso Corp | 車速制御方法、車速制御装置および記憶媒体 |
-
2000
- 2000-11-29 JP JP2000363130A patent/JP4812165B2/ja not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08156723A (ja) * | 1994-12-06 | 1996-06-18 | Nissan Motor Co Ltd | 車両用障害物検出装置 |
| JPH08329393A (ja) * | 1995-05-29 | 1996-12-13 | Daihatsu Motor Co Ltd | 先行車検出装置 |
| JPH09264954A (ja) * | 1996-03-29 | 1997-10-07 | Fujitsu Ten Ltd | レーダを用いた画像処理システム |
| JPH10172098A (ja) * | 1996-12-13 | 1998-06-26 | Denso Corp | 車速制御方法、車速制御装置および記憶媒体 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2022505479A (ja) * | 2018-11-13 | 2022-01-14 | バイエリシエ・モトーレンウエルケ・アクチエンゲゼルシヤフト | 自動車の周囲におけるオブジェクトの検出 |
| JP7335331B2 (ja) | 2018-11-13 | 2023-08-29 | バイエリシエ・モトーレンウエルケ・アクチエンゲゼルシヤフト | 自動車の周囲におけるオブジェクトの検出 |
| US12252068B2 (en) | 2018-11-13 | 2025-03-18 | Bayerische Motoren Werke Aktiengesellschaft | Sensing an object in the surroundings of a motor vehicle |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4812165B2 (ja) | 2011-11-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7889116B2 (en) | Object detecting apparatus | |
| US9031774B2 (en) | Apparatus and method for preventing collision of vehicle | |
| US8447484B2 (en) | Branch-lane entry judging system | |
| US7042389B2 (en) | Device for detecting object in front of vehicle | |
| JP3427809B2 (ja) | 車両用道路形状認識方法及び装置、記録媒体 | |
| JP3065821B2 (ja) | 物体検出装置 | |
| US6636148B2 (en) | Periphery monitoring system | |
| JP2001099930A (ja) | 周辺監視センサ | |
| CN105128836A (zh) | 自主紧急制动系统及其中识别行人的方法 | |
| JP2002189075A (ja) | 道路上方静止物検知方法 | |
| JP7401273B2 (ja) | 移動体の制御装置及び方法 | |
| JP3656056B2 (ja) | 割り込み車両検出装置及びその方法 | |
| CN114655193B (zh) | 有效车位的搜索方法、装置、设备及可读存储介质 | |
| JPH0844999A (ja) | 接近予測装置 | |
| CN114333414A (zh) | 停车让行检测装置、停车让行检测系统以及记录介质 | |
| US7057502B2 (en) | Vehicle drive assist apparatus | |
| JP2002296350A (ja) | 物体検知装置 | |
| US11474535B2 (en) | Method of processing data, apparatus for processing data, and system for controlling vehicle | |
| US9495873B2 (en) | Other-vehicle detection device and other-vehicle detection method | |
| CN118683553B (zh) | 车辆路口停车检测方法、装置、控制器及存储介质 | |
| JP5682302B2 (ja) | 走行道路推定装置、方法およびプログラム | |
| JP2002148336A (ja) | 割り込み予測装置 | |
| JP2002163784A (ja) | 進行可能範囲決定装置 | |
| JP2000249759A (ja) | 車両の障害物検出装置 | |
| CN112014822B (zh) | 车载雷达测量数据识别方法、装置、介质和电子装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071129 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20071129 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100601 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100603 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100730 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110201 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110401 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110510 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110708 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110726 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110823 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140902 Year of fee payment: 3 |
|
| LAPS | Cancellation because of no payment of annual fees |