JP2012168884A - 車線境界検出装置及び車線境界検出方法 - Google Patents
車線境界検出装置及び車線境界検出方法 Download PDFInfo
- Publication number
- JP2012168884A JP2012168884A JP2011031121A JP2011031121A JP2012168884A JP 2012168884 A JP2012168884 A JP 2012168884A JP 2011031121 A JP2011031121 A JP 2011031121A JP 2011031121 A JP2011031121 A JP 2011031121A JP 2012168884 A JP2012168884 A JP 2012168884A
- Authority
- JP
- Japan
- Prior art keywords
- lane
- marking
- deceleration
- pair
- sign
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
【解決手段】自車走行路を撮像した画像から路面上の車線標示を検出し、検出した車線標示から車線標示が3重線か否かを判定すると共に、上記検出した車線標示の標示幅と車線標示間の距離とに基づき、対をなす減速標示の組を検出する。そして、上記3重線と判定した場合には、上記検出した対をなす減速標示の各位置から車線区分線の位置を推定する。
【選択図】図2
Description
この結果、上記従来技術では、ロバスト性をあげるためには、テンプレート用のメモリ容量を増やさなければならない。更に、上記従来技術ではマッチング処理のための演算処理負荷が大きくなる、という問題があった。
そこで、本発明は、処理負荷を軽減しつつ、安定して車線境界を検知することを目的としている。
また、車線区分線よりも撮像画像に明りょうに現れる頻度が高い減速標示に基づき、車線区分線の位置を推定することで、安定して車線境界を検知することができる。
(第1実施例)
本実施形態では、レーン認識装置1が、本発明の一実施形態としての車線境界検出装置を備える場合を例に挙げて説明する。そして、本実施形態では、上記レーン認識装置1を備える車線逸脱警報システムを例に挙げて説明する。
なお、レーン認識装置1の出力情報の使用先は、車線逸脱の制御部に限定されない。レーン認識装置1の出力情報の使用先は、例えば、レーン認識装置1からの出力に基づき、ステアリングアクチュエータと車両センサとを使用したレーンキープなどの運転支援装置でも構わないし、ナビシステムなどの表示部に対する表示制御部等であっても良い。
図1は、上記レーン認識装置1を備える車線逸脱警報システムを搭載した車両MMを示す図である。図2は、本発明に係わる車線境界検出装置の実施形態を備えた車線逸脱警報システムを示す概略ブロック図である。
上記車線逸脱警報システムは、図1に示すように車両MMに搭載されている。その車線逸脱警報システムは、図2に示すように、レーン認識装置1と、車線逸脱警報回路5と、車速センサ6と、ブザー7と、を備える。レーン認識装置1は、カメラ2と、そのカメラ2の撮像画像に基づきレーン認識処理を行うレーン認識制御部1Aとからなる。なお、上記レーン認識制御部1A及び上記車線逸脱警報回路5は、1又は2以上の制御ユニットの形で車両MMに搭載されている。そして、上記車線逸脱警報システムは、レーン認識装置1を用いて道路形状、車両状態量を推定し、そのレーン認識装置1の出力を用いて車線逸脱を目的とした車両制御を行う。
レーン認識装置1は、自車走行路を認識し、車線に対する車両状態量と道路形状を検出する装置である。
また、車線逸脱警報回路5は、図2に示すように、レーン認識装置1で検出した車線に対する車両位置及び車両姿勢と、車速センサ6からの自車速を用いて、自車両MMの車線逸脱の有無を検知する。そして、車線逸脱警報回路5は、車線逸脱と判定すると、ブザー7を用いてドライバーに警告を報知する処理を実施する。
具体的な方法としては、車線標示エッジをペアリングして各車線標示を特定した後、標示幅が予め設定した所定値以上で且つ互いの標示幅がほぼ同等であり、車線標示間の距離が、道路法で定める道路標示幅以上として予め設定した値以上である組を、対をなす減速標示ペアとして検出する。検出した減速標示ペアは2つの減速標示を代表する各エッジを減速標示の1ペアとして記録する。
|W1 −W2| < d1 ・・・(2)
L1 > d2 ・・・(3)
ここで、図6の走査ラインBのように、3本以上の車線標示の列を検出した場合には、2本の車線標示毎に、それぞれ上記減速標示ペア(減速標示の組)の条件((1)〜(3)式)を満足するか否かを判定し、条件を満足した組を減速標示ペア(減速標示の組)として検出する。
さらに、互いの標示幅の差が予め設定した許容値以下となる減速標示ペア(減速標示の組)が複数存在する場合には、車線標示間の距離が一番大きな組を、減速標示ペア(減速標示の組)として選択する。
次に、路幅方向中央位置に対し、算出した車線区分線から道路法で定める車線区分線幅の半分の長さだけずらした位置を、車線区分線のエッジ位置と推定する((4)式参照)。
+内側車線標示の最も内側のX座標)÷2
+車線区分線標準幅の半分 ・・・(4)
ここで、走行路に直交する方向(路幅方向)をX軸としている。
また車線区分線の中央位置を算出するにあたっては、減速標示ペアを特定する内側の2本のエッジから求めても構わない。
なお、車線区分線位置推定部33は、3重線区間検出部34が3重線区間と判定した場合にだけ、車線区分線のエッジ位置を推定する処理を実施するように構成しても良い。
車線標示特徴量出力部35は、図8に示すように、減速標示ペア検出部32と3重線区間検出部34の出力結果に応じてレーン認識部4への出力を変更する。具体的には、3重線区間検出部34の判定に基づき、現在認識している車線標示を3重線と判定し、かつ減速標示ペア検出部32が対をなす減速標示の組を検出している場合には、車線区分線位置推定部33で推定した車線区分線のエッジを車線区分線の車線標示特徴量として出力する(図8(b)参照)。一方、上記の条件に当てはまらない場合は、車線標示特徴量出力部35は、車線標示特徴量検出部31で検出したエッジペアによって算出した、車線中心に対し内側のエッジのみを車線区分線の車線標示特徴量として出力する(図8(a)参照)。
道路形状算出部41は、車線標示候補点検出部3が検出した車線標示特徴量から道路形状を直線近似する。具体的には、道路形状算出部41は、車線標示候補点検出部3が検出した車線標示特徴量に対応する画素を、予め設定した所定値以上通過し、かつ検出領域の上辺の1点と下辺の1点を結ぶ直線を、ハフ変換により検出することで、道路形状の近似直線を求める。
具体的には、次の通りである。
A:自車両MMの車線に対する横変位
B:道路曲率
C:自車両MMの車線に対するヨー角
D:自車両MMのピッチ角
H:路面からの前記画像取得部の高さ
以下の処理は、レーン認識装置1が作動している間は、カメラ2の画像取得周期に同期して、下記処理を繰り返すものとする。
まずステップS101では、カメラ2が撮像した自車走行路の道路画像を取得し、ステップS102へ移行する。
ステップS102では、車線標示特徴量検出部31にて、ステップS101で取得した道路画像について画像処理を行い、車線標示エッジを検出する。その後、ステップS103へ移行する。
ステップS103では、3重線区間検出部34にて車線標示エッジの情報から3重線区間であるか否かを検出する。その後ステップS104へ移行する。
続いて、ステップS105では、ステップS103における3重線区間の検出結果と、ステップS104における減速標示ペアの検出数に基づき、自車走行路が3重線区間であって、かつ減速標示ペアが検出されているか否かを判定する。両条件を満足する場合にはステップS106へ移行する。一方、条件を満足しない場合にはステップS107へ移行する。
ステップS107では、ステップS102にて車線標示特徴量検出部31で検出した車線標示エッジから内側のエッジを選択し、車線標示特徴量として出力し、ステップS108に移行する。
ステップS109では、道路パラメータ推定部43にて、ステップS108で算出した道路形状の近似直線を用いて、道路パラメータを推定する。その後、復帰して、次の制御周期で上記ステップS101に移行する。
カメラ2は、予め設定した撮像周期(撮像時間)で自車走行路を撮像する。
車線標示候補点検出部3は、カメラ2が撮像した画像の画像処理を行うことで車線標示エッジを検出し、その検出した車線標示エッジから車線区分線の車線標示特徴量を作成する。
以上の処理によって、減速帯区間においては、減速帯区間特有の特徴、つまり区分線に対し左右対称に描かれているという事実に鑑み、車線標示候補点検出部3は、減速標示のペアを、減速標示の検出に特化した単純な検出条件で検知する。そして、検出した減速標示ペアから車線区分線の位置を推定する。この結果、処理負荷を軽減することが出来る。
ここで、カメラ2は撮像部を構成する。車線標示特徴量検出部31は標示候補検出手段を構成する。3重線区間検出部34は3重線判定手段を構成する。減速標示ペア検出部32は減速標示ペア検出手段を構成する。車線区分線位置推定部33及び車線標示特徴量出力部35は、区分線位置推定手段を構成する。
(1)車線標示特徴量検出部31は、撮像手段が撮像した画像から路面上の車線標示の候補を検出する。3重線区間検出部34は、標示候補検出手段が検出した車線標示に基づき、車線標示が3重線か否かを判定する。減速標示ペア検出部32は、車線標示特徴量検出部31が検出した車線標示の標示幅と車線標示間の距離とに基づき、対をなす減速標示の組を検出する。そして、車線標示候補点検出部3は、3重線区間検出部34が3重線と判定した場合には、減速標示ペア検出部32が検出した対をなす減速標示の位置から車線区分線の位置を推定する。
加えて、減速車線標示の方が、車線区分線と比較してカメラ2映像上に明りょうに現れる頻度が高い。このため、減速車線標示から区分線特徴量を生成することで、多くの車線標示特徴量を得ることができる。この結果、安定して車線境界を検知することができる。
予め設定した値は、車線区分線の標準幅以上に設定する。
車線区分の左右にある同一幅の標示であることを条件に減速標示ペアを検知する。このため、処理負荷を軽くすることができると共に、様々な形状の減速標示の形状に対応することができる。
複数のノイズを車線標示として誤検知し、減速標示の左右ペア以外にペアが検出される場合があっても、幅の広いペアを選択することで、ノイズによるペア誤検知を低減可能となる。
(4)上記減速標示ペア検出部32は、対をなす減速標示の組の候補を複数組検出した場合、車線標示間の距離が最も大きい組を減速標示ペアとして選択する。
これによって、車線区分線と減速標示の幅が同一である場合でも適切に減速標示のペアの選択することができる。
次に、第2実施形態について図面を参照して説明する。なお、上記第1実施形態と同様な構成には同一の符号を付して説明する。
本実施形態の基本構成は、上記第1実施形態と同様である。ただし、図10に示すように、本実施形態では、減速標示幅記録部36を有する。そして、減速標示ペア検出部32は、その減速標示幅記録部36の記憶履歴に基づく処理を有する。その他の処理構成は上記第1実施形態と同様である。
まずステップS201では、車線標示特徴量検出部31にて検出した車線標示エッジをペアリングし、ステップS202に移行する。
ステップS202では、ペアリングされた車線標示エッジに基づき、標示幅が予め設定した所定値以上で且つ互いに標示幅がほぼ同一であり、車線標示間の距離が車線区分線の標準幅以上のペアを減速標示ペアとして選択する。
具体的には、前述の(1)〜(3)式を満足するか否かで判定する。
ステップS204では、減速標示ペア同士の標示幅を比較し、最も標示幅が大きいペアを減速標示ペアとして選択する。ただし、予め設定した許容誤差を使用し、誤差範囲内に複数ペアがある場合は、その複数ペアを減速標示ペアとして選択する。そして、処理後にステップS205へ移行する。
ステップS206では、各減速標示ペアにおける標示間の距離を比較し、最も標示間の距離が大きいペアを、減速標示ペアとして選択する。その後、処理を終了する。
その他の構成や処理は上記第1実施形態と同様である。
実際の路面上には、タイヤ痕、目地などのノイズが存在する場合がある。そして、車線標示以外の上記ノイズを車線標示エッジとして検出してしまうことがある。
また、都市間高速に設けられた減速標示の幅は車線区分線の幅よりも太いことが多いが、首都高などの都市高速では減速標示の幅と車線区分線の幅とがほぼ同じであることがある。上記のような状態では、減速標示ペア検出部32の処理において、上記のようなノイズなどを減速標示ペアと誤検出してしまう可能性がある。
例えば、図12に示すような、各都市もしくは地方にある様々な減速標示であっても、減速標示ペアを検知することが可能となるため、図12のような減速標示形態からなる減速帯区間を走行しても、本来の車線区分線を検知し続けることが可能となる。ここで、図12中、符号Aが減速標示を示す。
ここで、減速標示幅記録部36は、標示幅記憶手段を構成する。その他の構成の対応は上記第1実施形態と同様である。
本実施形態は、上記第1実施形態で記載した効果に加えて、次の効果を奏する。
(1)減速標示幅記録部36は、上記減衰標示ペア検出手段が検出した減衰標示の標示幅を記憶する。上記減速標示ペア検出部32は、予め設定した数の標示幅が記憶されている場合、上記標示幅記憶手段が記憶している標示幅に基づき標示基準幅を決定し、上記標示基準幅との差が予め設定した値以内の標示幅となっている車線標示だけを減速標示の候補とする。
これによって、例えば減速標示の幅を過去履歴の平均値から推定し、明らかに減速標示ではない減速標示ペアを除去することが可能となる。この結果、誤検出を低減可能となる。
これによって、減速標示ペアを確実に検出できているときのみ過去履歴を記録することで、本来検出すべき減速標示ペアを検出できない誤ったノイズ除去を防止できる。
1A レーン認識制御部
2 カメラ
3 車線標示候補点検出部
31 車線標示特徴量検出部
32 減速標示ペア検出部
33 車線区分線位置推定部
34 重線区間検出部
35 車線標示特徴量出力部
36 減速標示幅記録部
4 レーン認識部
41 道路形状算出部
43 道路パラメータ推定部
5 車線逸脱警報回路
6 車速センサ
7 ブザー
Claims (7)
- 自車走行路を撮像する撮像手段と、
撮像手段が撮像した画像から路面上の車線標示の候補を検出する標示候補検出手段と、
標示候補検出手段が検出した車線標示に基づき、車線標示が3重線か否かを判定する3重線判定手段と、
標示候補検出手段が検出した車線標示の標示幅と車線標示間の距離とに基づき、対をなす減速標示の組を検出する減速標示ペア検出手段と、
3重線判定手段が3重線と判定した場合には、減速標示ペア検出手段が検出した対をなす減速標示の位置から車線区分線の位置を推定する区分線位置推定手段と、
を備えることを特徴とする車線境界検出装置。 - 上記減速標示ペア検出手段は、
2つの車線標示の幅の差が予め設定した許容値以下であって、その2つの車線標示間の距離が予め設定した値以上となっている場合に、対をなす減速標示の組として検出することを特徴とする請求項1に記載した車線境界検出装置。 - 上記減速標示ペア検出手段は、
対をなす減速標示の組の候補を複数組検出した場合、標示幅が最も大きい組を減速標示の組として選択することを特徴とする請求項2に記載した車線境界検出装置。 - 上記減速標示ペア検出手段は、
対をなす減速標示の組の候補を複数組検出した場合、車線標示間の距離が最も大きい組を減速標示ペアとして選択することを特徴とする請求項3に記載した車線境界検出装置 - 上記減衰標示ペア検出手段が検出した減衰標示の標示幅を記憶する標示幅記憶手段を備え、
上記減速標示ペア検出手段は、予め設定した数の標示幅が記憶されている場合、上記標示幅記憶手段が記憶している標示幅に基づき標示基準幅を決定し、上記標示基準幅との差が予め設定した値以内の標示幅となっている車線標示だけを減速標示の候補とすることを特徴とする請求項1〜請求項4のいずれか1項に記載した車線境界検出装置。 - 上記標示幅記憶手段は、3重線判定手段の判定結果に基づき現在の車線が3重線でないと判定すると、標示幅の記録を消去することを特徴とする請求項5に記載した車線境界検出装置。
- 自車走行路を撮像した画像から路面上の車線標示を検出し、検出した車線標示から車線標示が3重線か否かを判定すると共に、上記検出した車線標示の標示幅と車線標示間の距離とに基づき対をなす減速標示の組を検出し、
上記3重線と判定した場合には、上記検出した対をなす減速標示の位置から車線区分線の位置を推定することを特徴とする車線境界検出方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011031121A JP5716443B2 (ja) | 2011-02-16 | 2011-02-16 | 車線境界検出装置及び車線境界検出方法 |
CN201210031690.8A CN102646274B (zh) | 2011-02-16 | 2012-02-13 | 车道边界检测装置以及车道边界检测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011031121A JP5716443B2 (ja) | 2011-02-16 | 2011-02-16 | 車線境界検出装置及び車線境界検出方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012168884A true JP2012168884A (ja) | 2012-09-06 |
JP5716443B2 JP5716443B2 (ja) | 2015-05-13 |
Family
ID=46659086
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011031121A Active JP5716443B2 (ja) | 2011-02-16 | 2011-02-16 | 車線境界検出装置及び車線境界検出方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP5716443B2 (ja) |
CN (1) | CN102646274B (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104477103A (zh) * | 2014-12-25 | 2015-04-01 | 刘志平 | 一种汽车车宽边界抬头显示绘制、使用和实施方法 |
JP2016133838A (ja) * | 2015-01-15 | 2016-07-25 | トヨタ自動車株式会社 | 複合線判定装置及び複合線判定方法 |
JP6364565B1 (ja) * | 2018-02-15 | 2018-07-25 | 阪神高速技術株式会社 | 解析装置、ひび割れ検出処理装置、および解析プログラム |
CN109657641A (zh) * | 2018-12-29 | 2019-04-19 | 北京经纬恒润科技有限公司 | 一种车辆主辅路判断方法及装置 |
US11579250B2 (en) | 2020-12-23 | 2023-02-14 | Robert Bosch Gmbh | Lane boundary detection using radar signature trace data |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FR3019508B1 (fr) * | 2014-04-08 | 2017-12-08 | Alstom Transp Tech | Procede de detection de rails sur lesquels circule un vehicule ferroviaire |
JP6628189B2 (ja) * | 2016-05-19 | 2020-01-08 | パナソニックIpマネジメント株式会社 | 検出装置および検出方法 |
CN108304749A (zh) * | 2017-01-13 | 2018-07-20 | 比亚迪股份有限公司 | 道路减速线识别方法、装置及车辆 |
JP6776213B2 (ja) * | 2017-11-01 | 2020-10-28 | 株式会社東芝 | 軌道識別装置 |
CN109740469B (zh) * | 2018-12-24 | 2021-01-22 | 百度在线网络技术(北京)有限公司 | 车道线检测方法、装置、计算机设备和存储介质 |
CN111002990B (zh) * | 2019-12-05 | 2021-06-08 | 华南理工大学 | 一种基于动态偏离阈值的车道偏离预警方法及系统 |
CN113532425B (zh) * | 2021-09-16 | 2021-11-30 | 西南交通大学 | 基于振荡标线和手机传感的隧道无基站车路协同定位方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003168123A (ja) * | 2001-11-30 | 2003-06-13 | Toyota Central Res & Dev Lab Inc | 車線境界判定装置 |
JP2003308534A (ja) * | 2002-04-18 | 2003-10-31 | Denso Corp | 白線認識装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3864945B2 (ja) * | 2003-09-24 | 2007-01-10 | アイシン精機株式会社 | 路面走行レーン検出装置 |
JP4506790B2 (ja) * | 2007-07-05 | 2010-07-21 | アイシン・エィ・ダブリュ株式会社 | 道路情報生成装置、道路情報生成方法および道路情報生成プログラム |
CN101264755B (zh) * | 2008-03-06 | 2010-07-28 | 上海交通大学 | 车辆行驶安全智能监控装置 |
-
2011
- 2011-02-16 JP JP2011031121A patent/JP5716443B2/ja active Active
-
2012
- 2012-02-13 CN CN201210031690.8A patent/CN102646274B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003168123A (ja) * | 2001-11-30 | 2003-06-13 | Toyota Central Res & Dev Lab Inc | 車線境界判定装置 |
JP2003308534A (ja) * | 2002-04-18 | 2003-10-31 | Denso Corp | 白線認識装置 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104477103A (zh) * | 2014-12-25 | 2015-04-01 | 刘志平 | 一种汽车车宽边界抬头显示绘制、使用和实施方法 |
JP2016133838A (ja) * | 2015-01-15 | 2016-07-25 | トヨタ自動車株式会社 | 複合線判定装置及び複合線判定方法 |
JP6364565B1 (ja) * | 2018-02-15 | 2018-07-25 | 阪神高速技術株式会社 | 解析装置、ひび割れ検出処理装置、および解析プログラム |
JP2019144608A (ja) * | 2018-02-15 | 2019-08-29 | 阪神高速技術株式会社 | 解析装置、ひび割れ検出処理装置、および解析プログラム |
CN109657641A (zh) * | 2018-12-29 | 2019-04-19 | 北京经纬恒润科技有限公司 | 一种车辆主辅路判断方法及装置 |
US11579250B2 (en) | 2020-12-23 | 2023-02-14 | Robert Bosch Gmbh | Lane boundary detection using radar signature trace data |
Also Published As
Publication number | Publication date |
---|---|
CN102646274A (zh) | 2012-08-22 |
JP5716443B2 (ja) | 2015-05-13 |
CN102646274B (zh) | 2014-11-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5716443B2 (ja) | 車線境界検出装置及び車線境界検出方法 | |
JP6193819B2 (ja) | 走行区画線認識装置 | |
US9076046B2 (en) | Lane recognition device | |
JP3931891B2 (ja) | 車載用画像処理装置 | |
US20100110193A1 (en) | Lane recognition device, vehicle, lane recognition method, and lane recognition program | |
JP4811201B2 (ja) | 走路境界線検出装置、および走路境界線検出方法 | |
JP4793324B2 (ja) | 車両監視装置および車両監視方法 | |
KR101968349B1 (ko) | 영상 정보를 이용한 차선 경계 검출 방법 | |
EP0740163A2 (en) | Local positioning apparatus for detecting a local position of an automobile on a road | |
JP2000357233A (ja) | 物体認識装置 | |
CN104376297A (zh) | 道路上的线型指示标志的检测方法和装置 | |
TWI504858B (zh) | A vehicle specification measuring and processing device, a vehicle specification measuring method, and a recording medium | |
JP4940177B2 (ja) | 交通流計測装置 | |
JP6815963B2 (ja) | 車両用外界認識装置 | |
JP3945494B2 (ja) | 走行レーン認識装置 | |
US20110164790A1 (en) | Lane marking detection apparatus, lane marking detection method, and lane marking detection program | |
CN104508708A (zh) | 道路环境识别装置 | |
JP2007249257A (ja) | 移動体検出装置および移動体検出方法 | |
CN105548205A (zh) | 隧道表面缺陷定位方法及定位系统 | |
JP5974923B2 (ja) | 道路端検出システム、方法およびプログラム | |
JP2010020476A (ja) | 物体検出装置及び物体検出方法 | |
JP5888275B2 (ja) | 道路端検出システム、方法およびプログラム | |
JP3807651B2 (ja) | 白線認識装置 | |
JP2011043907A (ja) | 車線認識装置、及び車線認識方法 | |
JP2008032557A (ja) | 車載用ナビゲーション装置及び道路種判別方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20131224 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140828 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140902 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150217 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150302 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5716443 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |