JP6451583B2 - 運転支援装置 - Google Patents
運転支援装置 Download PDFInfo
- Publication number
- JP6451583B2 JP6451583B2 JP2015200145A JP2015200145A JP6451583B2 JP 6451583 B2 JP6451583 B2 JP 6451583B2 JP 2015200145 A JP2015200145 A JP 2015200145A JP 2015200145 A JP2015200145 A JP 2015200145A JP 6451583 B2 JP6451583 B2 JP 6451583B2
- Authority
- JP
- Japan
- Prior art keywords
- driving
- support
- cluster
- unit
- driver
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 claims description 63
- 238000009826 distribution Methods 0.000 claims description 29
- 238000013480 data collection Methods 0.000 claims description 20
- 230000010354 integration Effects 0.000 claims description 7
- 230000006399 behavior Effects 0.000 description 48
- 230000008569 process Effects 0.000 description 36
- 238000012545 processing Methods 0.000 description 19
- 230000015572 biosynthetic process Effects 0.000 description 16
- 230000009471 action Effects 0.000 description 15
- 230000005477 standard model Effects 0.000 description 10
- 238000009825 accumulation Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 5
- 239000000470 constituent Substances 0.000 description 5
- 206010041349 Somnolence Diseases 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000000881 depressing effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000003860 storage Methods 0.000 description 2
- 208000032140 Sleepiness Diseases 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000001747 exhibiting effect Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000037321 sleepiness Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
- G06F16/285—Clustering or classification
- G06F16/287—Visualization; Browsing
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B9/00—Simulators for teaching or training purposes
- G09B9/02—Simulators for teaching or training purposes for teaching control of vehicles or other craft
- G09B9/04—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles
- G09B9/052—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles characterised by provision for recording or measuring trainee's performance
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2228—Indexing structures
- G06F16/2246—Trees, e.g. B+trees
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/282—Hierarchical databases, e.g. IMS, LDAP data stores or Lotus Notes
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B9/00—Simulators for teaching or training purposes
- G09B9/02—Simulators for teaching or training purposes for teaching control of vehicles or other craft
- G09B9/04—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles
- G09B9/042—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles providing simulation in a real vehicle
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7235—Details of waveform analysis
- A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
Description
[1.構成]
図1に示す運転支援装置1は、データ収集・蓄積部10と、クラスタ形成部20と、支援提供部30とを備える。なお、支援提供部30は、各車両に搭載される。データ収集・蓄積部10およびクラスタ形成部20は、通信網に接続されたサーバとして構成され、支援提供部30を搭載した車両との通信を行う。データ収集・蓄積部10とクラスタ形成部20とは、一体に構成されていてもよいし、別体に形成され、上記通信網を介して相互に通信を行うように構成されていてもよい。
データ収集・蓄積部10は、運転行動データ収集部11と、ドライバー情報収集部12と、運転記号推定部13と、運転記号データベース14と、出現パターン分類部15と、小クラスタデータベース16とを備える。なお、運転行動収集部11,運転記号推定部13,運転記号データベース14がデータ収集部に相当し、出現パターン分類部15,小クラスタデータベース16が分類部に相当する。
運転記号推定部13は、図2に示すように、連続時系列データとして計測される運転行動データを、複数の部分系列に分節化し、その部分系列のそれぞれに、該部分系列の状態に応じた記号である運転記号を付与することで運転記号列へと変換する。
ここで、出現パターン分類部15が実行する処理を、図3のフローチャートを用いて説明する。なお、本処理は、予め設定された一定期間毎、または運転記号データベース14に一定量以上の新たなデータが蓄積される毎に起動する。
なお、小クラスタの生成には、様々な運転行動データをベクトル化したものが用いられているため、同じ小クラスタに属するドライバーは、総合的な運転行動が似た者同士となる。
クラスタ形成部20は、分類要件データベース21と、クラスタ形成処理部22と、支援クラスタデータベース23とを備える。なお、クラスタ形成部20が統合部に相当する。
分類要件は、運転支援の種類毎に設定され、注目する特徴量、判定基準を定義したものである。ここで使用する特徴量は、運転行動データから抽出可能な物理量であり、運転支援の内容と密接な関係を有するものが用いられる。具体的には、例えば、ブレーキの踏み始めから停止までの時間、発進時のアクセルの踏み込み量の微分値、年齢、過去一ヶ月の走行距離等を特徴量として用いることができる。
ここで、クラスタ形成処理部22が実行する処理を、図4のフローチャートを用いて説明する。なお、本処理は、予め設定された一定期間毎、または小クラスタデータベース16が更新される毎に起動する。
続くS240では、先のS210での階層クラスタリングの結果から、どの階層で支援クラスタを生成するかを決定する階層決定処理を実施する。その詳細は後述する。
なお、S240が階層化部に相当し、S250が設定部に相当する。
次に、先のS240で実行する階層決定処理の詳細を、図6のフローチャートを用いて説明する。ただし、階層決定処理を行わず、小クラスタをそのまま支援クラスタとして用いてもよい。
続くS320では、設定された選択階層に属するクラスタの一つを、処理対象となる対象クラスタとして選択する。
例えば、分類要件が第1タイプの場合、図7に示すように、特徴量分布のデータ総数に対する有効範囲のデータ数の割合であるデータ割合を算出し、そのデータ割合が予め設定された割合閾値以上であれば、分類要件を充足していると判断する。対象クラスタの規模が小さい、即ち、有効範囲のデータ数が少ない場合や、対象クラスタの規模は十分に大きいが、有効範囲外にも多くのデータが存在し、分布の特徴があいまいになっているような場合には、支援クラスタとして不適であると判断される。
S360では、選択階層より上位のクラスタ階層が存在するか否かを判断する。上位階層が存在すれば、S370に移行し、選択階層をひとつ上げてS320に戻る。一方、上位階層が存在しなければ、即ち、現在の選択階層が最上位階層であればS380に移行する。
図9に示すように、ある階層に属するクラスタの特徴量分布は、一つ下の階層に属するクラスタの特徴量分布をマージすることで構成される。このため、ある階層に属する個々のクラスタについて蓄積されたデータ数は、下位のクラスタ階層ほど少なく、上位のクラスタ階層ほど多くなる。また、同じクラスタに属するドライバー間での運転行動の類似度は、下位のクラスタ階層ほど高く、上位のクラスタ階層ほど低くなる。そして、選択階層のクラスタが他の階層のクラスタよりも高い割合で分類要件を充足する場合に、その選択階層のクラスタが支援クラスタに設定される。ここでは、例えば、個々のクラスタのデータ量が適度にあり、クラスタ毎の特徴が明確に現れている中クラスタが支援クラスタに設定されることになる。
次に、先のS250で実行する対応判定処理の詳細を、図10のフローチャートを用いて説明する。
続くS420では、対象支援について支援モードと、個々の支援クラスタとの対応関係を決定する。ここで支援モードは、例えば第1タイプの分類要件の場合は、予め用意された支援モードのうち、個々の支援クラスタが充足する判定基準に対応する支援モードを、個々の支援クラスタに対応付けてもよい。具体的には、ブレーキのタイミングが遅い範囲に一定割合以上のデータが入るという判定基準を充足した支援クラスタに対し、この判定基準に対応する支援モードとして、障害物との衝突の警告のタイミングを早めるといった支援を対応付けてもよい。また、第2タイプの分類要件の場合は、個々の支援クラスタをそれぞれひとつの支援モードとしてもよい。支援モードを予め用意する場合、図11に示すように、支援クラスタと支援モードとの関係は、1対1になるとは限らず、同じ支援モードに複数の支援クラスタを対応づけてもよい。
続くS440では、全ての支援クラスタについて処理済みであるか否かを判断する。未処理の支援クラスタがあれば、S410に戻り、全支援クラスタについて処理済みであれば本処理を終了する。
支援提供部30は、運転行動データ取得部31と、運転記号推定部32と、所属クラスタ判定部33と、支援モード判定部34と、運転支援提供部35とを備える。なお、運転行動データ取得部31,運転記号推定部32が対象データ取得部に相当し、所属クラスタ判定部33が判定部に相当し、支援モード判定部34,運転支援提供部35が支援提供部に相当する。
所属クラスタ判定部33は、運転記号推定部32にて推定された運転記号列から支援対象ドライバーが属するクラスタを推定する。まず、所属クラスタ判定部33は、運転記号推定部32にて推定された運転記号列に含まれる運転記号を逐次集計することで、支援対象ドライバーの運転行動に出現した運転記号の集合SXを生成する。次に、所属クラスタ推定部23は、全ての小クラスタD1〜DKについて、支援対象ドライバーが小クラスタDkに属する確率p(k|SX)を公知の手法を用いて算出する。そして、確率p(k|SX)が最大となる小クラスタを特定する。更に、対象支援についての階層クラスタリングの結果である樹形図に基づき、特定された小クラスタが属する支援クラスタを、支援対象ドライバーの所属クラスタであると判定する。
以上詳述した本実施形態によれば、以下の効果が得られる。
(5A)運転支援装置1では、総合的な運転行動の傾向が類似したドライバーのグループである複数の小クラスタを生成し、運転支援の内容に応じた特徴量を用いて小クラスタを適宜統合することで、個々の運転支援で使用する支援クラスタを生成している。このため、個々の運転支援に適した支援クラスタの生成、即ち、ドライバーの分類を行うことができ、その結果、支援対象ドライバーの運転行動の傾向に応じた的確な運転支援を実現することができる。
以上、本発明を実施するための形態について説明したが、本発明は上述の実施形態に限定されることなく、種々変形して実施することができる。
Claims (10)
- 複数のドライバーについて、該ドライバーの運転操作および該運転操作の結果として現れる車両挙動のうち少なくとも一つを表す運転行動データを収集するデータ収集部(11,13,14)と、
前記データ収集部にて収集された運転行動データを用いて、ドライバーの運転時の行動である運転行動の傾向を表す複数の小クラスタに分類すると共に、前記小クラスタのそれぞれに対応づけて、該小クラスタに属するドライバーの前記運転行動の特性を表す小クラスタ情報を蓄積する分類部(15,16)と、
ドライバーの運転を支援するために実行される車両制御または車載機器の制御を運転支援として、前記分類部にて分類された前記小クラスタを、前記運転支援の種類毎に設定された分類要件を充足し、かつ、前記運転支援に適した粒度となるように統合することで、前記運転支援の種類毎に、該運転支援におけるドライバーの運転行動の傾向を表す複数の支援クラスタを生成すると共に、前記支援クラスタのそれぞれに対応付けて、該支援クラスタに属する小クラスタの情報である支援クラスタ情報を蓄積する統合部(20)と、
前記運転支援の対象となる支援対象ドライバーについての前記運転行動データである対象データを取得する対象データ取得部(31,32)と、
前記対象データ取得部により取得された対象データと、前記支援クラスタについて蓄積された前記支援クラスタ情報との比較により、前記運転支援の種類毎に、前記支援対象ドライバーが属する前記支援クラスタである所属クラスタを推定する推定部(33)と、
前記運転支援を、前記推定部で推定された前記所属クラスタに対応づけられた内容で提供する支援提供部(34,35)と、
を備える運転支援装置。 - 請求項1に記載の運転支援装置において、
前記統合部は、
前記小クラスタに対し階層クラスタリングを実施することで、複数階層に階層化されたクラスタを生成する階層化部(22:S210)と、
前記支援提供部が提供する前記運転支援の一つを対象支援として、前記階層化部で階層化された階層を最下層から順次選択し、選択された階層である選択階層に属するクラスタが、前記対象支援に適するか否かを判定するために前記分類要件を充足する割合が高い階層に属するクラスタを、前記対象支援で使用する前記支援クラスタに設定する設定部(22:S240)と、
を備える運転支援装置。 - 請求項2に記載の運転支援装置において、
前記設定部は、前記対象支援に適するか否かの判定に、前記運転支援の種類毎に予め設定された特徴量について、前記支援クラスタ情報として蓄積された特徴量分布を用いる
運転支援装置。 - 請求項3に記載の運転支援装置において、
前記設定部は、前記特徴量分布について予め設定された有効範囲内に属するデータの割合が、予め設定された割合閾値以上であることを前記分類要件の一つとして用いる
運転支援装置。 - 請求項3または請求項4に記載の運転支援装置において、
前記設定部は、前記特徴量分布についてデータの密集度が予め設定された密集閾値以上となる部位が存在することを前記分類要件の一つとして用いる
運転支援装置。 - 請求項4または請求項5に記載の運転支援装置において、
前記設定部は、前記特徴量の分布を構成する全データ数が、予め設定された総数閾値より大きい場合に、前記分類要件の判断を許可する
運転支援装置 - 請求項2ないし請求項6のいずれか1項に記載の運転支援装置において、
前記階層化部は、前記階層クラスタリングとしてウォード法を用いる
運転支援装置。 - 請求項1ないし請求項7のいずれか1項に記載の運転支援装置において、
前記データ収集部は、ドライバーの運転行動に関わる状態を検出したデータの系列を複数の部分系列に分節化し、前記部分系列のそれぞれに該部分系列の状態に応じた運転記号を付与することで生成される前記運転記号の系列を前記運転行動データとし、
前記推定部での推定に、前記ドライバー毎に生成される前記運転記号の出現パターンを特徴量として用いる
運転支援装置。 - 請求項1ないし請求項8のいずれか1項に記載の運転支援装置において、
ドライバーの年齢、運転履歴、運転頻度のうち少なくとも一つを含んだドライバー情報を、前記データ収集部が収集する運転行動データに対応づけて収集するドライバー情報収集部(12)を更に備え、
前記支援提供部は、前記運転支援の一つとして、前記ドライバー情報収集部にて収集されたドライバー情報に基づいて求めた、前記支援対象ドライバーの所属クラスタに属するドライバの代表値を提示する
運転支援装置。 - 請求項1ないし請求項9のいずれか1項に記載の運転支援装置において、
前記支援提供部は、前記運転支援の一つとして、前記蓄積データに基づき、前記所属クラスタに属するドライバーの平均的な運転行動と該所属クラスタ以外のクラスタに属するドライバーの平均的な運転行動とを比較し、両者の乖離度から前記支援対象ドライバーへの支援方法を決定する
運転支援装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015200145A JP6451583B2 (ja) | 2015-10-08 | 2015-10-08 | 運転支援装置 |
US15/285,235 US20170103121A1 (en) | 2015-10-08 | 2016-10-04 | Drive support apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015200145A JP6451583B2 (ja) | 2015-10-08 | 2015-10-08 | 運転支援装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017071333A JP2017071333A (ja) | 2017-04-13 |
JP6451583B2 true JP6451583B2 (ja) | 2019-01-16 |
Family
ID=58499594
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015200145A Active JP6451583B2 (ja) | 2015-10-08 | 2015-10-08 | 運転支援装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20170103121A1 (ja) |
JP (1) | JP6451583B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7013722B2 (ja) * | 2017-08-22 | 2022-02-01 | 株式会社デンソー | 運転支援装置 |
JP6947091B2 (ja) * | 2018-03-14 | 2021-10-13 | オムロン株式会社 | 運転支援装置、運転支援方法、運転支援プログラム、動作制御装置、動作制御方法、及び動作制御プログラム |
US20210089992A1 (en) * | 2019-09-20 | 2021-03-25 | Nec Laboratories America, Inc. | Method for automated code reviewer recommendation |
US11254326B2 (en) * | 2020-06-01 | 2022-02-22 | Baidu Usa Llc | Automatic comfort score system based on human driving reference data |
US11468999B2 (en) * | 2020-07-31 | 2022-10-11 | Accenture Global Solutions Limited | Systems and methods for implementing density variation (DENSVAR) clustering algorithms |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3995099B2 (ja) * | 2004-07-27 | 2007-10-24 | 国立医薬品食品衛生研究所長 | 高次元データを塊に分割する装置 |
JP5375805B2 (ja) * | 2010-11-26 | 2013-12-25 | トヨタ自動車株式会社 | 運転支援システム及び運転支援管理センター |
JP6026959B2 (ja) * | 2013-06-03 | 2016-11-16 | 株式会社デンソー | 運転シーンラベル推定装置 |
JP6012643B2 (ja) * | 2014-01-31 | 2016-10-25 | 三菱電機株式会社 | 車両用運転支援装置、サーバ、車両運転支援システム、および、車両用運転支援プログラム |
-
2015
- 2015-10-08 JP JP2015200145A patent/JP6451583B2/ja active Active
-
2016
- 2016-10-04 US US15/285,235 patent/US20170103121A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
JP2017071333A (ja) | 2017-04-13 |
US20170103121A1 (en) | 2017-04-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6451583B2 (ja) | 運転支援装置 | |
JP6307356B2 (ja) | 運転コンテキスト情報生成装置 | |
Ferreira et al. | Driver behavior profiling: An investigation with different smartphone sensors and machine learning | |
JP6026959B2 (ja) | 運転シーンラベル推定装置 | |
JP6519434B2 (ja) | 運転支援装置 | |
JP6330651B2 (ja) | 異常検出装置 | |
JP6206022B2 (ja) | 運転支援装置 | |
CN104331953A (zh) | 一种基于物联网技术的汽车行为数据识别与管理方法 | |
JP6511982B2 (ja) | 運転操作判別装置 | |
JP6693321B2 (ja) | 能力評価システム | |
CN113159105B (zh) | 一种驾驶行为无监督模式识别方法及数据采集监控系统 | |
CN115017742B (zh) | 自动驾驶测试场景生成方法、装置、设备及存储介质 | |
JP7051424B2 (ja) | 異常検出装置 | |
JP2019074849A (ja) | 運転データ解析装置 | |
US20220343637A1 (en) | Traffic flow machine-learning modeling system and method applied to vehicles | |
US9940759B2 (en) | Drive data collection system | |
JP7173702B2 (ja) | 評価装置 | |
JP7013722B2 (ja) | 運転支援装置 | |
CN114613131B (zh) | 一种基于安全裕度的个性化前向碰撞预警方法 | |
CN112612917B (zh) | 歌曲推荐方法、装置、设备及存储介质 | |
CN114802264A (zh) | 车辆控制方法、装置、电子设备 | |
JP6677074B2 (ja) | 運転診断装置 | |
Milardo et al. | An unsupervised approach for driving behavior analysis of professional truck drivers | |
JP2016095707A (ja) | 遷移予測データ生成装置および遷移予測装置 | |
Ding et al. | Finite mixture of the hidden Markov model for driving style analysis |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171128 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180821 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180828 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181019 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181113 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181126 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6451583 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |