JP2019511725A - 特に選択されてバックエンドサーバから伝送されたランドマークを用いて、少なくとも部分自動運転を行う車両の姿勢を特定する方法 - Google Patents
特に選択されてバックエンドサーバから伝送されたランドマークを用いて、少なくとも部分自動運転を行う車両の姿勢を特定する方法 Download PDFInfo
- Publication number
- JP2019511725A JP2019511725A JP2018552796A JP2018552796A JP2019511725A JP 2019511725 A JP2019511725 A JP 2019511725A JP 2018552796 A JP2018552796 A JP 2018552796A JP 2018552796 A JP2018552796 A JP 2018552796A JP 2019511725 A JP2019511725 A JP 2019511725A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- landmark
- end server
- control system
- vehicle control
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 31
- 230000007613 environmental effect Effects 0.000 claims abstract description 42
- 238000001514 detection method Methods 0.000 claims abstract description 39
- 238000010972 statistical evaluation Methods 0.000 claims abstract description 12
- 230000000694 effects Effects 0.000 abstract 1
- 230000005540 biological transmission Effects 0.000 description 7
- 230000008901 benefit Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 230000015572 biosynthetic process Effects 0.000 description 3
- 230000004807 localization Effects 0.000 description 3
- 230000007423 decrease Effects 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 238000011157 data evaluation Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/20—Instruments for performing navigational calculations
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/28—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network with correlation of data from several navigational instruments
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3691—Retrieval, searching and output of information related to real-time traffic, weather, or environmental conditions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
- G06V20/584—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of vehicle lights or traffic lights
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0088—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0276—Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
- G06T2207/10021—Stereoscopic video; Stereoscopic image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30244—Camera pose
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
- G06T2207/30256—Lane; Road marking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
- G06V20/582—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of traffic signs
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Life Sciences & Earth Sciences (AREA)
- Atmospheric Sciences (AREA)
- Biodiversity & Conservation Biology (AREA)
- Ecology (AREA)
- Environmental & Geological Engineering (AREA)
- Environmental Sciences (AREA)
- Traffic Control Systems (AREA)
- Navigation (AREA)
Abstract
Description
当該技術分野における「姿勢」とは、対象物の空間的な姿勢、即ち、2次元空間又は3次元空間における対象物の位置及び配向状態であると理解されたい。
本発明の課題は、少なくとも部分自動運転を行う車両の姿勢を特定する方法を発展させることであり、ここで、バックエンドサーバから車両制御システムへ伝送されるデータ量が、可能な限り制限されるように、この方法が構成されるものとするとよい。また、車両制御システムに必要な計算能力及び処理すべきデータ量も、低減されるべきである。ここで、部分自動運転を行う車両は、これまでと変わらずに、安全に操縦することができなければならない。
本発明を向上させるさらなる措置を、図面に即した本発明の好ましい実施例の説明に併せて、以下に詳細に説明する。
Claims (8)
- ランドマーク(10,11)を用いて、少なくとも部分自動運転を行う車両(1)の姿勢を特定する方法であって、
前記車両(1)は、ランドマーク(10,11)を検出する検出器(12,13)を有しており、
ランドマーク(10,11)のランドマークデータをマップから前記車両(1)の車両制御システム(100)へ伝送するバックエンドサーバ(14)が設けられている、
方法において、
・検出されたランドマーク(10,11)に関する検出メッセージ(15)を前記車両制御システム(100)から前記バックエンドサーバ(14)へ伝送するステップと、
・環境の及ぼす影響のいずれが前記車両(1)の前記検出器(12,13)によるランドマーク(10,11)の検出に影響するかについての、環境の及ぼす影響に関するデータを情報サービス部(16)から前記バックエンドサーバ(14)へ送信するステップと、
・特定のタイプのランドマーク(10,11)に対する環境の及ぼす影響の統計的評価(17)を行うステップと、
・前記統計的評価(17)とその時点での環境の及ぼす影響とに依存してランドマーク(10,11)を選択するステップと、
・ランドマーク(10,11)の選択(24)を前記バックエンドサーバ(14)から前記車両制御システム(100)へ伝送(25)するステップと、
を少なくとも含む、方法。 - 前記環境の及ぼす影響は、天候、時刻、交通、視界、光条件、及び/又は、湿気を含む、
請求項1に記載の方法。 - 前記情報サービス部(16)は、少なくとも1つの気象サービスによって形成され、又は、環境の及ぼす影響に関するデータを伝送する特定の車両によって形成される、
請求項1又は2に記載の方法。 - 前記検出メッセージ(15)は、個々に受信される各ランドマーク(10,11)について、検出又は検出欠落を表す少なくとも1つのブール変数を含む、
請求項1乃至3のいずれか一項に記載の方法。 - 前記特定のタイプのランドマーク(10,11)に対する環境の及ぼす影響の前記統計的評価(17)は、前記検出メッセージ(15)の集合体を含み、これにより、受信された検出メッセージ(15)の数が増加するにつれて、前記バックエンドサーバ(14)が、前記環境の及ぼす影響に依存して、優先すべきランドマーク(10,11)を学習する、
請求項1乃至4のいずれか一項に記載の方法。 - 前記バックエンドサーバ(14)から伝送される、特定されたランドマーク(10,11)のランドマークデータを、付加的に位置特定シナリオに依存して選択する、
請求項1乃至5のいずれか一項に記載の方法。 - 前記車両制御システム(100)は、前記車両(1)の姿勢を特定する間、種々の検出器(12,13)をオン又はオフへ切り替える、
請求項1乃至6のいずれか一項に記載の方法。 - 請求項1乃至7のいずれか一項に記載の方法を実施するための、車両制御システム(100)とバックエンドサーバ(14)とを含むシステム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102016205868.1A DE102016205868A1 (de) | 2016-04-08 | 2016-04-08 | Verfahren zur Bestimmung einer Pose eines wenigstens teilautomatisiert fahrenden Fahrzeugs mittels speziell ausgewählter und von einem Backend-Server übertragener Landmarken |
DE102016205868.1 | 2016-04-08 | ||
PCT/EP2017/052487 WO2017174230A1 (de) | 2016-04-08 | 2017-02-06 | Verfahren zur bestimmung einer pose eines wenigstens teilautomatisiert fahrenden fahrzeugs mittels speziell ausgewählter und von einem backend- server übertragener landmarken |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019511725A true JP2019511725A (ja) | 2019-04-25 |
JP6890612B2 JP6890612B2 (ja) | 2021-06-18 |
Family
ID=58057094
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018552796A Active JP6890612B2 (ja) | 2016-04-08 | 2017-02-06 | 特に選択されてバックエンドサーバから伝送されたランドマークを用いて、少なくとも部分自動運転を行う車両の姿勢を特定する方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10755435B2 (ja) |
EP (1) | EP3440433B1 (ja) |
JP (1) | JP6890612B2 (ja) |
CN (1) | CN109073393B (ja) |
DE (1) | DE102016205868A1 (ja) |
WO (1) | WO2017174230A1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102017214731A1 (de) * | 2017-08-23 | 2019-02-28 | Robert Bosch Gmbh | Verfahren und Vorrichtung zum Bestimmen einer hochgenauen Position und zum Betreiben eines automatisierten Fahrzeugs |
DE102018117830A1 (de) * | 2018-07-24 | 2020-01-30 | Valeo Schalter Und Sensoren Gmbh | Digitale Umfeldkarte mit Sensorreichweiten |
DE102019128253B4 (de) * | 2019-10-18 | 2024-06-06 | StreetScooter GmbH | Verfahren zum Navigieren eines Flurförderzeugs |
DE102020210515A1 (de) * | 2020-08-19 | 2022-03-24 | Volkswagen Aktiengesellschaft | Verfahren zur Überprüfung von detektierten Veränderungen für ein Umfeldmodell einer digitalen Umgebungskarte |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013046494A (ja) * | 2011-08-24 | 2013-03-04 | Denso Corp | 電動車両の充電制御システム |
JP2015055947A (ja) * | 2013-09-11 | 2015-03-23 | 三菱電機株式会社 | 車両制御装置 |
JP2015108604A (ja) * | 2013-12-06 | 2015-06-11 | 日立オートモティブシステムズ株式会社 | 車両位置推定システム,装置,方法、及び、カメラ装置 |
JP2015184155A (ja) * | 2014-03-25 | 2015-10-22 | 株式会社日立製作所 | 地図データ構造、地図データ更新方法、自車位置修正方法、車載機、サーバおよび自車位置データ修正システム |
JP2016018238A (ja) * | 2014-07-04 | 2016-02-01 | 株式会社デンソー | 車両の運転モード制御装置 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0798800A (ja) * | 1993-09-29 | 1995-04-11 | Mazda Motor Corp | 自動車の経路誘導装置 |
US20050149256A1 (en) * | 2002-05-10 | 2005-07-07 | Siemens Aktiengesellschaft | Device for determining the position by means of fixed and/or variable landmarks |
JP4718396B2 (ja) * | 2006-08-24 | 2011-07-06 | 日立オートモティブシステムズ株式会社 | ランドマーク認識システム |
CN102542799A (zh) * | 2011-12-19 | 2012-07-04 | 中山大学 | 基于路面标记的行采集视频车辆检测器及其检测方法 |
CN103925918A (zh) * | 2013-01-16 | 2014-07-16 | 杨奎军 | 一种定位方法、装置及系统 |
DE102014206901A1 (de) | 2014-04-10 | 2015-10-15 | Robert Bosch Gmbh | Benutzerinterface zur Auswahl und Aktivierung einer Unterstützung in Manöversituationen |
DE102014214327A1 (de) * | 2014-07-23 | 2016-01-28 | Continental Teves Ag & Co. Ohg | Steuervorrichtung, Fahrzeug, Datenbereitstellungsvorrichtung und Verfahren |
KR101610502B1 (ko) * | 2014-09-02 | 2016-04-07 | 현대자동차주식회사 | 자율주행차량의 주행환경 인식장치 및 방법 |
CN104537105B (zh) * | 2015-01-14 | 2017-09-26 | 中国人民解放军信息工程大学 | 一种基于Web地图的网络实体地标自动挖掘方法 |
JP2018510373A (ja) * | 2015-02-10 | 2018-04-12 | モービルアイ ビジョン テクノロジーズ リミテッド | 自律車両ナビゲーションのための疎な地図 |
JP6776513B2 (ja) * | 2015-08-19 | 2020-10-28 | ソニー株式会社 | 車両制御装置と車両制御方法と情報処理装置および交通情報提供システム |
US10309777B2 (en) * | 2016-12-30 | 2019-06-04 | DeepMap Inc. | Visual odometry and pairwise alignment for high definition map creation |
US10859384B2 (en) * | 2017-11-15 | 2020-12-08 | Uatc, Llc | Lightweight vehicle localization systems and methods |
-
2016
- 2016-04-08 DE DE102016205868.1A patent/DE102016205868A1/de not_active Withdrawn
-
2017
- 2017-02-06 US US16/091,064 patent/US10755435B2/en active Active
- 2017-02-06 EP EP17705811.2A patent/EP3440433B1/de active Active
- 2017-02-06 CN CN201780022417.XA patent/CN109073393B/zh active Active
- 2017-02-06 WO PCT/EP2017/052487 patent/WO2017174230A1/de active Application Filing
- 2017-02-06 JP JP2018552796A patent/JP6890612B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013046494A (ja) * | 2011-08-24 | 2013-03-04 | Denso Corp | 電動車両の充電制御システム |
JP2015055947A (ja) * | 2013-09-11 | 2015-03-23 | 三菱電機株式会社 | 車両制御装置 |
JP2015108604A (ja) * | 2013-12-06 | 2015-06-11 | 日立オートモティブシステムズ株式会社 | 車両位置推定システム,装置,方法、及び、カメラ装置 |
JP2015184155A (ja) * | 2014-03-25 | 2015-10-22 | 株式会社日立製作所 | 地図データ構造、地図データ更新方法、自車位置修正方法、車載機、サーバおよび自車位置データ修正システム |
JP2016018238A (ja) * | 2014-07-04 | 2016-02-01 | 株式会社デンソー | 車両の運転モード制御装置 |
Also Published As
Publication number | Publication date |
---|---|
US20190114800A1 (en) | 2019-04-18 |
CN109073393A (zh) | 2018-12-21 |
EP3440433A1 (de) | 2019-02-13 |
CN109073393B (zh) | 2022-04-29 |
US10755435B2 (en) | 2020-08-25 |
JP6890612B2 (ja) | 2021-06-18 |
WO2017174230A1 (de) | 2017-10-12 |
DE102016205868A1 (de) | 2017-10-12 |
EP3440433B1 (de) | 2020-04-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3602220B1 (en) | Dynamic sensor selection for self-driving vehicles | |
US10163017B2 (en) | Systems and methods for vehicle signal light detection | |
WO2020003776A1 (ja) | 情報処理装置及び情報処理方法、撮像装置、コンピュータプログラム、情報処理システム、並びに移動体装置 | |
EP3477616A1 (en) | Method for controlling a vehicle using a machine learning system | |
US10852426B2 (en) | System and method of utilizing a LIDAR digital map to improve automatic driving | |
US10783384B2 (en) | Object detection using shadows | |
JP6890612B2 (ja) | 特に選択されてバックエンドサーバから伝送されたランドマークを用いて、少なくとも部分自動運転を行う車両の姿勢を特定する方法 | |
CN111201787A (zh) | 成像装置、图像处理装置和图像处理方法 | |
US20170024621A1 (en) | Communication system for gathering and verifying information | |
US10249192B2 (en) | Notification regarding an estimated movement path of a vehicle | |
US20220348211A1 (en) | Method and Assistance Device for Assisting Driving Operation of a Motor Vehicle, and Motor Vehicle | |
US11499833B2 (en) | Inferring lane boundaries via high speed vehicle telemetry | |
CN116323359B (zh) | 低置信度对象检测条件下的运载工具操作的注释和绘制成图 | |
JP2019511724A (ja) | 特に選択されてバックエンドサーバから伝送されたランドマークを用いて、少なくとも部分自動運転を行う車両の姿勢を特定する方法 | |
CN114026436B (zh) | 图像处理装置、图像处理方法和程序 | |
KR20220009379A (ko) | 정보 처리 장치, 및 정보 처리 방법, 그리고 프로그램 | |
US20210223409A1 (en) | Method and device for determining a position of a vehicle | |
KR102018582B1 (ko) | 고속화도로 내 본선과 램프 진출입로를 구분하여 교통정보를 수집하는 장치 및 방법 | |
CN113196106A (zh) | 信息处理设备、信息处理方法和程序 | |
JP6933069B2 (ja) | 経路探索装置 | |
US20210295563A1 (en) | Image processing apparatus, image processing method, and program | |
CN113170092A (zh) | 图像处理装置、图像处理方法以及图像处理系统 | |
US20230290248A1 (en) | System and method for detecting traffic flow with heat map | |
KR102531722B1 (ko) | 차량 단말을 이용한 주차위치안내 서비스 방법 및 장치 | |
JP2019049475A (ja) | 信号処理装置、および信号処理方法、プログラム、並びに移動体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181205 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191203 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191129 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200302 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201005 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210104 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210510 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210525 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6890612 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |