JP7186607B2 - 電子地図を更新する方法、装置、およびコンピュータ読み取り可能な記憶媒体 - Google Patents
電子地図を更新する方法、装置、およびコンピュータ読み取り可能な記憶媒体 Download PDFInfo
- Publication number
- JP7186607B2 JP7186607B2 JP2018245193A JP2018245193A JP7186607B2 JP 7186607 B2 JP7186607 B2 JP 7186607B2 JP 2018245193 A JP2018245193 A JP 2018245193A JP 2018245193 A JP2018245193 A JP 2018245193A JP 7186607 B2 JP7186607 B2 JP 7186607B2
- Authority
- JP
- Japan
- Prior art keywords
- group
- images
- image
- target
- collected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 64
- 238000012545 processing Methods 0.000 claims description 18
- 230000008859 change Effects 0.000 claims description 17
- 230000004044 response Effects 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 12
- 238000000605 extraction Methods 0.000 claims description 4
- 230000008569 process Effects 0.000 description 13
- 238000005516 engineering process Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000005259 measurement Methods 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 3
- 101000822695 Clostridium perfringens (strain 13 / Type A) Small, acid-soluble spore protein C1 Proteins 0.000 description 2
- 101000655262 Clostridium perfringens (strain 13 / Type A) Small, acid-soluble spore protein C2 Proteins 0.000 description 2
- 101000655256 Paraclostridium bifermentans Small, acid-soluble spore protein alpha Proteins 0.000 description 2
- 101000655264 Paraclostridium bifermentans Small, acid-soluble spore protein beta Proteins 0.000 description 2
- 230000000712 assembly Effects 0.000 description 2
- 238000000429 assembly Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/38—Electronic maps specially adapted for navigation; Updating thereof
- G01C21/3804—Creation or updating of map data
- G01C21/3859—Differential updating map data
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/38—Electronic maps specially adapted for navigation; Updating thereof
- G01C21/3804—Creation or updating of map data
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/38—Electronic maps specially adapted for navigation; Updating thereof
- G01C21/3804—Creation or updating of map data
- G01C21/3833—Creation or updating of map data characterised by the source of data
- G01C21/3841—Data obtained from two or more sources, e.g. probe vehicles
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
- G05D1/0044—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with a computer generated representation of the environment of the vehicle, e.g. virtual reality, maps
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
- G05D1/0251—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means extracting 3D information from a plurality of images taken from different locations, e.g. stereo vision
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/29—Geographical information databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B29/00—Maps; Plans; Charts; Diagrams, e.g. route diagram
- G09B29/003—Maps
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3602—Input other than that of destination using image analysis, e.g. detection of road signs, lanes, buildings, real preceding vehicles using a camera
Landscapes
- Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Aviation & Aerospace Engineering (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Data Mining & Analysis (AREA)
- Mathematical Physics (AREA)
- Business, Economics & Management (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- Electromagnetism (AREA)
- Traffic Control Systems (AREA)
- Instructional Devices (AREA)
- Navigation (AREA)
- Image Analysis (AREA)
Description
なお、本願の出願当初の開示事項を維持するために、本願の出願当初の請求項1~26の記載内容を以下に追加する。
(請求項1)
電子地図を更新する方法であって、
収集主体により収集された、前記電子地図中の目標地図要素に関連する一グループの収集画像を取得するステップであって、前記目標地図要素は、目標画像と目標位置を備える、ステップと、
前記一グループの収集画像と前記目標画像との間のグループ間マッチングを実行するステップと、
前記一グループの収集画像同士のグループ内マッチングを実行するステップと、
前記グループ間マッチング、前記グループ内マッチング及び前記目標位置に基づいて、前記目標地図要素に関連する更新待ち地図要素の位置を更新するステップと
を含む、電子地図を更新する方法。
(請求項2)
前記一グループの収集画像を取得するステップは、
前記収集主体により収集された一グループの候補画像を取得するステップであって、前記一グループの候補画像の対応する位置と前記目標位置の距離は所定の閾値距離より小さい、ステップと、
前記一グループの候補画像から前記一グループの収集画像を選択するステップと
を含む、請求項1に記載の電子地図を更新する方法。
(請求項3)
前記一グループの候補画像を取得するステップは、
前記収集主体により収集された一グループの元画像及び前記元画像に対応する位置を取得するステップと、
前記一グループの元画像から1つの元画像を選択するステップと、
選択された元画像の対応する位置と前記目標位置との距離が前記所定の閾値距離より小さいかどうかを確定するステップと、
前記距離が前記所定の閾値距離より小さいと確定されたことに応じて、選択された元画像が前記一グループの候補画像に含まれると確定するステップと
を含む、請求項2に記載の電子地図を更新する方法。
(請求項4)
前記一グループの候補画像を取得するステップは、
前記目標位置との距離が前記所定の閾値距離より小さい候補位置で画像を前記収集主体により収集されるように、前記収集主体に前記目標位置を指示するステップと、
前記収集主体が前記候補位置で収集した一グループの画像を、前記一グループの候補画像として取得するステップと
を含む、請求項2に記載の電子地図を更新する方法。
(請求項5)
前記一グループの収集画像を選択するステップは、
前記一グループの候補画像から一つの候補画像を選択するステップと、
選択された候補画像と前記目標画像の関連度が所定の閾値関連度より高いかどうかを確定するステップと、
前記関連度が前記所定の閾値関連度より高いと確定されたことに応じて、選択された候補画像が前記一グループの収集画像に含まれると確定するステップと
を含む、請求項2に記載の電子地図を更新する方法。
(請求項6)
前記グループ間マッチングを実行するステップは、
前記収集画像を収集するときの前記収集主体と前記目標地図要素との相対的な位置を確定するように、前記一グループの収集画像の一つの収集画像と前記目標画像をマッチングさせるステップを含む、請求項1に記載の電子地図を更新する方法。
(請求項7)
前記収集主体が前記一グループの収集画像を収集する時間は、連続的であり、
前記グループ内マッチングを実行するステップは、
前記収集主体が2つの隣接する収集画像を収集する期間の位置変化を確定するように、前記一グループの収集画像のうちの2つの隣接する収集画像をマッチングさせるステップを含む、請求項1に記載の電子地図を更新する方法。
(請求項8)
前記更新待ち地図要素の位置を更新するステップは、
前記グループ間マッチング、前記グループ内マッチング及び前記目標位置に基づいて、前記収集主体が前記一グループの収集画像を収集するときの一グループの参照絶対位置を確定するステップと、
前記グループ内マッチングに基づいて、前記収集主体が前記一グループの収集画像を収集する期間の参照位置変化、及び前記更新待ち地図要素と前記収集主体の参照相対位置を確定するステップと、
前記参照絶対位置、前記参照位置変化及び前記参照相対位置に基づいて、前記更新待ち地図要素の位置を更新するステップと
を含む、請求項1に記載の電子地図を更新するための方法。
(請求項9)
前記一グループの収集画像中の各収集画像がすべて前記目標地図要素を含むことに応じて、前記目標地図要素を前記更新待ち地図要素として確定するステップをさらに含む、請求項1に記載の電子地図を更新する方法。
(請求項10)
前記一グループの収集画像から、前記目標地図要素に関連する、前記電子地図中に含まれていない地図要素を、前記更新待ち地図要素として確定するステップをさらに含む、請求項1に記載の電子地図を更新する方法。
(請求項11)
別の一収集主体により収集された、前記目標地図要素に関連する別の一グループの収集画像を取得するステップと、
前記別の一グループの収集画像と前記目標画像との間の別の一グループ間マッチング、及び前記別の一グループの収集画像同士の別の一グループ内マッチングを実行するステップと、
前記別の一グループ間マッチング、前記別の一グループ内マッチング及び前記目標位置に基づいて、前記更新待ち地図要素の位置を更に更新するステップと
をさらに含む、請求項1に記載の電子地図を更新する方法。
(請求項12)
別の一収集主体により確定された前記更新待ち地図要素の参照更新位置を取得するステップと、
前記参照更新位置に基づいて、前記更新待ち地図要素の位置をさらに更新するステップと
をさらに含む、請求項1に記載の電子地図を更新する方法。
(請求項13)
電子地図を更新する装置であって、
収集主体により収集された、前記電子地図中の目標地図要素に関連する一グループの収集画像を取得するように構築された画像取得モジュールであって、前記目標地図要素は、目標画像と目標位置を備える、画像取得モジュールと、
前記一グループの収集画像と前記目標画像との間のグループ間マッチングを実行するように構築されたグループ間マッチングモジュールと、
前記一グループの収集画像同士のグループ内マッチングを実行するように構築されたグループ内マッチングモジュールと、
前記グループ間マッチング、前記グループ内マッチング及び前記目標位置に基づいて、前記目標地図要素に関連する更新待ち地図要素の位置を更新するように構築された位置更新モジュールと
を含む、電子地図を更新する装置。
(請求項14)
前記画像取得モジュールは、
前記収集主体により収集された一グループの候補画像を取得するように構築された第1の取得モジュールであって、前記一グループの候補画像の対応する位置と前記目標位置の距離は所定の閾値距離より小さい、第1の取得モジュールと、
前記一グループの候補画像から前記一グループの収集画像を選択するように構築された第1の選択モジュールと
を含む、請求項13に記載の電子地図を更新する装置。
(請求項15)
前記画像取得モジュールは、
前記収集主体により収集された一グループの元画像及び前記元画像に対応する位置を取得するように構築された第2の取得モジュールと、
前記一グループの元画像から1つの元画像を選択するように構築された第2の選択モジュールと、
選択された元画像の対応する位置と前記目標位置との距離が前記所定の閾値距離より小さいかどうかを確定するように構築された距離確定モジュールと、
前記距離が前記所定の閾値距離より小さいと確定されたことに応じて、選択された元画像が前記一グループの候補画像に含まれると確定するように構築された第1の確定モジュールと
を含む、請求項14に記載の電子地図を更新する装置。
(請求項16)
前記画像取得モジュールは、
前記目標位置との距離が前記所定の閾値距離より小さい候補位置で画像を前記収集主体により収集されるように、前記収集主体に前記目標位置を指示するように構築された指示モジュールと、
前記収集主体が前記候補位置で収集した一グループの画像を、前記一グループの候補画像として取得するように構築された第3の取得モジュールと
を含む、請求項14に記載の電子地図を更新する装置。
(請求項17)
前記第1の選択モジュールは、
前記一グループの候補画像から一つの候補画像を選択するように構築された第3の選択モジュールと、
選択された候補画像と前記目標画像の関連度が所定の閾値関連度より高いかどうかを確定するように構築された関連度確定モジュールと、
前記関連度が前記所定の閾値関連度より高いと確定されたことに応じて、選択された候補画像が前記一グループの収集画像に含まれると確定するように構築された第2の確定モジュールと
を含む、請求項14に記載の電子地図を更新する装置。
(請求項18)
前記グループ間マッチングモジュールは、
前記収集画像を収集するときの前記収集主体と前記目標地図要素との相対的な位置を確定するように、前記一グループの収集画像の一つの収集画像と前記目標画像をマッチングさせるように構築された第1のマッチングモジュールと
を含む、請求項13に記載の電子地図を更新する装置。
(請求項19)
前記収集主体が前記一グループの収集画像を収集する時間は、連続的であり、
前記グループ内マッチングモジュールは、
前記収集主体が2つの隣接する収集画像を収集する期間の位置変化を確定するように、前記一グループの収集画像のうちの2つの隣接する収集画像をマッチングさせるように構築された第2のマッチングモジュールを含む、請求項13に記載の電子地図を更新する装置。
(請求項20)
前記位置更新モジュールは、
前記グループ間マッチング、前記グループ内マッチング及び前記目標位置に基づいて、前記収集主体が前記一グループの収集画像を収集するときの一グループの参照絶対位置を確定するように構築された第3の確定モジュールと、
前記グループ内マッチングに基づいて、前記収集主体が前記一グループの収集画像を収集する期間の参照位置変化、及び前記更新待ち地図要素と前記収集主体の参照相対位置を確定するように構築された第4の確定モジュールと、
前記参照絶対位置、前記参照位置変化及び前記参照相対位置に基づいて、前記更新待ち地図要素の位置を更新するように構築された第1の更新モジュールと
を含む、請求項13に記載の電子地図を更新する装置。
(請求項21)
前記一グループの収集画像中の各収集画像がすべて前記目標地図要素を含むことに応じて、前記目標地図要素を前記更新待ち地図要素として確定するように構築された第5の確定モジュールをさらに含む、請求項13に記載の電子地図を更新する装置。
(請求項22)
前記一グループの収集画像から、前記目標地図要素に関連する、前記電子地図中に含まれていない地図要素を、前記更新待ち地図要素として確定するように構築された第6の確定モジュールをさらに含む、請求項13に記載の電子地図を更新する装置。
(請求項23)
別の一収集主体により収集された、前記目標地図要素に関連する別の一グループの収集画像を取得するように構築された第4の取得モジュールと、
前記別の一グループの収集画像と前記目標画像との間の別の一グループ間マッチング、及び前記別の一グループの収集画像同士の別の一グループ内マッチングを実行するように構築された第5のマッチングモジュールと、
前記別の一グループ間マッチング、前記別の一グループ内マッチング及び前記目標位置に基づいて、前記更新待ち地図要素の位置を更に更新するように構築された第2の更新モジュールと
をさらに含む、請求項13に記載の電子地図を更新する装置。
(請求項24)
別の一収集主体により確定された前記更新待ち地図要素の参照更新位置を取得するように構築された第5の取得モジュールと、
前記参照更新位置に基づいて、前記更新待ち地図要素の位置を更に更新するように構築された第3の更新モジュールをさらに含む、請求項13に記載の電子地図を更新する装置。
(請求項25)
1つまたは複数のプロセッサと、
1つまたは複数のプログラムを格納するための記憶装置と
を含む機器であって、
前記1つまたは複数のプログラムが前記1つまたは複数のプロセッサによって実行される場合、前記1つまたは複数のプロセッサが請求項1から請求項12のいずれか一項の方法を実行する機器。
(請求項26)
コンピュータプログラムが記憶されているコンピュータ読み取り可能な記憶媒体であって、
前記コンピュータプログラムがプロセッサによって実行される場合、請求項1から請求項12のうちいずれか一項の方法を実行するコンピュータ読み取り可能な記憶媒体。
Claims (15)
- 電子地図を更新する方法であって、
画像取得モジュールは、収集主体により収集された、前記電子地図内の目標地図要素の目標画像および目標位置に関連する一グループの収集画像を取得する画像取得ステップであって、前記収集主体により収集された画像から一グループの候補画像を選択し、前記一グループの候補画像のそれぞれに対応する位置と前記目標地図要素の位置の距離は所定の閾値距離より小さいものであり、選択された候補画像と前記目標地図要素の画像の関連度が所定の閾値関連度よりも高いか否かを判定し、前記関連度が前記所定の閾値関連度よりも高いと判定されたことに応答して、選択された候補画像が処理しようとする収集画像であると判定する、画像取得ステップと、
特徴抽出モジュールは、取得された前記処理しようとする収集画像および前記電子地図内の前記目標地図要素の目標画像に対して特徴を抽出する特徴抽出ステップと、
画像確定モジュールは、前記一グループの収集画像のそれぞれに含まれる地図要素の特徴を前記目標地図要素の目標画像の特徴とマッチングすることにより、前記収集画像における、前記目標地図要素の目標画像および/または目標位置と一致しない地図要素に対応する画像であって、前記所定の閾値距離より小さく、前記所定の閾値関連度よりも高いと判定された画像を更新待ち地図要素の画像とする画像確定ステップと、
グループ間マッチングモジュールは、前記一グループの収集画像のそれぞれと前記目標地図要素の目標画像とをマッチングして、前記一グループの収集画像に含まれる地図要素の複数の画像位置に基づいて、前記収集主体が前記収集画像を採集する際における、前記収集主体の前記目標地図要素に対する位置を確定するグループ間マッチングステップと、
グループ内マッチングモジュールは、前記一グループの収集画像における2つずつの収集画像をマッチングして、前記収集主体が前記一グループの収集画像を採集する際における、前記収集主体の位置変化及び前記収集主体に対する更新待ち地図要素の位置を確定するグループ内マッチングステップと、
位置更新モジュールは、前記グループ間マッチングモジュールにより確定された前記収集主体の前記目標地図要素に対する位置、前記グループ内マッチングモジュールにより確定された前記収集主体の位置変化及び更新待ち地図要素の前記収集主体に対する位置に基づいて、前記画像確定モジュールにより確定された前記更新待ち地図要素の画像を電子地図に更新する地図更新ステップと
を含む、電子地図を更新する方法。 - 前記の、前記収集主体により収集された画像から一グループの候補画像を選択するステップは、
前記収集主体により収集された一グループの元画像及び前記元画像に対応する位置を取得するステップと、
前記一グループの元画像から1つの元画像を選択するステップと、
選択された元画像の対応する位置と前記目標地図要素の位置との距離が前記所定の閾値距離より小さいか否かを判定するステップと、
前記距離が前記所定の閾値距離より小さいと判定されたことに応答して、選択された元画像が前記一グループの候補画像に含まれると判定するステップと
を含む、請求項1に記載の電子地図を更新する方法。 - 前記の、前記収集主体により収集された画像から一グループの候補画像を取得するステップは、
前記画像取得モジュールは、前記収集主体の位置と前記目標地図要素の位置との距離が前記所定の閾値距離より小さい候補位置で前記収集主体により画像が収集されるように、前記収集主体に前記目標地図要素の位置を指示するステップであって、前記候補位置は、前記収集主体の、一グループの候補画像を取得する際の位置である、ステップと、
前記収集主体が前記候補位置で収集した一グループの画像を、前記一グループの候補画像として取得するステップと
を含む、請求項1に記載の電子地図を更新する方法。 - 前記収集主体が前記一グループの収集画像を収集する時間は、連続的であり、
前記グループ内マッチングステップは、
前記収集主体が前記一グループの収集画像のうちの2つの隣接する収集画像を収集する期間の位置変化を確定するように、前記2つの隣接する収集画像をマッチングさせるステップを含む、請求項1に記載の電子地図を更新する方法。 - 他の収集主体により収集された、前記目標地図要素に関連する他のグループの収集画像を取得するステップと、
前記他のグループの収集画像と前記目標地図要素の画像との間の他のグループ間マッチング、及び前記他のグループの収集画像同士間の他のグループ内マッチングを実行するステップと、
前記他のグループ間マッチング、前記他のグループ内マッチング及び前記目標地図要素の位置に基づいて、前記更新待ち地図要素の位置を更に更新するステップと
をさらに含む、請求項1に記載の電子地図を更新する方法。 - 画像処理機能を有する他の収集主体により確定された前記更新待ち地図要素の基準更新位置を取得するステップと、
前記基準更新位置に基づいて、前記更新待ち地図要素の位置をさらに校正するステップと
をさらに含む、請求項1に記載の電子地図を更新する方法。 - 電子地図を更新する装置であって、
収集主体により収集された、前記電子地図内の目標地図要素の目標画像および目標位置に関連する一グループの収集画像を取得するように構成された画像取得モジュールであって、
前記収集主体により収集された画像から一グループの候補画像を選択するように構成された第1の取得モジュールであって、前記一グループの候補画像のそれぞれに対応する位置と前記目標地図要素の位置の距離は所定の閾値距離より小さい、第1の取得モジュールと、
選択された候補画像と前記目標地図要素の画像の関連度が所定の閾値関連度よりも高いか否かを判定するように構成された関連度確定モジュールと、
前記関連度が前記所定の閾値関連度よりも高いと判定されたことに応答して、選択された候補画像が処理しようとする収集画像であると判定するように構成された第1の選択モジュールとを含む、画像取得モジュールと、
取得された前記一グループの収集画像および前記電子地図内の前記目標地図要素の目標画像に対して特徴を抽出する特徴抽出モジュールと、
前記一グループの収集画像のそれぞれに含まれる地図要素の特徴を前記目標地図要素の目標画像の特徴とマッチングすることにより、前記収集画像における、前記目標地図要素の目標画像および/または目標位置と一致しない地図要素に対応する画像であって、前記所定の閾値距離より小さく、前記所定の閾値関連度よりも高いと判定された画像を更新待ち地図要素の画像とするように構成された画像確定モジュールと、
前記一グループの収集画像のそれぞれと前記目標地図要素の目標画像とをマッチングして、前記一グループの収集画像に含まれる地図要素の複数の画像位置に基づいて、前記収集主体が前記収集画像を採集する際における、前記収集主体の前記目標地図要素に対する位置を確定するように構成されたグループ間マッチングモジュールと、
前記一グループの収集画像における2つずつの収集画像をマッチングして、前記収集主体が前記一グループの収集画像を採集する際における、前記収集主体の位置変化及び前記収集主体に対する更新待ち地図要素の位置を確定するように構成されたグループ内マッチングモジュールと、
前記グループ間マッチングモジュールにより確定された前記収集主体の前記目標地図要素に対する位置、前記グループ内マッチングモジュールにより確定された前記収集主体の位置変化及び更新待ち地図要素の前記収集主体に対する位置に基づいて、前記画像確定モジュールにより確定された前記更新待ち地図要素の画像を電子地図に更新するように構成された地図更新モジュールと
を含む、電子地図を更新する装置。 - 前記画像取得モジュールは、
前記収集主体により収集された一グループの元画像及び前記元画像に対応する位置を取得するように構成された第2の取得モジュールと、
前記一グループの元画像から1つの元画像を選択するように構成された第2の選択モジュールと、
選択された元画像の対応する位置と前記目標地図要素の位置との距離が前記所定の閾値距離より小さいか否かを判定するように構成された距離確定モジュールと、
前記距離が前記所定の閾値距離より小さいと判定されたことに応答して、選択された元画像が前記一グループの候補画像に含まれると確定するように構成された第1の確定モジュールと
を含む、請求項7に記載の電子地図を更新する装置。 - 前記画像取得モジュールは、
前記収集主体の位置と前記目標地図要素の位置との距離が前記所定の閾値距離より小さい候補位置で前記収集主体により画像が収集されるように、前記収集主体に前記目標地図要素の位置を指示するように構成された指示モジュールであって、前記候補位置は、前記収集主体の、一グループの候補画像を取得する際の位置である、指示モジュールと、
前記収集主体が前記候補位置で収集した一グループの画像を、前記一グループの候補画像として取得するように構成された第3の取得モジュールと
を含む、請求項7に記載の電子地図を更新する装置。 - 前記収集主体が前記一グループの収集画像を収集する時間は、連続的であり、
前記グループ内マッチングモジュールは、
前記収集主体が前記一グループの収集画像のうちの2つの隣接する収集画像を収集する期間の位置変化を確定するように、前記2つの隣接する収集画像をマッチングさせるように構成された第2のマッチングモジュールを含む、請求項7に記載の電子地図を更新する装置。 - 他の収集主体により収集された、前記目標地図要素に関連する他のグループの収集画像を取得するように構成された第4の取得モジュールと、
前記他のグループの収集画像と前記目標地図要素の画像との間の他のグループ間マッチング、及び前記他のグループの収集画像同士間の他のグループ内マッチングを実行するように構成された第5のマッチングモジュールと、
前記他のグループ間マッチング、前記他のグループ内マッチング及び前記目標地図要素の位置に基づいて、前記更新待ち地図要素の位置を更に更新するように構成された第2の更新モジュールと
をさらに含む、請求項7に記載の電子地図を更新する装置。 - 他の収集主体により確定された前記更新待ち地図要素の基準更新位置を取得するように構成された第5の取得モジュールと、
前記基準更新位置に基づいて、前記更新待ち地図要素の位置を更に校正するように構成された第3の更新モジュールをさらに含む、請求項7に記載の電子地図を更新する装置。 - 1つまたは複数のプロセッサと、
1つまたは複数のプログラムを格納するための記憶装置と
を含む機器であって、
前記1つまたは複数のプログラムが前記1つまたは複数のプロセッサによって実行される場合、前記1つまたは複数のプロセッサが請求項1から請求項6のいずれか一項の方法を実行する機器。 - コンピュータプログラムが記憶されているコンピュータ読み取り可能な記憶媒体であって、
前記コンピュータプログラムがプロセッサによって実行される場合、請求項1から請求項6のうちいずれか一項の方法を実行するコンピュータ読み取り可能な記憶媒体。 - コンピュータプログラムであって、
前記コンピュータプログラムがプロセッサにより実行されると、請求項1から6のうちいずれか一項の方法を実現させるコンピュータプログラム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711484235.2 | 2017-12-29 | ||
CN201711484235.2A CN108318043B (zh) | 2017-12-29 | 2017-12-29 | 用于更新电子地图的方法、装置和计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019144538A JP2019144538A (ja) | 2019-08-29 |
JP7186607B2 true JP7186607B2 (ja) | 2022-12-09 |
Family
ID=62892863
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018245193A Active JP7186607B2 (ja) | 2017-12-29 | 2018-12-27 | 電子地図を更新する方法、装置、およびコンピュータ読み取り可能な記憶媒体 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11105638B2 (ja) |
EP (1) | EP3505869B1 (ja) |
JP (1) | JP7186607B2 (ja) |
KR (2) | KR102338270B1 (ja) |
CN (1) | CN108318043B (ja) |
Families Citing this family (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10782136B2 (en) | 2018-09-28 | 2020-09-22 | Zoox, Inc. | Modifying map elements associated with map data |
CN109326006B (zh) * | 2018-09-30 | 2023-03-28 | 阿波罗智联(北京)科技有限公司 | 地图融合方法和装置 |
CN109540122B (zh) * | 2018-11-14 | 2022-11-04 | 中国银联股份有限公司 | 一种构建地图模型的方法及装置 |
CN109543680B (zh) * | 2018-11-19 | 2021-03-12 | 百度在线网络技术(北京)有限公司 | 兴趣点的位置确定方法、装置设备和介质 |
CN109612455A (zh) * | 2018-12-04 | 2019-04-12 | 天津职业技术师范大学 | 一种室内定位方法及系统 |
CN109920055A (zh) * | 2019-03-08 | 2019-06-21 | 视辰信息科技(上海)有限公司 | 三维视觉地图的构建方法、装置与电子设备 |
CN111750878B (zh) * | 2019-03-28 | 2022-06-24 | 北京魔门塔科技有限公司 | 一种车辆位姿的修正方法和装置 |
CN110954112B (zh) * | 2019-03-29 | 2021-09-21 | 北京初速度科技有限公司 | 一种导航地图与感知图像匹配关系的更新方法和装置 |
CN110097064B (zh) * | 2019-05-14 | 2021-05-11 | 驭势科技(北京)有限公司 | 一种建图方法及装置 |
KR102349159B1 (ko) * | 2019-05-21 | 2022-01-10 | 엘지전자 주식회사 | 경로 제공 장치 및 그것의 경로 제공 방법 |
KR102680026B1 (ko) * | 2019-07-09 | 2024-07-02 | 현대모비스 주식회사 | 차량 시스템 및 상기 차량 시스템을 이용하여 고정밀 지도를 위한 센싱 데이터 업로드 방법 |
CN110530398B (zh) * | 2019-08-30 | 2021-02-02 | 北京三快在线科技有限公司 | 一种电子地图精度检测的方法及装置 |
CN110647886A (zh) * | 2019-09-19 | 2020-01-03 | 北京百度网讯科技有限公司 | 兴趣点标注方法、装置、计算机设备和存储介质 |
CN112629546B (zh) * | 2019-10-08 | 2023-09-19 | 宁波吉利汽车研究开发有限公司 | 一种位置调节参数确定方法、装置、电子设备及存储介质 |
CN112699189B (zh) * | 2019-10-23 | 2024-06-04 | 盒马(中国)有限公司 | 位置信息更新方法、装置及计算机系统 |
JP7288393B2 (ja) * | 2019-11-28 | 2023-06-07 | 株式会社日立製作所 | 演算システム、演算方法 |
CN111060117B (zh) * | 2019-12-17 | 2022-02-08 | 苏州智加科技有限公司 | 局部地图构建方法、装置、计算机设备以及存储介质 |
CN111540010B (zh) * | 2020-05-15 | 2023-09-19 | 阿波罗智联(北京)科技有限公司 | 一种道路监测的方法、装置、电子设备及存储介质 |
CN111811524B (zh) * | 2020-07-14 | 2022-04-12 | 上海广境规划设计有限公司 | 一种基于大数据的地图实时更新装置和方法 |
CN113763459B (zh) * | 2020-10-19 | 2024-06-18 | 北京沃东天骏信息技术有限公司 | 元素位置更新方法、装置、电子设备及存储介质 |
CN112415552B (zh) * | 2020-11-17 | 2022-04-15 | 北京百度网讯科技有限公司 | 车辆位置的确定方法、装置及电子设备 |
CN112419542B (zh) * | 2020-12-07 | 2022-01-14 | 安徽江淮汽车集团股份有限公司 | 道路纠错上报方法、装置、设备及存储介质 |
CN112598092B (zh) * | 2020-12-18 | 2022-10-18 | 湖南特能博世科技有限公司 | 图元识别匹配方法、装置、计算机设备及可读存储介质 |
CN112749245A (zh) * | 2021-01-07 | 2021-05-04 | 北京码牛科技有限公司 | 一种一标三实信息管理方法、装置和电子设备 |
CN112883236B (zh) * | 2021-02-26 | 2024-01-16 | 北京百度网讯科技有限公司 | 一种地图更新方法、装置、电子设备及存储介质 |
CN113514053B (zh) * | 2021-07-13 | 2024-03-26 | 阿波罗智能技术(北京)有限公司 | 生成样本图像对的方法、装置和更新高精地图的方法 |
CN113435462B (zh) * | 2021-07-16 | 2022-06-28 | 北京百度网讯科技有限公司 | 定位方法、装置、电子设备和介质 |
CN113626455A (zh) * | 2021-08-13 | 2021-11-09 | 湖州市测绘院 | 图库联动更新方法及装置、电子设备、存储介质 |
DE102021209786A1 (de) * | 2021-09-06 | 2023-03-09 | Robert Bosch Gesellschaft mit beschränkter Haftung | Verfahren zum Positionieren einer Kartendarstellung eines Umfelds eines Fahrzeugs in einer semantischen Straßenkarte |
CN114111813B (zh) * | 2021-10-18 | 2024-06-18 | 阿波罗智能技术(北京)有限公司 | 高精地图元素更新方法、装置、电子设备及存储介质 |
CN114037677B (zh) * | 2021-11-05 | 2022-07-26 | 安徽宇呈数据技术有限公司 | 一种可接入充电宝的便携式地图采集设备 |
US12050589B2 (en) * | 2021-12-29 | 2024-07-30 | Lyft, Inc. | Systems and methods for updating maps and evaluating map accuracy based on collected image data |
CN115420297B (zh) * | 2022-11-04 | 2023-03-24 | 安徽蔚来智驾科技有限公司 | 地图更新方法、计算机设备及计算机可读存储介质 |
CN115962787B (zh) * | 2023-03-16 | 2023-06-06 | 安徽蔚来智驾科技有限公司 | 地图更新、自动驾驶控制方法、设备、介质及车辆 |
CN117115772B (zh) * | 2023-10-20 | 2024-01-30 | 腾讯科技(深圳)有限公司 | 一种图像处理的方法、装置、设备、存储介质及程序产品 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005098853A (ja) | 2003-09-25 | 2005-04-14 | Toyota Motor Corp | 地図データ更新方法および地図データ更新装置 |
JP2009037062A (ja) | 2007-08-02 | 2009-02-19 | Xanavi Informatics Corp | 地図データ更新装置、及び地図データ更新システム |
JP2012155660A (ja) | 2011-01-28 | 2012-08-16 | Denso Corp | 地図データ生成装置および走行支援装置 |
JP2016180980A (ja) | 2015-03-23 | 2016-10-13 | 株式会社豊田中央研究所 | 情報処理装置、プログラム、及び地図データ更新システム |
JP2017194527A (ja) | 2016-04-19 | 2017-10-26 | トヨタ自動車株式会社 | 環境地図のデータ構造、環境地図の作成システム及び作成方法、並びに、環境地図の更新システム及び更新方法 |
CN107451526A (zh) | 2017-06-09 | 2017-12-08 | 蔚来汽车有限公司 | 地图的构建及其应用 |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101275854A (zh) * | 2007-03-26 | 2008-10-01 | 日电(中国)有限公司 | 更新地图数据的方法和设备 |
TWI386626B (zh) | 2008-07-07 | 2013-02-21 | Wistron Corp | 用於一導航系統中的圖資更新裝置及相關導航系統 |
CN101556165A (zh) * | 2009-04-24 | 2009-10-14 | 方舟信息技术(苏州)有限公司 | 嵌入式移动电子地图数据库的实时更新方法 |
WO2011053335A1 (en) * | 2009-10-29 | 2011-05-05 | Tele Atlas North America | System and method of detecting, populating and/or verifying condition, attributions, and/or objects along a navigable street network |
US8676623B2 (en) * | 2010-11-18 | 2014-03-18 | Navteq B.V. | Building directory aided navigation |
WO2013098980A1 (ja) | 2011-12-27 | 2013-07-04 | パイオニア株式会社 | 情報処理システム、情報処理装置、情報処理用プログラム並びに情報記録媒体及び情報処理方法 |
KR101459636B1 (ko) * | 2013-04-08 | 2014-11-07 | 현대엠엔소프트 주식회사 | 네비게이션 장치의 지도 표시방법 및 네비게이션 장치 |
JP6397827B2 (ja) | 2013-12-27 | 2018-09-26 | 株式会社シーズ・ラボ | 地図データ更新装置 |
JP6280409B2 (ja) | 2014-03-25 | 2018-02-14 | 株式会社日立製作所 | 自車位置修正方法、ランドマークデータ更新方法、車載機、サーバおよび自車位置データ修正システム |
WO2016031229A1 (ja) | 2014-08-27 | 2016-03-03 | パナソニックIpマネジメント株式会社 | 道路地図作成システム、データ処理装置および車載装置 |
CN105426372B (zh) * | 2014-09-17 | 2020-10-16 | 阿里巴巴(中国)有限公司 | 一种电子地图数据制作及更新方法和装置 |
CN106294458A (zh) * | 2015-05-29 | 2017-01-04 | 北京四维图新科技股份有限公司 | 一种地图兴趣点更新方法及装置 |
EP3130891B1 (en) * | 2015-08-11 | 2018-01-03 | Continental Automotive GmbH | Method for updating a server database containing precision road information |
JP6798779B2 (ja) | 2015-11-04 | 2020-12-09 | トヨタ自動車株式会社 | 地図更新判定システム |
CN105373610A (zh) * | 2015-11-17 | 2016-03-02 | 广东欧珀移动通信有限公司 | 一种室内地图的更新方法以及服务器 |
CN105973245A (zh) * | 2016-04-28 | 2016-09-28 | 百度在线网络技术(北京)有限公司 | 利用无人驾驶车辆更新在线地图的方法和装置 |
CN107515006A (zh) * | 2016-06-15 | 2017-12-26 | 华为终端(东莞)有限公司 | 一种地图更新方法和车载终端 |
US10558222B2 (en) * | 2016-07-21 | 2020-02-11 | Mobileye Vision Technologies Ltd. | Navigating a vehicle using a crowdsourced sparse map |
CN106525057A (zh) * | 2016-10-26 | 2017-03-22 | 陈曦 | 高精度道路地图的生成系统 |
KR101737803B1 (ko) | 2016-11-23 | 2017-05-19 | 렉스젠(주) | 객체 정보 수집 장치 및 그 방법 |
-
2017
- 2017-12-29 CN CN201711484235.2A patent/CN108318043B/zh active Active
-
2018
- 2018-10-31 KR KR1020180132475A patent/KR102338270B1/ko active IP Right Grant
- 2018-12-21 US US16/231,021 patent/US11105638B2/en active Active
- 2018-12-27 JP JP2018245193A patent/JP7186607B2/ja active Active
- 2018-12-28 EP EP18248198.6A patent/EP3505869B1/en active Active
-
2020
- 2020-10-15 KR KR1020200133162A patent/KR102273559B1/ko active IP Right Grant
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005098853A (ja) | 2003-09-25 | 2005-04-14 | Toyota Motor Corp | 地図データ更新方法および地図データ更新装置 |
JP2009037062A (ja) | 2007-08-02 | 2009-02-19 | Xanavi Informatics Corp | 地図データ更新装置、及び地図データ更新システム |
JP2012155660A (ja) | 2011-01-28 | 2012-08-16 | Denso Corp | 地図データ生成装置および走行支援装置 |
JP2016180980A (ja) | 2015-03-23 | 2016-10-13 | 株式会社豊田中央研究所 | 情報処理装置、プログラム、及び地図データ更新システム |
JP2017194527A (ja) | 2016-04-19 | 2017-10-26 | トヨタ自動車株式会社 | 環境地図のデータ構造、環境地図の作成システム及び作成方法、並びに、環境地図の更新システム及び更新方法 |
CN107451526A (zh) | 2017-06-09 | 2017-12-08 | 蔚来汽车有限公司 | 地图的构建及其应用 |
Non-Patent Citations (2)
Title |
---|
佐藤 准嗣,GPS座標付き全方位映像群からの市街地映像マップの構築と街並変化の検出,電子情報通信学会論文誌,日本,社団法人電子情報通信学会,2007年04月01日,第J90-D巻 第4号,pp. 1085-1095 |
大江 統子,画像特徴点によるランドマークデータベースを用いた動画像からのカメラ位置・姿勢推定,電子情報通信学会技術研究報告 ,日本,社団法人電子情報通信学会,2005年01月13日,Vol.104 No.572,pp. 19-24 |
Also Published As
Publication number | Publication date |
---|---|
KR102338270B1 (ko) | 2021-12-30 |
CN108318043A (zh) | 2018-07-24 |
JP2019144538A (ja) | 2019-08-29 |
EP3505869B1 (en) | 2021-04-07 |
KR20200121274A (ko) | 2020-10-23 |
US20190204094A1 (en) | 2019-07-04 |
CN108318043B (zh) | 2020-07-31 |
KR20190082071A (ko) | 2019-07-09 |
US11105638B2 (en) | 2021-08-31 |
EP3505869A1 (en) | 2019-07-03 |
KR102273559B1 (ko) | 2021-07-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7186607B2 (ja) | 電子地図を更新する方法、装置、およびコンピュータ読み取り可能な記憶媒体 | |
JP6862409B2 (ja) | 地図生成及び移動主体の位置決めの方法及び装置 | |
EP3361278B1 (en) | Autonomous vehicle localization based on walsh kernel projection technique | |
CN109214248B (zh) | 用于识别无人驾驶车辆的激光点云数据的方法和装置 | |
Suhr et al. | Sensor fusion-based low-cost vehicle localization system for complex urban environments | |
US10579065B2 (en) | Algorithm and infrastructure for robust and efficient vehicle localization | |
JP6595182B2 (ja) | マッピング、位置特定、及び姿勢補正のためのシステム及び方法 | |
CN110686686B (zh) | 用于地图匹配的系统和方法 | |
CN111656135A (zh) | 基于高清地图的定位优化 | |
CN110386142A (zh) | 用于自动驾驶车辆的俯仰角校准方法 | |
CN111461981B (zh) | 点云拼接算法的误差估计方法和装置 | |
CN109564095B (zh) | 出于路径选择或导航目的使用虚拟探测点的方法和设备 | |
US20200279395A1 (en) | Method and system for enhanced sensing capabilities for vehicles | |
CN113450455A (zh) | 用于生成停车场的道路链路的地图的方法、设备和计算机程序产品 | |
CN111353453A (zh) | 用于车辆的障碍物检测方法和装置 | |
CN109029418A (zh) | 一种在封闭区域内对车辆进行定位的方法 | |
CN111103584A (zh) | 用于获知车辆的环境中的物体的高度信息的设备和方法 | |
JP7483133B2 (ja) | 情報処理装置及び情報処理方法 | |
CN111383337B (zh) | 用于识别对象的方法和装置 | |
CN114689074A (zh) | 信息处理方法和导航方法 | |
CN112400122B (zh) | 定位目标对象的系统和方法 | |
CN113850909A (zh) | 点云数据处理方法、装置、电子设备及自动驾驶设备 | |
CN111060114A (zh) | 用于生成高精度地图的特征图的方法和装置 | |
CN111461982B (zh) | 用于拼接点云的方法和装置 | |
US20230025579A1 (en) | High-definition mapping |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190415 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190415 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200428 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20200728 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200827 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210302 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210602 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20211029 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211228 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20220106 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20220107 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220325 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20220408 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220803 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20220803 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20220810 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20220812 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221102 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221129 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7186607 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |