JPWO2018180338A1 - Information processing device, server device, control method, program, and storage medium - Google Patents

Information processing device, server device, control method, program, and storage medium Download PDF

Info

Publication number
JPWO2018180338A1
JPWO2018180338A1 JP2019509134A JP2019509134A JPWO2018180338A1 JP WO2018180338 A1 JPWO2018180338 A1 JP WO2018180338A1 JP 2019509134 A JP2019509134 A JP 2019509134A JP 2019509134 A JP2019509134 A JP 2019509134A JP WO2018180338 A1 JPWO2018180338 A1 JP WO2018180338A1
Authority
JP
Japan
Prior art keywords
information
area
voxel
unit
server device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019509134A
Other languages
Japanese (ja)
Other versions
JP6721784B2 (en
Inventor
加藤 正浩
正浩 加藤
和紀 小山
和紀 小山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pioneer Corp
Original Assignee
Pioneer Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pioneer Corp filed Critical Pioneer Corp
Publication of JPWO2018180338A1 publication Critical patent/JPWO2018180338A1/en
Application granted granted Critical
Publication of JP6721784B2 publication Critical patent/JP6721784B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/28Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network with correlation of data from several navigational instruments
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/28Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network with correlation of data from several navigational instruments
    • G01C21/30Map- or contour-matching
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0968Systems involving transmission of navigation instructions to the vehicle
    • G08G1/0969Systems involving transmission of navigation instructions to the vehicle having a display in the form of a map

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)

Abstract

車載機1は、ボクセルデータを含む地図DB10を備える。そして、車載機1は、ライダ30が計測した点群データと地図DB10とによるボクセルごとの照合結果に基づき、ボクセルごとの評価関数Ekを算出する。そして、車載機1は、評価関数Ekが算出された領域のうち、評価関数Ekが所定の閾値よりも低いボクセルを抽出し、当該ボクセルに対するマッチング低下情報D1をサーバ装置2へ送信する。The in-vehicle device 1 includes a map DB 10 including voxel data. Then, the in-vehicle device 1 calculates an evaluation function Ek for each voxel based on the matching result for each voxel based on the point cloud data measured by the rider 30 and the map DB 10. Then, the vehicle-mounted device 1 extracts a voxel whose evaluation function Ek is lower than a predetermined threshold value from the area where the evaluation function Ek is calculated, and transmits the matching reduction information D1 for the voxel to the server device 2.

Description

本発明は、点群の照合(マッチング)技術に関する。   The present invention relates to a point cloud matching technique.

従来から、レーザスキャナなどの計測装置を用いて計測した周辺物体の形状データを、予め周辺物体の形状が記憶された地図情報とマッチングすることで、車両の自己位置を推定する技術が知られている。例えば、特許文献1には、空間を所定の規則で分割したボクセル中における検出物が静止物か移動物かを判定し、静止物が存在するボクセルを対象として地図情報と計測データとのマッチングを行う自律移動システムが開示されている。   Conventionally, there has been known a technique of estimating a vehicle's own position by matching shape data of a peripheral object measured using a measuring device such as a laser scanner with map information in which the shape of the peripheral object is stored in advance. I have. For example, in Patent Document 1, it is determined whether a detected object in a voxel obtained by dividing a space according to a predetermined rule is a stationary object or a moving object, and matching between map information and measurement data is performed on a voxel where a stationary object exists. An autonomous mobile system for performing is disclosed.

国際公開WO2013/076829International Publication WO2013 / 076829

地図情報に記憶されている静止構造物は、地図情報の更新時点から形状や位置が変化している場合があり、このような場合には、地図情報を用いたマッチング精度が低くなり、結果として自己位置推定の精度が低下することになる。そこで、本発明は、マッチングの精度が低くなる領域を好適に抽出することが可能な情報処理装置を提供することを主な目的とする。   The static structure stored in the map information may have changed shape or position from the time of updating the map information, and in such a case, the matching accuracy using the map information becomes low, and as a result, The accuracy of self-position estimation will be reduced. Therefore, it is a main object of the present invention to provide an information processing apparatus capable of suitably extracting a region where matching accuracy is low.

請求項1に記載の発明は、情報処理装置であって、計測部が計測した、基準位置から複数の位置までの夫々の距離に関する第1点群情報を取得する第1取得部と、一又は複数の位置情報に基づく第2点群情報が領域毎に記録されている地図情報を取得する第2取得部と、前記第1点群情報及び前記第2点群情報の前記領域毎の照合結果に基づき、前記領域毎の評価値を算出する算出部と、前記評価値が算出された領域のうち、前記評価値が所定の閾値より低い値である領域を抽出する抽出部と、を備えることを特徴とする。   The invention according to claim 1 is an information processing device, wherein the first acquisition unit acquires first point group information regarding respective distances from a reference position to a plurality of positions measured by the measurement unit; A second acquisition unit configured to acquire map information in which second point group information based on a plurality of pieces of position information is recorded for each area, and a result of matching of the first point group information and the second point group information for each area A calculation unit that calculates an evaluation value for each of the regions, and an extraction unit that extracts a region in which the evaluation value is lower than a predetermined threshold among the regions in which the evaluation value is calculated. It is characterized by.

請求項12に記載の発明は、情報処理装置が実行する制御方法であって、計測部が計測した、基準位置から複数の位置までの夫々の距離に関する第1点群情報を取得する第1取得工程と、一又は複数の位置情報に基づく第2点群情報が領域毎に記録されている地図情報を取得する第2取得工程と、前記第1点群情報及び前記第2点群情報の前記領域毎の照合結果に基づき、前記領域毎の評価値を算出する算出工程と、前記評価値が算出された領域のうち、前記評価値が所定の閾値より低い値である領域を抽出する抽出工程と、を有することを特徴とする。   The invention according to claim 12 is a control method executed by the information processing device, wherein the first acquisition unit acquires first point group information regarding each distance from the reference position to a plurality of positions measured by the measurement unit. A second acquiring step of acquiring map information in which second point group information based on one or a plurality of pieces of position information is recorded for each area; and a step of acquiring the first point group information and the second point group information. A calculating step of calculating an evaluation value of each area based on a comparison result of each area; and an extracting step of extracting an area in which the evaluation value is lower than a predetermined threshold value from the areas in which the evaluation value is calculated. And the following.

請求項13に記載の発明は、コンピュータが実行するプログラムであって、計測部が計測した、基準位置から複数の位置までの夫々の距離に関する第1点群情報を取得する第1取得部と、一又は複数の位置情報に基づく第2点群情報が領域毎に記録されている地図情報を取得する第2取得部と、前記第1点群情報及び前記第2点群情報の前記領域毎の照合結果に基づき、前記領域毎の評価値を算出する算出部と、前記評価値が算出された領域のうち、前記評価値が所定の閾値より低い値である領域を抽出する抽出部として前記コンピュータを機能させることを特徴とする。   The invention according to claim 13 is a program executed by a computer, wherein the first acquisition unit acquires first point group information regarding each distance from the reference position to a plurality of positions measured by the measurement unit; A second acquisition unit configured to acquire map information in which second point group information based on one or a plurality of pieces of position information is recorded for each area; and a second acquisition unit that acquires the first point group information and the second point group information for each area. A computer configured to calculate an evaluation value for each of the areas based on a result of the comparison, and an extraction unit configured to extract an area in which the evaluation value is lower than a predetermined threshold from among the areas in which the evaluation values are calculated; Is made to function.

運転支援システムの概略構成である。1 is a schematic configuration of a driving support system. 車載機及びサーバ装置のブロック構成を示す。2 shows a block configuration of an on-vehicle device and a server device. ボクセルデータの概略的なデータ構造の一例を示す。4 shows an example of a schematic data structure of voxel data. NDTスキャンマッチングの具体例を示す。A specific example of NDT scan matching will be described. ボクセルごとに重み付け値が設定されたNDTスキャンマッチングの具体例を示す。A specific example of NDT scan matching in which a weight value is set for each voxel will be described. 重み付け値の変更に関するNDTスキャンマッチングの具体例を示す。A specific example of NDT scan matching for changing a weight value will be described. 車載機が実行する処理手順を示すフローチャートである。It is a flowchart which shows the processing procedure which an onboard equipment performs. サーバ装置が実行する処理手順を示すフローチャートである。9 is a flowchart illustrating a processing procedure executed by the server device.

本発明の好適な実施形態によれば、情報処理装置は、計測部が計測した、基準位置から複数の位置までの夫々の距離に関する第1点群情報を取得する第1取得部と、一又は複数の位置情報に基づく第2点群情報が領域毎に記録されている地図情報を取得する第2取得部と、前記第1点群情報及び前記第2点群情報の前記領域毎の照合結果に基づき、前記領域毎の評価値を算出する算出部と、前記評価値が算出された領域のうち、前記評価値が所定の閾値より低い値である領域を抽出する抽出部と、を備える。この態様により、情報処理装置は、領域毎の評価値に基づき、計測部が計測した第1点群情報と地図情報に記録された第2点群情報との照合精度が低い領域を好適に抽出することができる。   According to a preferred embodiment of the present invention, the information processing apparatus includes: a first acquisition unit configured to acquire first point group information regarding respective distances from the reference position to the plurality of positions measured by the measurement unit; A second acquisition unit configured to acquire map information in which second point group information based on a plurality of pieces of position information is recorded for each area, and a result of matching of the first point group information and the second point group information for each area A calculation unit that calculates an evaluation value for each of the regions based on the evaluation value, and an extraction unit that extracts, from the regions in which the evaluation values are calculated, a region in which the evaluation value is lower than a predetermined threshold. According to this aspect, the information processing apparatus preferably extracts, based on the evaluation value for each area, an area where the matching accuracy between the first point cloud information measured by the measurement unit and the second point cloud information recorded in the map information is low. can do.

上記情報処理装置の一態様では、前記算出部は、前記第1点群情報として取得された前記領域毎の点の数に基づき、前記領域毎の評価値を正規化する。これにより、情報処理装置は、領域毎の評価値が計測部により計測された点群の数に依存するのを好適に防ぎ、照合精度が相対的に低い領域を好適に抽出することができる。   In one aspect of the information processing device, the calculation unit normalizes the evaluation value for each area based on the number of points for each area acquired as the first point group information. Accordingly, the information processing apparatus can appropriately prevent the evaluation value for each area from depending on the number of point groups measured by the measurement unit, and can appropriately extract an area with relatively low matching accuracy.

上記情報処理装置の他の一態様では、情報処理装置は、前記基準位置を推定する位置推定部をさらに備え、前記地図情報には、前記第2点群情報の信頼度に基づく重み付け値が前記領域毎に含まれており、前記位置推定部は、前記領域毎の重み付け値に基づいた前記領域毎の照合結果により、前記基準位置を推定する。この態様により、情報処理装置は、信頼度が高い領域の照合結果の重み付けを高くして高精度な位置推定を行うことが可能となる。   In another aspect of the information processing device, the information processing device further includes a position estimating unit that estimates the reference position, and the map information includes a weighting value based on the reliability of the second point cloud information. The reference position is included for each region, and the position estimating unit estimates the reference position based on a matching result for each region based on a weight value for each region. According to this aspect, the information processing apparatus can perform high-accuracy position estimation by increasing the weight of the matching result of the region with high reliability.

上記情報処理装置の他の一態様では、前記位置推定部は、前記照合結果と前記重み付け値とから前記領域毎に算出される評価値の和である総合評価値が示す評価が最も高くなるパラメータに基づき、前記基準位置を推定する。この態様により、情報処理装置は、基準位置を決定するためのパラメータを領域毎の重み付け値を考慮して好適に決定し、高精度な位置推定を行うことが可能となる。   In another aspect of the information processing device, the position estimating unit may include a parameter having the highest evaluation indicated by an overall evaluation value that is a sum of evaluation values calculated for each region from the comparison result and the weighting value. Is used to estimate the reference position. According to this aspect, the information processing apparatus can appropriately determine a parameter for determining the reference position in consideration of the weight value for each area, and perform highly accurate position estimation.

上記情報処理装置の他の一態様では、前記地図情報には、前記第2点群情報の前記領域毎の点の数の情報が含まれており、前記抽出部は、前記地図情報に含まれる前記領域毎の点の数の情報と、前記第1点群情報として取得された前記領域毎の点の数とに基づき、抽出する領域を決定する。一般に、地図情報に登録されている点の数と比較して少ない点の数しか計測できない領域については、評価値に関わらず的確な照合が出来ていない可能性がある。よって、この態様では、情報処理装置は、計測された点の数が少ない領域についても、照合の精度が相対的に低い領域として好適に抽出することができる。   In another aspect of the information processing apparatus, the map information includes information on the number of points for each area in the second point group information, and the extraction unit includes the map information. A region to be extracted is determined based on the information on the number of points for each region and the number of points for each region acquired as the first point group information. Generally, for an area in which only a small number of points can be measured as compared with the number of points registered in the map information, accurate matching may not be performed regardless of the evaluation value. Therefore, in this aspect, the information processing apparatus can appropriately extract an area in which the number of measured points is small as an area in which the matching accuracy is relatively low.

上記情報処理装置の他の一態様では、第2点群情報が前記領域毎に記録されている地図情報を管理するサーバ装置に対し、前記抽出部が抽出した領域に関する領域情報を送信する送信部をさらに備える。このように、情報処理装置は、地図情報の更新に有用な情報を好適にサーバ装置に提供することができる。   In another aspect of the information processing device, a transmitting unit that transmits region information on the region extracted by the extracting unit to a server device that manages map information in which second point group information is recorded for each region. Is further provided. As described above, the information processing device can suitably provide the server device with information useful for updating the map information.

上記情報処理装置の他の一態様では、前記送信部は、前記抽出部が抽出した領域のうちの所定数以上が互いに隣接する領域に関する領域情報を前記サーバ装置に対して送信する。この態様により、情報処理装置は、静的な物体の変化が生じた可能性が高い領域に関する領域情報をサーバ装置へ送信することで、送信頻度を抑制しつつ効果的な情報のみをサーバ装置に提供することができる。ここで、「静的な物体の変化」とは、静的な物体の変形、移動、消滅、発生などを含む。   In another aspect of the information processing device, the transmission unit transmits, to the server device, region information on a region in which a predetermined number or more of the regions extracted by the extraction unit are adjacent to each other. According to this aspect, the information processing apparatus transmits only the effective information to the server apparatus while suppressing the transmission frequency by transmitting the area information regarding the area where the static object change is highly likely to have occurred to the server apparatus. Can be provided. Here, “change of a static object” includes deformation, movement, disappearance, occurrence, and the like of the static object.

上記情報処理装置の他の一態様では、前記送信部は、前記抽出部が抽出したすべての領域に関する領域情報、及び前記抽出部が抽出した領域のうちの所定数以上が互いに隣接する領域に関する領域情報のいずれか一方を選択的に前記サーバ装置に対して送信する。この態様により、情報処理装置は、必要性に応じた情報をサーバ装置に提供することができる。   In another aspect of the information processing device, the transmission unit may include: area information regarding all the areas extracted by the extraction unit; and an area regarding an area where a predetermined number or more of the areas extracted by the extraction unit are adjacent to each other. One of the information is selectively transmitted to the server device. According to this aspect, the information processing apparatus can provide information according to need to the server apparatus.

本発明の他の好適な実施形態によれば、サーバ装置は、複数の情報処理装置から領域情報を受信する受信部と、前記受信部が受信した領域毎の複数の領域情報に基づき、静的な物体の変化が生じた領域であるか否かを前記領域毎に判定する判定部と、を備える。この態様により、サーバ装置は、静的な物体の変化が生じた領域となる可能性がある領域の領域情報を複数の情報処理装置から収集し、地図情報の更新が必要な領域を統計的に特定することができる。   According to another preferred embodiment of the present invention, the server device includes: a receiving unit that receives region information from a plurality of information processing devices; and a plurality of region information for each region received by the receiving unit. A determination unit for determining, for each of the regions, whether or not the region is a region in which a change of an object has occurred. According to this aspect, the server device collects, from a plurality of information processing devices, region information of a region that may be a region where a static object change has occurred, and statistically determines a region in which map information needs to be updated. Can be identified.

上記サーバ装置の一態様では、サーバ装置は、静的な物体の変化が生じた領域であると前記判定部が判定した領域に対する計測部による計測データの送信要求を、情報処理装置に対して送信する送信部をさらに備える。この態様により、サーバ装置は、静的な物体の変化が生じた領域であると判定した領域の計測データを好適に収集して地図情報の更新に用いることができる。   In one aspect of the server device, the server device transmits, to the information processing device, a request to transmit measurement data from the measurement unit to the region determined by the determination unit to be a region where a static change in the object has occurred. And a transmission unit that performs the transmission. According to this aspect, the server device can appropriately collect the measurement data of the area determined to be the area where the change of the static object has occurred and use it for updating the map information.

上記サーバ装置の他の一態様では、サーバ装置は、領域毎の照合に関する重み付け値を記憶する記憶部をさらに備え、前記領域情報を所定数以上前記受信部が受信した領域に対し、当該領域の重み付け値を低くする。この態様により、サーバ装置は、静的な物体の変化が生じた領域である可能性が高い領域の重み付け値を低くし、当該重み付け値を使用する際の位置推定精度を好適に向上させることができる。   In another aspect of the server device, the server device further includes a storage unit that stores a weight value related to matching for each region, and the region information is received by the receiving unit for a predetermined number or more of the region information. Decrease the weight value. According to this aspect, the server device can lower the weighting value of the region that is highly likely to be the region where the static object has changed, and appropriately improve the position estimation accuracy when using the weighting value. it can.

本発明の他の好適な実施形態によれば、情報処理装置が実行する制御方法であって、計測部が計測した、基準位置から複数の位置までの夫々の距離に関する第1点群情報を取得する第1取得工程と、一又は複数の位置情報に基づく第2点群情報が領域毎に記録されている地図情報を取得する第2取得工程と、前記第1点群情報及び前記第2点群情報の前記領域毎の照合結果に基づき、前記領域毎の評価値を算出する算出工程と、前記評価値が算出された領域のうち、前記評価値が所定の閾値より低い値である領域を抽出する抽出工程と、を有する。情報処理装置は、この制御方法を実行することで、計測部が計測した第1点群情報と地図情報に記録された第2点群情報との照合精度が低い領域を好適に抽出することができる。   According to another preferred embodiment of the present invention, there is provided a control method executed by an information processing apparatus, wherein first point group information regarding a distance from a reference position to a plurality of positions measured by a measurement unit is acquired. A first acquisition step of acquiring map information in which second point group information based on one or a plurality of pieces of position information is recorded for each area, the first point group information and the second point A calculating step of calculating an evaluation value for each area based on a comparison result for each area of the group information, and, among the areas where the evaluation value is calculated, an area where the evaluation value is lower than a predetermined threshold value; Extracting step. By executing this control method, the information processing apparatus can appropriately extract an area where the matching accuracy between the first point cloud information measured by the measurement unit and the second point cloud information recorded in the map information is low. it can.

本発明の他の好適な実施形態によれば、コンピュータが実行するプログラムであって、計測部が計測した、基準位置から複数の位置までの夫々の距離に関する第1点群情報を取得する第1取得部と、一又は複数の位置情報に基づく第2点群情報が領域毎に記録されている地図情報を取得する第2取得部と、前記第1点群情報及び前記第2点群情報の前記領域毎の照合結果に基づき、前記領域毎の評価値を算出する算出部と、前記評価値が算出された領域のうち、前記評価値が所定の閾値より低い値である領域を抽出する抽出部として前記コンピュータを機能させる。コンピュータは、このプログラムを実行することで、計測部が計測した第1点群情報と地図情報に記録された第2点群情報との照合精度が低い領域を好適に抽出することができる。好適には、上記プログラムは、記憶媒体に記憶される。   According to another preferred embodiment of the present invention, there is provided a program executed by a computer, the first program acquiring first point group information relating to respective distances from a reference position to a plurality of positions measured by a measurement unit. An acquisition unit, a second acquisition unit that acquires map information in which second point group information based on one or a plurality of pieces of position information is recorded for each area, and an acquisition unit that acquires the first point group information and the second point group information. A calculation unit that calculates an evaluation value for each area based on the result of matching for each area, and an extraction that extracts an area in which the evaluation value is lower than a predetermined threshold among the areas for which the evaluation value is calculated The computer functions as a unit. By executing this program, the computer can appropriately extract an area where the matching accuracy between the first point cloud information measured by the measurement unit and the second point cloud information recorded in the map information is low. Preferably, the program is stored in a storage medium.

以下、図面を参照して本発明の好適な実施例について説明する。   Hereinafter, preferred embodiments of the present invention will be described with reference to the drawings.

[運転支援システムの概要]
図1は、本実施例に係る運転支援システムの概略構成である。運転支援システムは、車両と共に移動する車載機1と、地図情報の配信を行うサーバ装置2と、を備える。なお、図1では、サーバ装置2と通信を行う車載機1及び車両が1組のみ表示されているが、実際には、異なる位置に複数の車載機1及び車両の組が存在する。
[Overview of driving support system]
FIG. 1 is a schematic configuration of the driving support system according to the present embodiment. The driving support system includes an in-vehicle device 1 that moves with a vehicle, and a server device 2 that distributes map information. In FIG. 1, only one set of the in-vehicle device 1 and the vehicle that communicates with the server device 2 is displayed. However, actually, a plurality of sets of the in-vehicle device 1 and the vehicle exist at different positions.

車載機1は、ライダ(Lidar:Light Detection and Ranging、または、Laser Illuminated Detection And Ranging)などの外界センサ、ジャイロセンサや車速センサなどの内界センサと電気的に接続し、これらの出力に基づき、車載機1が搭載される車両の位置(「自車位置」とも呼ぶ。)の推定を行う。そして、車載機1は、自車位置の推定結果に基づき、設定された目的地への経路に沿って走行するように、車両の自動運転制御などを行う。車載機1は、ボクセルデータを含む地図データベース(DB:DataBase)10を記憶する。ボクセルデータは、3次元空間を複数の領域に分割した場合の各領域(「ボクセル」とも呼ぶ。)ごとに静止構造物の位置情報等を記録したデータである。ボクセルデータは、各ボクセル内の静止構造物の計測された点群データを正規分布により表したデータを含み、後述するように、NDT(Normal Distributions Transform)を用いたスキャンマッチングに用いられる。   The in-vehicle device 1 is electrically connected to an external sensor such as a lidar (Light Detection and Ranging, or Laser Illuminated Detection And Ranging), an internal sensor such as a gyro sensor or a vehicle speed sensor, and based on these outputs, The position of the vehicle on which the in-vehicle device 1 is mounted (also referred to as “own vehicle position”) is estimated. Then, the on-vehicle device 1 performs automatic driving control of the vehicle based on the estimation result of the own vehicle position so as to travel along the set route to the destination. The in-vehicle device 1 stores a map database (DB: DataBase) 10 including voxel data. The voxel data is data in which position information and the like of a stationary structure are recorded for each area (also referred to as “voxel”) when the three-dimensional space is divided into a plurality of areas. The voxel data includes data obtained by expressing a measured point group data of a stationary structure in each voxel by a normal distribution, and is used for scan matching using NDT (Normal Distributions Transform) as described later.

車載機1は、ライダが出力する点群データと、当該点群データが属するボクセルに対応するボクセルデータとに基づき、NDTに基づくスキャンマッチングを行う。そして、車載機1は、マッチングの精度が低いボクセルを検出した場合に、当該ボクセルに関する情報(「マッチング低下情報D1」とも呼ぶ。)を、サーバ装置2へ送信する。また、車載機1は、サーバ装置2から特定のボクセルを指定した情報(「要求信号D2」とも呼ぶ。)を受信した場合に、指定されたボクセル内におけるライダ等による計測データ(「計測データD3」とも呼ぶ。)を、サーバ装置2へ送信する。車載機1は、本発明における「情報処理装置」の一例である。また、マッチング低下情報D1は、本発明における「領域情報」の一例である。   The in-vehicle device 1 performs scan matching based on the NDT based on the point cloud data output by the rider and the voxel data corresponding to the voxel to which the point cloud data belongs. Then, when detecting a voxel with low matching accuracy, the on-vehicle device 1 transmits information about the voxel (also referred to as “matching decrease information D1”) to the server device 2. Further, when the on-vehicle device 1 receives information (also referred to as a “request signal D2”) specifying a specific voxel from the server device 2, measurement data (“measurement data D3”) by a rider or the like within the specified voxel is received. ) Is transmitted to the server device 2. The on-vehicle device 1 is an example of the “information processing device” in the present invention. Further, the matching reduction information D1 is an example of “region information” in the present invention.

サーバ装置2は、複数の車両に対応する車載機1とデータ通信を行う。サーバ装置2は、複数の車両に対応する車載機1に配信するための配信地図DB20を記憶し、配信地図DB20には各ボクセルに対応するボクセルデータが含まれている。サーバ装置2は、車載機1から受信するマッチング低下情報D1を蓄積し、蓄積したマッチング低下情報D1に基づき特定のボクセルに対するボクセルデータの更新の要否を判定する。そして、サーバ装置2は、特定のボクセルに対するボクセルデータの更新が必要と判断した場合に、当該ボクセルを指定した要求信号D2を各車載機1へ送信する。そして、サーバ装置2は、要求信号D2の応答として車載機1から受信する計測データD3に基づき、対象のボクセルデータの更新処理などを行う。   The server device 2 performs data communication with the vehicle-mounted device 1 corresponding to a plurality of vehicles. The server device 2 stores a distribution map DB 20 for distribution to the vehicle-mounted devices 1 corresponding to a plurality of vehicles, and the distribution map DB 20 includes voxel data corresponding to each voxel. The server device 2 accumulates the matching drop information D1 received from the on-vehicle device 1, and determines whether or not it is necessary to update voxel data for a specific voxel based on the stored matching drop information D1. Then, when the server device 2 determines that the voxel data for a specific voxel needs to be updated, the server device 2 transmits a request signal D2 specifying the voxel to each vehicle-mounted device 1. Then, the server device 2 performs a process of updating the target voxel data based on the measurement data D3 received from the vehicle-mounted device 1 as a response to the request signal D2.

[車載機の構成]
図2(A)は、車載機1の機能的構成を表すブロック図を示す。図2(A)に示すように、車載機1は、主に、通信部11と、記憶部12と、センサ部13と、入力部14と、制御部15と、出力部16とを有する。通信部11、記憶部12、センサ部13、入力部14、制御部15及び出力部16は、バスラインを介して相互に接続されている。
[Configuration of onboard equipment]
FIG. 2A is a block diagram illustrating a functional configuration of the vehicle-mounted device 1. As shown in FIG. 2A, the on-vehicle device 1 mainly includes a communication unit 11, a storage unit 12, a sensor unit 13, an input unit 14, a control unit 15, and an output unit 16. The communication unit 11, the storage unit 12, the sensor unit 13, the input unit 14, the control unit 15, and the output unit 16 are interconnected via a bus line.

通信部11は、制御部15の制御に基づき、サーバ装置2から配信される地図情報を受信したり、制御部15が生成したマッチング低下情報D1をサーバ装置2へ送信したりする。また、通信部11は、要求信号D2を受信した場合に、制御部15の制御に基づき、計測データD3をサーバ装置2へ送信する。また、通信部11は、車両を制御するための信号を車両に送信したり、車両の状態に関する信号を車両から受信したりする。   The communication unit 11 receives the map information distributed from the server device 2 and transmits the matching reduction information D1 generated by the control unit 15 to the server device 2 based on the control of the control unit 15. In addition, when receiving the request signal D2, the communication unit 11 transmits the measurement data D3 to the server device 2 based on the control of the control unit 15. In addition, the communication unit 11 transmits a signal for controlling the vehicle to the vehicle, and receives a signal regarding the state of the vehicle from the vehicle.

記憶部12は、制御部15が実行するプログラムや、制御部15が所定の処理を実行する為に必要な情報を記憶する。本実施例では、記憶部12は、ボクセルデータを含む地図DB10を記憶する。   The storage unit 12 stores a program executed by the control unit 15 and information necessary for the control unit 15 to execute a predetermined process. In the present embodiment, the storage unit 12 stores a map DB 10 including voxel data.

センサ部13は、ライダ30と、カメラ31と、GPS受信機32と、ジャイロセンサ33と、速度センサ34とを含む。ライダ30は、水平方向および垂直方向の所定の角度範囲に対してパルスレーザを出射することで、外界に存在する物体までの距離を離散的に測定し、当該物体の位置を示す3次元の点群データを生成する。この場合、ライダ30は、照射方向を変えながらレーザ光を照射する照射部と、照射したレーザ光の反射光(散乱光)を受光する受光部と、受光部が出力する受光信号に基づくスキャンデータを出力する出力部とを有する。スキャンデータは、受光部が受光したレーザ光に対応する照射方向と、上述の受光信号に基づき特定される当該レーザ光の応答遅延時間とに基づき生成される。ライダ30は、本発明における「計測部」の一例であり、ライダ30が出力する点群データは、本発明における「第1点群情報」の一例である。   The sensor unit 13 includes a rider 30, a camera 31, a GPS receiver 32, a gyro sensor 33, and a speed sensor 34. The lidar 30 emits a pulse laser in a predetermined angle range in the horizontal direction and the vertical direction, thereby discretely measuring a distance to an object existing in the outside world, and a three-dimensional point indicating the position of the object. Generate group data. In this case, the rider 30 includes an irradiation unit that irradiates laser light while changing the irradiation direction, a light receiving unit that receives reflected light (scattered light) of the irradiated laser light, and scan data based on a light reception signal output by the light receiving unit. And an output unit that outputs The scan data is generated based on the irradiation direction corresponding to the laser light received by the light receiving unit and the response delay time of the laser light specified based on the above-described light reception signal. The rider 30 is an example of the “measurement unit” in the present invention, and the point cloud data output by the rider 30 is an example of the “first point cloud information” in the present invention.

入力部14は、ユーザが操作するためのボタン、タッチパネル、リモートコントローラ、音声入力装置等であり、経路探索のための目的地を指定する入力、自動運転のオン及びオフを指定する入力などを受け付け、生成した入力信号を制御部15へ供給する。出力部16は、例えば、制御部15の制御に基づき出力を行うディスプレイやスピーカ等である。   The input unit 14 is a button for a user to operate, a touch panel, a remote controller, a voice input device, and the like, and receives an input for designating a destination for a route search, an input for designating ON and OFF of automatic driving, and the like. , And supplies the generated input signal to the control unit 15. The output unit 16 is, for example, a display, a speaker, or the like that performs output under the control of the control unit 15.

制御部15は、プログラムを実行するCPUなどを含み、車載機1の全体を制御する。例えば、制御部15は、ライダ30から出力される点群データと、当該点群データが属するボクセルに対応するボクセルデータとに基づき、NDTに基づくスキャンマッチングを行うことで、自車位置の推定を行う。また、制御部15は、NDTに基づくスキャンマッチングにより得られるボクセルごとの評価値に基づき、マッチング精度が低いと推定されるボクセルを検出する。そして、制御部15は、検出したボクセルに対応するマッチング低下情報D1を生成し、通信部11によりマッチング低下情報D1をサーバ装置2へ送信する。また、制御部15は、サーバ装置2から受信した要求信号D2が指定するボクセルがライダ30の計測範囲内に属すると判断した場合、ライダ30が出力する点群データから当該ボクセルに属する点群データを抽出し、計測データD3としてサーバ装置2へ送信する。制御部15は、本発明における「第1取得部」、「第2取得部」、「算出部」、「抽出部」、「位置推定部」及びプログラムを実行する「コンピュータ」の一例である。   The control unit 15 includes a CPU that executes a program, and controls the entire vehicle-mounted device 1. For example, the control unit 15 performs the scan matching based on the NDT based on the point cloud data output from the rider 30 and the voxel data corresponding to the voxel to which the point cloud data belongs, thereby estimating the position of the own vehicle. Do. Further, the control unit 15 detects a voxel estimated to have low matching accuracy based on the evaluation value for each voxel obtained by scan matching based on the NDT. Then, the control unit 15 generates matching decrease information D1 corresponding to the detected voxel, and transmits the matching decrease information D1 to the server device 2 by the communication unit 11. When the control unit 15 determines that the voxel specified by the request signal D2 received from the server device 2 belongs to the measurement range of the rider 30, the control unit 15 converts the point cloud data output from the rider 30 into the point cloud data belonging to the voxel. Is extracted and transmitted to the server device 2 as the measurement data D3. The control unit 15 is an example of a “first acquisition unit”, a “second acquisition unit”, a “calculation unit”, an “extraction unit”, a “position estimation unit”, and a “computer” that executes a program in the present invention.

[サーバ装置の構成]
図2(B)は、サーバ装置2の概略構成を示す。図2(B)に示すように、サーバ装置2は、通信部21と、記憶部22と、制御部25とを有する。通信部21、記憶部22、及び制御部25は、バスラインを介して相互に接続されている。
[Configuration of server device]
FIG. 2B shows a schematic configuration of the server device 2. As shown in FIG. 2B, the server device 2 includes a communication unit 21, a storage unit 22, and a control unit 25. The communication unit 21, the storage unit 22, and the control unit 25 are mutually connected via a bus line.

通信部21は、制御部25の制御に基づき、車載機1と各種データの通信を行う。記憶部22は、サーバ装置2の動作を制御するためのプログラムを保存したり、サーバ装置2の動作に必要な情報を保持したりする。また、記憶部22は、配信地図DB20を記憶し、複数の車載機1から送信されるマッチング低下情報D1及び計測データD3についても記憶する。   The communication unit 21 communicates various data with the vehicle-mounted device 1 based on the control of the control unit 25. The storage unit 22 stores a program for controlling the operation of the server device 2 and holds information necessary for the operation of the server device 2. Further, the storage unit 22 stores the distribution map DB 20, and also stores the matching reduction information D1 and the measurement data D3 transmitted from the plurality of in-vehicle devices 1.

制御部25は、図示しないCPU、ROM及びRAMなどを備え、サーバ装置2内の各構成要素に対して種々の制御を行う。本実施例では、制御部25は、車載機1から受信するマッチング低下情報D1を記憶部22に蓄積し、蓄積したマッチング低下情報D1に基づき特定のボクセルに対するボクセルデータの更新の要否を判定する。そして、制御部25は、特定のボクセルに対するボクセルデータの更新が必要と判断した場合に、当該ボクセルを指定した要求信号D2を通信部21により各車載機1へ送信する。そして、制御部25は、要求信号D2に基づき車載機1から受信する計測データD3に基づき、配信地図DB20に含まれるボクセルデータの更新処理などを行う。制御部25は、本発明における「受信部」、「送信部」及び「判定部」の一例である。   The control unit 25 includes a CPU, a ROM, a RAM, and the like (not shown), and performs various controls on each component in the server device 2. In the present embodiment, the control unit 25 accumulates the matching reduction information D1 received from the on-vehicle device 1 in the storage unit 22, and determines whether the voxel data needs to be updated for a specific voxel based on the accumulated matching reduction information D1. . Then, when the control unit 25 determines that the voxel data for a specific voxel needs to be updated, the control unit 25 transmits a request signal D2 specifying the voxel to each on-vehicle device 1 through the communication unit 21. Then, the control unit 25 performs processing for updating voxel data included in the distribution map DB 20 based on the measurement data D3 received from the on-vehicle device 1 based on the request signal D2. The control unit 25 is an example of the “receiving unit”, the “transmitting unit”, and the “determining unit” in the present invention.

[NDTに基づくスキャンマッチング]
次に、本実施例におけるNDTに基づくスキャンマッチングについて説明する。
[Scan matching based on NDT]
Next, scan matching based on NDT in the present embodiment will be described.

(1)ボクセルデータのデータ構造
まず、NDTに基づくスキャンマッチングに用いるボクセルデータについて説明する。図3は、ボクセルデータの概略的なデータ構造の一例を示す。
(1) Data structure of voxel data First, voxel data used for scan matching based on NDT will be described. FIG. 3 shows an example of a schematic data structure of voxel data.

ボクセルデータは、ボクセル内の点群を正規分布で表現する場合のパラメータの情報を含み、本実施例では、図3に示すように、ボクセルIDと、ボクセル座標と、平均ベクトルと、共分散行列と、重み付け値と、点群数情報とを含む。ここで、「ボクセル座標」は、各ボクセルの中心位置などの基準となる位置の絶対的な3次元座標を示す。なお、各ボクセルは、空間を格子状に分割した立方体であり、予め形状及び大きさが定められているため、ボクセル座標により各ボクセルの空間を特定することが可能である。ボクセル座標は、ボクセルIDとして用いられてもよい。   The voxel data includes parameter information when a point group in the voxel is represented by a normal distribution. In the present embodiment, as shown in FIG. 3, a voxel ID, voxel coordinates, an average vector, a covariance matrix , Weight values, and point group number information. Here, the “voxel coordinates” indicate absolute three-dimensional coordinates of a reference position such as the center position of each voxel. Each voxel is a cube obtained by dividing the space into a lattice and has a predetermined shape and size, so that the space of each voxel can be specified by voxel coordinates. The voxel coordinates may be used as a voxel ID.

「平均ベクトル」及び「共分散行列」は、対象のボクセル内での点群を正規分布で表現する場合のパラメータに相当する平均ベクトル及び共分散行列を示し、任意のボクセル「k」内の任意の点「i」の座標を   “Average vector” and “covariance matrix” indicate an average vector and a covariance matrix corresponding to parameters when a point group in a target voxel is represented by a normal distribution, and an arbitrary vector in an arbitrary voxel “k”. Of the point "i"

Figure 2018180338

と定義し、ボクセルk内での点群数を「N」とすると、ボクセルkでの平均ベクトル「μ」及び共分散行列「V」は、それぞれ以下の式(1)及び式(2)により表される。
Figure 2018180338

Assuming that the number of point groups in voxel k is “N k ”, the mean vector “μ k ” and covariance matrix “V k ” in voxel k are represented by the following equations (1) and ( 2).

Figure 2018180338
Figure 2018180338

Figure 2018180338

なお、ボクセルデータに含まれる平均ベクトル及び共分散行列は、本発明における「第2点群情報」の一例である。
Figure 2018180338

Note that the average vector and the covariance matrix included in the voxel data are an example of “second point group information” in the present invention.

「重み付け値」は、対象のボクセルのボクセルデータ(特に平均ベクトル及び共分散行列)の信頼度に応じた値に設定され、スキャンマッチングにおいて設定される対象のボクセルに対する重み付けの値を表す。「点群数情報」は、対応する平均ベクトル及び共分散行列の算出に用いた点群の数を示す情報である。点群数情報は、具体的な点群の数を示す情報であってもよく、点群数のレベル(例えば、大、中、小など)を示す情報であってもよい。   The “weighting value” is set to a value corresponding to the reliability of voxel data (particularly, an average vector and a covariance matrix) of the target voxel, and represents a weight value for the target voxel set in scan matching. "Point group number information" is information indicating the number of point groups used for calculating the corresponding average vector and covariance matrix. The point group number information may be information indicating a specific number of point groups, or information indicating a level (for example, large, medium, small, etc.) of the point group number.

(2)スキャンマッチングの概要
次に、ボクセルデータを用いたNDTによるスキャンマッチングについて説明する。本実施例では、後述するように、車載機1は、NDTスキャンマッチングにより得られる評価関数の値(評価値)を、ボクセル内で計測された点群数により正規化すると共に、ボクセルデータに含まれる重み付け値を用いて重み付けして算出する。これにより、車載機1は、評価値に基づきスキャンマッチングの精度が相対的に低いボクセルを的確に特定すると共に、NDTスキャンマッチングに基づく位置推定精度を好適に向上させる。
(2) Outline of Scan Matching Next, scan matching by NDT using voxel data will be described. In the present embodiment, as will be described later, the vehicle-mounted device 1 normalizes the value (evaluation value) of the evaluation function obtained by the NDT scan matching by the number of point groups measured in the voxel, and includes the value in the voxel data. The weight is calculated using the weight value to be calculated. Accordingly, the on-vehicle device 1 accurately specifies voxels having relatively low scan matching accuracy based on the evaluation value, and preferably improves the position estimation accuracy based on the NDT scan matching.

車両を想定したNDTによるスキャンマッチングは、道路平面(ここではxy座標とする)内の移動量及び車両の向きを要素とした以下の推定パラメータ「P」を推定することとなる。   The scan matching by the NDT assuming a vehicle is to estimate the following estimation parameter “P” using the movement amount in the road plane (here, xy coordinates) and the direction of the vehicle as elements.

Figure 2018180338

「t」は、x方向の移動量を示し、「t」は、y方向の移動量を示し、「Ψ」は、xy平面内での回転角(即ちヨー角)を示す。なお、垂直方向移動量、ピッチ角、ロール角は、道路勾配や振動によって生じるものの、無視できる程度に小さい。
Figure 2018180338

“T x ” indicates the amount of movement in the x direction, “t y ” indicates the amount of movement in the y direction, and “を” indicates the rotation angle (ie, yaw angle) in the xy plane. Note that the vertical movement amount, pitch angle, and roll angle are negligibly small, although they are caused by road gradients and vibrations.

上述の推定パラメータPを用い、ライダ30により得られた点群データの任意の点の座標[x(i)、y(i)、z(i)]を座標変換すると、変換後の座標「x′(i)」は、以下の式(3)により表される。When the coordinates [x k (i), y k (i), z k (i)] T of an arbitrary point in the point cloud data obtained by the rider 30 are coordinate-transformed using the above-described estimation parameter P, coordinates "x 'k (i)" is expressed by the following equation (3).

Figure 2018180338
Figure 2018180338

そして、本実施例では、車載機1は、座標変換した点群と、ボクセルデータに含まれる平均ベクトルμと共分散行列Vとを用い、以下の式(4)により示されるボクセルkの評価関数「E」及び式(5)により示されるマッチングの対象となる全てのボクセルを対象とした総合的な評価関数「E」(「総合評価関数」とも呼ぶ。)を算出する。Then, in the present embodiment, the vehicle-mounted device 1 uses the coordinate-transformed point group, the average vector μ k and the covariance matrix V k included in the voxel data to calculate the voxel k represented by the following equation (4). The evaluation function “E k ” and a comprehensive evaluation function “E” (also referred to as “overall evaluation function”) for all the voxels to be matched represented by Expression (5) are calculated.

Figure 2018180338
Figure 2018180338

Figure 2018180338

「M」は、マッチングの対象となるボクセルの数を示し、「w」は、ボクセルkに対する重み付け値を示す。なお、ライダ30により得られる点群データの座標は、自車位置に対する相対座標であり、ボクセルデータの平均ベクトルは絶対座標であることから、式(4)を算出する際には、例えば、ライダ30により得られる点群データの座標を、GPS受信機32の出力等から予測した自車位置に基づき座標変換する。
Figure 2018180338

“M” indicates the number of voxels to be matched, and “w k ” indicates a weight value for voxel k. Note that the coordinates of the point cloud data obtained by the rider 30 are relative coordinates with respect to the own vehicle position, and the average vector of the voxel data is absolute coordinates. The coordinates of the point cloud data obtained by 30 are converted based on the vehicle position predicted from the output of the GPS receiver 32 and the like.

一方、従来のNDTマッチングで用いられるボクセルkの評価関数Eは、以下の式(6)により示される。On the other hand, the evaluation function E k of the voxel k used in the conventional NDT matching is represented by the following equation (6).

Figure 2018180338
Figure 2018180338

式(4)及び式(6)を比較して明らかなように、本実施例では、車載機1は、点群数Nにより評価関数Eを正規化している。これにより、車載機1は、後述するように、評価関数Eの値に基づき、マッチングの度合いが相対的に低いボクセルを的確に特定することができる。また、車載機1は、各ボクセルに対し、それぞれのボクセルデータ(平均ベクトル、共分散行列)に対する信頼度に応じた重み付け値を乗じている。これにより、車載機1は、信頼度が低いボクセルの評価関数Eの重み付けを相対的に低くし、NDTマッチングによる位置推定精度を好適に向上させる。As is clear from the comparison between Expressions (4) and (6), in the present embodiment, the in-vehicle device 1 normalizes the evaluation function E k using the number N k of point groups. Thus, the vehicle-mounted device 1, as described later, evaluated based on the value of the function E k, it is the degree of matching to accurately identify the relatively low voxel. The in-vehicle device 1 multiplies each voxel by a weight value corresponding to the reliability of each voxel data (mean vector, covariance matrix). Thus, the vehicle-mounted device 1, the weighting of the evaluation function E k of unreliable voxels relatively low, thereby suitably improving the position estimation accuracy of NDT matching.

その後、車載機1は、ニュートン法などの任意の求根アルゴリズムにより総合評価関数Eが最大となるとなる推定パラメータPを算出する。そして、車載機1は、GPS受信機32の出力等から予測した自車位置に対し、推定パラメータPを適用することで、高精度な自車位置を推定する。   After that, the on-vehicle device 1 calculates an estimation parameter P by which the total evaluation function E is maximized by an arbitrary root finding algorithm such as Newton's method. Then, the in-vehicle device 1 estimates the own vehicle position with high accuracy by applying the estimation parameter P to the own vehicle position predicted from the output of the GPS receiver 32 or the like.

(3)スキャンマッチングの具体例
次に、NDTスキャンマッチングの具体例について説明する。以下では、説明便宜上、2次元平面の場合を例に説明する。
(3) Specific Example of Scan Matching Next, a specific example of NDT scan matching will be described. Hereinafter, a case of a two-dimensional plane will be described as an example for convenience of explanation.

図4(A)は、4つの隣接するボクセル「B1」〜「B4」において、地図作成用の計測整備車両で走行したときにライダ等により計測した点群を丸印により示し、これらの点群に基づき式(1)と式(2)から作成した2次元正規分布をグラデーションにより示した図である。図4(A)に示す正規分布の平均、分散は、ボクセルデータにおける平均ベクトル、共分散行列にそれぞれ相当する。   FIG. 4A shows circles indicating point groups measured by a rider or the like in four adjacent voxels “B1” to “B4” when the vehicle is driven by a measurement and maintenance vehicle for creating a map. FIG. 5 is a diagram showing a two-dimensional normal distribution created from Expressions (1) and (2) based on gradation based on gradation. The mean and variance of the normal distribution shown in FIG. 4A correspond to the mean vector and the covariance matrix in the voxel data, respectively.

図4(B)は、図4(A)において、車載機1が走行中にライダ30により取得した点群を星印により示した図である。星印により示されるライダ30の点群の位置は、GPS受信機32等の出力による推定位置に基づき各ボクセルB1〜B4との位置合わせが行われている。図4(B)の例では、計測整備車両が計測した点群(丸印)と、車載機1が取得した点群(星印)との間にずれが生じている。   FIG. 4B is a diagram in which the point cloud obtained by the rider 30 while the in-vehicle device 1 is traveling in FIG. 4A is indicated by an asterisk. The position of the point cloud of the rider 30 indicated by the star is aligned with each of the voxels B1 to B4 based on the estimated position based on the output of the GPS receiver 32 and the like. In the example of FIG. 4B, a deviation occurs between the point cloud (circled) measured by the measurement and maintenance vehicle and the point cloud (star) acquired by the on-vehicle device 1.

図4(C)は、NDTスキャンマッチングのマッチング結果に基づき車載機1が取得した点群(星印)を移動させた後の状態を示す図である。図4(C)では、図4(A)、(B)に示す正規分布の平均及び分散に基づき、式(4)に示す評価関数Eが最大となるパラメータPを算出し、算出したパラメータPを図4(B)に示す星印の点群に適用している。この場合、計測整備車両が計測した点群(丸印)と、車載機1が取得した点群(星印)との間のずれが好適に低減されている。   FIG. 4C is a diagram illustrating a state after the point cloud (star mark) acquired by the vehicle-mounted device 1 based on the matching result of the NDT scan matching is moved. In FIG. 4C, based on the mean and variance of the normal distribution shown in FIGS. 4A and 4B, a parameter P that maximizes the evaluation function E shown in equation (4) is calculated, and the calculated parameter P Is applied to the point cloud of the star shown in FIG. In this case, the deviation between the point cloud (circled) measured by the measurement and maintenance vehicle and the point cloud (star) acquired by the on-vehicle device 1 is suitably reduced.

ここで、ボクセルB1〜B4に対応する評価関数「E1」〜「E4」及び総合評価関数Eを、従来から用いられている一般式(6)により算出した場合、これらの値は以下のようになる。
E1=1.3290
E2=1.1365
E3=1.1100
E4=0.9686
E =4.5441
Here, when the evaluation functions “E1” to “E4” and the comprehensive evaluation function E corresponding to the voxels B1 to B4 are calculated by the general formula (6) conventionally used, these values are as follows. Become.
E1 = 1.290
E2 = 1.1365
E3 = 1.1100
E4 = 0.9686
E = 4.5441

この場合、ボクセル内の点群数が多いほど評価関数の値も大きくなるため、ボクセル間でのマッチングの度合いが比較しにくい。この例では、点群数の多いボクセルB1の評価関数E1が大きくなっている。   In this case, since the value of the evaluation function increases as the number of point groups in the voxel increases, it is difficult to compare the degree of matching between the voxels. In this example, the evaluation function E1 of the voxel B1 having a large number of point groups is large.

一方、ボクセルB1〜B4に対応する評価関数E1〜E4及び総合評価関数Eを本実施例に基づく式(4)により算出した場合、これらの値は以下のようになる。なお、ここでは、ボクセルB1〜B4に対する重み付け値は全て「1」とする。
E1=0.1208
E2=0.1136
E3=0.1233
E4=0.1211
E =0.4789
On the other hand, when the evaluation functions E1 to E4 and the comprehensive evaluation function E corresponding to the voxels B1 to B4 are calculated by the equation (4) based on the present embodiment, these values are as follows. Here, the weighting values for the voxels B1 to B4 are all “1”.
E1 = 0.1208
E2 = 0.1136
E3 = 0.1233
E4 = 0.1211
E = 0.4789

この場合、評価関数E1〜E4及び総合評価関数Eは、ボクセル内の点群数に影響されにくい値となるため、ボクセル間でのマッチングの度合いが比較しやすくなる。   In this case, since the evaluation functions E1 to E4 and the comprehensive evaluation function E are values that are hardly affected by the number of point groups in the voxel, the degree of matching between the voxels can be easily compared.

また、本実施例では、各ボクセルに重み付け値が設定されている。従って、信頼度の高いボクセルは重み付けを大きくすることで、そのボクセルのマッチング度合いを高めることが可能となっている。   In this embodiment, a weight value is set for each voxel. Therefore, by increasing the weight of voxels with high reliability, the degree of matching of the voxels can be increased.

図5(A)は、ボクセルB1〜B4に対する重み付け値を全て等しくした場合のマッチング結果を示す図(即ち図4(C)と同一の図)である。図5(B)は、ボクセルB1の重み付け値を他のボクセルの重み付け値の10倍とした場合のマッチング結果を示す図である。図5(C)は、ボクセルB3の重み付け値を他のボクセルの重み付け値の10倍とした場合のマッチング結果を示す図である。   FIG. 5A is a diagram illustrating a matching result when weighting values for all the voxels B1 to B4 are all equal (that is, the same diagram as FIG. 4C). FIG. 5B is a diagram illustrating a matching result when the weight value of the voxel B1 is set to be 10 times the weight value of the other voxels. FIG. 5C is a diagram illustrating a matching result when the weight value of the voxel B3 is set to be ten times the weight value of another voxel.

図5(B)の例では、ボクセルB1〜B4に対応する評価関数E1〜E4及び総合評価関数Eの各値は、以下のようになる。
E1=0.3720
E2=0.0350
E3=0.0379
E4=0.0373
E =0.4823
In the example of FIG. 5B, the values of the evaluation functions E1 to E4 and the comprehensive evaluation function E corresponding to the voxels B1 to B4 are as follows.
E1 = 0.3720
E2 = 0.0350
E3 = 0.0379
E4 = 0.0373
E = 0.4823

このように、図5(B)の例では、ボクセルB1に対応する評価関数E1の値が高くなるようにマッチングが行われ、ボクセルB1におけるマッチングの度合いが高められている。よって、ボクセルB1の丸印と星印のずれが少なくなっている。   As described above, in the example of FIG. 5B, matching is performed such that the value of the evaluation function E1 corresponding to the voxel B1 increases, and the degree of matching in the voxel B1 is increased. Therefore, the deviation between the circle mark and the star mark of the voxel B1 is reduced.

また、図5(C)の例では、ボクセルB1〜B4に対応する評価関数E1〜E4及び総合評価関数Eの各値は、以下のようになる。
E1=0.0368
E2=0.0341
E3=0.3822
E4=0.0365
E =0.4896
In the example of FIG. 5C, the values of the evaluation functions E1 to E4 and the comprehensive evaluation function E corresponding to the voxels B1 to B4 are as follows.
E1 = 0.0368
E2 = 0.0341
E3 = 0.3822
E4 = 0.0365
E = 0.4896

このように、図5(C)の例では、ボクセルB3に対応する評価関数E3の値が高くなるようにマッチングが行われ、ボクセルB3におけるマッチングの度合いが高められている。よって、ボクセルB3の丸印と星印のずれが少なくなっている。   As described above, in the example of FIG. 5C, matching is performed such that the value of the evaluation function E3 corresponding to the voxel B3 increases, and the degree of matching in the voxel B3 is increased. Therefore, the deviation between the circle mark and the star mark of the voxel B3 is reduced.

[地図更新処理]
次に、配信地図DB20の更新処理に関連する処理について説明する。
[Map update processing]
Next, processing related to the update processing of the distribution map DB 20 will be described.

(1)マッチング低下情報の送信処理
車載機1は、総合評価関数Eと評価関数Eに基づき、静的構造物の変化が生じた(即ち配信地図DB20の更新が必要な)可能性があるボクセルを特定し、当該ボクセルに関する情報を、マッチング低下情報D1としてサーバ装置2に送信する。
(1) Transmission processing vehicle device 1 of the matching decrease information is based on the evaluation function E k and synthetic evaluation function E, it is (need have That update delivery map DB 20) possibly a change occurs in the static structure The voxel is specified, and information about the voxel is transmitted to the server device 2 as matching reduction information D1.

一般に、総合評価関数E又は評価関数Eが低くなる場合(即ちマッチング度合いが低くなる場合)は、以下の3つの事象:
(a)ボクセル内に動的な物体が含まれている
(b)予測した自車位置の誤差が多く、正確なマッチングができていない
(c)ボクセル内の静的な物体が変化(生成、消滅も含む)した
のいずれかが生じていると推測される。ここで、本実施例では、評価関数Eは、点群数Nにより正規化されているため、各評価関数E及びその総和である総合評価関数Eは、点群数Nによる影響を受けない。よって、総合評価関数Eが所定値より大きい場合には、事象(b)が生じていないと判断することが可能である。
In general, when the overall evaluation function E or the evaluation function Ek decreases (that is, when the matching degree decreases), the following three events occur:
(A) Voxel contains a dynamic object
(B) There are many errors in the predicted own vehicle position, and accurate matching has not been performed.
(C) It is presumed that either of the static objects in the voxel has changed (including generation and disappearance). Here, in the present embodiment, since the evaluation function E k is normalized by the number of point groups N k , each evaluation function E k and the total evaluation function E which is the sum thereof are affected by the number of point groups N k Not receive. Therefore, when the comprehensive evaluation function E is larger than the predetermined value, it can be determined that the event (b) has not occurred.

一方、評価関数Eのうち、他の評価関数Eと比べて小さい評価関数Eが存在する場合、当該評価関数Eに対応するボクセルkには、事象(a)又は事象(c)が生じている疑いがある。よって、車載機1は、そのようなボクセルkを検知した場合には、当該ボクセルkに関するマッチング低下情報D1をサーバ装置2へ送信する。ここで、マッチング低下情報D1には、例えば、時刻情報、推定自車位置情報、総合評価関数E、評価関数E、ボクセルID、及び点群数Nkが含まれる。その後、サーバ装置2は、複数の車両の車載機1から受信した対象のボクセルkに関する複数のマッチング低下情報D1に基づき、統計的手法によりボクセルkに事象(a)又は事象(c)のいずれが生じているか判定する。On the other hand, among the evaluation function E k, if the smallest evaluation function E k as compared with other evaluation functions E k exists, the voxel k corresponding to the evaluation function E k, event (a) or event (c) Is suspected of having occurred. Therefore, when detecting such a voxel k, the in-vehicle device 1 transmits the matching reduction information D1 on the voxel k to the server device 2. Here, the matching reduction information D1 includes, for example, time information, estimated own vehicle position information, overall evaluation function E, evaluation function E k , voxel ID, and point group number Nk. Thereafter, based on the plurality of pieces of matching reduction information D1 on the target voxel k received from the in-vehicle devices 1 of the plurality of vehicles, the server device 2 assigns either the event (a) or the event (c) to the voxel k by a statistical method. Determine if it has occurred.

ここで、評価関数Eのうち、他の評価関数Eと比べて小さい評価関数Eを検出する方法の一例を示す。車載機1は、評価関数Eを後述する基準値「F」で割った値が所定値「A」より小さい場合、即ち、以下の式(7)の条件式
/F < A 式(7)
が成立する場合、当該評価関数Eが他の評価関数Eと比べて相対的に小さいと判断し、当該評価関数Eのボクセルに対するマッチング低下情報D1をサーバ装置2へ送信する。なお、式(7)は、以下の式(8)と等価な式である。
< A・F 式(8)
Here, the evaluation of the function E k, an example of a method for detecting a small evaluation function E k as compared with other evaluation functions E k. The vehicle-mounted device 1 determines that the value obtained by dividing the evaluation function E k by a reference value “F k ”, which will be described later, is smaller than a predetermined value “A”, that is, the conditional expression
E k / F k <A Equation (7)
There If satisfied, the evaluation function E k is determined to be relatively small compared to the other evaluation functions E k, and transmits a matching reduction information D1 for voxels of the evaluation function E k to the server apparatus 2. Expression (7) is an expression equivalent to the following expression (8).
E k <A · F k equation (8)

ここで、車載機1は、上述の判定式における基準値Fを、以下の式(9)に基づき算出する。Here, the vehicle-mounted device 1, the reference value F k in the above-mentioned judgment formula is calculated based on the following equation (9).

Figure 2018180338

式(9)に示すように、基準値Fは、対象となるボクセルkの重み付け値wに基づく重み付けがなされた総合評価関数Eに相当する。このようにすることで、車載機1は、他の評価関数Eと比べて相対的に小さい評価関数Eを好適に検出することができる。なお、式(8)の「A・F」は、本発明における「所定の閾値」の一例である。
Figure 2018180338

As shown in the equation (9), the reference value F k corresponds to the comprehensive evaluation function E weighted based on the weight value w k of the target voxel k. By doing so, the vehicle-mounted device 1 can be suitably detect a relatively small evaluation function E k as compared with other evaluation functions E k. Note that “A · F k ” in Expression (8) is an example of the “predetermined threshold” in the present invention.

また、車載機1は、他の評価関数Eと比べて小さい評価関数Eを検出した場合に加えて、またはこれに代えて、ボクセル内での点群数Nが少ないボクセルを検出した場合に、当該ボクセルに対するマッチング低下情報D1をサーバ装置2へ送信してもよい。本実施例では、評価関数Eは点群数Nにより正規化されているため、事象(a)又は事象(c)に起因して点群数Nが少ない場合であっても、評価関数Eの値が他の評価関数Eの値と比べて小さくならない場合がある。従って、車載機1は、点群数Nが所定の閾値より小さいボクセルを検出した場合に、事象(a)又は事象(c)のいずれかが生じている可能性が高いと判断し、当該ボクセルに対するマッチング低下情報D1をサーバ装置2へ送信する。In addition, in addition to or instead of detecting the evaluation function E k that is smaller than the other evaluation functions E k , the in-vehicle device 1 detects a voxel having a small number of point groups N k in the voxel. In this case, the matching reduction information D1 for the voxel may be transmitted to the server device 2. In this embodiment, evaluation for function E k is normalized by point group number N k, even if the event (a) or event number point group due to (c) N k is small, evaluation there is a case where the value of the function E k is not smaller than the value of the other evaluation functions E k. Therefore, when detecting the voxel in which the number of point clouds Nk is smaller than the predetermined threshold, the on-vehicle device 1 determines that there is a high possibility that either the event (a) or the event (c) has occurred, and The matching reduction information D1 for voxels is transmitted to the server device 2.

この場合、好適には、車載機1は、ボクセルデータの点群数情報を参照し、点群数情報に応じて上述の閾値を設定する。この場合、車載機1は、点群数情報が示す点群数が小さいほど、上述の閾値を小さく設定する。これにより、車載機1は、点群数Nkが本来取得すべき点群数よりも少ないか否かを上述の閾値により好適に判定することができる。なお、車載機1は、式(7)等に基づき他の評価関数Eと比べて小さい評価関数Eとなるボクセルkを検出した場合であって、かつ、当該ボクセルkでの点群数Nkが閾値より小さい場合に、当該ボクセルkに対するマッチング低下情報D1をサーバ装置2へ送信してもよい。In this case, preferably, the vehicle-mounted device 1 refers to the point group number information of the voxel data, and sets the above-described threshold according to the point group number information. In this case, the in-vehicle device 1 sets the above-described threshold smaller as the number of point groups indicated by the point group number information is smaller. Thus, the on-vehicle device 1 can suitably determine whether or not the number Nk of point groups is smaller than the number of point groups to be originally acquired, based on the above-described threshold. Incidentally, the vehicle-mounted device 1, even if it detects the voxel k as the smallest evaluation function E k as compared with other evaluation functions E k based on equation (7) or the like, and the number groups point in the voxel k When Nk is smaller than the threshold value, the matching reduction information D1 for the voxel k may be transmitted to the server device 2.

(2)重み付け変更処理
サーバ装置2は、複数の車両の車載機1から受信するマッチング低下情報D1をボクセルIDごとに蓄積し、ボクセルIDごとに上述した事象(a)又は事象(c)のいずれが生じているかの判定を統計的に行う。
(2) The weight change processing server device 2 accumulates the matching reduction information D1 received from the in-vehicle devices 1 of a plurality of vehicles for each voxel ID, and selects one of the event (a) or the event (c) described above for each voxel ID. Is determined statistically.

例えば、サーバ装置2は、ボクセルIDごとのマッチング低下情報D1の数が所定数以上蓄積されたボクセルが存在する場合、当該ボクセルは事象(c)が生じている可能性が高く、当該ボクセルに対応するボクセルデータの信頼性が低いと判断する。よって、サーバ装置2は、当該ボクセルに対応するボクセルデータに含まれる重み付け値を下げる。このとき、好適には、サーバ装置2は、マッチング低下情報D1の数が多いほど、重み付け値を低く設定するとよい。このようにすることで、サーバ装置2は、事象(c)が生じている可能性が高いボクセルの重み付けを低くし、サーバ装置2から配信された地図情報に基づき自車位置推定を行う車載機1での位置推定精度を好適に向上させる。   For example, when there is a voxel in which the number of pieces of matching reduction information D1 for each voxel ID is stored in a predetermined number or more, the server device 2 has a high possibility that the event (c) has occurred and the voxel corresponds to the voxel. It is determined that the reliability of the voxel data is low. Therefore, the server device 2 lowers the weight value included in the voxel data corresponding to the voxel. At this time, it is preferable that the server device 2 set the weighting value to be lower as the number of matching lowering information D1 is larger. By doing so, the server device 2 reduces the weight of the voxel in which the event (c) is highly likely to occur, and performs in-vehicle device estimation based on the map information distributed from the server device 2. 1 to improve the position estimation accuracy.

ここで、重み付け値を変更する具体例について、図6を参照して説明する。   Here, a specific example of changing the weight value will be described with reference to FIG.

図6(A)は、ボクセルB3の位置の静止構造物が変化した場合の車載機1が取得した点群(星印)を示した図である。なお、静止構造物が変化する前にボクセルデータを作成した時点の、計測整備車両が取得した点群(丸印)も示してある。図6(A)に示すように、ボクセルB3の位置の静止構造物が変化した場合には、ボクセル3内でライダ30により取得する点群の数が少なくなったり、計測整備車両が取得した点群と外れた点群がライダ30により取得されたりする。ボクセルB3内の位置に動的物体が入った場合も同様となる。   FIG. 6A is a diagram illustrating a point cloud (star) acquired by the vehicle-mounted device 1 when the stationary structure at the position of the voxel B3 changes. In addition, the point cloud (circle) acquired by the measurement and maintenance vehicle at the time when the voxel data is created before the stationary structure changes is also shown. As shown in FIG. 6A, when the stationary structure at the position of the voxel B3 changes, the number of point clouds acquired by the rider 30 in the voxel 3 decreases, or the point acquired by the measurement and maintenance vehicle is reduced. A point cloud deviating from the group may be acquired by the rider 30. The same applies when a dynamic object enters a position in the voxel B3.

図6(B)は、ボクセルB1〜B4に対する重み付け値を全て等しくした場合のマッチング結果を示す図である。ボクセルB3のずれの影響により、ボクセルB1,B2,B4の丸印と星印のずれも大きくなっている。したがって、マッチングがずれたものとなり,位置推定結果に誤差が生じていることとなる。この場合、ボクセルB1〜B4に対応する評価関数E1〜E4及び総合評価関数Eの各値は、以下のようになる。
E1=0.1188
E2=0.1150
E3=0.0568
E4=0.1120
E =0.4026
FIG. 6B is a diagram illustrating a matching result when the weighting values for the voxels B1 to B4 are all equal. Due to the influence of the shift of the voxel B3, the shift between the circle mark and the star mark of the voxels B1, B2, and B4 also increases. Therefore, the matching is shifted, and an error occurs in the position estimation result. In this case, the values of the evaluation functions E1 to E4 and the comprehensive evaluation function E corresponding to the voxels B1 to B4 are as follows.
E1 = 0.1188
E2 = 0.150
E3 = 0.0568
E4 = 0.1120
E = 0.426

この場合、他と比べてボクセルB3の評価関数E3の値が小さくなっている。式(9)を計算すると、
F1=F2=F3=F4≒0.1007
となるため、式(7)の左辺は以下のようになる。
E1/F1≒1.1803
E2/F2≒1.1426
E3/F3≒0.5643
E4/F4≒1.1128
したがって、例えば所定値Aが0.7の場合,E3/F3は式(7)の条件式を満たすことになる。よって、この場合、車載機1は、評価関数E3が他の評価関数と比べて相対的に小さいと判断し、ボクセルB3に関するマッチング低下情報D1をサーバ装置2へ送信する。
In this case, the value of the evaluation function E3 of the voxel B3 is smaller than the others. When calculating equation (9),
F1 = F2 = F3 = F4 ≒ 0.1007
Therefore, the left side of Expression (7) is as follows.
E1 / F1 ≒ 1.1803
E2 / F2 ≒ 1.1426
E3 / F3 ≒ 0.5643
E4 / F4 ≒ 1.1128
Therefore, for example, when the predetermined value A is 0.7, E3 / F3 satisfies the conditional expression of Expression (7). Therefore, in this case, the vehicle-mounted device 1 determines that the evaluation function E3 is relatively smaller than the other evaluation functions, and transmits the matching reduction information D1 on the voxel B3 to the server device 2.

図6(C)は、ボクセルB3の重み付け値を変更後のマッチング結果を示す。図6(C)の例では、サーバ装置2は、複数の車両の車載機1から送信されたボクセルB3のマッチング低下情報D1に基づき、ボクセルB3の重み付け値を1/10に設定している。これにより、ボクセルB3のずれの影響が弱まり、ボクセルB1,B2,B4の丸印と星印のずれが少なくなる。この場合、ボクセルB1〜B4に対応する評価関数E1〜E4及び総合評価関数Eの各値は、以下のようになる。
E1=0.1559
E2=0.1474
E3=0.0039
E4=0.1557
E =0.4629
FIG. 6C shows a matching result after changing the weight value of the voxel B3. In the example of FIG. 6C, the server device 2 sets the weight value of the voxel B3 to 1/10 based on the matching reduction information D1 of the voxel B3 transmitted from the in-vehicle devices 1 of a plurality of vehicles. As a result, the influence of the displacement of the voxel B3 is reduced, and the displacement between the circle and the star of the voxels B1, B2, and B4 is reduced. In this case, the values of the evaluation functions E1 to E4 and the comprehensive evaluation function E corresponding to the voxels B1 to B4 are as follows.
E1 = 0.1559
E2 = 0.1474
E3 = 0.039
E4 = 0.1557
E = 0.4629

このように、ボクセルB3に対する重み付け値を1/10に設定した場合、ボクセルB3以外のボクセルに対するマッチング度合いを高めるようにマッチングが行われる。その結果、信頼度が低いボクセルB3の影響度を低くした位置推定が可能となる。なお,この場合,式(9)を計算すると、
F1=F2=F4≒0.1493、F3≒0.0149
となるため、式(7)の左辺は以下のようになる。
E1/F1≒1.0442
E2/F2≒0.9873
E3/F3≒0.2617
E4/F4≒1.0429
したがって、式(7)の条件を満たすため、この場合も、ボクセルB3に関するマッチング低下情報D1をサーバ装置2へ送信することになる。
このように,評価関数Eを基準値Fで正規化するため、重み付け値に影響されない条件判断が可能となる。
As described above, when the weight value for the voxel B3 is set to 1/10, matching is performed so as to increase the degree of matching for voxels other than the voxel B3. As a result, it is possible to perform position estimation with a low degree of influence of the voxel B3 having low reliability. In this case, when equation (9) is calculated,
F1 = F2 = F4 ≒ 0.1493, F3 ≒ 0.0149
Therefore, the left side of Expression (7) is as follows.
E1 / F1 ≒ 1.0442
E2 / F2 ≒ 0.9873
E3 / F3 ≒ 0.2617
E4 / F4 ≒ 1.0429
Therefore, in order to satisfy the condition of Expression (7), the matching reduction information D1 on the voxel B3 is transmitted to the server device 2 also in this case.
As described above, since the evaluation function E k is normalized by the reference value F k , it is possible to make a condition determination that is not affected by the weight value.

(3)ボクセルデータ修正処理
サーバ装置2は、上述の重み付け変更処理により重み付け値を下げたボクセルに対し、当該ボクセルに関する平均ベクトル及び共分散行列などのボクセルデータの修正の要否を判定する。
(3) Voxel data correction processing The server device 2 determines whether it is necessary to correct voxel data such as an average vector and a covariance matrix of the voxel whose weight has been reduced by the weight change processing described above.

第1の例では、サーバ装置2は、対象となるボクセルを撮影した画像に基づき、当該ボクセルに関する平均ベクトル及び共分散行列などのボクセルデータの修正の要否を判定する。   In the first example, the server device 2 determines whether or not it is necessary to correct voxel data such as an average vector and a covariance matrix related to the voxel based on an image obtained by capturing the voxel of interest.

この場合、サーバ装置2は、例えば走行中の車両から撮影された画像を位置情報及び時刻情報等と共に車載機1から定期的に受信して記憶部22に蓄積しておき、ボクセルデータの修正の要否判定を行う場合に、対象となるボクセルが撮影された画像を記憶部22から抽出する。そして、サーバ装置2は、抽出した画像に基づき、ボクセルデータの修正の要否判定を行う。例えば、サーバ装置2は、前回ボクセルデータを生成したときに撮影された画像と、最新の画像とを比較し、画像中に表示されている地物の形状、位置等の変化が生じていると判断した場合に、ボクセルデータの修正が必要と判断する。   In this case, the server device 2 periodically receives, for example, an image captured from a running vehicle from the vehicle-mounted device 1 together with the position information and the time information and accumulates the image in the storage unit 22, and performs correction of the voxel data. When performing the necessity determination, an image in which the target voxel is captured is extracted from the storage unit 22. Then, the server device 2 determines whether or not the voxel data needs to be corrected based on the extracted image. For example, the server device 2 compares the image captured when the voxel data was generated last time with the latest image, and determines that a change has occurred in the shape, position, or the like of the feature displayed in the image. When it is determined, it is determined that the voxel data needs to be corrected.

第2の例では、サーバ装置2は、対象となるボクセルのマッチング低下情報D1に含まれる評価関数Eの類似の有無を判定する。そして、サーバ装置2は、各マッチング低下情報D1に含まれる評価関数Eが類似していると判断した場合、対象のボクセルに対するボクセルデータの修正が必要であると判断する。この場合、サーバ装置2は、上述の類似の有無を、例えば、マッチング低下情報D1に含まれる評価関数Eの分散又は分散に準ずる指標値を算出し、その算出値と所定の閾値とを比較することにより判定してもよい。In a second example, the server apparatus 2 judges whether or not the similarity evaluation function E k included in the voxel matching reduction information D1 of interest. Then, the server apparatus 2 determines that the evaluation function E k included in each matching decrease information D1 if it is determined to be similar, it is necessary to modify the voxel data for the voxel of interest. In this case, the server device 2, compares the presence or absence of similarity mentioned above, for example, calculates an index value equivalent to variance or dispersion evaluation function E k included in the matching decrease information D1, and the calculated value with a predetermined threshold value May be determined.

そして、サーバ装置2は、ボクセルデータの修正が必要と判断したボクセルが存在する場合、当該ボクセルを指定した要求信号D2を各車載機1へ送信する。そして、サーバ装置2は、要求信号D2の応答として受信した計測データD3に基づき、ボクセルデータの修正を行う。この処理の具体例については、[処理フロー]のセクションで具体的に説明する。   Then, when there is a voxel for which it is determined that the voxel data needs to be corrected, the server device 2 transmits a request signal D2 specifying the voxel to each vehicle-mounted device 1. Then, the server device 2 corrects the voxel data based on the measurement data D3 received as a response to the request signal D2. A specific example of this processing will be specifically described in the section of [Processing Flow].

[処理フロー]
(1)車載機の処理
図7は、本実施例において車載機1が実行する処理手順を示すフローチャートの一例である。車載機1は、図7のフローチャートの処理を繰り返し実行する。
[Processing flow]
(1) In- vehicle device processing FIG. 7 is an example of a flowchart showing a processing procedure executed by the in-vehicle device 1 in the present embodiment. The on-vehicle device 1 repeatedly executes the processing of the flowchart in FIG.

まず、車載機1は、GPS受信機32等の出力に基づき、自車位置の初期値を設定する(ステップS101)。次に、車載機1は、速度センサ34から車体速度を取得すると共に、ジャイロセンサ33からヨー方向の角速度を取得する(ステップS102)。そして、車載機1は、ステップS102の取得結果に基づき、車両の移動距離と車両の方位変化を計算する(ステップS103)。   First, the in-vehicle device 1 sets an initial value of the own vehicle position based on the output of the GPS receiver 32 and the like (step S101). Next, the in-vehicle device 1 acquires the vehicle speed from the speed sensor 34 and the angular velocity in the yaw direction from the gyro sensor 33 (step S102). Then, the on-vehicle device 1 calculates the moving distance of the vehicle and the change in the bearing of the vehicle based on the acquisition result of Step S102 (Step S103).

その後、車載機1は、1時刻前の推定自車位置に、ステップS103で計算した移動距離と方位変化を加算し、予測位置を算出する(ステップS104)。そして、車載機1は、ステップS104で算出した予測位置に基づき、地図DB10を参照して、自車位置周辺に存在するボクセルのボクセルデータを取得する(ステップS105)。さらに、車載機1は、ステップS104で算出した予測位置に基づき、ライダ30から得られたスキャンデータをボクセルごとに分割する(ステップS106)。そして、車載機1は、評価関数を用いてNDTスキャンマッチングの計算を行う(ステップS107)。この場合、車載機1は、式(4)及び式(5)に基づき、評価関数E及び総合評価関数Eを算出し、総合評価関数Eが最大となる推定パラメータPを算出する。Thereafter, the on-vehicle device 1 calculates the predicted position by adding the moving distance and the azimuth change calculated in step S103 to the estimated own vehicle position one time ago (step S104). Then, the vehicle-mounted device 1 acquires voxel data of voxels existing around the own vehicle position with reference to the map DB 10 based on the predicted position calculated in step S104 (step S105). Further, the on-vehicle device 1 divides the scan data obtained from the rider 30 into voxels based on the predicted position calculated in step S104 (step S106). Then, the on-vehicle device 1 calculates the NDT scan matching using the evaluation function (Step S107). In this case, the in-vehicle device 1 calculates the evaluation function Ek and the total evaluation function E based on the equations (4) and (5), and calculates the estimation parameter P at which the total evaluation function E is maximized.

そして、車載機1は、総合評価関数Eが最大となる推定パラメータPを特定した場合(ステップS108;Yes)、各ボクセルの重み付け値wと総合評価関数Eとを用いて、式(9)に基づき、基準値Fを計算する(ステップS109)。そして、車載機1は、各ボクセルについて、基準値Fと評価関数Eとを比較し(ステップS110)、比較結果が所定値Aよりも小さいボクセルが存在するか否か判定する(ステップS111)。即ち、車載機1は、即ち式(7)を満たす評価関数Eが存在するか否か判定する。The vehicle unit 1, when the synthetic evaluation function E has identified the estimated parameter P becomes maximum (step S108; Yes), by using the synthetic evaluation function E and the weighting values w k of each voxel, formula (9) based on, to calculate the reference value F k (step S109). Then, the on-vehicle device 1 compares the reference value F k with the evaluation function E k for each voxel (Step S110), and determines whether there is a voxel whose comparison result is smaller than the predetermined value A (Step S111). ). That is, the vehicle-mounted unit 1, i.e. determines whether the evaluation function E k satisfying the equation (7) is present.

そして、車載機1は、比較結果が所定値Aよりも小さいボクセルが存在する場合(ステップS111;Yes)、時刻、推定位置、総合評価関数E、対象のボクセルのボクセルID、評価関数E、及び点群数Nを含むマッチング低下情報D1を、サーバ装置2へ送信する(ステップS112)。なお、車載機1は、ステップS111での判定に代えて、又はこれに加えて、「(1)マッチング低下情報の送信処理」のセクションでも説明したように、点群数Nの大小に基づきマッチング低下情報D1の送信の要否を判定してもよい。If there is a voxel whose comparison result is smaller than the predetermined value A (step S111; Yes), the in-vehicle device 1 determines the time, the estimated position, the comprehensive evaluation function E, the voxel ID of the target voxel, the evaluation function E k , And the matching reduction information D1 including the point cloud number Nk to the server device 2 (step S112). Instead of or in addition to the determination in step S111, the in-vehicle device 1 determines the number of point groups Nk based on the magnitude of the point cloud number Nk , as described in the section “(1) Transmission processing of matching reduction information ”. The necessity of transmission of the matching decrease information D1 may be determined.

一方、車載機1は、比較結果が所定値Aよりも小さいボクセルが存在しない場合(ステップS111;No)、ステップS102へ処理を戻す。なお、車載機1は、ステップS111の判定後、総合評価関数Eが最大となる推定パラメータPを、ステップS104の予測位置に適用することで、現時刻における推定自車位置を算出する。   On the other hand, when there is no voxel whose comparison result is smaller than the predetermined value A (Step S111; No), the on-vehicle device 1 returns the process to Step S102. After the determination in step S111, the in-vehicle device 1 calculates the estimated vehicle position at the current time by applying the estimation parameter P that maximizes the comprehensive evaluation function E to the predicted position in step S104.

次に、車載機1は、ステップS113において、サーバ装置2から自車位置周辺のボクセルを指定した要求信号D2を受信したか否か判定する(ステップS113)。そして、車載機1は、サーバ装置2から自車位置周辺のボクセルを指定した要求信号D2を受信した場合(ステップS113;Yes)、要求信号D2が指定するボクセルに該当するライダ30のスキャンデータ(点群データ)を、計測データD3としてサーバ装置2へ送信する(ステップS114)。このとき、車載機1は、スキャンデータに加えて、当該スキャンデータを取得した時刻の総合評価関数Eなどを計測データD3に含めるとよい。計測データD3に含められた総合評価関数Eは、後述するサーバ装置2の処理において用いられる。そして、車載機1は、ステップS114の実行後、又は自車位置周辺のボクセルを指定した要求信号D2を受信していないとステップS113で判断した場合、ステップS102へ処理を戻す。   Next, in step S113, the vehicle-mounted device 1 determines whether or not the request signal D2 designating a voxel around the own vehicle position has been received from the server device 2 (step S113). When the in-vehicle device 1 receives the request signal D2 specifying the voxel around the own vehicle position from the server device 2 (step S113; Yes), the scan data of the rider 30 corresponding to the voxel specified by the request signal D2 ( The point group data) is transmitted to the server device 2 as the measurement data D3 (step S114). At this time, the in-vehicle device 1 may include, in addition to the scan data, the comprehensive evaluation function E of the time at which the scan data was acquired and the like in the measurement data D3. The comprehensive evaluation function E included in the measurement data D3 is used in processing of the server device 2 described later. Then, after the execution of step S114, or when determining in step S113 that the request signal D2 designating a voxel around the own vehicle position has not been received, the in-vehicle device 1 returns the process to step S102.

(2)サーバ装置の処理
図8は、本実施例においてサーバ装置2が実行する処理手順を示すフローチャートの一例である。サーバ装置2は、図8のフローチャートの処理を繰り返し実行する。
(2) Processing of Server Device FIG. 8 is an example of a flowchart showing a processing procedure executed by the server device 2 in the present embodiment. The server device 2 repeatedly executes the processing of the flowchart in FIG.

まず、サーバ装置2は、車両に搭載された車載機1から、マッチング低下情報D1を受信する(ステップS201)。そして、サーバ装置2は、ボクセルIDごとにマッチング低下情報D1を記憶部22に記憶する。   First, the server device 2 receives the matching reduction information D1 from the vehicle-mounted device 1 mounted on the vehicle (step S201). Then, the server device 2 stores the matching reduction information D1 in the storage unit 22 for each voxel ID.

次に、サーバ装置2は、記憶部22を参照し、マッチング低下情報D1の数が所定値よりも大きいボクセルが存在するか否か判定する(ステップS202)。そして、サーバ装置2は、マッチング低下情報D1の数が所定値よりも大きいボクセルが存在する場合(ステップS202;Yes)、マッチング低下情報D1の数が多いほど、対応するボクセルの配信地図DB20に記憶された重み付け値wを小さく設定する(ステップS203)。なお、配信地図DB20に記憶される重み付け値wの初期値は、例えば、各ボクセルにおいて共通の初期値(例えば1)に設定される。Next, the server device 2 refers to the storage unit 22 and determines whether there is a voxel in which the number of pieces of matching reduction information D1 is larger than a predetermined value (Step S202). Then, when there is a voxel in which the number of pieces of matching deterioration information D1 is larger than a predetermined value (step S202; Yes), the server device 2 stores the voxel in the distribution map DB20 of the corresponding voxel as the number of pieces of matching deterioration information D1 increases. the weighting value w k which is smaller sets (step S203). The initial value of the weighting values w k stored in the delivery map DB20 is set to, for example, a common initial value in each voxel (e.g., 1).

次にサーバ装置2は、重み付け値wを小さくしたボクセルのボクセルデータを修正すべきか否か判定する(ステップS204)。この場合、「(3)ボクセルデータ修正処理」のセクションで説明したように、サーバ装置2は、対象のボクセルを撮影した画像に基づき上述の判定を行ってもよく、対象となるボクセルの複数のマッチング低下情報D1に含まれる評価関数Eの類似の有無に基づき上述の判定を行ってもよい。Next, the server device 2 determines whether or not the voxel data of the voxel whose weight value w k has been reduced should be corrected (step S204). In this case, as described in the section of “(3) Voxel data correction processing ”, the server device 2 may make the above-described determination based on an image obtained by capturing the target voxel. based on the presence or absence of similarity evaluation function E k included in the matching decrease information D1 may perform the determination described above.

そして、サーバ装置2は、ボクセルデータを修正すべきと判断した場合(ステップS204;Yes)、各車両の車載機1に対し、対象のボクセルのスキャンデータを要求する要求信号D2を送信する(ステップS205)。そして、サーバ装置2は、要求信号D2の応答として、各車両の車載機1から対象のボクセルのスキャンデータを含む計測データD3を受信し、記憶部22に記憶する(ステップS206)。計測データD3には、スキャンデータに加えて、当該スキャンデータを取得した時刻の総合評価関数Eなどが含まれている。一方、サーバ装置2は、ボクセルデータを修正する必要がないと判断した場合(ステップS204;No)、ステップS201へ処理を戻す。   Then, when determining that the voxel data should be corrected (Step S204; Yes), the server device 2 transmits a request signal D2 requesting scan data of the target voxel to the in-vehicle device 1 of each vehicle (Step S204). S205). Then, the server device 2 receives the measurement data D3 including the scan data of the target voxel from the vehicle-mounted device 1 of each vehicle as a response to the request signal D2, and stores the measurement data D3 in the storage unit 22 (Step S206). The measurement data D3 includes, in addition to the scan data, a comprehensive evaluation function E of the time at which the scan data was acquired, and the like. On the other hand, when the server device 2 determines that the voxel data does not need to be corrected (Step S204; No), the process returns to Step S201.

次に、サーバ装置2は、ステップS204においてボクセルデータを修正すべきと判断したボクセルについて、総合評価関数Eが高い計測データD3が蓄積されたか否か判定する(ステップS207)。具体的には、サーバ装置2は、総合評価関数Eが所定の閾値よりも高い計測データD3が所定個数以上蓄積されたか否か判定する。一般に、総合評価関数Eが高い場合には、高精度に自車位置推定ができており、当該総合評価関数Eの算出に用いた計測データについても信頼度が高いことが推定される。以上を勘案し、サーバ装置2は、ボクセルデータの更新に必要な計測データD3が収集されたか否か判定するため、ステップS207の判定処理を行う。   Next, the server device 2 determines whether or not the measurement data D3 having a high total evaluation function E has been accumulated for the voxel for which it has been determined in Step S204 that the voxel data should be corrected (Step S207). Specifically, the server device 2 determines whether or not a predetermined number or more of measurement data D3 whose overall evaluation function E is higher than a predetermined threshold is accumulated. Generally, when the comprehensive evaluation function E is high, the vehicle position can be estimated with high accuracy, and it is estimated that the reliability of the measurement data used for calculating the comprehensive evaluation function E is high. In consideration of the above, the server device 2 performs the determination process of step S207 to determine whether the measurement data D3 necessary for updating the voxel data has been collected.

そして、サーバ装置2は、総合評価関数Eが高い計測データD3が蓄積された場合(ステップS207;Yes)、総合評価関数Eの値に基づき、重み付き平均化によって対象のボクセルの点群データを構築する(ステップS208)。これにより、サーバ装置2は、対象のボクセルの点群データを構築する場合に、信頼度が高いスキャンデータほど重み付けを大きくし、高精度な点群データの構築を行う。一方、サーバ装置2は、総合評価関数Eが高い計測データD3が蓄積されていない場合(ステップS207;No)、ステップS201へ処理を戻す。なお、この場合、サーバ装置2は、管理者に対して所定の警告を出力し、ボクセルデータを修正すべきボクセルが存在する旨及び当該ボクセルが計測範囲内となる道路に計測整備車両を走行させて点群データの計測を行う必要がある旨を管理者に通知してもよい。   Then, when the measurement data D3 having the high overall evaluation function E is accumulated (Step S207; Yes), the server device 2 converts the point group data of the target voxel by weighted averaging based on the value of the overall evaluation function E. It is constructed (step S208). Accordingly, when constructing the point voxel data of the target voxel, the server device 2 increases the weight for the scan data with higher reliability, and constructs highly accurate point cloud data. On the other hand, when the measurement data D3 having the high total evaluation function E is not stored (Step S207; No), the server device 2 returns the process to Step S201. Note that, in this case, the server device 2 outputs a predetermined warning to the administrator, and informs the administrator that there is a voxel whose voxel data is to be corrected and causes the measurement maintenance vehicle to travel on a road in which the voxel is within the measurement range. The administrator may be notified that point cloud data needs to be measured.

次に、サーバ装置2は、ステップS208で構築した点群データから、NDTのデータ(即ち平均ベクトル、共分散行列、点群数情報等)を生成する(ステップS209)。そして、サーバ装置2は、ステップS209の処理結果に基づき、配信地図DB20の対象のボクセルデータを更新する(ステップS210)。なお、好適には、ステップS209とステップS210との間において、ステップS209で生成したNDTのデータが問題ないか検証するステップが設けられるとよい。そして、サーバ装置2は、ボクセルデータを更新したボクセルの重み付け値を初期値に設定する(ステップS211)。   Next, the server device 2 generates NDT data (that is, average vector, covariance matrix, point group number information, etc.) from the point group data constructed in step S208 (step S209). Then, the server device 2 updates the target voxel data in the distribution map DB 20 based on the processing result of step S209 (step S210). Preferably, between step S209 and step S210, a step for verifying whether the data of the NDT generated in step S209 has no problem is provided. Then, the server device 2 sets the weight value of the voxel whose voxel data has been updated to the initial value (step S211).

以上説明したように、本実施例に係る車載機1は、ボクセルデータを含む地図DB10を備える。そして、車載機1は、ライダ30が計測した点群データと地図DB10とによるボクセルごとの照合結果に基づき、ボクセルごとの評価関数Eを算出する。そして、車載機1は、評価関数Eが算出された領域のうち、評価関数Eが所定の閾値よりも低いボクセルを抽出し、当該ボクセルに対するマッチング低下情報D1をサーバ装置2へ送信する。これにより、車載機1は、マッチングの精度が低いボクセルに関する情報を好適にサーバ装置2に提供することができる。As described above, the in-vehicle device 1 according to the present embodiment includes the map DB 10 including voxel data. The vehicle unit 1, based on the comparison result of each voxel by the rider 30 and the point cloud data and the map DB10 measured, to calculate the evaluation function E k for each voxel. The vehicle unit 1, of the evaluation function E k is calculated area, the evaluation function E k extracts the voxels below a predetermined threshold, and transmits a matching reduction information D1 with respect to the voxel to the server apparatus 2. Thereby, the vehicle-mounted device 1 can suitably provide the server device 2 with information on voxels having low matching accuracy.

[変形例]
以下、実施例に好適な変形例について説明する。以下の変形例は、組み合わせて実施例に適用してもよい。
[Modification]
Hereinafter, a modified example suitable for the embodiment will be described. The following modifications may be combined and applied to the embodiment.

(変形例1)
図1に示す運転支援システムの構成は一例であり、本発明が適用可能な構成は、これに限定されない。例えば、運転支援システムは、サーバ装置2を有さず、車載機1がサーバ装置2の処理を実行してもよい。
(Modification 1)
The configuration of the driving support system shown in FIG. 1 is an example, and the configuration to which the present invention can be applied is not limited to this. For example, the driving support system does not have the server device 2 and the in-vehicle device 1 may execute the processing of the server device 2.

この場合、車載機1は、図7のステップS112では、マッチング低下情報D1をサーバ装置2に送信する代わりに、マッチング低下情報D1を記憶部12に記憶する。そして、車載機1は、車両が同一の場所を複数回通ることにより、同一のボクセルに対するマッチング低下情報D1の数が所定値より大きくなった場合に、図8のステップS203と同様に、対象のボクセルの重み付け値を変更する。また、車載機1は、マッチング低下情報D1を生成したボクセルに該当するライダ30の計測データについてもマッチング低下情報D1と共に記憶しておき、ボクセルデータを修正すべきと判断した場合には、記憶した計測データ及びマッチング低下情報D1に含まれる総合評価関数Eに基づき、図8のステップS207〜ステップS211の処理を実行する。この態様によっても、車載機1は、ボクセルデータの更新を好適に行うことができる。   In this case, the vehicle-mounted device 1 stores the matching reduction information D1 in the storage unit 12 instead of transmitting the matching reduction information D1 to the server device 2 in step S112 of FIG. Then, when the number of pieces of matching reduction information D1 for the same voxel becomes larger than a predetermined value due to the vehicle passing the same place a plurality of times, the in-vehicle device 1 determines the target as in step S203 of FIG. Change voxel weights. The in-vehicle device 1 also stores the measurement data of the rider 30 corresponding to the voxel that generated the matching drop information D1 together with the matching drop information D1, and stores it when it is determined that the voxel data should be corrected. The processing of steps S207 to S211 in FIG. 8 is executed based on the measurement data and the comprehensive evaluation function E included in the matching reduction information D1. Also in this mode, the on-vehicle device 1 can appropriately update the voxel data.

(変形例2)
車載機1は、図7のステップS112でマッチング低下情報D1を送信する場合、マッチング低下情報D1と共に、対象のボクセルに対するライダ30の計測データをサーバ装置2へ送信してもよい。この態様によれば、サーバ装置2は、要求信号D2を送信することなく、計測データD3に相当する情報を得ることができる。
(Modification 2)
When transmitting the matching reduction information D1 in step S112 of FIG. 7, the in-vehicle device 1 may transmit the measurement data of the rider 30 for the target voxel to the server device 2 together with the matching reduction information D1. According to this aspect, the server device 2 can obtain information corresponding to the measurement data D3 without transmitting the request signal D2.

(変形例3)
車載機1は、図7のステップS108で特定した総合評価関数Eが所定の値よりも低い場合には、推定パラメータP等により算出した推定自車位置の情報を、サーバ装置2へ送信してもよい。
(Modification 3)
When the comprehensive evaluation function E specified in step S108 of FIG. 7 is lower than the predetermined value, the on-vehicle device 1 transmits the information on the estimated own vehicle position calculated using the estimation parameter P or the like to the server device 2. Is also good.

この場合、サーバ装置2は、総合評価関数Eが所定の値よりも低い場合の推定自車位置を示す情報(「低精度位置情報」とも呼ぶ。)を各車両の車載機1から収集し、所定距離以内の位置を示す低精度位置情報が所定個数以上蓄積された場合、これらの低精度位置情報が示す位置付近には何かしらマッチングを悪くする原因が存在すると判断する。そして、サーバ装置2は、この場合、図8のステップS205と同様に、低精度位置情報が示す位置付近のボクセルを指定した要求信号D2を、各車両の車載機1に対して送信する。そして、サーバ装置2は、当該要求信号D2の応答として受信した計測データD3に基づき、図8のステップS208〜ステップS211と同様の手順により、低精度位置情報が示す位置付近のボクセルデータの更新を行う。この態様により、サーバ装置2は、マッチングの精度が低くなる位置周辺のボクセルデータを好適に更新することができる。   In this case, the server device 2 collects information indicating the estimated own vehicle position when the comprehensive evaluation function E is lower than a predetermined value (also referred to as “low-accuracy position information”) from the vehicle-mounted device 1 of each vehicle, If a predetermined number or more of low-accuracy position information indicating positions within a predetermined distance is accumulated, it is determined that there is some cause of poor matching near the position indicated by the low-accuracy position information. Then, in this case, similarly to step S205 in FIG. 8, the server device 2 transmits a request signal D2 designating a voxel near the position indicated by the low-accuracy position information to the on-vehicle device 1 of each vehicle. Then, based on the measurement data D3 received as a response to the request signal D2, the server device 2 updates the voxel data near the position indicated by the low-accuracy position information in the same procedure as in steps S208 to S211 in FIG. Do. According to this aspect, the server device 2 can appropriately update the voxel data around the position where the matching accuracy is low.

(変形例4)
車載機1に相当する機能が車両に内蔵されていてもよい。この場合、車両の電子制御装置(ECU:Electronic Control Unit)は、車両のメモリに記憶されたプログラムを実行することで、車載機1の制御部15に相当する処理を実行する。
(Modification 4)
A function corresponding to the on-vehicle device 1 may be built in the vehicle. In this case, the electronic control unit (ECU: Electronic Control Unit) of the vehicle executes a program corresponding to the control unit 15 of the on-vehicle device 1 by executing a program stored in the memory of the vehicle.

(変形例5)
ボクセルデータは、図3に示すように、平均ベクトルと共分散行列とを含むデータ構造に限定されない。例えば、ボクセルデータは、平均ベクトルと共分散行列を算出する際に用いられる計測整備車両が計測した点群データをそのまま含んでいてもよい。この場合、ボクセルデータに含まれる点群データは、本発明における「第2点群情報」の一例である。
(Modification 5)
Voxel data is not limited to a data structure including a mean vector and a covariance matrix, as shown in FIG. For example, the voxel data may directly include the point cloud data measured by the measurement and maintenance vehicle used when calculating the average vector and the covariance matrix. In this case, the point cloud data included in the voxel data is an example of the “second point cloud information” in the present invention.

(変形例6)
車載機1は、評価関数Eが所定の閾値よりも低いボクセルのうちの、所定数以上が互いに隣接するボクセルのそれぞれに関するマッチング低下情報D1をサーバ装置2へ送信してもよい。
(Modification 6)
Vehicle device 1, the evaluation function E k is of lower voxel than a predetermined threshold value, it may transmit a matching reduction information D1 for each of voxels predetermined number or more adjacent to the server apparatus 2.

この場合、車載機1の制御部15は、図7のステップS112でマッチング低下情報D1を送信する際に、評価関数Eが所定の閾値よりも低いボクセルのすべてに対するマッチング低下情報D1を通信部11に送信させるのではなく、評価関数Eが所定の閾値よりも低いボクセルが所定数以上互いに隣接して構成されるボクセル群(「低信頼性ボクセル群」とも呼ぶ。)を抽出し、当該低信頼性ボクセル群に含まれるボクセルのそれぞれに対するマッチング低下情報D1をサーバ装置2へ通信部11に送信させる。In this case, the control unit 15 of the in-vehicle device 1, when transmitting a matching reduction information D1 in step S112 of FIG. 7, the communication unit matching reduction information D1 evaluation function E k is for all the lower voxel than a predetermined threshold 11 instead of being sent to, the voxel evaluation function E k is lower than a predetermined threshold (also referred to as "low-confidence voxels".) constituted voxels adjacent to each other more than a predetermined number to extract, the The communication unit 11 transmits the matching reduction information D1 for each of the voxels included in the low reliability voxel group to the server device 2.

評価関数Eが所定の閾値よりも低い多数のボクセルが互いに隣接して存在する場合は、事象(c)が生じている可能性が高いと考えられるため、このようなボクセルについてはボクセルデータの更新が必要となる可能性が高い。一方、評価関数Eが所定の閾値よりも低いボクセルが、単独で、あるいは少数だけ隣接して存在する場合は、事象(a)が生じている可能性が高いと考えられるため、このようなボクセルについては、ボクセルデータの更新が必要となる可能性は相対的に低い。すなわち、低信頼性ボクセル群の大きさに基づいて、ボクセルデータの更新の必要性を判定することができる。そのため、低信頼性ボクセル群を判定するための閾値である上記所定数は、予め定められたボクセルの大きさを勘案し、例えば実験的若しくは経験的に設定する。When the evaluation function E k is a number of voxels below a predetermined threshold are present adjacent to each other, because it is likely that the event (c) has occurred, for such voxel of the voxel data Updates are likely to be required. On the other hand, the evaluation function E k voxel lower than a predetermined threshold, for if present adjacent either alone or in only a few, is considered likely event (a) occurs, like this For voxels, it is relatively unlikely that voxel data needs to be updated. That is, the necessity of updating voxel data can be determined based on the size of the low-reliability voxel group. Therefore, the predetermined number, which is a threshold value for determining a low-reliability voxel group, is set experimentally or empirically, for example, in consideration of a predetermined voxel size.

この態様によれば、車載機1は、静的な物体の変化が生じた可能性が高いボクセルに対するマッチング低下情報D1をサーバ装置2へ送信することで、送信頻度を抑制しつつ効果的な情報のみをサーバ装置2へ送信することができる。また、車載機1からは、ボクセルデータの更新が必要となる可能性が高いボクセルに対するマッチング低下情報D1が送信されるため、サーバ装置2は、図8のステップS202、およびステップS204の各処理を省略することが可能となり、サーバ装置2の処理負荷を軽減することができる。   According to this aspect, the in-vehicle device 1 transmits the matching reduction information D1 for the voxel in which the possibility of the static object change is high to the server device 2 to the server device 2, thereby suppressing the transmission frequency and effective information. Alone can be transmitted to the server device 2. In addition, since the in-vehicle device 1 transmits the matching reduction information D1 for the voxel that is likely to need to update the voxel data, the server device 2 performs the processes in step S202 and step S204 in FIG. This can be omitted, and the processing load on the server device 2 can be reduced.

または、車載機1は、サーバ装置2からの要求に基づき、サーバ装置2へ送信するマッチング低下情報D1の範囲を変更可能としてもよい。例えば、車載機1は、サーバ装置2へ送信するマッチング低下情報D1の範囲を、サーバ装置2からの要求に応じて、評価関数Eが所定の閾値よりも低いすべてのボクセル、または評価関数Eが所定の閾値よりも低いボクセルのうちの所定数以上が互いに隣接するボクセル(即ち低信頼性ボクセル群を構成する各ボクセル)、のいずれかに変更する。Alternatively, the in-vehicle device 1 may be capable of changing the range of the matching reduction information D1 transmitted to the server device 2 based on a request from the server device 2. For example, the in-vehicle device 1 sets the range of the matching reduction information D1 to be transmitted to the server device 2 to all voxels whose evaluation function E k is lower than a predetermined threshold or the evaluation function E in response to a request from the server device 2. A predetermined number or more of voxels whose k is lower than a predetermined threshold are changed to any of adjacent voxels (that is, voxels constituting a low reliability voxel group).

この場合、サーバ装置2は、ボクセルデータの信頼性を精査するために多くの情報を集めようとする地域では,評価関数Eが所定の閾値よりも低いすべてのボクセルに対するマッチング低下情報D1の送信を車載機1に要求し、ボクセルデータの信頼性を精査する必要のない地域では、評価関数Eが所定の閾値よりも低いボクセルのうちの所定数以上が互いに隣接するボクセル(即ち低信頼性ボクセル群を構成する各ボクセル)に対するマッチング低下情報D1の送信を車載機1に要求する。このような構成とすることで、サーバ装置2は、ボクセルデータの信頼性の精査が必要な地域と精査が不要な地域のそれぞれに適した情報を取得することができる。すなわち、車載機1は、必要性に応じた情報をサーバ装置に提供することができる。In this case, the server device 2 transmits the matching reduction information D1 to all the voxels whose evaluation function Ek is lower than a predetermined threshold in an area where a large amount of information is to be collected in order to examine the reliability of the voxel data. In an area where the reliability of voxel data does not need to be closely examined, at least a predetermined number of voxels whose evaluation function E k is lower than a predetermined threshold are adjacent voxels (that is, low reliability). The in-vehicle device 1 is requested to transmit the matching reduction information D1 for each voxel constituting the voxel group). With such a configuration, the server device 2 can acquire information suitable for each of the area where the scrutiny of the reliability of the voxel data is required and the area where the scrutiny is not required. That is, the in-vehicle device 1 can provide information according to need to the server device.

また、本実施例は、NDTによるスキャンマッチングに限定されず、ICP(Iterative Closest Point)などの他のスキャンマッチングを適用してもよい。この場合であっても、実施例と同様、車載機1は、マッチングの度合いを評価するボクセルごとの評価関数を、点群数Nにより正規化する。そして、車載機1は、マッチング度合いが相対的に低いボクセルを特定し、当該ボクセルに対するマッチング低下情報D1をサーバ装置2へ送信する。このように、本発明に適用可能なスキャンマッチングの方法は、NDTスキャンマッチングに限定されない。Further, the present embodiment is not limited to the scan matching by the NDT, and another scan matching such as an ICP (Iterative Closest Point) may be applied. Even in this case, as in the embodiment, the on-vehicle device 1 normalizes the evaluation function for each voxel for evaluating the degree of matching by the number of point groups Nk . Then, the on-vehicle device 1 specifies a voxel having a relatively low matching degree, and transmits the matching reduction information D1 for the voxel to the server device 2. As described above, the scan matching method applicable to the present invention is not limited to the NDT scan matching.

1 車載機
2 サーバ装置
10 地図DB
20 配信地図DB
11、21 通信部
12、22 記憶部
15、25 制御部
13 センサ部
14 入力部
16 出力部
1 in-vehicle device 2 server device 10 map DB
20 distribution map DB
11, 21 Communication unit 12, 22 Storage unit 15, 25 Control unit 13 Sensor unit 14 Input unit 16 Output unit

請求項1に記載の発明は、情報処理装置であって、計測部が計測した、基準位置から複数の位置までの夫々の距離に関する第1点群情報を取得する第1取得部と、一又は複数の位置情報に基づく第2点群情報と、前記第2点群情報の信頼度に基づく重み付け値と、が領域毎に記録されている地図情報を取得する第2取得部と、前記第1点群情報及び前記第2点群情報の、前記重み付け値に基づく前記領域毎の照合結果に基づき、前記領域毎の評価値を算出する算出部と、前記算出された評価値の和である総合評価値が示す評価が最も高くなるパラメータに基づき、前記基準位置を推定する位置推定部と、を備える。
The invention according to claim 1 is an information processing device, wherein the first acquisition unit acquires first point group information regarding respective distances from a reference position to a plurality of positions measured by the measurement unit; A second acquisition unit configured to acquire map information in which second point cloud information based on a plurality of pieces of position information and a weight value based on the reliability of the second point cloud information are recorded for each area; A calculation unit that calculates an evaluation value for each area based on a result of matching of the area based on the weighting value of the point cloud information and the second point cloud information , and a total that is a sum of the calculated evaluation values. A position estimating unit for estimating the reference position based on a parameter having the highest evaluation indicated by the evaluation value .

請求項11に記載の発明は、情報処理装置が実行する制御方法であって、計測部が計測した、基準位置から複数の位置までの夫々の距離に関する第1点群情報を取得する第1取得工程と、一又は複数の位置情報に基づく第2点群情報と、前記第2点群情報の信頼度に基づく重み付け値と、が領域毎に記録されている地図情報を取得する第2取得工程と、前記第1点群情報及び前記第2点群情報の、前記重み付け値に基づく前記領域毎の照合結果に基づき、前記領域毎の評価値を算出する算出工程と、前記算出された評価値の和である総合評価値が示す評価が最も高くなるパラメータに基づき、前記基準位置を推定する位置推定工程と、を有する。
The invention according to claim 11, which is a control method executed by the information processing device, wherein the first acquisition unit acquires first point group information regarding each distance from the reference position to a plurality of positions measured by the measurement unit. A second obtaining step of obtaining map information in which a step , second point group information based on one or a plurality of pieces of position information, and a weight value based on the reliability of the second point group information are recorded for each area. A calculating step of calculating an evaluation value for each area based on a result of matching of the first point group information and the second point group information for each area based on the weighting value; and the calculated evaluation value. And a position estimating step of estimating the reference position based on the parameter having the highest evaluation indicated by the total evaluation value that is the sum of

請求項12に記載の発明は、コンピュータが実行するプログラムであって、計測部が計測した、基準位置から複数の位置までの夫々の距離に関する第1点群情報を取得する第1取得部と、一又は複数の位置情報に基づく第2点群情報と、前記第2点群情報の信頼度に基づく重み付け値と、が領域毎に記録されている地図情報を取得する第2取得部と、前記第1点群情報及び前記第2点群情報の、前記重み付け値に基づく前記領域毎の照合結果に基づき、前記領域毎の評価値を算出する算出部と、前記算出された評価値の和である総合評価値が示す評価が最も高くなるパラメータに基づき、前記基準位置を推定する位置推定部として前記コンピュータを機能させる。 The invention according to claim 12 is a program executed by a computer, wherein the first acquisition unit acquires first point group information regarding each distance from a reference position to a plurality of positions measured by a measurement unit; A second acquisition unit configured to acquire map information in which second point cloud information based on one or a plurality of pieces of position information and a weight value based on the reliability of the second point cloud information are recorded for each area; A calculating unit configured to calculate an evaluation value for each area based on a result of matching of the first point group information and the second point group information for each area based on the weighting value, and a sum of the calculated evaluation values The computer is caused to function as a position estimating unit that estimates the reference position based on a parameter having the highest evaluation indicated by a certain overall evaluation value .

Claims (14)

計測部が計測した、基準位置から複数の位置までの夫々の距離に関する第1点群情報を取得する第1取得部と、
一又は複数の位置情報に基づく第2点群情報が領域毎に記録されている地図情報を取得する第2取得部と、
前記第1点群情報及び前記第2点群情報の前記領域毎の照合結果に基づき、前記領域毎の評価値を算出する算出部と、
前記評価値が算出された領域のうち、前記評価値が所定の閾値より低い値である領域を抽出する抽出部と、を備える情報処理装置。
A first acquisition unit that acquires first point group information regarding each distance from the reference position to the plurality of positions measured by the measurement unit,
A second acquisition unit that acquires map information in which second point group information based on one or more pieces of position information is recorded for each area;
A calculation unit that calculates an evaluation value for each of the areas based on a result of the comparison of the first point group information and the second point group information for each area;
An information processing apparatus, comprising: an extraction unit that extracts, from the area in which the evaluation value is calculated, an area in which the evaluation value is lower than a predetermined threshold.
前記算出部は、前記第1点群情報として取得された前記領域毎の点の数に基づき、前記領域毎の評価値を正規化する請求項1に記載の情報処理装置。   The information processing apparatus according to claim 1, wherein the calculation unit normalizes the evaluation value for each area based on the number of points for each area acquired as the first point group information. 前記基準位置を推定する位置推定部をさらに備え、
前記地図情報には、前記第2点群情報の信頼度に基づく重み付け値が前記領域毎に含まれており、
前記位置推定部は、前記領域毎の重み付け値に基づいた前記領域毎の照合結果により、前記基準位置を推定する請求項1または2に記載の情報処理装置。
Further comprising a position estimating unit for estimating the reference position,
The map information includes a weight value based on the reliability of the second point group information for each of the regions,
The information processing apparatus according to claim 1, wherein the position estimating unit estimates the reference position based on a comparison result for each area based on a weight value for each area.
前記位置推定部は、前記重み付け値を用いた前記照合結果から前記領域毎に算出される評価値の和である総合評価値が示す評価が最も高くなるパラメータに基づき、前記基準位置を推定する請求項3に記載の情報処理装置。   The position estimating unit estimates the reference position based on a parameter having the highest evaluation indicated by an overall evaluation value that is a sum of evaluation values calculated for each of the regions from the matching result using the weighting value. Item 4. The information processing device according to item 3. 前記地図情報には、前記第2点群情報の前記領域毎の点の数の情報が含まれており、
前記抽出部は、前記地図情報に含まれる前記領域毎の点の数の情報と、前記第1点群情報として取得された前記領域毎の点の数とに基づき、抽出する領域を決定する請求項1〜4のいずれか一項に記載の情報処理装置。
The map information includes information on the number of points for each area of the second point cloud information,
The said extraction part determines the area | region to extract based on the information of the number of points for every area | region contained in the said map information, and the number of points for every area | region acquired as said 1st point group information. Item 5. The information processing device according to any one of Items 1 to 4.
第2点群情報が前記領域毎に記録されている地図情報を管理するサーバ装置に対し、前記抽出部が抽出した領域に関する領域情報を送信する送信部をさらに備える請求項1〜5のいずれか一項に記載の情報処理装置。   The transmitting device according to claim 1, further comprising a transmitting unit configured to transmit region information on the region extracted by the extracting unit to a server device that manages map information in which second point group information is recorded for each region. An information processing device according to claim 1. 前記送信部は、前記抽出部が抽出した領域のうちの所定数以上が互いに隣接する領域に関する領域情報を前記サーバ装置に対して送信する請求項6に記載の情報処理装置。   The information processing apparatus according to claim 6, wherein the transmission unit transmits, to the server device, area information on an area where a predetermined number or more of the areas extracted by the extraction unit are adjacent to each other. 前記送信部は、前記抽出部が抽出したすべての領域に関する領域情報、及び前記抽出部が抽出した領域のうちの所定数以上が互いに隣接する領域に関する領域情報のいずれか一方を選択的に前記サーバ装置に対して送信する請求項6に記載の情報処理装置。   The server selectively selects one of region information on all regions extracted by the extraction unit and region information on regions where a predetermined number or more of the regions extracted by the extraction unit are adjacent to each other. The information processing apparatus according to claim 6, wherein the information is transmitted to the apparatus. 請求項6に記載の複数の情報処理装置から領域情報を受信する受信部と、
前記受信部が受信した領域毎の複数の領域情報に基づき、静的な物体の変化が生じた領域であるか否かを前記領域毎に判定する判定部と、
を備えるサーバ装置。
A receiving unit that receives area information from the plurality of information processing apparatuses according to claim 6,
Based on a plurality of area information for each area received by the receiving unit, a determination unit that determines, for each area, whether or not the area where a static object change has occurred,
Server device comprising:
静的な物体の変化が生じた領域であると前記判定部が判定した領域に対する計測部による計測データの送信要求を、情報処理装置に対して送信する送信部をさらに備える請求項9に記載のサーバ装置。   The transmission unit according to claim 9, further comprising: a transmission unit configured to transmit, to the information processing apparatus, a transmission request of measurement data by the measurement unit with respect to the region determined by the determination unit to be a region where a static object change has occurred. Server device. 領域毎の照合に関する重み付け値を記憶する記憶部をさらに備え、
前記領域情報を所定数以上前記受信部が受信した領域に対し、当該領域の重み付け値を低くする請求項9または10に記載のサーバ装置。
Further comprising a storage unit for storing a weighting value for matching for each region,
The server device according to claim 9, wherein a weight value of the area is set lower for an area in which the receiving unit receives the area information by a predetermined number or more.
情報処理装置が実行する制御方法であって、
計測部が計測した、基準位置から複数の位置までの夫々の距離に関する第1点群情報を取得する第1取得工程と、
一又は複数の位置情報に基づく第2点群情報が領域毎に記録されている地図情報を取得する第2取得工程と、
前記第1点群情報及び前記第2点群情報の前記領域毎の照合結果に基づき、前記領域毎の評価値を算出する算出工程と、
前記評価値が算出された領域のうち、前記評価値が所定の閾値より低い値である領域を抽出する抽出工程と、を有する制御方法。
A control method executed by the information processing device,
A first acquisition step of acquiring first point cloud information on each distance from the reference position to the plurality of positions measured by the measurement unit,
A second acquisition step of acquiring map information in which second point group information based on one or a plurality of pieces of position information is recorded for each area;
A calculating step of calculating an evaluation value for each area based on a result of matching of the first point cloud information and the second point cloud information for each area;
An extraction step of extracting an area in which the evaluation value is lower than a predetermined threshold value from among the areas in which the evaluation value has been calculated.
コンピュータが実行するプログラムであって、
計測部が計測した、基準位置から複数の位置までの夫々の距離に関する第1点群情報を取得する第1取得部と、
一又は複数の位置情報に基づく第2点群情報が領域毎に記録されている地図情報を取得する第2取得部と、
前記第1点群情報及び前記第2点群情報の前記領域毎の照合結果に基づき、前記領域毎の評価値を算出する算出部と、
前記評価値が算出された領域のうち、前記評価値が所定の閾値より低い値である領域を抽出する抽出部
として前記コンピュータを機能させるプログラム。
A program executed by a computer,
A first acquisition unit that acquires first point group information regarding each distance from the reference position to the plurality of positions measured by the measurement unit,
A second acquisition unit that acquires map information in which second point group information based on one or more pieces of position information is recorded for each area;
A calculation unit that calculates an evaluation value for each of the areas based on a result of the comparison of the first point group information and the second point group information for each area;
A program that causes the computer to function as an extraction unit that extracts, from the area in which the evaluation value is calculated, an area in which the evaluation value is lower than a predetermined threshold.
請求項13に記載のプログラムを記憶した記憶媒体。   A storage medium storing the program according to claim 13.
JP2019509134A 2017-03-30 2018-03-08 Information processing device, server device, control method, program, and storage medium Active JP6721784B2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017068033 2017-03-30
JP2017068033 2017-03-30
PCT/JP2018/008999 WO2018180338A1 (en) 2017-03-30 2018-03-08 Information processing device, server device, control method, program, and storage medium

Publications (2)

Publication Number Publication Date
JPWO2018180338A1 true JPWO2018180338A1 (en) 2020-01-23
JP6721784B2 JP6721784B2 (en) 2020-07-15

Family

ID=63675523

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019509134A Active JP6721784B2 (en) 2017-03-30 2018-03-08 Information processing device, server device, control method, program, and storage medium

Country Status (2)

Country Link
JP (1) JP6721784B2 (en)
WO (1) WO2018180338A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021005031A (en) * 2019-06-27 2021-01-14 三菱重工業株式会社 Map generation device, method for generating map, and program

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3087034A1 (en) * 2018-10-09 2020-04-10 Soletanche Freyssinet IT STORAGE MEANS
SG11201811462PA (en) * 2018-11-09 2020-06-29 Beijing Didi Infinity Technology & Development Co Ltd Vehicle positioning system using lidar
JP7143940B2 (en) * 2019-04-05 2022-09-29 三菱電機株式会社 MOVEMENT SUPPORT DEVICE FOR AUTONOMOUS MOBILE AND AUTONOMOUS MOBILE
CN110031011B (en) * 2019-04-17 2021-05-11 首都师范大学 Vehicle-mounted real-time map matching calculation method integrating space-time proximity and improved weight circle
CN111522043B (en) * 2020-04-30 2023-07-25 北京联合大学 Unmanned vehicle laser radar quick re-matching positioning method
JPWO2022102577A1 (en) * 2020-11-13 2022-05-19
CN113050116B (en) * 2021-03-05 2024-02-27 深圳市优必选科技股份有限公司 Robot positioning method, apparatus, robot, and readable storage medium
CN112946681B (en) * 2021-05-17 2021-08-17 知行汽车科技(苏州)有限公司 Laser radar positioning method fusing combined navigation information

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007322351A (en) * 2006-06-05 2007-12-13 Mitsubishi Electric Corp Three-dimensional object collating device
WO2013076829A1 (en) * 2011-11-22 2013-05-30 株式会社日立製作所 Autonomous mobile system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007322351A (en) * 2006-06-05 2007-12-13 Mitsubishi Electric Corp Three-dimensional object collating device
WO2013076829A1 (en) * 2011-11-22 2013-05-30 株式会社日立製作所 Autonomous mobile system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021005031A (en) * 2019-06-27 2021-01-14 三菱重工業株式会社 Map generation device, method for generating map, and program

Also Published As

Publication number Publication date
WO2018180338A1 (en) 2018-10-04
JP6721784B2 (en) 2020-07-15

Similar Documents

Publication Publication Date Title
JP6721784B2 (en) Information processing device, server device, control method, program, and storage medium
CN109425358B (en) Information processing device and method, vehicle, travel control method, and map updating method
JPWO2018221453A1 (en) Output device, control method, program, and storage medium
JPWO2018181974A1 (en) Judgment device, judgment method, and program
JPWO2018212346A1 (en) Control device, scanning system, control method, and program
WO2018221455A1 (en) Update device, control method, program, and storage medium
JP7155284B2 (en) Measurement accuracy calculation device, self-position estimation device, control method, program and storage medium
JPWO2017199333A1 (en) Information output device, terminal device, control method, program, and storage medium
US20220113139A1 (en) Object recognition device, object recognition method and program
US20230010175A1 (en) Information processing device, control method, program and storage medium
JP2024056032A (en) Data structure, storage medium and storage device
WO2018212301A1 (en) Self-position estimation device, control method, program, and storage medium
CN110989619B (en) Method, apparatus, device and storage medium for locating objects
JP6263453B2 (en) Momentum estimation device and program
JP2023164502A (en) Stationary object data generator, method for control, program, and storage medium
JP2019174191A (en) Data structure, information transmitting device, control method, program, and storage medium
WO2018221458A1 (en) Updating device, control method, program, and storage medium
JP2020046411A (en) Data structure, storage device, terminal device, server device, control method, program, and storage medium
JP2022136145A (en) Data structure, information processing device, and map data generator
JP2022090373A (en) Information processor, control method, program and storage medium
WO2019188877A1 (en) Information transmission device, data structure, control method, program, and storage medium
JP2020034452A (en) Position estimating device, control method, program, and storage medium
WO2019188874A1 (en) Data structure, information processing device, and map data generation device
JP2020046413A (en) Data structure, storage device, terminal device, server device, control method, program, and storage medium
US20220413150A1 (en) Information processing device, control method, program and storage medium

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190913

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190913

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200519

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200618

R150 Certificate of patent or registration of utility model

Ref document number: 6721784

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150