EP4172564A1 - Determining a starting position of a vehicle for locating - Google Patents

Determining a starting position of a vehicle for locating

Info

Publication number
EP4172564A1
EP4172564A1 EP21732875.6A EP21732875A EP4172564A1 EP 4172564 A1 EP4172564 A1 EP 4172564A1 EP 21732875 A EP21732875 A EP 21732875A EP 4172564 A1 EP4172564 A1 EP 4172564A1
Authority
EP
European Patent Office
Prior art keywords
starting position
measurement data
sensor system
vehicle
determined
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
EP21732875.6A
Other languages
German (de)
French (fr)
Inventor
Renlin LI
Georg Krause
Timo Nachstedt
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Publication of EP4172564A1 publication Critical patent/EP4172564A1/en
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/10Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration
    • G01C21/12Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning
    • G01C21/16Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning by integrating acceleration or speed, i.e. inertial navigation
    • G01C21/165Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning by integrating acceleration or speed, i.e. inertial navigation combined with non-inertial navigation instruments
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/28Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network with correlation of data from several navigational instruments
    • G01C21/30Map- or contour-matching
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3602Input other than that of destination using image analysis, e.g. detection of road signs, lanes, buildings, real preceding vehicles using a camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/74Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10032Satellite or aerial image; Remote sensing
    • G06T2207/10044Radar image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle

Definitions

  • the invention relates to a method for determining a starting position of a vehicle for localization of the vehicle.
  • the invention also relates to a method for performing a localization, a control device, a computer program and a machine-readable storage medium.
  • the vehicle In order to use digital maps with precise lanes, the vehicle must be able to determine its own position with lane accuracy.
  • the position of the vehicle can be determined by localization.
  • the localization of the vehicle position requires a precise initial position or starting position, since the localization is usually based on iterative processes. For example, measurement data from an odometry sensor system are used to determine the vehicle position based on the initial position.
  • the object on which the invention is based can be seen in proposing a precise method for determining an initial position or starting position for an iterative vehicle localization, which can be implemented with inexpensive sensors.
  • a method for determining a starting position of a vehicle for localization of the vehicle by a control device is provided.
  • the method can be carried out by an initialization module of the control device in the form of hardware and / or software.
  • measurement data are received from an odometry sensor system and / or a GNSS sensor system of the vehicle.
  • the odometry sensors and / or GNSS sensors can be connected to the control unit to conduct data.
  • a first position and an uncertainty range of the first position are determined based on the received measurement data.
  • at least one map section of a feature card with a large number of stored features is received.
  • the map section preferably has a position and extent which overlap the first position and the uncertainty region of the first position.
  • the uncertainty area can be designed in the form of an ellipse, a circle or in the form of a polygon.
  • the position can be central or eccentric in the uncertainty area.
  • measurement data are received from a LIDAR sensor system, a radar sensor system and / or a camera sensor system and static features are extracted from the received measurement data.
  • static features can depict static objects, such as buildings, lane boundaries, lane markings, trees, street signs, lane courses and the like.
  • the static features can be present in the form of a signature or a characteristic measurement data grid.
  • a starting position of the vehicle is then determined by comparing the static features extracted from the measurement data with the features stored in the map section.
  • the method can be used to determine an initial position or starting position of the vehicle that is accurate to the lane and serves as the basis for an iterative localization method.
  • the starting position can also be configured as a starting pose with a position and orientation of the vehicle.
  • the option of using radar sensors enables the starting position to be determined even in poor weather conditions, such as rain or fog. Furthermore, the starting position can also be precisely determined in areas without a GNSS signal.
  • the starting position can in particular be used to implement automated or partially automated driving functions. Driving functions of this type can, for example, access lane-accurate navigation and have trajectory planning.
  • the method for determining the starting position is essentially determined by three main steps. In one step, measurement data from the odometry sensors and / or the GNSS sensors of the vehicle are used separately or as a sensor data fusion in order to determine the first position.
  • a corresponding map section can be loaded which covers the first position and its uncertainty area.
  • the loaded map section can be used for feature-based localization using measurement data from a LIDAR sensor system, a radar sensor system and / or a camera sensor system.
  • a control device is provided, the control device being set up to carry out the method.
  • the control device can be, for example, a control device on the vehicle, a control device external to the vehicle, or a server unit external to the vehicle, such as a cloud system, for example.
  • control device can have a localization module and / or an initialization module.
  • control device can carry out the method for determining the starting position of a vehicle and / or the method for performing a localization.
  • a computer program which comprises commands which, when the computer program is executed by a computer or a control device, cause the computer or a control device to execute the method according to the invention.
  • a machine-readable storage medium is provided on which the computer program according to the invention is stored.
  • the vehicle can be assisted, partially automated, highly automated and / or fully automated or can be operated without a driver.
  • the vehicle can be, for example, a passenger car, a truck, a robotaxi, and the like.
  • the vehicle is not limited to running on roads. Rather, the vehicle can also be used as a Watercraft, aircraft, such as a transport drone, and the like can be configured.
  • At least one second starting position is determined at a time spaced apart from the first starting position, the first starting position and the at least one second starting position being compared with positions determined from measurement data from the odometry sensor system.
  • a deviation between the at least one second starting position and a position of the vehicle determined by measurement data from the odometry sensor system is preferably calculated and a consistency check is carried out.
  • This consistency check can be implemented as a final step of the method, which ensures reliable results of the initialization.
  • this consistency check can guarantee the correctness of the starting position in periodic environments, such as a forest section or a motorway, with a large number of identical road boundaries or static features.
  • the consistency check can be implemented in a technically particularly simple manner if the first of the two successive alignment results or starting positions is propagated by means of measurement data from the odometry sensor system up to the point in time of the second alignment result and then the difference with the actual second alignment result is calculated. If the difference is below a certain threshold, the starting positions can be considered to be consistent.
  • At least one second starting position is determined at a time spaced apart from the first starting position, the first starting position and the at least one second starting position being linked with measurement data from the odometry sensor system to form trajectories.
  • a goodness of fit is determined for each trajectory, where a trajectory with the highest quality of fit is used or all trajectories are discarded. If the starting positions are discarded, the method is carried out again in order to determine a starting position which passes the consistency check. This means that multi-hypothesis tracking can be used. This measure can further increase the precision of the starting position, particularly in periodic environments.
  • extracted static features from older measurements of the LIDAR sensor system, the radar sensor system and / or the camera sensor system are used to carry out a comparison of the extracted features with the features stored in the map section.
  • the map section can be enlarged according to the distance between a current measurement and the older measurement. This can be achieved by using measurement data from the odometry sensor system.
  • the older measurement data and the current measurement data can preferably have static features which are spatially separated from one another and which, combined with the features stored in the map section, can be compared in order to determine the first starting position. As a result, a larger data cloud can be used to determine the first starting position. This measure can take place, for example, instead of the consistency check.
  • the extracted features from the older measurements are coupled with the extracted features from current measurements using measurement data from the odometry sensor system.
  • the older static features which were ascertained a few seconds earlier, for example, can be linked to currently ascertained static features over the distance covered by the vehicle.
  • the distance covered can be traced using the odometry sensors.
  • an enlarged road geometry with corresponding features can be used to resolve ambiguities or ambiguities in periodic surroundings, such as, for example, motorways or forest sections.
  • an optimization method is used to determine the first position. For example, a data structure based on a sliding graph with measurement data from the odometry sensors and the GNSS sensors of the vehicle received over a period of time, and the first position can be determined therefrom. This measure can eliminate or reduce measurement uncertainties, fluctuations and jitter when determining the first position.
  • the measurement data from the odometry sensor system and / or the GNSS sensor system of the vehicle are continuously received. Furthermore, the first position is continuously determined based on the received measurement data. This measure can ensure the availability of the first position for determining the first starting position.
  • the determined starting position is used to carry out a road clearance service.
  • the method can be used to release a street or a street section for certain automated or partially automated driver assistance functions.
  • the redundant use of the measurement data from the odometry sensors and the static features can prevent manipulation of the starting position, for example through so-called GNSS spoofing.
  • a method for performing a localization is provided, a first starting position determined by a method according to the invention for determining a starting position of a vehicle being received as an input variable and / or as a validation variable.
  • a vehicle can also be localized with low-cost vehicle sensors compared to a digital map.
  • the method for performing the localization can implement a continuous comparison of static features from measurement data from a LIDAR sensor system, a radar sensor system and / or a camera sensor system of the vehicle with the features stored in the digital map. This can be done, for example, by a localization module of the control device. Since the method for performing the localization is designed iteratively, the vehicle can be localized particularly precisely by providing the precise starting position.
  • the search area for the feature-based localization can be limited to the at least one map section and the computation requirement can be reduced by the first position.
  • the method for determining the starting position or initial position is carried out in parallel with the method for performing the localization.
  • the initialization module of the control device can also run in the background during the localization.
  • the output of the initialization module can be used as an additional status check of the localizer output. If a difference between the starting position and the vehicle position determined by the localization is determined which exceeds a limit value, a new starting position can be output for the localization module and the localization of the vehicle can be initiated again.
  • FIG. 1 shows a schematic plan view of a roadway to illustrate a determination of a first position of a vehicle
  • FIG. 2 shows a schematic plan view of a roadway from FIG. 1 and a map section
  • FIGS. 1 to 4 show schematic representations to illustrate a method for determining a first starting position A of a vehicle 2 for localization of the vehicle 2 by a control device 4.
  • the vehicle 2 has an odometry sensor system and / or a GNSS sensor system 6 and an additional sensor system 8 for feature-based localization.
  • the additional sensor system 8 can be configured, for example, as a LIDAR sensor system, a radar sensor system and / or a camera sensor system.
  • FIG. 1 shows a schematic top view of a roadway 10 to illustrate a determination of a first position P of the vehicle 2.
  • the vehicle 2 travels on the roadway 10 in the direction of travel F.
  • measurement data are recorded by the odometry sensors and the GNSS sensors while driving 6 collected.
  • a plurality of measurement data 12 from the odometry sensor system and the GNSS sensor system 6 collected one after the other are stored in order to determine the first position P.
  • the measurement data 12 of the odometry sensor system and the GNSS sensor system 6 can optionally be smoothed so that optimized measurement data 14 result from the measurement data 12 determined.
  • the determined measurement data 12 can be optimized, for example, by means of moving averages.
  • the determined measurement data 12 can have a maximum number, so that old measurement data are automatically deleted or overwritten by more recent measurement data.
  • the first position P can be configured as the last or most recent measurement of the odometry sensor system and the GNSS sensor system 6 after optimization or smoothing.
  • FIG. 2 shows a schematic top view of a roadway 10 from FIG. 1 and of a map section 16.
  • the map section 16 is part of a feature map and has a multiplicity of features 18.
  • the feature map is a radar-specific feature map.
  • the map section 16 has a position and an extent which overlays or covers the first position P and an optional uncertainty region of the first position P.
  • extracted static features 20 from current measurements and static features 22 from older measurements of the LIDAR sensor system, the radar sensor system and / or the camera sensor system 8 are taken into account, so that an enlarged map section 16 is used to carry out a comparison of extracted static features 20, 22 with features 18 stored in the map section 16.
  • the radar-specific feature map and the map section 16 are stored in the form of map sections 16 which depict the topology of the road network or the roadway 10.
  • the at least one map section 16 can be transformed into a coordinate system of the vehicle 2, which is not shown in FIG. 2 for the sake of clarity.
  • the features 18 of the map section 16 can be compared with the extracted static features 20, 22 and aligned with one another for a feature-based localization. Such an alignment can be realized with a cost function and an optimization algorithm for the cost function.
  • FIG. 3 and FIG. 4 show schematic diagrams to illustrate a consistency check.
  • FIG. 3 shows a technically simplified consistency check.
  • a plurality of second starting positions A2, A3 spaced apart in time from the first starting position A are determined.
  • positions P, P2, P3 are determined by means of the odometry sensor system 6 and compared with the starting positions A, A2, A3. For this purpose, a difference D or a distance between the positions P, P2, P3 and the starting positions A, A2 can be calculated. The consistency check is successful if the difference D is below a predefined threshold value or limit value.
  • the first two starting positions A, A2 are consistent or correct.
  • the last starting position A3 has too great a deviation D from position P3 and is not consistent.
  • the method for determining the starting position A of the vehicle 2 can be carried out again and subjected to a consistency check.
  • the consistency check can preferably have a plurality of successfully checked starting positions A, A2, A3 before the last checked starting position A3 is released for localization of the vehicle 2.
  • FIG. 4 is based on multi-hypothesis tracking.
  • a plurality of starting positions A, A2, A3 with a best match within the map section 16 are taken into account. These starting positions A, A2, A3 are coupled with matches from the last alignment of the features 18, 20, 22.
  • the measurement data 12 of the odometry sensor system 6 are used to connect the starting positions A, A2, A3.
  • Each of the starting positions A, A2, A3 can have parallel starting positions AP within the map section 16, in which the extracted features 20,
  • the measurement data 12 of the odometry sensor system 6 are compared in the form of trajectories with the respective starting positions A, A2, A3, AP, the starting positions A, A2, A3, AP with the highest degree of adaptation being used for the further localization of the vehicle 2.

Abstract

The invention relates to a method for determining a starting position of a vehicle for locating the vehicle by means of a control device, wherein - measurement data are received from an odometry sensor system and/or a GNSS sensor system of the vehicle, a first position and a range of uncertainty of the first position are determined on the basis of the received measurement data, at least one map section of a feature map having a plurality of stored features is received, wherein the map section has a position and an extension which superimposes the position and the range of uncertainty, measurement data are received from a LIDAR sensor, a radar sensor system and/or a camera sensor system and static features are extracted from the received measurement data, a first starting position of the vehicle is determined by comparing the static features extracted from measurement data to features stored in the map section. The invention furthermore relates to a locating method, a control device, a computer program and a machine-readable storage medium.

Description

Beschreibung description
Titel title
Ermitteln einer Ausgangsposition eines Fahrzeugs für eine Lokalisierung Determining a starting position of a vehicle for localization
Die Erfindung betrifft ein Verfahren zum Ermitteln einer Ausgangsposition eines Fahrzeugs für eine Lokalisierung des Fahrzeugs. Des Weiteren betrifft die Erfindung ein Verfahren zum Durchführen einer Lokalisierung, ein Steuergerät, ein Computerprogramm sowie ein maschinenlesbares Speichermedium. The invention relates to a method for determining a starting position of a vehicle for localization of the vehicle. The invention also relates to a method for performing a localization, a control device, a computer program and a machine-readable storage medium.
Stand der Technik State of the art
Für die Nutzung von spurgenauen digitalen Karten muss das Fahrzeug seine eigene Position spurgenau bestimmen können. Die Position des Fahrzeugs kann durch eine Lokalisierung ermittelt werden. Die Lokalisierung der Fahrzeugposition benötigt eine präzise Initialposition bzw. Ausgangsposition, da die Lokalisierung üblicherweise auf iterativen Verfahren basiert. Dabei werden beispielsweise Messdaten einer Odometriesensorik eingesetzt, um ausgehend von der Initialposition die Fahrzeugposition zu bestimmen. In order to use digital maps with precise lanes, the vehicle must be able to determine its own position with lane accuracy. The position of the vehicle can be determined by localization. The localization of the vehicle position requires a precise initial position or starting position, since the localization is usually based on iterative processes. For example, measurement data from an odometry sensor system are used to determine the vehicle position based on the initial position.
Es sind bereits Verfahren zum Bestimmen einer Initialposition für die Fahrzeuglokalisierung bekannt, welche auf dem Empfang von GNSS-Daten basieren. Dabei können mehrere GNSS-Positionen zum Bestimmen einer Initialposition herangezogen werden. Die für diese Verfahren notwendigen GNSS-Signale von entsprechenden Satelliten sind jedoch in vielen Straßenabschnitten, wie beispielsweise Wäldern oder Tunneln, nicht verfügbar. Problematisch ist weiterhin die unzureichende Genauigkeit der ermittelten GNSS-Positionen. Zum Verbessern der Genauigkeit der ermittelten GNSS-Positionen können differentielle Verfahren eingesetzt werden, welche aufgrund zusätzlicher Hardware kostenintensiv und nicht flächendeckend verfügbar sind. There are already known methods for determining an initial position for vehicle localization, which are based on the reception of GNSS data. Several GNSS positions can be used to determine an initial position. However, the GNSS signals from the corresponding satellites required for this method are not available in many road sections, such as forests or tunnels. Another problem is the insufficient accuracy of the determined GNSS positions. To improve the accuracy of the determined GNSS positions, differential methods can be used, which are costly and not available across the board due to additional hardware.
Offenbarung der Erfindung Disclosure of the invention
Die der Erfindung zugrunde liegende Aufgabe kann darin gesehen werden, ein präzises Verfahren zum Ermitteln einer Initialposition bzw. Ausgangsposition für eine iterative Fahrzeuglokalisierung vorzuschlagen, welches mit preiswerter Sensorik umsetzbar ist. The object on which the invention is based can be seen in proposing a precise method for determining an initial position or starting position for an iterative vehicle localization, which can be implemented with inexpensive sensors.
Diese Aufgabe wird mittels des jeweiligen Gegenstands der unabhängigen Ansprüche gelöst. Vorteilhafte Ausgestaltungen der Erfindung sind Gegenstand von jeweils abhängigen Unteransprüchen. This object is achieved by means of the respective subject matter of the independent claims. Advantageous refinements of the invention are the subject matter of the respective dependent subclaims.
Nach einem Aspekt der Erfindung wird ein Verfahren zum Ermitteln einer Ausgangsposition eines Fahrzeugs für eine Lokalisierung des Fahrzeugs durch ein Steuergerät bereitgestellt. Insbesondere kann das Verfahren durch ein Initialisierungsmodul des Steuergeräts in Form einer Hardware und/oder einer Software ausgeführt werden. According to one aspect of the invention, a method for determining a starting position of a vehicle for localization of the vehicle by a control device is provided. In particular, the method can be carried out by an initialization module of the control device in the form of hardware and / or software.
In einem Schritt werden Messdaten von einer Odometriesensorik und/oder einer GNSS-Sensorik des Fahrzeugs empfangen. Die Odometriesensorik und/oder GNSS-Sensorik ist hierfür mit dem Steuergerät datenleitend verbindbar. In one step, measurement data are received from an odometry sensor system and / or a GNSS sensor system of the vehicle. For this purpose, the odometry sensors and / or GNSS sensors can be connected to the control unit to conduct data.
Basierend auf den empfangenen Messdaten werden eine erste Position und ein Unsicherheitsbereich der ersten Position bestimmt. In einem weiteren Schritt wird mindestens ein Kartenabschnitt einer Merkmalskarte mit einer Vielzahl an hinterlegten Merkmalen empfangen. Bevorzugterweise weist der Kartenabschnitt eine Position und Ausdehnung auf, welche die erste Position und den Unsicherheitsbereich der ersten Position überlagert. Der Unsicherheitsbereich kann in Form einer Ellipse, eines Kreises oder in Form eines Vielecks ausgestaltet sein. Die Position kann dabei mittig oder außermittig im Unsicherheitsbereich liegen. In einem weiteren Schritt werden Messdaten von einer LIDAR-Sensorik, einer Radarsensorik und/oder einer Kamerasensorik empfangen und statische Merkmale aus den empfangenen Messdaten extrahiert. Derartige statische Merkmale können statische Objekte, wie beispielsweise Gebäude, Fahrbahnbegrenzungen, Fahrbahnmarkierungen, Bäume, Straßenbeschilderungen, Fahrbahnverläufe und dergleichen, abbilden. Dabei können die statischen Merkmale in Form einer Signatur oder eines charakteristischen Messdatenrasters vorliegen. A first position and an uncertainty range of the first position are determined based on the received measurement data. In a further step, at least one map section of a feature card with a large number of stored features is received. The map section preferably has a position and extent which overlap the first position and the uncertainty region of the first position. The uncertainty area can be designed in the form of an ellipse, a circle or in the form of a polygon. The position can be central or eccentric in the uncertainty area. In a further step, measurement data are received from a LIDAR sensor system, a radar sensor system and / or a camera sensor system and static features are extracted from the received measurement data. Such static features can depict static objects, such as buildings, lane boundaries, lane markings, trees, street signs, lane courses and the like. The static features can be present in the form of a signature or a characteristic measurement data grid.
Anschließend wird eine Ausgangsposition des Fahrzeugs durch einen Abgleich der aus Messdaten extrahierten statischen Merkmale mit in dem Kartenabschnitt hinterlegten Merkmalen ermittelt. A starting position of the vehicle is then determined by comparing the static features extracted from the measurement data with the features stored in the map section.
Durch das Verfahren kann eine spurgenaue Initialposition bzw. Ausgangsposition des Fahrzeugs ermittelt werden, welche als Grundlage für ein iteratives Lokalisierungsverfahren dient. Die Ausgangsposition kann auch als eine Ausgangspose mit einer Position und Ausrichtung des Fahrzeugs ausgestaltet sein. The method can be used to determine an initial position or starting position of the vehicle that is accurate to the lane and serves as the basis for an iterative localization method. The starting position can also be configured as a starting pose with a position and orientation of the vehicle.
Durch die Eingrenzung des Kartenabschnitts auf eine kleine Region um die erste Position und deren Unsicherheitsbereich kann mit einem geringen technischen Aufwand ein Merkmalsabgleich durchgeführt werden. Dabei sind die Anforderungen an die Sensorgenauigkeit gering, wodurch auch preiswerte Sensoren für das Verfahren nutzbar sind. By delimiting the map section to a small region around the first position and its uncertainty area, a feature comparison can be carried out with little technical effort. The requirements for the sensor accuracy are low, which means that inexpensive sensors can also be used for the method.
Die Möglichkeit eine Radarsensorik einzusetzen ermöglicht die Bestimmung der Ausgangsposition auch bei unzureichenden Witterungsverhältnissen, wie Regen oder Nebel. Des Weiteren kann die Ausgangsposition auch in Gebieten ohne GNSS-Signal präzise ermittelt werden. The option of using radar sensors enables the starting position to be determined even in poor weather conditions, such as rain or fog. Furthermore, the starting position can also be precisely determined in areas without a GNSS signal.
Die Ausgangsposition kann insbesondere zum Umsetzen von automatisierten oder teilautomatisierten Fahrfunktionen verwendet werden. Derartige Fahrfunktionen können beispielsweise auf eine spurgenaue Navigation zugreifen und eine Trajektorienplanung aufweisen. Das Verfahren zum Ermitteln der Ausgangsposition wird im Wesentlichen durch drei Hauptschritte bestimmt. In einem Schritt werden Messdaten der Odometriesensorik und/oder der GNSS-Sensorik des Fahrzeugs separat oder als Sensordatenfusion herangezogen, um die erste Position zu bestimmen. The starting position can in particular be used to implement automated or partially automated driving functions. Driving functions of this type can, for example, access lane-accurate navigation and have trajectory planning. The method for determining the starting position is essentially determined by three main steps. In one step, measurement data from the odometry sensors and / or the GNSS sensors of the vehicle are used separately or as a sensor data fusion in order to determine the first position.
Basierend auf der ersten Position kann ein entsprechender Kartenabschnitt geladen werden, welcher die erste Position und ihren Unsicherheitsbereich abdeckt. In einem dritten Hauptschritt kann der geladene Kartenabschnitt für eine merkmalbasierte Lokalisierung anhand von Messdaten einer LIDAR-Sensorik, einer Radarsensorik und/oder einer Kamerasensorik genutzt werden. Based on the first position, a corresponding map section can be loaded which covers the first position and its uncertainty area. In a third main step, the loaded map section can be used for feature-based localization using measurement data from a LIDAR sensor system, a radar sensor system and / or a camera sensor system.
Nach einem weiteren Aspekt der Erfindung wird ein Steuergerät bereitgestellt, wobei das Steuergerät dazu eingerichtet ist, das Verfahren auszuführen. Das Steuergerät kann beispielsweise ein fahrzeugseitiges Steuergerät, ein fahrzeugexternes Steuergerät oder eine fahrzeugexterne Servereinheit, wie beispielsweise ein Cloud-System, sein. According to a further aspect of the invention, a control device is provided, the control device being set up to carry out the method. The control device can be, for example, a control device on the vehicle, a control device external to the vehicle, or a server unit external to the vehicle, such as a cloud system, for example.
Insbesondere kann das Steuergerät ein Loklaisierungsmodul und/oder ein Initialisierungsmodul aufweisen. Hierdurch kann das Steuergerät das Verfahren zum Ermitteln der Ausgangsposition eines Fahrzeugs und/oder das Verfahren zum Durchführen einer Lokalisierung ausführen. In particular, the control device can have a localization module and / or an initialization module. As a result, the control device can carry out the method for determining the starting position of a vehicle and / or the method for performing a localization.
Darüber hinaus wird nach einem Aspekt der Erfindung ein Computerprogramm bereitgestellt, welches Befehle umfasst, die bei der Ausführung des Computerprogramms durch einen Computer oder ein Steuergerät diesen veranlassen, das erfindungsgemäße Verfahren auszuführen. Gemäß einem weiteren Aspekt der Erfindung wird ein maschinenlesbares Speichermedium bereitgestellt, auf dem das erfindungsgemäße Computerprogramm gespeichert ist. In addition, according to one aspect of the invention, a computer program is provided which comprises commands which, when the computer program is executed by a computer or a control device, cause the computer or a control device to execute the method according to the invention. According to a further aspect of the invention, a machine-readable storage medium is provided on which the computer program according to the invention is stored.
Das Fahrzeug kann gemäß der BASt Norm assistiert, teilautomatisiert, hochautomatisiert und/oder vollautomatisiert bzw. fahrerlos betreibbar sein. According to the BASt standard, the vehicle can be assisted, partially automated, highly automated and / or fully automated or can be operated without a driver.
Das Fahrzeug kann beispielsweise als ein Personenkraftwagen, ein Lastkraftwagen, ein Robotaxi und dergleichen sein. Das Fahrzeug ist nicht auf einen Betrieb auf Straßen beschränkt. Vielmehr kann das Fahrzeug auch als ein Wasserfahrzeug, Luftfahrzeug, wie beispielsweise eine Transportdrohne, und dergleichen ausgestaltet sein. The vehicle can be, for example, a passenger car, a truck, a robotaxi, and the like. The vehicle is not limited to running on roads. Rather, the vehicle can also be used as a Watercraft, aircraft, such as a transport drone, and the like can be configured.
Bei einer weiteren Ausführungsform wird zeitlich von der ersten Ausgangsposition beabstandet mindestens eine zweite Ausgangsposition ermittelt, wobei die erste Ausgangsposition und die mindestens eine zweite Ausgangsposition mit aus Messdaten der Odometriesensorik ermittelten Positionen verglichen werden. Bevorzugterweise wird eine Abweichung zwischen der mindestens einen zweiten Ausgangsposition und einer durch Messdaten der Odometriesensorik ermittelten Position des Fahrzeugs berechnet und eine Konsistenzprüfung durchgeführt. Diese Konsistenzprüfung kann als ein abschließender Schritt des Verfahrens realisiert werden, welcher verlässliche Ergebnisse der Initialisierung sicherstellt. Insbesondere kann diese Konsistenzprüfung in periodischen Umgebungen, wie beispielsweise einem Waldabschnitt oder einer Autobahn, mit einer Vielzahl identischer Fahrbahnbegrenzungen bzw. statischer Merkmale die Korrektheit der Ausgangsposition gewährleisten. In a further embodiment, at least one second starting position is determined at a time spaced apart from the first starting position, the first starting position and the at least one second starting position being compared with positions determined from measurement data from the odometry sensor system. A deviation between the at least one second starting position and a position of the vehicle determined by measurement data from the odometry sensor system is preferably calculated and a consistency check is carried out. This consistency check can be implemented as a final step of the method, which ensures reliable results of the initialization. In particular, this consistency check can guarantee the correctness of the starting position in periodic environments, such as a forest section or a motorway, with a large number of identical road boundaries or static features.
Die Konsistenzprüfung kann technisch besonders einfach umgesetzt werden, wenn die erste der zwei aufeinander folgenden Ausrichtungsergebnisse bzw. Ausgangspositionen mittels Messdaten der Odometriesensorik bis zu dem Zeitpunkt des zweiten Ausrichtungsergebnisses propagiert wird und anschließend die Differenz mit dem tatsächlichen zweiten Ausrichtungsergebnis berechnet wird. Wenn die Differenz unter einem bestimmten Schwellenwert liegt, können die Ausgangspositionen als konsistent betrachtet werden. The consistency check can be implemented in a technically particularly simple manner if the first of the two successive alignment results or starting positions is propagated by means of measurement data from the odometry sensor system up to the point in time of the second alignment result and then the difference with the actual second alignment result is calculated. If the difference is below a certain threshold, the starting positions can be considered to be consistent.
In einer vorteilhaften Ausgestaltung können mehrere konsistente Ausgangspositionen nacheinander ermittelt werden, bevor die Ausgangsposition an die Fahrzeuglokalisierung übergeben wird. In an advantageous embodiment, several consistent starting positions can be determined one after the other before the starting position is transferred to the vehicle localization.
Gemäß einem weiteren Ausführungsbeispiel wird zeitlich von der ersten Ausgangsposition beabstandet mindestens eine zweite Ausgangsposition ermittelt, wobei die erste Ausgangsposition und die mindestens eine zweite Ausgangsposition mit Messdaten der Odometriesensorik zu Trajektorien verknüpft werden. Für jede Trajektorie wird eine Anpassungsgüte ermittelt, wobei eine Trajektorie mit einer höchsten Anpassungsgüte verwendet wird oder alle Trajektorien verworfen werden. Werden die Ausgangspositionen verworfen, dann wird das Verfahren erneut durchgeführt, um eine Ausgangsposition zu ermitteln, welche die Konsistenzprüfung besteht. Hierdurch kann ein Multi-Hypothesen- Tracking verwendet werden. Durch diese Maßnahme kann die Präzision der Ausgangsposition insbesondere in periodischen Umgebungen weiter erhöht werden. According to a further exemplary embodiment, at least one second starting position is determined at a time spaced apart from the first starting position, the first starting position and the at least one second starting position being linked with measurement data from the odometry sensor system to form trajectories. A goodness of fit is determined for each trajectory, where a trajectory with the highest quality of fit is used or all trajectories are discarded. If the starting positions are discarded, the method is carried out again in order to determine a starting position which passes the consistency check. This means that multi-hypothesis tracking can be used. This measure can further increase the precision of the starting position, particularly in periodic environments.
Nach einer weiteren Ausführungsform werden extrahierte statische Merkmale aus älteren Messungen der LIDAR-Sensorik, der Radarsensorik und/oder der Kamerasensorik zum Durchführen eines Abgleichs der extrahierten Merkmale mit in dem Kartenabschnitt hinterlegten Merkmalen verwendet. Der Kartenabschnitt kann hierbei entsprechend des Abstands zwischen einer aktuellen Messung und der älteren Messung vergrößert werden. Dies kann durch Heranziehen von Messdaten der Odometriesensorik realisiert werden. Die älteren Messdaten und die aktuellen Messdaten können vorzugsweise räumlich voneinander beabstandete statische Merkmale aufweisen, welche kombiniert mit den in dem Kartenabschnitt hinterlegten Merkmalen abgleichbar sind, um die erste Ausgangsposition zu ermitteln. Hierdurch kann eine größere Datenwolke zum Ermitteln der ersten Ausgangsposition herangezogen werden. Diese Maßnahme kann beispielsweise statt der Konsistenzprüfung erfolgen. According to a further embodiment, extracted static features from older measurements of the LIDAR sensor system, the radar sensor system and / or the camera sensor system are used to carry out a comparison of the extracted features with the features stored in the map section. The map section can be enlarged according to the distance between a current measurement and the older measurement. This can be achieved by using measurement data from the odometry sensor system. The older measurement data and the current measurement data can preferably have static features which are spatially separated from one another and which, combined with the features stored in the map section, can be compared in order to determine the first starting position. As a result, a larger data cloud can be used to determine the first starting position. This measure can take place, for example, instead of the consistency check.
Gemäß einem weiteren Ausführungsbeispiel werden die extrahierten Merkmale aus den älteren Messungen durch Messdaten der Odometriesensorik mit den extrahierten Merkmalen aus aktuellen Messungen gekoppelt. Hierdurch können die älteren statischen Merkmale, welche beispielsweise wenige Sekunden früher ermittelt wurden, über die zurückgelegte Strecke des Fahrzeugs mit aktuell ermittelten statischen Merkmalen verknüpft werden. Die zurückgelegte Strecke kann über die Odometriesensorik nachvollzogen werden. Hierdurch kann eine vergrößerte Straßengeometrie mit entsprechenden Merkmalen zur Lösung von Unklarheiten oder Mehrdeutigkeiten in periodischen Umgebungen, wie beispielsweise Autobahnen oder Waldabschnitten, eingesetzt werden. According to a further exemplary embodiment, the extracted features from the older measurements are coupled with the extracted features from current measurements using measurement data from the odometry sensor system. In this way, the older static features, which were ascertained a few seconds earlier, for example, can be linked to currently ascertained static features over the distance covered by the vehicle. The distance covered can be traced using the odometry sensors. As a result, an enlarged road geometry with corresponding features can be used to resolve ambiguities or ambiguities in periodic surroundings, such as, for example, motorways or forest sections.
Nach einer weiteren Ausführungsform wird zum Bestimmen der ersten Position ein Optimierungsverfahren eingesetzt. Beispielsweise kann eine Datenstruktur basierend auf einem gleitenden Graph mit über eine Zeitdauer empfangenen Messdaten der Odometriesensorik und der GNSS-Sensorik des Fahrzeugs erstellt und daraus die erste Position ermittelt werden. Durch diese Maßnahme können Messunsicherheiten, Schwankungen und Jitter bei der Bestimmung der ersten Position beseitigt oder reduziert werden. According to a further embodiment, an optimization method is used to determine the first position. For example, a data structure based on a sliding graph with measurement data from the odometry sensors and the GNSS sensors of the vehicle received over a period of time, and the first position can be determined therefrom. This measure can eliminate or reduce measurement uncertainties, fluctuations and jitter when determining the first position.
Gemäß einem weiteren Ausführungsbeispiel werden die Messdaten der Odometriesensorik und/oder der GNSS-Sensorik des Fahrzeugs kontinuierlich empfangen. Des Weiteren wird basierend auf den empfangenen Messdaten kontinuierlich die erste Position bestimmt. Durch diese Maßnahme kann die Verfügbarkeit der ersten Position für die Ermittlung der ersten Ausgangsposition sichergestellt werden. According to a further exemplary embodiment, the measurement data from the odometry sensor system and / or the GNSS sensor system of the vehicle are continuously received. Furthermore, the first position is continuously determined based on the received measurement data. This measure can ensure the availability of the first position for determining the first starting position.
Nach einer weiteren Ausführungsform wird die ermittelte Ausgangsposition zum Durchführen eines Straßenfreigabedienstes eingesetzt. Hierdurch kann das Verfahren dazu eingesetzt werden, um eine Straße oder einen Straßenabschnitt für bestimmte automatisierte oder teilautomatisierte Fahrassistenzfunktionen freizugeben. Dabei kann durch den redundanten Einsatz der Messdaten der Odometriesensorik und der statischen Merkmale eine Manipulation der Ausgangsposition, beispielsweise durch sogenanntes GNSS-Spoofing, verhindert werden. According to a further embodiment, the determined starting position is used to carry out a road clearance service. As a result, the method can be used to release a street or a street section for certain automated or partially automated driver assistance functions. The redundant use of the measurement data from the odometry sensors and the static features can prevent manipulation of the starting position, for example through so-called GNSS spoofing.
Gemäß einem weiteren Aspekt der Erfindung wird ein Verfahren zum Durchführen einer Lokalisierung bereitgestellt, wobei eine durch ein erfindungsgemäßes Verfahren zum Ermitteln einer Ausgangsposition eines Fahrzeugs ermittelte erste Ausgangsposition als Eingangsgröße und/oder als Validierungsgröße empfangen wird. According to a further aspect of the invention, a method for performing a localization is provided, a first starting position determined by a method according to the invention for determining a starting position of a vehicle being received as an input variable and / or as a validation variable.
Durch die ermittelte Ausgangsposition kann die Lokalisierung eines Fahrzeugs auch mit preiswerten Fahrzeugsensoren gegenüber einer digitalen Karte spurgenau erfolgen. Das Verfahren zum Durchführen der Lokalisierung kann einen kontinuierlichen Abgleich von statischen Merkmalen aus Messdaten einer LIDAR-Sensorik, einer Radarsensorik und/oder einer Kamerasensorik des Fahrzeugs mit in der digitalen Karte hinterlegten Merkmalen realisieren. Dies kann beispielsweise durch ein Lokalisierungsmodul des Steuergeräts erfolgen. Da das Verfahren zum Durchführen der Lokalisierung iterativ ausgestaltet ist, kann durch die Bereitstellung der präzisen Ausgangsposition das Fahrzeug besonders genau Lokalisiert werden. Thanks to the determined starting position, a vehicle can also be localized with low-cost vehicle sensors compared to a digital map. The method for performing the localization can implement a continuous comparison of static features from measurement data from a LIDAR sensor system, a radar sensor system and / or a camera sensor system of the vehicle with the features stored in the digital map. This can be done, for example, by a localization module of the control device. Since the method for performing the localization is designed iteratively, the vehicle can be localized particularly precisely by providing the precise starting position.
Insbesondere kann durch die erste Position der Suchbereich für die merkmalsbasierte Lokalisierung auf den mindestens einen Kartenabschnitt beschränkt und der Rechenbedarf gesenkt werden. In particular, the search area for the feature-based localization can be limited to the at least one map section and the computation requirement can be reduced by the first position.
Nach einer Ausführungsform wird das Verfahren zum Ermitteln der Ausgangsposition bzw. Initialposition parallel zum Verfahren zum Durchführen der Lokalisierung durchgeführt. Durch diese Maßnahme kann das Initialisierungsmodul des Steuergeräts während der Lokalisierung auch im Hintergrund laufen. Dabei kann die Ausgabe des Initialisierungsmoduls als zusätzliche Zustandsprüfung der Lokalisiererausgabe verwendet werden. Wird ein Unterschied zwischen der Ausgangsposition und der durch die Lokalisierung ermittelten Fahrzeugposition festgestellt, welcher einen Grenzwert überschreitet, kann eine neue Ausgangsposition für das Lokalisierungsmodul ausgegeben werden und die Lokalisierung des Fahrzeugs erneut eingeleitet. According to one embodiment, the method for determining the starting position or initial position is carried out in parallel with the method for performing the localization. As a result of this measure, the initialization module of the control device can also run in the background during the localization. The output of the initialization module can be used as an additional status check of the localizer output. If a difference between the starting position and the vehicle position determined by the localization is determined which exceeds a limit value, a new starting position can be output for the localization module and the localization of the vehicle can be initiated again.
Im Folgenden werden anhand von stark vereinfachten schematischen Darstellungen bevorzugte Ausführungsbeispiele der Erfindung näher erläutert. Hierbei zeigen In the following, preferred exemplary embodiments of the invention are explained in more detail on the basis of greatly simplified schematic representations. Show here
Fig. 1 eine schematische Draufsicht auf eine Fahrbahn zum Veranschaulichen einer Bestimmung einer ersten Position eines Fahrzeugs, 1 shows a schematic plan view of a roadway to illustrate a determination of a first position of a vehicle,
Fig. 2 eine schematische Draufsicht auf eine Fahrbahn aus Fig.1 und einen Kartenabschnitt, FIG. 2 shows a schematic plan view of a roadway from FIG. 1 and a map section,
Fig. 3,4 schematische Diagramme zum Veranschaulichen einer Konsistenzprüfung, 3, 4 are schematic diagrams to illustrate a consistency check,
Die Figuren 1 bis 4 zeigen schematische Darstellungen zum Veranschaulichen eines Verfahrens zum Ermitteln einer ersten Ausgangsposition A eines Fahrzeugs 2 für eine Lokalisierung des Fahrzeugs 2 durch ein Steuergerät 4. Das Fahrzeug 2 weist eine Odometriesensorik und/oder einer GNSS-Sensorik 6 sowie eine zusätzliche Sensorik 8 für eine merkmalsbasierte Lokalisierung. Die zusätzliche Sensorik 8 kann beispielsweise als eine LIDAR-Sensorik, eine Radarsensorik und/oder eine Kamerasensorik ausgestaltet sein. FIGS. 1 to 4 show schematic representations to illustrate a method for determining a first starting position A of a vehicle 2 for localization of the vehicle 2 by a control device 4. The vehicle 2 has an odometry sensor system and / or a GNSS sensor system 6 and an additional sensor system 8 for feature-based localization. The additional sensor system 8 can be configured, for example, as a LIDAR sensor system, a radar sensor system and / or a camera sensor system.
Die Figur 1 zeigt eine schematische Draufsicht auf eine Fahrbahn 10 zum Veranschaulichen einer Bestimmung einer ersten Position P des Fahrzeugs 2. Das Fahrzeug 2 befährt die Fahrbahn 10 in Fahrtrichtung F. Im dargestellten Ausführungsbeispiel werden während der Fahrt Messdaten durch die Odometriesensorik und die GNSS-Sensorik 6 gesammelt. Dabei werden mehrere zeitlich nacheinander gesammelte Messdaten 12 der Odometriesensorik und der GNSS-Sensorik 6 gespeichert, um die erste Position P zu bestimmen. Die Messdaten 12 der Odometriesensorik und der GNSS-Sensorik 6 können optional geglättet werden, sodass aus den ermittelten Messdaten 12 optimierte Messdaten 14 resultieren. Die ermittelten Messdaten 12 können beispielsweise mittels gleitender Durchschnitte optimiert werden. FIG. 1 shows a schematic top view of a roadway 10 to illustrate a determination of a first position P of the vehicle 2. The vehicle 2 travels on the roadway 10 in the direction of travel F. In the exemplary embodiment shown, measurement data are recorded by the odometry sensors and the GNSS sensors while driving 6 collected. A plurality of measurement data 12 from the odometry sensor system and the GNSS sensor system 6 collected one after the other are stored in order to determine the first position P. The measurement data 12 of the odometry sensor system and the GNSS sensor system 6 can optionally be smoothed so that optimized measurement data 14 result from the measurement data 12 determined. The determined measurement data 12 can be optimized, for example, by means of moving averages.
Die ermittelten Messdaten 12 können eine maximale Anzahl aufweisen, sodass alte Messdaten automatisch gelöscht bzw. durch aktuellere Messdaten überschrieben werden. Die erste Position P kann hierbei als letzte bzw. aktuellste Messung der Odometriesensorik und der GNSS-Sensorik 6 nach der Optimierung bzw. Glättung ausgestaltet sein. The determined measurement data 12 can have a maximum number, so that old measurement data are automatically deleted or overwritten by more recent measurement data. The first position P can be configured as the last or most recent measurement of the odometry sensor system and the GNSS sensor system 6 after optimization or smoothing.
In der Figur 2 ist eine schematische Draufsicht auf eine Fahrbahn 10 aus Fig.1 und auf einen Kartenabschnitt 16 dargestellt. Der Kartenabschnitt 16 ist ein Teil einer Merkmalskarte und weist eine Vielzahl von Merkmalen18 auf. Im dargestellten Ausführungsbeispiel ist die Merkmalskarte eine radarspezifische Merkmalskarte. Der Kartenabschnitt 16 weist eine Position und eine Ausdehnung auf, welche die erste Position P und einen optionalen Unsicherheitsbereich der ersten Position P überlagert bzw. abdeckt. FIG. 2 shows a schematic top view of a roadway 10 from FIG. 1 and of a map section 16. The map section 16 is part of a feature map and has a multiplicity of features 18. In the exemplary embodiment shown, the feature map is a radar-specific feature map. The map section 16 has a position and an extent which overlays or covers the first position P and an optional uncertainty region of the first position P.
Des Weiteren werden extrahierte statische Merkmale 20 aus aktuellen Messungen und statische Merkmale 22 aus älteren Messungen der LIDAR- Sensorik, der Radarsensorik und/oder der Kamerasensorik 8 berücksichtigt, sodass ein vergrößerter Kartenabschnitt 16 zum Durchführen eines Abgleichs von extrahierten statischen Merkmalen 20, 22 mit in dem Kartenabschnitt 16 hinterlegten Merkmalen 18 verwendet wird. Furthermore, extracted static features 20 from current measurements and static features 22 from older measurements of the LIDAR sensor system, the radar sensor system and / or the camera sensor system 8 are taken into account, so that an enlarged map section 16 is used to carry out a comparison of extracted static features 20, 22 with features 18 stored in the map section 16.
Die radarspezifische Merkmalskarte und der Kartenabschnitt 16 sind in Form von Kartenabschnitten 16 hinterlegt, die die Topologie des Straßennetzes bzw. der Fahrbahn 10 abbilden. Der mindestens eine Kartenabschnitt 16 kann in ein Koordinatensystem des Fahrzeugs 2 transformiert werden, welches der Übersicht halber nicht in Figur 2 dargestellt ist. Des Weiteren können die Merkmale 18 des Kartenabschnitts 16 mit den extrahierten statischen Merkmalen 20, 22 verglichen und für eine merkmalsbasierte Lokalisierung zueinander ausgerichtet werden. Eine derartige Ausrichtung kann mit einer Kostenfunktion und einem Optimierungsalgorithmus für die Kostenfunktion realisiert werden. The radar-specific feature map and the map section 16 are stored in the form of map sections 16 which depict the topology of the road network or the roadway 10. The at least one map section 16 can be transformed into a coordinate system of the vehicle 2, which is not shown in FIG. 2 for the sake of clarity. Furthermore, the features 18 of the map section 16 can be compared with the extracted static features 20, 22 and aligned with one another for a feature-based localization. Such an alignment can be realized with a cost function and an optimization algorithm for the cost function.
Die Figur 3 und die Figur 4 zeigen schematische Diagramme zum Veranschaulichen einer Konsistenzprüfung. Die Figur 3 zeigt eine technisch vereinfachte Konsistenzprüfung. Es werden mehrere zeitlich von der ersten Ausgangsposition A beabstandete zweite Ausgangspositionen A2, A3 ermittelt. FIG. 3 and FIG. 4 show schematic diagrams to illustrate a consistency check. FIG. 3 shows a technically simplified consistency check. A plurality of second starting positions A2, A3 spaced apart in time from the first starting position A are determined.
Parallel zu den Ausgangspositionen A, A2, A3 werden Positionen P, P2, P3 mittels der Odometriesensorik 6 ermittelt und mit den Ausgangspositionen A, A2, A3 verglichen. Hierzu kann eine Differenz D bzw. ein Abstand zwischen den Positionen P, P2, P3 und den Ausgangspositionen A, A2 berechnet werden. Die Konsistenzprüfung ist erfolgreich, wenn die Differenz D unterhalb eines vordefinierten Schwellwerts bzw. Grenzwerts liegt. In parallel to the starting positions A, A2, A3, positions P, P2, P3 are determined by means of the odometry sensor system 6 and compared with the starting positions A, A2, A3. For this purpose, a difference D or a distance between the positions P, P2, P3 and the starting positions A, A2 can be calculated. The consistency check is successful if the difference D is below a predefined threshold value or limit value.
Im dargestellten Ausführungsbeispiel sind die ersten beiden Ausgangspositionen A, A2 konsistent bzw. korrekt. Die letzte Ausgangsposition A3 weist eine zu große Abweichung D von der Position P3 auf und ist nicht konsistent. Hierbei kann das Verfahren zum Ermitteln der Ausgangsposition A des Fahrzeugs 2 erneut durchgeführt und einer Konsistenzprüfung unterzogen werden. Vorzugsweise kann die Konsistenzprüfung mehrere erfolgreich geprüfte Ausgangspositionen A, A2, A3 aufweisen, bevor die zuletzt geprüfte Ausgangsposition A3 für eine Lokalisierung des Fahrzeugs 2 freigegeben wird. In der Figur 4 ist eine technisch aufwändigere Konsistenzprüfung illustriert, welche auf einem Muli-Hypothesen Tracking basiert. Es werden mehrere Ausgangspositionen A, A2, A3 mit einer besten Übereinstimmung innerhalb des Kartenabschnitts 16 berücksichtigt. Diese Ausgangspositionen A, A2, A3 werden mit Übereinstimmungen aus der jeweils letzten Ausrichtung der Merkmale 18, 20, 22 gekoppelt. Die Messdaten 12 der Odometriesensorik 6 werden zum Verbinden der Ausgangspositionen A, A2, A3 eingesetzt. Jede der Ausgangspositionen A, A2, A3 kann innerhalb des Kartenabschnitts 16 parallele Ausgangspositionen AP aufweisen, bei welchen die extrahierten Merkmale 20,In the illustrated embodiment, the first two starting positions A, A2 are consistent or correct. The last starting position A3 has too great a deviation D from position P3 and is not consistent. Here, the method for determining the starting position A of the vehicle 2 can be carried out again and subjected to a consistency check. The consistency check can preferably have a plurality of successfully checked starting positions A, A2, A3 before the last checked starting position A3 is released for localization of the vehicle 2. A technically more complex consistency check is illustrated in FIG. 4, which is based on multi-hypothesis tracking. A plurality of starting positions A, A2, A3 with a best match within the map section 16 are taken into account. These starting positions A, A2, A3 are coupled with matches from the last alignment of the features 18, 20, 22. The measurement data 12 of the odometry sensor system 6 are used to connect the starting positions A, A2, A3. Each of the starting positions A, A2, A3 can have parallel starting positions AP within the map section 16, in which the extracted features 20,
22 mit den in dem Kartenabschnitt 16 hinterlegten Merkmalen 18 übereinstimmen. Derartige Ergebnisse der merkmalsbasierten Lokalisierung können bei periodischen Umgebungen, wie beispielsweise Autobahnabschnitten, Vorkommen. Die Messdaten 12 der Odometriesensorik 6 werden in Form von Trajektorien mit den jeweiligen Ausgangspositionen A, A2, A3, AP verglichen, wobei die Ausgangspositionen A, A2, A3, AP mit der höchsten Anpassungsgüte für die weitere Lokalisierung des Fahrzeugs 2 verwendet werden. 22 match the features 18 stored in the map section 16. Such results of the feature-based localization can occur in periodic environments such as, for example, motorway sections. The measurement data 12 of the odometry sensor system 6 are compared in the form of trajectories with the respective starting positions A, A2, A3, AP, the starting positions A, A2, A3, AP with the highest degree of adaptation being used for the further localization of the vehicle 2.

Claims

Ansprüche Expectations
1. Verfahren zum Ermitteln einer Ausgangsposition (A) eines Fahrzeugs (2) für eine Lokalisierung des Fahrzeugs (2) durch ein Steuergerät (4), wobei1. A method for determining a starting position (A) of a vehicle (2) for localization of the vehicle (2) by a control unit (4), wherein
Messdaten (12) von einer Odometriesensorik und/oder einer GNSS- Sensorik (6) des Fahrzeugs (2) empfangen werden, basierend auf den empfangenen Messdaten (12) eine erste Position (P) und ein Unsicherheitsbereich der ersten Position (P) bestimmt werden, mindestens ein Kartenabschnitt (16) einer Merkmalskarte mit einer Vielzahl an hinterlegten Merkmalen (18) empfangen wird, wobei der Kartenabschnitt (16) eine Position und Ausdehnung aufweist, welche die erste Position (P) und den Unsicherheitsbereich überlagert, Messdaten von einer LIDAR-Sensorik, einer Radarsensorik und/oder einer Kamerasensorik (8) empfangen und statische Merkmale (20) aus den empfangenen Messdaten extrahiert werden, eine erste Ausgangsposition (A) des Fahrzeugs (2) durch einen Abgleich der aus Messdaten extrahierten statischen Merkmale (20) mit in dem Kartenabschnitt (16) hinterlegten Merkmalen (18) ermittelt wird. Measurement data (12) are received from an odometry sensor system and / or a GNSS sensor system (6) of the vehicle (2), based on the received measurement data (12) a first position (P) and an uncertainty range of the first position (P) are determined , at least one map section (16) of a feature map with a large number of stored features (18) is received, the map section (16) having a position and extent which superimposes the first position (P) and the uncertainty area, measurement data from a LIDAR Sensor system, a radar sensor system and / or a camera sensor system (8) are received and static features (20) are extracted from the received measurement data, a first starting position (A) of the vehicle (2) by comparing the static features (20) extracted from the measurement data in the map section (16) stored features (18) is determined.
2. Verfahren nach Anspruch 1 , wobei zeitlich von der ersten Ausgangsposition (A) beabstandet mindestens eine zweite Ausgangsposition (A2, A3) ermittelt wird, wobei die erste Ausgangsposition (A) und die mindestens eine zweite Ausgangsposition (A2, A3) mit aus Messdaten (12) der Odometriesensorik (6) ermittelten Positionen (P, P2, P3) verglichen werden, wobei eine Abweichung (D) zwischen der mindestens einen zweiten Ausgangsposition (A2, A3) und einer durch Messdaten (12) der Odometriesensorik (6) ermittelten Position (P2, P3) des Fahrzeugs (2) berechnet und eine Konsistenzprüfung durchgeführt wird. 2. The method according to claim 1, wherein at least one second starting position (A2, A3) is determined at a time spaced apart from the first starting position (A), the first starting position (A) and the at least one second starting position (A2, A3) with from measurement data (12) positions (P, P2, P3) determined by the odometry sensor system (6) are compared, a deviation (D) between the at least one second starting position (A2, A3) and one determined by measurement data (12) from the odometry sensor system (6) Position (P2, P3) of the vehicle (2) is calculated and a consistency check is carried out.
3. Verfahren nach Anspruch 1 , wobei zeitlich von der ersten Ausgangsposition (A) beabstandet mindestens eine zweite Ausgangsposition (A2, A3, AP) ermittelt wird, wobei die erste Ausgangsposition (A) und die mindestens eine zweite Ausgangsposition (A2, A3, AP) mit Messdaten (12) der Odometriesensorik (6) zu Trajektorien verknüpft werden, wobei für jede Trajektorie eine Anpassungsgüte ermittelt wird, wobei eine Trajektorie mit einer höchsten Anpassungsgüte verwendet wird oder alle Trajektorien verworfen werden. 3. The method according to claim 1, wherein at least one second starting position (A2, A3, AP) is determined at a time spaced apart from the first starting position (A), the first starting position (A) and the at least one second starting position (A2, A3, AP) ) are linked with measurement data (12) of the odometry sensor system (6) to form trajectories, a quality of fit being determined for each trajectory, a trajectory with the highest quality of fit being used or all trajectories being discarded.
4. Verfahren nach Anspruch 1 , wobei extrahierte statische Merkmale (22) aus älteren Messungen der LIDAR-Sensorik, der Radarsensorik und/oder der Kamerasensorik (8) zum Durchführen eines Abgleichs der extrahierten Merkmale (22) mit in dem Kartenabschnitt (16) hinterlegten Merkmalen (18) verwendet werden. 4. The method according to claim 1, wherein extracted static features (22) from older measurements of the LIDAR sensors, the radar sensors and / or the camera sensors (8) for performing a comparison of the extracted features (22) with stored in the map section (16) Features (18) are used.
5. Verfahren nach Anspruch 4, wobei die extrahierten statischen Merkmale (22) aus den älteren Messungen durch Messdaten (12) der Odometriesensorik (6) mit den extrahierten statischen Merkmalen (20) aus aktuellen Messungen gekoppelt werden. 5. The method according to claim 4, wherein the extracted static features (22) from the older measurements by measurement data (12) of the odometry sensor system (6) are coupled with the extracted static features (20) from current measurements.
6. Verfahren nach einem der Ansprüche 1 bis 5, wobei zum Bestimmen der ersten Position (P) ein Optimierungsverfahren eingesetzt wird. 6. The method according to any one of claims 1 to 5, wherein an optimization method is used to determine the first position (P).
7. Verfahren nach einem der Ansprüche 1 bis 6, wobei die Messdaten (12) der Odometriesensorik und/oder der GNSS-Sensorik (6) des Fahrzeugs (2) kontinuierlich empfangen werden und basierend auf den empfangenen Messdaten (12) kontinuierlich die erste Position (P) bestimmt wird. 7. The method according to any one of claims 1 to 6, wherein the measurement data (12) of the odometry sensors and / or the GNSS sensors (6) of the vehicle (2) are continuously received and based on the received measurement data (12) continuously the first position (P) is determined.
8. Verfahren nach einem der Ansprüche 1 bis 7, wobei die ermittelte Ausgangsposition (A) zum Durchführen eines Straßenfreigabedienstes eingesetzt wird. 8. The method according to any one of claims 1 to 7, wherein the determined starting position (A) is used to carry out a road clearance service.
9. Verfahren zum Durchführen einer Lokalisierung, wobei eine durch ein Verfahren gemäß einem der vorhergehenden Ansprüche ermittelte erste Ausgangsposition (A) als Eingangsgröße und/oder als Validierungsgröße empfangen wird. 9. A method for performing a localization, wherein a first starting position (A) determined by a method according to one of the preceding claims is received as an input variable and / or as a validation variable.
10. Verfahren nach Anspruch 9, wobei das Verfahren zum Ermitteln der Ausgangsposition gemäß einem der Ansprüche 1 bis 8 parallel zum Verfahren zum Durchführen der Lokalisierung gemäß Anspruch 9 durchgeführt wird. 10. The method according to claim 9, wherein the method for determining the starting position according to one of claims 1 to 8 is carried out in parallel with the method for performing the localization according to claim 9.
11. Steuergerät (4), wobei das Steuergerät (4) dazu eingerichtet ist, das Verfahren gemäß einem der Ansprüche 1 bis 8 und/oder das Verfahren gemäß einem der Ansprüche 9 oder 10 auszuführen. 11. Control device (4), wherein the control device (4) is set up to carry out the method according to one of claims 1 to 8 and / or the method according to one of claims 9 or 10.
12. Computerprogramm, welches Befehle umfasst, die bei der Ausführung des12. Computer program, which comprises instructions that are used in the execution of the
Computerprogramms durch einen Computer oder ein Steuergerät (4) diesen veranlassen, das V Verfahren gemäß einem der Ansprüche 1 bis 8 und/oder das Verfahren gemäß einem der Ansprüche 9 oder 10 auszuführen. Computer program by a computer or a control device (4) cause the latter to carry out the method according to one of claims 1 to 8 and / or the method according to one of claims 9 or 10.
13. Maschinenlesbares Speichermedium, auf welchem das Computerprogramm gemäß Anspruch 12 gespeichert ist. 13. Machine-readable storage medium on which the computer program according to claim 12 is stored.
EP21732875.6A 2020-06-30 2021-06-14 Determining a starting position of a vehicle for locating Pending EP4172564A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102020208082.8A DE102020208082A1 (en) 2020-06-30 2020-06-30 Determining a starting position of a vehicle for localization
PCT/EP2021/065895 WO2022002564A1 (en) 2020-06-30 2021-06-14 Determining a starting position of a vehicle for locating

Publications (1)

Publication Number Publication Date
EP4172564A1 true EP4172564A1 (en) 2023-05-03

Family

ID=76483316

Family Applications (1)

Application Number Title Priority Date Filing Date
EP21732875.6A Pending EP4172564A1 (en) 2020-06-30 2021-06-14 Determining a starting position of a vehicle for locating

Country Status (6)

Country Link
US (1) US20230204364A1 (en)
EP (1) EP4172564A1 (en)
JP (1) JP7458514B2 (en)
CN (1) CN116324338A (en)
DE (1) DE102020208082A1 (en)
WO (1) WO2022002564A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115993089B (en) * 2022-11-10 2023-08-15 山东大学 PL-ICP-based online four-steering-wheel AGV internal and external parameter calibration method

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4732937B2 (en) 2006-03-29 2011-07-27 パイオニア株式会社 POSITION DETECTION DEVICE, ITS METHOD, ITS PROGRAM, AND RECORDING MEDIUM
DE102010033729B4 (en) 2010-08-07 2014-05-08 Audi Ag Method and device for determining the position of a vehicle on a roadway and motor vehicles with such a device
US9140792B2 (en) 2011-06-01 2015-09-22 GM Global Technology Operations LLC System and method for sensor based environmental model construction
US20130147661A1 (en) * 2011-12-07 2013-06-13 International Business Machines Corporation System and method for optical landmark identification for gps error correction
JP2015114126A (en) 2013-12-09 2015-06-22 株式会社デンソー Vehicle location detection device
DE102014223363B4 (en) * 2014-11-17 2021-04-29 Volkswagen Aktiengesellschaft Method and device for localizing a motor vehicle in a fixed reference map
DE102016004370A1 (en) 2016-04-09 2017-02-16 Daimler Ag Method for determining the position of vehicles
JP6614124B2 (en) 2016-12-21 2019-12-04 株式会社デンソー Emergency call device

Also Published As

Publication number Publication date
WO2022002564A1 (en) 2022-01-06
JP7458514B2 (en) 2024-03-29
JP2023532729A (en) 2023-07-31
US20230204364A1 (en) 2023-06-29
CN116324338A (en) 2023-06-23
DE102020208082A1 (en) 2021-12-30

Similar Documents

Publication Publication Date Title
EP3584663B1 (en) Method for automatic transverse guidance of a follow vehicle in a vehicle platoon
DE102015111535B4 (en) Algorithm for precise curvature estimation for the path planning of autonomous vehicles
DE102017009435B4 (en) Evaluation of components of automatic driving functions and lane recognition at different processing levels
EP3271231B1 (en) Method and device for monitoring a target trajectory to be travelled by a vehicle for absence of collisions
WO2020109516A1 (en) Systems and methods for map matching
EP3491339A1 (en) Method, device and computer-readable storage medium with instructions for determining the lateral position of a vehicle relative to the lanes of a road
WO2018019454A1 (en) Method and device for determining a roadway model for the surroundings of a vehicle
DE102017216238A1 (en) Method for determining a position of a motor vehicle in an environment and control device for a motor vehicle and computing device for operating on a data network
WO2017202570A1 (en) Method, device and computer readable storage medium with instructions for determining the lateral position of a vehicle relative to the lanes of a carriageway
DE102020210515A1 (en) Method for checking detected changes for an environment model of a digital environment map
WO2022002564A1 (en) Determining a starting position of a vehicle for locating
WO2021130066A1 (en) Training neural networks using a neural network
EP3673234A1 (en) Method and device for determining a highly precise position and for operating an automated vehicle
WO2018095669A1 (en) Method and device for determining an exact position of a vehicle based on radar signatures of the vehicle environment
EP3963287B1 (en) Method and apparatus for creating a first map
WO2021239789A1 (en) Method and apparatus for providing a high-resolution digital map
DE102019132967A1 (en) Method and device for determining a lane hypothesis
DE102018210712A1 (en) System and method for simultaneous localization and mapping
DE102021102652B3 (en) Method and control device for determining whether a motor vehicle has driven on a road contained in digital map material
WO2021018448A1 (en) Method and device for creating a map and for operating a vehicle
EP4153943A1 (en) Method for determining an initial position of a vehicle
EP3969846A1 (en) Method for validating the up-to-dateness of a map
DE102021214763A1 (en) Method and control device for controlling an automated vehicle
DE102022203264A1 (en) Method for creating map data
DE102020216496A1 (en) Method for operating an at least partially automated vehicle

Legal Events

Date Code Title Description
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: UNKNOWN

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE

PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20230130

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)