EP2771873A1 - Gitterbasiertes umfeldmodell für ein fahrzeug - Google Patents

Gitterbasiertes umfeldmodell für ein fahrzeug

Info

Publication number
EP2771873A1
EP2771873A1 EP12787353.7A EP12787353A EP2771873A1 EP 2771873 A1 EP2771873 A1 EP 2771873A1 EP 12787353 A EP12787353 A EP 12787353A EP 2771873 A1 EP2771873 A1 EP 2771873A1
Authority
EP
European Patent Office
Prior art keywords
grid
vehicle
evaluation
data
control unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
EP12787353.7A
Other languages
English (en)
French (fr)
Other versions
EP2771873B1 (de
Inventor
Ralph GREWE
Stefan Hegemann
Andree Hohm
Stefan LÜKE
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Continental Teves AG and Co OHG
Aumovio Microelectronic GmbH
Original Assignee
Conti Temic Microelectronic GmbH
Continental Teves AG and Co OHG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Conti Temic Microelectronic GmbH, Continental Teves AG and Co OHG filed Critical Conti Temic Microelectronic GmbH
Publication of EP2771873A1 publication Critical patent/EP2771873A1/de
Application granted granted Critical
Publication of EP2771873B1 publication Critical patent/EP2771873B1/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/161—Decentralised systems, e.g. inter-vehicle communication
    • G08G1/163—Decentralised systems, e.g. inter-vehicle communication involving continuous checking
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems

Definitions

  • the invention is in the technical field of environmental detection with sensors in a vehicle.
  • the sensor data is prepared in a suitable manner to a
  • Prior art is e.g. a grid-based environment model.
  • the environment of a vehicle is subdivided into cells, and for each cell a feature or several characteristics for the environment description is stored.
  • object-based methods for environment modeling which provide the position data of detected objects, belong to the state of the art.
  • Grid-based methods are that the whole environment of the vehicle is described.
  • the information from sensor data for free and object-occupied and unknown areas is made available instead of only for areas occupied with objects (object-based methods) in the environment model.
  • the explicit modeling of free areas is becoming more important. Since many newer assistance functions, such as an evasion assistant, information about a space that is usable as a maneuver room for the vehicle need.
  • Grid-based methods for the environment description usually require a larger amount of data than object-based methods and thus requires an application in the vehicle larger storage resources and transmission bandwidths.
  • a method for a sensor system for environment detection for a motor vehicle wherein a grid-based environmental model is calculated.
  • a grid-based environment model is based on dividing the environment of a vehicle into cells and storing for each cell a characteristic descriptive of the environment. Storing sensor raw data or storing a classification for each cell as a probability value, eg storing the probability that a cell is occupied or not occupied, requires a high storage capacity, which also requires a bus system with high bandwidth in a transmission from or to a control unit.
  • each grid cell is assigned at least one discrete value (class).
  • the discrete value or the class is a measure of whether an object is at the position that is represented by the grid cell and whether this object is traversable or with what probability the object is traversable.
  • the discretization or classifica- tion of a class is carried out by the evaluation of
  • Environment data containing statements about detected environment objects, and at least one threshold value.
  • the number of thresholds can be defined as desired and influences the number of possible classes. With a threshold value a maximum of two discrete values or classes, with two threshold values a maximum of three discrete values or classes can be limited.
  • a lossless compression method is applied to the discrete values of a grid, in particular prior to transmission via a data transmission system in the vehicle. This includes grid values that were compressed before being transmitted.
  • Compression method applied to the discrete values of a grid, in particular before transmission via a data transmission system in the vehicle.
  • the discrete values of the grid which represent areas further from the vehicle, are more compressed.
  • the discrete values of the grid are compressed more strongly.
  • the rear side of a construction site wall, which is arranged facing away from the vehicle is compressed more strongly than the front side of the construction site wall, which is arranged facing the vehicle.
  • Assignment table is carried out, the assignment table in the memory of the evaluation is deposited.
  • the change of the content of a plurality of grid cells, the Verkdnungstabelle changed. Due to the changed ZuOrdnungsvorschrift a discrete value or a class changed one
  • Assign value range of the environment data the content of all cells can be changed at once, without recalculating the discrete values in each grid cell and to
  • the environment model is transmitted based on discrete values in the grid via a data transmission system in a vehicle to an evaluation or control unit.
  • the data transmission system is preferably a bus system in the vehicle, which connects at least two evaluation or control units.
  • an evaluation unit creates the grid-based environment model and a further evaluation or control unit uses the environment model to control a
  • the invention claimed here comprises a sensor system for object detection for a vehicle having a first computing and evaluation unit on which a method as described above is stored.
  • Data transmission system provided, via the data transmission system, the first is connected to the second evaluation or control unit in a vehicle.
  • the first evaluation or control unit for creating an environment model and the second evaluation or control unit for controlling a driver assistance system is provided.
  • a grid-based environment model is based on dividing the environment of a vehicle into cells and storing for each cell a characteristic descriptive of the environment. Saving sensor raw data or storing a classification for each cell as a probability, eg the probability that a cell is busy or unoccupied, requires a high storage capacity, which also requires a high bandwidth bus system when transferred to or from a controller. Direct application of a compression method to a calculated grid often does not result in high compression. tion factor, since the probabilities of neighboring cells often differ only minimally. By way of example, such a grid is shown on the left in FIG.
  • a use of the environment data, in particular in a vehicle for a driver assistance system usually requires a binary decision, is decided on the basis of a threshold for the probability of whether the cell is occupied and thus not overridden or free for a vehicle and thus overridden for a vehicle , Of importance, therefore, are discrete decision classes, e.g. with a numerical value or similar state the states occupied / free for a grid cell.
  • the creation of the environment model with the calculation of the binary values of the grid cells, or discrete values of the grid cells in the case of more than two decision classes is performed by a first evaluation or control unit and then to a second Ausirel. Transfer control unit.
  • the second evaluation and control unit serves to control driver assistance functions, e.g. the output of a brake, steering, light control or warning signal and the first evaluation and control unit is the evaluation unit of a sensor system for environment detection.
  • driver assistance functions e.g. the output of a brake, steering, light control or warning signal
  • the first evaluation and control unit is the evaluation unit of a sensor system for environment detection.
  • the values of the grid cells are updated at given time intervals. It consists of temporally successive values of the lattice cells in binary
  • a lossy method can be used. This can be used on the one hand for a further reduction of the data rate, but also in order to obtain a constant data rate after the compression, as is usually required for automotive applications. In doing so, areas further from the vehicle are compressed more, since the required accuracy of the environment modeling decreases with the distance to the vehicle (e.g., parking assistance to crossways on highways).
  • features facing the vehicle are particularly relevant, so that alternatively or additionally the features facing away from the vehicle can be compressed more strongly (for example, front / back of a construction site wall). For this purpose, in particular, a tree of four, in which further loss or the vehicle remote areas by limiting the depth of the tree, such lossy compression can be achieved.
  • the difference data for a recalculation can be transmitted in comparison to the previously valid ones.
  • An important point of the invention is thus the application of a threshold value formation before the application of compression methods, because only after the threshold value formation a high spatial and temporal correlation, which enables high compression factors, is present.
  • the assignment of the discrete value based on the environment data using an assignment table is carried out, wherein the
  • Mapping table in the memory of the evaluation unit hineaches is. In the allocation table all, so the thresholds are stored, which allows the assignment to a discrete value.
  • An assignment table is given here by way of example.
  • a problem-adapted discretization eg, logarithmic
  • a further advantage of displaying functions via tables is the easy verifiability of the input and output values, and special cases can also be handled by corresponding entries in the table.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

Es wird ein Verfahren für ein Sensorsystem zur Umfelderfassung für ein Kraftfahrzeug mit Auswerteeinheit angegeben, wobei ein gitterbasiertes Umfeldmodell berechnet wird und jeder Gitterzelle zumindest ein diskreter Wert zugeordnet wird. Eine Diskretisierung erfolgt durch Vergleich von Umfelddaten und zumindest einem Schwellwert. Vorzugswiese wird zumindest ein diskreter Wert des Gitters, über ein Datenübertragungssystem in einem Fahrzeug zu einer Auswerte- oder Steuereinheit übertragen.

Description

Gitterbasiertes Umfeldmodell für ein Fahrzeug
Die Erfindung liegt auf dem technischen Gebiet der Umgebungserfassung mit Sensoren in einem Fahrzeug. Die Sensordaten werden in geeigneter Weise aufbereitet, um ein
Umfeldmodell für weitere Applikationen insbesondere Fahrerassistenzfunktionen zur Verfügung zu stellen.
Stand der Technik ist z.B. ein gitterbasiertes Umfeldmodell. Dazu wird das Umfeld eines Fahrzeuges in Zellen zu unterteilen und für jede Zelle wird ein Merkmal oder mehrere Merkmale zur Umfeldbeschreibung gespeichert. Weiterhin gehören objektbasierten Verfahren zur Umfeldmodellierung, die die Positionsdaten von erkannten Objekten zur Verfügung stellen, zum Stand der Technik.
Ein Vorteil der gitterbasierte Verfahren ist es, dass das ganze Umfeld des Fahrzeugs beschrieben wird. Es werden die Informationen aus Sensordaten für freie und mit Objekten belegte und unbekannte Bereiche statt nur für mit Objekten belegte Bereiche (objektbasierten Verfahren) im Umfeldmodell zur Verfügung gestellt. Die explizite Modellierung von freien Bereichen gewinnt an Bedeutung. Da viele neuere Assistenzfunktionen, wie z.B. ein Ausweichassistent, Informationen über einen Freiraum, der als Manöverraum für das Fahrzeug nutzbar ist, benötigen. Gitterbasierte Verfahren zur Umfeld beschreibung benötigen in der Regel eine größere Datenmenge als objektbasierte Verfahren und damit erfordert eine Applikation im Fahrzeug größere Speicherresourcen und Übertragungsbandbreiten.
Es ist die Aufgabe der hier vorliegenden Erfindung, die Daten eines gitterbasierten
Umfeldmodells so zu komprimieren, dass eine Verwendung im Fahrzeug und insbesondere eine Übertragung der Umfeldmodelldaten über übliche Fahrzeugbussysteme zwischen Steuergeräten möglich ist.
Die Aufgabe wird durch die Merkmale der unabhängigen Ansprüche gelöst.
Es wird ein Verfahren für ein Sensorsystem zur Umfelderfassung für ein Kraftfahrzeug beansprucht, wobei ein gitterbasiertes Umfeldmodell berechnet wird. Ein gitterbasiertes Umfeldmodell basiert darauf, das Umfeld eines Fahrzeuges in Zellen zu unterteilen und für jede Zelle ein das Umfeld beschreibendes Merkmal zu speichern. Das Speichern von Sensorrohdaten oder das Speichern einer Klassifikation für jede Zelle als Wahrscheinlichkeitswert, z.B. ein Speichern der Wahrscheinlichkeit, dass eine Zelle belegt oder nicht belegt ist, benötigt eine hohe Speicherkapazität, der bei einer Übertragung von oder zu einem Steuergerät zudem ein Bussystem mit hoher Bandbreite erfordert.
Erfindungsgemäß wird jeder Gitterzelle zumindest ein diskreter Wert (Klasse) zugeordnet. Insbesondere ist der diskrete Wert bzw. die Klasse ein Maß dafür, ob sich ein Objekt an der Position befindet, die durch die Gitterzelle repräsentiert wird und ob dieses Objekt überfahrbar ist oder mit welcher Wahrscheinlichkeit das Objekt überfahrbar ist.
Die Diskretisierung bzw. Zurdnung einer Klasse erfolgt durch die Auswertung von
Umfelddaten, die Aussagen über erfasste Umgebungsobjekte enthalten, und zumindest einem Schwellwert. Die Anzahl der Schwellwerte kann beliebig definiert werden und beeinflusst die Anzahl der möglichen Klassen. Mit einem Schwellwert können maximal zwei diskrete Werte bzw. Klassen, bei zwei Schwellwerten maximal drei diskrete Werte bzw. Klassen begrenzt werden.
Vorzugsweise wird ein verlustfreies Kompressionverfahren auf die diskreten Werte eines Gitters angewendet, insbesondere vor einer Übertragung über ein Datenübertragungssystem im Fahrzeug. Dies umfasst auch Gitterwerte, die vor einer Übertragung komprimiert wurden.
In einer bevorzugten Ausgestaltung der Erfindung wird eine Kompression durch
Dekorrelation der zeitlichen Abhängigkeit, d.h. durch eine Differenzbildung zeitlich aufeinanderfolgender diskreter Werte der Gitterzellen eine Kompression der Daten erreicht. Insbesondere werden nur die Differenzwerte über ein Datenübertragungssystem im Fahrzeug übertragen.
In einer weiteren positiven Ausgestaltung der Erfindung , wird ein verlustbehaftetes
Kompressionsverfahren auf die auf die diskreten Werte eines Gitters angewendet, insbesondere vor einer Übertragung über ein Datenübertragungssystem im Fahrzeug.
Insbesondere werden dazu die diskreten Werte des Gitters, die weiter vom Fahrzeug entfernte Bereiche repräsentieren, stärker komprimiert.
Vorzugsweise werden alternativ oder zusätzlich die diskreten Werte des Gitters, die dem Fahrzeug abgewandte Merkmale repräsentieren, stärker komprimiert. Z.B. wird die Rückseite einer Baustellenwand, die dem Fahrzeug abgewandt angeordnet ist, stärker komprimiert als die Vorderseite der Baustellenwand, die dem Fahrzeug zugewandt angeordnet ist.
Eine besonders recheneffiziente Ausgestaltung der Erfindung sieht vor, dass die Zuordnung des diskreten Werts bzw. der Klasse anhand der Umfelddaten mit Hilfe einer
Zuordnungstabelle erfolgt, wobei die Zuordnungstabelle im Speicher der Auswerteeinheit hinterlegt ist. In einer bevorzugten Ausgestaltung der Erfindung wird zur Änderung des Inhalts einer Mehrzahl von Gitterzellen, die Zurdnungstabelle verändert. Durch die geänderte ZuOrdnungsvorschrift die einem diskreten Wert bzw. eine Klasse einen veränderten
Wertebereich der Umfelddaten zuordnen kann der Inhalt aller Zellen auf einmal verändert werden, ohne die diskreten Werte in jeder Gitterzelle neu zu berechnen und zu
überschreiben.
In einer bevorzugten Ausgestaltung der Erfindung wird das Umfeldmodell basierend auf diskreten Werte im Gitter über ein Datenübertragungssystem in einem Fahrzeug zu einer Auswerte- oder Steuereinheit übertragen. Das Datenübertragungssystem ist vorzugsweise ein Bussystem im Fahrzeug, das zumindest zwei Auswerte- bzw. Steuereinheiten verbindet. Vorzugsweise erstellt eine Auswerteeinheit das gitterbasierte Umfeldmodell und eine weitere Auswerte- bzw. Steuereinheit nutzt das Umfeldmodell zur Steuerung einer
Fahrerassistenzfunktion.
Die hier beanspruchte Erfindung umfasst ein Sensorsystem zur Objekterfassung für ein Fahrzeug mit einer erste Rechen- und Auswerteeinheit auf der ein Verfahren wie zuvor beschrieben hinterlegt ist.
Insbesondere ist eine zweite Auswerte- oder Steuereinheit und ein
Datenübertragungssystem vorgesehen, wobei über das Datenübertragungssystem die erste mit der zweite Auswerte- oder Steuereinheit in einem Fahrzeug verbunden ist.
In einer bevorzugten Ausgestaltung der Erfindung ist die erste Auswerte- oder Steuereinheit zur Erstellung eines Umfeldmodells und die zweite Auswerte- oder Steuereinheit zur Steuerung eines Fahrerassistenzsystems vorgesehen.
Die Erfindung wird im Folgenden anhand von Ausführungsbeispielen und Abbildungen näher erläutert.
Ein gitterbasiertes Umfeldmodell basiert darauf, das Umfeld eines Fahrzeuges in Zellen zu unterteilen und für jede Zelle ein das Umfeld beschreibendes Merkmal zu speichern. Das Speichern von Sensorrohdaten oder das Speichern einer Klassifikation für jede Zelle als Wahrscheinlichkeit, z.B. die Wahrscheinlichkeit, dass eine Zelle belegt oder nicht belegt ist, benötigt eine hohe Speicherkapazität, der bei einer Übertragung von oder zu einem Steuergerät zudem ein Bussystem mit hoher Bandbreite erfordert. Eine direkte Anwendung eines Komprimierungverfahren auf ein berechnetes Gitter führt oft nicht zu einem hohen Kompres- sionsfaktor, da sich die Wahrscheinlichkeiten benachbarter Zellen oft nur minimal unterscheiden. Beispielhaft ist ein solches Gitter ist in Figur 1 links dargestellt.
Eine Verwendung der Umfelddaten insbesondere in einem Fahrzeug für ein Fahrerassistenzsystem fordert in der Regel eine binäre Entscheidung, bei der anhand eines Schwellwertes für die Wahrscheinlichkeit entschieden wird, ob die Zelle belegt und damit für ein Fahrzeug nicht überfahrbar oder frei und damit für ein Fahrzeug überfahrbar ist. Von Bedeutung sind also diskrete Entscheidungsklassen die z.B. mit einem Zahlenwert o.ä. die Zustände belegt/frei für eine Gitterzelle angeben. In einer positiven Ausgestaltung der Erfindung, wird die Erstellung des Umfeldmodells mit der Berechnung der binären Werte der Gitterzellen, bzw. diskreten Werte der Gitterzellen im Fall von mehr als zwei Entscheidungsklassen durch eine erste Auswerte- bzw. Steuereinheit durchgeführt und danach an eine zweite Auswertebzw. Steuereinheit übertragen.
In diesem Ausführungsbeispiel dient die zweite Auswerte- und Steuereinheit der Steuerung von Fahrerassistenzfunktionen, nämlich z.B. der Ausgabe eines Brems-,Lenk-, Lichtsteue- rungs- oder Warnsignals und die erste Auswerte- und Steuereinheit ist die Auswerteeinheit eines Sensorsystems zur Umfelderfassung. Nach der Diskretisierung bzw. Klassifikation der in den Gitterzellen hinterlegten Werte liegen große Bereiche mit hoher räumlicher Korrelation vor. Dies ist beispielhaft in Figur 1 dargestellt. In Figur 1 links ist ein Gitter vor der
Diskretisierung der Gitterwerte und in Fig 1 rechts ein Gitter mit diskretisierten Werten dargestellt. In Figur 1 rechts gibt es nunmehr zwei Zustände, nämlich nicht gefüllte oder gefüllte Gitterzellen, die zusammenhängende Bereiche bilden. Hier kann mit der Anwendung von bekannten Kompressionsverfahren zur räumlichen Dekorellation wie z.B. Lauflängencodierung oder Viererbäumen auf die diskreten Werte eine hohe Datenkompression erzielt werden.
Die Werte der Gitterzellen werden in vorgegeben zeitlichen Abständen aktualisiert. Es besteht zwischen zeitlich aufeinanderfolgenden Werten der Gitterzellen in binärer
(diskretisierter) Darstellung i.d.R. eine hohe zeitliche Korrelation, da sich selbst bei Integration neuer Messdaten zwar die Wahrscheinlichkeit in einer Zelle ändert, die Zuordnung zu einer diskreten Klasse anhand des Schwellwertes aber in vielen Fällen nicht. In einer bevorzugten Ausgestaltung der Erfindung wird durch Dekorrelation der zeitlichen Abhängigkeit, d.h. die Differenzbildung zeitlich aufeinanderfolgender Gitter) eine weitere starke Kompression der Daten erreicht. Dies ist beispielhaft in Figur 2 dargestellt. In Figur 2 links ist ein Gitter mit diskretisierten Werten des Messzyklus n dargestellt. In Figur 2 rechts ist ein Gitter mit diskretisierten Werten des darauffolgenden Messzyklus n+1 dargestellt. Bildet man nun die Differenz der einander entsprechenden Gitterzellen„Differenz Grid (n+1 )- Grid (n)" so stellt man fest, dass sich nur der diskretisierte Wert von 3 Gitterzellen verändert hat. Diese Zellen sind in der Figur 2 rechts mit einer fett gedruckten Umrandung markiert.
Neben einem verlustfreien Kompressionsverfahren oder auch allein kann in einem weiteren Ausführungsbeispiel ein verlustbehaftetes Verfahren zum Einsatz kommen. Dies kann zum einen zu einer weiteren Reduktion der Datenrate verwendet werden, aber auch, um nach der Kompression eine konstante Datenrate zu erhalten, wie es für Automotive Anwendungen üblicherweise gefordert wird. Dabei werden weiter vom Fahrzeug entfernte Bereiche stärker komprimiert, da die erforderliche Genauigkeit der Umfeldmodellierung mit der Entfernung zum Fahrzeug abnimmt (z.B. Einparkassistenz gegenüber Querführung auf Autobahnen). Desweiteren sind insbesondere dem Fahrzeug zugewandte Merkmale relevant, so dass alternativ oder zusätzlich dem Fahrzeug abgewandte Merkmale stärker komprimiert werden können (z.B. Vorder-/Rückseite einer Baustellenwand). Hierfür eignet sich insbesondere ein Viererbaum, bei dem in weiter entfernen bzw. dem Fahrzeug abgewandten Bereichen durch Begrenzung der Baumtiefe eine derartige verlustbehaftete Kompression erzielt werden kann.
Durch die Übertragung nur von Differenzenwerten lässt sich auf Anwendungsseite, d.h. bei der Auswertung oder Funktionssteuerung, weitere Rechenzeit sparen. Insbesondere können die Differenzdaten für eine Neuberechnungen im Vergleich zu den zuvor gültigen übertragen werden.
Ein wichtiger Punkt der Erfindung ist also die Anwendung einer Schwellwertbildung vor der Anwendung von Kompressionsverfahren, da erst nach der Schwellwertbildung eine hohe räumliche und zeitliche Korrelation, die hohe Kompressionsfaktoren ermöglicht, vorliegt.
Vorteilhaft ist, dass durch Verlagerung der Schwellwertbildung von der Funktion zur Berechnung des Umfeldmodells Kompressionsverfahren effektiv auf das gitterbasierte
Umfeldmodell angewandt werden können, die so eine Übertragung des gitterbasierten Umfeldmodells über Automotive-Bussysteme ermöglichen.
Weitere Vorteile können Reduktion an Speicherbedarf im Funktionssteuergerät sowie Reduktion an benötigten CPU-Ressourcen sein, da nach Anwendung eines Kompressionsverfahrens zusammenhängende Bereiche, die gleich Klassifiziert sind, mit einer Operation zu- sammenhängend statt Zelle für Zelle bearbeitet werden können. Beispielsweise wären in Abbildung 1 rechts zwei neue Werte zu berechnen statt 25 in Abbildung 1 links.
In einer bevorzugten Ausgestaltung der Erfindung die Zuordnung des diskreten Werts anhand der Umfelddaten mit Hilfe einer Zuordnungstabelle erfolgt, wobei die
Zuordnungstabelle im Speicher der Auswerteeinheit hintelegt ist. In der Zuordnungstaballe sind also die Schwellwerte hinterlegt, die die Zuordnung zu einem diskreten Wert ermöglicht. Eine Zuordnungstabelle wird hier beispielhaft angegeben.
Tabelle 1
Insbesondere wird zur Änderung der Werte einer Mehrzahl von Gitterzellen vorzugsweise aller Gitterzellen, nur die Zurdnungstabelle mit den Schwellwerten verändert. Neben einer linearen Abbildung für die Diskretisierung wie in Tabelle 1 gezeigt, kann eine problemange- passte Diskretisierung (z.B. logarithmisch) verwendet werden, die in weniger relevanten Bereichen der kontinuierlichen Eingangswerte große Diskretisierungsschritte verwendet und dadurch bei gleicher Zahl von diskreten Klassen die relevanten Bereiche feiner auflösen kann.
Um den Inhalt aller Zellen zu ändern, wird die Zuordnung von Werten in der Tabelle geändert. Durch die Zuordnung der neuen Werte in Tabelle 2 für die Zellen wird die Wahrscheinlichkeit in allen Zellen reduziert, ohne dass die Zellen im Grid angepasst werden müssen.
Tabelle 2
Da sich bei einem diskreten Definitionsbereich als Eingang der Anwendungsfunktionen für das Update eine endliche Anzahl an Elementen im Wertebereich ergibt, ist es damit möglich, die Werte vorher zu berechnen und in Tabellen zu speichern, dadurch lässt sich weitere Rechenzeit sparen. Ein weiterer Vorteil der Darstellung von Funktionen über Tabellen ist die einfache Überprüfbarkeit der Eingangs - und Ausgangswerte, zudem können Sonderfälle durch entsprechende Einträge in der Tabelle behandelt werden.

Claims

Ansprüche
1 ) Verfahren für ein Sensorsystem zur Umfelderfassung für ein Kraftfahrzeug mit
Auswerteeinheit, wobei ein gitterbasiertes Umfeldmodell berechnet wird und jeder Gitterzelle zumindest ein diskreter Wert zugeordnet wird,
dadurch gekennzeichnet, dass
eine Diskretisierung durch Vergleich von Umfelddaten und zumindest einem Schwellwert erfolgt
2) Verfahren Anspruch 1 ,
dadurch gekennzeichnet, dass
zumindest ein diskreter Wert des Gitters, über ein Datenübertragungssystem in einem Fahrzeug zu einer Auswerte- oder Steuereinheit übertragen werden.
3) Verfahren nach Anspruch 1 oder 2,
dadurch gekennzeichnet, dass
eine verlustfreies Kompressionverfahren auf die diskreten Werte eines Gitters angewendet wird.
4) Verfahren nach Anspruch 3,
dadurch gekennzeichnet, dass
durch eine Dekorrelation der zeitlichen Abhängigkeit eine Kompression der Daten erreicht wird.
5) Verfahren nach einem der vorherigen Ansprüche,
daurch gekennzeichnet, dass
ein verlustbehaftetes Kompressionsverfahren angewendet wird.
6) Verfahren nach Anspruch 5,
dadurch gekennzeichnet, dass
die diskreten Werte des Gitters, die weiter vom Fahrzeug entfernte Bereiche repräsentieren, stärker komprimiert werden
71 Verfahren nach Ansoruch 5, dadurch gekennzeichnet, dass
die diskreten Werte des Gitters, die dem Fahrzeug abgewandte Merkmale repräsentieren, stärker komprimiert werden.
8) Verfahren nach einem der vorherigen Ansprüche,
dadurch gekennzeichnet, dass
das Umfeldmodell und vorzugsweise eine Datenkompression vor einer
Datenübertragung in einem Fahrzeug berechnet wird.
9) Verfahren nach einem der vorherigen Ansprüche,
dadurch gekennzeichnet, dass
die Zuordnung des diskreten Werts anhand der Umfelddaten mit Hilfe einer
Zuordnungstabelle erfolgt, wobei die Zuordnungstabelle im Speicher der
Auswerteeinheit hintelegt ist.
10) Verfahren nach Anspruch 2,
dadurch gekennzeichnet, dass
zur Änderung des Werte einer Mehrzahl von Gitterzellen insbesondere aller
Gitterzellen, nur die Zuordnungstabelle verändert wird.
1 1 ) Vorrichtung umfassend ein Sensorsystem zur Objekterfassung für ein Fahrzeug, eine erste Rechen- und Auswerteeinheit auf der ein Verfahren nach einem der Ansprüche 1 -10 hinterlegt ist
12) Vorrichtung nach Anspruch 1 1 zudem umfassend eine zweite Auswerte- oder
Steuereinheit und ein Datenübertragungssystem, wobei über das
Datenübertragungssystem die erste mit der zweite Auswerte- oder Steuereinheit in einem Fahrzeugverbunden ist.
13) Vorrichtung nach Anspruch 10 oder 12, wobei die erste Auswerte- oder Steuereinheit zur Erstellung eines Umfeldmodells vorgesehen ist und die zweite Auswerte- oder Steuereinheit zur Steuerung eines Fahrerassistenzsystems vorgesehen ist
EP12787353.7A 2011-10-28 2012-09-20 Gitterbasiertes umfeldmodell für ein fahrzeug Active EP2771873B1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102011117138 2011-10-28
PCT/DE2012/100292 WO2013060323A1 (de) 2011-10-28 2012-09-20 Gitterbasiertes umfeldmodell für ein fahrzeug

Publications (2)

Publication Number Publication Date
EP2771873A1 true EP2771873A1 (de) 2014-09-03
EP2771873B1 EP2771873B1 (de) 2018-04-11

Family

ID=47189655

Family Applications (1)

Application Number Title Priority Date Filing Date
EP12787353.7A Active EP2771873B1 (de) 2011-10-28 2012-09-20 Gitterbasiertes umfeldmodell für ein fahrzeug

Country Status (5)

Country Link
US (1) US20140278049A1 (de)
EP (1) EP2771873B1 (de)
DE (1) DE112012003549B4 (de)
ES (1) ES2669551T3 (de)
WO (1) WO2013060323A1 (de)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016150728A1 (de) * 2015-03-24 2016-09-29 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum bereitstellen von hinderniskarten für fahrzeuge

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102013104257A1 (de) 2013-04-26 2014-10-30 Continental Teves Ag & Co. Ohg Gitterbasiertes Umfeldmodell für ein Fahrzeug
DE102013214631B4 (de) 2013-07-26 2025-10-02 Bayerische Motoren Werke Aktiengesellschaft Effizientes Bereitstellen von Belegungsinformationen für das Umfeld eines Fahrzeugs
DE102013214632A1 (de) 2013-07-26 2015-01-29 Bayerische Motoren Werke Aktiengesellschaft Effizientes Bereitstellen von Belegungsinformationen für das Umfeld eines Fahrzeugs
DE102013217488B4 (de) 2013-09-03 2026-03-05 Aumovio Autonomous Mobility Germany Gmbh Belegungsgitter mit kompakten Gitterebenen
DE102013217491A1 (de) * 2013-09-03 2015-03-05 Continental Teves Ag & Co. Ohg übertragung von Daten eines gitterbasierten Umfeldmodells in einem Fahrzeug
DE102013018315B4 (de) 2013-10-31 2025-07-10 Bayerische Motoren Werke Aktiengesellschaft Umfeldmodell mit adaptivem Gitter
DE102014204430B4 (de) * 2014-03-11 2025-09-18 Aumovio Autonomous Mobility Germany Gmbh Verfahren und Vorrichtung zur Ermittlung einer Genauigkeit eines zu bewertenden Belegungsgitters für ein Fahrerassistenzsystem
DE102014220687A1 (de) 2014-10-13 2016-04-14 Continental Automotive Gmbh Kommunikationsvorrichtung für ein Fahrzeug und Verfahren zum Kommunizieren
DE102015201747A1 (de) * 2015-02-02 2016-08-04 Continental Teves Ag & Co. Ohg Sensorsystem für ein fahrzeug und verfahren
DE102015201867A1 (de) * 2015-02-03 2016-08-04 Bayerische Motoren Werke Aktiengesellschaft Optimierte Speicherung einer Umfeldkarte im Speicher eines Fahrzeugs
DE102015207978B3 (de) * 2015-04-30 2016-06-23 Bayerische Motoren Werke Aktiengesellschaft Analyse der Belegung von grid-basierten Umfeldkarten eines Fahrzeugs
DE102016211227A1 (de) 2016-06-23 2017-12-28 Conti Temic Microelectronic Gmbh Verfahren und Fahrzeugsteuersystem zum Erzeugen von Abbildungen eines Umfeldmodells und entsprechendes Fahrzeug
DE102016211453A1 (de) 2016-06-27 2017-12-28 Conti Temic Microelectronic Gmbh Verfahren und Fahrzeugsteuersystem zum Erzeugen von Abbildungen eines Umfeldmodells und entsprechendes Fahrzeug
DE102016225066A1 (de) 2016-12-15 2018-06-21 Conti Temic Microelectronic Gmbh Rundumsichtsystem für ein Fahrzeug
EP3442125A1 (de) * 2017-08-10 2019-02-13 Continental Automotive GmbH Sensornetzwerkanordnung zur verringerung der menge von daten für fahrzeuge
DE102018217268A1 (de) * 2018-10-10 2020-04-16 Zf Friedrichshafen Ag Vorrichtung und Verfahren zum Ermitteln von Höheninformationen eines Objekts in einer Umgebung eines Fahrzeugs
DE102018219773B4 (de) 2018-11-19 2021-08-12 Audi Ag Verfahren zum Kartographieren einer örtlichen Verteilung von Ereignissen eines vorbestimmten Ereignistyps in einem vorbestimmten Umgebungsbereich eines Kraftfahrzeugs sowie dazu ausgelegtes Steuergerät und Kraftfahrzeug
DE102019203274B3 (de) 2019-03-11 2020-07-09 Zf Friedrichshafen Ag Computerimplementiertes Verfahren zum Erstellen eines Umfeldmodells für ein automatisiert betreibbares Fahrzeug, Steuergerät und Computerprogrammprodukt zur automatisierten Steuerung eines Fahrzeuges und Steuerungssystem für ein Fahrzeug
DE102020201000B3 (de) 2020-01-28 2021-07-29 Zf Friedrichshafen Ag Computerimplementiertes Verfahren und System zum Erhalten eines Umfeldmodells und Steuergerät für ein automatisiert betreibbares Fahrzeug
DE102020210115A1 (de) * 2020-08-11 2022-02-17 Robert Bosch Gesellschaft mit beschränkter Haftung Verfahren zum Betreiben eines Assistenzsystems eines Fahrzeugs
DE102020210379A1 (de) 2020-08-14 2022-02-17 Zf Friedrichshafen Ag Computerimplementiertes Verfahren und Computerprogrammprodukt zum Erhalten einer Umfeldszenen-Repräsentation für ein automatisiertes Fahrsystem, computerimplementiertes Verfahren zum Lernen einer Prädiktion von Umfeldszenen für ein automatisiertes Fahrsystem und Steuergerät für ein automatisiertes Fahrsystem
CN115711623B (zh) * 2022-11-17 2025-08-29 上海西井科技股份有限公司 基于网格地图的定位优化方法、系统、设备及存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2890774B1 (fr) * 2005-09-09 2007-11-16 Inst Nat Rech Inf Automat Procede d'assitance a la conduite d'un vehicule et dispositif associe ameliore
DE102007012458A1 (de) * 2007-03-15 2008-09-18 Robert Bosch Gmbh Verfahren zur Objektbildung
DE102007013023B4 (de) 2007-03-19 2017-10-05 Sick Ag Probabilistische Rasterkarte
US8126642B2 (en) * 2008-10-24 2012-02-28 Gray & Company, Inc. Control and systems for autonomously driven vehicles
US8559673B2 (en) * 2010-01-22 2013-10-15 Google Inc. Traffic signal mapping and detection
DE102010006828B4 (de) 2010-02-03 2021-07-08 Volkswagen Ag Verfahren zur automatischen Erstellung eines Modells der Umgebung eines Fahrzeugs sowie Fahrerassistenzsystem und Fahrzeug
US20140358427A1 (en) * 2010-12-13 2014-12-04 Google Inc. Enhancing driving navigation via passive drivers feedback

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See references of WO2013060323A1 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016150728A1 (de) * 2015-03-24 2016-09-29 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum bereitstellen von hinderniskarten für fahrzeuge

Also Published As

Publication number Publication date
DE112012003549A5 (de) 2014-05-08
EP2771873B1 (de) 2018-04-11
US20140278049A1 (en) 2014-09-18
WO2013060323A1 (de) 2013-05-02
ES2669551T3 (es) 2018-05-28
DE112012003549B4 (de) 2025-01-23

Similar Documents

Publication Publication Date Title
EP2771873B1 (de) Gitterbasiertes umfeldmodell für ein fahrzeug
DE102016000493B4 (de) Verfahren zum Betrieb eines Fahrzeugsystems und Kraftfahrzeug
DE102016218080B3 (de) Verfahren und Vorrichtung zum Bestimmen einer Kollisionswahrscheinlichkeit eines Fahrzeugs mit einem Objekt
DE102017218889A1 (de) Unscharf parametriertes KI-Modul sowie Verfahren zum Betreiben
DE102019213547A1 (de) Vorrichtung und Verfahren zum Trainieren eines Modells sowie Fahrzeug
DE69417273T2 (de) Verfahren und Vorrichtung zur Mustererkennung
DE102021109169A1 (de) Verfahren zum Trainieren eines neuronalen Netzes
EP2924585B1 (de) Verfahren zum Betreiben eines Fahrzeugcrash - Testdatenmanagementsystems
DE102018122115A1 (de) Verfahren zur Umgebungserfassung eines Fahrzeugs
WO2020193481A1 (de) Verfahren und vorrichtung für training und herstellung eines künstlichen neuronalen netzes
DE102019214546A1 (de) Computerimplementiertes Verfahren und Vorrichtung zur Optimierung einer Architektur eines künstlichen neuronalen Netzwerks
DE102013206274A1 (de) Verfahren und Vorrichtung zum Anpassen eines nicht parametrischen Funktionsmodells
DE102008002162A1 (de) Verfahren zur Ermittlung des Reibwerts zwischen Rad und Fahrbahn in einem Fahrzeug
DE102019130484A1 (de) Verfahren und Vorrichtung zum Anlernen eines Ensembles von neuronalen Netzen
DE102013217491A1 (de) übertragung von Daten eines gitterbasierten Umfeldmodells in einem Fahrzeug
WO2022013121A1 (de) Verfahren und vorrichtung zum bewerten und zertifizieren einer robustheit eines ki-basierten informationsverarbeitungssystems
DE102024136854A1 (de) Verfahren und vorrichtung zum prädiktiven modellieren eines controller-area-network-signals
DE102020210700A1 (de) Flexiblerer iterativer Betrieb künstlicher neuronaler Netzwerke
DE102024002815B3 (de) Computerimplementiertes Verfahren zum Komprimieren eines Videostroms und Fahrzeug
DE102019216184A1 (de) Verfahren zum Robustifizieren eines Neuronalen Netzes gegen adversariale Störungen
DE102013224948A1 (de) Verfahren zum Speichern eines Umgebungsmodells
DE102019001005A1 (de) Vorrichtung und Verfahren zur Kompression von Sensordaten
DE102018205241A1 (de) Fusion von Umfeldinformation eines Kraftfahrzeugs
DE102023133134A1 (de) Vorrichtung und verfahren zum steuern eines autonomen fahrens
DE112021004853T5 (de) Dnn-kontraktionsvorrichtung und bordrechenvorrichtung

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20140528

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

DAX Request for extension of the european patent (deleted)
RIN1 Information on inventor provided before grant (corrected)

Inventor name: GREWE, RALPH

Inventor name: HEGEMANN, STEFAN

Inventor name: LUEKE, STEFAN

Inventor name: HOHM, ANDREE

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

INTG Intention to grant announced

Effective date: 20171204

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

REG Reference to a national code

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

REG Reference to a national code

Ref country code: CH

Ref legal event code: EP

REG Reference to a national code

Ref country code: AT

Ref legal event code: REF

Ref document number: 988810

Country of ref document: AT

Kind code of ref document: T

Effective date: 20180415

REG Reference to a national code

Ref country code: IE

Ref legal event code: FG4D

Free format text: LANGUAGE OF EP DOCUMENT: GERMAN

REG Reference to a national code

Ref country code: DE

Ref legal event code: R096

Ref document number: 502012012528

Country of ref document: DE

REG Reference to a national code

Ref country code: ES

Ref legal event code: FG2A

Ref document number: 2669551

Country of ref document: ES

Kind code of ref document: T3

Effective date: 20180528

REG Reference to a national code

Ref country code: SE

Ref legal event code: TRGR

REG Reference to a national code

Ref country code: NL

Ref legal event code: MP

Effective date: 20180411

REG Reference to a national code

Ref country code: LT

Ref legal event code: MG4D

RAP2 Party data changed (patent owner data changed or rights of a patent transferred)

Owner name: CONTI TEMIC MICROELECTRONIC GMBH

Owner name: CONTINENTAL TEVES AG & CO. OHG

REG Reference to a national code

Ref country code: FR

Ref legal event code: PLFP

Year of fee payment: 7

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: NL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: PL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: NO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180711

Ref country code: BG

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180711

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: AL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: LT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LV

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: HR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: GR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180712

Ref country code: RS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: PT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180813

REG Reference to a national code

Ref country code: DE

Ref legal event code: R097

Ref document number: 502012012528

Country of ref document: DE

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: EE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: CZ

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: RO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SM

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

26N No opposition filed

Effective date: 20190114

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MC

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

REG Reference to a national code

Ref country code: CH

Ref legal event code: PL

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

REG Reference to a national code

Ref country code: BE

Ref legal event code: MM

Effective date: 20180930

REG Reference to a national code

Ref country code: IE

Ref legal event code: MM4A

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20180920

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20180920

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: BE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20180930

Ref country code: CH

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20180930

Ref country code: LI

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20180930

REG Reference to a national code

Ref country code: AT

Ref legal event code: MM01

Ref document number: 988810

Country of ref document: AT

Kind code of ref document: T

Effective date: 20180920

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: AT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20180920

Ref country code: MT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: TR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: HU

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT; INVALID AB INITIO

Effective date: 20120920

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MK

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20180411

Ref country code: CY

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180411

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20180811

REG Reference to a national code

Ref country code: DE

Ref legal event code: R081

Ref document number: 502012012528

Country of ref document: DE

Owner name: CONTINENTAL AUTONOMOUS MOBILITY GERMANY GMBH, DE

Free format text: FORMER OWNERS: CONTINENTAL TEVES AG & CO. OHG, 60488 FRANKFURT, DE; CONTI TEMIC MICROELECTRONIC GMBH, 90411 NUERNBERG, DE

Ref country code: DE

Ref legal event code: R081

Ref document number: 502012012528

Country of ref document: DE

Owner name: AUMOVIO AUTONOMOUS MOBILITY GERMANY GMBH, DE

Free format text: FORMER OWNERS: CONTINENTAL TEVES AG & CO. OHG, 60488 FRANKFURT, DE; CONTI TEMIC MICROELECTRONIC GMBH, 90411 NUERNBERG, DE

REG Reference to a national code

Ref country code: GB

Ref legal event code: 732E

Free format text: REGISTERED BETWEEN 20221208 AND 20221215

P01 Opt-out of the competence of the unified patent court (upc) registered

Effective date: 20230522

REG Reference to a national code

Ref country code: GB

Ref legal event code: 732E

Free format text: REGISTERED BETWEEN 20240321 AND 20240327

REG Reference to a national code

Ref country code: ES

Ref legal event code: PC2A

Owner name: CONTINENTAL AUTONOMOUS MOBILITY GERMANY GMBH

Effective date: 20241024

REG Reference to a national code

Ref country code: DE

Ref legal event code: R081

Ref document number: 502012012528

Country of ref document: DE

Owner name: AUMOVIO AUTONOMOUS MOBILITY GERMANY GMBH, DE

Free format text: FORMER OWNER: CONTINENTAL AUTONOMOUS MOBILITY GERMANY GMBH, 85057 INGOLSTADT, DE

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20250930

Year of fee payment: 14

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: IT

Payment date: 20250923

Year of fee payment: 14

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: GB

Payment date: 20250918

Year of fee payment: 14

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20250922

Year of fee payment: 14

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: SE

Payment date: 20250918

Year of fee payment: 14

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: ES

Payment date: 20251028

Year of fee payment: 14