DE102018005865A1 - Verfahren zum Testen eines Assistenzsystems für ein Fahrzeug - Google Patents

Verfahren zum Testen eines Assistenzsystems für ein Fahrzeug Download PDF

Info

Publication number
DE102018005865A1
DE102018005865A1 DE102018005865.5A DE102018005865A DE102018005865A1 DE 102018005865 A1 DE102018005865 A1 DE 102018005865A1 DE 102018005865 A DE102018005865 A DE 102018005865A DE 102018005865 A1 DE102018005865 A1 DE 102018005865A1
Authority
DE
Germany
Prior art keywords
data
traffic
testing
vehicle
traffic sign
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102018005865.5A
Other languages
English (en)
Inventor
Mohamed Elgharbawy
Andreas Schwarzhaupt
Ingo Scherhaufer
Matthias Gut
Michael Frey
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mercedes Benz Group AG
Original Assignee
Daimler AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daimler AG filed Critical Daimler AG
Priority to DE102018005865.5A priority Critical patent/DE102018005865A1/de
Publication of DE102018005865A1 publication Critical patent/DE102018005865A1/de
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/582Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of traffic signs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/28Determining representative reference patterns, e.g. by averaging or distorting; Generating dictionaries

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Traffic Control Systems (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zum Testen eines Assistenzsystems für ein Fahrzeug (2), insbesondere für einen Lastkraftwagen.Erfindungsgemäß ist das Assistenzsystem als ein kartenbasiertes System zur Geschwindigkeitsbegrenzung ausgebildet, wobei Verkehrszeichen bild- und kartenbasiert erfasst und fusioniert werden und wobei erfasste Informationen für zu testende Szenarien mittels einer Clusteranalyse in Äquivalenzklassen eingeteilt werden.

Description

  • Die Erfindung betrifft ein Verfahren zum Testen eines Assistenzsystems für ein Fahrzeug nach den Merkmalen des Oberbegriffs des Anspruchs 1.
  • Aus dem Stand der Technik sind Assistenzsysteme für Fahrzeuge allgemein bekannt. Ebenso ist es allgemein bekannt, derartige Assistenzsysteme, insbesondere in einer Entwicklungsphase, zu testen.
  • In der noch nicht veröffentlichten DE 10 2017 009 971.5 der Anmelderin, deren vollständiger Inhalt hiermit durch Referenz aufgenommen wird, wird ein Verfahren zum Testen eines Spurhalteassistenzsystems für ein Fahrzeug, insbesondere für einen Lastkraftwagen, beschrieben. In diesem Verfahren wird ontologiebasiert eine Kategorie adäquater und relevanter Szenarien für existierende Feldtests extrahiert.
  • In der noch nicht veröffentlichten DE 10 2018 004 429.8 der Anmelderin, deren vollständiger Inhalt hiermit durch Referenz aufgenommen wird, werden ein Verfahren und eine Vorrichtung zum Testen eines Bremsassistenzsystems für ein Fahrzeug, insbesondere für einen Lastkraftwagen, beschrieben. In diesem Verfahren wird eine clusteranalytische Charakterisierung von Fahrsituationen basierend auf erfassten Sensorsignalen zur Umfelderfassung und deren Systemreaktionen im Fahrbetrieb des Fahrzeugs ermittelt.
  • In der DE 198 52 631 A1 der Anmelderin, deren vollständiger Inhalt hiermit durch Referenz aufgenommen wird, werden eine Vorrichtung und ein Verfahren zur Verkehrszeichenerkennung beschrieben. Die Vorrichtung umfasst einen digitalen Bildsensor zur Aufnahme von Bildern, die potentiell Verkehrszeichen enthalten, eine Informationsverarbeitungseinheit zur Analyse der von dem Bildsensor gelieferten Bilder in Echtzeit, eine Speichereinheit und eine Anzeigeeinheit. Die Informationsverarbeitungseinheit ermittelt, ob ein Bild ein oder mehrere Objekte enthält, welche mit hinreichender Wahrscheinlichkeit Verkehrszeichen sind. Die Speichereinheit enthält einen vorgegebenen Klassifikator, der schwankungstolerant generiert wird aus einer repräsentativen Stichprobe von klassenspezifischen Merkmalsdaten, die jeweils allen Elementen einer bestimmten Klasse von Verkehrszeichen gemeinsam sind und die zur eindeutigen Identifizierung dieser Klasse ausreichen. Die Speichereinheit enthält des Weiteren vereinfachte Repräsentationen dieser klassenspezifischen Merkmalsdaten. Die Informationsverarbeitungseinheit extrahiert aus den Bilddaten von einem als Verkehrszeichen erkannten Objekt reale Merkmalsdaten, klassifiziert die extrahierten realen Merkmalsdaten mittels des Klassifikators, führt anhand dieser Klassifikation eine Zuordnung des als Verkehrszeichen erkannten Objektes zu einer Klasse von Verkehrszeichen durch, separiert die Bilddaten von dem als Verkehrszeichen erkannten Objekt in einer für die zugeordnete Klasse spezifischen Aufteilung in einen oder mehrere Bildbereiche, die klassenspezifische Merkmalsdaten enthalten, und in einen oder mehrere Bildbereiche, die zeichenspezifische Merkmalsdaten enthalten, und reduziert die Bilddaten von dem als Verkehrszeichen erkannten Objekt auf eine vereinfachte Darstellung, indem sie die Bildbereiche löscht, die klassenspezifische Merkmalsdaten enthalten, und die gelöschten Bildbereiche ersetzt durch die vereinfachte Repräsentation der klassenspezifischen Merkmalsdaten der dem Verkehrszeichen zugeordneten Klasse. Die Speichereinheit speichert die vereinfachte Darstellung des als Verkehrszeichen erkannten Objektes. Die Anzeigeeinheit zeigt die vereinfachte Darstellung des als Verkehrszeichen erkannten Objektes an.
  • In der DE 10 2012 210 454 A1 , deren vollständiger Inhalt hiermit durch Referenz aufgenommen wird, werden ein Verfahren und eine Vorrichtung zur Bereitstellung von Daten für einen elektronischen Horizont für ein Fahrerassistenzsystem eines Fahrzeugs beschrieben. Das Verfahren umfasst einen Schritt des Bestimmens zumindest einer Fahrzeuggruppe aus sich im Umfeld des Fahrzeugs befindlichen Fremdfahrzeugen, basierend auf von den Fremdfahrzeugen ausgesendeten Parametern, wobei die zumindest eine Fahrzeuggruppe zumindest eines der Fremdfahrzeuge umfasst. Ferner umfasst das Verfahren einen Schritt des Zusammenfassens von Parametern der von der zumindest einen Fahrzeuggruppe umfassten Fremdfahrzeuge zu einem Datenpaket für den elektronischen Horizont, wenn die zumindest eine Fahrzeuggruppe zumindest zwei Fremdfahrzeuge umfasst.
  • In der WO 2013/017125 A1 , deren vollständiger Inhalt hiermit durch Referenz aufgenommen wird, wird ein Verfahren zur Erkennung von Verkehrszeichen, die mindestens ein Haupt- und mindestens ein zugeordnetes Zusatzzeichen umfassen, beschrieben. Es wird mindestens ein Bild einer Fahrzeugumgebung mit einer Kamera aufgenommen. Aus den Daten des mit der Kamera aufgenommenen Bildes wird das Vorhandenseins und die Klasse eines oder mehrerer Hauptzeichen erkannt. Das Vorhandensein eines oder mehrerer zu dem oder den erkannten Hauptzeichen zugeordneter Zusatzzeichen wird erkannt. Das oder die Zusatzzeichen werden mittels eines Mustererkennungsverfahrens soweit möglich klassifiziert. Sofern die Klassifikation durch das Mustererkennungsverfahren nicht oder nicht vollständig möglich war, wird mittels eines Texterkennungsverfahren der Zusatzzeichentext gelesen und interpretiert, so dass der Informationsgehalt ermittelt ist. In einem weiteren Schritt erfolgt eine Relevanzeinschätzung, bei der der erkannte Text verglichen wird mit Situationsdaten wie Uhrzeit, Wochentag, zurückgelegte Entfernung des Fahrzeugs seit Passieren des erkannten Verkehrszeichens mit Zusatzschild, Gewicht des eigenen Fahrzeugs, Nässe auf der Fahrbahn, Außentemperatur, Lage der befahrenen Fahrspur, Aktivierung des Blinkers und/oder Abbiegeempfehlung einer aktiven Routenplanung.
  • In der DE 10 2014 211 450 A1 , deren vollständiger Inhalt hiermit durch Referenz aufgenommen wird, wird eine Spurüberwachung mit elektronischem Horizont beschrieben. Eine Vorrichtung für ein Fahrzeug, das auf einer Spurmarkierungen aufweisenden Straße betrieben wird, enthält einen optischen Sensor, der optische Daten der Straße bereitstellt. Ein erstes Spurenmodell wird in einem elektronischen Speicher als Reaktion auf detektierte Spurenmarkierungen in den optischen Daten gespeichert. Ein System mit elektronischem Horizont verfolgt eine Position des Fahrzeugs und stellt als Reaktion auf die Position Straßendaten bereit. Ein zweites Spurenmodell ist als Reaktion auf die Straßendaten in dem elektronischen Speicher gespeichert. Ein Konfidenzprüfmittel vergleicht eine Abweichung zwischen dem ersten und zweiten Spurenmodell mit einer Schwelle, um ein Konfidenzniveau zu bestimmen. Ein Ausgabeselektor wählt das erste Spurenmodell, wenn Spurenmarkierungen in den optischen Daten detektiert werden, und wählt das zweite Spurenmodell, falls die Spurenmarkierungen in den optischen Daten nicht detektiert wurden und das Konfidenzniveau größer als ein vorbestimmtes Niveau ist.
  • Um ein Verkehrszeichenerkennungssystem auszuwerten, werden zeitaufwendige manuelle Generierungen von Referenzinformationen üblicherweise innerhalb vorgegebener Zeitabschnitte durchgeführt. Darüber hinaus ist ein zeitaufwändiges Studium der Daten notwendig, um das Systemverhalten mit den Referenzinformationen abzugleichen.
  • Der Erfindung liegt die Aufgabe zu Grunde, ein gegenüber dem Stand der Technik verbessertes Verfahren zum Testen eines Assistenzsystems für ein Fahrzeug anzugeben.
  • Die Aufgabe wird erfindungsgemäß gelöst durch ein Verfahren zum Testen eines Assistenzsystems für ein Fahrzeug mit den Merkmalen des Anspruchs 1.
  • Vorteilhafte Ausgestaltungen der Erfindung sind Gegenstand der Unteransprüche.
  • In einem erfindungsgemäßen Verfahren zum Testen eines Assistenzsystems für ein Fahrzeug, insbesondere für einen Lastkraftwagen, wobei das Assistenzsystem als ein kartenbasiertes System zur Geschwindigkeitsbegrenzung, insbesondere als ein Verkehrszeichenerkennungssystem, ausgebildet ist, werden Verkehrszeichen bild- und kartenbasiert erfasst und fusioniert und erfasste Informationen für zu testende Szenarien werden mittels einer Clusteranalyse in Äquivalenzklassen eingeteilt. In diesem Verfahren, insbesondere zum Testen eines Verkehrszeichenerkennungssystems für ein Fahrzeug, ist insbesondere eine Erfassung eines Fahrzeugumfeldes für das Verkehrszeichenerkennungssystem notwendig. Durch das erfindungsgemäße Verfahren werden die vorgenannten Nachteile des Standes der Technik vermieden.
  • In dem Verfahren, insbesondere zum Testen des Verkehrszeichenerkennungssystems für ein Fahrzeug, insbesondere für einen Lastkraftwagen, erfolgt insbesondere eine automatische Generierung von Referenzinformationen, z. B. einer Geschwindigkeitsbegrenzung, auf Basis von statischen Kartendaten unter Aktualisierung durch Cloud-basierte Daten. Die generierten Referenzinformationen werden insbesondere durch Hinzunahme von Verkehrsflussdaten plausibilisiert. Das Testen wird insbesondere auf Basis eines Ereignisprotokolls durchgeführt. Insbesondere kann zusätzlich zum Testen einer Funktionalität eines Gesamtsystems eine Funktionalität von Teilsystemen getestet werden. Vorteilhafterweise wird ein jeweiliger Teilsystemtest analysiert, um Hinweise auf kritische Fahrszenarien zu erhalten. Für das Verhalten des zu testenden Systems notwendige Eingangsdaten werden insbesondere aus Fahrversuchen und/oder aus einer Simulation ermittelt.
  • Das erfindungsgemäße Verfahren ermöglicht es, Verkehrshotspotkategorien von falsch-positiven und falsch-negativen Ereignissen aus den verschiedenen Informationsquellen in den clusteranalytisch charakterisierten Fahrsituationen mithilfe einer Datenbank für die zu testenden Szenarien zu transformieren. Das Verfahren und eine entsprechende Vorrichtung zur Durchführung des Verfahrens ermöglichen eine gesamtheitliche Testentscheidungsgrundlage für das Testen eines Verkehrszeichenerkennungssystems, wobei die Testentscheidungsgrundlage anhand der Bewertung des Verhaltens von einzelnen Komponenten sowie vom Gesamtsystem definiert ist. Das Verfahren und die entsprechende Vorrichtung zur Durchführung des Verfahrens ermöglichen insbesondere eine adaptive Testabdeckung für das kartenbasierte Geschwindigkeitsbegrenzungssystem. Insbesondere wird ermöglicht, eine Kluft zwischen wissensbasierten und datenbasierten Ansätzen zu schließen, um eine kontinuierliche Erweiterung des Wissens in der adaptiven Testabdeckung zu ermöglichen.
  • Vorteilhafterweise wird ein in Fahrtrichtung vor dem Fahrzeug detektiertes Verkehrszeichen zur Klassifizierung und Verfolgung bestimmter Merkmale in Bildsequenzen verwendet, die mit Hilfe einer optischen Erfassungseinheit aufgezeichnet werden. Aus den Fahrspurdaten einer Spurerkennungsvorrichtung werden die Suchbereiche eines relevanten Verkehrszeichnens vorselektiert. Zusätzlich wird ein elektronischer Horizont als ein Vorhersagemodell eingesetzt, mit dem die aktuelle Fahrzeugposition ermittelt und damit verkehrsrelevante Informationen, z. B. eine Geschwindigkeitsbegrenzung, innerhalb des Positionshorizonts auf Basis gespeicherter Kartendaten vorhergesagt werden.
  • Die bild- und kartenbasierten Erfassungsdaten werden vorteilhafterweise in einer Heuristik, d. h. in einem Algorithmus, fusioniert, um eine erhöhte Zuverlässigkeit der Verkehrszeichenerkennung sicherzustellen. Trotz der Diskrepanz zwischen visueller und kartografischer Darstellung durch nicht aktualisierte Kartendaten oder optische Erkennungsfehler muss die robuste Heuristik auch in ungewöhnlichen Situationen definiert funktionieren und sinnvolle Reaktionen auslösen.
  • Vorteilhafterweise wird einerseits eine Verkehrshotspotkategorie für False-Positive-Ereignisse durch einen Vergleich mit den Referenzdaten unter Verwendung einer dichtebasierten räumlichen Clusteranalyse ermittelt, wobei die ereignisbasierten Auslösungen des Systems zur Verkehrszeichenerkennung in einem Ereignisprotokoll auf der Steuereinheit aufgezeichnet werden. Anderseits wird eine andere Verkehrshotspotkategorie für False-Negative-Ereignisse durch eine Vergleichsdiskrepanz aus den Referenzdaten identifiziert, wenn das Verkehrszeichenerkennungssystem keine Ereignisse für die befahrene Strecke auslöst.
  • Im Verfahren werden als obligatorische Verfahrensschritte beispielsweise folgende Schritte durchgeführt, wobei deren Reihenfolge veränderbar ist:
    1. I. Ermittlung relevanter Referenzinformationen auf Basis von statischen Kartendaten unter Aktualisierung durch Cloud-basierte Daten
    2. II. Plausibilisierung der generierten Referenzinformationen durch Hinzunahme von Verkehrsflussdaten
    3. III. Definition von Ereignisprotokolldaten zur Ermittlung von Fahrsituationsclustern
    4. IV. Auswahl von Distanz- und Ähnlichkeitsmaßen basierend auf Warnereignissen des Verkehrszeichenerkennungssystems
    5. V. Auswahl eines geeigneten Clusterverfahrens zur clusteranalytischen Charakterisierung von Fahrsituationen
    6. VI. Bestimmung einer optimalen Clusteranzahl
    7. VII. Training eines Klassifikators mit markierten Clusterdaten
    8. VIII. Anwendung des Klassifikators mit naturalistischen Warnereignissen
    9. IX. Nutzung der klassifizierten Clusterdaten zur Ermittlung von charakteristischen Verkehrshotspotkategorien für eine jeweilige Gruppierung
    10. X. Ableitung von zu testenden Szenarien durch eine örtliche Abfolge von verkehrsrelevanten Informationen, z. B. Geschwindigkeitsbegrenzung
    11. XI. Kombination von einzelnen zu testenden Szenarien zu einem Testablauf
    12. XII. Beschreiben des Testablaufs in einem De-facto-Standardformat
    13. XIII. Testausführung auf einer so genannten Cluster-Hardware-in-the-Loop-Plattform
    14. XIV. Auswertung von Testfällen mittels Grenzwerten als Bestanden- und Durchgefallen-Kriterien
    15. XV. Definition und Anwendung von gesamtheitlichen Testentscheidungsgrundlagen
  • Eine weitere Vorgehensweise zur Berücksichtigung zusätzlicher Felddaten bei bereits ermittelten charakteristischen Verkehrshotspotkategorien sieht beispielsweise als optionale Verfahrensschritte vor:
    • XVI. Vergleich zusätzlicher Felddaten mit charakteristischen Verkehrshotspotkategorien
    • XVII. Gegebenenfalls Erweiterung der Anzahl der Cluster für die Gruppierung
    • XVIII. Wiederholdung und Anwendung der Schritte von II bis XV.
  • Ausführungsbeispiele der Erfindung werden im Folgenden anhand von Zeichnungen näher erläutert.
  • Dabei zeigen:
    • 1 schematisch eine adaptive Testabdeckung mit Verkehrshotspotkategorien am Beispiel eines Verkehrszeichenerkennungssystems,
    • 2 schematisch eine automatische Generierung von Referenzinformationen, z.B. Geschwindigkeitsbegrenzung mit Verkehrshotspotkategorien am Beispiel eines Verkehrszeichenerkennungssystems,
    • 3 schematisch eine synthetische Strecke mit unterschiedenen Verkehrszeichen für die zulässige Höchstgeschwindigkeit, das auf der Cluster-Hardware-in-the-Loop-Plattform angewendet wird,
    • 4 schematisch eine Aufzeichnung der Objektlisten einer realen Kamera mit Kamera-Box und eines simulierten elektronischen Horizonts für die befahrene Strecke, die auf der Cluster-Hardware-in-the-Loop-Plattform angewendet wird,
    • 5 schematisch eine Aufzeichnung der Objektlisten einer realen Kamera mit Kamera-Box und eines simulierten elektronischen Horizonts mit dem Wegfall eines Verkehrszeichens für die zulässige Höchstgeschwindigkeit „30“ für die befahrene Strecke, die auf der Cluster-Hardware-in-the-Loop-Plattform angewendet wird, und
    • 6 schematisch eine Aufzeichnung der Objektlisten einer realen Kamera mit Kamera-Box und eines simulierten elektronischen Horizonts mit dem Ersetzen eines Verkehrszeichens für die zulässige Höchstgeschwindigkeit „10“ für die befahrene Strecke, die auf der Cluster-Hardware-in-the-Loop-Plattform angewendet wird.
  • Einander entsprechende Teile sind in allen Figuren mit den gleichen Bezugszeichen versehen.
  • Im Folgenden werden anhand der 1 bis 6 ein Verfahren zum Testen eines kartenbasierten Systems zur Geschwindigkeitsbegrenzung, insbesondere eines Verkehrszeichenerkennungssystems 3, für ein Fahrzeug 2, insbesondere für einen Lastkraftwagen, und eine Vorrichtung zur Durchführung des Verfahrens beschrieben. Damit wird eine adaptive Testabdeckung 11 für die Verkehrszeichenerkennung ermöglicht. Das Verfahren dient insbesondere zum Testen eines Warnprozesses der Verkehrszeichenerkennung.
  • Es wird eine clusteranalytische Charakterisierung von Fahrsituationen identifiziert, um eine Kategorie von zu testenden Szenarien für bestehende Feldtests, auch als Field Operational Tests (FOT) bezeichnet, zu extrahieren. Das Verfahren erstellt ein Konzept für eine gesamtheitliche Testentscheidungsgrundlage für das Verkehrszeichenerkennungssystem 3. Die Fahrsituationen sind mittels Data-Mining-Techniken zu extrahieren und systematisch über Verkehrshotspotkategorien 19 in Anforderungen für die adaptive Testabdeckung 11 umzuwandeln.
  • Das beschriebene Konzept zielt darauf ab, eine Lücke zwischen wissens- und datenbasierten Ansätzen zu schließen, um eine kontinuierliche Erweiterbarkeit des Wissens in der adaptiven Testabdeckung 11 zu ermöglichen, wie in 1 dargestellt.
  • 1 zeigt eine automatische Generierung von Referenzinformationen 20, z. B. einer Geschwindigkeitsbegrenzung, am Beispiel des Verkehrszeichenerkennungssystems 3, wobei eine Funktionalspezifikation 16 aus Spitzenanforderung 17 und Anwendungsfällen 18 erstellt und in natürlicher Sprache formuliert wird. Diese bildet die Basis für ein wissensbasiertes Testen 32, welches das zu testende Verkehrszeichenerkennungssystem 3 mit konkreten Szenarien beaufschlagt.
  • Die Adaption besteht nun in der Erweiterung der mit Hilfe des wissensbasierten Testens 32 erzeugten konkreten Szenarien durch weitere logische Szenarien. Dabei kennzeichnet Bezugszeichen 1 ein natürliches Fahrszenario, welches mit dem Fahrzeug 2 mit dem Verkehrszeichenerkennungssystem 3 in einer realen Testfahrt befahren wird, d. h. ein reales Fahrszenario. Mit Bezugszeichen 4 ist ein synthetisches Fahrszenario gekennzeichnet, welches mit einer Kamera-Box 5 und einem Sensormodell 7 eines elektronischen Horizonts 6 für das Verkehrszeichenerkennungssystem 3 erfasst oder in dieser oder mittels dieser für das Verkehrszeichenerkennungssystem 3 simuliert wird. Das synthetische Fahrszenario 4 ist somit insbesondere eine Simulation.
  • Jeweilige Ereignisse 8, 9 des Verkehrszeichenerkennungssystems 3 werden einer mit dem Bezugszeichen 10 gekennzeichneten Verkehrshotspotkategorienanalyse, insbesondere auf Basis der Referenzinformationen der Verkehrszeichen, zugeführt. Das Bezugszeichen 11 kennzeichnet die adaptive Testabdeckung, welche aus der Verkehrshotspotkategorienanalyse 10 resultiert.
  • Bezugszeichen 12 kennzeichnet ein so genanntes Parsing, d. h. eine Konvertierung in eine De-facto-Standard-Beschreibungssprache, der zu testenden Szenarien, insbesondere worst-case-Szenarien, auf Basis der adaptiven Testabdeckung 11. Eine Testautomation 13 und das Beschreiben der zu testenden Szenarien beeinflussen das synthetische Fahrszenario 4 und/oder die Kamera-Box 5 sowie das Sensormodell 7 des elektronischen Horizonts 6.
  • Bezugszeichen 14 kennzeichnet eine Fehlerinjektion.
  • Bezugszeichen 15 kennzeichnet eine Fahrzeugdynamik.
  • Bezugszeichen 19 kennzeichnet Verkehrshotspotkategorien 19 von falsch-positiven und falsch-negativen Ereignissen 8, 9 aus verschiedenen Informationsquellen.
  • Bezugszeichen 20 kennzeichnet die automatische Generierung von Referenzinformationen.
  • Bezugszeichen 21 kennzeichnet eine adaptive Plausibilitätskontrolle ν̃G ≈ νD(t ± tG) durch Hinzunahme von Verkehrsflussdaten, wobei ν̃G als gemessene Geschwindigkeit, νD(tA ± tG) als Durchschnittsgeschwindigkeit bei tG als ein zeitliches Begrenzungskriterium für die Aktualisierung ist.
  • 2 zeigt eine schematische Darstellung des Verfahren und der Vorrichtung zur Evaluierung des Verkehrszeichenerkennungssystems 3 mittels Verkehrshotspotkategorien 19 und automatischer Generierung von Referenzinformationen 20. Bezugszeichen 1 kennzeichnet auch hier das natürliche Fahrszenario 1 und somit eine reale Testfahrt.
  • Bezugszeichen 2 kennzeichnet auch hier das Fahrzeug, beispielsweise einen realen Lastkraftwagen.
  • Bezugszeichen 4 kennzeichnet auch hier das synthetische Fahrszenario und somit eine virtuelle Testfahrt, d. h. eine Simulation.
  • Bezugszeichen 28 kennzeichnet eine Steuergerätplattform für Verkehrszeichenerkennungsfunktionen.
  • Bezugszeichen 29 kennzeichnet eine integrierte Datenbank.
  • Bezugszeichen 30 kennzeichnet ausgelöste Ereignisse.
  • Bezugszeichen 31 kennzeichnet ein datenbasiertes Ausdauertesten.
  • Bezugszeichen 32 kennzeichnet das wissensbasierte Testen des Fahrzeugs 2.
  • Bezugszeichen 33 kennzeichnet ein Fahrzeugverhalten in virtueller Umgebung, insbesondere ein Lastkraftwagendynamikmodell, inklusive einer Fahrerkabine.
  • Bezugszeichen 34 kennzeichnet Cloud-basierte Referenzinformationen.
  • Bezugszeichen 35 kennzeichnet statische Karten.
  • Bezugszeichen 36 kennzeichnet Verkehrsflussdaten zur Plausibilisierung.
  • Bezugszeichen 37 kennzeichnet eine Plausibilisierung durch durchschnittliche Verkehrsflussdaten.
  • Bezugszeichen 38 kennzeichnet einen Vergleich durch Hinzunahme von Verkehrsflussdaten.
  • Bezugszeichen 39 kennzeichnet eine Aktualisierung der Cloud-basierten Referenzinformationen.
  • Bezugszeichen 40 kennzeichnet aktualisierte hochauflösende Karten.
  • 3 zeigt eine schematische Darstellung eines Fahrszenarios mit unterschiedenen Verkehrszeichen für eine zulässige Höchstgeschwindigkeit.
  • Bezugszeichen 22 kennzeichnet einen Startpunkt einer Fahrstrecke 24.
  • Bezugszeichen 23 kennzeichnet einen Endpunkt der Fahrstrecke 24.
  • Bezugszeichen 24 kennzeichnet die Fahrstrecke.
  • Bezugszeichen 25 kennzeichnet Streckeninformationen des elektronischen Horizonts.
  • Bezugszeichen 26 kennzeichnet eine Stadt als Streckentyp.
  • Bezugszeichen 27 kennzeichnet eine Landstraße als Streckentyp.
  • Bezugszeichen vvz kennzeichnet Verkehrszeichen zur Geschwindigkeitsbegrenzung.
  • Im Folgenden wird die Ermittlung einer Fusionsausgabe näher beschrieben. Hierzu wird zunächst eine Berechnung beschrieben.
  • Eine mathematische Beschreibung der Fusionsausgabe P(f) ist wie folgt. P ( f ) = γ ( c ) . P ( c ) + γ ( h ) . P ( h ) ,   γ ( c ) { 0,1 } ,   γ ( h ) { 0,1 }
    Figure DE102018005865A1_0001
  • Dabei ist γ(c) ein binärer Gewichtungsfaktor für eine Ausgabe einer Kamera-Objektliste und γ(h) ist ein binärer Gewichtungsfaktor für eine Sensormodellausgabe des elektronischen Horizonts 6. Die Variable P(c) ist eine Ausgabe einer realen Kamera in Kamera-Box 5 und die Variable P(h) ist die Ausgabe des simulierten elektronischen Horizonts 6.
  • 4 zeigt eine Aufzeichnung der Objektlisten einer realen Kamera mit Kamera-Box 5 und eines simulierten elektronischen Horizonts 6 für eine befahrene Strecke dS , die auf einer Cluster-Hardware-in-the-Loop-Plattform angewendet wird. Die Objektlistendaten zur Geschwindigkeitsbegrenzung werden vom elektronischen Horizont 6 auf Übereinstimmung mit den Verkehrszeichen in der virtuellen Umgebung geprüft. Da die Kamera die Verkehrszeichen im Sichtfeld vor Ortung von Verkehrszeichen erkennt, weist das Kamerasignal eine geringe Abweichung zur Lage der Verkehrszeichen auf.
  • 5 zeigt eine Aufzeichnung der Objektlisten einer realen Kamera mit Kamera-Box 5 und eines simulierten elektronischen Horizonts 6 mit dem Wegfall eines Verkehrszeichens für die zulässige Höchstgeschwindigkeit „30“ für die befahrene Strecke dS , die auf der Cluster-Hardware-in-the-Loop-Plattform angewendet wird.
  • 6 zeigt eine Aufzeichnung der Objektlisten einer realen Kamera mit Kamera-Box 5 und eines simulierten elektronischen Horizonts 6 mit dem Ersetzen eines Verkehrszeichens für die zulässige Höchstgeschwindigkeit „10“ für die befahrene Strecke dS , die auf der Cluster-Hardware-in-the-Loop-Plattform angewendet wird.
  • Bezugszeichenliste
  • 1
    natürliches Fahrszenario
    2
    Fahrzeug
    3
    Verkehrszeichenerkennungssystem
    4
    synthetisches Fahrszenario
    5
    Kamera-Box
    6
    elektronischer Horizont
    7
    Sensormodell eines elektronischen Horizonts
    8, 9
    Ereignis
    10
    Verkehrshotspotkategorienanalyse
    11
    adaptive Testabdeckung
    12
    Parsing
    13
    Testautomation
    14
    Fehlerinjektion
    15
    Fahrzeugdynamik
    16
    Funktionalspezifikation
    17
    Spitzenanforderung
    18
    Anwendungsfall
    19
    Verkehrshotspotkategorie
    20
    Referenzinformation
    21
    adaptive Plausibilitätskontrolle
    22
    Startpunkt
    23
    Endpunkt
    24
    Fahrstrecke
    25
    Streckeninformation des elektronischen Horizonts
    26
    Stadt als Streckentyp
    27
    Landstraße als Streckentyp
    28
    Steuergerätplattform
    29
    Datenbank
    30
    ausgelöstes Ereignis
    31
    datenbasiertes Ausdauertesten
    32
    wissensbasiertes Testen
    33
    Fahrzeugverhalten in virtueller Umgebung
    34
    Cloud-basierte Referenzinformation
    35
    statische Karte
    36
    Verkehrsflussdaten zur Plausibilisierung
    37
    Plausibilisierung durch durchschnittliche Verkehrsflussdaten
    38
    Vergleich durch Hinzunahme von Verkehrsflussdaten
    39
    Aktualisierung der Cloud-basierten Referenzinformationen
    40
    aktualisierte hochauflösende Karte
    dS
    befahrene Strecke
    P(c)
    Ausgabe einer realen Kamera
    p(h)
    Ausgabe eines simulierten elektronischen Horizonts
    vvz
    Verkehrszeichen zur Geschwindigkeitsbegrenzung
    γ(c)
    binärer Gewichtungsfaktor für eine Ausgabe einer Kamera-Objektliste
    γ(h)
    binärer Gewichtungsfaktor für eine Sensormodellausgabe eines elektronischen Horizonts
  • ZITATE ENTHALTEN IN DER BESCHREIBUNG
  • Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.
  • Zitierte Patentliteratur
    • DE 102017009971 [0003]
    • DE 102018004429 [0004]
    • DE 19852631 A1 [0005]
    • DE 102012210454 A1 [0006]
    • WO 2013/017125 A1 [0007]
    • DE 102014211450 A1 [0008]

Claims (8)

  1. Verfahren zum Testen eines Assistenzsystems für ein Fahrzeug (2), insbesondere für einen Lastkraftwagen, dadurch gekennzeichnet, dass das Assistenzsystem als ein kartenbasiertes System zur Geschwindigkeitsbegrenzung ausgebildet ist, wobei Verkehrszeichen bild- und kartenbasiert erfasst und fusioniert werden und wobei erfasste Informationen für zu testende Szenarien mittels einer Clusteranalyse in Äquivalenzklassen eingeteilt werden.
  2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass eine automatische Generierung von Referenzinformationen (20), insbesondere einer Geschwindigkeitsbegrenzung, erfolgt.
  3. Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass die automatische Generierung der Referenzinformationen (20) auf Basis von statischen Kartendaten unter Aktualisierung durch Cloud-basierte Daten erfolgt.
  4. Verfahren nach Anspruch 2 oder 3, dadurch gekennzeichnet, dass die Referenzinformationen durch Hinzunahme von Verkehrsflussdaten plausibilisiert werden.
  5. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das Testen auf Basis eines Ereignisprotokolls durchgeführt wird.
  6. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass zusätzlich zum Testen einer Funktionalität eines Gesamtsystems eine Funktionalität von Teilsystemen getestet wird.
  7. Verfahren nach Anspruch 6, dadurch gekennzeichnet, dass ein jeweiliger Teilsystemtest analysiert wird, um Hinweise auf kritische Fahrszenarien zu erhalten.
  8. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass für das Verhalten des zu testenden Systems notwendige Eingangsdaten aus Fahrversuchen oder aus einer Simulation ermittelt werden.
DE102018005865.5A 2018-07-26 2018-07-26 Verfahren zum Testen eines Assistenzsystems für ein Fahrzeug Withdrawn DE102018005865A1 (de)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102018005865.5A DE102018005865A1 (de) 2018-07-26 2018-07-26 Verfahren zum Testen eines Assistenzsystems für ein Fahrzeug

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102018005865.5A DE102018005865A1 (de) 2018-07-26 2018-07-26 Verfahren zum Testen eines Assistenzsystems für ein Fahrzeug

Publications (1)

Publication Number Publication Date
DE102018005865A1 true DE102018005865A1 (de) 2019-07-04

Family

ID=66817111

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102018005865.5A Withdrawn DE102018005865A1 (de) 2018-07-26 2018-07-26 Verfahren zum Testen eines Assistenzsystems für ein Fahrzeug

Country Status (1)

Country Link
DE (1) DE102018005865A1 (de)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230053786A1 (en) * 2021-08-19 2023-02-23 Ford Global Technologies, Llc Enhanced object detection
DE102021131116B3 (de) 2021-11-26 2023-05-11 Dr. Ing. H.C. F. Porsche Aktiengesellschaft Computerimplementiertes Verfahren zur Detektion von Fehlern eines Fahrerassistenzprogramms für ein Kraftfahrzeug
DE102022213066A1 (de) 2022-12-05 2024-06-06 Stellantis Auto Sas Maschinelle Auswertung einer automatischen Verkehrszeichenerkennung eines Fahrzeugs

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19852631A1 (de) 1998-11-14 2000-05-25 Daimler Chrysler Ag Vorrichtung und Verfahren zur Verkehrszeichenerkennung
WO2013017125A1 (de) 2011-08-04 2013-02-07 Conti Temic Microelectronic Gmbh Verfahren zur erkennung von verkehrszeichen
DE102012210454A1 (de) 2012-06-21 2013-12-24 Robert Bosch Gmbh Verfahren und Vorrichtung zur Bereitstellung von Daten für einen elektronischen Horizont für ein Fahrerassistenzsystem eines Fahrzeugs
DE102014211450A1 (de) 2013-06-20 2014-12-24 Ford Global Technologies, Llc Spurüberwachung mit elektronischem Horizont
DE102017009971A1 (de) 2017-10-26 2019-05-02 Daimler Ag Verfahren zum Testen eines Spurhalteassistenzsystems für ein Fahrzeug

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19852631A1 (de) 1998-11-14 2000-05-25 Daimler Chrysler Ag Vorrichtung und Verfahren zur Verkehrszeichenerkennung
WO2013017125A1 (de) 2011-08-04 2013-02-07 Conti Temic Microelectronic Gmbh Verfahren zur erkennung von verkehrszeichen
DE102012210454A1 (de) 2012-06-21 2013-12-24 Robert Bosch Gmbh Verfahren und Vorrichtung zur Bereitstellung von Daten für einen elektronischen Horizont für ein Fahrerassistenzsystem eines Fahrzeugs
DE102014211450A1 (de) 2013-06-20 2014-12-24 Ford Global Technologies, Llc Spurüberwachung mit elektronischem Horizont
DE102017009971A1 (de) 2017-10-26 2019-05-02 Daimler Ag Verfahren zum Testen eines Spurhalteassistenzsystems für ein Fahrzeug

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230053786A1 (en) * 2021-08-19 2023-02-23 Ford Global Technologies, Llc Enhanced object detection
US11922702B2 (en) * 2021-08-19 2024-03-05 Ford Global Technologies, Llc Enhanced object detection
DE102021131116B3 (de) 2021-11-26 2023-05-11 Dr. Ing. H.C. F. Porsche Aktiengesellschaft Computerimplementiertes Verfahren zur Detektion von Fehlern eines Fahrerassistenzprogramms für ein Kraftfahrzeug
DE102022213066A1 (de) 2022-12-05 2024-06-06 Stellantis Auto Sas Maschinelle Auswertung einer automatischen Verkehrszeichenerkennung eines Fahrzeugs

Similar Documents

Publication Publication Date Title
DE102011109387A1 (de) Verfahren zur Erkennung von Verkehrszeichen
DE102016210453A1 (de) Fahrzeug, System in Kommunikation mit einem Kommunikationsmodul des Fahrzeugs, und System in Kommunikation mit einer Gruppe von Fahrzeugen
DE102018005865A1 (de) Verfahren zum Testen eines Assistenzsystems für ein Fahrzeug
DE112017008149B4 (de) Vorrichtung für eine von einem Fahrzeug ausgehende Kommunikation, Verfahren zum Kommunizieren von einem Fahrzeug nach außen Informationsverarbeitungsvorrichtung und computerlesbares Medium
DE112018003215T5 (de) Verwalten mobiler Objekte
DE102019216914A1 (de) System und verfahren zur automatisierten erzeugung von semantischen karten
DE102014106506A1 (de) Verfahren zum Durchführen einer Diagnose eines Kamerasystems eines Kraftfahrzeugs, Kamerasystem und Kraftfahrzeug
DE102020210515A1 (de) Verfahren zur Überprüfung von detektierten Veränderungen für ein Umfeldmodell einer digitalen Umgebungskarte
DE102018219602A1 (de) Verfahren zum Erkennen von Kartenfehlern
DE102020131657A1 (de) Diagnostizieren eines Wahrnehmungssystems auf der Grundlage der Szenenkontinuität
DE102010001700A1 (de) Verfahren zur Bestimmung eines Bildes benutzter oder bekannter Streckenabschnitte
DE102019206720A1 (de) Überwachung eines KI-Moduls einer Fahrfunktion eines Fahrzeugs
DE102019207215A1 (de) Verfahren zum Verwenden einer merkmalbasierten Lokalisierungskarte für ein Fahrzeug
DE102018005864A1 (de) Verfahren zum Testen eines Totwinkelassistenzsystems für ein Fahrzeug
DE102018007962A1 (de) Verfahren zur Erkennung von Ampelpositionen
DE112018006321T5 (de) Vorrichtung zum erzeugen von daten eines fahrweges innerhalb einer kreuzung, programm zum erzeugen von daten eines fahrweges innerhalb einer kreuzung und speichermedium
DE102017209283A1 (de) Verfahren zum Optimieren einer digitalen Karte für ein automatisiertes Fahrzeug
DE102017105764A1 (de) Konfiguration eines Fahrerassistenzsystems für ein Kraftfahrzeug, mit überwachten maschinellen Lernen
DE102015012648B4 (de) Verfahren zum Betrieb wenigstens eines Fahrzeugsystems eines Kraftfahrzeugs und Kraftfahrzeug
WO2020094323A1 (de) Verfahren zum klassifizieren von objekten mittels eines automatisiert fahrenden kraftfahrzeuges und automatisiert fahrendes kraftfahrzeug
WO2019211293A1 (de) Verfahren zum betreiben eines fahrerassistenzsystems eines egofahrzeugs mit wenigstens einem umfeldsensor zum erfassen eines umfelds des egofahrzeugs, computer-lesbares medium, system, und fahrzeug
DE102018004429A1 (de) Verfahren zum Testen eines Bremsassistenzsystems für ein Fahrzeug
DE102020200876B4 (de) Verfahren zum Verarbeiten von Sensordaten einer Sensorik eines Fahrzeugs
DE102019005825A1 (de) Verfahren zum Erzeugen von Trainingsdaten für eine kraftfahrzeugexterne elektronische Recheneinrichtung, sowie Fahrerassistenzsystem
DE102009009904A1 (de) Verfahren zur Identifizierung von Objekten

Legal Events

Date Code Title Description
R230 Request for early publication
R081 Change of applicant/patentee

Owner name: DAIMLER AG, DE

Free format text: FORMER OWNER: DAIMLER AG, 70327 STUTTGART, DE

R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee