WO2018050181A1 - Verfahren zum zuordnen einer ampel zu einer fahrspur, fahrzeug und speichermedium - Google Patents

Verfahren zum zuordnen einer ampel zu einer fahrspur, fahrzeug und speichermedium Download PDF

Info

Publication number
WO2018050181A1
WO2018050181A1 PCT/DE2017/200089 DE2017200089W WO2018050181A1 WO 2018050181 A1 WO2018050181 A1 WO 2018050181A1 DE 2017200089 W DE2017200089 W DE 2017200089W WO 2018050181 A1 WO2018050181 A1 WO 2018050181A1
Authority
WO
WIPO (PCT)
Prior art keywords
phase
traffic light
traffic
vehicle
sequence
Prior art date
Application number
PCT/DE2017/200089
Other languages
English (en)
French (fr)
Inventor
Ralph GREWE
Thomas Grotendorst
Bastian Zydek
Original Assignee
Continental Teves Ag & Co. Ohg
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Continental Teves Ag & Co. Ohg filed Critical Continental Teves Ag & Co. Ohg
Priority to DE112017003090.0T priority Critical patent/DE112017003090A5/de
Publication of WO2018050181A1 publication Critical patent/WO2018050181A1/de

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/09623—Systems involving the acquisition of information from passive traffic signs by means mounted on the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/584—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of vehicle lights or traffic lights
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/09626—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages where the origin of the information is within the own vehicle, e.g. a local storage device, digital map
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/30—Transforming light or analogous information into electric information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Definitions

  • the invention relates to a method for assigning a traffic light to a traffic lane and to a vehicle and a storage medium for carrying out such a method.
  • Traffic lights are often used to regulate traffic.
  • traffic lights can also be used in such a way that a traffic light only applies to a certain lane, in particular if several lanes are arranged next to one another. Such traffic lights are typically hung directly above the lanes.
  • This information is typically purely camera-based from a single trip not available, since the switching times can be different from traffic light to traffic light and therefore no reliable prediction is possible.
  • a backend or a vehicle-to-X communication Via a backend or a vehicle-to-X communication, a second channel for traffic light information can be realized, which also enables a possible prediction of the traffic light timing points in the future.
  • the information obtained is temporally uncertain, since it is unclear when a circuit is triggered red-yellow-green (for example, by a pedestrian, a bus or emergency vehicle), and since the communi ⁇ cation may be associated with significant latencies , It is therefore an object of the invention to provide a method which is carried out as an alternative to the prior art, for example solves one or more of the problems mentioned.
  • the invention relates to a method for assigning a traffic light to a traffic lane, comprising the following steps:
  • phase data can be used, wherein detected phase sequences can be assigned to the data.
  • a phase sequence may include a transition between two or three illuminated areas and / or colors of the traffic light. Typically, these are the colors red, yellow and green, which are realized by different illuminated surfaces or lamps.
  • a phase sequence may have a time duration for which an illuminated area and / or a color of the traffic light illuminates. This may facilitate the association since such periods of time can typically be well recognized and compared.
  • a phase sequence may have a time at which an illuminated area and / or a color of the traffic light is switched on or off. This too can allow a particularly accurate and reliable assignment.
  • the phase data may be stored in an in-vehicle database according to one embodiment.
  • the phase data of the vehicle-internal database can be formed in particular from previously recognized phase data. This allows a vehicle to build its own database of live data.
  • the phase data can be obtained by means of vehicle-to-X communication or by means of another radio communication. This allows vehicles to be supplied with live data via radio communication, allowing for ongoing updates and reconciliation operations by a central office.
  • the phase data of each traffic light may in particular be linked to a traffic lane. This allows an accurate assignment of the respective lane to a traffic light and vice versa.
  • the image sequence may be an image sequence of a plurality of traffic lights, a respective phase sequence being recognized for each of the traffic lights, and a number of the traffic lights or traffic lights being assigned to a respective traffic lane.
  • the method further comprises the following step:
  • the method further comprises the following step: Predicting a future traffic light phase of a traffic light based on the detected traffic light phase and the expected traffic light phase.
  • the image sequence can be recorded in particular by means of a camera. However, in principle, the image sequence can also be recorded by other communication paths, for example the traffic light can emit corresponding signals which the vehicle can recognize. These may be, for example, vehicle-to-X messages.
  • the invention further relates to a vehicle configured to carry out a method according to the invention.
  • a vehicle configured to carry out a method according to the invention.
  • all embodiments and variants described herein can be used.
  • the vehicle may preferably also be configured to display a respective assignment of a traffic light to a lane to a driver of the vehicle and / or to use it for autonomous vehicle control. This corresponds to a typical use of the information obtained by the method according to the invention.
  • the invention further relates to a non-volatile computer-readable storage medium which contains program code, in the execution of which a processor carries out a method according to the invention.
  • a processor carries out a method according to the invention.
  • all embodiments and variants described herein can be used.
  • the information provided, for example, via backend or vehicle-to-X communication can be connected to the camera-based information in such a way that an added value can be generated from the perspective of an ADAS / AD function.
  • One possibility is to improve the assignment of the traffic lights detected by the camera to the ego vehicle or lane by taking into account the switching times of the traffic lights.
  • two traffic lights and two lanes A and B are detected at the current time t0, which are both green at the time t0.
  • the information is obtained through the backend that the traffic lane for the A (future) time tl switches to yellow, while the traffic signal for driving ⁇ stripes B initially remains green. If the camera detects at time t 1 that one of the two traffic lights switches to yellow, it can safely assign these to lane A.
  • the temporal course can also be used in unclear situations for improving the allocation.
  • three traffic lights 1, 2 and 3 for the two lanes A and B can be detected, making an unambiguous assignment is no longer possible.
  • both traffic reports can be assigned to the traffic lane A.
  • a further advantage can be obtained after the assignment of the camera-based detections to the information about the temporal phase profiles obtained from the backend, since Although the data obtained from the backend provides a high degree of certainty over the time course after switching has taken place (for example, it is clear that the yellow phase lasts five seconds), there is a residual uncertainty as to when exactly the switching sequence is initiated. After the camera has detected that a traffic light has switched to yellow, it is certain that the circuit has been started. In combination with the end-of-tail information, the future course of the traffic light phases can be predicted with great certainty, which is not possible on a camera-based basis.
  • Fig. 1 a situation in which the inventive
  • Fig. 1 shows schematically a road 1, which has a right lane 5 and a left lane 6. Above the right lane 5, a first traffic light 15 is suspended. Above the left lane 6, a second traffic light 16 is suspended. The two traffic lights 15, 16 are designed as normal traffic lights with the three colors red, yellow and green. They only block the lane over which they are suspended or release them.
  • the vehicle 10 On the right lane 5 drives a vehicle 10, which is shown here only schematically.
  • the vehicle 10 has a camera 12 and a vehicle-to-X communication module 13.
  • the vehicle 10 can detect the two traffic lights 15, 16 and thereby also recognize in which phase the traffic lights 15, 16 are currently located. In particular, it can be recognized which color or which surface of the respective traffic light 15, 16 is currently lit. Also switching times can be detected accordingly. From this phase sequences can be determined.
  • the vehicle 10 can receive phase data from a central server (not shown), wherein these phase data indicate, inter alia, at what times the two traffic lights 15, 16 are to assume a respective phase or change phase.
  • phase data may be referred to as the expected phase sequence. If such a phase or a phase change by means of recorded by the camera 12 images is detected, can be carried out to a corresponding ⁇ order.
  • the vehicle 10 recognizes on the basis of a match of phase data detected by the camera 12 and phase data detected via the vehicle-to-X communication module 13 that a traffic light 15, 16 is assigned to a respective traffic lane 5, 6. Corresponding Zu glovessinfor ⁇ mation is this included in the obtained through vehicle-to-X communication phase data.
  • vehicle-to-X communication in particular means direct communication between vehicles and / or between vehicles and infrastructure facilities.
  • this may be vehicle-to-vehicle communication or vehicle-to-infrastructure communication. If, in the context of this application, reference is made to communication between vehicles, this can in principle be carried out, for example, in the context of a vehicle-to-vehicle communication, which is typically is done without mediation by a mobile network or similar external infrastructure and which is therefore different from other solutions that build on a mobile network, for example.
  • vehicle-to-X communication may be performed using the IEEE 802.11p or IEEE 1609.4 standards.
  • a vehicle-to-X communication can also be referred to as C2X communication.
  • the subareas can be referred to as C2C (Car-to-Car) or C2I (Car-to-Infrastructure).
  • C2C Car-to-Car
  • C2I Car-to-Infrastructure
  • the invention explicitly does not exclude vehicle-to-X communication with switching, for example via a mobile radio network.
  • steps of the method according to the invention can be carried out in the order given. However, they can also be executed in a different order. In one of its embodiments, for example with a specific set of steps, the method according to the invention can be carried out in such a way that no further steps are carried out. However, in principle also further steps can be carried out, even those which are not mentioned.

Abstract

Die Erfindung betrifft ein Verfahren zum Zuordnen einer Ampel zu einer Fahrspur, wobei erkannte Phasenfolgen mit erwarteten Phasenfolgen verglichen werden. Die Erfindung betrifft des Weiteren ein zugehöriges Fahrzeug und ein zugehöriges Speichermedium.

Description

Verfahren zum Zuordnen einer Ampel zu einer Fahrspur, Fahrzeug und Speichermedium
Die Erfindung betrifft ein Verfahren zum Zuordnen einer Ampel zu einer Fahrspur sowie ein Fahrzeug und ein Speichermedium zum Ausführen eines solchen Verfahrens.
Ampeln werden in vielen Fällen eingesetzt, um den Verkehr zu regeln. Dabei können Ampeln auch in einer Weise eingesetzt werden, dass eine Ampel nur für eine bestimmte Fahrspur gilt, insbesondere wenn mehrere Fahrspuren nebeneinander angeordnet sind. Derartige Ampeln werden typischerweise unmittelbar über den Fahrspuren aufgehängt.
Es existieren Algorithmen, die in Einzelbildern oder Bildfolgen Ampeln sowie deren aktuelle Phase erkennen. Unter einer Phase ist dabei insbesondere zu verstehen, welches Licht oder welche Farbe gerade aufleuchtet. Typischerweise sind dies rot, gelb und grün. Nach der Detektion von Ampeln sowie deren aktueller Phase besteht das nächste Problem in der Bestimmung der für das eigene Fahrzeug bzw. Ego-Fahrzeug relevanten Ampel bzw. der allgemeinen Zuordnung von Ampeln zu Fahrspuren. Dies wird gemäß dem Stand der Technik beispielsweise mit regelbasierten Verfahren durchgeführt, welche beispielsweise auf einer Position der Ampel und/oder einer Reihenfolge basieren. Ein weiteres Problem besteht darin, dass für eine auf der Ampeldetektion aufbauende Funktion der zeitliche Verlauf der Phasenfolge bekannt sein sollte, zum Beispiel die genaue zeitliche Abfolge grün-gelb-rot . Diese Information ist typischerweise rein kamerabasiert aus einer Einzelfahrt nicht verfügbar, da die Schaltzeiten von Ampel zu Ampel unterschiedlich sein können und daher keine sichere Prädiktion möglich ist. Über ein Backend bzw. eine Fahrzeug-zu-X-Kommunikation kann ein zweiter Kanal für Ampelinformationen realisiert werden, welcher auch eine mögliche Prädiktion der AmpelschaltZeitpunkte in der Zukunft ermöglicht. Allerdings ist die erhaltene Information zum einen zeitlich unsicher, da unklar ist, wann eine Schaltung rot-gelb-grün ausgelöst wird (zum Beispiel durch einen Fußgänger, einen Bus oder ein Einsatzfahrzeug) , und da die Kom¬ munikation mit erheblichen Latenzzeiten behaftet sein kann. Es ist deshalb eine Aufgabe der Erfindung, ein Verfahren vorzusehen, welches im Vergleich zum Stand der Technik alternativ ausgeführt ist, beispielsweise eines oder mehrere der genannten Probleme löst. Es ist des Weiteren eine Aufgabe der Erfindung, ein Fahrzeug vorzusehen, welches dazu konfiguriert ist, ein solches Verfahren auszuführen. Außerdem ist es eine Aufgabe der Erfindung, ein Speichermedium vorzusehen, welches Programmcode enthält, bei dessen Ausführung ein Prozessor ein solches Verfahren ausführt. Dies wird erfindungsgemäß durch ein Verfahren nach Anspruch 1, ein Fahrzeug nach Anspruch 13 und ein nichtflüchtiges compu¬ terlesbares Speichermedium nach Anspruch 15 erreicht. Vorteilhafte Ausgestaltungen können beispielsweise den jeweiligen Unteransprüchen entnommen werden. Der Inhalt der Ansprüche wird durch ausdrückliche Inbezugnahme zum Inhalt der Beschreibung gemacht .
Die Erfindung betrifft ein Verfahren zum Zuordnen einer Ampel zu einer Fahrspur, welches folgende Schritte aufweist:
- Aufnehmen einer Bildfolge von der Ampel,
Erkennen einer Phasenfolge der Ampel in der Bildfolge, Vergleichen der erkannten Phasenfolge mit Phasendaten, wobei die Phasendaten eine Anzahl erwarteter Phasenfolgen für jeweilige Fahrspuren beinhalten, und Zuordnen der Ampel zu einer Fahrspur, wenn die erkannte Phasenfolge mit einer für diese Fahrspur erwarteten Phasenfolge übereinstimmt. Mittels des erfindungsgemäßen Verfahrens ist in vorteilhafter Weise eine zuverlässige Zuordnung einer Ampel zu einer Fahrspur möglich. Hierzu kann auf die Phasendaten zurückgegriffen werden, wobei erkannte Phasenfolgen den Daten zugeordnet werden können. Eine Phasenfolge kann insbesondere einen Übergang zwischen zwei oder drei beleuchteten Flächen und/oder Farben der Ampel beinhalten. Typischerweise handelt es sich dabei um die Farben rot, gelb und grün, welche durch unterschiedliche beleuchtete Flächen bzw. Lampen realisiert sind.
Eine Phasenfolge kann insbesondere eine Zeitdauer aufweisen, für welche eine beleuchtete Fläche und/oder eine Farbe der Ampel aufleuchtet. Dies kann die Zuordnung erleichtern, da derartige Zeitdauern typischerweise gut erkannt und verglichen werden können.
Eine Phasenfolge kann insbesondere eine Uhrzeit aufweisen, zu welcher eine beleuchtete Fläche und/oder eine Farbe der Ampel eingeschaltet wird oder ausgeschaltet wird. Auch dies kann eine besonders genaue und zuverlässige Zuordnung ermöglichen.
Die Phasendaten können gemäß einer Ausführung in einer fahrzeuginternen Datenbank gespeichert sein. Die Phasendaten der fahrzeuginternen Datenbank können insbesondere aus vorher erkannten Phasendaten gebildet sein. Dadurch kann ein Fahrzeug sich selbst seine eigene Datenbank mit Phasendaten aufbauen.
Gemäß einer weiteren Ausführung, welche alternativ zur eben beschriebenen Ausführung sein kann oder auch mit dieser kom- biniert werden kann, können die Phasendaten mittels Fahr- zeug-zu-X-Kommunikation oder mittels einer anderen Funkkommunikation erhalten werden. Dies erlaubt eine Versorgung von Fahrzeugen mit Phasendaten über Funkkommunikation, was laufende Aktualisierungen und Abgleichsoperationen durch eine Zentralstelle ermöglicht.
Die Phasendaten jeder Ampel können insbesondere mit einer Fahrspur verknüpft sein. Dies ermöglicht eine genaue Zuordnung der jeweiligen Fahrspur zu einer Ampel und umgekehrt.
Bei der Bildfolge kann es sich insbesondere um eine Bildfolge einer Mehrzahl von Ampeln handeln, wobei eine jeweilige Phasenfolge für jede der Ampeln erkannt wird, und wobei eine Anzahl der Ampeln oder jede der Ampeln einer jeweiligen Fahrspur zugeordnet werden. Dadurch kann eine Zuordnung mehrerer Ampeln zu jeweiligen Fahrspuren, wie sie typischerweise bei mehrspurigen Straßen vorkommen, in vorteilhafter Weise erreicht werden .
Gemäß einer vorteilhaften Ausführung weist das Verfahren ferner folgenden Schritt auf:
Erkennen, dass zumindest eine erwartete Phasenfolge der Phasendaten mit keiner erkannten Phasenfolge überein- stimmt, und
darauf ansprechend Feststellen, dass eine zu der erwarteten Phasenfolge zugeordnete Ampel nicht erkannt oder nicht aufgenommen wurde. Damit können beispielsweise Fehler im Erkennungssystem oder in den Phasenfolgen erkannt werden.
Gemäß einer vorteilhaften Ausführung weist das Verfahren ferner folgenden Schritt auf: Voraussagen einer künftigen Ampelphase einer Ampel basierend auf der erkannten Ampelphase und der erwarteten Ampelphase . Die Bildfolge kann insbesondere mittels einer Kamera aufgenommen werden. Es kann jedoch grundsätzlich auch die Bildfolge durch andere Kommunikationswege aufgenommen werden, beispielsweise kann die Ampel entsprechende Signale aussenden, welche das Fahrzeug erkennen kann. Dabei kann es sich beispielsweise um Fahrzeug-zu-X-Nachrichten handeln.
Die Erfindung betrifft des Weiteren ein Fahrzeug, welches dazu konfiguriert ist, ein Verfahren gemäß der Erfindung auszuführen. Dabei kann auf alle hierin beschriebenen Ausführungen und Varianten zurückgegriffen werden.
Das Fahrzeug kann bevorzugt ferner dazu konfiguriert sein, eine jeweilige Zuordnung einer Ampel zu einer Fahrspur einem Fahrer des Fahrzeugs anzuzeigen und/oder für eine autonome Fahr- zeugsteuerung zu verwenden. Dies entspricht einer typischen Verwendung der durch das erfindungsgemäße Verfahren erhaltenen Information .
Die Erfindung betrifft des Weiteren ein nichtflüchtiges com- puterlesbares Speichermedium, welches Programmcode enthält, bei dessen Ausführung ein Prozessor ein erfindungsgemäßes Verfahren ausführt. Dabei kann auf alle hierin beschriebenen Ausführungen und Varianten zurückgegriffen werden. Es kann davon gesprochen werden, dass die beispielsweise über Backend- bzw. Fahrzeug-zu-X-Kommunikation bereitgestellten Informationen so mit den kamerabasierten Informationen verbunden werden können, dass aus Sicht einer ADAS/AD-Funktion ein Mehrwert erzeugt werden kann. Eine Möglichkeit besteht darin, die Zuordnung der von der Kamera detektierten Ampeln zum Ego-Fahrzeug bzw. zum Fahrstreifen zu verbessern, indem die SchaltZeitpunkte der Ampeln berücksichtigt werden. So werden zum Beispiel zum aktuellen Zeitpunkt tO zwei Ampeln und zwei Fahrstreifen A und B detektiert, die zum Zeitpunkt tO beide grün sind. Über das Backend wird die Information erhalten, dass die Ampel für Fahrstreifen A zum (zukünftigen) Zeitpunkt tl auf gelb schaltet, während die Ampel für Fahr¬ streifen B zunächst grün bleibt. Wenn die Kamera zur Zeit tl detektiert, dass eine der zwei Ampeln auf gelb schaltet, kann sie diese sicher dem Fahrstreifen A zuordnen.
Insbesondere kann der zeitliche Verlauf auch in wenig eindeutigen Situationen für eine Verbesserung der Zuordnung verwendet werden. So können zum Beispiel drei Ampeln 1, 2 und 3 für die zwei Fahrstreifen A und B detektiert werden, womit eine eindeutige Zuordnung nicht mehr möglich ist. Wird jedoch zum Zeitpunkt tl detektiert, dass die zwei Ampeln 1 und 2 auf gelb schalten, können beide Ampeldetektionen dem Fahrstreifen A zugeordnet werden.
Ebenso kann erkannt werden, ob eine Ampel nicht detektiert werden konnte. Wenn zum Beispiel nur eine Ampel detektiert wurde, die zum Zeitpunkt tl ihre Phase nicht ändert, kann mit einer gewissen Wahrscheinlichkeit davon ausgegangen werden, dass die Ampel für den Fahrstreifen A nicht detektiert wurde.
Neben der Bereitstellung über ein Backend bzw. eine Fahr- zeug-zu-X-Kommunikation kann auch eine Datenbank im Fahrzeug aufgebaut werden, welche typische Schaltzeiten und Schalt- Zeitpunkte für regelmäßig befahrene Stammstrecken enthält.
Ein weiterer Vorteil kann nach erfolgter Zuordnung der kamerabasierten Detektionen zu dem vom Backend erhaltenen Informationen über die zeitlichen Phasenverläufe erhalten werden, da bei den vom Backend erhaltenen Daten zwar eine hohe Sicherheit über den zeitlichen Verlauf nach erfolgter Schaltung besteht (zum Beispiel ist genau klar, dass die Gelbphase fünf Sekunden dauert) , aber es besteht eine Rest-Unsicherheit, wann genau die Schaltfolge eingeleitet wird. Nachdem mit der Kamera erkannt wurde, dass eine Ampel auf gelb geschaltet hat, ist sicher, dass die Schaltung eingeleitet wurde. In Kombination mit den Ba- ckend-Informationen kann dann mit großer Sicherheit der zukünftige Verlauf der Ampelphasen vorhergesagt werden, was rein kamerabasiert nicht möglich ist.
Weitere Merkmale und Vorteile wird der Fachmann dem nachfolgend mit Bezug auf die beigefügte Zeichnung beschriebenen Ausführungsbeispiel entnehmen. Dabei zeigt:
Fig. 1: eine Situation, in welcher das erfindungsgemäße
Verfahren durchgeführt werden kann.
Fig. 1 zeigt schematisch eine Straße 1, welche eine rechte Fahrspur 5 und eine linke Fahrspur 6 aufweist. Über der rechten Fahrspur 5 ist eine erste Ampel 15 aufgehängt. Über der linken Fahrspur 6 ist eine zweite Ampel 16 aufgehängt. Die beiden Ampeln 15, 16 sind als normale Verkehrsampeln mit den drei Farben rot, gelb und grün ausgebildet. Sie sperren jeweils nur diejenige Fahrspur, über welcher sie aufgehängt sind, bzw. geben diese frei.
Auf der rechten Fahrspur 5 fährt ein Fahrzeug 10, welches hier lediglich schematisch dargestellt ist. Das Fahrzeug 10 weist eine Kamera 12 und ein Fahrzeug-zu-X-Kommunikationsmodul 13 auf. Mittels der Kamera 12 kann das Fahrzeug 10 die beiden Ampeln 15, 16 erfassen und dabei auch erkennen, in welcher Phase sich die Ampeln 15, 16 gerade befinden. Insbesondere kann dabei erkannt werden, welche Farbe bzw. welche Fläche der jeweiligen Ampel 15, 16 gerade leuchtet. Auch Umschaltzeiten können entsprechend erkannt werden. Daraus können Phasenfolgen ermittelt werden.
Über das Fahrzeug-zu-X-Kommunikationsmodul 13 kann das Fahrzeug 10 Phasendaten von einem nicht gezeigten zentralen Server empfangen, wobei diese Phasendaten unter anderem angeben, zu welchen Zeiten die beiden Ampeln 15, 16 eine jeweilige Phase einnehmen bzw. ihre Phase wechseln sollen. Derartige Daten können als erwartete Phasenfolge bezeichnet werden. Wird eine solche Phase bzw. ein Phasenwechsel mittels durch die Kamera 12 aufgenommener Bilder erkannt, so kann eine entsprechende Zu¬ ordnung erfolgen. Anders ausgedrückt erkennt das Fahrzeug 10 anhand einer Übereinstimmung von mittels der Kamera 12 erkannten Phasendaten und über das Fahrzeug-zu-X-Kommunikationsmodul 13 erkannten Phasendaten, dass eine Ampel 15, 16 einer jeweiligen Fahrspur 5, 6 zugeordnet ist. Entsprechende Zuordnungsinfor¬ mationen sind hierzu in den über Fahrzeug-zu-X-Kommunikation erhaltenen Phasendaten enthalten. Es sei verstanden, dass dieses Ausführungsbeispiel lediglich schematisch ist und grundsätzlich alle weiter oben beschriebenen Ausführungen und Varianten des erfindungsgemäßen Verfahrens verwendet werden können. Allgemein sei darauf hingewiesen, dass unter Fahrzeug-zu-X-Kommunikation insbesondere eine direkte Kommunikation zwischen Fahrzeugen und/oder zwischen Fahrzeugen und Infrastruktureinrichtungen verstanden wird. Beispielsweise kann es sich also um Fahrzeug-zu-Fahrzeug-Kommunikation oder um Fahrzeug-zu-Infrastruktur-Kommunikation handeln. Sofern im Rahmen dieser Anmeldung auf eine Kommunikation zwischen Fahrzeugen Bezug genommen wird, so kann diese grundsätzlich beispielsweise im Rahmen einer Fahr- zeug-zu-Fahrzeug-Kommunikation erfolgen, welche typischerweise ohne Vermittlung durch ein Mobilfunknetz oder eine ähnliche externe Infrastruktur erfolgt und welche deshalb von anderen Lösungen, welche beispielsweise auf ein Mobilfunknetz aufbauen, abzugrenzen ist. Beispielsweise kann eine Fahr- zeug-zu-X-Kommunikation unter Verwendung der Standards IEEE 802.11p oder IEEE 1609.4 erfolgen. Eine Fahr- zeug-zu-X-Kommunikation kann auch als C2X-Kommunikation bezeichnet werden. Die Teilbereiche können als C2C (Car-to-Car) oder C2I (Car-to-Infrastructure) bezeichnet werden. Die Er- findung schließt jedoch Fahrzeug-zu-X-Kommunikation mit Vermittlung beispielsweise über ein Mobilfunknetz explizit nicht aus .
Erwähnte Schritte des erfindungsgemäßen Verfahrens können in der angegebenen Reihenfolge ausgeführt werden. Sie können jedoch auch in einer anderen Reihenfolge ausgeführt werden. Das erfindungsgemäße Verfahren kann in einer seiner Ausführungen, beispielsweise mit einer bestimmten Zusammenstellung von Schritten, in der Weise ausgeführt werden, dass keine weiteren Schritte ausgeführt werden. Es können jedoch grundsätzlich auch weitere Schritte ausgeführt werden, auch solche welche nicht erwähnt sind.
Die zur Anmeldung gehörigen Ansprüche stellen keinen Verzicht auf die Erzielung weitergehenden Schutzes dar.
Sofern sich im Laufe des Verfahrens herausstellt, dass ein Merkmal oder eine Gruppe von Merkmalen nicht zwingend nötig ist, so wird anmelderseitig bereits jetzt eine Formulierung zumindest eines unabhängigen Anspruchs angestrebt, welcher das Merkmal oder die Gruppe von Merkmalen nicht mehr aufweist. Hierbei kann es sich beispielsweise um eine Unterkombination eines am Anmeldetag vorliegenden Anspruchs oder um eine durch weitere Merkmale eingeschränkte Unterkombination eines am Anmeldetag vorliegenden Anspruchs handeln. Derartige neu zu formulierende Ansprüche oder Merkmalskombinationen sind als von der Offenbarung dieser Anmeldung mit abgedeckt zu verstehen.
Es sei ferner darauf hingewiesen, dass Ausgestaltungen, Merkmale und Varianten der Erfindung, welche in den verschiedenen Ausführungen oder Ausführungsbeispielen beschriebenen und/oder in den Figuren gezeigt sind, beliebig untereinander kombinierbar sind. Einzelne oder mehrere Merkmale sind beliebig gegeneinander austauschbar. Hieraus entstehende Merkmalskombinationen sind als von der Offenbarung dieser Anmeldung mit abgedeckt zu verstehen .
Rückbezüge in abhängigen Ansprüchen sind nicht als ein Verzicht auf die Erzielung eines selbständigen, gegenständlichen Schutzes für die Merkmale der rückbezogenen Unteransprüche zu verstehen. Diese Merkmale können auch beliebig mit anderen Merkmalen kombiniert werden.
Merkmale, die lediglich in der Beschreibung offenbart sind oder Merkmale, welche in der Beschreibung oder in einem Anspruch nur in Verbindung mit anderen Merkmalen offenbart sind, können grundsätzlich von eigenständiger erfindungswesentlicher Bedeutung sein. Sie können deshalb auch einzeln zur Abgrenzung vom Stand der Technik in Ansprüche aufgenommen werden.

Claims

Verfahren zum Zuordnen einer Ampel (15, 16) zu einer Fahrspur (5, 6), welches folgende Schritte aufweist: Aufnehmen einer Bildfolge von der Ampel (15, 16),
Erkennen einer Phasenfolge der Ampel (15, 16) in der Bildfolge,
Vergleichen der erkannten Phasenfolge mit Phasendaten, wobei die Phasendaten eine Anzahl erwarteter Phasenfolgen für jeweilige Fahrspuren (5, 6) beinhalten, und
Zuordnen der Ampel (15, 16) zu einer Fahrspur (5, 6), wenn die erkannte Phasenfolge mit einer für diese Fahrspur (5, 6) erwarteten Phasenfolge übereinstimmt.
Verfahren nach Anspruch 1,
wobei eine Phasenfolge einen Übergang zwischen zwei oder drei beleuchteten Flächen und/oder Farben der Ampel (15, 16) beinhaltet .
Verfahren nach einem der vorhergehenden Ansprüche, wobei eine Phasenfolge eine Zeitdauer aufweist, für welche eine beleuchtete Fläche und/oder eine Farbe der Ampel (15, 16) aufleuchtet.
Verfahren nach einem der vorhergehenden Ansprüche, wobei eine Phasenfolge eine Uhrzeit aufweist, zu welcher eine beleuchtete Fläche und/oder eine Farbe der Ampel (15, 16) eingeschaltet wird oder ausgeschaltet wird.
Verfahren nach einem der vorhergehenden Ansprüche, wobei die Phasendaten in einer fahrzeuginternen Datenbank gespeichert sind. Verfahren nach Anspruch 5,
wobei die Phasendaten der fahrzeuginternen Datenbank aus vorher erkannten Phasendaten gebildet sind.
Verfahren nach einem der vorhergehenden Ansprüche, wobei die Phasendaten mittels Fahrzeug-zu-X-Kommunikation oder mittels einer anderen Funkkommunikation erhalten werden .
Verfahren nach einem der vorhergehenden Ansprüche, wobei die Phasendaten jeder Ampel (15, 16) mit einer
Fahrspur (5, 6) verknüpft sind.
Verfahren nach einem der vorhergehenden Ansprüche, wobei es sich bei der Bildfolge um eine Bildfolge einer
Mehrzahl von Ampeln (15, 16) handelt,
wobei eine jeweilige Phasenfolge für jede der Ampeln (15, 16) erkannt wird, und
wobei eine Anzahl der Ampeln (15, 16) oder jede der Ampeln (15, 16) einer j eweiligen Fahrspur (5, 6) zugeordnet werden .
Verfahren nach einem der vorhergehenden Ansprüche, welches ferner folgenden Schritt aufweist:
Erkennen, dass zumindest eine erwartete Phasenfolge der Phasendaten mit keiner erkannten Phasenfolge übereinstimmt, und
darauf ansprechend Feststellen, dass eine zu der erwarteten Phasenfolge zugeordnete Ampel (15, 16) nicht erkannt oder nicht aufgenommen wurde. Verfahren nach einem der vorhergehenden Ansprüche, welches ferner folgenden Schritt aufweist:
Voraussage einer künftigen Ampelphase einer Ampel (15, 16) basierend auf der erkannten Ampelphase und der erwarteten Ampelphase .
12. Verfahren nach einem der vorhergehenden Ansprüche,
wobei die Bildfolge mittels einer Kamera (12) aufgenommen wird .
13. Fahrzeug (10), welches dazu konfiguriert ist, ein Verfahren nach einem der vorhergehenden Ansprüche auszuführen.
Fahrzeug (10) nach Anspruch 13, welches ferner dazu konfiguriert ist, eine jeweilige Zuordnung einer Ampel (15, 16) zu einer Fahrspur (5, 6) einem Fahrer des Fahrzeugs (10) anzuzeigen und/oder für eine autonome Fahrzeugsteuerung zu verwenden .
Nichtflüchtiges computerlesbares Speichermedium, welches Programmcode enthält, bei dessen Ausführung ein Prozessor ein Verfahren nach einem der Ansprüche 1 bis 12 ausführt.
PCT/DE2017/200089 2016-09-14 2017-09-08 Verfahren zum zuordnen einer ampel zu einer fahrspur, fahrzeug und speichermedium WO2018050181A1 (de)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE112017003090.0T DE112017003090A5 (de) 2016-09-14 2017-09-08 Verfahren zum Zuordnen einer Ampel zu einer Fahrspur, Fahrzeug und Speichermedium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102016217558.0 2016-09-14
DE102016217558.0A DE102016217558A1 (de) 2016-09-14 2016-09-14 Verfahren zum Zuordnen einer Ampel zu einer Fahrspur, Fahrzeug und Speichermedium

Publications (1)

Publication Number Publication Date
WO2018050181A1 true WO2018050181A1 (de) 2018-03-22

Family

ID=60042930

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/DE2017/200089 WO2018050181A1 (de) 2016-09-14 2017-09-08 Verfahren zum zuordnen einer ampel zu einer fahrspur, fahrzeug und speichermedium

Country Status (2)

Country Link
DE (2) DE102016217558A1 (de)
WO (1) WO2018050181A1 (de)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10757485B2 (en) 2017-08-25 2020-08-25 Honda Motor Co., Ltd. System and method for synchronized vehicle sensor data acquisition processing using vehicular communication
CN112327855A (zh) * 2020-11-11 2021-02-05 东软睿驰汽车技术（沈阳）有限公司 自动驾驶车辆的控制方法、装置和电子设备
US11163317B2 (en) 2018-07-31 2021-11-02 Honda Motor Co., Ltd. System and method for shared autonomy through cooperative sensing
US11181929B2 (en) 2018-07-31 2021-11-23 Honda Motor Co., Ltd. System and method for shared autonomy through cooperative sensing

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108470454B (zh) * 2018-03-30 2021-07-09 江苏智通交通科技有限公司 信号控制路口的车道-灯组-相位关联映射方法
DE102018210125A1 (de) * 2018-06-21 2019-12-24 Volkswagen Aktiengesellschaft Zuordnung von Ampel zu zugehörigen Fahrstreifen
DE102018123259A1 (de) * 2018-09-21 2020-03-26 Robert Bosch Gmbh System und Verfahren zum Ermitteln eines Signalbilds eines Signalgebers einer Lichtsignalanlage
DE102019211102A1 (de) * 2019-07-25 2021-01-28 Volkswagen Aktiengesellschaft Verfahren, Vorrichtung und Computerprogramm zum Auswerten von Ampelinformationen über eine Ampelanlage
DE102019215095A1 (de) * 2019-10-01 2021-04-01 Volkswagen Aktiengesellschaft Gütebestimmungsverfahren, Gütebestimmungsvorrichtung, Kraftfahrzeug
DE102020200704A1 (de) 2020-01-22 2021-08-05 Volkswagen Aktiengesellschaft Verfahren zur Bestimmung eines Verkehrsregelkriteriums einer Verkehrsampeln, sowie Verkehrsregelbestimmungssystem und Fahrzeug
DE102021001802A1 (de) 2021-04-08 2022-10-13 Abdullatif Alhaj Rabie Smart-Ampelsystem im Auto, Smart-Ampelsystem in der Straße

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102117546A (zh) * 2011-03-10 2011-07-06 上海交通大学 车载交通信号灯辅助装置
DE102012111933A1 (de) * 2012-12-07 2014-06-12 Conti Temic Microelectronic Gmbh Verfahren und vorrichtung zum automatischen erkennen und interpretieren von lichtsignalanlagen
DE102015003847A1 (de) * 2015-03-26 2015-08-20 Daimler Ag Verfahren und Fahrerassistenzsystem zum Erfassen und Signalisieren von Lichtsignalen von wenigstens einer Lichtsignaleinrichtung einer Wechsellichtzeichenanlage
DE102014204059A1 (de) * 2014-03-05 2015-09-10 Conti Temic Microelectronic Gmbh Fahrerassistenzsystem zur Berechnung einer zukünftigen Ampelphase
EP2944532A2 (de) * 2014-05-12 2015-11-18 Volkswagen Aktiengesellschaft Ampelassistenzsystem für ein fahrzeug mit einer anzeigeeinrichtung

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10334620B4 (de) 2003-07-30 2023-07-06 Robert Bosch Gmbh Generierung von Verkehrshinweisen durch die Interpretation von Verkehrszeichenszenarien und Navigationsinformation in einem Fahrzeug
DE102008010968A1 (de) 2008-02-25 2009-09-17 Robert Bosch Gmbh Anzeige eines relevanten Verkehrszeichens oder einer relevanten Verkehrseinrichtung
CN103632559B (zh) 2013-12-05 2016-03-16 武汉烽火众智数字技术有限责任公司 基于视频分析的红绿灯状态检测方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102117546A (zh) * 2011-03-10 2011-07-06 上海交通大学 车载交通信号灯辅助装置
DE102012111933A1 (de) * 2012-12-07 2014-06-12 Conti Temic Microelectronic Gmbh Verfahren und vorrichtung zum automatischen erkennen und interpretieren von lichtsignalanlagen
DE102014204059A1 (de) * 2014-03-05 2015-09-10 Conti Temic Microelectronic Gmbh Fahrerassistenzsystem zur Berechnung einer zukünftigen Ampelphase
EP2944532A2 (de) * 2014-05-12 2015-11-18 Volkswagen Aktiengesellschaft Ampelassistenzsystem für ein fahrzeug mit einer anzeigeeinrichtung
DE102015003847A1 (de) * 2015-03-26 2015-08-20 Daimler Ag Verfahren und Fahrerassistenzsystem zum Erfassen und Signalisieren von Lichtsignalen von wenigstens einer Lichtsignaleinrichtung einer Wechsellichtzeichenanlage

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10757485B2 (en) 2017-08-25 2020-08-25 Honda Motor Co., Ltd. System and method for synchronized vehicle sensor data acquisition processing using vehicular communication
US11163317B2 (en) 2018-07-31 2021-11-02 Honda Motor Co., Ltd. System and method for shared autonomy through cooperative sensing
US11181929B2 (en) 2018-07-31 2021-11-23 Honda Motor Co., Ltd. System and method for shared autonomy through cooperative sensing
CN112327855A (zh) * 2020-11-11 2021-02-05 东软睿驰汽车技术（沈阳）有限公司 自动驾驶车辆的控制方法、装置和电子设备

Also Published As

Publication number Publication date
DE102016217558A1 (de) 2018-03-15
DE112017003090A5 (de) 2019-03-14

Similar Documents

Publication Publication Date Title
WO2018050181A1 (de) Verfahren zum zuordnen einer ampel zu einer fahrspur, fahrzeug und speichermedium
EP3204927B1 (de) Verfahren zum betreiben eines zentralen servers und verfahren zum handhaben einer regelkarte
EP2186077B1 (de) Verfahren und vorrichtung zur steuerung des verkehrsflusses
DE102013107959B4 (de) Verfahren zur Unterstützung des Parkens von Fahrzeugen auf einer Parkfläche, Parkflächenmanagementsystem, fahrzeugseitiges System und Computerprogramm dafür
DE102018222601A1 (de) Verfahren und Fahrerassistenzsystem zum Unterstützen eines Fahrers eines Fahrzeugs beim Führen des Fahrzeugs
DE102018119882A1 (de) Übertragen von Bilddaten, die von einer Fahrzeugkamera aufgenommen werden
DE102010052702A1 (de) Verfahren zur Steuerung einer Lichtsignalanlage und zugehörige Lichtsignalanlage
DE102011107881A1 (de) Optimierung von Rettungswegen für Einsatzfahrzeuge
DE102015015021A1 (de) Verfahren zur Unterstützung eines Fahrers beim Führen eines Fahrzeugs
DE112010005405T5 (de) Informationsbereitstellungsvorrichtung
DE102015221183A1 (de) Verfahren und Vorrichtung zur Zuordnung von Verkehrsteilnehmern und Kommunikations-Identifikatoren
CH714419B1 (de) System und Verfahren zum Verringern von Wartezeiten im Strassenverkehr.
EP3673471A1 (de) System und verfahren zum unterstützen einer prognose einer zukünftigen signalisierung eines verkehrsinfrastrukturelements
WO2015049167A1 (de) System zur bereitstellung von daten für fahrzeuge
DE102016005580A1 (de) Verfahren und System zum Vorhersagen eines Fahrverhaltens eines Fahrzeugs
DE102014006551A1 (de) Verfahren zum Erstellen einer Schaltprognose für eine Ampel
DE112019004232T5 (de) Informationsbereitstellungsvorrichtung, Informationsbereitstellungsverfahren, Informationsbereitstellungssystem, Computerprogramm, und Datenstruktur
DE102019215085A1 (de) Verfahren zur Warnung eines Fahrers eines Fahrzeugs vor einer potentiell kritischen Verkehrssituation
EP3062301A1 (de) Verfahren zum zuordnen einer fahrlinie zu einem fahrzeug und verfahren zur steuerung eines verkehrssystems
WO2009021902A1 (de) Verfahren und vorrichtung zur priorisierung von sonderfahrzeugen an einem lichtsignalgesteuerten knotenpunkt
DE102007038724A1 (de) Verfahren und Vorrichtung zur Priorisierung von Sonderfahrzeugen an einem lichtsignalgesteuerten Knotenpunkt
DE102017221632A1 (de) Verfahren zum Bestimmen einer Risikozonenbewertung eines Fahrzeugs, elektronische Steuerungseinheit und Speichermedium
DE102007038723A1 (de) Verfahren und Vorrichtung zur Bevorrechtigung von Sonderfahrzeugen an einem lichtsignalgesteuerten Knotenpunkt
DE102013101405B4 (de) Ampelkommunikationsverfahren
DE102020122322A1 (de) Scheinwerfer sowie Ansteuerungsverfahren für Scheinwerfer

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17780992

Country of ref document: EP

Kind code of ref document: A1

REG Reference to national code

Ref country code: DE

Ref legal event code: R225

Ref document number: 112017003090

Country of ref document: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17780992

Country of ref document: EP

Kind code of ref document: A1