DE102014105374B4 - Driver assistance system - Google Patents
Driver assistance system Download PDFInfo
- Publication number
- DE102014105374B4 DE102014105374B4 DE102014105374.5A DE102014105374A DE102014105374B4 DE 102014105374 B4 DE102014105374 B4 DE 102014105374B4 DE 102014105374 A DE102014105374 A DE 102014105374A DE 102014105374 B4 DE102014105374 B4 DE 102014105374B4
- Authority
- DE
- Germany
- Prior art keywords
- driver
- vehicle
- intention
- assistance system
- recognition unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 claims abstract description 15
- 239000011521 glass Substances 0.000 claims description 19
- 238000000034 method Methods 0.000 claims description 8
- 238000011156 evaluation Methods 0.000 claims description 2
- 238000005562 fading Methods 0.000 claims description 2
- 238000001454 recorded image Methods 0.000 claims description 2
- 230000006870 function Effects 0.000 description 8
- 210000003128 head Anatomy 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 230000001149 cognitive effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 230000004886 head movement Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/0097—Predicting future conditions
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/10—Interpretation of driver requests or demands
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2552/00—Input parameters relating to infrastructure
- B60W2552/05—Type of road, e.g. motorways, local streets, paved or unpaved roads
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2554/00—Input parameters relating to objects
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2554/00—Input parameters relating to objects
- B60W2554/40—Dynamic objects, e.g. animals, windblown objects
- B60W2554/406—Traffic density
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2556/00—Input parameters relating to data
- B60W2556/10—Historical data
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2556/00—Input parameters relating to data
- B60W2556/45—External transmission of data to or from the vehicle
- B60W2556/50—External transmission of data to or from the vehicle of positioning data, e.g. GPS [Global Positioning System] data
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Human Computer Interaction (AREA)
- Traffic Control Systems (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Fahrerassistenzsystem (1) für ein Fahrzeug mit einer von dem Fahrerführer zu tragenden Sensorbrille (2), die eine kopfgestützte Blickerfassungsvorrichtung (3) zum Erfassen der Blickrichtung des Fahrzeugführers hat, und mit einer Fahrerabsicht-Erkennungseinheit (5), die eingerichtet ist, in Abhängigkeit von den über die Zeit erfassten Blickrichtungen des Fahrzeugführers eine Fahrerabsicht bezüglich eines von dem Fahrzeugführer beabsichtigtem, zukünftigen Fahrmanöver zu ermitteln, dadurch gekennzeichnet, dass die Fahrerabsichts-Erkennungseinheit (5) mit einer Positionsermittlungseinheit (6) verbindbar oder verbunden ist, um die aktuelle Ortsposition des Fahrzeuges zu ermitteln, wobei die Fahrerabsichts-Erkennungseinheit (5) zum Ermitteln der Fahrerabsicht in Abhängigkeit von der über die Zeit erfassten Blickrichtungen des Fahrzeugführers und der aktuellen Ortposition des Fahrzeuges eingerichtet ist. A driver assistance system (1) for a vehicle having a sensor goggle (2) to be worn by the driver, having a head-mounted gaze device (3) for detecting the gaze direction of the driver, and a driver intention recognition unit (5) arranged as a function thereof determining the driver's intention with regard to a future driving maneuver intended by the driver, characterized in that the driver intent recognition unit (5) can be connected or connected to a position determining unit (6) to determine the current position of the driver Vehicle to be determined, wherein the driver intention detection unit (5) is arranged for determining the driver's intention in dependence on the detected over time viewing directions of the driver and the current location position of the vehicle.
Description
Die Erfindung betrifft ein Fahrerassistenzsystem für ein Fahrzeug mit einer vom Fahrzeugführer zu tragenden Sensorbrille. Die Erfindung betrifft ebenfalls ein Verfahren zur Unterstützung eines Fahrzeugführers eines Fahrzeuges bei der Fahrführungsaufgabe.The invention relates to a driver assistance system for a vehicle with sensor glasses to be worn by the driver. The invention also relates to a method for assisting a driver of a vehicle in the driving task.
Fahrerassistenzsysteme sind elektrische Zusatzeinrichtungen in Fahrzeugen, die der Unterstützung des Fahrzeugführers (auch Fahrer genannt) bei der Durchführung der Fahrführungsaufgabe, insbesondere der Längs- und Querführung des Fahrzeuges, dienen. In einem modernen Kraftfahrzeug befinden sich dabei eine Vielzahl von Fahrerassistenzsystemen, die jeweils für unterschiedliche Fahrsituationen dem Fahrzeugführer eine entsprechende Unterstützung bieten.Driver assistance systems are electrical auxiliary devices in vehicles which serve to assist the vehicle driver (also called driver) in carrying out the driving task, in particular the longitudinal and transverse guidance of the vehicle. In a modern motor vehicle, there are a large number of driver assistance systems which offer the driver appropriate support for different driving situations in each case.
Hinsichtlich ihrer Wirkungsweise können dabei grundsätzlich zwei verschiedene Assistenzsysteme unterschieden werden. Zum einen solche Fahrerassistenzsysteme, die hinsichtlich ihrer Überwachungsfunktion eine Ausgabe an den Fahrzeugführer generieren, um so den Fahrzeugführer auf eine entsprechende Gefahrensituation aufmerksam zu machen. Zum anderen werden vermehrt auch solche Fahrerassistenzsysteme eingesetzt, die zumindest teilweise einen Eingriff in die Fahrzeugführung mittels Steuersignale durchführen, um so beispielsweise in sicherheitskritischen Situationen automatisiert eingreifen zu können. Hier sind beispielsweise Antikollisions-Assistenzsysteme zu nennen, die automatisch einen Bremseingriff vornehmen, um so das Fahrzeug vor einer drohenden Kollision zu schützen.With regard to their mode of action, two different assistance systems can basically be distinguished. On the one hand such driver assistance systems that generate an output to the driver with regard to their monitoring function, so as to make the driver aware of a corresponding dangerous situation. On the other hand, increasingly such driver assistance systems are used, which at least partially perform an intervention in the vehicle guidance by means of control signals so as to be able to intervene automatically in safety-critical situations, for example. Here, for example, anti-collision assistance systems are to be mentioned, which automatically make a braking intervention, so as to protect the vehicle from impending collision.
Die Datenbasis, auf der das Ausgabeverhalten eines Fahrerassistenzsystems beruht, sind meist Betriebsdaten des Fahrzeugs sowie Verkehrsdaten des Fahrzeugumfeldes (insbesondere Fremdfahrzeuge und deren relative Position zum Egofahrzeug). Derartige Fahrerassistenzsysteme sind allerdings in gewissen Situationen fehleranfällig, wenn die Absicht des Fahrers, ein bestimmtes Fahrmanöver in unmittelbarer Zukunft durchführen zu wollen, keine Berücksichtigung findet. Denn die tatsächliche Verkehrssituation basierend auf den Betriebsdaten des Fahrzeuges und den Verkehrsdaten des Fahrzeugumfeldes können unter gewissen Umständen keine für die Assistenz relevanten Verkehrssituationen sein, wenn das vom Fahrer beabsichtigte, zukünftige Fahrmanöver zu einer Entschärfung der Verkehrssituation führt. Hier sei beispielsweise ein Überholmanöver genannt, bei dem das Fahrzeug mit einer hohen Differenzgeschwindigkeit auf ein vorausfahrendes Fahrzeug auffährt, um dieses zu überholen. Ist einem Fahrerassistenzsystem, welches den Abstand zum vorausfahrenden Fahrzeug überwacht, um Auffahrunfälle zu vermeiden, die Absicht des Fahrers, ein entsprechendes Überholmanöver durchzuführen, nicht bekannt, so könnte dies unter Umständen zu einer irreführenden Warnung des Überholmanövers führen oder gar zu einem ungerechtfertigten Eingriff in die Fahrführungsaufgabe. Dies könnte unter gewissen Umständen sogar die Unfallgefahr erhöhen.The database on which the output behavior of a driver assistance system is based is usually operating data of the vehicle as well as traffic data of the vehicle environment (in particular foreign vehicles and their relative position to the ego vehicle). However, such driver assistance systems are susceptible to error in certain situations, if the intention of the driver to want to perform a specific driving maneuver in the immediate future, not taken into account. For the actual traffic situation based on the operating data of the vehicle and the traffic data of the vehicle environment can under certain circumstances not be relevant for the assistance traffic situations, if intended by the driver, future driving maneuvers to defuse the traffic situation. Here, for example, an overtaking maneuver is called, in which the vehicle ascends with a high differential speed on a vehicle in front, in order to overtake this. If a driver assistance system, which monitors the distance to the vehicle in front to avoid rear-end collisions, the intention of the driver to perform an appropriate overtaking maneuver, not known, this could possibly lead to a misleading warning of the overtaking maneuver or even unjustified interference with the driving management task. In some circumstances this could even increase the risk of accidents.
Für ein intelligentes Fahrerassistenzsystem ist es daher zukünftig unumgänglich, vom Fahrzeugführer geplante oder bereits eingeleitete Fahrmanöver mit in das Ausgabeverhalten des Fahrerassistenzsystems einfließen zu lassen, um so die Datenbasis zu erweitern. Die Erkennung von eingeleiteten Fahrmanövern in einem Fahrzeug kann dabei auf verschiedene Datenquellen basieren, wie z.B. CAN-Bus, wo eine Veränderung der Fahrzeugbewegung als Reaktion auf den Input des Fahrers verwendet wird. Demzufolge kann ein dynamisches Fahrmanöver, wie z.B. ein Spurwechsel, detektiert werden, sobald der Fahrer damit beginnt, es auszuführen. Auch das Betätigen der Blinkeinrichtung kann ein Indiz für ein kurz bevorstehendes Überholmanöver sein.For an intelligent driver assistance system, it is therefore imperative in the future to incorporate driving maneuvers planned or already initiated by the driver into the output behavior of the driver assistance system in order to expand the database. The detection of initiated driving maneuvers in a vehicle can be based on various data sources, such as e.g. CAN bus, where a change in vehicle motion is used in response to the driver's input. As a result, a dynamic driving maneuver, such as driving. a lane change, to be detected as soon as the driver starts executing it. Also, the operation of the blinking device can be an indication of an imminent overtaking maneuver.
Allerdings kann die Detektion des eingeleiteten Fahrmanövers unter Umständen für das entsprechende Ausgabeverhalten des Assistenzsystems zeitlich zu spät erfolgen, was zu einem Diskrepanz zwischen der Absicht des Fahrers und der Reaktion des Assistenzsystems führt. Grund hierfür ist die Tatsache, dass die Absicht des Fahrers, das Fahrmanöver durchzuführen, womöglich schon eine gewisse Zeit beim Fahrer vorliegt, die eigentliche Durchführung jedoch erst nach der Ausgabe einer Warnung durch das Assistenzsystem erfolgt. Es ist daher erstrebenswert, neben der Erfassung der eingeleiteten Fahrmanöver auf die Absicht des Fahrers, ein solches Fahrmanöver durchzuführen, zeitlich früher zu erkennen. Hierdurch lässt sich die Akzeptanz und somit die Qualität eines intelligenten Fahrerassistenzsystems deutlich steigern.However, the detection of the initiated driving maneuver may under certain circumstances take place too late for the corresponding output behavior of the assistance system, which leads to a discrepancy between the intention of the driver and the response of the assistance system. The reason for this is the fact that the intention of the driver to carry out the driving maneuver may already have been with the driver for a certain time, but the actual implementation takes place only after the issuing of a warning by the assistance system. It is therefore desirable, in addition to the detection of the initiated driving maneuvers on the intention of the driver to perform such a maneuver, to detect earlier in time. This significantly increases the acceptance and thus the quality of an intelligent driver assistance system.
Aus Lethaus F., & Rataj, J. „Do eye movements reflect driving manoeuvres?“, IET Intelligent Transport Systems, 1 (3), 199–204. doi: 10.1049/iet-its: 20060058 (2007) ist bekannt, dass bestimmten Fahrmanövern, wie beispielsweise Überholmanövern, signifikante charakteristische Blickeinrichtungen vorausgehen, die als Indikatoren zur Bestimmung der Fahrerabsicht herangezogen werden können. Die Blickdaten werden dabei als Informationsquelle zur Prädiktion der Fahrerabsicht in Bezug auf Spurwechselmanöver und Differenzierbarkeit zwischen Spurenwechselmanövern benutzt und statistisch validiert, wobei über Lernalgorithmen entsprechende Prädiktionsmodelle zur Fahrerabsichtserkennung entwickelt werden können.From Lethaus F., & Rataj, J. "Do eye movements reflect driving maneuvers?", IET Intelligent Transport Systems, 1 (3), 199-204. doi: 10.1049 / et-its: 20060058 (2007), it is known that certain driving maneuvers, such as overtaking maneuvers, are preceded by significant distinctive glimpses that can be used as indicators to determine driver intent. The gaze data are thereby used and statistically validated as an information source for prediction of the driver's intention with regard to lane change maneuvers and differentiability between lane change maneuvers, wherein corresponding prediction models for driver intent recognition can be developed via learning algorithms.
Eine derartige Fahrerabsichtserkennung basierend auf dem Blickverhalten des Fahrzeugführers korrespondiert mit der kognitiven Phase der Informationsaufnahme des Fahrers, sodass sich die Datenquelle für die Absicht des Fahrers zeitlich von der eigentlichen Ausführung des Fahrmanövers befindet. Eine derartige korrekte Frühidentifizierung von beabsichtigten Fahrmanövern hätte zur Folge, dass Manöver spezifischer Assistenzfunktionen bzw. Informationsstrategien des Assistenzsystems an die jeweilige Fahrsituation angepasst werden könnten und die Wahrscheinlichkeit von fehlerhafter Assistenz verringert wird.Such driver intent recognition based on the gaze behavior of the driver corresponds to the cognitive phase of the driver Information recording of the driver, so that the data source for the intention of the driver is temporally from the actual execution of the driving maneuver. Such a correct early identification of intended driving maneuvers would mean that maneuvers of specific assistance functions or information strategies of the assistance system could be adapted to the respective driving situation and the likelihood of incorrect assistance being reduced.
Zur Erfassung der Blickrichtung werden aus dem Stand der Technik berührungslose Eyetracking-Systeme verwendet, die zwar eine freie Kopfbewegung zulassen und einen deutlich höheren Komfort haben, jedoch systembedingt nicht in der Lage sind, die Genauigkeit derartiger zugrunde gelegte Anwendungen zu gewährleisten.For detecting the line of sight, non-contact eye-tracking systems are used in the prior art, which allow a free head movement and have a significantly higher comfort, but are systematically unable to ensure the accuracy of such underlying applications.
Aus der
Aus der
Aus der
Aus der
Es ist Aufgabe der vorliegenden Erfindung ein Fahrerassistenzsystem zu schaffen, das in Bezug auf die zugrunde gelegte Datenbasis die vom Fahrzeugführer gefasste Fahrerabsicht deutlich besser in den Kontext der momentanen Verkehrssituation stellt.It is an object of the present invention to provide a driver assistance system which, in relation to the underlying data base, places the driver intention taken by the vehicle driver much better in the context of the current traffic situation.
Die Aufgabe wird mit dem Fahrerassistenzsystem der eingangs genannten Art durch die Merkmale des Patentanspruches 1 sowie des Patentanspruches 8 erfindungsgemäß gelöst.The object is achieved with the driver assistance system of the type mentioned by the features of
Demnach wird ein Fahrerassistenzsystem für ein Fahrzeug zur Unterstützung des Fahrzeugführers des Fahrzeugs bei der Verfügungsaufgabe vorgeschlagen, das eine vom Fahrzeugführer zu tragende Sensorbrille aufweist. Die Sensorbrille beinhaltet dabei zum einen eine kopfgestützte Blickerfassungsvorrichtung zum Erfassen der Blickrichtung des Fahrzeugführers während der Steuerung des Fahrzeuges, wobei mit einer Fahrerabsichts-Erkennungseinheit basierend auf den erfassten Blickrichtungen die Fahrerabsicht bzgl. eines von dem Fahrzeugführer beabsichtigten, zukünftigen Fahrmanövers ermittelt werden kann.Accordingly, a driver assistance system for a vehicle for assisting the vehicle driver of the vehicle in the disposal task is proposed which has a sensor to be worn by the driver sensor glasses. The sensor goggles in this case on the one hand comprises a head-supported gaze device for detecting the line of sight of the vehicle driver during the control of the vehicle, wherein the driver's intention with respect to a future driving maneuver intended by the vehicle driver can be determined with a driver's intention recognition unit based on the detected gaze directions.
Darüber hinaus ist die Fahrerabsicht-Erkennungseinheit erfindungsgemäß mit einer Positionsermittlungseinheit verbindbar oder verbunden oder weist diese sogar auf, um die aktuelle Ortsposition des Fahrzeuges zu ermitteln. Die Positionsermittlungseinheit kann beispielsweise ein Satellitenpositionssystem, wie beispielsweise das GPS, sein, das basierend auf von Satelliten aus gesendeten Funksignalen die Ortsposition des Fahrzeuges, insbesondere die Ortsposition des Fahrzeuges auf der Erde, ermitteln kann. Moreover, according to the invention, the driver intention recognition unit can be connected or connected to a position determination unit or even has it assigned to determine the current position of the vehicle. The position determination unit can be, for example, a satellite positioning system, such as the GPS, which can determine the spatial position of the vehicle, in particular the spatial position of the vehicle on the ground, based on satellites transmitted from satellites.
Die Fahrerabsichts-Erkennungseinheit ist nun erfindungsgemäß so eingerichtet, dass sie die Fahrerabsicht nicht nur losgelöst von den erfassten Blickrichtungen des Fahrzeugführers ermittelt, sondern die Fahrerabsicht auch unter Berücksichtigung der aktuellen Ortsposition ermittelt, sodass hier durch verschiedene Fahrsituationen berücksichtigt werden können, wodurch sich die Erkennung der Fahrerabsicht aus dem Blickverhalten des Fahrers besser konkretisieren lässt. Durch die Kenntnis, wo sich das Fahrzeug gerade befindet, lässt sich das Blickverhalten des Fahrers wesentlich gezielter hinsichtlich der Erkennung von Fahrerabsichten analysieren, so dass die Erkennung der Fahrerabsicht deutlich verbessert werden kann.According to the invention, the driver's intention recognition unit is now set up in such a way that it not only determines the driver's intention detached from the detected lines of sight of the vehicle driver, but also determines the driver's intention taking into account the current position, so that different driving situations can be taken into account here, which results in recognition of the driver's intention Driver intent from the gaze behavior of the driver can be made more concrete. By knowing where the vehicle is currently located, the driver's gaze behavior can be analyzed in a much more targeted manner with regard to the recognition of driver intentions, so that recognition of the driver's intention can be significantly improved.
Das Fahrerassistenzsystem hat somit als Datenquelle nicht nur die Betriebsdaten des Fahrzeuges, bzw. Verkehrsdaten der Fahrzeugumgebung, sondern auch eine mögliche Fahrerabsicht, die sich aus dem Blickverhalten und der aktuellen Ortsposition sehr genau erfassen lässt, sodass das Ausgabeverhalten des Fahrerassistenzsystem wesentlich differenzierter einer tatsächlich vorliegenden Verkehrssituation und an ein zukünftig vom Fahrer durchzuführendes Fahrmanöver angepasst werden kann.The driver assistance system thus has as data source not only the operating data of the vehicle, or traffic data of the vehicle environment, but also a possible driver intent, which can be very accurately detected from the gaze behavior and the current position, so that the output behavior of the driver assistance system significantly differentiated an actual traffic situation and can be adapted to a future maneuver to be performed by the driver.
Dabei haben die Erfinder erkannt, dass durch eine am Kopf getragene Sensorbrille die Erfassung der Blickrichtung durch ein kopfgestütztes Eyetracking-System ohne Einbußen von Komfort möglich ist, so dass die Akzeptanz derartiger Systeme wesentlich verbessert werden kann. Erfindungsgemäß unterscheidet sich dabei die Sensorbrille im Tragekomfort nicht von einer herkömmlichen Brille als Sehhilfe, was die Akzeptanz bei der Benutzung der Sensorbrille für das Fahrerassistenzsystem beim Fahrzeugführer deutlich erhöht.In this case, the inventors have recognized that capturing the viewing direction by a head-mounted eye-tracking system without sacrificing comfort is possible by wearing a sensor glasses worn on the head, so that the acceptance of such systems can be significantly improved. According to the invention, the sensor glasses differ in the Comfort from wearing conventional glasses as a visual aid, which significantly increases the acceptance of the use of the sensor glasses for the driver assistance system with the driver.
Die Erkennung der Fahrerabsicht in Abhängigkeit von den erfassten Blickrichtungen erfolgt dabei über erfasste Blickrichtungen über die Zeit, die in ihrer Folge ein Blickmuster ergeben. Beabsichtigt der Fahrzeugführer, ein vorausfahrendes Fahrzeug zu überholen, so bilden die erfassten Blickrichtungen ein charakteristisches Blickmuster, bei dem der Fahrzeugführer bestimmte Objekte oder Blickbereiche im Fahrzeugcockpit fokussiert. Dieses charakteristische Blickmuster kann mit Hilfe der erfassten Blickrichtung über die Zeit erfasst werden, wobei in Abhängigkeit der erkannten Blickmuster dann die entsprechende Fahrerabsicht erkennbar wird. Denkbar ist es hier, dass das Verhalten des Fahrers hinsichtlich seines Blickmusters in Bezug auf das durchzuführende Fahrmanöver von dem Fahrerassistenz hin über die Zeit gelernt wird. Darüber hinaus kann durch die Kenntnis der aktuellen Ortsposition und somit beispielsweise die Kenntnis der zu befahrenden Straßenart darüber hinaus das Blickverhalten des Fahrzeugführers wesentlich differenzierter betrachtet werden, da die Erfinder erkannt haben, dass gleiche Fahrmanöver, wie beispielsweise das Überholen eines vorausfahrenden Fahrzeuges, je nach Art der Straße, beispielsweise Autobahn oder Landstraße, im Detail unterschiedlich sein kann. Daher kann durch die Berücksichtigung der aktuellen Ortsposition das Blickverhalten wesentlich differenzierter hinsichtlich der Fahrerabsicht analysiert werden.The recognition of the driver's intent as a function of the detected directions of view takes place via detected viewing directions over time, which result in a look pattern in their sequence. If the vehicle driver intends to overtake a vehicle in front, the detected directions of sight form a characteristic gaze pattern in which the driver focuses particular objects or viewing areas in the vehicle cockpit. This characteristic gaze pattern can be detected with the aid of the detected gaze direction over time, with the corresponding driver intent being recognizable as a function of the recognized gaze pattern. It is conceivable here that the behavior of the driver with regard to his gaze pattern in relation to the driving maneuver to be performed is learned from the driver assistance over time. In addition, by the knowledge of the current location position and thus, for example, the knowledge of the road to be traveled beyond the gaze of the driver can be considered much more differentiated, since the inventors have recognized that the same driving maneuvers, such as overtaking a vehicle in front, depending on the type the road, for example highway or country road, may be different in detail. Therefore, by taking into account the current spatial position, the gaze behavior can be analyzed in a much more differentiated manner with regard to driver intent.
Gemäß einer vorteilhaften Ausführungsform ist die Fahrerabsichts-Erkennungseinheit zum Ermitteln der Fahrerabsicht unter Anwendung der über die Zeit erfassten Blickrichtungen auf ein Fahrerabsichts-Prädiktionsmodell zur Fahrerabsichtserkennung eingerichtet. Dem Prädiktionsmodell wird dabei zum einen das durch die Sensorbrille erfasste Blickverhalten und zum anderen die aktuelle Ortsposition bereitgestellt, wodurch sich dann die Fahrerabsicht für ein zukünftig durchzuführendes Fahrmanöver ableiten lässt.According to an advantageous embodiment, the driver intention recognition unit for determining the driver intention is set up using the viewing directions acquired over time to a driver intention prediction model for driver intent recognition. The prediction model is thereby provided on the one hand the gaze behavior captured by the sensor goggles and on the other hand the current spatial position, which then allows the driver's intent to be derived for a future driving maneuver to be carried out.
Ein derartiges Fahrerabsichts-Prädiktionsmodell kann dabei von vornherein bereitgestellt werden oder in Form eines lernbaren Modells stetig an das Verhalten des Fahrers angepasst werden.Such a driver intention prediction model can be provided from the outset or can be continuously adapted to the behavior of the driver in the form of a learnable model.
Gemäß einer vorteilhaften Ausführungsform ist die Fahrerabsichts-Erkennungseinheit mit einer digitalen Karte verbindbar oder verbunden oder weist diese auf, so dass die Fahrerabsichts-Erkennungseinheit anhand der aktuellen Ortsposition den Straßenkontext der aktuell von dem Fahrzeug befahrenen Straße aus der digitalen Karte ermitteln kann. Der Straßenkontext der aktuell von dem Fahrzeug befahrenen Straße kann dabei beispielsweise die Art der Straße sein, d.h. die Fahrerabsicht-Erkennungseinheit kann feststellen, ob sich das Fahrzeug beispielsweise auf einer Autobahn, Landstraße (außerorts) oder auf einer urbanen Straße (innerorts) befindet. Darüber hinaus lässt sich auch ableiten, wie viele Fahrbahnen die Straße hat oder wie hoch die zulässige Gesamtgeschwindigkeit ist. Der Straßenkontext der aktuell von dem Fahrzeug befahrenen Straße stellt somit im weitesten Sinne straßenbezogene Verkehrsparameter dar.According to an advantageous embodiment, the driver intention recognition unit can be connected to or connected to a digital map, or has it, so that the driver intention recognition unit can determine the road context of the road currently being traveled by the vehicle from the digital map on the basis of the current location position. The road context of the road currently being traveled by the vehicle may be, for example, the type of road, i. the driver intention detection unit can determine whether the vehicle is on a highway, highway (out of town), or on an urban road (inner city), for example. In addition, it is also possible to deduce how many lanes the road has or how high the permissible overall speed is. The road context of the road currently occupied by the vehicle thus represents in the broadest sense road-related traffic parameters.
Die Fahrerabsichts-Erkennungseinheit ist nun derart eingerichtet, dass sie in Abhängigkeit von den über die Zeit erfassten Blickrichtungen und dem aktuellen Straßenkontext die Fahrerabsicht bzgl. eines zukünftig von dem Fahrzeugführer durchzuführenden Fahrmanövers ermittelt. So haben die Erfinder erkannt, dass das Blickverhalten bei bestimmten Manövern auf einer Autobahn sich im Detail von dem Blickverhalten auf anderen Straßenarten unterscheiden.The driver intention recognition unit is now set up in such a way that, depending on the viewing directions detected over time and the current road context, it determines the driver's intention with respect to a driving maneuver to be carried out by the driver in the future. Thus, the inventors have recognized that the gaze behavior in certain maneuvers on a highway differ in detail from the gaze behavior on other types of roads.
Darüber hinaus kann auch vorgesehen sein, dass die Fahrerabsicht-Erkennungseinheit die Fahrerabsicht nur dann ermittelt, wenn sich das Fahrzeug auf einer bestimmten Straßenart, wie beispielsweise einer Autobahn, befindet, so dass nur dann das Blickverhalten des Fahrzeugführers zur Prädiktion der Fahrerabsicht herangezogen wird. Befindet sich das Fahrzeug hingegen nicht auf einer Autobahn oder einer anderen vorher definierten Straßenart, wird von der Fahrerabsicht-Erkennungseinheit die Fahrerabsicht nicht aus dem Blickverhalten ermittelt. Denn es hat sich gezeigt, dass beispielsweise auf kleinen Nebenstraßen das Blickverhalten des Fahrzeugführers so unstetig ist, dass sich hieraus keine Fahrerabsicht vorhersagen lässt.In addition, it can also be provided that the driver intention recognition unit determines the driver intent only when the vehicle is on a specific road type, such as a highway, so that only the gaze behavior of the vehicle driver is used for predicting the driver's intention. On the other hand, if the vehicle is not on a highway or any other previously defined road type, the driver intent is not determined from the gaze behavior by the driver intention recognition unit. Because it has been shown that, for example, on small side roads, the gaze behavior of the driver is so unsteady that no driver intention can be predicted from this.
Gemäß einer weiteren vorteilhaften Ausführungsform ist die Fahrerabsichts-Erkennungseinheit mit einer Verkehrssituations-Ermittlungseinheit verbindbar oder verbunden oder weist eine solche auf, so dass die aktuelle Verkehrssituation der Fahrerabsicht-Erkennungseinheit bereitgestellt werden kann. Die aktuelle Verkehrssituation bezieht dabei auch Fremdfahrzeuge und andere Verkehrsteilnehmer, wie Fahrradfahrer, Motorradfahrer und Fußgänger mit ein und beschreibt den gesamten, in der Umgebung des Fahrzeuges definierten Verkehrszustand. Die aktuelle Verkehrssituation wird dabei anhand der aktuellen Ortsposition des Fahrzeuges abgeleitet, wobei die Fahrerabsichts-Erkennungseinheit zum Ermitteln der Fahrerabsicht weiter in Abhängigkeit von den über die Zeit erfassten Blickrichtungen und der aktuellen Verkehrssituation ausgebildet ist.According to a further advantageous embodiment, the driver intention recognition unit can be connected to or connected to a traffic situation determination unit or has such a feature, so that the current traffic situation of the driver intention recognition unit can be provided. The current traffic situation also involves other vehicles and other road users, such as cyclists, motorcyclists and pedestrians and describes the entire, defined in the environment of the vehicle traffic condition. In this case, the current traffic situation is derived on the basis of the current location position of the vehicle, wherein the driver intention recognition unit for determining the driver intention is further configured as a function of the viewing directions detected over time and the current traffic situation.
Auch hier ist es beispielsweise denkbar, dass die Fahrerabsicht nur dann aus dem Blickverhalten des Fahrzeugsführer abgeleitet wird, wenn beispielsweise keine Fußgänger in der Nähe sind, oder sonstige, den Fahrzeugführer ablenkende Verkehrsereignisse, um so das Ermitteln der Fahrerabsicht aus dem Blickverhalten des Fahrzeugführers sicher durchführen zu können. Denn in der Umgebung des Fahrzeugführers auftretende Verkehrsereignisse können den Fahrzeugführer so ablenken, dass das Blickverhalten hinsichtlich seiner Fahrerabsicht nicht mehr korrekt analysierbar wird.Again, it is conceivable, for example, that the driver's intent only from the Viewing behavior of the driver is derived, for example, if there are no pedestrians in the vicinity, or other, the driver distracting traffic events, so as to be able to determine the driver's intention from the gaze behavior of the driver safely. Because occurring in the environment of the driver traffic events can distract the driver so that the gaze behavior in terms of his driver's intent is no longer correctly analyzed.
Gemäß einer vorteilhaften Ausführungsform weist die Sensorbrille mindestens eine in das Blickfeld des Fahrzeugführers ausgerichtete Kamera auf, die zum Aufnehmen von Bilddaten des Blickfeldes des Fahrzeugführers ausgebildet ist. Mit Hilfe einer Bildauswerteinheit lassen sich dann Objekte im Blickfeld des Fahrzeugführers aus den aufgenommenen Bilddaten der Kamera erkennen, wobei die Fahrerabsicht-Erkennungseinheit eingerichtet ist, in Abhängigkeit von den erfassten Blickrichtungen und den erkannten Objekten das vom Fahrzeugführer fokussierte Objekt und/oder einen vorliegenden Blickbereich festzustellen und in Abhängigkeit von einem Blickmuster, das aus dem über die Zeit fokussierten Objekten und/oder Blickbereichen ableitbar ist, die Fahrerabsicht zu ermitteln.According to an advantageous embodiment, the sensor goggles have at least one camera which is oriented in the field of vision of the vehicle driver and which is designed to record image data of the field of vision of the vehicle driver. With the aid of an image evaluation unit, objects in the field of view of the vehicle driver can then be recognized from the recorded image data of the camera, the driver intention recognition unit being set up to determine the object focused by the vehicle driver and / or a present viewing area as a function of the detected viewing directions and the detected objects and depending on a gaze pattern derivable from the time-focused objects and / or gaze areas, determining the driver's intent.
Gemäß einer vorteilhaften Ausführungsform weist die Sensorbrille ein Head-Mounted-Display auf, das zum Einblenden von Informationen in das Blickfeld des Fahrzeugführers ausgebildet ist.According to an advantageous embodiment, the sensor glasses on a head-mounted display, which is designed for fading information in the field of view of the driver.
Die Erfindung wird anhand der beigefügten Figuren beispielhaft erläutert. Es zeigen:The invention will be explained by way of example with reference to the attached figures. Show it:
Die von der Blickerfassungsvorrichtung
Um die aus den Blickrichtungen abgeleiteten Blickmuster in den richtigen Kontext zu setzen, ist die Fahrerabsichts-Erkennungseinheit
Die Fahrerabsichts-Erkennungseinheit
Hierzu ist im Ausführungsbeispiel der
Des Weiteren ist in
Beabsichtigt der Fahrzeugführer nunmehr ein vor ihm langsam fahrendes Fahrzeug auf einer Autobahn zu überholen, so nähert er sich dem vorausfahrenden Fahrzeug mit einer hohen Differenzgeschwindigkeit. Hat er dich Absicht gefasst, ein entsprechendes Überholmanöver durchzuführen, so lässt sich dies anhand eines charakteristischen Blickmusters identifizieren, bei dem die Blickrichtung des Fahrzeugführers in einem bestimmten Muster zwischen den einzelnen Bereichen wechselt, was als charakteristisches Blickmuster für eine bestimmte Fahrerabsicht gewertet werden kann.If the driver now intends to overtake a vehicle driving slowly ahead of him on a motorway, he approaches the vehicle in front at a high differential speed. If he has intended you to perform an appropriate overtaking maneuver, this can be identified by a characteristic gaze pattern in which the driver's gaze changes in a specific pattern between the individual areas, which can be considered a characteristic gaze pattern for a particular driver's intention.
Wurde nun ein solches für ein Überholmanöver auf einer Autobahn charakteristisches Blickmuster ermittelt, so wird durch das Fahrerassistenzsystem anhand der aktuellen Ortsposition weiterhin überprüft, ob sich das Fahrzeug tatsächlich auf einer Autobahn befindet. Ist dies der Fall, so wird dieses charakteristische Blickmuster als Anzeichen für ein bevorstehendes Überholmanöver gewertet, so dass die Fahrerabsicht, ein solches Überholmanöver zu tätigen, anderen Assistenzsystemen zur Verfügung gestellt werden kann. Wurde hingegen von dem Fahrerassistenzsystem ermittelt, dass das Fahrzeug beispielsweise in einer Stausituation befindet oder beispielsweise nicht auf einer Autobahn, so wird dieses charakteristische Blickmuster nicht als Fahrerabsicht bzgl. eines bevorstehenden Überholmanövers gewertet, da in derartigen Situationen dieses Blickmuster nicht charakteristisch ist.If such a look pattern characteristic for an overtaking maneuver on a motorway has now been determined, then the driver assistance system continues to check, based on the current position, whether the vehicle is actually on a motorway. If this is the case, then this characteristic gaze pattern is interpreted as an indication of an imminent overtaking maneuver, so that the driver's intention to make such an overtaking maneuver can be made available to other assistance systems. If, on the other hand, it has been determined by the driver assistance system that the vehicle is for example in a traffic jam situation or, for example, not on a motorway, then this characteristic gaze pattern is not rated as the driver's intention with regard to an imminent overtaking maneuver since in such situations this gaze pattern is not characteristic.
Die bei dem Fahrerassistenzsystem ermittelte Fahrerabsicht bzgl. eines bevorstehenden Fahrmanövers kann dabei anderen Assistenzsystemen zur Verfügung gestellt werden, die warnend oder regelnd in die Verfügungsaufgabe des Fahrzeugführers eingreifen. Hierdurch lässt sich die Datenbasis der anderen Assistenzsysteme auf die Prädiktion von Fahrmanövern erweitern, wodurch die Assistenz wesentlich verbessert werden kann. Hierdurch lässt sich insbesondere Befehlassistenz verringern.The driver intention determined with the driver assistance system with regard to an imminent maneuver can be made available to other assistance systems which intervene in a warning or regulatory manner in the vehicle operator's task. As a result, the database of the other assistance systems can be extended to the prediction of driving maneuvers, whereby the assistance can be significantly improved. In particular, this can reduce command assistance.
BezugszeichenlisteLIST OF REFERENCE NUMBERS
- 11
- Fahrerassistenzsystem Driver assistance system
- 22
- Sensorbrille sensor glasses
- 33
- Blickerfassungseinrichtung Looking detector
- 44
- Drahtlose Kommunikationsschnittstelle Wireless communication interface
- 55
- Fahrerabsichts-Erkennungseinheit Driver Intention recognition unit
- 66
- Positionsermittlungseinheit Position determining unit
- 77
- Satellitensender satellite stations
- 88th
- Digitale Karte Digital map
- 99
- Verkehrssituations-Ermittlungseinheit Traffic situation determining unit
Claims (11)
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102014105374.5A DE102014105374B4 (en) | 2014-04-15 | 2014-04-15 | Driver assistance system |
PCT/EP2015/058168 WO2015158775A1 (en) | 2014-04-15 | 2015-04-15 | Driver assistance system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102014105374.5A DE102014105374B4 (en) | 2014-04-15 | 2014-04-15 | Driver assistance system |
Publications (2)
Publication Number | Publication Date |
---|---|
DE102014105374A1 DE102014105374A1 (en) | 2015-10-15 |
DE102014105374B4 true DE102014105374B4 (en) | 2017-02-09 |
Family
ID=53174977
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102014105374.5A Active DE102014105374B4 (en) | 2014-04-15 | 2014-04-15 | Driver assistance system |
Country Status (2)
Country | Link |
---|---|
DE (1) | DE102014105374B4 (en) |
WO (1) | WO2015158775A1 (en) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102017206694A1 (en) * | 2017-04-20 | 2018-10-25 | Bayerische Motoren Werke Aktiengesellschaft | Method for assisting a driving maneuver and assistance system for a driving maneuver |
KR102406511B1 (en) * | 2017-07-04 | 2022-06-10 | 현대자동차주식회사 | Vehicle system and controll method of the same |
DE102017213177A1 (en) * | 2017-07-31 | 2019-01-31 | Audi Ag | Method for operating a screen of a motor vehicle and motor vehicle |
SE2030301A1 (en) * | 2020-09-30 | 2022-03-31 | Chadalavada Ravi Teja | Method and system for driving skill feedback |
DE102021129244A1 (en) | 2021-11-10 | 2023-05-11 | Bayerische Motoren Werke Aktiengesellschaft | Driver assistance system and method for operating a driver assistance system |
DE102022212291A1 (en) | 2022-11-18 | 2024-05-23 | Robert Bosch Gesellschaft mit beschränkter Haftung | Interaction device for controlling a vehicle |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE19642830A1 (en) * | 1996-10-17 | 1998-04-30 | Joachim Dipl Ing Paetz | Method of stopping person falling asleep esp to stop car or boat driver from dozing off |
DE102004019337A1 (en) * | 2004-04-21 | 2005-11-17 | Siemens Ag | Assistance system for motor vehicles |
DE102005054972A1 (en) * | 2005-10-27 | 2007-05-03 | Daimlerchrysler Ag | Motor vehicle`s dead angle monitoring method, involves accomplishing checking of whether lanes change is accomplished based on infrastructure of traffic before warning, where driver warning is omitted if result of checking is not possible |
DE102013005342A1 (en) * | 2013-03-26 | 2013-09-19 | Daimler Ag | Motor vehicle control device has viewing direction sensor such as position sensor that is arranged at augmented reality glasses, to detect movements of head |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6599243B2 (en) * | 2001-11-21 | 2003-07-29 | Daimlerchrysler Ag | Personalized driver stress prediction using geographical databases |
EP1961622B1 (en) * | 2005-12-12 | 2018-06-13 | Panasonic Intellectual Property Corporation of America | Safety-travel assistance device |
JP5407952B2 (en) * | 2009-06-18 | 2014-02-05 | 日産自動車株式会社 | Vehicle driving support device and vehicle driving support method |
EP2806782B1 (en) * | 2012-01-26 | 2019-08-14 | Nokia Technologies Oy | Capacitive eye tracking sensor |
US9888842B2 (en) * | 2012-05-31 | 2018-02-13 | Nokia Technologies Oy | Medical diagnostic gaze tracker |
-
2014
- 2014-04-15 DE DE102014105374.5A patent/DE102014105374B4/en active Active
-
2015
- 2015-04-15 WO PCT/EP2015/058168 patent/WO2015158775A1/en active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE19642830A1 (en) * | 1996-10-17 | 1998-04-30 | Joachim Dipl Ing Paetz | Method of stopping person falling asleep esp to stop car or boat driver from dozing off |
DE102004019337A1 (en) * | 2004-04-21 | 2005-11-17 | Siemens Ag | Assistance system for motor vehicles |
DE102005054972A1 (en) * | 2005-10-27 | 2007-05-03 | Daimlerchrysler Ag | Motor vehicle`s dead angle monitoring method, involves accomplishing checking of whether lanes change is accomplished based on infrastructure of traffic before warning, where driver warning is omitted if result of checking is not possible |
DE102013005342A1 (en) * | 2013-03-26 | 2013-09-19 | Daimler Ag | Motor vehicle control device has viewing direction sensor such as position sensor that is arranged at augmented reality glasses, to detect movements of head |
Also Published As
Publication number | Publication date |
---|---|
WO2015158775A1 (en) | 2015-10-22 |
DE102014105374A1 (en) | 2015-10-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE112016005784B4 (en) | Visual perception assistance system and visual perception target object detection system | |
DE102017221191B4 (en) | Method for displaying the course of a safety zone in front of a vehicle or an object with a display unit, device for carrying out the method and motor vehicle and computer program | |
EP2479077B1 (en) | Method for operating a driver assistance system on a motor vehicle outputting a recommendation related to an overtaking manoeuvre and motor vehicle | |
DE102014105374B4 (en) | Driver assistance system | |
DE102014002116B4 (en) | Method for operating a driver assistance system for overtaking operations and motor vehicle | |
DE102010014499B4 (en) | Method for operating a lane keeping assistance system for multi-lane turning in a motor vehicle | |
DE102009019702B4 (en) | Method and device for requesting a handover to the vehicle driver | |
EP3762684A1 (en) | Overlaying additional information on a display unit | |
DE102014205391A1 (en) | Device for predicting driving state transitions | |
DE102009007885A1 (en) | Method for identifying motor vehicles getting into own lane or getting out of own lane, involves automatically evaluating driving characteristics relative to lane exchange based on detected data i.e. image data of camera | |
EP3013659B1 (en) | Prediction of a future driving path of a vehicle | |
DE102012204948A1 (en) | Method for assisting driver when driving vehicle at changing lanes, involves assigning vehicle and detected objects to tracks of roadway, and generating warning signal when detected object regarding vehicle is located on relevant track | |
DE102012023107B4 (en) | Method for operating a driver assistance system of a motor vehicle and motor vehicle | |
WO2010037643A1 (en) | Method for operating a driver assistance device | |
DE102013219023A1 (en) | Method and device for assisting a driver of a vehicle when changing lanes | |
DE102012200216A1 (en) | Method and device for operating a driver assistance system of a vehicle | |
DE102015223248A1 (en) | Method for a driver assistance system | |
EP3759694A1 (en) | Method for calculating an ar-overlay of additional information for a display on a display unit, device for carrying out the method, as well as motor vehicle and computer program | |
DE102017212432A1 (en) | Method and device for operating a driver assistance system of a motor vehicle and driver assistance systems | |
EP3204889B1 (en) | Method for a motor vehicle provided with a camera, device and system | |
DE102011016217A1 (en) | Method for warning driver of passenger car before rear end collision, involves projecting path of image, and warning driver of vehicle based on image with projected path, where path is determined based on velocity and steering angle | |
DE102013008946A1 (en) | Device and method for detecting a critical driving situation of a vehicle | |
DE102017107484A1 (en) | A method of providing a display assisting a driver of a motor vehicle, driver assistance system and motor vehicle | |
DE102014213019A1 (en) | Contact analogue display of evasion corridors for vehicles | |
DE112019007195T5 (en) | DISPLAY CONTROL DEVICE, DISPLAY CONTROL METHOD AND DISPLAY CONTROL PROGRAM |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R012 | Request for examination validly filed | ||
R016 | Response to examination communication | ||
R082 | Change of representative |
Representative=s name: GRAMM, LINS & PARTNER PATENT- UND RECHTSANWAEL, DE |
|
R018 | Grant decision by examination section/examining division | ||
R020 | Patent grant now final |