DE102019133780A1 - Driving system and method for exiting an automated driving mode by voice - Google Patents
Driving system and method for exiting an automated driving mode by voice Download PDFInfo
- Publication number
- DE102019133780A1 DE102019133780A1 DE102019133780.1A DE102019133780A DE102019133780A1 DE 102019133780 A1 DE102019133780 A1 DE 102019133780A1 DE 102019133780 A DE102019133780 A DE 102019133780A DE 102019133780 A1 DE102019133780 A1 DE 102019133780A1
- Authority
- DE
- Germany
- Prior art keywords
- vehicle
- acoustic signal
- driving mode
- driving system
- driver
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W60/00—Drive control systems specially adapted for autonomous road vehicles
- B60W60/005—Handover processes
- B60W60/0053—Handover processes from vehicle to occupant
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W60/00—Drive control systems specially adapted for autonomous road vehicles
- B60W60/005—Handover processes
- B60W60/0053—Handover processes from vehicle to occupant
- B60W60/0054—Selection of occupant to assume driving tasks
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
- B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
- B60R16/0373—Voice control
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/146—Display means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/215—Selection or confirmation of options
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/227—Position in the vehicle
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Mechanical Engineering (AREA)
- Human Computer Interaction (AREA)
- Transportation (AREA)
- Traffic Control Systems (AREA)
Abstract
Es wird ein Fahrsystem zum Führen eines Fahrzeugs in einem automatisierten Fahrmodus beschrieben. Das Fahrsystem ist eingerichtet, ausgehend von dem automatisierten Fahrmodus zu bestimmen, dass der automatisierte Fahrmodus beendet werden soll. Außerdem ist das Fahrsystem eingerichtet, in Reaktion darauf, einem Fahrer des Fahrzeugs ein akustisches Signal, das durch den Fahrer als Bestätigung der Übernahmebereitschaft mündlich wiederzugeben ist, mitzuteilen. Des Weiteren ist das Fahrsystem eingerichtet, in Reaktion darauf zu überprüfen, ob die Übernahmebereitschaft des Fahrers des Fahrzeugs zum zumindest teilweise manuellen Führen des Fahrzeugs durch eine mündliche Wiedergabe des akustischen Signals bestätigt wird. Das Fahrsystem ist ferner eingerichtet, den automatisierten Fahrmodus zu beenden, wenn bestimmt wird, dass die Übernahmebereitschaft durch die mündliche Wiedergabe des akustischen Signals bestätigt wird.A driving system for driving a vehicle in an automated driving mode is described. The driving system is set up to determine, based on the automated driving mode, that the automated driving mode should be ended. In addition, the driving system is set up, in response to this, communicating an acoustic signal to a driver of the vehicle, which is to be reproduced orally by the driver as confirmation of readiness to take over. Furthermore, the driving system is set up to check in response to this whether the readiness of the driver of the vehicle to take over for at least partially manual driving of the vehicle is confirmed by an oral reproduction of the acoustic signal. The driving system is also set up to end the automated driving mode when it is determined that readiness to take over is confirmed by the verbal reproduction of the acoustic signal.
Description
Die Erfindung betrifft ein Fahrzeug, das für eine automatisierte Längs- und Querführung ausgebildet ist. Insbesondre betrifft die Erfindung ein Fahrsystem und ein entsprechendes Verfahren, die darauf ausgelegt sind, die automatisierte Längs- und Querführung eines Fahrzeugs in sicherer und zuverlässiger Weise zu beenden.The invention relates to a vehicle which is designed for automated longitudinal and lateral guidance. In particular, the invention relates to a driving system and a corresponding method which are designed to terminate the automated longitudinal and lateral guidance of a vehicle in a safe and reliable manner.
Ein Fahrzeug kann für hochautomatisiertes Fahren (HAF) ausgebildet sein, was es dem Fahrer des Fahrzeugs ermöglicht, sich während der Fahrt von der Fahraufgabe abzuwenden und sich mit anderen Dingen zu beschäftigen. Dabei sollte das Fahrzeug derart ausgebildet sein, dass der Fahrer jederzeit, bei Bedarf oder auf Wunsch, die Fahraufgabe übernehmen kann. Ferner sollte bei der Übergabe der Fahraufgabe von dem Fahrzeug an den Fahrer sichergestellt werden, dass der Fahrer tatsächlich bereit ist, die Fahraufgabe zu übernehmen, und/oder tatsächlich beabsichtigt, die Fahraufgabe zu übernehmen.A vehicle can be designed for highly automated driving (HAF), which enables the driver of the vehicle to turn away from the driving task while driving and to do other things. The vehicle should be designed in such a way that the driver can take over the driving task at any time, if necessary or on request. Furthermore, when handing over the driving task from the vehicle to the driver, it should be ensured that the driver is actually ready to take over the driving task and / or actually intends to take over the driving task.
Das vorliegende Dokument befasst sich mit der technischen Aufgabe, eine sichere, zuverlässige und intuitive Übernahme der Längs- und/oder Querführung eines Fahrzeugs durch den Fahrer des Fahrzeugs zu ermöglichen. Dabei befasst sich das vorliegende Dokument insbesondere mit Fällen, bei denen die Übernahme der Längs- und/oder Querführung des Fahrzeugs durch den Fahrer des Fahrzeugs initiiert wird. Des Weiteren befasst sich das vorliegende Dokument mit Fällen, bei denen die Übernahme der Längs- und/oder Querführung des Fahrzeugs durch das Fahrzeug initiiert wird (z.B. durch Ausgeben einer Übernahmeaufforderung an den Fahrer des Fahrzeugs).The present document deals with the technical task of enabling a safe, reliable and intuitive takeover of the longitudinal and / or lateral guidance of a vehicle by the driver of the vehicle. The present document deals in particular with cases in which the driver of the vehicle initiates the takeover of the longitudinal and / or lateral guidance of the vehicle. This document also deals with cases in which the vehicle initiates the takeover of the longitudinal and / or lateral guidance of the vehicle (e.g. by issuing a takeover request to the driver of the vehicle).
Die o.g. Aufgabe wird durch jeden der unabhängigen Ansprüche gelöst. Vorteilhafte Ausführungsformen werden u.a. in den abhängigen Ansprüchen beschrieben. Es wird darauf hingewiesen, dass zusätzliche Merkmale eines von einem unabhängigen Patentanspruch abhängigen Patentanspruchs ohne die Merkmale des unabhängigen Patentanspruchs oder nur in Kombination mit einer Teilmenge der Merkmale des unabhängigen Patentanspruchs eine eigene und von der Kombination sämtlicher Merkmale des unabhängigen Patentanspruchs unabhängige Erfindung bilden können, die zum Gegenstand eines unabhängigen Anspruchs, einer Teilungsanmeldung oder einer Nachanmeldung gemacht werden kann. Dies gilt in gleicher Weise für in der Beschreibung beschriebene technische Lehren, die eine von den Merkmalen der unabhängigen Patentansprüche unabhängige Erfindung bilden können.The above problem is solved by each of the independent claims. Advantageous embodiments are described, inter alia, in the dependent claims. It is pointed out that additional features of a patent claim dependent on an independent patent claim without the features of the independent patent claim or only in combination with a subset of the features of the independent patent claim can form a separate invention independent of the combination of all features of the independent patent claim, which can be made the subject of an independent claim, a divisional application or a subsequent application. This applies equally to technical teachings described in the description, which can form an invention that is independent of the features of the independent patent claims.
Gemäß einem Aspekt wird ein Fahrzeugführungssystem bzw. ein Fahrsystem zum Führen eines Fahrzeugs (insbesondere eines (mehrspurigen) Kraftfahrzeugs) in einem automatisierten Fahrmodus beschrieben. Mit anderen Worten, es wird ein Fahrsystem zum automatisierten Fahren eines Fahrzeugs in einem automatisierten Fahrmodus mit automatisierter Fahrzeugführung beschrieben. Das Fahrzeugführungssystem bzw. das Fahrsystem kann ausgebildet sein, das Fahrzeug in dem automatisierten Fahrmodus gemäß SAE-Level 3 oder höher, insbesondere gemäß SAE-Level 3 oder gemäß SAE-Level 4, automatisiert längs- und querzuführen.According to one aspect, a vehicle guidance system or a driving system for driving a vehicle (in particular a (multi-lane) motor vehicle) in an automated driving mode is described. In other words, a driving system for automated driving of a vehicle in an automated driving mode with automated vehicle guidance is described. The vehicle guidance system or the driving system can be designed to automatically guide the vehicle longitudinally and transversely in the automated driving mode according to SAE level 3 or higher, in particular according to SAE level 3 or according to SAE level 4.
Das Fahrsystem kann eingerichtet sein, eine erste (Bedien-)Aktion des Fahrers des Fahrzeugs zu detektieren (während das Fahrzeug in dem automatisierten Fahrmodus betrieben wird), wobei die erste Aktion darauf gerichtet ist, den automatisierten Fahrmodus zu beenden. Mit anderen Worten, es kann detektiert werden (ausgehend von dem Betrieb des Fahrzeugs in dem automatisierten Fahrmodus), dass der Fahrer eine Aktion bewirkt bzw. durchgeführt hat, die darauf gerichtet ist, den automatisierten Fahrmodus zu beenden. Die Aktion kann z.B. das Betätigen eines bestimmten Bedienelements und/oder ggf. einen manuellen Eingriff in die Längs- und/oder Querführung des Fahrzeugs umfassen.The driving system can be set up to detect a first (operating) action by the driver of the vehicle (while the vehicle is being operated in the automated driving mode), the first action being aimed at ending the automated driving mode. In other words, it can be detected (based on the operation of the vehicle in the automated driving mode) that the driver has caused or carried out an action aimed at ending the automated driving mode. The action can include, for example, the actuation of a specific control element and / or possibly manual intervention in the longitudinal and / or lateral guidance of the vehicle.
Die erste Aktion kann insbesondere darauf gerichtet sein, den automatisierten Fahrmodus zu beenden, so dass der Fahrer des Fahrzeugs das Fahrzeug zumindest teilweise oder vollständig manuell führen kann bzw. führen muss. Alternativ oder ergänzend kann die erste Aktion darauf gerichtet sein, den automatisierten Fahrmodus zu beenden, so dass das Fahrzeug in einem Fahrmodus mit reduziertem Automatisierungsgrad, insbesondere zumindest teilweise manuell oder vollständig manuell durch den Fahrer, geführt wird (z.B. gemäß SAE-Level
Die erste Aktion kann ggf. versehentlich durch den Fahrer des Fahrzeugs bewirkt worden sein. Beispielsweise kann der Fahrer versehentlich an ein Fahrmodus-Bedienelement zum Beenden des automatisierten Fahrmodus gestoßen kann, während das Fahrzeug in dem automatisierten Fahrmodus betrieben wird. Alternativ oder ergänzend kann der Fahrer ggf. versehentlich gegen ein manuelles Steuermittel (z.B. gegen das Lenkrad oder gegen das Fahr- bzw. Gaspedal) des Fahrzeugs gestoßen sein, während das Fahrzeug in dem automatisierten Fahrmodus betrieben wird.The first action may possibly have been inadvertently caused by the driver of the vehicle. For example, the driver can inadvertently bump into a driving mode operating element for ending the automated driving mode while the vehicle is being operated in the automated driving mode. Alternatively or in addition, the driver may have accidentally hit a manual control means (e.g. against the steering wheel or against the accelerator or accelerator pedal) of the vehicle while the vehicle is being operated in the automated driving mode.
Die erste Aktion kann somit z.B. das Betätigen des Fahrmodus-Bedienelements und/oder das Betätigen eines Steuermittels des Fahrzeugs umfassen.The first action can thus include, for example, the actuation of the driving mode operating element and / or the actuation of a control means of the vehicle.
In einem bevorzugten Beispiel umfasst oder entspricht die erste Aktion der mündlichen Wiedergabe eines akustischen Signals, insbesondere eines (gesprochenen) Sprachsignals bzw. einer Sprachanweisung bzw. einer Wortsequenz und/oder eines Lautes. Beispielsweise kann der Fahrer eine Sprachanweisung sprechen, der darauf gerichtet ist, den automatisierten Fahrmodus zu beenden. Eine beispielhafte Sprachanweisung ist „Automatisierten Fahrmodus beenden“.In a preferred example, the first action comprises or corresponds to the oral reproduction of an acoustic signal, in particular a (spoken) speech signal or a speech instruction or a word sequence and / or a sound. For example, the driver can speak a voice instruction aimed at ending the automated driving mode. An exemplary voice instruction is "End automated driving mode".
Alternativ oder ergänzend kann das Fahrsystem eingerichtet sein, Situationsdaten in Bezug auf eine Verkehrssituation zu ermitteln, in der sich das Fahrzeug befindet und/oder der sich das Fahrzeug nähert. Die Situationsdaten können z.B. auf Basis der Sensordaten von ein oder mehreren Umfeldsensoren des Fahrzeugs und/oder auf Basis einer digitalen Karte in Bezug auf das von dem Fahrzeug befahrene Straßennetz ermittelt werden. Beispielsweise können die Situationsdaten anzeigen, dass das Fahrzeug einen Bereich des Straßennetzes verlassen wird, in dem das Fahrzeug mit dem automatisierten Fahrmodus betrieben werden kann. Alternativ oder ergänzend kann das Fahrsystem eingerichtet sein, Fahrzeugzustandsdaten in Bezug auf einen Zustand des Fahrzeugs (z.B. auf den Füllstand eines Kraftstofftanks) zu ermitteln. Es kann dann auf Basis der Situationsdaten und/oder auf Basis der Fahrzeugzustandsdaten bestimmt werden, dass der automatisierte Fahrmodus beendet werden soll.As an alternative or in addition, the driving system can be set up to determine situation data in relation to a traffic situation in which the vehicle is located and / or which the vehicle is approaching. The situation data can be determined, for example, on the basis of the sensor data from one or more environment sensors of the vehicle and / or on the basis of a digital map in relation to the road network on which the vehicle is traveling. For example, the situation data can indicate that the vehicle is about to leave an area of the road network in which the vehicle can be operated with the automated driving mode. As an alternative or in addition, the driving system can be set up to determine vehicle status data in relation to a status of the vehicle (e.g. the fill level of a fuel tank). It can then be determined on the basis of the situation data and / or on the basis of the vehicle status data that the automated driving mode should be ended.
Folglich kann das Fahrsystem eingerichtet sein (z.B. auf Basis einer detektierten ersten Aktion und/oder auf Basis von Situationsdaten), zu bestimmen, dass der automatisierte Fahrmodus (möglicherweise) beendet werden soll.Consequently, the driving system can be set up (e.g. on the basis of a detected first action and / or on the basis of situation data) to determine that the automated driving mode should (possibly) be ended.
Das Fahrsystem kann eingerichtet sein, zu überprüfen und/oder zu bestimmen, ob die Übernahmebereitschaft des Fahrers des Fahrzeugs zum zumindest teilweise manuellen Führen des Fahrzeugs durch die mündliche Wiedergabe eines (ggf. weiteren) akustischen Signals (insbesondere durch die mündliche Wiedergabe eines Wortsequenz oder eines Sprachsignals oder eines Lautes) bestätigt wird. Insbesondere kann überprüft werden, ob innerhalb eines vordefinierten Bestätigungszeitraums (z.B. innerhalb von 10 Sekunden oder weniger) ab Erkennen, dass der automatisierte Fahrmodus beendet werden soll (z.B. ab Detektion der ersten Aktion) durch die mündliche Wiedergabe eines vordefinierten und/oder vorgegebenen und/oder von dem Fahrsystem erwarteten akustischen Signals durch den Fahrer bestätigt wird, dass der Fahrer bereit ist, das Fahrzeug zumindest teilweise (oder vollständig) manuell zu führen. Die mündliche Wiedergabe eines (vordefinierten und/oder von dem Fahrsystem erwarteten) akustischen Signals (insbesondere Sprachsignals und/oder eines Wortsequenz) kann dann als zweite Aktion des Fahrers betrachtet werden, durch den die erste Aktion des Fahrers bestätigt wird. Das vordefinierte akustische Signal kann alternativ oder ergänzend als ein (von dem Fahrsystem) vorgegebenes akustisches Signal und/oder als ein (von dem Fahrsystem) erwartetes akustisches Signal bezeichnet und/oder betrachtet werden.The driving system can be set up to check and / or determine whether the willingness of the driver of the vehicle to take over to at least partially manually drive the vehicle through the verbal reproduction of an (possibly further) acoustic signal (in particular through the verbal reproduction of a word sequence or a Voice signal or a sound) is confirmed. In particular, it can be checked whether within a predefined confirmation period (e.g. within 10 seconds or less) from the detection that the automated driving mode is to be ended (e.g. from the detection of the first action) through the verbal reproduction of a predefined and / or specified and / or the acoustic signal expected by the driving system is confirmed by the driver that the driver is ready to at least partially (or completely) guide the vehicle manually. The oral reproduction of an acoustic signal (in particular a speech signal and / or a word sequence) (predefined and / or expected by the driving system) can then be viewed as a second action by the driver, which confirms the first action of the driver. The predefined acoustic signal can alternatively or additionally be designated and / or viewed as an acoustic signal specified (by the driving system) and / or as an acoustic signal expected (by the driving system).
Das vordefinierte akustische Signal ist typischerweise ein akustisches Signal, das dem Fahrsystem bekannt ist, und/oder das von dem Fahrsystem als Bestätigung der Übernahmebereitschaft durch den Fahrer des Fahrzeugs erwartet wird. Das vordefinierte akustische Signal ist dabei bevorzugt nur für einen bestimmten Übernahmevorgang „vordefiniert“, und ändert sich typischerweise von Übernahmevorgang zu Übernahmevorgang. Dabei kann das vordefinierte akustische Signal ggf. zufällig für einen Übernahmevorgang ermittelt bzw. ausgewählt werden. Das Fahrsystem kann ausgebildet sein, das vordefinierte akustische Signal dediziert für einen spezifischen Übernahmevorgang zu ermitteln, und dem Fahrer des Fahrzeugs mitzuteilen, so dass das akustische Signal bei der mündlichen Wiedergabe durch den Fahrer „vordefiniert“ ist. The predefined acoustic signal is typically an acoustic signal which is known to the driving system and / or which is expected by the driving system as confirmation of readiness to take over by the driver of the vehicle. The predefined acoustic signal is preferably “predefined” only for a specific takeover process, and typically changes from takeover process to takeover process. In this case, the predefined acoustic signal can, if necessary, be determined or selected at random for a takeover process. The driving system can be designed to determine the predefined acoustic signal in a dedicated manner for a specific takeover process and to communicate it to the driver of the vehicle so that the acoustic signal is “predefined” when it is verbally reproduced by the driver.
Durch das Überprüfen, ob eine bestätigende mündliche Wiedergabe eines vordefinierten und/oder von dem Fahrsystem erwarteten akustischen Signals erfolgt oder nicht, kann überprüft werden, ob eine erste Aktion zum Beenden des automatisierten Fahrmodus bewusst oder versehentlich von dem Fahrer des Fahrzeugs bewirkt wurde. Insbesondere kann aus dem Ausbleiben einer bestätigenden mündlichen Wiedergabe eines vordefinierten akustischen Signals geschlossen werden, dass der Fahrer des Fahrzeugs die erste Aktion versehentlich ausgeführt hat, und eigentlich weiterhin in dem automatisierten Fahrmodus verbleiben möchte. Andererseits kann bei Vorliegen einer bestätigenden mündlichen Wiedergabe eines vordefinierten akustischen Signals darauf geschlossen werden, dass der Fahrer des Fahrzeugs tatsächlich den automatisierten Fahrmodus beenden möchte.By checking whether or not there is a confirmatory verbal reproduction of a predefined and / or acoustic signal expected by the driving system, it can be checked whether a first action to end the automated driving mode was consciously or inadvertently carried out by the driver of the vehicle. In particular, from the absence of a confirmatory verbal reproduction of a predefined acoustic signal, it can be concluded that the driver of the vehicle accidentally carried out the first action and actually wants to remain in the automated driving mode. On the other hand, if there is a confirmatory verbal reproduction of a predefined acoustic signal, it can be concluded that the driver of the vehicle actually wants to end the automated driving mode.
Das Fahrsystem ist ferner eingerichtet, den automatisierten Fahrmodus zu beenden, wenn bestimmt wird, dass die Übernahmebereitschaft des Fahrers durch die mündliche Wiedergabe des vordefinierten akustischen Signals bestätigt wird. Insbesondere kann das Fahrsystem eingerichtet sein, den automatisierten Fahrmodus zu beenden, wenn bestimmt wird, dass die Übernahmebereitschaft innerhalb des Bestätigungszeitraums durch die mündliche Wiedergabe des vordefinierten akustischen Signals bestätigt wird. Ggf. kann es erforderlich sein, dass noch ein oder mehrere weitere Bedingungen erfüllt sein müssen, bevor der automatisierte Fahrmodus beendet wird.The driving system is also set up to end the automated driving mode when it is determined that the driver's readiness to take over is confirmed by the verbal reproduction of the predefined acoustic signal. In particular, the driving system can be set up to end the automated driving mode when it is determined that readiness to take over is confirmed within the confirmation period by the verbal reproduction of the predefined acoustic signal. It may be necessary that one or more further conditions must be met before the automated driving mode is ended.
Nach Beenden des automatisierten Fahrmodus kann das Fahrzeug gemäß einem SAE-Level 2 oder weniger, oder gemäß einem SAE-Level 1 oder weniger (zumindest teilweise manuell) geführt werden. In einem bevorzugten Beispiel erfolgt nach dem Übernahmevorgang ein rein manuelles Fahren (gemäß SAE-Level 0).After the automated driving mode has ended, the vehicle can be driven according to an SAE level 2 or less, or according to an SAE level 1 or less (at least partially manually). In a preferred example, the takeover process is followed by purely manual driving (according to SAE level 0).
Des Weiteren kann das Fahrsystem eingerichtet sein, den automatisierten Fahrmodus nicht zu beenden und/oder das Fahrzeug weiterhin in dem automatisierten Fahrmodus zu betreiben, wenn bestimmt wird, dass die Übernahmebereitschaft nicht (innerhalb des Bestätigungszeitraums) durch die mündliche Wiedergabe des vordefinierten akustischen Signals bestätigt wird. Ggf. kann das Fahrsystem eingerichtet sein, den automatisierten Fahrmodus nur dann zu beenden, wenn bestimmt wird, dass die Übernahmebereitschaft (innerhalb des Bestätigungszeitraums) durch die mündliche Wiedergabe des vordefinierten akustischen Signals bestätigt wird.Furthermore, the driving system can be set up not to end the automated driving mode and / or to continue to operate the vehicle in the automated driving mode if it is determined that the readiness to take over is not confirmed (within the confirmation period) by the verbal reproduction of the predefined acoustic signal . If necessary, the driving system can be set up to end the automated driving mode only if it is determined that readiness to take over (within the confirmation period) is confirmed by the verbal reproduction of the predefined acoustic signal.
Durch das beschriebene Fahrsystem kann in effizienter und für den Fahrer komfortabler Weise ein unbeabsichtigtes Beenden der automatisierten Fahrmodus vermieden werden. Des Weiteren kann es dem Fahrer des Fahrzeugs ermöglicht werden, in intuitiver und komfortabler Weise den automatisierten Fahrmodus zu beenden. Ferner kann durch das beschriebene Fahrsystem ein sicherer Übergang von dem automatisierten Fahrmodus in einem Fahrmodus mit einem reduzierten Automatisierungsgrad (z.B. in einen manuellen Fahrmodus) bewirkt werden.The described driving system makes it possible to avoid inadvertent termination of the automated driving mode in an efficient and comfortable manner for the driver. Furthermore, it can be made possible for the driver of the vehicle to end the automated driving mode in an intuitive and comfortable manner. Furthermore, the described driving system can bring about a safe transition from the automated driving mode to a driving mode with a reduced degree of automation (e.g. to a manual driving mode).
Das Fahrsystem kann eingerichtet sein, in Reaktion darauf, dass bestimmt wurde, dass der automatisierte Fahrmodus beendet werden soll, insbesondere in Reaktion darauf, dass die erste Aktion detektiert wurde, über eine Benutzerschnittstelle des Fahrzeugs einen Hinweis dahingehend auszugeben, dass zum Beenden des automatisierten Fahrmodus die mündliche Wiedergabe eines vordefinierten akustischen Signals als Bestätigung der Übernahmebereitschaft erforderlich ist. So kann der Komfort für den Fahrer des Fahrzeugs beim Beenden der automatisierten Fahrfunktion erhöht werden.In response to the fact that it has been determined that the automated driving mode should be ended, in particular in response to the fact that the first action was detected, the driving system can be set up to output a message via a user interface of the vehicle to the effect that the automated driving mode should be ended Oral reproduction of a predefined acoustic signal as confirmation of readiness to take over is required. In this way, the comfort for the driver of the vehicle can be increased when the automated driving function is terminated.
Des Weiteren kann das Fahrsystem eingerichtet sein, in Reaktion darauf, dass bestimmt wurde, dass der automatisierte Fahrmodus beendet werden soll (z.B. in Reaktion auf die detektierte erste Aktion), einem Nutzer, insbesondere dem Fahrer des Fahrzeugs, über die Benutzerschnittstelle des Fahrzeugs das vordefinierte (d.h. das wiederzugebende) akustische Signal, das durch den Nutzer (insbesondere durch den Fahrer) als Bestätigung der Übernahmebereitschaft mündlich wiederzugeben ist, mitzuteilen. Dabei kann das wiederzugebende akustische Signal insbesondere auf einem Bildschirm (z.B. auf einem TFT Bildschirm oder auf einem Head-Up Display) der Benutzerschnittstelle angezeigt werden, und von dem Fahrer des Fahrzeugs abgelesen werden. Beispielsweise können dem Nutzer auf dem Bildschirm die ein oder mehreren Wörter angezeigt werden, die als akustisches Signal mündlich wiedergegeben werden sollen.Furthermore, the driving system can be set up in response to the fact that it has been determined that the automated driving mode should be ended (for example in response to the detected first action), a user, in particular the driver of the vehicle, the predefined via the user interface of the vehicle (ie the acoustic signal to be reproduced) which is to be reproduced orally by the user (in particular by the driver) as confirmation of readiness to take over. The acoustic signal to be reproduced can in particular be displayed on a screen (e.g. on a TFT screen or on a head-up display) of the user interface and read by the driver of the vehicle. For example, the one or more words that are to be reproduced orally as an acoustic signal can be displayed to the user on the screen.
Alternativ oder ergänzend kann das Fahrsystem eingerichtet sein, das wiederzugebende akustische Signal über einen Lautsprecher wiederzugeben. Beispielsweise kann dem Fahrer des Fahrzeugs das wiederzugebende akustische Signal von dem Fahrsystem vorgesprochen werden. So wird es dem Fahrer des Fahrzeugs ermöglicht, das wiederzugebende akustische Signal wahrzunehmen, ohne dabei die Augen von dem Verkehr abwenden zu müssen.As an alternative or in addition, the driving system can be set up to reproduce the acoustic signal to be reproduced via a loudspeaker. For example, the acoustic signal to be reproduced can be spoken to the driver of the vehicle by the driving system. This enables the driver of the vehicle to perceive the acoustic signal to be reproduced without having to take their eyes off the traffic.
Das Fahrsystem kann somit eingerichtet sein, das wiederzugebende akustische Signal bildlich und/oder akustisch über die Benutzerschnittstelle des Fahrzeugs auszugeben.The driving system can thus be set up to output the acoustic signal to be reproduced visually and / or acoustically via the user interface of the vehicle.
Es kann somit dem Fahrer des Fahrzeugs vorgegeben werden, welches akustische Signal zur Bestätigung der Übernahmebereitschaft mündlich wiedergegeben werden muss. Es kann dann überprüft werden (z.B. durch Methoden der Sprachanalyse bzw. Spracherkennung), ob auch tatsächlich das vorgegebene akustische Signal mündlich wiedergegeben wird. So kann zuverlässig festgestellt werden, dass der Fahrer des Fahrzeugs tatsächlich bereit ist, zumindest teilweise manuell die Führungsaufgabe des Fahrzeugs zu übernehmen.It can thus be specified to the driver of the vehicle which acoustic signal must be reproduced orally to confirm readiness for takeover. It can then be checked (e.g. using speech analysis or speech recognition methods) whether the specified acoustic signal is actually reproduced orally. It can thus be reliably determined that the driver of the vehicle is actually ready to take over the management task of the vehicle manually, at least in part.
Das Fahrsystem kann eingerichtet sein, das wiederzugebende akustische Signal aus einer Liste von unterschiedlichen vordefinierten akustischen Signalen auszuwählen. Alternativ oder ergänzend kann das Fahrsystem ausgebildet sein, das wiederzugebende akustische Signal mittels eines Zufallsgenerators zu generieren und/oder auszuwählen. Alternativ oder ergänzend kann das Fahrsystem ausgebildet sein, mittels künstlicher Intelligenz ein auf den Fahrer, insbesondere ein auf einen Zustand des Fahrers, abgestimmtes wiederzugebendes akustisches Signal zu ermitteln. Durch diese Maßnahmen kann bewirkt werden, dass bei unterschiedlichen Übergängen von dem automatisierten Fahrmodus in einen Fahrmodus mit reduziertem Automatisierungsgrad jeweils unterschiedliche vordefinierte akustische Signale mündlich wiedergegeben müssen. So kann mit erhöhter Zuverlässigkeit überprüft werden, ob der Fahrer tatsächlich zur (zumindest teilweisen) Übernahme der Fahraufgabe bereit ist.The driving system can be set up to select the acoustic signal to be reproduced from a list of different predefined acoustic signals. Alternatively or in addition, the driving system can be designed to generate and / or select the acoustic signal to be reproduced by means of a random generator. As an alternative or in addition, the driving system can be designed to use artificial intelligence to determine an acoustic signal to be reproduced that is coordinated with the driver, in particular with a state of the driver. These measures can have the effect that different predefined acoustic signals have to be reproduced orally for different transitions from the automated driving mode to a driving mode with a reduced degree of automation. It can thus be checked with increased reliability whether the driver is actually ready to (at least partially) take over the driving task.
In einem bevorzugten Beispiel umfasst bzw. ist das vordefinierte und/oder von dem Fahrsystem erwartete akustische Signal ein Sprachsignal. Besonders bevorzugt umfasst das vordefinierte und/oder von dem Fahrsystem erwartete akustische Signal eine Sequenz von mehreren unterschiedlichen Worten. Alternativ oder ergänzend kann das Fahrsystem ausgebildet sein, durch maschinelles Lernen ein akustisches Signal (insbesondere eine Wortsequenz) vorzugeben, die an den Fahrer des Fahrzeugs angepasst ist. So kann es dem Fahrer in komfortabler und zuverlässiger Weise ermöglicht werden, seine Übernahmebereitschaft anzuzeigen.In a preferred example, this includes or is predefined and / or acoustic signal expected by the driving system is a voice signal. The predefined acoustic signal and / or expected by the driving system particularly preferably comprises a sequence of several different words. Alternatively or in addition, the driving system can be designed to use machine learning to specify an acoustic signal (in particular a word sequence) that is adapted to the driver of the vehicle. This enables the driver to display his readiness to take over in a comfortable and reliable manner.
Das Fahrzeug kann ein oder mehrere Mikrofone (z.B. ein Mikrofon-Array) umfassen, die eingerichtet sind, Audiodaten in Bezug auf das mündlich wiedergegebene akustische Signal (insbesondere auf das Sprachsignal) zu erfassen. Die Audiodaten können analysiert werden, um zu überprüfen, ob das durch die Audiodaten angezeigte akustische Signal dem vordefinierten akustischen Signal entspricht oder nicht. Dabei können Methoden der Sprachanalyse verwendet werden. Durch die Analyse bzw. Auswertung der Audiodaten kann in zuverlässiger und robuster Weise überprüft werden, ob eine mündliche Wiedergabe des vordefinierten akustischen Signals erfolgt ist oder nicht.The vehicle can comprise one or more microphones (e.g. a microphone array) which are set up to record audio data in relation to the orally reproduced acoustic signal (in particular the speech signal). The audio data can be analyzed in order to check whether or not the acoustic signal indicated by the audio data corresponds to the predefined acoustic signal. Methods of speech analysis can be used for this. By analyzing or evaluating the audio data, it can be checked in a reliable and robust manner whether an oral reproduction of the predefined acoustic signal has taken place or not.
Das Fahrsystem kann eingerichtet sein, auf Basis der Audiodaten eine Position des Sprechers zu ermitteln, durch die das akustische Signal wiedergegeben wurde. Die Position des Sprechers kann insbesondere dann in präziser Weise ermittelt werden, wenn die Audiodaten durch ein Mikrofon-Array erfasst werden. Es kann in Abhängigkeit von der ermittelten Position bestimmt werden, ob der automatisierte Fahrmodus beendet wird oder nicht und/oder ob die mündliche Wiedergabe des vordefinierten akustischen Signals als Bestätigung der Übernahmebereitschaft akzeptiert wird oder nicht. Durch die Berücksichtigung der Position des Sprechers des vordefinierten akustischen Signals kann mit erhöhter Zuverlässigkeit erkannt werden, dass das akustische Signal auch wirklich durch den Fahrer des Fahrzeugs wiedergegeben wurde, und/oder dass sich der Fahrer des Fahrzeugs auch wirklich an einer Position zur Übernahme der Fahraufgabe befindet. So kann ein sicheres Beenden des automatisierten Fahrmodus ermöglicht werden.The driving system can be set up to determine, on the basis of the audio data, a position of the speaker through which the acoustic signal was reproduced. The position of the speaker can be determined in a precise manner in particular when the audio data are recorded by a microphone array. Depending on the determined position, it can be determined whether the automated driving mode is ended or not and / or whether the verbal reproduction of the predefined acoustic signal is accepted as confirmation of readiness to take over or not. By taking into account the position of the speaker of the predefined acoustic signal, it can be recognized with increased reliability that the acoustic signal was actually reproduced by the driver of the vehicle and / or that the driver of the vehicle is actually in a position to take over the driving task is located. This enables the automated driving mode to be safely ended.
Insbesondere kann das Fahrsystem eingerichtet sein, auf Basis der ermittelten Position zu bestimmen, ob sich der Sprecher an der Fahrerposition des Fahrzeugs befindet oder nicht. Der automatisierte Fahrmodus kann (ggf. nur dann) beendet werden und/oder die mündliche Wiedergabe des vordefinierten akustischen Signals kann (ggf. nur dann) als Bestätigung der Übernahmebereitschaft akzeptiert werden, wenn bestimmt wird, dass sich der Sprecher an der Fahrerposition des Fahrzeugs befindet. So kann ein sicheres Beenden des automatisierten Fahrmodus ermöglicht werden.In particular, the driving system can be set up to determine on the basis of the determined position whether or not the speaker is at the driver's position of the vehicle. The automated driving mode can (possibly only then) be ended and / or the verbal reproduction of the predefined acoustic signal can (possibly only) be accepted as confirmation of readiness to take over if it is determined that the speaker is at the driver's position of the vehicle . This enables the automated driving mode to be safely ended.
Alternativ oder ergänzend kann das Fahrsystem eingerichtet sein, auf Basis der Audiodaten Identitätsinformation in Bezug auf die Identität des Sprechers zu ermitteln, durch den das akustische Signal wiedergegeben wurde. Insbesondere kann durch Sprachanalyse überprüft werden, ob das vordefinierte akustische Signal durch eine bestimmte Person (z.B. durch den im Vorfeld bekannten Fahrer) wiedergegeben wurde oder nicht. Es kann dann in Abhängigkeit von der ermittelten Identitätsinformation bestimmt werden, ob der automatisierte Fahrmodus beendet wird oder nicht und/oder ob die mündliche Wiedergabe des vordefinierten akustischen Signals als Bestätigung der Übernahmebereitschaft akzeptiert wird oder nicht.As an alternative or in addition, the driving system can be set up to determine identity information relating to the identity of the speaker through whom the acoustic signal was reproduced on the basis of the audio data. In particular, voice analysis can be used to check whether the predefined acoustic signal was reproduced by a specific person (e.g. by the driver known in advance) or not. It can then be determined as a function of the identified identity information whether the automated driving mode is ended or not and / or whether the verbal reproduction of the predefined acoustic signal is accepted as confirmation of readiness to take over or not.
Insbesondere kann auf Basis von ersten Audiodaten (für ein erstes akustisches Signal, das als erste Aktion zum Beenden des automatisierten Fahrmodus wiedergegeben wurde) und auf Basis der Audiodaten in Bezug auf das mündlich wiedergegebene akustische Signal zur Bestätigung der Übernahmebereitschaft bestimmt werden, ob die Sprachanweisung (zum Beenden des automatisierten Fahrmodus) und das vordefinierte akustische Signal (zum Anzeigen der Übernahmebereitschaft) durch den gleichen Sprecher wiedergegeben wurden oder nicht. Der automatisierte Fahrmodus kann (ggf. nur dann) beendet und/oder die mündliche Wiedergabe des vordefinierten akustischen Signals kann (ggf. nur dann) als Bestätigung der Übernahmebereitschaft akzeptiert werden, wenn bestimmt wird, dass die Sprachanweisung zum Beenden des automatisierten Fahrmodus und das vordefinierte akustische Signal durch den gleichen Sprecher wiedergegeben wurden. So kann ein sicheres Beenden des automatisierten Fahrmodus ermöglicht werden.In particular, it can be determined on the basis of first audio data (for a first acoustic signal that was played as the first action to end the automated driving mode) and on the basis of the audio data in relation to the orally reproduced acoustic signal to confirm readiness to take over whether the voice instruction ( to end the automated driving mode) and the predefined acoustic signal (to indicate readiness to take over) were played back by the same speaker or not. The automated driving mode can (possibly only then) be ended and / or the verbal reproduction of the predefined acoustic signal can (possibly only) be accepted as confirmation of readiness to take over if it is determined that the voice instruction to end the automated driving mode and the predefined acoustic signal were reproduced by the same speaker. This enables the automated driving mode to be safely ended.
Alternativ oder ergänzend kann das Fahrsystem eingerichtet sein, auf Basis der Audiodaten in Bezug auf das vordefinierte akustische Signal Zustandsinformation in Bezug auf einen Zustand, insbesondere in Bezug auf Stress, des Sprechers zu ermitteln, durch den das vordefinierte akustische Signal wiedergegeben wurde. Beispielsweise kann die Zustandsinformation anzeigen, wie wach und/oder wie aufmerksam der Sprecher klingt. Es kann dann in Abhängigkeit von der ermittelten Zustandsinformation bestimmt werden, ob der automatisierte Fahrmodus beendet wird oder nicht und/oder ob die mündliche Wiedergabe des vordefinierten akustischen Signals als Bestätigung der Übernahmebereitschaft akzeptiert wird oder nicht. So kann ein sicheres Beenden des automatisierten Fahrmodus ermöglicht werden.Alternatively or in addition, the driving system can be set up to determine, on the basis of the audio data with respect to the predefined acoustic signal, status information with respect to a state, in particular with respect to stress, of the speaker through which the predefined acoustic signal was reproduced. For example, the status information can indicate how awake and / or how attentive the speaker sounds. Depending on the status information determined, it can then be determined whether or not the automated driving mode is ended and / or whether the verbal reproduction of the predefined acoustic signal is accepted as confirmation of readiness to take over or not. This enables the automated driving mode to be safely ended.
Das Fahrsystem kann ausgebildet sein, dem Fahrer des Fahrzeugs zumindest zwei separate akustische Signale mitzuteilen. Des Weiteren kann das Fahrsystem ausgebildet sein, zu überprüfen, ob eine mündliche Wiedergabe der zumindest zwei akustischen Signale erfolgt, um die Übernahmebereitschaft des Fahrers des Fahrzeugs zum zumindest teilweise manuellen Führen des Fahrzeugs zu bestätigen. Insbesondere kann sequentiell jeweils ein wiederzugebendes akustisches Signal mitgeteilt werden, und es kann daraufhin überprüft werden, ob das jeweils mitgeteilte akustische Signal mündlich wiedergegeben wurde. Die Vorgabe eines wiederzugebenden akustischen Signals und das Überprüfen, ob die mündliche Wiedergabe des jeweils vorgegebenen akustischen Signals können somit mehrmals (insbesondere zweimal) wiederholt werden, um mit besonders hoher Zuverlässigkeit zu erkennen, ob der Fahrer des Fahrzeugs für die Übernahme zum zumindest teilweise manuellen Führen des Fahrzeugs bereit ist oder nicht.The driving system can be designed to communicate at least two separate acoustic signals to the driver of the vehicle. Furthermore, the driving system can be designed to check whether an oral reproduction of the at least two acoustic signals takes place in order to confirm that the driver of the vehicle is ready to take over for at least partially manual driving of the vehicle. In particular, an acoustic signal to be reproduced can be communicated sequentially, and it can then be checked whether the respectively communicated acoustic signal was reproduced orally. The specification of an acoustic signal to be reproduced and the checking whether the verbal reproduction of the respectively specified acoustic signal can thus be repeated several times (in particular twice) in order to recognize with particularly high reliability whether the driver of the vehicle is at least partially manual for the takeover the vehicle is ready or not.
Gemäß einem weiteren Aspekt wird ein (Straßen-) Kraftfahrzeug (insbesondere ein Personenkraftwagen oder ein Lastkraftwagen oder ein Bus) beschrieben, das die in diesem Dokument beschriebene Steuereinheit und/oder das in diesem Dokument beschriebene Fahrsystem umfasst.According to a further aspect, a (road) motor vehicle (in particular a passenger car or a truck or a bus) is described which comprises the control unit described in this document and / or the driving system described in this document.
Gemäß einem weiteren Aspekt wird ein (Computer-implementiertes) Verfahren zum Beenden eines automatisierten Fahrmodus (insbesondere eines Fahrmodus gemäß SAE-Level 3 oder mehr) eines Fahrzeugs beschrieben, insbesondere um das Fahrzeug in einem Fahrmodus mit einem reduzierten Automatisierungsgrad zu überführen (z.B. in einen Fahrmodus gemäß SAE-Level 2 oder weniger).According to a further aspect, a (computer-implemented) method for ending an automated driving mode (in particular a driving mode according to SAE level 3 or more) of a vehicle is described, in particular in order to convert the vehicle into a driving mode with a reduced degree of automation (e.g. into a Driving mode according to SAE level 2 or less).
Das Verfahren umfasst das Bestimmen, dass der automatisierte Fahrmodus beendet werden soll. Des Weiteren umfasst das Verfahren das Überprüfen und/oder das Bestimmen, ob die Übernahmebereitschaft des Fahrers zum zumindest teilweise manuellen Führen des Fahrzeugs (innerhalb eines Bestätigungszeitraums) durch die mündliche Wiedergabe eines vordefinierten akustischen Signals bestätigt wird. Das (vordefinierte) akustische Signal kann dabei dem Fahrer des Fahrzeugs vorab (ggf. über die Benutzerschnittstelle des Fahrzeugs) mitgeteilt werden. Das Verfahren umfasst ferner das Beenden des automatisierten Fahrmodus, (ggf. nur dann) wenn bestimmt wird, dass die Übernahmebereitschaft durch die mündliche Wiedergabe des vordefinierten akustischen Signals bestätigt wird.The method includes determining that the automated driving mode should be ended. Furthermore, the method includes checking and / or determining whether the driver's readiness to take over for at least partially manual driving of the vehicle (within a confirmation period) is confirmed by the verbal reproduction of a predefined acoustic signal. The (predefined) acoustic signal can be communicated to the driver of the vehicle in advance (if necessary via the user interface of the vehicle). The method further comprises the termination of the automated driving mode (possibly only then) if it is determined that the readiness to take over is confirmed by the verbal reproduction of the predefined acoustic signal.
Gemäß einem weiteren Aspekt wird ein Software (SW) Programm beschrieben. Das SW Programm kann eingerichtet werden, um auf einem Prozessor (z.B. auf einem Steuergerät eines Fahrzeugs) ausgeführt zu werden, und um dadurch das in diesem Dokument beschriebene Verfahren auszuführen.According to a further aspect, a software (SW) program is described. The software program can be set up to be executed on a processor (e.g. on a control unit of a vehicle) and thereby to execute the method described in this document.
Gemäß einem weiteren Aspekt wird ein Speichermedium beschrieben. Das Speichermedium kann ein SW Programm umfassen, welches eingerichtet ist, um auf einem Prozessor ausgeführt zu werden, und um dadurch das in diesem Dokument beschriebene Verfahren auszuführen.According to a further aspect, a storage medium is described. The storage medium can comprise a software program which is set up to be executed on a processor and thereby to execute the method described in this document.
Unter dem Begriff „automatisiertes Fahren“ kann im Rahmen des Dokuments ein Fahren mit automatisierter Längs- oder Querführung oder ein autonomes Fahren mit automatisierter Längs- und Querführung verstanden werden. Bei dem automatisierten Fahren kann es sich beispielsweise um ein zeitlich längeres Fahren auf der Autobahn oder um ein zeitlich begrenztes Fahren im Rahmen des Einparkens oder Rangierens handeln. Der Begriff „automatisiertes Fahren“ umfasst ein automatisiertes Fahren mit einem beliebigen Automatisierungsgrad. Beispielhafte Automatisierungsgrade sind ein assistiertes, teilautomatisiertes, hochautomatisiertes oder vollautomatisiertes Fahren. Diese Automatisierungsgrade wurden von der Bundesanstalt für Straßenwesen (BASt) definiert (siehe BASt-Publikation „Forschung kompakt“, Ausgabe 11/2012). Beim assistierten Fahren führt der Fahrer dauerhaft die Längs- oder Querführung aus, während das System die jeweils andere Funktion in gewissen Grenzen übernimmt. Beim teilautomatisierten Fahren (TAF) übernimmt das System die Längs- und Querführung für einen gewissen Zeitraum und/oder in spezifischen Situationen, wobei der Fahrer das System wie beim assistierten Fahren dauerhaft überwachen muss. Beim hochautomatisierten Fahren (HAF) übernimmt das System die Längs- und Querführung für einen gewissen Zeitraum, ohne dass der Fahrer das System dauerhaft überwachen muss; der Fahrer muss aber in einer gewissen Zeit in der Lage sein, die Fahrzeugführung zu übernehmen. Beim vollautomatisierten Fahren (VAF) kann das System für einen spezifischen Anwendungsfall das Fahren in allen Situationen automatisch bewältigen; für diesen Anwendungsfall ist kein Fahrer mehr erforderlich. Die vorstehend genannten vier Automatisierungsgrade entsprechen den SAE-Level 1 bis 4 der Norm SAE J3016 (SAE - Society of Automotive Engineering). Beispielsweise entspricht das hochautomatisierte Fahren (HAF) Level 3 der Norm SAE J3016. Ferner ist in der SAE J3016 noch der SAE-Level 5 als höchster Automatisierungsgrad vorgesehen, der in der Definition der BASt nicht enthalten ist. Der SAE-Level 5 entspricht einem fahrerlosen Fahren, bei dem das System während der ganzen Fahrt alle Situationen wie ein menschlicher Fahrer automatisch bewältigen kann; ein Fahrer ist generell nicht mehr erforderlich. Die in diesem Dokument beschriebenen Aspekt beziehen sich insbesondere auf ein Fahrzeug, das in einem automatisierten Fahrmodus gemäß SAE-Level 3 oder höher betrieben werden kann.In the context of the document, the term “automated driving” can be understood to mean driving with automated longitudinal or lateral guidance or autonomous driving with automated longitudinal and lateral guidance. The automated driving can be, for example, driving on the motorway for a longer period of time or driving for a limited time as part of parking or maneuvering. The term “automated driving” includes automated driving with any degree of automation. Exemplary degrees of automation are assisted, partially automated, highly automated or fully automated driving. These degrees of automation were defined by the Federal Highway Research Institute (BASt) (see BASt publication “Research compact”, edition 11/2012). With assisted driving, the driver continuously performs the longitudinal or lateral guidance, while the system takes on the other function within certain limits. With partially automated driving (TAF), the system takes over the longitudinal and lateral guidance for a certain period of time and / or in specific situations, whereby the driver has to constantly monitor the system as with assisted driving. With highly automated driving (HAF), the system takes over the longitudinal and lateral guidance for a certain period of time without the driver having to permanently monitor the system; however, the driver must be able to take control of the vehicle within a certain period of time. With fully automated driving (VAF), the system can automatically cope with driving in all situations for a specific application; a driver is no longer required for this application. The four degrees of automation mentioned above correspond to SAE levels 1 to 4 of the SAE J3016 standard (SAE - Society of Automotive Engineering). For example, highly automated driving (HAF) Level 3 corresponds to the SAE J3016 standard. In addition, SAE J3016 provides SAE level 5 as the highest degree of automation, which is not included in the definition of BASt. SAE level 5 corresponds to driverless driving, in which the system can automatically cope with all situations like a human driver during the entire journey; a driver is generally no longer required. The aspects described in this document relate in particular to a vehicle that can be operated in an automated driving mode according to SAE level 3 or higher.
Es ist zu beachten, dass die in diesem Dokument beschriebenen Verfahren, Vorrichtungen und Systeme sowohl alleine, als auch in Kombination mit anderen in diesem Dokument beschriebenen Verfahren, Vorrichtungen und Systemen verwendet werden können. Des Weiteren können jegliche Aspekte der in diesem Dokument beschriebenen Verfahren, Vorrichtungen und Systemen in vielfältiger Weise miteinander kombiniert werden. Insbesondere können die Merkmale der Ansprüche in vielfältiger Weise miteinander kombiniert werden.It should be noted that the methods, devices and systems described in this document are described both alone and in combination with others in this document Methods, devices and systems can be used. Furthermore, any aspects of the methods, devices and systems described in this document can be combined with one another in diverse ways. In particular, the features of the claims can be combined with one another in diverse ways.
Im Weiteren wird die Erfindung anhand von Ausführungsbeispielen näher beschrieben. Dabei zeigen
-
1a beispielhafte Komponenten eines Fahrzeugs; -
1b eine beispielhafte Fahrerposition eines Fahrzeugs; und -
2 ein Ablaufdiagramm eines beispielhaften Verfahrens zur Übernahme der Fahraufgabe durch einen Fahrer eines Fahrzeugs.
-
1a exemplary components of a vehicle; -
1b an exemplary driver position of a vehicle; and -
2 a flowchart of an exemplary method for taking over the driving task by a driver of a vehicle.
Wie eingangs dargelegt, befasst sich das vorliegende Dokument mit der sicheren und zuverlässigen Übernahme der Fahraufgabe durch einen Fahrer eines Fahrzeugs. In diesem Zusammenhang zeigt
Das Fahrzeug
Das Fahrzeug
Ggf. kann durch eine Betätigung eines Steuermittel
Das Fahrzeug
Des Weiteren kann das Fahrzeug
Die Steuereinheit
- • den automatisierten Fahrmodus zu aktivieren (wenn sich
das Fahrzeug 100 bei der Betätigung des Fahrmodus-Bedienelements 107 in dem manuellen Fahrmodus oder in einem Fahrmodus mit reduziertem Automatisierungsgrad (z.B. gemäß SAE-Level 2 oder weniger) befindet); und/oder - • eine Beendigung des automatisierten Fahrmodus einzuleiten (wenn sich
das Fahrzeug 100 bei der Betätigung des Fahrmodus-Bedienelements 107 in dem automatisierten Fahrmodus befindet).
- • activate the automated driving mode (when the vehicle is
100 when actuating the drivingmode control element 107 is in the manual driving mode or in a driving mode with a reduced degree of automation (for example according to SAE level 2 or less)); and or - • initiate termination of the automated driving mode (if the
vehicle 100 when actuating the drivingmode control element 107 is in the automated driving mode).
Des Weiteren kann das Fahrzeug
Wie eingangs dargelegt, wird es dem Fahrer des Fahrzeugs
Die Steuereinheit
Wenn eine bestätigende mündliche Wiedergabe des definierten akustischen Signals detektiert wird, so kann der automatisierte Fahrmodus von der Steuereinheit
Durch einen derartigen zweistufigen Prozess zum Beenden des automatisierten Fahrmodus kann eine zuverlässige und sichere Übergabe der Fahraufgabe an den Fahrer des Fahrzeugs
Der automatisierte Fahrmodus kann ggf. mittels eines durch den Nutzer bzw. den Fahrer des Fahrzeugs
In Reaktion darauf, kann die Steuereinheit
Alternativ oder ergänzend kann die sequenzielle Bestätigung der erfolgten Übernahme der Fahrzeugführung durch den Fahrer mittels Nachsprechen mehrerer unterschiedlicher, vom Fahrzeug angezeigter, Sprachsequenzen erfolgen.As an alternative or in addition, the sequential confirmation of the successful takeover of vehicle guidance by the driver can take place by repeating several different voice sequences displayed by the vehicle.
In dem Fahrzeug
Es kann somit dem Fahrer ermöglicht werden, wenn sich das Fahrzeug
Des Weiteren kann das Fahrzeug
Die ein oder mehreren zweiten Sprachsequenzen sollten sich von der ersten Sequenz (mit der das Beenden des automatisierten Fahrmodus initiiert wurde) (hinreichend stark) unterscheiden, sodass sichergestellt werden kann, dass dem Fahrer bewusst ist, dass der automatisierte Fahrmodus bei Nachsprechen der ein oder mehreren zweiten Sprachsequenzen deaktiviert wird.The one or more second speech sequences should differ from the first sequence (with which the termination of the automated driving mode was initiated) (sufficiently strong) so that it can be ensured that the driver is aware that the automated driving mode is being used when repeating the one or more second voice sequences is deactivated.
Die Sicherheit der Deaktivierung des automatisierten Fahrmodus kann durch ein oder mehrere der folgenden Maßnahmen zusätzlich sichergestellt werden. Insbesondere kann durch die ein oder mehreren folgenden Maßnahmen die Gefahr eines Missbrauchs durch einen Nutzer des Fahrzeugs
- • Es kann eine Lokalisierung des Sprechers der Sprachsequenz erfolgen. Insbesondere kann auf Basis der Audiodaten überprüft werden, ob der Sprecher tatsächlich an der Fahrerposition des
Fahrzeugs 100 angeordnet ist. Die Position des Sprechers kann ferner abgeglichen werden, mit Sensordaten eines Sitzsensors, mit Sensordaten eines Gurtschlosses und/oder mit Bilddaten einer Fahrerkamera. - • Es kann ein Abgleich der Stimmprofile zwischen dem Sprecher der ersten Sprachsequenz (zum Einleiten des Beendens des automatisierten Fahrmodus) und dem Sprecher der zweitem Sprachsequenz (zur Bestätigung der Übernahmebereitschaft durch den Fahrer) erfolgen.
- • Es kann eine Messung bzw. eine Analyse von ein oder mehreren Sprachparametern erfolgen, insbesondere hinsichtlich Stress und/oder Aufregung.
- • The speaker of the speech sequence can be localized. In particular, it can be checked on the basis of the audio data whether the speaker is actually at the driver's position of the
vehicle 100 is arranged. The speaker's position can also be compared with sensor data from a seat sensor, with sensor data from a seat belt buckle and / or with image data from a driver's camera. - • The voice profiles between the speaker of the first speech sequence (to initiate the termination of the automated driving mode) and the speaker of the second speech sequence (to confirm that the driver is ready to take over) can be compared.
- • One or more speech parameters can be measured or analyzed, in particular with regard to stress and / or excitement.
Das Verfahren
Das Verfahren
Außerdem umfasst das Verfahren
Durch die in diesem Dokument beschriebenen Maßnahmen können ein sicherer Betrieb eines automatisierten Fahrmodus und ein sicherer und komfortabler (von dem Fahrer des Fahrzeugs
Die vorliegende Erfindung ist nicht auf die gezeigten Ausführungsbeispiele beschränkt. Insbesondere ist zu beachten, dass die Beschreibung und die Figuren nur beispielhaft das Prinzip der vorgeschlagenen Verfahren, Vorrichtungen und Systeme veranschaulichen sollen.The present invention is not restricted to the exemplary embodiments shown. In particular, it should be noted that the description and the figures are only intended to illustrate the principle of the proposed methods, devices and systems by way of example.
Claims (19)
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102019133780.1A DE102019133780A1 (en) | 2019-12-10 | 2019-12-10 | Driving system and method for exiting an automated driving mode by voice |
CN202011362103.4A CN112937602A (en) | 2019-12-10 | 2020-11-27 | Driving system and method for ending an autonomous driving mode by voice |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102019133780.1A DE102019133780A1 (en) | 2019-12-10 | 2019-12-10 | Driving system and method for exiting an automated driving mode by voice |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102019133780A1 true DE102019133780A1 (en) | 2021-06-10 |
Family
ID=75962478
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102019133780.1A Pending DE102019133780A1 (en) | 2019-12-10 | 2019-12-10 | Driving system and method for exiting an automated driving mode by voice |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN112937602A (en) |
DE (1) | DE102019133780A1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114103973A (en) * | 2021-11-12 | 2022-03-01 | 上汽通用五菱汽车股份有限公司 | Vehicle control method, device, vehicle and computer readable storage medium |
US20230065963A1 (en) * | 2021-08-25 | 2023-03-02 | Denso Corporation | Accelerator pedal system |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102013018783A1 (en) * | 2013-11-08 | 2015-05-13 | Audi Ag | Method for operating an entertainment system in a motor vehicle and motor vehicle |
DE102015209137A1 (en) * | 2015-05-19 | 2016-11-24 | Robert Bosch Gmbh | Method and system for controlling a driving function of a vehicle |
US20170220039A1 (en) * | 2014-03-26 | 2017-08-03 | Nissan Motor Co., Ltd. | Information Presenting Apparatus and Information Presenting Method |
DE102018126689A1 (en) * | 2017-10-30 | 2019-05-02 | Steering Solutions Ip Holding Corporation | System and method for managing a transition for an autonomous vehicle |
WO2019174830A1 (en) * | 2018-03-12 | 2019-09-19 | Daimler Ag | Method for operating a control system for automated vehicle guidance |
DE102018207675A1 (en) * | 2018-05-16 | 2019-11-21 | Robert Bosch Gmbh | Method for switching between different automation levels of a vehicle |
-
2019
- 2019-12-10 DE DE102019133780.1A patent/DE102019133780A1/en active Pending
-
2020
- 2020-11-27 CN CN202011362103.4A patent/CN112937602A/en active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102013018783A1 (en) * | 2013-11-08 | 2015-05-13 | Audi Ag | Method for operating an entertainment system in a motor vehicle and motor vehicle |
US20170220039A1 (en) * | 2014-03-26 | 2017-08-03 | Nissan Motor Co., Ltd. | Information Presenting Apparatus and Information Presenting Method |
DE102015209137A1 (en) * | 2015-05-19 | 2016-11-24 | Robert Bosch Gmbh | Method and system for controlling a driving function of a vehicle |
DE102018126689A1 (en) * | 2017-10-30 | 2019-05-02 | Steering Solutions Ip Holding Corporation | System and method for managing a transition for an autonomous vehicle |
WO2019174830A1 (en) * | 2018-03-12 | 2019-09-19 | Daimler Ag | Method for operating a control system for automated vehicle guidance |
DE102018207675A1 (en) * | 2018-05-16 | 2019-11-21 | Robert Bosch Gmbh | Method for switching between different automation levels of a vehicle |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20230065963A1 (en) * | 2021-08-25 | 2023-03-02 | Denso Corporation | Accelerator pedal system |
CN114103973A (en) * | 2021-11-12 | 2022-03-01 | 上汽通用五菱汽车股份有限公司 | Vehicle control method, device, vehicle and computer readable storage medium |
CN114103973B (en) * | 2021-11-12 | 2024-05-28 | 上汽通用五菱汽车股份有限公司 | Vehicle control method, device, vehicle and computer readable storage medium |
Also Published As
Publication number | Publication date |
---|---|
CN112937602A (en) | 2021-06-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102017112310A1 (en) | DRIVER COMPETENCE DURING AUTONOMOUS DELIVERY | |
WO2020083963A1 (en) | Method and control unit for adapting an at least partially autonomous vehicle to a user | |
DE102013222048A1 (en) | Method and device for activating or deactivating an automatic driving function | |
DE102015224555A1 (en) | Method for operating a vehicle | |
DE102008041681A1 (en) | Control device and method for performing an automatic parking operation | |
DE102010028330A1 (en) | Parking systems with longitudinal and transverse guidance | |
DE102019133780A1 (en) | Driving system and method for exiting an automated driving mode by voice | |
WO2019201382A1 (en) | Method, device and means of transport for an automated starting up of a means of transport at a light signal system | |
DE102019105490A1 (en) | Method, device and computer program for operating a vehicle using a mobile user device | |
DE102012014207A1 (en) | Driver assistance device for carrying out park process for motor car, has shunting components terminated by stopping car, and control device outputs information about end of predetermined ranges of shunting components to driver of car | |
WO2021110319A1 (en) | Vehicle guidance system and method for terminating automated vehicle guidance | |
DE102017103391A1 (en) | Method for improving the user-friendliness of a vehicle | |
DE112019007111T5 (en) | Control device, control method and program | |
DE102019130319A1 (en) | Method for operating a motor vehicle that can be driven in an autonomous driving mode | |
DE102019134305A1 (en) | Method for operating an assistance system by means of a localization device and by means of a vehicle dynamics detection device | |
DE102018131598A1 (en) | Parking assistance system and method for automated parking after a manual parking process | |
DE102019119676A1 (en) | Method and control unit for checking an HOD function of a vehicle | |
DE102021101805A1 (en) | DRIVER MONITORING SYSTEM FOR MOTOR VEHICLES | |
DE102020104856A1 (en) | Device and method for controlling the readiness to return a driver of a vehicle | |
DE102018216044B4 (en) | Method for regulating a handover of a driving task, driver assistance system, computer program and data carrier signal | |
DE102020124257A1 (en) | Method and system for operating a driver assistance system of a vehicle | |
DE102020106969A1 (en) | Apparatus and method for operating a set of driving functions in a vehicle | |
DE102019118208A1 (en) | Device, operating method and computer program for operating an at least partially automated vehicle | |
EP1588901A1 (en) | Method for changing at least one adjustable function of a motor vehicle | |
WO2021110320A1 (en) | Vehicle guidance system and method for terminating an automated driving mode |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R163 | Identified publications notified |