DE102017219065A1 - METHOD AND DEVICE FOR CONFIGURING AN AUTOMATED VEHICLE GUIDANCE - Google Patents

METHOD AND DEVICE FOR CONFIGURING AN AUTOMATED VEHICLE GUIDANCE Download PDF

Info

Publication number
DE102017219065A1
DE102017219065A1 DE102017219065.5A DE102017219065A DE102017219065A1 DE 102017219065 A1 DE102017219065 A1 DE 102017219065A1 DE 102017219065 A DE102017219065 A DE 102017219065A DE 102017219065 A1 DE102017219065 A1 DE 102017219065A1
Authority
DE
Germany
Prior art keywords
vehicle
user input
guidance
automated
driving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102017219065.5A
Other languages
German (de)
Inventor
Justus Jordan
Forian Kohlhuber
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bayerische Motoren Werke AG
Original Assignee
Bayerische Motoren Werke AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bayerische Motoren Werke AG filed Critical Bayerische Motoren Werke AG
Priority to DE102017219065.5A priority Critical patent/DE102017219065A1/en
Publication of DE102017219065A1 publication Critical patent/DE102017219065A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/10Interpretation of driver requests or demands
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/215Selection or confirmation of options
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/45External transmission of data to or from the vehicle

Abstract

Die Erfindung betrifft das Gebiet des automatisierten Fahrens von Fahrzeugen, insbesondere von Kraftfahrzeugen. Speziell betrifft die Erfindung ein Verfahren zum Konfigurieren einer zumindest hochautomatisierten Fahrzeugführung eines Fahrzeugs. Das Verfahren weist die folgenden automatisierten Schritte auf: (i) Erfassen, bevorzugt berührungslos, einer eine Anweisung zur Konfiguration des automatisierten Fahrzeugführung betreffenden Benutzereingabe an einer Mensch-Maschine-Schnittstelle sowie von Umfeldinformationen, die das aktuelle lokale Umfeld des Fahrzeugs charakterisieren; (ii) Ableiten einer Vorgabe für die automatisierte Fahrzeugführung des Fahrzeugs mittels einer Auswertung der Benutzereingabe in Abhängigkeit von den Umfeldinformationen; (iii) Festlegen einer auf das lokale Umfeld des Fahrzeugs bezogenen Fahrstrategie im Einklang mit der Vorgabe; und (iv) Erzeugen und Ausgeben von Steuersignalen zur Ansteuerung des Fahrzeugs zur Durchführung der automatisierten Fahrzeugführung nach Maßgabe der festgelegten Fahrstrategie. Die Erfindung betrifft des Weiteren ein Computerprogramm zur Ausführung des Verfahrens, eine zur Ausführung des Verfahrens eingerichtete Vorrichtung sowie ein Fahrzeug mit einer solchen Vorrichtung.

Figure DE102017219065A1_0000
The invention relates to the field of automated driving of vehicles, in particular of motor vehicles. Specifically, the invention relates to a method for configuring an at least highly automated vehicle guidance of a vehicle. The method comprises the following automated steps: (i) detecting, preferably non-contact, user input to a man-machine interface related to an instruction for configuring the automated vehicle guidance as well as environmental information characterizing the current local environment of the vehicle; (ii) deriving a default for the automated vehicle guidance of the vehicle by means of an evaluation of the user input as a function of the surroundings information; (iii) determining a driving strategy related to the local environment of the vehicle in accordance with the specification; and (iv) generating and outputting control signals for driving the vehicle to perform the automated vehicle guidance in accordance with the established driving strategy. The invention further relates to a computer program for carrying out the method, a device set up to carry out the method and a vehicle having such a device.
Figure DE102017219065A1_0000

Description

Die vorliegende Erfindung betrifft das Gebiet des automatisierten Fahrens von Fahrzeugen, insbesondere von Kraftfahrzeugen. Speziell betrifft die Erfindung ein Verfahren und Vorrichtungen zum Konfigurieren einer zumindest hochautomatisierten Fahrzeugführung eines Fahrzeugs.The present invention relates to the field of automated driving of vehicles, especially motor vehicles. Specifically, the invention relates to a method and apparatus for configuring an at least highly automated vehicle guidance of a vehicle.

Bei der Automatisierung der Fahrzeugführung, insbesondere von Kraftfahrzeugen wie etwa Personen- und Lastkraftwagen oder Bussen oder sogar einspurigen Fahrzeugen, wie etwa Motorrädern, werden regelmäßig verschiedene Automatisierungsstufen, die ein entsprechendes Steuerungssystem (System) bereitstellt, unterschieden (vgl. Deutsche Bundesanstalt für Straßenwesen, BaSt, 2015).In the automation of vehicle guidance, especially of motor vehicles such as cars and trucks or buses or even single-track vehicles, such as motorcycles, different levels of automation, which provides a corresponding control system (system) are regularly differentiated (see German Federal Highway Research Institute, BaSt , 2015).

Beim herkömmlichen „nicht automatisierten Fahren“ („Driver Only“) führt der Fahrer dauerhaft (während der gesamten Fahrt) die Längsführung (Beschleunigen/Verzögern) und die Querführung (Lenken) aus. Dementsprechend greift kein automatisiertes System in die Längs- oder Querführung ein.In conventional "non-automated driving" ("Driver Only"), the driver performs the entire length of the travel (acceleration / deceleration) and the lateral guidance (steering) permanently (during the entire journey). Accordingly, no automated system intervenes in the longitudinal or transverse guidance.

Eine nächste Stufe, das „Assistierte Fahren“, gilt ebenfalls noch nicht als automatisiertes Fahren bzw. automatisierte Fahrzeugführung, sondern kann als deren Vorstufe und Ausgangspunkt betrachtet werden. Dabei führt der Fahrer dauerhaft entweder die Quer- oder die Längsführung aus. Die jeweils andere Teilaufgabe wird in gewissen Grenzen vom System ausgeführt. Der Fahrer muss das System dauerhaft überwachen und jederzeit zur vollständigen Übernahme der Fahrzeugführung bereit sein. Beispiele dafür sind die sogenannte „Adaptive Cruise Control“ (ACC), bei der die Längsführung mittels adaptiver Abstands- und Geschwindigkeitsregelung automatisch erfolgt, und die Parkassistenz, wobei die Querführung durch den Parkassistenten (automatisches Lenken in Parklücken) erfolgt, während der Fahrer die Längsführung steuert.A next level, "assisted driving", is also not yet considered as automated driving or automated vehicle guidance, but can be regarded as its precursor and starting point. The driver permanently performs either the transverse or the longitudinal guidance. The other subtask is executed within certain limits by the system. The driver must monitor the system permanently and be ready to take over the vehicle guidance at all times. Examples include the so-called "Adaptive Cruise Control" (ACC), in which the longitudinal guidance by means of adaptive distance and speed control is automatic, and the parking assistance, where the transverse guidance by the parking assistant (automatic steering in parking spaces) takes place while the driver, the longitudinal guidance controls.

Die nachfolgend beschriebenen weiteren Stufen stellen verschiedene Automatisierungsstufen des automatisierten Fahrens bzw. der automatisierten Fahrzeugführung dar, wobei der Automatisierungsgrad von Stufe zu Stufe ansteigt.The further stages described below represent various automation levels of automated driving or automated vehicle guidance, with the degree of automation increasing from stage to stage.

Beim „teilautomatisierten Fahren (TAF)“ übernimmt das System sowohl die Quer- als auch die Längsführung des Fahrzeugs für einen gewissen Zeitraum oder in spezifischen Situationen. Der Fahrer muss das System nach wie vor dauerhaft überwachen und jederzeit zur vollständigen Übernahme der Fahraufgabe bereit sein. Beispiele dafür sind Autobahnassistenten, die eine automatische Längs- und Querführung auf Autobahnen bis hin zu einer oberen Geschwindigkeitsgrenze bieten, oberhalb derer der Fahrer selbst diese Aufgaben übernehmen muss.In "partially automated driving (TAF)", the system takes over both the lateral and longitudinal guidance of the vehicle for a certain period of time or in specific situations. The driver must continue to monitor the system permanently and be ready to take over the task at all times. Examples include motorway assistants, which provide automatic longitudinal and lateral guidance on highways to an upper speed limit, above which the driver himself must take over these tasks.

Beim „hochautomatisierten Fahren (HAF)“ übernimmt das System die Quer- und Längsführung für einen gewissen Zeitraum oder in spezifischen Situationen. Der Fahrer muss das System nicht mehr dauerhaft überwachen. Er erhält eine ausreichende Zeitreserve, bevor er die Fahraufgabe selbst übernehmen muss. Das System warnt den Fahrer also vorher. Ein Beispiel dafür ist ein Autobahn-Chauffeursystem, das eine automatische Längs- und Querführung auf Autobahnen bis zu einer oberen Geschwindigkeitsgrenze bietet, wobei der Fahrer nicht dauerhaft überwachen, aber nach Übernahmeaufforderung mit gewisser Zeitreserve reagieren muss.In "highly automated driving (HAF)", the system takes over the lateral and longitudinal guidance for a certain period of time or in specific situations. The driver no longer has to monitor the system permanently. He receives sufficient time reserve before he has to take on the driving task himself. The system warns the driver so before. An example of this is a highway chauffeur system that provides automatic longitudinal and lateral guidance on highways up to an upper speed limit where the driver does not need to permanently monitor, but must respond with some time reserve after takeover request.

Beim „vollautomatisierten Fahren (VAF)“ übernimmt das System die Quer- und Längsführung vollständig in einem definierten Anwendungsfall, beispielsweise bei der Autobahnfahrt. Der Fahrer muss das System dabei nicht überwachen. Vor dem Verlassen des Anwendungsfalles fordert das System den Fahrer mit ausreichender Zeitreserve zur Übernahme der Fahraufgabe auf. Erfolgt dies nicht, wird in den risikominimalen Systemzustand zurückgeführt. Systemgrenzen werden alle vom System erkannt und das System ist in allen Situationen in der Lage, in den risikominimalen Systemzustand zurückzuführen.In "fully automated driving (VAF)", the system completely takes over the lateral and longitudinal guidance in a defined application, for example when driving on the highway. The driver does not have to monitor the system. Before leaving the application, the system prompts the driver with sufficient time reserve to take on the driving task. If this is not done, the system is returned to the lowest risk state. System limits are all recognized by the system and the system is in all situations able to return to the lowest-risk system state.

Das „autonome („fahrerlose“) Fahren“ stellt die höchste Automatisierungsstufe dar, bei der das System die Fahrzeugführung vollständig vom Start bis zum Ziel übernimmt und keine der im Fahrzeug befindlichen Personen als, zumindest temporärer, Fahrer handeln muss."Autonomous (" driverless ") driving" represents the highest level of automation, in which the system takes over the entire vehicle guidance from start to finish and none of the persons in the vehicle must act as, at least temporary, driver.

Zur Bedienung eines nicht-autonomen Kraftfahrzeugs bzw. seiner verschiedenen Funktionen, oder zu deren Einstellung bzw. Konfiguration durch den Fahrer, sind verschiedene Mensch-Maschine-Schnittstellen bekannt. Neben Lenkrad und Pedalerie sind dies vor allem manuell bedienbare mechanische oder elektrische Bedienelemente, wie etwa Tasten, Knöpfe, Hebel, Schiebe- oder Drehregler, berührungsempfindliche Flächen (z.B. Trackpads) oder Bildschirme (Touch Screens). Insbesondere, wenn mittels solcher Mensch-Maschine-Schnittstellen eine große Anzahl verschiedener Auswahlmöglichkeiten zur Verfügung gestellt werden soll, was oftmals mittels einer Menüsteuerung erfolgt, leiden meist die Bedienungsfreundlichkeit und die Zugriffszeit darunter.To operate a non-autonomous motor vehicle or its various functions, or to their setting or configuration by the driver, various man-machine interfaces are known. In addition to the steering wheel and pedals, these are, above all, manually operated mechanical or electrical operating elements, such as buttons, buttons, levers, sliding or dials, touch-sensitive surfaces (for example track pads) or screens (touch screens). In particular, if a large number of different choices are to be made available by means of such man-machine interfaces, which is often done by means of a menu control, usually the user-friendliness and the access time suffer.

Um dem zu begegnen, wurden in jüngerer Zeit von einigen Herstellern als weitere Mensch-Maschine-Schnittstellen Sprachsteuerungen eingeführt, die typischerweise ausgelegt sind, eine eng begrenzte katalogisierte Menge von vordefinierten Sprachanweisungen zu unterscheiden und zu erkennen.. Des Weiteren wurde zuletzt auch die sensorgestützte, insbesondere kameragestützte, Erkennung von einzelnen Handgesten als zusätzliche Mensch-Maschine-Schnittstelle zur Steuerung von ausgewählten Fahrzeugfunktionen eingeführt, wobei diese Möglichkeit bislang auf die Erkennung und Unterscheidung von sehr wenigen vordefinierten rudimentären Bewegungsabfolgen beschränkt ist, sodass dementsprechend auch nur ein sehr beschränkter Funktionsumfang damit steuerbar ist.To address this, more manufacturers have recently introduced voice controls as some other human-machine interfaces that are typically designed to distinguish and recognize a narrowly-restricted cataloged set of predefined voice prompts. In particular, camera-based, detection of individual hand gestures as an additional man-machine interface for controlling selected Vehicle functions introduced, with this possibility is limited to the detection and distinction of very few predefined rudimentary movement sequences, so that accordingly only a very limited range of functions is controllable.

Der vorliegenden Erfindung liegt die Aufgabe zugrunde, ein Verfahren und eine Vorrichtung zur zumindest hochautomatisierten Fahrzeugführung, also einer Fahrzeugführung deren Automatisierungsgrad zumindest dem hochautomatisierten Fahren (HAF) entspricht, bereitzustellen, das bzw. die es einen Fahrzeuginsassen, insbesondere dem Fahrer, eines Fahrzeugs ermöglicht, auf einfache Weise auf das Fahrzeug- oder Fahrverhalten des Fahrzeugs Einfluss zu nehmen, während dieses mittels einer hoch- oder höherautomatisierte Fahrzeugführung gesteuert wird und ohne diese dabei zu unterbrechen.The object of the present invention is to provide a method and a device for at least highly automated vehicle guidance, that is, a vehicle guidance whose degree of automation corresponds at least to highly automated driving (HAF), which enables a vehicle occupant, in particular the driver, of a vehicle. In a simple way to influence the vehicle or driving behavior of the vehicle, while this is controlled by a highly or more highly automated vehicle management and without interrupting it.

Eine Lösung dieser Aufgabe wird gemäß der Lehre der unabhängigen Ansprüche erreicht. Verschiedene Ausführungsformen und Weiterbildungen der Erfindung sind Gegenstand der Unteransprüche.A solution to this problem is achieved according to the teaching of the independent claims. Various embodiments and modifications of the invention are subject of the dependent claims.

Ein erster Aspekt der Erfindung betrifft ein Verfahren zum Konfigurieren eines zumindest hochautomatisierten Fahrzeugführung eines Fahrzeugs, insbesondere eines Kraftfahrzeugs, aufweisend die folgenden automatisierten Schritte: (i) Erfassen, bevorzugt berührungslos, einer eine Anweisung zur Konfiguration des automatisierten Fahrzeugführung betreffenden Benutzereingabe an einer Mensch-Maschine-Schnittstelle sowie von Umfeldinformationen, die das aktuelle lokale Umfeld des Fahrzeugs charakterisieren; (ii) Ableiten einer Vorgabe für die automatisierte Fahrzeugführung des Fahrzeugs mittels einer Auswertung der Benutzereingabe in Abhängigkeit von den Umfeldinformationen; (iii) Festlegen einer auf das lokale Umfeld des Fahrzeugs bezogenen Fahrstrategie im Einklang mit der Vorgabe; und (iv) Erzeugen und Ausgeben von Steuersignalen zur Ansteuerung des Fahrzeugs zur Durchführung der automatisierten Fahrzeugführung nach Maßgabe der festgelegten Fahrstrategie.A first aspect of the invention relates to a method for configuring an at least highly automated vehicle guidance of a vehicle, in particular of a motor vehicle, comprising the following automated steps: (i) Detecting, preferably non-contact, a user input on a human machine relating to an instruction for the configuration of the automated vehicle guidance Interface as well as environmental information characterizing the current local environment of the vehicle; (ii) deriving a default for the automated vehicle guidance of the vehicle by means of an evaluation of the user input as a function of the surroundings information; (iii) determining a driving strategy related to the local environment of the vehicle in accordance with the specification; and (iv) generating and outputting control signals for driving the vehicle to perform the automated vehicle guidance in accordance with the established driving strategy.

Unter „Fahrzeugführung“ im Sinne der Erfindung ist die dynamische Bewegungsführung eines Fahrzeugs, insbesondere dessen Quer- und Längsführung, zu verstehen. Unter einer „Konfiguration der Fahrzeugführung“ ist dabei eine Einstellung der Fahrzeugführung bezüglich einer der unmittelbaren Steuerung des Fahrzeugs für ein bestimmtes Fahrmanöver, also etwa für ein Lenkmanöver oder ein Brems- oder Beschleunigungsmanöver, übergeordneten Ebene zu verstehen. Die Einstellung definiert somit im Sinne einer Randbedingung den Lösungsraum zumindest anteilig, aus dem die jeweilige zumindest hochautomatisierte Fahrzeugführung eine konkrete Lösung, d.h. Fahrstrategie, mit konkreten Maßnahmen zur Fahrzeugsteuerung, auswählt, welche dann in Form entsprechender konkreter mittels einer entsprechenden Ansteuerung der Längs- und Quersteuerungskomponenten des Fahrzeugs automatisiert in entsprechende Fahrmanöver umgesetzt wird. Der Begriff „zumindest hochautomatisierte Fahrzeugführung“ bedeutet dabei, dass der Automatisierungsgrad der Fahrzeugführung zumindest der oben beschriebenen hochautomatisierten Fahrzeugführung entsprechen muss. Insbesondere fallen daher auch eine vollautomatisierte sowie eine autonome Fahrzeugführung unter diesen Begriff.The term "vehicle guidance" within the meaning of the invention means the dynamic motion guidance of a vehicle, in particular its transverse and longitudinal guidance. A "configuration of the vehicle guidance" is understood as meaning an adjustment of the vehicle guidance with regard to a direct control of the vehicle for a specific driving maneuver, ie, for a steering maneuver or a braking or acceleration maneuver, superordinate plane. The setting thus defines, in the sense of a boundary condition, the solution space, at least partially, from which the respective at least highly automated vehicle guidance provides a concrete solution, i. Driving strategy, with concrete measures for vehicle control, selects, which is then automatically implemented in the form of corresponding concrete by means of a corresponding control of the longitudinal and lateral control components of the vehicle in appropriate driving maneuvers. The term "at least highly automated vehicle guidance" means that the degree of automation of the vehicle guidance must at least correspond to the highly automated vehicle guidance described above. In particular, therefore, a fully automated as well as an autonomous vehicle management fall under this term.

Unter „Umfeldinformationen“ im Sinne der Erfindung sind Daten zu verstehen, die das aktuelle lokale Umfeld des Fahrzeugs charakterisieren, d. h. Aspekte davon beschreiben, klassifizieren, oder kennzeichnen. Als „lokales Umfeld“ ist dabei das unmittelbare räumliche Umfeld des Fahrzeugs zu verstehen, also ein das Fahrzeug umgebender Raumbereich der dem Raumbereich vergleichbar ist, den der Fahrer beim herkömmlichen nicht-automatisierten Fahren typischerweise überblickt und zur aktuellen und zeitnahen Fahrzeugsteuerung berücksichtigt bzw. das Umfeld, das mittels fahrzeuggestützter Sensorik (z.B. Kameras, Radar, LiDAR, Laser) typischerweise vom Fahrzeug aus erfassbar ist. Zum lokalen Umfeld können insbesondere Objekte wie Straßeneinrichtungen (wie etwa, Fahrbahnmarkierungen, Verkehrszeichen, Ampelanlagen usw.), oder weitere Fahrzeuge, Passanten oder andere Verkehrsteilnehmer, oder Infrastruktureinrichtungen (wie etwa Brücken oder Tunnels), die sich in räumlicher Nähe vor, neben oder hinter dem Fahrzeug befinden, gehören. Typische Ausdehnungen des lokalen Umfelds liegen bei ca. 1 km oder darunter, d.h. z. B. bei wenigen hundert Metern."Environment information" in the sense of the invention means data that characterize the current local environment of the vehicle, ie. H. Describe, classify or label aspects of it. A "local environment" is understood here to be the immediate spatial environment of the vehicle, ie a room area surrounding the vehicle that is comparable to the space area that the driver typically surveys in conventional non-automated driving and takes into account the current and timely vehicle control or the environment , which is typically detectable by means of vehicle-based sensors (eg cameras, radar, LiDAR, laser) from the vehicle. In particular, objects such as roadside facilities (such as lane markings, traffic signs, traffic lights, etc.), or other vehicles, passers-by or other road users, or infrastructural facilities (such as bridges or tunnels) located in front of, beside, or behind the local environment may be used are located in the vehicle. Typical extents of the local environment are about 1 km or less, i. z. B. at a few hundred meters.

Die Umfeldinformationen können insbesondere vom Fahrzeug selbst mittels einer entsprechenden Sensorik erfasst werden oder ganz oder teilweise über eine Kommunikationsschnittstelle von einer fahrzeugexternen Quelle, etwa von einem Verkehrsüberwachungssystem oder einem Navigationssystem, empfangen und auf diese Weise erfasst werden. Die Umfeldinformationen können insbesondere die Position, Lage bzw. Orientierung, Dimension, Ausdehnung, Bewegung oder andere Eigenschaften oder Zustände von Objekten im lokalen Umfeld des Fahrzeugs charakterisieren.The surroundings information can in particular be detected by the vehicle itself by means of a corresponding sensor system or can be completely or partially received via a communication interface from an external vehicle source, for example from a traffic monitoring system or a navigation system, and recorded in this way. The environment information may in particular characterize the position, orientation, dimension, extent, movement or other characteristics or states of objects in the local environment of the vehicle.

Unter einer „Vorgabe für die automatisierte Fahrzeugführung des Fahrzeugs“ im Sinne der Erfindung ist eine aus der Benutzereingabe und zusätzlich in Abhängigkeit von den Umfeldinformationen abgeleitete Randbedingung für den genannten Lösungsraum zu verstehen. Dies kann insbesondere einer konkreten, einer bestimmten ausgeführten Benutzerhandlung bezüglich der Mensch-Maschine-Schnittstelle zugeordneten Anweisung entsprechen, oder, etwa im Falle einer Sprachsteuerung, der erkannten sprachlichen Anweisung des Benutzers bzw. Insassen. Die Benutzereingabe kann sich dabei insbesondere auf einen oder mehrere mittels der Umfeldinformationen charakterisierte Aspekte des Fahrzeugumfelds beziehen, wie etwa auf ein dem Fahrzeug vorausfahrendes anderes Fahrzeug. Die Vorgabe könnte beispielsweise, jedenfalls sinngemäß, lauten: „Folge dem unmittelbar vorausfahrenden Fahrzeug“, oder im Falle einer mehrspurigen Straße (was aus den Umfeldinformationen erkannt wird): „Reduziere (oder Minimiere) die Häufigkeit der Spurwechsel“.A "specification for the automated vehicle guidance of the vehicle" in the sense of the invention means a boundary condition derived from the user input and additionally in dependence on the surroundings information for the named solution space. In particular, this may correspond to a specific instruction associated with a particular executed user action with respect to the man-machine interface, or, as in the case of voice control, the recognized linguistic instruction of the user or occupants. The user input may relate in particular to one or more aspects of the vehicle environment characterized by the environment information, such as a vehicle driving ahead of the vehicle. The default could be, for example, in any case, "follow the immediately preceding vehicle," or in the case of a multi-lane road (which is recognized from the environment information): "reduce (or minimize) the frequency of lane changes".

Unter einer „Fahrstrategie“ im Sinne der Erfindung ist eine Lösung aus dem mittels der Vorgabe definierten Lösungsraum mit konkreten Zwischenzielen oder Maßnahmen zur Fahrzeugsteuerung zu verstehen, die somit im Einklang mit der Vorgabe steht. Die Fahrstrategie kann insbesondere langfristig sein und sich beispielsweise auf eine gesamte Fahrt beziehen oder auch kurzfristig und sich beispielsweise nur auf einen bestimmten Zeitraum, Streckenabschnitt oder eine bestimmte aktuelle Fahrsituation beziehen. Im oben genannten Beispiel bezüglich der Häufigkeit der Spurwechsel könnte eine Fahrstrategie beispielsweise sinngemäß darin bestehen, ein gegenwärtig rechts vom Fahrzeug befindliches weiteres Fahrzeug noch zu überholen und sodann in eine vor diesem erkannte Lücke einen Spurwechsel vorzunehmen, um dann auf dieser Fahrspur so lange als möglich zu verbleiben, ohne noch weitere Überholmanöver oder mehr Spurwechsel vorzunehmen als durch eine ausgewählte als „niedrig“ bzw. im historischen Vergleich mit der schon zurückgelegten Fahrstrecke niedrigeren festgelegten Schwelle vorgegeben. Diese Elemente der Fahrstrategie können insbesondere als „Zwischenziele“ verstanden werden, die in ihrem Zusammenspiel mit der übergeordneten, durch die Vorgabe festgelegten Zielsetzung (Lösungsraumdefinition) im Einklang stehen, aber nicht zwingend schon durch diese unmittelbar festgelegt sind, sondern erst daraus abgeleitet werden müssen. Dies kann insbesondere mittels Lösung zumindest eines entsprechenden mathematischen Optimierungsproblems oder auch schlicht durch rechnergestützte Versuch-und-Irrtum-(engl. Trial and Error)-Auswertung verschiedener Lösungsansätze erfolgen.A "driving strategy" in the sense of the invention means a solution from the solution space defined by means of the specification with concrete intermediate goals or measures for vehicle control, which is thus consistent with the specification. In particular, the driving strategy can be long-term and relate, for example, to an entire trip or even at short notice and, for example, relate only to a specific period, route section or a specific current driving situation. In the example given above with regard to the frequency of the lane changes, a driving strategy could, for example, be analogous to overtaking a further vehicle currently located to the right of the vehicle and then making a lane change in a gap identified before it, and then as long as possible on this lane remain without making any further overtaking maneuvers or more lane changes than specified by a selected threshold set to be "low" or in historical comparison with the already traveled distance. These elements of the driving strategy can, in particular, be understood as "intermediate goals" which, in their interaction with the overriding objective definition (solution space definition), are not necessarily directly determined by them, but must be derived from them. This can be done in particular by means of a solution of at least one corresponding mathematical optimization problem or simply by computer-aided trial and error evaluation of different approaches.

Mittels des Verfahrens wird es somit einem Insassen des Fahrzeugs ermöglicht, auf eine hoch- oder noch höher automatisierten Fahrzeugführung des Fahrzeugs gezielt Einfluss zu nehmen, ohne diese jedoch unterbrechen oder selbst die Fahrzeugführung übernehmen zu müssen, um eine gewünschte zukünftige Verhaltensweise des Fahrzeugs, insbesondere seines Fahrverhaltens, zu bewirken. Dies eröffnet gegenüber bisherigen Systemen den Weg für eine kooperative Fahrzeugführung, bei der die automatisierte Fahrzeugführung mit dem Fahrer oder anderen Insassen zusammenwirkt, ohne dass zu einem gegebenen Zeitpunkt oder in einer bestimmten Fahrsituation entweder nur die Automatik oder aber nur der Fahrer die Fahrzeugführung bestimmt bzw. übernimmt. Somit kann die automatisierte Fahrzeugführung auf Wünsche des Fahrers oder anderer Fahrzeuginsassen eingehen und entsprechend konfiguriert werden, während gleichzeitig ihre Vorteile, insbesondere die mit ihr einhergehende Bequemlichkeit, Sicherheit und/oder Handlungsfreiheit der Insassen erhalten bleiben können.By means of the method, it is thus possible for an occupant of the vehicle to have a specific influence on a highly or even more automated vehicle guidance of the vehicle without, however, interrupting or even having to undertake the vehicle guidance in order to achieve a desired future behavior of the vehicle, in particular his Driving behavior, to effect. This opens the way for a cooperative vehicle management, in which the automated vehicle management interacts with the driver or other occupants, without the fact that at a given time or in a certain driving situation either only the automatic or only the driver determines the vehicle guidance or takes over. Thus, the automated vehicle guidance can respond to wishes of the driver or other vehicle occupants and be configured accordingly, while at the same time their benefits, in particular the concomitant comfort, safety and / or freedom of action of the occupants can be maintained.

Nachfolgend werden bevorzugte Ausführungsformen des Verfahrens beschrieben, die jeweils, soweit dies nicht ausdrücklich ausgeschlossen wird, beliebig miteinander sowie mit den im Weiteren beschriebenen anderen Aspekten der Erfindung kombiniert werden können. In the following, preferred embodiments of the method will be described which, unless expressly excluded, may be combined as desired with one another as well as with the other aspects of the invention described below.

Gemäß einiger Ausführungsformen weist das Ableiten der Vorgabe auf (i) Erkennen einer in der Benutzereingabe enthaltenen Fahranweisung, die sich auf das Fahrzeug selbst und/oder zumindest ein fahrzeugexternes Bezugsobjekt bezieht; (ii) Überprüfen der Umfeldinformationen daraufhin, ob sich daraus ein dem Bezugsobjekt entsprechendes Objekt im lokalen Umfeld des Fahrzeugs identifizieren lässt; und (iii)
falls dies der Fall ist, Ableiten der Vorgabe so, dass sie die Fahranweisung in Relation zu dem identifizierten Objekt definiert. Auf diese Weise kann sich die im Rahmen der automatisierten Fahrzeugführung umzusetzende Fahranweisung bzw. die entsprechende Vorgabe insbesondere auch unmittelbar auf ein fahrzeugexternes Objekt beziehen. So nimmt etwa im vorausgehend genannten Beispiel die Vorgabe „Folge dem unmittelbar vorausfahrenden Fahrzeug“ auf dieses vorausfahrende Fahrzeug als externes Objekt Bezug und definiert eine einzuhaltende Randbedingung für die abzuleitende Fahrstrategie in Relation bzw. Abhängigkeit davon. Auf diese Weise können gegenüber bekannten Systemen der Raum der Möglichkeiten zur Einflussnahme auf die Fahrzeugführung erweitert und die Definition von Vorgaben über entsprechende Benutzereingaben aufgrund der so geschaffenen Möglichkeit zur Bezugnahme auf Objekte im Fahrzeugumfeld vereinfacht werden.
According to some embodiments, deriving the default comprises (i) detecting a driving instruction included in the user input relating to the vehicle itself and / or at least one off-vehicle reference object; (ii) checking the environment information as to whether an object corresponding to the reference object can be identified in the local environment of the vehicle; and (iii)
if so, deriving the default to define the driving instruction in relation to the identified object. In this way, the driving instruction to be implemented as part of the automated vehicle guidance or the corresponding specification can in particular also relate directly to an object external of the vehicle. For example, in the previously mentioned example, the specification "sequence of the immediately preceding vehicle" refers to this preceding vehicle as an external object and defines a boundary condition to be met for the driving strategy to be derived in relation or dependence thereon. In this way, in comparison to known systems, the scope of possibilities for influencing the vehicle guidance can be expanded and the definition of specifications about corresponding user inputs can be simplified on the basis of the thus created possibility of reference to objects in the vehicle environment.

Gemäß einiger Ausführungsformen ist die Benutzereingabe frei wählbar und wird bei der Auswertung mittels eines KI-basierten Erkennungsverfahrens zu ihrer inhaltlichen Erkennung ausgewertet. Somit wird es möglich, als Benutzereingabe nicht nur eine Auswahl aus einem vordefinierten Katalog von möglichen Benutzereingaben vorzunehmen, sondern stattdessen ohne eine derartige Einschränkung frei wählbare Benutzereingaben vorzunehmen, die mittels des KI-basierten Erkennungsverfahrens analysiert werden, um ihren Inhalt zu erschließen. So kann insbesondere im Falle einer sprachbasierten Mensch-Maschine-Schnittstelle durch den Benutzer (Fahrer bzw. Insasse des Fahrzeugs) eine Eingabe in freier Rede erfolgen, ohne dass zuvor gelernte katalogisierte Phrasen oder Begriffe verwendet werden müssen. KI-basierte Erkennungsverfahren zur Spracherkennung sind grundsätzlich insbesondere im Rahmen von Spracherkennungslösungen für digitale Assistenten auf Smartphones und Computern (vgl. z.B. „Siri“ von Apple, Inc; „Alexa“ von Amazon, Inc. usw.) bekannt. Die aus der Spracheingabe abgeleitete Vorgabe kann dagegen auch aus einem vorbestimmten endlichen Katalog von Vorgabemöglichkeiten gewählt sein, der jedoch optional insbesondere über entsprechende Lernfunktionen oder Software-Updates veränderbar, insbesondere erweiterbar sein kann.According to some embodiments, the user input is freely selectable and is evaluated in the evaluation by means of a KI-based recognition method for their content recognition. Thus, it becomes possible to provide as user input not only a selection from a predefined catalog of possible user inputs, but instead to make arbitrary user inputs without such a restriction, which are analyzed by the KI-based recognition method to reveal their contents. So can in the case of a speech-based human-machine interface by the user (driver or occupant of the vehicle) made an input in free speech, without previously learned cataloged phrases or terms must be used. AI-based recognition methods for speech recognition are basically known in particular in the context of speech recognition solutions for digital assistants on smartphones and computers (cf., for example, "Siri" from Apple, Inc, "Alexa" from Amazon, Inc., etc.). On the other hand, the specification derived from the speech input can also be selected from a predetermined finite catalog of default options, which, however, can optionally be modifiable, in particular expandable, in particular via corresponding learning functions or software updates.

Gemäß einiger Varianten dieser Ausführungsformen weist das KI-Verfahren ein Lernverfahren auf, mittels dessen zumindest eine an der Mensch-Maschine-Schnittstelle erfasste weitere Benutzereingabe ausgewertet und zur Adaption eines zum Ableiten der Vorgabe eingesetzten Prozesses herangezogen wird. Dies kann insbesondere im Sinne des sog. „be- bzw. verstärkenden Lernens“ (engl. „Reinforcement Learning“) erfolgen. Die genannte weitere Benutzereingabe kann insbesondere eine Antwort auf eine vorausgegangene Rückfrage des Systems darstellen, wobei das System bevorzugt dann eine derartige Rückfrage stellt, wenn sich bei der Auswertung einer oder mehrerer vorausgegangener Benutzereingaben eine Mehrdeutigkeit oder Unklarheit ergibt. Somit wird dem System eine Lernfähigkeit verliehen, die insbesondere dazu eingesetzt werden kann, die Zuverlässigkeit und Qualität der Reaktion des Systems auf Benutzereingaben fortlaufend zu optimieren.According to some variants of these embodiments, the AI method has a learning method, by means of which at least one further user input detected at the human-machine interface is evaluated and used to adapt a process used to derive the specification. This can be done in particular in the sense of so-called "reinforcing learning". The said further user input can in particular represent a response to a previous query of the system, wherein the system preferably then makes such a query, if there is an ambiguity or ambiguity in the evaluation of one or more previous user inputs. Thus, the system is given a learning capability that can be used, in particular, to continuously optimize the reliability and quality of the response of the system to user input.

Gemäß einiger Ausführungsformen erfolgt die Benutzereingabe zumindest teilweise als akustische Eingabe, insbesondere als Spracheingabe, und sie wird als solche erfasst. Auf diese Weise ist eine berührungslose und einfache Vornahme von Benutzereingaben an der Mensch-Maschine-Schnittstelle möglich. Insbesondere wird es dadurch auch anderen Insassen des Fahrzeugs als dem Fahrer auf einfache Weise ermöglicht, Benutzereingaben vorzunehmen, da deren Vornahme nicht oder nicht in ähnlich hohem Maße von der Position des Benutzers im Fahrzeug abhängt, wie dies etwa bei einer Beschränkung auf berührungsbasierte Mensch-Maschine-Schnittstellen, wie z.B. Tasten oder Touchscreens, der Fall wäre.According to some embodiments, the user input is at least partially as an acoustic input, in particular as a voice input, and it is detected as such. In this way, a non-contact and simple operation of user input at the man-machine interface is possible. In particular, this also makes it possible for other occupants of the vehicle as the driver in a simple way to make user inputs, since their performance does not or not to a similar extent depends on the position of the user in the vehicle, such as in a limited to touch-based human machine Interfaces, such as Buttons or touchscreens, that would be the case.

Gemäß einiger Ausführungsformen erfolgt die Benutzereingabe zumindest teilweise mittels einer oder mehrerer von einem Benutzer ausgeführten Gesten, insbesondere Hand-, Arm- oder Kopfgesten, und wird als solche erfasst. Die Vornahme von Benutzereingaben mittels Gesten kann insbesondere zusätzlich zu anderen Eingabemöglichkeiten, etwa einer sprachbasierten Benutzereingabe, oder aber auch als alleinige Benutzereingabe erfolgen. Auf diese Weise lassen sich wiederum berührungslose Eingaben vornehmen, die ebenfalls nicht zwingend von der Position des Benutzers im Fahrzeug abhängen, und die insbesondere lautlos ausgeführt werden können. Beispielsweise könnte ein Benutzer mittels einer Zeigegeste ein Objekt im Fahrzeug identifizieren, auf das sich die Benutzereingabe bezieht, wobei die sich auf das Objekt beziehende gewünschte Verhaltensweise des Fahrzeugs zugleich mittels derselben oder einer weiteren Geste oder einer weiteren, beispielsweise sprachgesteuerten, Benutzereingabe an der bzw. einer entsprechenden Mensch-Maschine-Schnittstelle vorgeben bzw. eingeben lässt.According to some embodiments, the user input is at least partially performed by one or more gestures performed by a user, in particular hand, arm or head gestures, and is detected as such. The input of user input by means of gestures can be carried out in particular in addition to other input options, such as voice-based user input, or even as sole user input. In this way, in turn can make contactless inputs, which also do not necessarily depend on the position of the user in the vehicle, and in particular can be performed silently. For example, a user could use a pointing gesture to identify an object in the vehicle to which the user input relates, with the desired behavior of the vehicle relating to the object simultaneously using the same or another gesture or another, eg voice-controlled, user input on the or can specify or enter a corresponding man-machine interface.

Gemäß einiger Ausführungsformen betrifft die Vorgabe die Beeinflussung einer Fahrstrategie für die automatisierte Fahrzeugführung hinsichtlich eines oder mehrerer der folgenden Aspekte oder einer Kombination von zumindest zwei davon: (i) eine über sein aktuelles lokales Umfeld hinausreichende Fahrzeugführung und/oder Routenführung des Fahrzeugs; (ii) ein oder mehrere lokale Fahrmanöver; (iii) eine oder mehrere fahrdynamische Eigenschaften des Fahrzeugs.According to some embodiments, the specification relates to influencing a driving strategy for the automated vehicle guidance with respect to one or more of the following aspects or a combination of at least two thereof: (i) a vehicle guidance and / or route guidance of the vehicle beyond its current local environment; (ii) one or more local driving maneuvers; (iii) one or more vehicle dynamic characteristics of the vehicle.

Ein nicht-limitierendes Beispiel für den Fall (i) ist die bereits vorausgehend angesprochene Vorgabe, einem vorausfahrenden Fahrzeug zu folgen. In diesem Fall kann die Vorgabe zwar unter Bezugnahme auf das unmittelbare Fahrzeugumfeld - nämlich hier das im Umfeld des Fahrzeugs befindliche, vorausfahrende Fahrzeug als Objekt - definiert werden, jedoch betrifft diese Vorgabe die Fahrzeugführung über einen längeren Zeit- bzw. Streckenabschnitt hinweg, während dem das Fahrzeug sein zum Zeitpunkt der Benutzereingabe vorliegendes Umfeld auch verlassen kann und oftmals wird. Ein nicht-limitierendes Beispiel für den Fall (ii) ist etwa eine Vorgabe, gemäß der das Fahrzeug einen Fahrspurwechsel in eine bestimmte Richtung vornehmen soll oder bei nächster (erlaubter) Gelegenheit an den seitlichen Straßenrandfahren soll, um anzuhalten. Ein nicht-limitierendes Beispiel für den Fall (iii) ist etwa eine Vorgabe, gemäß welcher der Abstand zu unmittelbar vorausfahrenden Fahrzeugen erhöht oder verkürzt werden soll, mehr/weniger Spurwechsel vorgenommen werden sollen oder insgesamt schneller/langsamer gefahren werden soll. Insgesamt wird so ein breiter Fächer verschiedenster Möglichkeiten zur Definition der Vorgabe und somit zur Einflussnahme auf die automatisierte Fahrzeugführung bereitgestellt.A non-limiting example of the case (i) is the previously mentioned requirement to follow a preceding vehicle. In this case, although the default can be defined with reference to the immediate vehicle environment - namely, the vehicle ahead in the vicinity of the vehicle as an object - but this specification affects the vehicle over a longer period of time, during which the Vehicle can also leave at the time of user input present environment and often. A non-limiting example of the case (ii) is, for example, a specification according to which the vehicle is to make a lane change in a certain direction or at the next (allowable) opportunity to the side roadside drive to stop. A non-limiting example for case (iii) is a specification according to which the distance to immediately preceding vehicles is to be increased or shortened, more / less lane changes are to be made or an overall faster / slower driving. Overall, a broad range of options for defining the default and thus influencing automated vehicle guidance is thus provided.

Gemäß einiger Ausführungsformen erfolgt die Festlegung der Fahrstrategie dynamisch, wozu neben der Vorgabe zusätzlich eine oder mehrere der folgenden Größen oder eine Kombination daraus als Eingangsgröße bzw. Eingangsgrößen für die Festlegung der Fahrstrategie verwendet werden: (i) ein oder mehrere Parameter, die einen aktuellen Fahrzeugzustand kennzeichnen; (ii) Verkehrsleit- oder Verkehrsüberwachungsinformationen. Dabei werden die Eingangsgrößen bzw. deren Kombination jeweils sensorisch erfasst und/oder mittels einer Kommunikationsvorrichtung empfangen. Auf diese Weise können weitere Randbedingungen zur Definition des Lösungsraums, aus dem eine Fahrstrategie zu bestimmen ist, berücksichtigt werden. Die Berücksichtigung des aktuellen Fahrzeugzustands kann insbesondere eingesetzt werden, möglicherweise aufgrund dieses Fahrzeugzustands kritische Fahrzeugführungen bzw. damit im Zusammenhang stehende Fahrmanöver zu vermeiden, um die Sicherheit des Fahrzeugs und seiner Insassen nicht zu beeinträchtigen. Ist der Motor etwa nach einer langen Autobahnfahrt so erhitzt, dass sich seine Temperatur am Rande eines erlaubten Betriebsbereichs befindet, könnte der Lösungsraum, und somit die resultierende Fahrstrategie so definiert werden, dass dabei der Motor in einem niedrigeren Leistungsbereich betrieben wird, bis sich eine substanzielle Absenkung seiner Betriebstemperatur feststellen lässt. Auf ähnliche Weise können auch Verkehrsleitinformationen, etwa Staumeldungen, berücksichtigt werden, um damit beispielsweise im Konflikt stehende Spurwechsel oder andere Fahrstrategien zu vermeiden oder jedenfalls zeitlich zu verschieben oder zu verzögern.According to some embodiments, the determination of the driving strategy is carried out dynamically, to which besides the specification additionally one or more of the following variables or a combination thereof as an input variable or input variables for the Determining the driving strategy are used: (i) one or more parameters identifying a current vehicle condition; (ii) traffic control or traffic monitoring information. In this case, the input variables or their combination are respectively sensory detected and / or received by means of a communication device. In this way, additional boundary conditions for defining the solution space from which a driving strategy is to be determined can be taken into account. The consideration of the current vehicle state can be used in particular, possibly due to this vehicle condition to avoid critical vehicle guidance or related driving maneuvers, so as not to affect the safety of the vehicle and its occupants. For example, if the engine is so heated after a long highway ride that its temperature is at the edge of a permitted operating range, the solution space, and thus the resulting driving strategy, could be defined as operating the engine in a lower power range until a substantial increase in fuel efficiency Lowering its operating temperature can be determined. In a similar manner, traffic control information, such as congestion reports, can be taken into account in order to avoid, for example, time-shifting or delaying, for example, conflicting lane changes or other driving strategies.

Gemäß einiger Ausführungsformen wird im Falle, dass beim Auswerten der Benutzereingabe in Abhängigkeit von den Umfeldinformationen kein oder kein eindeutiges Ergebnis als Vorgabe resultiert oder die aus einer abgeleiteten Vorgabe resultierende Fahrstrategie im Rahmen der automatisierten Fahrzeugführung zumindest temporär nicht umsetzbar ist, über die Mensch-Maschine-Schnittstelle eine diesbezügliche Mitteilung ausgegeben und/oder eine erneute Benutzereingabe angefordert. Auf diese Weise werden der Fahrer bzw. Insassen über die mangelnde Umsetzbarkeit der vorausgegangenen Benutzereingabe bzw. der dieser entsprechenden Vorgabe informiert und optional eine Möglichkeit zur Vornahme einer darauffolgenden erneuten Benutzereingabe bereitgestellt, die es ermöglicht, die Vorgabe entsprechend zu ersetzen bzw. anzupassen.According to some embodiments, in case of evaluating the user input depending on the surroundings information, no or no clear result results as default or the driving strategy resulting from a derived specification is at least temporarily not feasible within the automated vehicle guidance, via the man-machine interface. Interface issued a message in this regard and / or requested a new user input. In this way, the driver or inmates are informed about the lack of practicability of the previous user input or of the corresponding specification and optional provision for a subsequent re-user input, which makes it possible to replace the specification accordingly.

Ein zweiter Aspekt der Erfindung betrifft eine Vorrichtung zum Konfigurieren einer zumindest hochautomatisierten Fahrzeugführung eines Fahrzeugs, insbesondere eines Kraftfahrzeugs. Dabei ist die Vorrichtung eingerichtet, das Verfahren gemäß dem ersten Aspekt der Erfindung, bevorzugt gemäß einer seiner hierin beschriebenen Ausführungsformen, auszuführen.A second aspect of the invention relates to a device for configuring an at least highly automated vehicle guidance of a vehicle, in particular of a motor vehicle. In this case, the device is set up to carry out the method according to the first aspect of the invention, preferably according to one of its embodiments described herein.

Ein dritter Aspekt der Erfindung betrifft ein Fahrzeug, insbesondere ein Kraftfahrzeug, mit einer Vorrichtung gemäß dem zweiten Aspekt der Erfindung.A third aspect of the invention relates to a vehicle, in particular a motor vehicle, with a device according to the second aspect of the invention.

Ein vierter Aspekt der Erfindung betrifft ein Computerprogramm, welches Anweisungen enthält, die bei ihrer Ausführung auf einem oder mehreren Prozessoren einer Vorrichtung gemäß dem zweiten Aspekt diese veranlassen, das Verfahren gemäß dem ersten Aspekt, insbesondere gemäß einer seiner hierin beschriebenen Ausführungsformen, auszuführen.A fourth aspect of the invention relates to a computer program which contains instructions which, when executed on one or more processors of a device according to the second aspect, cause them to carry out the method according to the first aspect, in particular according to one of its embodiments described herein.

Das vorausgehend jeweils für das Verfahren gemäß dem ersten Aspekt und seine Ausführungsformen Gesagte trifft somit gleichermaßen auf die Vorrichtung, das Fahrzeug sowie das Computerprogramm gemäß den weiteren Aspekten der Erfindung zu.The above, in each case for the method according to the first aspect and its embodiments thus applies equally to the device, the vehicle and the computer program according to the further aspects of the invention.

Weitere Vorteile, Merkmale und Anwendungsmöglichkeiten der vorliegenden Erfindung ergeben sich aus der nachfolgenden detaillierten Beschreibung im Zusammenhang mit den Figuren, in denen durchgängig dieselben Bezugszeichen für dieselben oder einander entsprechende Elemente der Erfindung verwendet werden.Further advantages, features and applications of the present invention will become apparent from the following detailed description in conjunction with the figures, in which the same reference numerals for the same or corresponding elements of the invention are used throughout.

Dabei zeigt:

  • 1 ein Fahrzeug gemäß einer bevorzugten Ausführungsform der Erfindung;
  • 2 ein Flussdiagramm zur Veranschaulichung einer bevorzugten Ausführungsform des erfindungsgemäßen Verfahrens; und
  • 3 schematisch ein Fahrzeug, welches insbesondere das Fahrzeug aus 1, sein kann, einschließlich eines beispielhaften Fahrzeugumfelds, wobei das Fahrzeug mit einer Vorrichtung zur Ausführung des Verfahrens gemäß einer bevorzugten Ausführungsform der Erfindung ausgestattet ist;
Showing:
  • 1 a vehicle according to a preferred embodiment of the invention;
  • 2 a flow diagram illustrating a preferred embodiment of the method according to the invention; and
  • 3 schematically a vehicle, which in particular the vehicle 1 , may be, including an exemplary vehicle environment, the vehicle being equipped with an apparatus for carrying out the method according to a preferred embodiment of the invention;

Zunächst wird auf 1 Bezug genommen. Das darin schematisch dargestellte Fahrzeug 1 gemäß einer Ausführungsform der Erfindung weist zu seiner dynamischen Fahrzeugführung zum einen Fahrzeugkomponenten 2 zu seiner Längssteuerung, insbesondere einen Antriebsstrang sowie ein automatisches Bremssystem, und zum anderen Fahrzeugkomponenten 3 zu seiner Quersteuerung, insbesondere eine Lenkung, auf. Des Weiteren weist das Fahrzeug 1 eine Steuerungsvorrichtung 4 zur Fahrzeugführung auf, die eine zumindest einen Prozessor aufweisende Prozessoreinheit 4a sowie einen damit signalverbundenen zugehörigen Speicher 4b enthält. In dem Speicher 4b sind ein oder mehrere Computerprogramme abgelegt, die konfiguriert sind, auf der Prozessoreinheit 4a abzulaufen und dabei die Steuerungsvorrichtung zu veranlassen, ein erfindungsgemäßes Verfahren, beispielsweise gemäß der in 2 illustrierten Ausführungsform, auszuführen.First, it will open 1 Referenced. The vehicle schematically illustrated therein 1 According to one embodiment of the invention, to its dynamic vehicle guidance on the one hand vehicle components 2 to its longitudinal control, in particular a drive train and an automatic braking system, and on the other vehicle components 3 to its transverse control, in particular a steering on. Furthermore, the vehicle points 1 a control device 4 for vehicle guidance, which has a processor unit having at least one processor 4a as well as a corresponding memory associated signal 4b contains. In the store 4b One or more computer programs that are configured are stored on the processor unit 4a to run and thereby cause the control device, a inventive method, for example according to the in 2 illustrated embodiment.

Des Weiteren weist das Fahrzeug 1 eine Mensch-Maschine-Schnittstelle 5 auf, die mit der Steuerungsvorrichtung 4 signalverbunden ist und eine Gestenerkennungseinheit 5a, eine Spracherkennungseinheit 5b sowie eine Ausgabeeinheit 5c aufweist. Die Gestenerkennungseinheit 5a kann insbesondere eine oder mehrere Kameras aufweisen, die eingerichtet und so in dem Fahrzeug 1 angeordnet sind, dass sie von einem Fahrer oder anderen Insassen des Fahrzeugs ausgeführte Gesten, insbesondere Handgesten, sensorisch erfassen können und entsprechende, die erkannten Gesten charakterisierenden Signale in Form von Bilddaten bereitstellen können. Die Gestenerkennungseinheit 5a kann zur Erhöhung der Erkennungsgenauigkeit und -zuverlässigkeit insbesondere mittels eines einmaligen Einlernprozesses für jede Geste vorab durch den Fahrer trainiert bzw. initialisiert werden. Die Ausgabeeinheit 5c kann insbesondere akustische und/oder visuelle Mitteilungen oder Signalisierungen ausgeben und insbesondere mittels einer, bevorzugt berührungsempfindlichen, Anzeigevorrichtung (Touch-Screen) einschließlich Audiofunktion implementiert sein.Furthermore, the vehicle points 1 a man-machine interface 5 on that with the control device 4 is signal-connected and a gesture recognition unit 5a , a speech recognition unit 5b and an output unit 5c having. The gesture recognition unit 5a In particular, it may have one or more cameras that are set up and so in the vehicle 1 are arranged so that they can detect sensory gestures performed by a driver or other occupants of the vehicle, in particular hand gestures, and can provide corresponding signals characterizing recognized gestures in the form of image data. The gesture recognition unit 5a can be trained or initialized by the driver in advance by increasing the recognition accuracy and reliability in particular by means of a one-time learning process for each gesture. The output unit 5c may in particular output acoustic and / or visual messages or signaling and in particular be implemented by means of a, preferably touch-sensitive, display device (touch screen) including audio function.

Die Spracherkennungseinheit 5b weist ein oder mehrere Mikrofone sowie entsprechende Signalwandler auf, um die mittels der Mikrofone aufgezeichneten akustischen Signale, insbesondere - soweit vorhanden - sprachbasierte Benutzereingaben eines Fahrers oder anderer Insassen des Fahrzeugs 1, in Sprachdaten umzuwandeln. Die Verarbeitung der Bilddaten und/oder der Sprachdaten zum Zwecke des Ableitens einer Vorgabe für die automatisierte Fahrzeugführung des Fahrzeugs 1 kann insbesondere je nach Ausgestaltung entweder bereits in der Gestenerkennungseinheit 5a bzw. der Spracherkennungseinheit 5b oder aber in der Steuerungsvorrichtung 4 erfolgen.The speech recognition unit 5b has one or more microphones and corresponding signal transducers to the recorded by means of the microphones acoustic signals, in particular - if available - voice-based user input of a driver or other occupants of the vehicle 1 to convert to voice data. The processing of the image data and / or the voice data for the purpose of deriving a specification for the automated vehicle guidance of the vehicle 1 In particular, depending on the embodiment, either already in the gesture recognition unit 5a or the speech recognition unit 5b or in the control device 4 respectively.

Des Weiteren weist das Fahrzeug 1 eine zumindest einen Sensor, bevorzugt eine Mehrzahl verschiedener Sensoren, aufweisende Fahrzeugsensorik 6 auf, die eingerichtet ist, einen oder mehrere Parameter zur Beschreibung eines aktuellen Fahrzeugzustandes und des Fahrzeugumfelds sensorisch zu erfassen und in Form entsprechender Sensordaten über eine entsprechende Signalverbindung der Steuerungsvorrichtung 4 zur Verfügung zu stellen. Darüber hinaus weist das Fahrzeug 1 eine Kommunikationsvorrichtung 7 mit einer daran gekoppelten Funkantenne 8 auf, mittels derer das Fahrzeug drahtlos Nachrichten oder andere Informationen von einer fahrzeugexternen Informationsquelle, etwa einem Verkehrsüberwachungssystem oder dem Internet, empfangen und optional auch an diese senden kann.Furthermore, the vehicle points 1 a vehicle sensor system having at least one sensor, preferably a plurality of different sensors 6 which is set up to sense one or more parameters for describing a current vehicle state and the vehicle environment and, in the form of corresponding sensor data, via a corresponding signal connection of the control device 4 to provide. In addition, the vehicle points 1 a communication device 7 with a radio antenna coupled to it 8th by means of which the vehicle can wirelessly receive messages and other information from an external information source, such as a traffic monitoring system or the Internet, and optionally also to send to them.

Die Steuerungsvorrichtung 4 ist durch das in seinem Speicher 4b gespeicherte zumindest eine Computerprogram konfiguriert, auf Basis einer an der Mensch-Maschine-Schnittstelle 5 als Sprach- und/oder Gesteneingabe getätigten Benutzereingabe sowie von mittels der Fahrzeugsensorik 6 und/oder über die Kommunikationsvorrichtung 7 empfangenen Fahrzeugzustandsinformationen und Umfeldinformationen, welche das lokale Umfeld des Fahrzeugs 1 charakterisieren, eine Vorgabe für die automatisierte Fahrzeugführung des Fahrzeugs 1 abzuleiten, eine im Einklang damit stehende Fahrstrategie festzulegen, und Steuersignale zur Ansteuerung der Fahrzeugkomponenten 2 zur Längssteuerung sowie der Fahrzeugkomponenten 3 zur Quersteuerung des Fahrzeugs 1 zu erzeugen und diese Steuersignale zur Durchführung einer automatisierten Fahrzeugführung nach Maßgabe der festgelegten Fahrstrategie an die Fahrzeugkomponenten 2 und 3 auszugeben.The control device 4 is through that in his store 4b stored at least one computer program configured based on a man-machine interface 5 as a voice and / or gesture input made user input and by means of the vehicle sensor 6 and / or via the communication device 7 received vehicle state information and environment information, which is the local environment of the vehicle 1 characterize a specification for the automated vehicle guidance of the vehicle 1 deduce a driving strategy consistent therewith, and control signals to drive the vehicle components 2 for longitudinal control and the vehicle components 3 for lateral control of the vehicle 1 to generate and these control signals for performing an automated vehicle guidance in accordance with the established driving strategy to the vehicle components 2 and 3 issue.

Zur Erläuterung des mittels des Computerprogramms implementierten Verfahrens wird nun auf 2 Bezug genommen. Bei dem Verfahren wird zunächst in einem Schritt S1, wie schon vorausgehend unter Bezugnahme auf 1 beschrieben, an der Mensch-Maschine-Schnittstelle 5 eine Benutzereingabe zur Konfiguration der automatisierten Fahrzeugführung erfasst. Der aktivierte Automatisierungsgrad der Fahrzeugführung entspricht dabei dem hochautomatisierten Fahren oder gar einen noch höheren Automatisierungsgrad, wie etwa dem vollautomatisierten Fahren.To explain the implemented by means of the computer program method is now on 2 Referenced. In the process, first in one step S1 as previously stated with reference to 1 described at the man-machine interface 5 recorded a user input for the configuration of the automated vehicle guidance. The activated degree of automation of the vehicle guidance corresponds to highly automated driving or even an even higher degree of automation, such as fully automated driving.

In einem weiteren Schritt S2, der auch simultan oder vor dem Schritt S1 erfolgen kann, werden mittels der Fahrzeugsensorik 6 das lokale Umfeld des Fahrzeugs charakterisierende Umfeldinformationen erfasst und/oder mittels der Kommunikationsvorrichtung 7 empfangene und ebenfalls das lokale Fahrzeugumfeld charakterisierende Informationen von einer fahrzeugexternen Datenquelle, wie etwa einem Verkehrsleit- oder Überwachungssystem, empfangen und der Steuerungsvorrichtung 4 zur Verfügung gestellt.In a further step S2 who also simultaneously or before the step S1 can be done by means of vehicle sensors 6 detects the surrounding environment of the vehicle characterizing environment information and / or by means of the communication device 7 received and also the local vehicle environment characterizing information from an off-vehicle data source, such as a traffic control or monitoring system receive and the control device 4 made available.

Dort wird in einem Schritt S3 die Benutzereingabe in Abhängigkeit von den erfassten Umfeldinformationen mittels eines auf künstlicher Intelligenz (KI) beruhenden Verfahrens ausgewertet, um eine mittels der Benutzereingabe ausgedrückte Anweisung als eindeutige Vorgabe zur Konfiguration der automatisierten Fahrzeugführung abzuleiten. Die Verwendung eines auf künstlicher Intelligenz beruhenden Verfahrens kann insbesondere vorteilhaft dazu eingesetzt werden, freie Spracheingaben jenseits vorbestimmter katalogisierter Sprachbefehle zur Ableitung einer entsprechenden Vorgabe verarbeiten zu können.There will be in one step S3 the user input is evaluated in dependence on the detected environment information by means of a method based on artificial intelligence (AI) in order to derive an instruction expressed by means of the user input as an unambiguous specification for the configuration of the automated vehicle guidance. The use of a method based on artificial intelligence can in particular be advantageously used to be able to process free speech inputs beyond predetermined cataloged voice commands for deriving a corresponding specification.

Kann eine solche eindeutige Vorgabe erfolgreich abgeleitet werden (Schritt S4 - ja), so wird in einem weiteren Schritt S5 eine auf das lokale Fahrzeugumfeld bezogene Fahrstrategie zur automatisierten Fahrzeugführung bestimmt, insbesondere berechnet, die im Einklang mit dieser Vorgabe steht. In anderen Worten, es werden dabei ein oder mehrere planmäßig auszuführende Fahrmanöver definiert, die in ihrer Kombination aus einem mögliche Lösungen zur Erfüllung der Vorgabe enthaltenden Lösungsraum gewählt sind. Dessen Randbedingungen können außer durch die im Schritt S3 abgeleitete Vorgabe gegebenenfalls noch durch weitere einschränkende Kriterien, insbesondere auf Basis des erfassten aktuellen Fahrzeugzustands und/oder erlaubter Betriebsbereiche des Fahrzeugs 1 bestimmt sein. Auch in diesem Schritt können insbesondere KI-Verfahren zum Einsatz kommen. Can such a unique specification be derived successfully (step S4 - yes), so in a further step S5 a vehicle strategy related to the local vehicle environment for automated vehicle guidance determined, in particular calculated, which is in accordance with this requirement. In other words, it defines one or more planned maneuvers to be executed, which are selected in their combination of a possible solutions to fulfill the specification containing solution space. Its boundary conditions can except by in the step S3 optionally derived by further restrictive criteria, in particular based on the detected current vehicle state and / or permitted operating ranges of the vehicle 1 be determined. Also in this step, in particular AI methods can be used.

Wird dabei im Schritt S5 eine unmittelbar umsetzbare Fahrstrategie erfolgreich bestimmt (Schritt S6 - ja), so werden in einem Schritt S7 die schon erwähnten Steuersignale zur Ansteuerung der automatisierten Längs- und Querführung des Fahrzeugs 1 nach Maßgabe dieser Fahrstrategie erzeugt und an die entsprechenden Fahrzeugkomponenten 2 und 3 ausgegeben. Sodann kehrt das Verfahren in einer Schleife zum Schritt S1 zurück, um für einen erneuten Durchlauf bereit zu sein. Andernfalls (S6 - nein) wird unter Auslassung des Schritts S7 zum Schritt S1 zurückgekehrt. Bevorzugt wird dabei zusätzlich an der Mensch-Maschine-Schnittstelle 5 eine entsprechende Signalisierung ausgegeben (nicht dargestellt), die den Fahrer bzw. die Insassen des Fahrzeugs 1 darüber informiert, dass die mittels der Benutzereingabe vorgenommene Anweisung nicht erfolgreich umgesetzt werden konnte.Is doing in step S5 an immediately realizable driving strategy successfully determined (step S6 - yes), so be in one step S7 the already mentioned control signals for controlling the automated longitudinal and lateral guidance of the vehicle 1 generated in accordance with this driving strategy and to the corresponding vehicle components 2 and 3 output. The process then loops to the step S1 back to be ready for a new run. Otherwise ( S6 - no) will omit the step S7 to the step S1 returned. Preference is given in addition to the human-machine interface 5 a corresponding signaling output (not shown), the driver or the occupants of the vehicle 1 informed that the instruction made by the user input could not be successfully implemented.

Gemäß einer Alternative dazu (mittels gestricheltem Pfeil dargestellt) kann in einem Schritt S8 neben einer solchen Mitteilung an der Mensch-Maschine-Schnittstelle 5 auch eine weitere Benutzereingabe in Reaktion darauf angefordert werden, und in einem weiteren Schritt S9 das KI-Verfahren auf Basis der mittels der weiteren Benutzereingabe vorgenommenen Rückmeldung trainiert werden (z.B. per Deep Learning), bevor das Verfahren zum Schritt S1 zurückkehrt. Die Mitteilung kann dabei insbesondere zwei oder mehr umsetzbare Wege zur näherungsweisen Umsetzung der, als solche nicht unmittelbar umsetzbaren, Vorgabe zur Auswahl stellen und eine entsprechende Auswahl des Benutzers an der Mensch-Maschine-Schnittstelle 5 anfordern. Im Schritt S9 kann sodann die getätigte Auswahl zum Trainieren des KI-Verfahrens verwendet werden, um bei einer gleichen oder ähnlichen zukünftigen Benutzereingabe im Schritt S1 bzw. einer entsprechend im Schritt S3 abgeleiteten Vorgabe auf dieser Basis eine tatsächlich umsetzbare Fahrstrategie zu berechnen, und so die Rate an erfolglosen Konfigurationsversuchen bzgl. der Fahrzeugführung mit der Zeit zu reduzieren. Insbesondere können so auch Optimierungen bezüglich der Benutzereingaben eines bestimmten Benutzers und deren Eigenarten erfolgen.According to an alternative thereto (shown by dashed arrow) can in one step S8 besides such a message at the man-machine interface 5 also requesting another user input in response to it, and in a further step S9 the AI procedure is trained on the basis of the feedback made by the further user input (eg by deep learning) before the procedure for step S1 returns. In this case, the message can in particular provide two or more implementable ways for the approximate implementation of the specification, which as such can not be directly implemented, for selection, and a corresponding selection of the user at the man-machine interface 5 Request. In step S9 then the selection made to train the AI process may be used to step to a same or similar future user input S1 or one in the step S3 derived default on this basis to calculate an actually implementable driving strategy, and so reduce the rate of unsuccessful configuration attempts with respect to the vehicle management over time. In particular, optimizations with regard to the user inputs of a specific user and their peculiarities can thus take place.

Das Gleiche gilt entsprechend, falls im Schritt S4 festgestellt wird, dass keine eindeutige Vorgabe zur Konfiguration der automatisierten Fahrzeugführer im Schritt S3 abgeleitet werden konnte (S4 - nein). Auch dann wird zum Schritt S8 verzweigt und im nachfolgenden Schritt S9 dementsprechend das KI-Verfahren zu Schritt S3 zur Auswertung der Benutzereingaben auf Basis der im Schritt S8 erfassten Rückmeldung trainiert und somit optimiert.The same applies accordingly, if in step S4 it is determined that there is no clear specification for the configuration of the automated driver in the step S3 could be derived (S4 - no). Even then becomes the step S8 branches and in the subsequent step S9 accordingly, the AI procedure to step S3 to evaluate the user input based on the in step S8 recorded feedback trained and thus optimized.

Unter zusätzlicher Bezugnahme auf 3 werden nun noch bestimmte Aspekte des Verfahrens für ausgewählte beispielhafte Anwendungsfälle erläutert. 3 zeigt eine vierspurige Straße (in 3 vertikal verlaufend) mit zwei Fahrspuren je Fahrtrichtung, die von einer zweispurigen Straße (in 3 horizontal verlaufend) gekreuzt wird. Auf der vierspurigen Straße befinden sich in jeder Fahrtrichtung mehrere Fahrzeuge. Insbesondere befindet sich ein erfindungsgemäßes Fahrzeug 1, etwa das Fahrzeug 1 gemäß 1, auf der in 3 von unten nach oben verlaufenden Richtungsfahrbahn. Vor diesem Fahrzeug befinden sich ein weißes weiteres Fahrzeug W, welches geradeaus fährt, ein schwarzes weiteres Fahrzeug S, welches ebenso geradeaus fährt und die Kreuzung bereits erreicht hat, sowie ein ebenfalls bereits in die Kreuzung eingefahrenes blaues weiteres Fahrzeug B, welches bereits angesetzt hat, in die Querstraße nach links abzubiegen und einen entsprechenden Fahrtrichtungsanzeiger (z.B. Blinker) aktiviert hat. Auf der Gegenfahrbahn kommen dem Fahrzeug 1 ein zweites blaues Fahrzeug B sowie ein rotes weiteres Fahrzeug R entgegen.With additional reference to 3 Certain aspects of the method for selected exemplary applications will now be explained. 3 shows a four-lane road (in 3 vertical) with two lanes for each direction of travel coming from a two-lane road (in 3 horizontally) is crossed. On the four-lane road are located in each direction several vehicles. In particular, there is a vehicle according to the invention 1 , about the vehicle 1 according to 1 on the in 3 from bottom to top running direction road. There is another white vehicle in front of this vehicle W , which goes straight, a black further vehicle S which also drives straight ahead and has already reached the intersection, as well as another blue vehicle, which has already entered the intersection B , which has already set to turn into the crossroads to the left and a corresponding direction indicator (eg turn signal) has activated. On the opposite lane come the vehicle 1 a second blue vehicle B as well as a red further vehicle R opposite.

In einem ersten beispielhaften Anwendungsfall nimmt der Fahrer des Fahrzeugs 1 aufgrund des linksabbiegenden Fahrzeugs B und der rechts vom Fahrzeug 1 befindlichen weniger befahrenen rechten Fahrspur per Spracheingabe „Spurwechsel nach rechts“ eine Benutzereingabe an der Mensch-Maschine-Schnittstelle 5 vor. Mittels der Fahrzeugsensorik 6 des Fahrzeugs 1 hat das Fahrzeug erkannt, dass neben ihm auf der rechten Seite eine weitere Fahrspur zur Verfügung steht. Es handelt sich dabei um eine Umfeldinformation, welche das lokale Umfeld des Fahrzeugs 1 charakterisiert und auf welche die Benutzereingabe des Fahrers konkret Bezug nimmt. Durch Auswertung der Benutzereingabe wird die Vorgabe eines Spurwechsels nach rechts abgeleitet (Schritt S3) und sodann unter Berücksichtigung der relativen Position und der Geschwindigkeit der weiteren Fahrzeuge W, B und S in gleicher Fahrtrichtung eine konkrete Fahrstrategie berechnet (Schritt S5), um darauf beruhend entsprechende Steuersignale zur Ansteuerung der für die Längs- und Querführung verantwortlichen Fahrzeugkomponenten 2 und 3 zu erzeugen (Schritt S7). Die Fahrstrategie kann als „Zwischenziele“ insbesondere eine Anpassung der Geschwindigkeit des Fahrzeugs 1 sowie den Zeitpunkt und den räumlichen Verlauf des Spurwechsels definieren.In a first exemplary application, the driver of the vehicle takes 1 due to the left-turning vehicle B and the right of the vehicle 1 located less traveled right lane by voice input "lane change to the right" a user input at the man-machine interface 5 in front. By means of vehicle sensors 6 of the vehicle 1 the vehicle has recognized that next to it on the right side another lane is available. It is an environment information that the local environment of the vehicle 1 characterized and to which the user input of the driver specifically refers. By evaluating the user input, the specification of a lane change is derived to the right (step S3 ) and then considering the relative position and speed of the other vehicles W . B and S calculated in the same direction of travel a concrete driving strategy (step S5 ) based on it corresponding control signals for controlling the vehicle components responsible for the longitudinal and transverse guidance 2 and 3 to generate (step S7 ). The driving strategy can be used as "intermediate goals" in particular an adaptation of the speed of the vehicle 1 and define the timing and the spatial course of the lane change.

In einem anderen beispielhaften Anwendungsfall, ist das linksabbiegende Fahrzeug B ein Fahrzeug, dem der Fahrer des Fahrzeugs 1 folgen möchte (zum Beispiel bei Kolonnenfahrt). Eine entsprechende Spracheingabe könnte hier lauten „Folge dem blauen Fahrzeug vor uns“. Zusätzlich kann der Fahrer eine entsprechende Handgeste, etwa ein Zeigen auf das Fahrzeug B durchführen, um seine Benutzereingaben an der Mensch-Maschine-Schnittstelle 5 noch genauer zu spezifizieren oder eine entsprechende Redundanz und Verstärkung der Eingabe zu schaffen. Im Schritt S3 wird nun zum einen die Sprach- und Gesteneingabe analysiert, um deren Inhalt zu erkennen, und zum anderen muss dabei abgeleitet werden, welches der beiden im lokalen Umfeld des Fahrzeugs 1 vorhandenen und sensorisch erfassten blauen Fahrzeuge B dasjenige ist, dem gefolgt werden soll. Hier kann insbesondere dann, wenn die Spracheingabe nicht vollständig erkannt wird, die mittels der Gesteneingabe erfolgte Redundanz genutzt werden, um das vor dem Fahrzeug 1 fahrende und gerade links abbiegende Fahrzeug B als das richtige Fahrzeug zu erkennen sowie das auf der Gegenfahrbahn entgegenkommende weitere blaue Fahrzeug B zu ignorieren. Dementsprechend wird auf Basis der Vorgabe, dem nun identifizierten vorausfahrenden Fahrzeug B zu folgen, eine entsprechende Fahrstrategie berechnet (Schritt S5 in 2), die insbesondere Zwischenziele zum Abbremsen und Linksabbiegen an der Kreuzung beinhaltet.In another exemplary application, the left-turn vehicle is B a vehicle that is the driver of the vehicle 1 would like to follow (for example, when traveling by train). An appropriate voice input could be "Follow the blue vehicle in front of us". Additionally, the driver may make a corresponding hand gesture, such as pointing at the vehicle B perform to its user input at the man-machine interface 5 to specify or to provide a corresponding redundancy and amplification of the input. In step S3 On the one hand, the speech and gesture input is analyzed in order to recognize its content, and on the other hand it has to be deduced which of the two in the local environment of the vehicle 1 existing and sensory recorded blue vehicles B that is to be followed. Here, in particular if the voice input is not completely recognized, the redundancy effected by means of the gesture input can be utilized in front of the vehicle 1 moving and just turning left vehicle B to recognize as the right vehicle as well as on the oncoming lane oncoming another blue vehicle B to ignore. Accordingly, based on the default, the now preceding vehicle being identified B to follow, calculated a corresponding driving strategy (step S5 in 2 ), which includes in particular intermediate targets for braking and turning left at the intersection.

In einem weiteren beispielhaften Anwendungsfall könnte der Fahrer per Spracheingabe an der Mensch-Maschine-Schnittstelle 5 das Fahren zu und Abstellen des Fahrzeugs 1 auf einem „nächsten“ Parkplatz anfordern. Im vorliegenden Beispiel befinden sich sowohl das gebührenpflichtige Parkhaus P1 als auch der gebührenfreie Parkplatz P2 im lokalen Umfeld des Fahrzeugs 1 und etwa gleichweit entfernt. Im Rahmen des Schritts S2 empfängt das Fahrzeug 1 mittels der Kommunikationsvorrichtung 7 und einer dadurch hergestellten Internetanbindung Umfeldinformationen, einschließlich Informationen bezüglich der Lage und Gebühren für die Parkmöglichkeiten P1 und P2. Da beide Parkmöglichkeiten sich in ähnlicher Entfernung vom Fahrzeug befinden und die Parkmöglichkeit P1 überdacht aber gebührenpflichtig und die Parkmöglichkeit P2 nicht überdacht aber gebührenfrei ist, scheitert die Ableitung einer eindeutigen Vorgabe aus der erfassten Benutzereingabe möglicherweise zunächst mangels Eindeutigkeit, sodass im Schritt S4 zum Schritt S8 verzweigt wird, in dem der Fahrer im Schritt S8 aufgefordert wird, eine Auswahl zwischen den beiden Parkmöglichkeiten P1 und P2 auf Basis der ihm an der Mensch-Maschine-Schnittstelle 5 dazu angezeigten empfangenen Umfeldinformationen vorzunehmen. Wählt der Fahrer daraufhin beispielsweise die überdachte Parkmöglichkeit P1 trotz ihrer Gebührenpflichtigkeit, so kann im Schritt S9 das KI-Verfahren zur Auswertung von Benutzereingaben entsprechend so trainiert werden, dass es diese Auswahl als grundsätzliche Präferenz für spätere Auswertungen berücksichtigt.In another exemplary application, the driver could voice input to the man-machine interface 5 driving to and stopping the vehicle 1 Request a "next" parking space. In this example, there are both the fee-based parking garage P1 as well as the toll-free parking lot P2 in the local environment of the vehicle 1 and about the same distance away. As part of the step S2 receives the vehicle 1 by means of the communication device 7 and an Internet connection created thereby, surrounding information, including information regarding the location and fees for parking P1 and P2 , Since both parking facilities are located at a similar distance from the vehicle and the parking P1 Covered but subject to charge and parking P2 is not covered but free of charge, the derivation of a clear specification from the detected user input may fail initially for lack of clarity, so in the step S4 to the step S8 is branched, in which the driver in the step S8 will be asked to make a choice between the two parking facilities P1 and P2 based on him at the man-machine interface 5 to display received received environment information. The driver then chooses, for example, the covered parking P1 despite their fee, so may in the step S9 the AI method for evaluating user input is trained in such a way that it considers this selection as a fundamental preference for later evaluations.

Weitere beispielhafte Anwendungsfälle bzw. Benutzereingaben und entsprechende Vorgaben können, jedenfalls sinngemäß“, beispielsweise sein: „Bitte an der nächsten Kreuzung rechts abbiegen“, „an der nächsten Ausfahrt die Autobahn verlassen“, „bitte das Fahrzeug vor uns überholen“, „vor dem nächsten Hotel/Bankautomaten anhalten“, „bitte weniger Spurwechsel“, „bitte weniger Abstand halten“.Further exemplary use cases or user inputs and corresponding specifications can be, in any case, "for example:" Please turn right at the next intersection "," leave the motorway at the next exit "," please overtake the vehicle before us "," in front of us stop next hotel / ATM "," please less lane change "," please keep less distance ".

Während vorausgehend wenigstens eine beispielhafte Ausführungsform beschrieben wurde, ist zu bemerken, dass eine große Anzahl von Variationen dazu existiert. Es ist dabei auch zu beachten, dass die beschriebenen beispielhaften Ausführungsformen nur nichtlimitierende Beispiele darstellen, und es nicht beabsichtigt ist, dadurch den Umfang, die Anwendbarkeit oder die Konfiguration der hier beschriebenen Vorrichtungen und Verfahren zu beschränken. Vielmehr wird die vorausgehende Beschreibung dem Fachmann eine Anleitung zu Implementierung mindestens einer beispielhaften Ausführungsform liefern, wobei sich versteht, dass verschiedene Änderungen in der Funktionsweise und der Anordnung der in einer beispielhaften Ausführungsform beschriebenen Elemente vorgenommen werden können, ohne dass dabei von dem in den angehängten Ansprüchen jeweils festgelegten Gegenstand sowie seinen rechtlichen Äquivalenten abgewichen wird.While at least one exemplary embodiment has been described above, it should be understood that a large number of variations exist. It should also be understood that the described exemplary embodiments are nonlimiting examples only and are not intended to thereby limit the scope, applicability, or configuration of the devices and methods described herein. Rather, the foregoing description will provide those skilled in the art with guidance for implementing at least one example embodiment, it being understood that various changes in the operation and arrangement of the elements described in an exemplary embodiment may be made without departing from the scope of the appended claims deviated from, and its legal equivalents.

BezugszeichenlisteLIST OF REFERENCE NUMBERS

11
Fahrzeugvehicle
22
Fahrzeugkomponenten zur Längssteuerung des FahrzeugsVehicle components for longitudinal control of the vehicle
33
Fahrzeugkomponenten zur Quersteuerung des FahrzeugsVehicle components for the lateral control of the vehicle
44
Steuerungsvorrichtung zur FahrzeugführungControl device for vehicle guidance
4a4a
Prozessoreinheitprocessor unit
4b4b
SpeicherStorage
55
Mensch-Maschine-SchnittstelleHuman-machine interface
5a5a
GestenerkennungseinheitGesture recognition unit
5b5b
SpracherkennungseinheitVoice recognition unit
5c5c
Ausgabeeinheitoutput unit
66
Fahrzeugsensorikvehicle sensor
77
Kommunikationsvorrichtungcommunication device
88th
Antenne antenna
BB
blaue weitere Fahrzeugeblue additional vehicles
RR
rotes weiteres Fahrzeugred another vehicle
SS
schwarzes weiteres Fahrzeugblack further vehicle
WW
weißes weiteres Fahrzeugwhite further vehicle
P1P1
gebührenpflichtiges Parkhausfee parking garage
P2P2
gebührenfreier Parkplatzfree parking

Claims (12)

Verfahren zum Konfigurieren einer zumindest hochautomatisierten Fahrzeugführung eines Fahrzeugs (1), insbesondere eines Kraftfahrzeugs, aufweisend die folgenden automatisierten Schritte: Erfassen (S1, S2) einer eine Anweisung zur Konfiguration der automatisierten Fahrzeugführung betreffenden Benutzereingabe an einer Mensch-Maschine-Schnittstelle (5) sowie von Umfeldinformationen, die das aktuelle lokale Umfeld des Fahrzeugs (1) charakterisieren; Ableiten (S3) einer Vorgabe für die automatisierte Fahrzeugführung des Fahrzeugs (1) mittels einer Auswertung der Benutzereingabe in Abhängigkeit von den Umfeldinformationen; Festlegen (S5) einer auf das lokale Umfeld des Fahrzeugs (1) bezogenen Fahrstrategie im Einklang mit der Vorgabe; und Erzeugen und Ausgeben (S7) von Steuersignalen zur Ansteuerung des Fahrzeugs (1) zur Durchführung der automatisierten Fahrzeugführung nach Maßgabe der festgelegten Fahrstrategie.Method for configuring an at least highly automated vehicle guidance of a vehicle (1), in particular of a motor vehicle, comprising the following automated steps: Detecting (S1, S2) a user input on a man-machine interface (5) concerning an instruction for configuring the automated vehicle guidance as well as environmental information characterizing the current local environment of the vehicle (1); Deriving (S3) a specification for the automated vehicle guidance of the vehicle (1) by means of an evaluation of the user input as a function of the surroundings information; Determining (S5) a driving strategy related to the local environment of the vehicle (1) in accordance with the specification; and Generating and outputting (S7) of control signals for controlling the vehicle (1) for carrying out the automated vehicle guidance in accordance with the established driving strategy. Verfahren gemäß Anspruch 1, wobei das Ableiten (S3) der Vorgabe umfasst: Erkennen einer in der Benutzereingabe enthaltenen Fahranweisung, die sich auf das Fahrzeug (1) selbst und/oder zumindest ein fahrzeugexternes Bezugsobjekt bezieht; Überprüfen der Umfeldinformationen daraufhin, ob sich daraus ein dem Bezugsobjekt entsprechendes Objekt (B) im lokalen Umfeld des Fahrzeugs (1) identifizieren lässt; und falls dies der Fall ist, Ableiten der Vorgabe so, dass sie die Fahranweisung in Relation zu dem identifizierten Objekt (B) definiert.Method according to Claim 1 wherein the deriving (S3) comprises the specification of: detecting a driving instruction contained in the user input, which relates to the vehicle (1) itself and / or at least one vehicle-external reference object; Checking the surroundings information as to whether an object (B) corresponding to the reference object can be identified in the local environment of the vehicle (1); and if so, deriving the specification to define the driving instruction in relation to the identified object (B). Verfahren gemäß einem der vorausgehenden Ansprüche, wobei die Benutzereingabe frei wählbar ist und bei der Auswertung mittels eines KI-basierten Erkennungsverfahrens zu ihrer inhaltlichen Erkennung ausgewertet wird.Method according to one of the preceding claims, wherein the user input is freely selectable and is evaluated in the evaluation by means of a KI-based recognition method for their content recognition. Verfahren gemäß Anspruch 3, wobei das KI-Verfahren ein Lernverfahren umfasst, mittels dessen zumindest eine an der Mensch-Maschine-Schnittstelle (5) erfasste (S8) weitere Benutzereingabe ausgewertet und zur Adaption eines zum Ableiten der Vorgabe eingesetzten Prozesses herangezogen wird (S9).Method according to Claim 3 , wherein the AI method comprises a learning method by means of which at least one detected at the man-machine interface (5) (S8) further user input is evaluated and used to adapt a process used to derive the default (S9). Verfahren gemäß einem der vorausgehenden Ansprüche, wobei die Benutzereingabe zumindest teilweise als akustische Eingabe erfolgt und als solche erfasst wird.Method according to one of the preceding claims, wherein the user input at least partially takes place as an acoustic input and is detected as such. Verfahren gemäß einem der vorausgehenden Ansprüche, wobei die Benutzereingabe zumindest teilweise mittels einer oder mehrerer von einem Benutzer ausgeführten Gesten erfolgt und als solche erfasst wird.Method according to one of the preceding claims, wherein the user input is at least partially carried out by means of one or more gestures carried out by a user and is detected as such. Verfahren gemäß einem der vorausgehenden Ansprüche, wobei die Vorgabe die Beeinflussung einer Fahrstrategie für die automatisierte Fahrzeugführung hinsichtlich einer oder mehrere der folgenden Aspekte oder einer Kombination von zumindest zwei dieser Aspekte betrifft: - eine über sein aktuelles lokales Umfeld hinausreichende Fahrzeugführung und/oder Routenführung des Fahrzeugs (1); - ein oder mehrere lokale Fahrmanöver; - eine oder mehrere fahrdynamische Eigenschaften des Fahrzeugs (1).Method according to one of the preceding claims, wherein the specification relates to influencing a driving strategy for the automated vehicle guidance with regard to one or more of the following aspects or a combination of at least two of these aspects: a vehicle guidance and / or route guidance of the vehicle (1) extending beyond its current local environment; - one or more local driving maneuvers; - One or more dynamic characteristics of the vehicle (1). Verfahren gemäß einem der vorausgehenden Ansprüche, wobei die Festlegung (S5) der Fahrstrategie dynamisch erfolgt, wozu neben der Vorgabe zusätzlich eine oder mehrere der folgenden Größen oder eine Kombination daraus als Eingangsgröße bzw. Eingangsgrößen für die Festlegung der Fahrstrategie verwendet werden: - ein oder mehrere Parameter, die einen aktuellen Fahrzeugzustand kennzeichnen; - Verkehrsleit- oder Verkehrsüberwachungsinformationen; wobei die Eingangsgrößen bzw. deren Kombination jeweils sensorisch erfasst und/oder mittels einer Kommunikationsvorrichtung (7) empfangen werden.Method according to one of the preceding claims, wherein the determination (S5) of the driving strategy is carried out dynamically, for which, in addition to the specification, additionally one or more of the following variables or a combination thereof are used as input variables or input variables for the definition of the driving strategy: one or more parameters characterizing a current vehicle state; - traffic control or traffic monitoring information; wherein the input variables or their combination are respectively detected by sensors and / or received by means of a communication device (7). Verfahren gemäß einem der vorausgehenden Ansprüche, wobei (S4) im Falle, dass beim Auswerten der Benutzereingabe in Abhängigkeit von den Umfeldinformationen kein oder kein eindeutiges Ergebnis als Vorgabe resultiert oder die aus einer abgeleiteten Vorgabe resultierende Fahrstrategie im Rahmen der automatisierten Fahrzeugführung zumindest temporär nicht umsetzbar ist (S6), über die Mensch-Maschine-Schnittstelle (5) eine diesbezügliche Mitteilung ausgegeben wird und/oder eine erneute Benutzereingabe angefordert wird (S8).Method according to one of the preceding claims, wherein (S4) in the event that no or no clear result results as a result when evaluating the user input as a function of the surroundings information or the driving strategy resulting from a derived specification is at least temporarily not feasible within the scope of the automated vehicle guidance (S6), via the man-machine interface (5) a message in this regard is issued and / or a re-user input is requested (S8). Vorrichtung (4 bis 7) zum Konfigurieren einer zumindest hochautomatisierten Fahrzeugführung eines selbstfahrenden Fahrzeugs (1), insbesondere eines Kraftfahrzeugs, wobei die Vorrichtung eingerichtet ist, das Verfahren gemäß einem der vorausgehenden Ansprüche auszuführen.Device (4 to 7) for configuring an at least highly automated vehicle guidance a self-propelled vehicle (1), in particular a motor vehicle, the device being arranged to carry out the method according to one of the preceding claims. Fahrzeug (1), insbesondere Kraftfahrzeug, mit einer Vorrichtung gemäß Anspruch 10.Vehicle (1), in particular motor vehicle, with a device according to Claim 10 , Computerprogramm, welches Anweisungen enthält, die bei ihrer Ausführung auf einem oder mehreren Prozessoren (4a) einer Vorrichtung gemäß Anspruch 10 diese veranlassen, das Verfahren gemäß einem der Ansprüche 1 bis 9 auszuführen.Computer program containing instructions which, when executed on one or more processors (4a) of a device according to Claim 10 they cause the method according to one of Claims 1 to 9 perform.
DE102017219065.5A 2017-10-25 2017-10-25 METHOD AND DEVICE FOR CONFIGURING AN AUTOMATED VEHICLE GUIDANCE Pending DE102017219065A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102017219065.5A DE102017219065A1 (en) 2017-10-25 2017-10-25 METHOD AND DEVICE FOR CONFIGURING AN AUTOMATED VEHICLE GUIDANCE

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102017219065.5A DE102017219065A1 (en) 2017-10-25 2017-10-25 METHOD AND DEVICE FOR CONFIGURING AN AUTOMATED VEHICLE GUIDANCE

Publications (1)

Publication Number Publication Date
DE102017219065A1 true DE102017219065A1 (en) 2019-04-25

Family

ID=65996548

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102017219065.5A Pending DE102017219065A1 (en) 2017-10-25 2017-10-25 METHOD AND DEVICE FOR CONFIGURING AN AUTOMATED VEHICLE GUIDANCE

Country Status (1)

Country Link
DE (1) DE102017219065A1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102019213423A1 (en) * 2019-09-04 2021-03-04 Robert Bosch Gmbh Method and device for operating an automated vehicle
DE102019130318A1 (en) * 2019-11-11 2021-05-12 Audi Ag Method for operating a motor vehicle
DE102020131926A1 (en) 2020-12-02 2022-06-02 Audi Aktiengesellschaft Adaptive human-machine interface for a vehicle

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102013222048A1 (en) * 2013-10-30 2015-04-30 Volkswagen Aktiengesellschaft Method and device for activating or deactivating an automatic driving function
DE102015208593A1 (en) * 2015-05-08 2016-11-10 Bayerische Motoren Werke Aktiengesellschaft Control system for influencing automatic driving functions of a vehicle by a driver
DE102015109146A1 (en) * 2015-06-10 2016-12-15 Valeo Schalter Und Sensoren Gmbh Method for changing a direction of movement of an at least semiautonomously operated motor vehicle, driver assistance system and motor vehicle

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102013222048A1 (en) * 2013-10-30 2015-04-30 Volkswagen Aktiengesellschaft Method and device for activating or deactivating an automatic driving function
DE102015208593A1 (en) * 2015-05-08 2016-11-10 Bayerische Motoren Werke Aktiengesellschaft Control system for influencing automatic driving functions of a vehicle by a driver
DE102015109146A1 (en) * 2015-06-10 2016-12-15 Valeo Schalter Und Sensoren Gmbh Method for changing a direction of movement of an at least semiautonomously operated motor vehicle, driver assistance system and motor vehicle

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102019213423A1 (en) * 2019-09-04 2021-03-04 Robert Bosch Gmbh Method and device for operating an automated vehicle
DE102019130318A1 (en) * 2019-11-11 2021-05-12 Audi Ag Method for operating a motor vehicle
DE102020131926A1 (en) 2020-12-02 2022-06-02 Audi Aktiengesellschaft Adaptive human-machine interface for a vehicle

Similar Documents

Publication Publication Date Title
EP3176046B1 (en) Method and device in a motor vehicle for automated driving
DE102017114495B4 (en) AUTONOMOUS DRIVING SYSTEM
EP2881829B1 (en) Method for automatically controlling a vehicle, device for generating control signals for a vehicle and vehicle
EP3160813B1 (en) Method for producing a model of the surroundings of a vehicle
DE112012006226B4 (en) Driver assistance device
EP2771227B1 (en) Method for guiding a vehicle, and driver assistance system
DE102019104974A1 (en) Method and system for determining a driving maneuver
EP3625788A1 (en) Method for operating a driver assistance device of a motor vehicle, driver assistance device, and motor vehicle
WO2017167801A1 (en) Driver assistance system for supporting a driver when driving a vehicle
DE112017001438T5 (en) Autonomous driving support device and computer program
DE102016209619A1 (en) AMBIENT SURVEILLANCE AND DRIVING ASSISTANCE DEVICE
DE102013200462A1 (en) AUTONOMOUS CIRCUIT CONTROL SYSTEM
DE102016121691A1 (en) Method and system for operating a motor vehicle
DE102016215528B4 (en) Automated operation of a motor vehicle
DE102012215060A1 (en) Method for guiding vehicle, involves detecting parameter of environment of vehicle on basis of sensor, and determining driving corridor and desire point in driving corridor on basis of detected parameter
DE102018131466A1 (en) Method for at least partially automated operation of a vehicle
DE102017204603A1 (en) Vehicle control system and method for controlling a vehicle
DE102019215657A1 (en) Vehicle control system and method
DE102018209183A1 (en) Method and device for assisting a driver in a vehicle
DE102018113314A1 (en) Driving Assistance System
DE102017219065A1 (en) METHOD AND DEVICE FOR CONFIGURING AN AUTOMATED VEHICLE GUIDANCE
DE102018124161A1 (en) Method for at least partially automated driving of a motor vehicle on a roadway
DE102019215815A1 (en) VEHICLE CONTROL SYSTEM AND METHOD
WO2019174766A1 (en) Method, a device and a corresponding computer program for varying or suppressing at least one piece of driver information
DE102019202187A1 (en) Vehicle control and control procedures

Legal Events

Date Code Title Description
R163 Identified publications notified
R012 Request for examination validly filed