DE102020212376A1

DE102020212376A1 - Deriving the intention of a passenger in the vehicle based on the passenger's interaction with an object

Info

Publication number: DE102020212376A1
Application number: DE102020212376.4A
Authority: DE
Inventors: Sebastian Ehmann; Robin Richter
Original assignee: Volkswagen AG
Current assignee: Volkswagen AG
Priority date: 2020-09-30
Filing date: 2020-09-30
Publication date: 2022-03-31

Abstract

Die Erfindung betrifft ein Verfahren zum Unterstützen einer Nutzersituation eines Nutzers (2) eines Fahrzeugs (3), bei welchem folgende Schritte durchgeführt werden:- Erfassen eines Gegenstands (6) im Fahrzeug (3), welcher keine Fahrzeugkomponente ist, mit einer Erfassungseinheit (7) des Fahrzeugs (3);- Erfassen einer Interaktion (5) des Nutzers (2) im Fahrzeug (3) mit dem Gegenstand (6) mit einer Erfassungseinheit (7) des Fahrzeugs (3);- Bereitstellen der erfassten Informationen an eine Auswerteeinheit (8);- Bestimmen eines potentiellen Nutzerbedürfnisses des Nutzers (2) durch die Auswerteeinheit (8) in Abhängigkeit von den erfassten Informationen;- Unterstützen der Nutzersituation im Fahrzeug (3), indem abhängig von dem bestimmten Nutzerbedürfnis ein Betriebszustand zumindest einer Funktionseinheit (10) des Fahrzeugs (3) automatisch eingestellt wird, und/oder ein Vorschlag für eine Einstellung eines Betriebszustands zumindest einer Funktionseinheit (10) durch eine Ausgabeeinheit (11) im Fahrzeug (3) ausgegeben wird.Des Weiteren betrifft die Erfindung ein elektronisches Nutzerunterstützungssystem (1) und ein Fahrzeug (3).The invention relates to a method for supporting a user situation of a user (2) of a vehicle (3), in which the following steps are carried out: - detecting an object (6) in the vehicle (3), which is not a vehicle component, with a detection unit (7 ) of the vehicle (3);- detecting an interaction (5) of the user (2) in the vehicle (3) with the object (6) with a detection unit (7) of the vehicle (3);- providing the detected information to an evaluation unit (8);- Determination of a potential user need of the user (2) by the evaluation unit (8) depending on the information recorded;- Supporting the user situation in the vehicle (3) by determining an operating state of at least one functional unit (10 ) of the vehicle (3) is set automatically, and/or a suggestion for setting an operating state of at least one functional unit (10) by an output unit (11) in the vehicle (3). The invention also relates to an electronic user support system (1) and a vehicle (3).

Description

Die Erfindung betrifft ein Verfahren zum Unterstützen einer Nutzersituation eines Nutzers eines Fahrzeugs während einer Fahrt mit dem Fahrzeug.The invention relates to a method for supporting a user situation of a user of a vehicle while driving the vehicle.

Des Weiteren betrifft die Erfindung ein elektronisches Nutzerunterstützungssystem mit zumindest einer Erfassungseinheit, zumindest einer Ausgabeeinheit und zumindest einer Auswerteeinheit.Furthermore, the invention relates to an electronic user support system with at least one detection unit, at least one output unit and at least one evaluation unit.

Des Weiteren betrifft die Erfindung ein Fahrzeug mit einem entsprechenden elektronischen Nutzerunterstützungssystem.Furthermore, the invention relates to a vehicle with a corresponding electronic user support system.

In zunehmend automatisch fahrenden Fahrzeugen, insbesondere vollautonom fahrenden Fahrzeugen, ist davon auszugehen, dass eine direkte Interaktion der Passagiere mit Fahrzeugsystemen reduziert wird. Insbesondere ist bei vollständig automatisierten Fahrzeugen davon auszugehen, dass nur ein Minimum von Interaktionsmöglichkeiten zwischen den Passagieren und dem Fahrzeug besteht. Dies kann beispielsweise aus Gründen einer möglichen Kostenersparnis oder zur Erhöhung des Fahrkomforts erfolgen.In vehicles that are increasingly driving automatically, in particular fully autonomous vehicles, it can be assumed that direct interaction between passengers and vehicle systems will be reduced. In the case of fully automated vehicles in particular, it can be assumed that there is only a minimum of interaction between the passengers and the vehicle. This can be done, for example, for possible cost savings or to increase driving comfort.

Bei vorhandenen Steuerelementen beziehungsweise Steuersystemen des Fahrzeugs kann es vorkommen, dass bestimmte Aktionen eines Fahrzeuginsassen, insbesondere Interaktionen mit nicht zum Fahrzeug gehörenden Gegenständen, mit dem Fahrtvorgang zusammenhängen. Durch eine selbständige Rückmeldung des Fahrzeugs kann der Passagier dabei unterstützt werden.With existing control elements or control systems of the vehicle, it can happen that certain actions of a vehicle occupant, in particular interactions with objects that do not belong to the vehicle, are related to the driving process. The passenger can be supported by an independent feedback from the vehicle.

Beispielsweise gibt es im Bereich der Fahrerzustandserkennung Systeme wie „Emergency-Assistenten“, Aufmerksamkeitserkennungssysteme und Müdigkeitserkennungssysteme. For example, in the field of driver condition detection, there are systems such as "emergency assistants", attention detection systems and fatigue detection systems.

Beispielsweise offenbart die DE 10 2013 019 210 A1 eine Beleuchtungsvorrichtung für einen Fahrgastraum eines Kraftfahrzeugs und ein Verfahren zur Steuern der Beleuchtungsvorrichtung.For example, the DE 10 2013 019 210 A1 a lighting device for a passenger compartment of a motor vehicle and a method for controlling the lighting device.

Die DE 10 2012 017 276 A1 offenbart beispielsweise ein Verfahren und eine Vorrichtung zum automatischen Steuern einer Leuchteinheit im Innenraum eines Fahrzeugs.the DE 10 2012 017 276 A1 discloses, for example, a method and a device for automatically controlling a lighting unit in the interior of a vehicle.

Die DE 10 2005 023 697 A1 offenbart eine Einrichtung zur Steuerung der Innenbeleuchtung eines Kraftfahrzeugs.the DE 10 2005 023 697 A1 discloses a device for controlling the interior lighting of a motor vehicle.

Ein Nachteil im Stand der Technik ist der, dass eine spezifische Reaktion des Fahrzeugs auf eine Interaktion eines Passagiers mit einem Gegenstand nicht durchgeführt werden kann.A disadvantage in the prior art is that a specific reaction of the vehicle to a passenger's interaction with an object cannot be carried out.

Daher ist die Aufgabe der vorliegenden Erfindung, ein Verfahren, ein elektronisches Nutzerunterstützungssystem und ein Fahrzeug bereitzustellen, so dass ein Passagier eines Fahrzeugs bei den verschiedensten Nutzersituationen des Passagiers besser und umfangreicher unterstützt werden kann.Therefore, the object of the present invention is to provide a method, an electronic user support system and a vehicle, so that a passenger of a vehicle can be better and more extensively supported in the most varied of user situations of the passenger.

Diese Aufgabe wird durch ein Verfahren, ein elektronisches Nutzerunterstützungssystem und ein Fahrzeug gemäß den unabhängigen Patentansprüchen gelöst. Sinnvolle Weiterbildungen ergeben sich aus den Unteransprüchen.This object is solved by a method, an electronic user support system and a vehicle according to the independent patent claims. Useful further developments result from the dependent claims.

Ein Aspekt der Erfindung betrifft ein Verfahren zum Unterstützen einer Nutzersituation eines Nutzers eines Fahrzeugs während einer Fahrt mit dem Fahrzeug, bei welchem folgende Schritte durchgeführt werden:

- Erfassen eines Gegenstands im Fahrzeug, welcher keine Fahrzeugkomponente ist, insbesondere keine Fahrzeugkomponente ist, mit welcher eine Funktion des Fahrzeugs einstellbar ist, mit einer Erfassungseinheit des Fahrzeugs;
- Erfassen einer Interaktion des Nutzers im Fahrzeug mit dem Gegenstand mit einer Erfassungseinheit des Fahrzeugs;
- Bereitstellen der erfassten Informationen an eine Auswerteeinheit;
- Bestimmen eines potentiellen Nutzerbedürfnisses des Nutzers durch die Auswerteeinheit in Abhängigkeit von den erfassten Informationen betreffend den Gegenstand, den Nutzer und die Interaktion;
- Unterstützen der Nutzersituation im Fahrzeug, indem abhängig von dem bestimmten, potenziellen Nutzerbedürfnis des Nutzers ein spezifischer Betriebszustand zumindest einer im oder am Fahrzeug befindlichen Funktionseinheit des Fahrzeugs automatisch eingestellt wird, und/oder ein Vorschlag für eine Einstellung eines Betriebszustands zumindest einer im oder am Fahrzeug befindlichen Funktionseinheit durch eine Ausgabeeinheit im Fahrzeug an den Nutzer ausgegeben wird.

One aspect of the invention relates to a method for supporting a user situation of a user of a vehicle while driving the vehicle, in which the following steps are carried out:

- detecting an object in the vehicle, which is not a vehicle component, in particular not a vehicle component, with which a function of the vehicle can be adjusted, with a detection unit of the vehicle;
- detecting an interaction of the user in the vehicle with the object with a detection unit of the vehicle;
- Providing the recorded information to an evaluation unit;
- Determination of a potential user need of the user by the evaluation unit depending on the recorded information relating to the object, the user and the interaction;
- Supporting the user situation in the vehicle by automatically setting a specific operating state of at least one functional unit of the vehicle located in or on the vehicle depending on the specific, potential user needs of the user, and/or a proposal for setting an operating state of at least one in or on the vehicle located functional unit is issued by an output unit in the vehicle to the user.

Durch das vorgeschlagene Verfahren kann der Nutzer des Fahrzeugs bei einer auftretenden Nutzersituation in dem Fahrzeug besser und effizienter unterstützt werden. Dadurch kann insbesondere dem Nutzer eine komfortablere und angenehmere Fortbewegungsfahrt mit dem Fahrzeug bereitgestellt werden. Insbesondere kann der Nutzer bei den verschiedensten und situationsabhängigsten Situationen oder Umständen im Fahrzeug unterstützt werden. Insbesondere erlaubt das vorgeschlagene Verfahren dem Fahrzeug eine Reaktion auf eine Interaktion des Nutzers mit dem nicht zum Fahrzeug zugehörigen Gegenstand durchzuführen. Somit kann in Abhängigkeit der Interaktion zwischen dem Nutzer und dem nicht zum Fahrzeug gehörigen Gegenstand eine entsprechende Reaktion abgeleitet werden, so dass eine bestmögliche Unterstützung des Nutzers bereitgestellt und durchgeführt werden kann. Insbesondere erlaubt das vorgeschlagene Verfahren eine Ableitung einer Intention eines Passagiers eines Fahrzeugs anhand der Interaktion des Passagiers mit einem nicht zum Fahrzeug gehörigen Gegenstand. Das Verfahren ermöglicht somit eine systemseitige Vermutung beziehungsweise Abschätzung, welche insbesondere nicht durch Sprache geäußerte Intention der Nutzer aufgrund seinem Interaktionsverhalten aktuell und/oder zukünftig hat. Es kann also mit dem System ein bewusstes oder unbewusstes Bedürfnis des Nutzers als Vermutung bestimmt werden, insbesondere auf Basis des erfassten Interaktionsverhaltens. Der nicht zum Fahrzeug gehörende Gegenstand ist bestimmungsgemäß nicht als wesentliches Zubehör für das Fahrzeug oder nicht primär für den Betrieb oder die Funktionsweise des Fahrzeugs vorgesehene Einheit ausgebildet.The proposed method allows the user of the vehicle to be better and more efficiently supported when a user situation occurs in the vehicle. As a result, the user in particular can be provided with a more comfortable and pleasant locomotion journey with the vehicle. In particular, the user can be supported in the most diverse and situation-dependent situations or circumstances in the vehicle the. In particular, the proposed method allows the vehicle to react to an interaction between the user and the object that does not belong to the vehicle. A corresponding reaction can thus be derived as a function of the interaction between the user and the object that does not belong to the vehicle, so that the best possible support for the user can be provided and carried out. In particular, the proposed method allows an intention of a passenger in a vehicle to be derived based on the interaction of the passenger with an object that does not belong to the vehicle. The method thus enables a system-side guess or assessment, which in particular has no verbal intention of the user based on his interaction behavior currently and/or in the future. With the system, a conscious or unconscious need of the user can be determined as an assumption, in particular on the basis of the interaction behavior recorded. The non-vehicle item is not intended to be an essential accessory for the vehicle or a unit primarily intended for the operation or functioning of the vehicle.

Die Unterstützung der Nutzersituation des Nutzers des Fahrzeugs erfolgt mit dem vorgeschlagenen Verfahren unabhängig von dem Technologiebereich der Gestensteuerung. Insbesondere ist die Interaktion keine bewusst von dem Nutzer durchgeführte Geste, mit welcher er eine Funktionskomponente, die zum Fahrzeug bestimmungsgemäß zugehörig ist, steuert. Die Unterstützung der Nutzersituation des Nutzers erfolgt durch Auswertung der Interaktion des Nutzers mit dem Gegenstand und der daraus folgenden Intention des Nutzers. Mit anderen Worten wird eine bewusste Intention des Nutzers analysiert.The user situation of the user of the vehicle is supported with the proposed method independently of the technology area of gesture control. In particular, the interaction is not a gesture consciously performed by the user, with which he controls a functional component that is intended to be associated with the vehicle. The user's situation is supported by evaluating the user's interaction with the object and the resulting intention of the user. In other words, a conscious intention of the user is analyzed.

Insbesondere wird eine aktuelle Situation, in welcher sich der Nutzer des Fahrzeugs in dem Fahrzeug befindet, analysiert und in Abhängigkeit von dieser aktuellen Situation dem Nutzer eine bestmögliche Unterstützung beziehungsweise Hilfe bereitgestellt.In particular, a current situation in which the user of the vehicle is in the vehicle is analyzed and, depending on this current situation, the best possible support or help is provided to the user.

Insbesondere erfolgt mit der Erfassungseinheit, welche beispielsweise Kameras und/oder Sensoren aufweisen kann, die Erfassung des Gegenstands im Fahrzeug. Bei dem Gegenstand handelt es sich insbesondere um keine einer Funktion des Fahrzeugs bestimmungsgemäß zugehörige Komponente. Mit anderen Worten ist der Gegenstand nicht zum Fahrzeug zugehörig. Der Gegenstand hat also mit dem Fahrzeug prinzipiell keinerlei Verbindung oder Zugehörigkeit. Das Fahrzeug und der Gegenstand sind an sich betrachtet verschiedene und voneinander entkoppelte beziehungsweise getrennte Einheiten.In particular, the object is detected in the vehicle with the detection unit, which can have cameras and/or sensors, for example. In particular, the object is not a component that is intended to be associated with a function of the vehicle. In other words, the object does not belong to the vehicle. In principle, the object has no connection or affiliation with the vehicle. Viewed per se, the vehicle and the object are different units that are decoupled or separate from one another.

Beispielsweise kann es sich bei dem Gegenstand um ein Buch, ein Tablet, ein Smartphone, eine Sonnenbrille, eine Mütze, einen Getränkebehälter des Nutzers, eine Smartwatch, eine Uhr oder einen am Körper selbst getragenen Gegenstand handeln. Diese Aufzählung ist nur ein kleiner Ausschnitt der vielfältigsten und umfangreichen Möglichkeiten des Gegenstands und ist nicht abschließend zu verstehen. Insbesondere wird der Gegenstand von dem Nutzer getragen. Beispielsweise kann der Gegenstand berührungslos, insbesondere mit einer Innenraumkamera des Fahrzeugs erfasst werden.For example, the item may be a book, tablet, smartphone, sunglasses, hat, user's beverage container, smart watch, watch, or wearable item. This list is only a small excerpt of the most diverse and extensive possibilities of the subject and is not to be understood as conclusive. In particular, the object is carried by the user. For example, the object can be detected without contact, in particular with an interior camera of the vehicle.

Bei der Nutzersituation des Nutzers befindet sich der Nutzer in Interaktion mit dem Gegenstand. Mit anderen Worten interagiert der Nutzer mit dem Gegenstand im Fahrzeug. Bei der Interaktion des Nutzers mit dem Gegenstand handelt es sich um eine Kommunikation, ein Handeln, eine Arbeit, eine Tätigkeit des Nutzers mit dem Gegenstand. Insbesondere besteht eine wechselseitige Verbindung zwischen dem Gegenstand und dem Nutzer während der Interaktion. Bei der Interaktion findet insbesondere ein berührendes und/oder berührungsloses wechselseitiges Aufeinandereinwirken zwischen dem Nutzer und dem Gegenstand statt. Genau diese Interaktion des Nutzers mit dem Gegenstand wird insbesondere kontinuierlich und automatisch mit der Erfassungseinheit des Fahrzeugs erfasst. Beispielsweise können mit einer kommunikationstechnischen Verbindung die erfassten Informationen an die Auswerteeinheit, wie beispielsweise eine Recheneinheit oder ein Backend oder eine Cloud-basierte Technologie übermittelt werden. Mit der Auswerteeinheit, welche sich entweder im Fahrzeug oder in einer zentralen Servereinheit befindet, kann das potenzielle beziehungsweise mögliche Nutzerbedürfnis des Nutzers in Abhängigkeit von den erfassten Informationen ermittelt beziehungsweise generiert beziehungsweise bestimmt werden. Mit anderen Worten kann anhand der erfassten Informationen ein aktuelles oder zukünftiges Nutzerbedürfnis des Nutzers anhand der Interaktion mit dem Gegenstand ermittelt werden. Somit kann entweder der Nutzer bei einer aktuellen Nutzersituation oder bei einer zukünftigen Nutzersituation effizient unterstützt werden. Bei der Unterstützung können dem Nutzer entsprechende Hinweise oder Anweisungen oder akustische Sprachhinweise oder optische Informationen oder Funktionen des Fahrzeugs bereitgestellt werden.In the user situation of the user, the user is in interaction with the object. In other words, the user interacts with the object in the vehicle. The interaction of the user with the object is a communication, an action, a work, an activity of the user with the object. In particular, there is a mutual connection between the object and the user during the interaction. During the interaction, in particular, a touching and/or contactless mutual interaction between the user and the object takes place. Precisely this interaction of the user with the object is in particular continuously and automatically recorded by the vehicle's detection unit. For example, the recorded information can be transmitted to the evaluation unit, such as a computing unit or a backend or a cloud-based technology, with a communication connection. With the evaluation unit, which is located either in the vehicle or in a central server unit, the potential or possible user needs of the user can be ascertained or generated or determined depending on the recorded information. In other words, a current or future user need of the user can be determined based on the interaction with the object based on the recorded information. Thus, either the user can be efficiently supported in a current user situation or in a future user situation. When providing support, the user may be provided with appropriate notices or instructions or audible voice prompts or visual information or functions of the vehicle.

Insbesondere erfolgt die Bestimmung des potenziellen Nutzerbedürfnisses in Abhängigkeit aller Einflussgrößen, welche aus der Interaktion zwischen dem Gegenstand und dem Nutzer ableitbar sind. Bei dem Nutzerbedürfnis des Nutzers kann es sich beispielsweise um einen aktuellen und/oder zukünftigen Wunsch des Nutzers handeln. Insbesondere kann mit dem potenziellen Nutzerbedürfnis eine Intention des Nutzers vorhergesagt werden. Insbesondere kann mit dem potenziellen Nutzerbedürfnis ein Wunsch, ein Verlangen oder ein Gefühl des Nutzers bestimmt, insbesondere vorhergesagt, werden.In particular, the potential user needs are determined as a function of all influencing factors that can be derived from the interaction between the object and the user. With the user need of the user, it can be, for example, a current and/or future request of the user. In particular, an intention of the user can be predicted with the potential user need. In particular, a wish, a desire or a feeling of the user can be determined, in particular predicted, with the potential user need.

Insbesondere kann die Unterstützung der Nutzersituation des Nutzers derart erfolgen, dass in Abhängigkeit von dem bestimmten potenziellen Nutzerbedürfnis des Nutzers eine Fahrzeugkonfiguration, eine Fahrzeugeinstellung, eine Systemeinstellung des Fahrzeugs, ein Fahrverhalten des Fahrzeugs oder eine Funktionseinheit des Fahrzeugs automatisch eingestellt beziehungsweise angepasst wird. Mit anderen Worten kann die Unterstützung der Nutzersituation derart erfolgen, dass zumindest ein Betriebszustand zumindest der einen Funktionseinheit des Fahrzeugs automatisch eingestellt oder automatisch angepasst wird. Somit kann dieser Betriebszustand der zumindest einen Funktionseinheit an das bestimmte potenzielle Nutzerbedürfnis des Fahrzeugs angepasst werden, so dass eine bestmögliche Unterstützung des Nutzers während der Nutzersituation erreicht werden kann. Der Betriebszustand der zumindest einen Funktionseinheit wird derart eingestellt, dass der Betriebszustand einen die Unterstützung fördernden Betriebszustand für die Unterstützung der Nutzersituation des Nutzers darstellt. Entweder kann dieser Betriebszustand automatisch und selbständig in Abhängigkeit von dem bestimmten, potenziellen Nutzerbedürfnis eingestellt werden oder es wird dem Nutzer über die Ausgabeeinheit zumindest ein Vorschlag für eine Einstelloption beziehungsweise Einstellmöglichkeit bereitgestellt beziehungsweise ausgegeben. Somit hat der Nutzer die Möglichkeit zu entscheiden, ob die möglichen Einstellungen des Betriebszustands tatsächlich durchgeführt werden sollen. Somit kann der Nutzer den Vorschlag für die Einstellung entweder annehmen oder ablehnen.In particular, the user's user situation can be supported in such a way that a vehicle configuration, a vehicle setting, a system setting of the vehicle, a driving behavior of the vehicle or a functional unit of the vehicle is automatically set or adjusted depending on the specific potential user need of the user. In other words, the user situation can be supported in such a way that at least one operating state of at least one functional unit of the vehicle is automatically set or automatically adjusted. This operating state of the at least one functional unit can thus be adapted to the specific potential user need of the vehicle, so that the best possible support for the user during the user situation can be achieved. The operating state of the at least one functional unit is set in such a way that the operating state represents an operating state that promotes support for supporting the user's user situation. This operating state can either be set automatically and independently as a function of the specific, potential user need, or at least one suggestion for a setting option or setting possibility is made available or output to the user via the output unit. This gives the user the opportunity to decide whether the possible settings for the operating status should actually be carried out. Thus, the user can either accept or reject the suggestion for the setting.

Bei der Funktionseinheit des Fahrzeugs kann es sich beispielsweise um ein Lenksystem oder ein Assistenzsystem oder um ein Navigationssystem oder um ein Fahrwerksystem oder um eine Motoreinstellung oder um ein Lichtsystem oder um ein Audiosystem oder um Komfortsystem oder um ein Infotainmentsystem oder um Fahrerassistenzsystem handeln. Diese Beispiele sollen nur die Vielfältigkeit der möglichen Funktionseinheiten des Fahrzeugs darstellen. Diese sind insbesondere nicht abschließend zu verstehen.The functional unit of the vehicle can be, for example, a steering system or an assistance system or a navigation system or a chassis system or an engine setting or a light system or an audio system or a convenience system or an infotainment system or a driver assistance system. These examples are only intended to show the variety of possible functional units in the vehicle. In particular, these are not to be understood as exhaustive.

Mit dem Betriebszustand kann insbesondere eine Konfiguration beziehungsweise eine Justierung beziehungsweise eine Einstellung der zumindest einen Funktionseinheit durchgeführt werden.With the operating state, in particular a configuration or an adjustment or a setting of the at least one functional unit can be carried out.

Bei der Ausgabeeinheit des Fahrzeugs kann es sich um ein Display oder um Lautsprechersystem oder um ein Infotainmentsystem des Fahrzeugs handeln. Mit Hilfe der Ausgabeeinheit kann der Vorschlag für die Einstellung dem Nutzer akustisch und/oder optisch und/oder haptisch ausgegeben werden.The vehicle's output unit can be a display or a loudspeaker system or an infotainment system of the vehicle. With the help of the output unit, the suggestion for the setting can be output to the user acoustically and/or optically and/or haptically.

In einem Ausführungsbeispiel der Erfindung ist vorgesehen, dass mit einer Erfassungseinrichtung des Fahrzeugs zumindest eine Umgebungsinformation betreffend eine Umgebung des Fahrzeugs und/oder zumindest eine Innenrauminformation betreffend einen Fahrzeuginnenraum des Fahrzeugs erfasst wird, wobei die zumindest eine erfasste Umgebungsinformation und/oder die zumindest eine erfasste Innenrauminformation bei der Bestimmung des potenziellen Nutzerbedürfnisses des Nutzers berücksichtigt wird. Mit der zur Erfassungseinheit verschiedenen Erfassungseinrichtung des Fahrzeugs kann insbesondere kontinuierlich und automatisch der Umgebungsbereich in der Umgebung des Fahrzeugs und der Innenraumbereich des Fahrzeuginnenraums erfasst werden. Diese Informationen betreffend die Umgebung des Fahrzeugs und des Fahrzeuginnenraums des Fahrzeugs werden ebenfalls über eine kommunikationstechnische Verbindung von der Erfassungseinrichtung an die Auswerteeinheit übermittelt. Insbesondere kann die Übertragung drahtgebunden oder drahtlos erfolgen. Die Erfassungseinrichtung kann eine Vielzahl von verschiedenen Kameraeinheiten und/oder Sensoreinheiten aufweisen. Mit der Umgebungsinformation können Informationen bezüglich des Verkehrsgeschehens in der Umgebung des Fahrzeugs und/oder Informationen bezüglich der Sonneneinstrahlung und/oder von Wetterbedingungen erfasst werden. Mit den Innenrauminformationen können Informationen bezüglich der Positionierung des Nutzers im Fahrzeuginnenraum erfasst werden. Ebenso können mit Hilfe der Innenrauminformationen alle im Fahrzeuginnenraum befindlichen Passagiere und/oder Gegenstände erfasst werden. Durch die zusätzliche Erfassung des Fahrzeuginnenraums mit der Erfassungseinrichtung kann eine detaillierte Analyse der Interaktion des Nutzers mit dem Gegenstand im Fahrzeuginnenraum durchgeführt werden. Somit kann eine verbesserte Bestimmung des potenziellen Nutzerbedürfnisses des Nutzers erfolgen.In one exemplary embodiment of the invention, it is provided that at least one item of environmental information relating to the area surrounding the vehicle and/or at least one item of interior information relating to a vehicle interior of the vehicle is recorded using a detection device of the vehicle, with the at least one recorded item of environmental information and/or the at least one recorded item of interior information taken into account when determining the potential user needs of the user. In particular, the area surrounding the vehicle and the interior area of the vehicle interior can be recorded continuously and automatically with the recording device of the vehicle, which is different from the recording unit. This information relating to the environment of the vehicle and the vehicle interior of the vehicle is also transmitted via a communication link from the detection device to the evaluation unit. In particular, the transmission can be wired or wireless. The detection device can have a large number of different camera units and/or sensor units. Information relating to the traffic situation in the vicinity of the vehicle and/or information relating to solar radiation and/or weather conditions can be recorded with the environmental information. With the interior information, information regarding the positioning of the user in the vehicle interior can be recorded. Likewise, all passengers and/or objects located in the vehicle interior can be recorded with the aid of the interior information. The additional detection of the vehicle interior with the detection device allows a detailed analysis of the user's interaction with the object in the vehicle interior to be carried out. An improved determination of the potential user needs of the user can thus take place.

Die erfassten Umgebungsinformationen und die Innenrauminformationen können insbesondere bei der Einstellung des Betriebszustands der zumindest einen Funktionseinheit des Fahrzeugs berücksichtigt werden.The recorded environmental information and the interior information can be taken into account in particular when setting the operating state of the at least one functional unit of the vehicle.

In einem weiteren Ausführungsbeispiel der Erfindung ist vorgesehen, dass in Abhängigkeit von der zumindest einen erfassten Umgebungsinformation und/oder der zumindest einen erfassten Innenrauminformation und/oder dem potenziellen Nutzerbedürfnis des Nutzers eine Beleuchtung und/oder ein Lichtverhältnis in dem Fahrzeuginnenraum des Fahrzeugs mit der zumindest einen Funktionseinheit des Fahrzeugs eingestellt oder vorgeschlagen wird. Mit anderen Worten handelt es sich in diesem Ausführungsbeispiel bei der zumindest einen Funktionseinheit beispielsweise um ein Beleuchtungssystem oder um ein Verdunklungssystem des Fahrzeugs. Mit diesen kann entsprechend die aktuelle Nutzersituation des Nutzers, die Beleuchtung und/oder das Lichtverhältnis in dem Fahrgastinnenraum angepasst werden. Insbesondere erfolgt die Anpassung der Beleuchtung und/oder des Lichtverhältnisses derart, dass diese dem Nutzer bei der Interaktion mit dem Gegenstand als Unterstützung und fördernder Betriebszustand der Funktionseinheit eingestellt werden. Somit kann die Interaktion des Nutzers mit dem Gegenstand durch die Anpassung der Beleuchtung und/oder des Lichtverhältnisses verbessert werden. Insbesondere sind dadurch das Wohlbefinden und das Komfortgefühl des Nutzers erhöht. Somit kann durch das Anpassen der Beleuchtung und/oder des Lichtverhältnisses der Nutzer bei seiner aktuellen Nutzersituation besser unterstützt werden. In diesem Fall handelt es sich bei der Unterstützung um die Anpassung der Beleuchtung und/oder des Lichtverhältnisses. Ebenso kann der Vorschlag für die Anpassung der Beleuchtung und/oder des Lichtverhältnisses dem Benutzer über die Ausgabeeinheit als auswählbarer Vorschlag ausgegeben werden.In a further exemplary embodiment of the invention, it is provided that, depending on the at least one detected item of environmental information and/or the at least one detected interior Room information and / or the potential user needs of the user lighting and / or a lighting condition in the vehicle interior of the vehicle with the at least one functional unit of the vehicle is set or suggested. In other words, in this exemplary embodiment, the at least one functional unit is, for example, a lighting system or a darkening system of the vehicle. With these, the current user situation of the user, the lighting and/or the light conditions in the passenger compartment can be adjusted accordingly. In particular, the lighting and/or the lighting conditions are adjusted in such a way that they are set for the user when interacting with the object as a supporting and promoting operating state of the functional unit. The user's interaction with the object can thus be improved by adjusting the lighting and/or the lighting conditions. In particular, this increases the user's sense of well-being and comfort. Thus, the user can be better supported in his current user situation by adjusting the lighting and/or the lighting conditions. In this case, the assistance is the adjustment of lighting and/or lighting conditions. Likewise, the suggestion for adjusting the lighting and/or the lighting conditions can be output to the user via the output unit as a selectable suggestion.

In einem weiteren Ausführungsbeispiel der Erfindung ist vorgesehen, dass mit der Auswerteeinheit in Abhängigkeit von dem potenziellen Nutzerbedürfnis des Nutzers ein potenzieller Informationswunsch des Nutzers betreffend eine aktuelle Fortbewegungsfahrt des Fahrzeugs bestimmt wird, wobei in Abhängigkeit von Navigationsinformationen eines Navigationssystems des Fahrzeugs ein aktueller Fortbewegungsstatus und/oder eine aktuelle Fortbewegungsinformation der aktuell durchgeführten Fortbewegungsfahrt des Fahrzeugs dem Nutzer ausgegeben wird, insbesondere in Abhängigkeit von der erfassten Interaktion des Nutzers mit dem Gegenstand ein alternatives Ziel und/oder eine alternative Fortbewegungsroute und/oder zumindest ein Zwischenstopp dem Nutzer bereitgestellt wird. Mit anderen Worten kann anhand der erfassten Interaktion des Nutzers mit dem Gegenstand, welcher beispielsweise in diesem Ausführungsbeispiel eine Armbanduhr ist, als Intention des Nutzers der potenzielle Informationswunsch vorhergesagt beziehungsweise interpretiert beziehungsweise bestimmt werden. Bei dem potenziellen Informationswunsch kann es sich um einen Wunsch, um ein Verlangen oder ein Bedürfnis des Nutzers nach einem aktuellen Zwischenreport der aktuell durchgeführten Fortbewegungsfahrt handeln. Somit kann dem Nutzer durch die Ableitung der Intention des Nutzers anhand der Interaktion ein aktuelles Briefing dem Nutzer über den aktuellen Zustand der Fortbewegungsfahrt ausgegeben werden. Dabei kann der potenzielle Informationswunsch über die aktuelle Fortbewegungsfahrt dem Nutzer akustisch und/oder optisch über die Ausgabeeinheit oder über das Infotainmentsystem des Fahrzeugs ausgegeben werden. Somit kann der Nutzer bei einer manuellen oder vollautonomen oder teilautonomen Fortbewegungsfahrt des Fahrzeugs über den jeweiligen aktuellen Reisezustand oder Reiseverlauf informiert werden.In a further exemplary embodiment of the invention, it is provided that the evaluation unit, depending on the potential user need of the user, determines a potential information request by the user relating to a current locomotion trip of the vehicle, with a current locomotion status and/or depending on navigation information from a navigation system of the vehicle current travel information about the vehicle's current travel journey is output to the user, in particular depending on the recorded interaction of the user with the object, an alternative destination and/or an alternative travel route and/or at least one stopover is provided to the user. In other words, based on the detected interaction of the user with the object, which in this exemplary embodiment is a wristwatch, for example, the potential information request can be predicted or interpreted or determined as the user's intention. The potential request for information can be a wish, a desire or a need on the part of the user for a current interim report on the current journey. Thus, by deriving the user's intention based on the interaction, the user can be given a current briefing about the current state of the locomotion journey. The potential request for information about the current locomotion journey can be output to the user acoustically and/or visually via the output unit or via the vehicle's infotainment system. In this way, the user can be informed about the respective current travel status or travel history when the vehicle is driving manually or fully autonomously or partially autonomously.

Die Informationen betreffend die aktuelle Fortbewegungsfahrt des Fahrzeugs werden anhand von Navigationsinformationen beziehungsweise Navigationsdaten des Navigationssystems des Fahrzeugs ausgewertet und bereitgestellt. Insbesondere können dem Nutzer über die Ausgabeeinheit kontinuierlich Informationen bezüglich der aktuell durchgeführten Fortbewegungsfahrt ausgegeben werden. Dabei kann ein aktueller Fortbewegungsstatus und/oder ein zukünftiger Fortbewegungsstatus und/oder eine aktuelle Fortbewegungsinformation und/oder eine zukünftige Fortbewegungsinformation bezüglich der Reiseroute und/oder des Reiseverlaufs bereitgestellt werden. Ebenso kann der Nutzer auf eine situationsabhängige Veränderung beziehungsweise Anpassung der Fortbewegungsfahrt hingewiesen beziehungsweise darüber informiert werden.The information relating to the vehicle's current locomotion journey is evaluated and made available using navigation information or navigation data from the vehicle's navigation system. In particular, the user can be continuously given information about the currently performed locomotion journey via the output unit. A current status of travel and/or a future status of travel and/or current information about travel and/or future information about travel with regard to the travel route and/or the course of travel can be provided. Likewise, the user can be informed about a situation-dependent change or adjustment of the locomotion journey or be informed about it.

Eine weitere Möglichkeit ist, dass in Abhängigkeit von der erfassten Interaktion des Nutzers mit dem Gegenstand eine Intention des Nutzers interpretiert wird, bei welcher der Nutzer einen Wunsch oder ein Verlangen äußert, dass eine Änderung der aktuellen Fortbewegungsfahrt beziehungsweise der aktuellen Reiseroute durchgeführt werden soll. Dabei kann anhand der Interaktion des Nutzers mit dem Gegenstand durch die Auswerteeinheit interpretiert werden, dass der Nutzer ein alternatives Ziel und/oder eine alternative Fortbewegungsroute und/oder einen oder mehrere neue geänderte Zwischenstopps während der Reiseroute wünscht. Somit kann die aktuell durchgeführte Fortbewegungsfahrt jederzeit an die aktuellen Bedürfnisse und/oder Wünsche des Nutzers entsprechend angepasst und darauf automatisch eingegangen werden.Another possibility is that, depending on the recorded interaction of the user with the object, an intention of the user is interpreted, in which the user expresses a wish or a request that the current journey or the current travel route should be changed. The interaction of the user with the object can be used by the evaluation unit to interpret that the user wants an alternative destination and/or an alternative travel route and/or one or more new, modified stopovers during the travel route. In this way, the locomotion journey currently being carried out can be adapted at any time to the current needs and/or wishes of the user, and these can be dealt with automatically.

In einem weiteren vorteilhaften Ausführungsbeispiel der Erfindung ist vorgesehen, dass in Abhängigkeit von dem potenziellen Nutzerbedürfnis des Nutzers die zumindest eine Funktionseinheit des Fahrzeugs derart eingestellt wird, dass ein Fahrverhalten des Fahrzeugs an die erfasste Interaktion des Nutzers mit dem Gegenstand angepasst wird, insbesondere bei der Anpassung das Fahrverhalten einen Fahrzeugzustand des Fahrzeugs und/oder eine Verkehrsinformation in der Umgebung des Fahrzeugs und/oder eine Umgebungsinformation der Umgebung des Fahrzeugs berücksichtigt. Anhand der Auswertung des potenziellen Nutzerbedürfnisses des Nutzers kann darauf geschlossen werden, dass der Nutzer aktuell ein komfortableres, ruhigeres, angenehmeres oder erschütterungsminimiertes Fahrverhalten wünscht.In a further advantageous exemplary embodiment of the invention, it is provided that, depending on the user's potential user needs, the at least one functional unit of the vehicle is set in such a way that a driving behavior of the vehicle is adapted to the detected interaction of the user with the object, in particular during the adaptation the driving behavior a vehicle state of the vehicle and/or traffic information in the vicinity of the vehicle and/or environmental information about the area surrounding the vehicle is taken into account. Based on the evaluation of the user's potential user needs, it can be concluded that the user currently wants a more comfortable, quieter, more pleasant or vibration-minimized driving behavior.

Beispielsweise kann es sich bei diesem Ausführungsbeispiel bei dem Gegenstand um einen Trinkbecher handeln, so dass in diesem Beispiel die Interaktion ein Trinken eines Getränks oder einer Flüssigkeit des Nutzers darstellt. Bei dieser Interaktion kann von der Auswerteeinheit interpretiert werden, dass während der Interaktion des Nutzers mit dem Getränkebehälter als Gegenstand ein erschütterungsfreies Fahrverhalten ohne ruckartige Bewegungen des Fahrzeugs gewünscht wird, so dass der Nutzer sein Getränk ohne ein Verschütten zu sich nehmen kann. Somit muss der Betriebszustand der Funktionseinheit in diesem Fall derart eingestellt beziehungsweise angepasst werden, dass das Fahrverhalten des Fahrzeugs sich an die Interaktion des Nutzers mit dem Gegenstand anpasst.For example, in this exemplary embodiment, the object can be a drinking cup, so that in this example the interaction represents the user drinking a beverage or a liquid. During this interaction, the evaluation unit can interpret that vibration-free driving behavior without jerky movements of the vehicle is desired during the interaction of the user with the beverage container as the object, so that the user can drink his beverage without spilling it. In this case, the operating state of the functional unit must be set or adjusted in such a way that the driving behavior of the vehicle adapts to the user's interaction with the object.

In diesem Fall kann es sich bei der zumindest einen Funktionseinheit um ein Fahrwerk oder um ein Lenksystem oder um Beschleunigungssystem oder um ein Bremssystem oder um ein Abstandeinhaltungssystem oder um Fahrerassistenzsystem des Fahrzeugs handeln. Bei der Anpassung des Fahrverhaltens des Fahrzeugs können Informationen über das aktuelle Verkehrsgeschehen in der Umgebung des Fahrzeugs berücksichtigt werden. Dabei kann das Verkehrsgeschehen in der Umgebung des Fahrzeugs mit der Erfassungseinrichtung des Fahrzeugs erfasst und ausgewertet werden.In this case, the at least one functional unit can be a chassis or a steering system or an acceleration system or a braking system or a distance maintenance system or a driver assistance system of the vehicle. When adapting the driving behavior of the vehicle, information about the current traffic situation in the vicinity of the vehicle can be taken into account. The traffic situation in the vicinity of the vehicle can be detected and evaluated with the detection device of the vehicle.

Die Anpassung des Fahrverhaltens des Fahrzeugs kann nur in dem Maß durchgeführt werden, dass die Fortbewegungsfahrt des Fahrzeugs in dem aktuellen Verkehr nicht beeinträchtigt wird. Insbesondere sollte das Fahrverhalten des Fahrzeugs auf Verkehrsvorschriften und/oder andere Verkehrsteilnehmer in der Umgebung des Fahrzeugs Rücksicht nehmen. Ebenso werden sicherheitskritische Informationen und/oder Zustände des Fahrzeugs bei der Anpassung des Fahrverhaltens berücksichtigt. Beispielsweise kann bei einer bevorstehenden Kurve und/oder bei einer bevorstehenden gefährlichen Verkehrssituation das Fahrverhalten nur bedingt an die Interaktion des Nutzers angepasst werden, da es sonst zu Kollisionen und/oder Unfällen und/oder gefährlichen Situationen kommen könnte. Bei den Umgebungsinformationen der Umgebung kann es sich beispielsweise um Witterungsinformationen und/oder einen Zustand der Fahrbahn oder um Verkehrssignale handeln.The adaptation of the driving behavior of the vehicle can only be carried out to the extent that the locomotion of the vehicle in the current traffic is not impaired. In particular, the driving behavior of the vehicle should take into account traffic regulations and/or other road users in the vicinity of the vehicle. Safety-critical information and/or states of the vehicle are also taken into account when adapting the driving behavior. For example, in the case of an upcoming curve and/or an impending dangerous traffic situation, the driving behavior can only be adapted to the interaction of the user to a limited extent, since collisions and/or accidents and/or dangerous situations could otherwise occur. The information about the surroundings can be, for example, weather information and/or a state of the roadway or traffic signals.

Bei den Fahrzeugzuständen des Fahrzeugs kann es sich beispielsweise um einen Zustand des Motors und/oder um einen Zustand der Bremsanlage oder um eine Motortemperatur oder um eine Konfiguration eines Fahrerassistenzsystems handeln.The vehicle states of the vehicle can be, for example, a state of the engine and/or a state of the brake system or an engine temperature or a configuration of a driver assistance system.

In einem weiteren Ausführungsbeispiel der Erfindung ist vorgesehen, dass dann, wenn bei der Auswertung der erfassten Informationen festgestellt wird, dass es sich bei dem erfassten Gegenstand um ein tragbares Kommunikationsendgerät und/oder um einen Kopfhörer handelt, das tragbare Kommunikationsendgerät und/oder der Kopfhörer mit einem Infotainmentsystem des Fahrzeugs drahtlos gekoppelt wird und/oder der Betriebszustand der zumindest einen Funktionseinheit in Abhängigkeit von einem Betriebszustand des tragbaren Kommunikationsendgeräts und/oder des Kopfhörers eingestellt wird. Mit anderen Worten kann bei der Feststellung, dass es sich bei dem Gegenstand um ein elektronisches Endgerät handelt, automatisch eine kommunikative Kopplung oder Vernetzung mit dem Fahrzeug hergestellt werden. Somit kann bei dem tragbaren Kommunikationsendgerät, wie beispielsweise einem Smartphone oder einem Tablet oder einer Smartwatch, das tragbare Kommunikationsendgerät automatisch mit dem Fahrzeug und/oder dem Infotainmentsystem des Fahrzeugs kommunikativ verbunden werden. Somit können spezifische Informationen und/oder Daten zwischen dem Fahrzeug und dem tragbaren Kommunikationsendgerät des Nutzers ausgetauscht werden. Beispielsweise können Einstellungen und/oder Kalendereinträge und/oder Musikdatenbanken und/oder Nutzerprofile des Nutzers von dem tragbaren Kommunikationsendgerät an das Fahrzeug und/oder das Infotainmentsystem des Fahrzeugs übertragen werden. Somit können am Fahrzeug spezifische Einstellungen in Bezug zu dem Nutzer durchgeführt werden. Somit kann das Fahrzeug besser an den Nutzer angepasst werden. Bei der Erfassung des Gegenstands als Kopfhörer kann es sich beispielsweise bei dem Kopfhörer um einen Bluetooth-fähigen Kopfhörer handeln. Somit kann das Infotainmentsystem des Fahrzeugs drahtlos mit dem Kopfhörer gekoppelt werden. Dabei kann beispielsweise als Betriebszustand der zumindest einen Funktionseinheit eine Audioausgabe und/oder eine Lautstärke angepasst werden. Ebenso kann beispielsweise als Betriebszustand der Funktionseinheit das Radio im Fahrzeuginnenraum deaktiviert und über den Kopfhörer dem Nutzer ausgegeben werden. Beispielsweise können in diesem Fall bestimmte Informationen oder Hinweise und/oder Anweisungen dem Nutzer an das tragbare Kommunikationsendgerät und/oder den Kopfhörer übertragen werden, so dass an den Nutzer über das tragbare Kommunikationsendgerät und/oder den Kopfhörer die entsprechenden Informationen ausgegeben werden.In a further exemplary embodiment of the invention, it is provided that if the evaluation of the recorded information determines that the recorded object is a portable communication terminal and/or a headphone, the portable communication terminal and/or the headphone with is wirelessly coupled to an infotainment system of the vehicle and/or the operating state of the at least one functional unit is set as a function of an operating state of the portable communication terminal and/or the headphones. In other words, when it is determined that the object is an electronic terminal device, a communicative coupling or networking with the vehicle can be established automatically. Thus, in the case of the portable communication terminal, such as a smartphone or a tablet or a smart watch, the portable communication terminal can be automatically communicatively connected to the vehicle and/or the infotainment system of the vehicle. Thus, specific information and/or data can be exchanged between the vehicle and the user's portable communication terminal. For example, settings and/or calendar entries and/or music databases and/or user profiles of the user can be transmitted from the portable communication terminal to the vehicle and/or the vehicle's infotainment system. In this way, specific settings relating to the user can be carried out on the vehicle. The vehicle can thus be better adapted to the user. If the object is detected as a headphone, the headphone can be a Bluetooth-enabled headphone, for example. This allows the vehicle's infotainment system to be wirelessly coupled to the headphones. In this case, for example, an audio output and/or a volume can be adjusted as the operating state of the at least one functional unit. Likewise, for example, the radio in the vehicle interior can be deactivated as the operating state of the functional unit and output to the user via the headphones. In this case, for example, specific information or notices and/or instructions can be transmitted to the user on the portable communication terminal and/or the headphones, so that the corresponding information is output to the user via the portable communication terminal and/or the headphones.

In einem weiteren Ausführungsbeispiel der Erfindung ist vorgesehen, dass die erfassten Informationen betreffend den Gegenstand, den Nutzer und die Interaktion und das bestimmte potenzielle Nutzerbedürfnis des Nutzers als Datensätze in einer Datenbank gespeichert werden, wobei bei einem Unterstützen einer zukünftigen Nutzersituation im Fahrzeug die gespeicherten Datensätze abgerufen und bei der Bestimmung eines zukünftigen potenziellen Nutzerbedürfnisses des Nutzers berücksichtigt werden. Mit anderen Worten können durch die Abspeicherung der erfassten Informationen bezüglich des Gegenstands, des Nutzers und der Interaktion zwischen dem Gegenstand und dem Nutzer zukünftige Nutzerbedürfnisse effizienter analysiert und ausgewertet werden. Somit können zukünftige Nutzersituationen des Nutzers des Fahrzeugs besser unterstützt werden, da die vergangenen Nutzersituationen des Nutzers und die verschiedensten Interaktionsformen und/oder Interaktionsarten des Nutzers berücksichtigt werden können. Beispielsweise kann durch die Berücksichtigung der abgespeicherten vergangenen Datensätze ein fortlaufendes und insbesondere automatisches Trainieren der Unterstützung der Nutzersituation durchgeführt werden. Beispielsweise kann hierfür eine Maschinenlerneinheit verwendet werden, um ein maschinelles Trainieren der Bestimmung des Nutzerbedürfnisses des Nutzers durchführen zu können. Somit kann die Bestimmung von zukünftigen Nutzerbedürfnissen fortlaufend verbessert werden. Somit kann der Nutzer durch verbesserte und insbesondere stetig verbesserte Unterstützungsmaßnahmen unterstützt werden.In a further exemplary embodiment of the invention, it is provided that the recorded information relating to the object, the user and the interaction and the specific potential user need of the user is stored as data records in a database, with the stored data records being retrieved when a future user situation in the vehicle is supported and taken into account in determining a future potential user need of the user. In other words, future user needs can be analyzed and evaluated more efficiently by storing the recorded information regarding the object, the user and the interaction between the object and the user. In this way, future user situations of the user of the vehicle can be better supported, since the user's past user situations and the most varied forms and/or types of interaction of the user can be taken into account. For example, continuous and in particular automatic training of the support for the user situation can be carried out by taking into account the stored past data sets. A machine learning unit can be used for this purpose, for example, in order to be able to carry out machine training to determine the user's needs. Thus, the determination of future user needs can be continuously improved. The user can thus be supported by improved and, in particular, continuously improved support measures.

Beispielsweise kann es sich bei der Datenbank um eine Speichereinheit beziehungsweise einen Speicherort im Fahrzeug oder um einen externen Server oder um eine Cloud-basierte Technologie handeln. Ebenso kann es sich bei der Datenbank um ein Backend handeln. Die jeweils benötigten vergangenen Datensätze können beispielsweise von der Auswerteeinheit aus der Datenbank abgerufen und bei der Bestimmung des Nutzerbedürfnisses berücksichtigt werden.For example, the database can be a storage unit or a storage location in the vehicle or an external server or cloud-based technology. The database can also be a backend. The past data records required in each case can, for example, be retrieved from the database by the evaluation unit and taken into account when determining the user's needs.

In einem weiteren Ausführungsbeispiel der Erfindung ist vorgesehen, dass der Vorschlag für die Einstellung des Betriebszustands der zumindest einen Funktionseinheit dem Nutzer mit der Ausgabeeinheit visuell und/oder akustisch und/oder haptisch zur Auswahl ausgegeben wird, wobei der Betriebszustand der zumindest einen Funktionseinheit in Abhängigkeit des ausgewählten Vorschlags des Nutzers eingestellt wird, insbesondere eine Hinweisinformation betreffend den eingestellten Betriebszustand der zumindest einen Funktionseinheit dem Nutzer mit der Erfassungseinheit ausgegeben wird. Durch die Ausgabe des Vorschlags für die Einstellung der Ausgabeeinheit kann dem Nutzer die Möglichkeit gegeben werden, über den Vorschlag entscheiden zu können. Mit Hilfe der Ausgabeeinheit kann der Nutzer den Vorschlag auswählen oder ablehnen. Insbesondere werden dem Nutzer mehrere, zumindest zwei verschiedene, Vorschläge für die Einstellung des Betriebszustands der zumindest einen Funktionseinheit ausgegeben. Somit hat der Nutzer eine vielfältige und umfangreiche Auswahlmöglichkeit für die Einstellung des Betriebszustands der zumindest einen Funktionseinheit. Beispielsweise kann der Nutzer über Spracherkennung oder über eine berührungssensitives Display den gewünschten Vorschlag und bestätigen beziehungsweise freigeben.In a further exemplary embodiment of the invention, it is provided that the suggestion for setting the operating state of the at least one functional unit is output to the user with the output unit for selection visually and/or acoustically and/or haptically, with the operating state of the at least one functional unit depending on the selected suggestion by the user is set, in particular information relating to the set operating state of the at least one functional unit is output to the user with the detection unit. By outputting the suggestion for setting the output unit, the user can be given the opportunity to decide on the suggestion. With the help of the output unit, the user can select or reject the suggestion. In particular, the user is given several, at least two different, suggestions for setting the operating state of the at least one functional unit. The user thus has a diverse and extensive selection option for setting the operating state of the at least one functional unit. For example, the user can use speech recognition or a touch-sensitive display to confirm or approve the desired suggestion.

Nachdem der ausgewählte Vorschlag freigegeben wurde und der Betriebszustand der zumindest einen Funktionseinheit eingestellt wurde, kann die entsprechende Hinweisinformation den nun eingestellten Betriebszustand dem Benutzer über die Ausgabeeinheit ausgegeben werden. Somit kann über den aktuellen Betriebszustand der Funktionseinheit der Nutzer jederzeit und insbesondere kontinuierlich informiert werden. Somit hat der Nutzer stetig eine Übersicht über den aktuellen Betriebszustand der zumindest einen Funktionseinheit.After the selected suggestion has been released and the operating state of the at least one functional unit has been set, the corresponding information about the now set operating state can be output to the user via the output unit. The user can thus be informed at any time and in particular continuously about the current operating status of the functional unit. The user thus always has an overview of the current operating status of the at least one functional unit.

Ebenso ist es denkbar, dass mehrere verschieden Funktionseinheiten im Fahrzeug verschieden eingestellt werden in Abhängigkeit von der Interaktion des Nutzers.It is also conceivable that several different functional units in the vehicle are set differently depending on the user's interaction.

Ein weiterer Aspekt der Erfindung betrifft ein elektronisches Nutzerunterstützungssystem mit zumindest einer Erfassungseinheit, zumindest einer Ausgabeeinheit und zumindest einer Auswerteeinheit, wobei das elektronische Nutzerunterstützungssystem zum Durchführen eines Verfahrens auf einem der vorherigen geschilderten Aspekte oder einer Weiterbildung daraus ausgebildet ist. Insbesondere wird das vorherig geschilderte Verfahren mit dem soeben geschilderten elektronischen Nutzerunterstützungssystem durchgeführt. Das elektronische Nutzerunterstützungssystem kann als zentrale Einheit oder dezentrale Einheit ausgebildet sein. Insbesondere kann das elektronische Nutzerunterstützungssystem vollständig in einem Fahrzeug integriert werden. Andernfalls können einzelne Komponenten des elektronischen Nutzerunterstützungssystems im Fahrzeug integriert sein und andere in einem externen Server oder in einer externen Einheit ausgebildet sein.A further aspect of the invention relates to an electronic user support system with at least one detection unit, at least one output unit and at least one evaluation unit, the electronic user support system being designed to carry out a method based on one of the previously described aspects or a development thereof. In particular, the method described above is carried out with the electronic user support system just described. The electronic user support system can be in the form of a central unit or a decentralized unit. In particular, the electronic user support system can be fully integrated in a vehicle. Otherwise, individual components of the electronic user support system can be integrated in the vehicle and others can be embodied in an external server or in an external unit.

Ein weiterer Aspekt der Erfindung betrifft ein Fahrzeug mit einem elektronischen Nutzerunterstützungssystem nach einem der vorherigen Aspekte oder einer Weiterbildung daraus. Bei dem Fahrzeug kann es sich beispielsweise um ein autonom fahrendes Fahrzeug handeln. Dabei kann es sich bei dem Fahrzeug um ein autonom fahrendes Fahrzeug mit dem Autonomielevel 3, 4 oder 5 handeln. Ebenso kann es sich bei dem Fahrzeug um ein zumindest teilautonom betreibbares Fahrzeug handeln.A further aspect of the invention relates to a vehicle with an electronic user support system according to one of the previous aspects or a development thereof. The vehicle can be an autonomously driving vehicle, for example. The vehicle can be an autonomously driving vehicle act at autonomy level 3, 4 or 5. The vehicle can also be a vehicle that can be operated at least partially autonomously.

Zu der Erfindung gehören auch Weiterbildungen des erfindungsgemäßen elektronischen Nutzerunterstützungssystems und des erfindungsgemäßen Fahrzeugs, die Merkmale aufweisen, wie sie bereits im Zusammenhang mit den Weiterbildungen des erfindungsgemäßen Verfahrens beschrieben worden sind. Aus diesem Grund sind die entsprechenden Weiterbildungen des erfindungsgemäßen elektronischen Nutzerunterstützungssystems und des erfindungsgemäßen Fahrzeugs hier nicht noch einmal beschrieben.The invention also includes developments of the electronic user support system according to the invention and of the vehicle according to the invention, which have features as have already been described in connection with the developments of the method according to the invention. For this reason, the corresponding developments of the electronic user support system according to the invention and the vehicle according to the invention are not described again here.

Die Erfindung umfasst auch die Kombinationen der Merkmale der beschriebenen Ausführungsformen.The invention also includes the combinations of features of the described embodiments.

Bei den im Folgenden erläuterten Ausführungsbeispielen handelt es sich um bevorzugte Ausführungsbeispiele der Erfindung. Bei den Ausführungsbeispielen stellen die beschriebenen Komponenten jeweils einzelne, unabhängig voneinander zu betrachtende Merkmale der Erfindung dar, welche die Erfindung jeweils auch unabhängig voneinander weiterbilden und damit auch einzeln oder in einer anderen als der gezeigten Kombination als Bestandteil der Erfindung anzusehen sind. Des Weiteren sind die beschriebenen Ausführungsbeispiele auch durch weitere der bereits beschriebenen Merkmale der Erfindung ergänzbar.The exemplary embodiments explained below are preferred exemplary embodiments of the invention. In the exemplary embodiments, the described components each represent individual features of the invention that are to be considered independently of one another, which also develop the invention independently of one another and are therefore also to be regarded as part of the invention individually or in a combination other than that shown. Furthermore, the exemplary embodiments described can also be supplemented by further features of the invention already described.

Im Folgenden werden Ausführungsbeispiele der Erfindung beschrieben. Hierzu zeigt die einzige 1 beispielsweise ein erfindungsgemäßes elektronisches Nutzerunterstützungssystem 1, mit welchem das erfindungsgemäße Verfahren zum Unterstützen einer Nutzersituation eines Nutzers 2 eines Fahrzeugs 3 während einer Fahrt mit dem Fahrzeug 3 durchgeführt werden kann. Bei dem elektronischen Nutzerunterstützungssystem 1 kann es sich beispielsweise um eine zentrale oder dezentrale Einheit handeln. Das elektronische Nutzerunterstützungssystem 1 kann entweder in das Fahrzeug 3 integriert werden oder als externe Einheit, wie beispielsweise als Backend oder als Datenwolke, ausgebildet sein. Insbesondere ist das elektronische Nutzerunterstützungssystem 1 über eine kommunikationstechnische Verbindung 4 mit dem Fahrzeug 3 und insbesondere mit Fahrzeugkomponenten und/oder Fahrzeugsystemen des Fahrzeugs 3 kommunikativ gekoppelt beziehungsweise verbunden.Exemplary embodiments of the invention are described below. For this shows the only 1 for example, an electronic user support system 1 according to the invention, with which the method according to the invention for supporting a user situation of a user 2 of a vehicle 3 while driving the vehicle 3 can be carried out. The electronic user support system 1 can be a centralized or decentralized unit, for example. The electronic user support system 1 can either be integrated into the vehicle 3 or be designed as an external unit, for example as a backend or as a data cloud. In particular, the electronic user support system 1 is communicatively coupled or connected via a communications connection 4 to the vehicle 3 and in particular to vehicle components and/or vehicle systems of the vehicle 3 .

Insbesondere befindet sich der Nutzer 2 mit dem Fahrzeug 3 auf einer Fortbewegungsfahrt in einem realen Straßenverkehr. Dabei kann die Fortbewegungsfahrt des Fahrzeugs 3 entweder eine manuelle Fahrt durch den Nutzer 2 oder eine pilotierte Fahrt mit Hilfe eines Fahrerassistenzsystems des Fahrzeugs 3 sein. Beispielsweise kann es sich bei dem Fahrzeug 3 um ein vollautonom fahrendes Fahrzeug oder ein teilautonom beziehungsweise semiautonom fahrendes Fahrzeug handeln. Ebenso kann es sich bei dem Fahrzeug 3 um ein manuell fahrendes Fahrzeug durch den Nutzer 2 handeln, wobei hier der Nutzer 2 zumindest mit Hilfe des Fahrerassistenzsystems während der Fortbewegungsfahrt unterstützt werden kann.In particular, the user 2 is traveling with the vehicle 3 in real road traffic. The vehicle 3 can be driven either manually by the user 2 or piloted using a driver assistance system of the vehicle 3 . For example, the vehicle 3 can be a fully autonomous vehicle or a partially autonomous or semi-autonomous vehicle. Likewise, the vehicle 3 can be a manually driven vehicle by the user 2, in which case the user 2 can be supported at least with the aid of the driver assistance system during the locomotion journey.

Um nun den Nutzer während der Fortbewegungsfahrt des Fahrzeugs 3 bestmöglich unterstützen zu können, werden Nutzersituationen beziehungsweise aktuelle Situationen des Nutzers 2 im Fahrzeug 3 mit Hilfe des elektronischen Nutzerunterstützungssystems 1 bewertet beziehungsweise beurteilt. Bei der Nutzersituation des Nutzers 2 handelt es sich insbesondere um eine Intention des Nutzers 2, wie beispielsweise ein Bedürfnis oder ein Wunsch oder ein Anliegen. Um dieses Bedürfnis, diesen Wunsch oder dieses Anliegen des Nutzers 2 bestmöglich erfüllen zu können, wird die Intention des Nutzers 2 mit Hilfe des elektronischen Nutzerunterstützungssystems 1 vorhergesagt beziehungsweise bestimmt.In order to be able to provide the user with the best possible support while the vehicle 3 is moving, user situations or current situations of the user 2 in the vehicle 3 are evaluated or assessed with the aid of the electronic user support system 1 . The user situation of the user 2 is in particular an intention of the user 2, such as a need or a wish or a concern. In order to be able to fulfill this need, this wish or this concern of the user 2 in the best possible way, the intention of the user 2 is predicted or determined with the aid of the electronic user support system 1 .

Damit die Intention des Nutzers 2 beurteilt beziehungsweise abgeleitet werden kann, kann eine Interaktion 5 des Nutzers 2 mit einem Gegenstand 6 erfasst werden. Bei der Interaktion 5 handelt es sich insbesondere um eine wechselseitige aufeinander einwirkende Handlung zwischen dem Nutzer 2 und dem Gegenstand 6. Das Erfassen der Interaktion 5 kann mit einer Erfassungseinheit 7 des Fahrzeugs 3 durchgeführt werden. Beispielsweise kann es sich bei der Erfassungseinheit 7 um ein Sensorsystem oder um ein Innenraum-Kamerasystem oder um eine Kameraeinheit oder um ein Kamerasystem oder um eine Fahrerbeobachtungskamera handeln. Insbesondere können mit der Erfassungseinheit 7 der Gegenstand 6, der Nutzer 2 und die Interaktion 5 erfasst werden. Die Erfassung erfolgt insbesondere kontinuierlich und automatisch. Insbesondere wird sobald eine Interaktion 5 zwischen dem Gegenstand 6 und dem Nutzer 2 stattfindet, dies von der Erfassungseinheit 7 automatisch erfasst.So that the intention of the user 2 can be assessed or derived, an interaction 5 of the user 2 with an object 6 can be recorded. The interaction 5 is in particular a mutual action between the user 2 and the object 6 . The interaction 5 can be detected with a detection unit 7 of the vehicle 3 . For example, the detection unit 7 can be a sensor system or an interior camera system or a camera unit or a camera system or a driver observation camera. In particular, the object 6 , the user 2 and the interaction 5 can be detected with the detection unit 7 . The detection takes place in particular continuously and automatically. In particular, as soon as an interaction 5 takes place between the object 6 and the user 2, this is automatically detected by the detection unit 7.

Bei dem Gegenstand 6 handelt es sich insbesondere um keine Fahrzeugkomponente des Fahrzeugs 3. Der Gegenstand 6 ist insbesondere keine einer der Funktionen des Fahrzeugs 3 bestimmungsgemäß zugehörige Komponente. Mit anderen Worten handelt es sich bei dem Gegenstand 6 um einen zum Fahrzeug 3 verschiedenen, separaten Gegenstand beziehungsweise um ein zum Fahrzeug 3 separates Objekt. Insbesondere handelt es sich bei dem Gegenstand um ein am Körper des Nutzers 2 selbst haltendes Objekt beziehungsweise um einen selbst haltenden Gegenstand. Insbesondere wird der Gegenstand 6 vom Nutzer 2 getragen. Beispielsweise handelt es sich bei dem Gegenstand 6 um einen Sonnenschirm, eine Sonnenbrille, eine Lesebrille, ein Smartphone, eine Armbanduhr, eine Smartwatch, ein Tablet, ein Buch, eine Zeitschrift, ein Getränk, einen Kopfhörer, einen Laptop oder einen Terminplaner. Diese Beispiele für den Gegenstand 6 sind nicht abschließend zu verstehen, sondern sollen lediglich einen Ausschnitt der Vielzahl an möglichen Gegenständen aufzeigen.The object 6 is in particular not a vehicle component of the vehicle 3. The object 6 is in particular not a component associated with one of the functions of the vehicle 3 as intended. In other words, the object 6 is a different, separate object from the vehicle 3 or an object that is separate from the vehicle 3 . In particular, the object is an object held on the body of the user 2 or a self-held object. In particular, the Item 6 worn by user 2. For example, the object 6 is a parasol, sunglasses, reading glasses, a smartphone, a wristwatch, a smartwatch, a tablet, a book, a magazine, a drink, headphones, a laptop or a personal organizer. These examples of item 6 are not to be understood as conclusive, but are merely intended to show a selection of the large number of possible items.

Die erfassten Informationen betreffend den Nutzer 2, die Interaktion 5 und den Gegenstand 6 können an eine Auswerteeinheit 8 des elektronischen Nutzerunterstützungssystems 1 bereitgestellt werden. Dabei kann die Erfassungseinheit 7 diese Informationen über die kommunikationstechnische Verbindung 4 dem elektronischen Nutzerunterstützungssystem 1 und somit der Auswerteeinheit 8 übermitteln und somit zur Verfügung stellen. Mit Hilfe der Auswerteeinheit 8, welche beispielsweise eine Recheneinheit sein kann, können die erfassten Informationen analysiert und ausgewertet werden.The recorded information relating to the user 2, the interaction 5 and the object 6 can be provided to an evaluation unit 8 of the electronic user support system 1. In this case, the detection unit 7 can transmit this information to the electronic user support system 1 and thus to the evaluation unit 8 via the communication-related connection 4 and thus make it available. The recorded information can be analyzed and evaluated with the aid of the evaluation unit 8, which can be a computing unit, for example.

Insbesondere erfolgt mit Hilfe der Erfassungseinheit 7 und der Auswerteeinheit 8 eine Registrierung, Überwachung und Auswertung der Interaktion 5 zwischen dem Nutzer 2 und dem Gegenstand 6.In particular, the interaction 5 between the user 2 and the object 6 is registered, monitored and evaluated with the aid of the detection unit 7 and the evaluation unit 8.

Mit Hilfe der Auswerteeinheit 8 kann in Abhängigkeit von den erfassten Informationen eine Intention des Nutzers 2 abgeleitet werden. Anhand dieser abgeleiteten Intention kann beispielsweise eine Interaktion und/oder eine Rückmeldung durch das Fahrzeug 3 veranlasst werden.An intention of the user 2 can be derived with the aid of the evaluation unit 8 as a function of the recorded information. This derived intention can be used, for example, to initiate an interaction and/or feedback from the vehicle 3 .

Mit Hilfe der Auswerteeinheit 8 kann insbesondere ein potenzielles beziehungsweise mögliches Nutzerbedürfnis des Nutzers 2 bestimmt werden. Bei dem potenziellen Nutzerbedürfnis kann es sich insbesondere um ein aktuelles Nutzerbedürfnis oder zukünftiges Nutzerbedürfnis handeln. Insbesondere handelt es sich bei dem Nutzerbedürfnis um eine Intention des Nutzers 2. Insbesondere erfolgen in Abhängigkeit von den erfassten Informationen betreffend den Gegenstand 6, den Nutzer 2 und die Interaktion 5 eine Ermittlung und Vorhersage beziehungsweise Generierung des potenziellen Nutzerbedürfnisses.In particular, a potential or possible user need of the user 2 can be determined with the aid of the evaluation unit 8 . The potential user need can in particular be a current user need or a future user need. In particular, the user need is an intention of the user 2. In particular, depending on the recorded information regarding the object 6, the user 2 and the interaction 5, the potential user need is determined and predicted or generated.

Beispielsweise können die erfassten Informationen betreffend den Gegenstand 6, den Nutzer 2 und die Interaktion 5 sowie das bestimmte Nutzerbedürfnis in einer Datenbank 9 gespeichert werden. Bei der Datenbank 9 kann es sich beispielsweise um eine Cloud-basierte Technologie oder um ein Backend oder um einen externen Server oder um eine Speichereinheit handeln. Mit Hilfe der gespeicherten Informationen können zukünftige Nutzerbedürfnisse und/oder Nutzersituationen des Nutzers 2 bei einer zukünftigen Fortbewegungsfahrt des Fahrzeugs 3 verbessert und insbesondere effizienter bestimmt werden. Die in der Datenbank 9 gespeicherten Datensätze der erfassten und bestimmten Informationen können insbesondere für ein kontinuierliches und sukzessives Trainieren beziehungsweise Lernen des elektronischen Nutzerunterstützungssystems 1 verwendet werden. Somit kann beispielsweise ein maschinelles Trainieren des elektronischen Nutzerunterstützungssystems 1 und der Auswerteeinheit 8 für die Bestimmung der Intention des Nutzers 2 verwendet werden.For example, the recorded information relating to the object 6, the user 2 and the interaction 5 as well as the specific user need can be stored in a database 9. The database 9 can be, for example, a cloud-based technology or a backend or an external server or a storage unit. With the help of the stored information, future user needs and/or user situations of the user 2 can be improved and, in particular, determined more efficiently when the vehicle 3 drives in the future. The data records of the recorded and determined information stored in the database 9 can be used in particular for continuous and successive training or learning of the electronic user support system 1 . Thus, for example, machine training of the electronic user support system 1 and the evaluation unit 8 can be used to determine the intention of the user 2 .

Um nun den Nutzer 2 in der Nutzersituation beziehungsweise in der aktuellen Situation unterstützen zu können, kann in Abhängigkeit von dem bestimmten potenziellen Nutzerbedürfnis des Nutzers 2 ein spezifischer, die Unterstützung fördernder, Betriebszustand zumindest einer im oder am Fahrzeug 3 befindlichen Funktionseinheit 10 des Fahrzeugs 3 automatisch eingestellt werden. Somit erfolgt die Unterstützung des Nutzers 2 derart, dass die vielfältigsten und unterschiedlichsten Systeme, Funktionen oder Komponenten des Fahrzeugs 3 entsprechend eingestellt beziehungsweise an die Intention des Nutzers 2 angepasst werden. Insbesondere erfolgt das Einstellen der zumindest einen Funktionseinheit 10 mit Hilfe des elektronischen Nutzerunterstützungssystems 1 und insbesondere mit der Auswerteeinheit 8.In order to be able to support the user 2 in the user situation or in the current situation, a specific, support-promoting, operating state of at least one functional unit 10 of the vehicle 3 located in or on the vehicle 3 can automatically be activated depending on the specific potential user need of the user 2 to be set. The user 2 is thus supported in such a way that the most varied and varied systems, functions or components of the vehicle 3 are set accordingly or adapted to the intention of the user 2 . In particular, the at least one functional unit 10 is set with the aid of the electronic user support system 1 and in particular with the evaluation unit 8.

Die Funktionseinheit 10 kann insbesondere an beliebigsten Stellen am und im Fahrzeug 3 angeordnet sein. Beispielsweise handelt es sich bei der Funktionseinheit 10 um ein Motorsteuergerät oder ein Infotainmentsystem oder ein Fahrwerksystem oder ein Bremssystem oder um ein Beschleunigungssystem oder um ein Navigationssystem oder um ein Komfortsystem oder ein Beleuchtungssystem des Fahrzeugs 3. Diese Beispiele sind nicht abschließend zu verstehen, sondern sollen lediglich einen kleinen Einblick in die Möglichkeiten der Funktionseinheit 10 geben.The functional unit 10 can in particular be arranged at any number of points on and in the vehicle 3 . For example, the functional unit 10 is an engine control unit or an infotainment system or a chassis system or a braking system or an acceleration system or a navigation system or a comfort system or a lighting system of the vehicle 3. These examples are not to be understood as conclusive, but should only be understood give a little insight into the possibilities of the functional unit 10.

Eine weitere Möglichkeit ist, dass dem Nutzer 2 zumindest ein Vorschlag für eine Einstellung des Betriebszustands der zumindest einen Funktionseinheit 10 durch eine Ausgabeeinheit 11 im Fahrzeug 3 ausgegeben wird. Somit können dem Nutzer 2 mehrere Vorschläge wahlweise zur Auswahl bereitgestellt und ausgegeben werden. Dabei können diese Vorschläge mit Hilfe der Ausgabeeinheit 11 dem Nutzer 2 visuell und/oder akustisch und/oder haptisch ausgegeben werden. Somit kann der Nutzer 2, bei welchem es sich um einen Passagier oder um einen Fahrzeuglenker handelt, seinen favorisierten Vorschlag entsprechend auswählen. Dabei kann das Auswählen über eine Spracherkennung oder über eine berührungssensitive Fläche der Ausgabeeinheit 11 erfolgen. Bei der Ausgabeeinheit 11 kann es sich beispielsweise um einen Bildschirm oder um Infotainmentsystem oder um Lautsprechersystem oder um ein berührungssensitives Display im Fahrzeug 3 handeln. Beispielsweise kann in Abhängigkeit von dem bestimmten potenziellen Nutzerbedürfnis des Nutzers 2 beziehungsweise der Intention des Nutzers 2 ein Steuersignal zum Einstellen des Betriebszustands der Funktionseinheit 10 generiert werden. Die Generierung des Steuersignals kann beispielsweise mit Hilfe des elektronischen Nutzerunterstützungssystems 1 erfolgen und beispielsweise über die kommunikationstechnische Verbindung 4 an die Funktionseinheit 10 übermittelt werden.A further possibility is that at least one suggestion for setting the operating state of the at least one functional unit 10 is output to the user 2 by an output unit 11 in the vehicle 3 . In this way, the user 2 can optionally be provided with and output a number of suggestions for selection. In this case, these suggestions can be output to the user 2 visually and/or acoustically and/or haptically with the aid of the output unit 11 . The user 2, who is a passenger or a vehicle driver, can thus select his favorite suggestion accordingly. The selection can be made via voice recognition or via a touch-sensitive surface of the output unit 11 done. The output unit 11 can be, for example, a screen or an infotainment system or a loudspeaker system or a touch-sensitive display in the vehicle 3 . For example, depending on the specific potential user need of the user 2 or the intention of the user 2, a control signal for setting the operating state of the functional unit 10 can be generated. The control signal can be generated, for example, with the aid of the electronic user support system 1 and can be transmitted to the functional unit 10 via the communications connection 4 , for example.

Im Folgenden werden einige mögliche Ausführungsbeispiele für das Unterstützen der Nutzersituation des Nutzers 2 aufgezeigt.Some possible exemplary embodiments for supporting the user situation of the user 2 are shown below.

In einem Ausführungsbeispiel kann vorgesehen sein, dass es sich bei dem Gegenstand 6 um eine Armbanduhr des Nutzers 2 handelt. Wenn nun der Nutzer 2 auf die Armbanduhr blickt, was beispielsweise durch eine Innenraumkamera der Erfassungseinheit 7 oder über eine Lagesensorik, wenn es sich bei der Armbanduhr um eine Smartwatch handelt, registriert wird, wird dies mit Hilfe des elektronischen Nutzerunterstützungssystems 1 dem Fahrzeug 3 rückgemeldet. Daraufhin wird als Interaktion 5 der Blick des Nutzers 2 auf die Armbanduhr ausgewertet beziehungsweise beurteilt. Daraufhin kann auf die Intention rückgeschlossen und vom elektronischen Nutzerunterstützungssystem 1 abgeleitet werden, dass der Nutzer 2 über den Fahrtfortschritt und eine voraussichtliche Ankunftszeit informiert werden möchte. Dies erfolgt auf Basis des Fortschritts der Reise und dem Ziel der Fortbewegungsfahrt des Fahrzeugs 3. Ebenfalls werden hierzu wichtige gekennzeichnete Termine in einem Kalender und/oder in einem Terminplaner des Passagiers 2 berücksichtigt. Daraufhin kann eine entsprechende Durchsage oder eine Einblendung auf einem Display im Fahrzeuginnenraum 12 ausgegeben werden. Dabei kann in diesem Ausführungsbeispiel das Display als Ausgabeeinheit 11 verstanden werden. Ebenfalls denkbar ist, dass die entsprechenden Meldungen über den Fahrtfortschritt oder die voraussichtliche Ankunftszeit auf einem Smartphone oder einer Smartwatch des Nutzers 2 ausgegeben werden.In one exemplary embodiment, it can be provided that the object 6 is a wristwatch belonging to the user 2 . If the user 2 now looks at the wristwatch, which is registered, for example, by an interior camera of the detection unit 7 or via a position sensor if the wristwatch is a smartwatch, this is reported back to the vehicle 3 with the help of the electronic user support system 1. The user's 2 look at the wristwatch is then evaluated or assessed as interaction 5 . The intention can then be inferred and derived from the electronic user support system 1 that the user 2 would like to be informed about the progress of the journey and an estimated time of arrival. This takes place on the basis of the progress of the journey and the destination of the journey of the vehicle 3. Important appointments marked in a calendar and/or in a scheduler of the passenger 2 are also taken into account for this purpose. A corresponding announcement or an overlay can then be output on a display in the vehicle interior 12 . The display can be understood as an output unit 11 in this exemplary embodiment. It is also conceivable that the corresponding reports about the progress of the journey or the estimated time of arrival are output on a smartphone or a smartwatch of the user 2 .

In einem weiteren Ausführungsbeispiel handelt es sich bei der Interaktion 5 um den Fall, dass der Nutzer 2 als Gegenstand 6 ein Buch oder eine Zeitschrift aufgeschlagen hat. Das Buch beziehungsweise die Zeitschrift als Gegenstand 6 kann wiederum durch eine Innenraumkamera der Erfassungseinheit 7 detektiert beziehungsweise erfasst werden. Durch eine weitere Erfassungseinrichtung 13 kann zumindest eine Umgebungsinformation betreffend eine Umgebung 14 des Fahrzeugs 3 und/oder zumindest eine Innenrauminformation betreffend den Fahrzeuginnenraum 12 des Fahrzeugs 3 erfasst werden. Mit Hilfe dieser erfassten Umgebungsinformationen und/oder Innenrauminformation kann mit der Auswerteeinheit 8 eine Lichtsituation im Fahrzeuginnenraum 12 bewertet werden. Anhand dieser Bewertung kann das elektronische Nutzerunterstützungssystem 1 Verdunkelungsmöglichkeiten und/oder Beleuchtungssysteme als Funktionseinheiten 10 aktivieren, so dass insbesondere das Lesen des Buches augenschonend für den Nutzer 2 ermöglicht werden kann. Sollte mit der Erfassungseinheit 7 nun detektiert werden, dass der Nutzer 2 das Buch wieder weglegt oder seinen Blick zum Fenster des Fahrzeugs 3 richtet, so kann wiederum die Verdunkelung beziehungsweise die Beleuchtung des Fahrzeuginnenraums 12 situationsabhängig verändert beziehungsweise angepasst werden.In a further exemplary embodiment, the interaction 5 is the case in which the user 2 has opened a book or a magazine as the object 6 . The book or the magazine as an object 6 can in turn be detected or recorded by an interior camera of the recording unit 7 . At least one piece of environmental information relating to surroundings 14 of vehicle 3 and/or at least one piece of interior information relating to vehicle interior 12 of vehicle 3 can be captured by a further detection device 13 . A lighting situation in the vehicle interior 12 can be evaluated with the evaluation unit 8 with the aid of this recorded environmental information and/or interior information. On the basis of this evaluation, the electronic user support system 1 can activate blackout options and/or lighting systems as functional units 10, so that the user 2 can read the book in a way that is easy on the eyes. Should it now be detected with the detection unit 7 that the user 2 puts the book down again or directs his gaze to the window of the vehicle 3, the darkening or the lighting of the vehicle interior 12 can in turn be changed or adjusted depending on the situation.

In einem weiteren Ausführungsbeispiel handelt es sich bei dem Gegenstand 6 um ein Getränk beziehungsweise um einen Getränkebehälter. Sollte nun der Nutzer 2 das Getränk beispielsweise auf seine Hose verschütten, so wird dies durch die Erfassungseinheit 7 erfasst. Diese Situation wird als Interaktion 5 durch die Auswerteeinheit 8 bewertet, so dass beispielsweise auf Basis von Navigationsdaten und/oder Navigationsinformationsinformationen eine passende Reinigung in der Umgebung 14 des Fahrzeugs 3 ermittelt werden kann. Diese Reinigungsmöglichkeit kann mit Hilfe der Ausgabeeinheit 11 entweder akustisch als Durchsage oder visuell durch eine Displayeinblendung dem Nutzer 2 ausgegeben und bereitgestellt werden. Daraufhin kann der Nutzer 2 selbst entscheiden, ob als neues Ziel diese Reinigungsmöglichkeit angesteuert werden soll.In a further exemplary embodiment, the object 6 is a beverage or a beverage container. If the user 2 now spills the drink on his pants, for example, this is detected by the detection unit 7 . This situation is evaluated as an interaction 5 by the evaluation unit 8 so that suitable cleaning in the surroundings 14 of the vehicle 3 can be determined, for example on the basis of navigation data and/or navigation information. This cleaning option can be output and made available to the user 2 with the aid of the output unit 11 either acoustically as an announcement or visually by means of a display. The user 2 can then decide for himself whether this cleaning option should be selected as the new destination.

In einem weiteren Ausführungsbeispiel kann es sich bei dem Gegenstand 6 um eine Sonnenbrille handeln. Sollte es sich bei der Interaktion 5 hier um ein Aufsetzten der Sonnenbrille von dem Nutzer 2 handeln, so wird diese spezielle Interaktion 5 durch die Erfassungseinheit 7 erfasst. Daraufhin kann als Intention beziehungsweise Nutzerbedürfnis mit Hilfe der Auswerteeinheit 8 ermittelt werden, dass eine Verdunkelung beziehungsweise eine Reduzierung der Helligkeit im Fahrzeuginnenraum 12 durchzuführen ist. Somit kann beispielsweise eine Beleuchtung und/oder ein Lichtverhältnis im Fahrzeuginnenraum 12 des Fahrzeugs 3 mit der zumindest einen Funktionseinheit 10 des Fahrzeugs 3 eingestellt werden.In a further exemplary embodiment, the object 6 can be a pair of sunglasses. If the interaction 5 is the user 2 putting on the sunglasses, this special interaction 5 is recorded by the detection unit 7 . It can then be determined as an intention or user need with the aid of the evaluation unit 8 that a darkening or a reduction in the brightness in the vehicle interior 12 is to be carried out. Thus, for example, lighting and/or a lighting ratio in the vehicle interior 12 of the vehicle 3 can be adjusted with the at least one functional unit 10 of the vehicle 3 .

In einem weiteren Ausführungsbeispiel kann es sich bei dem Gegenstand 6 um einen Kopfhörer handeln. Dabei kann die Erfassung des Kopfhörers über die Erfassungseinheit 7 erfolgen oder über eine Kommunikationseinheit des Kopfhörers kann das Vorhandensein des Kopfhörers beispielsweise im Infotainmentsystem des Fahrzeugs 3 eigenständig ermittelt werden. In diesem Fall handelt es sich bei der Interaktion 5 um das Benutzen der Kopfhörer durch den Nutzer 2. Dabei kann in dieser Nutzersituation als Funktionseinheit 10 ein Radio des Fahrzeugs 3 deaktiviert oder ein akustisches Signal des Radius auf den Kopfhörer umgeleitet werden. Ein ähnliches Beispiel wäre in analoger Weise eine 3D-Brille.In a further exemplary embodiment, the object 6 can be a headphone. The headphones can be detected via the detection unit 7 or via a communication unit of the headphones, the presence of the headphones can be detected, for example in the Infotainment system of the vehicle 3 are determined independently. In this case, the interaction 5 is the use of the headphones by the user 2. In this user situation, a radio of the vehicle 3 can be deactivated as a functional unit 10, or an acoustic signal from the radius can be diverted to the headphones. A similar example would be 3D glasses in an analogous manner.

Bei einem weiteren Ausführungsbeispiel kann es sich bei dem Gegenstand 6 um ein tragbares Kommunikationsendgerät, wie beispielsweise ein Smartphone, handeln. Dabei agiert in diesem Fall der Nutzer 2 mit dem Smartphone. Beispielsweise kann hierfür der Nutzer 2 Applikationen (Apps) auf dem Smartphone nutzen. Dabei kann beispielsweise der Name und/oder die Art der genutzten Applikation mögliche detaillierte Nutzungsinformationen über eine Kommunikationsschnittstelle mit dem Fahrzeug 3 ausgetauscht werden. Mit Hilfe dieser ausgetauschten Informationen kann eine Intention des Nutzers 2 abgeleitet werden, so dass eine entsprechende Reaktion durchgeführt werden kann. Dabei kann beispielsweise der Nutzer 2 die Kamera des Smartphones aktivieren und diese auf ein Fenster des Fahrzeugs 2 richten. Dabei kann mit Hilfe der Auswerteeinheit 8 interpretiert werden, dass es sich bei der Intention hierbei um ein Fotografieren der Umgebung 14 des Fahrzeugs 3 handelt. Hierfür kann beispielsweise als Funktionseinheit 10 eine Verdunkelung der Fahrzeugfenster beziehungsweise der Fahrzeugscheiben verändert werden oder eine Geschwindigkeit eines Fahrzeugscheibenwischers angepasst werden. Somit kann der Nutzer 2 die Umgebung 14 mit Hilfe der Kamera des Smartphones erfassen.In a further exemplary embodiment, the object 6 can be a portable communication terminal such as a smartphone. In this case, the user 2 acts with the smartphone. For example, the user can use 2 applications (apps) on the smartphone for this purpose. In this case, for example, the name and/or the type of application used can be exchanged with the vehicle 3 via a communication interface. With the help of this exchanged information, an intention of the user 2 can be derived, so that a corresponding reaction can be carried out. In this case, for example, the user 2 can activate the smartphone's camera and point it at a window of the vehicle 2 . The evaluation unit 8 can be used to interpret that the intention here is to photograph the surroundings 14 of the vehicle 3 . For this purpose, for example, as a functional unit 10, a darkening of the vehicle windows or the vehicle panes can be changed or a speed of a vehicle windscreen wiper can be adjusted. The user 2 can thus capture the surroundings 14 using the smartphone's camera.

Ebenfalls kann der Nutzer 2 mit Hilfe der Applikation des Smartphones mit einer Dienstleistung (Buchladen, Blumenladen oder ein anderweitiges Geschäftsunternehmen) interagieren. Daraufhin kann das elektronische Nutzerunterstützungssystem 1 auf Basis von Navigationsdaten feststellen, dass eine entsprechende Filiale in der Nähe beziehungsweise der Umgebung 14 des Fahrzeugs 3 vorhanden ist. Daraufhin kann dem Nutzer 2 ein Vorschlag mit der Ausgabeeinheit 11 ausgegeben werden, so dass der Nutzer 2 auswählen kann, ob er zu dieser entsprechenden Filiale hinfahren wolle.The user 2 can also interact with a service (bookstore, flower shop or another business enterprise) using the smartphone application. The electronic user support system 1 can then determine on the basis of navigation data that there is a corresponding branch in the vicinity or in the vicinity 14 of the vehicle 3 . A suggestion can then be issued to the user 2 with the output unit 11, so that the user 2 can choose whether he wants to go to this branch in question.

In einem weiteren Ausführungsbeispiel kann es sich bei dem Gegenstand 6 um eine Flasche oder um einen Trinkbecher handeln. In diesem Fall handelt es sich bei der Interaktion 5 um ein Trinken des Nutzers 2 aus diesem Becher. Dies kann wiederum mit der Erfassungseinheit 7 erfasst werden. Daraufhin kann als Nutzerbedürfnis ermittelt werden, dass, solange der Nutzer 2 aus dem Becher trinkt, keine starken Lenk- und/oder Beschleunigungsaktionen des Fahrzeugs 3 erfolgen sollten. Daraufhin kann in Abhängigkeit von einem bestimmten potenziellen Nutzerbedürfnis als Funktionseinheit 10 beispielsweise ein Fahrwerk und/oder ein Fahrverhalten des Fahrzeugs 3 angepasst werden.In a further exemplary embodiment, the object 6 can be a bottle or a drinking cup. In this case, interaction 5 involves user 2 drinking from this cup. This can in turn be detected with the detection unit 7 . It can then be determined as a user requirement that, as long as the user 2 is drinking from the cup, no strong steering and/or acceleration actions of the vehicle 3 should take place. A chassis and/or a driving behavior of the vehicle 3, for example, can then be adapted as a function of a specific potential user need as a functional unit 10.

In einem weiteren Ausführungsbeispiel kann es sich bei dem Gegenstand 6 um einen Laptop oder um ein Tablet handeln. Daraufhin kann es sich bei dem Nutzerbedürfnis um eine angenehmere Sitzposition des Nutzers 2 handeln, so dass der Nutzer 2 möglichst komfortabel mit dem Laptop oder mit dem Tablet arbeiten kann. In dieser Situation kann der Betriebszustand der Funktionseinheit 10 beispielsweise eine Sitzeinstellung und/oder eine Bedienposition und/oder ein Lichtverhältnis in dem Fahrzeuginnenraum 12 sein.In a further exemplary embodiment, the object 6 can be a laptop or a tablet. The user requirement can then be a more comfortable sitting position for the user 2 so that the user 2 can work with the laptop or tablet as comfortably as possible. In this situation, the operating state of functional unit 10 can be, for example, a seat adjustment and/or an operating position and/or a lighting condition in vehicle interior 12 .

BezugszeichenlisteReference List

11: Elektronisches NutzerunterstützungssystemElectronic user support system
22: Nutzeruser
33: Fahrzeugvehicle
44: Kommunikationstechnische Verbindungcommunication technology connection
55: Interaktioninteraction
66: Gegenstandsubject
77: Erfassungseinheitregistration unit
88th: Auswerteeinheitevaluation unit
99: DatenbankDatabase
1010: Funktionseinheitfunctional unit
1111: Ausgabeeinheitoutput unit
1212: Fahrzeuginnenraumvehicle interior
1313: Erfassungseinrichtungdetection device
1414: Umgebung des Fahrzeugsenvironment of the vehicle

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents cited by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturPatent Literature Cited

DE 102013019210 A1 [0007]
DE 102012017276 A1 [0008]
DE 102005023697 A1 [0009]

Claims

Method for supporting a user situation of a user (2) of a vehicle (3) while driving the vehicle (3), in which the following steps are carried out: - Detecting an object (6) in the vehicle (3), which is not a vehicle component, in particular not a vehicle component, with which a function of the vehicle (3) can be adjusted, with a detection unit (7) of the vehicle (3); - detecting an interaction (5) of the user (2) in the vehicle (3) with the object (6) with a detection unit (7) of the vehicle (3); - Providing the recorded information to an evaluation unit (8); - Determination of a potential user need of the user (2) by the evaluation unit (8) depending on the recorded information relating to the object (6), the user (2) and the interaction (5); - Supporting the user situation in the vehicle (3) by automatically setting a specific operating state of at least one functional unit (10) of the vehicle (3) located in or on the vehicle (3) depending on the specific, potential user needs of the user (2), and /or a suggestion for setting an operating state of at least one functional unit (10) located in or on the vehicle (3) is output to the user (2) by an output unit (11) in the vehicle (3).

procedure after claim 1 , wherein at least one item of environmental information relating to an area (14) of the vehicle (3) and/or at least one piece of interior information relating to a vehicle interior (12) of the vehicle (3) is detected with a detection device (13) of the vehicle (3), the at least detected environmental information and/or the at least one detected interior information is taken into account when determining the potential user needs of the user (2).

procedure after claim 2 , wherein, depending on the at least one detected item of environmental information and/or the at least one detected item of interior information and/or the potential user needs of the user (2), lighting and/or a lighting condition in the vehicle interior (12) of the vehicle (3) with the at least a functional unit (10) of the vehicle (3) is set or suggested.

Method according to one of the preceding claims, with the evaluation unit (10) depending on the potential user need of the user (2), a potential information request of the user (2) regarding a current locomotion journey of the vehicle (3) is determined, depending on navigation information a navigation system of the vehicle (3) a current movement status and/or current movement information of the current journey made by the vehicle (3) is output to the user (2), in particular depending on the recorded interaction (5) of the user (2) with the Object (6) an alternative destination and / or an alternative route and / or at least one stopover is provided to the user (2).

Method according to one of the preceding claims, wherein depending on the potential user needs of the user (2), the at least one functional unit (10) of the vehicle (3) is set such that a driving behavior of the vehicle (3) to the detected interaction of the user (2) the object (6) is used to adjust a vehicle state of the vehicle (3) and/or traffic information in an area (14) of the vehicle (3) and/or environmental information about the area (14 ) of the vehicle (3) is taken into account.

Method according to one of the preceding claims, wherein if it is determined during the evaluation of the detected information that the detected object (6) is a portable communication terminal and/or a headphone, the portable communication terminal and/or the headphone is wirelessly coupled to an infotainment system of the vehicle (3) and/or the operating state of the at least one functional component (10) is set depending on an operating state of the portable communication terminal and/or the headphones.

Method according to one of the preceding claims, wherein the recorded information relating to the object (6), the user (2) and the interaction (5) and the specific potential user need of the user (2) is stored as data records in a database (9). , wherein when supporting a future user situation in the vehicle (3), the stored data sets are retrieved and taken into account when determining a future potential user need of the user (2).

Method according to one of the preceding claims, wherein the suggestion for setting the operating state of the at least one functional unit (10) is output to the user (2) with the output unit (11) visually and/or acoustically and/or haptically for selection, the operating state the at least one function unit (10) is set as a function of the selected suggestion by the user (2), in particular information relating to the set operating state of the at least one functional unit is output to the user (2) with the output unit (11).

Electronic user support system (1) with at least one detection unit (7), at least one output unit (11) and at least one evaluation unit (8), the electronic user support system (1) for carrying out a method according to one of the preceding Claims 1 until 8th is trained.

Vehicle (3) with an electronic user support system (1). claim 9 .