DE102022123087A1

DE102022123087A1 - System and method for giving feedback to a user on a non-contact gesture using LEDs

Info

Publication number: DE102022123087A1
Application number: DE102022123087.2A
Authority: DE
Inventors: Finn Jacobsen; Fiona Mariele Lau
Original assignee: Gestigon GmbH
Current assignee: Gestigon GmbH
Priority date: 2022-09-12
Filing date: 2022-09-12
Publication date: 2024-03-14

Abstract

Die Erfindung betrifft ein System (10) und ein Verfahren zum Ausgeben einer Rückmeldung an einen Nutzer (12) zu einer von dem Nutzer (12) durchführbaren Geste, mit einer Erfassungseinrichtung (20) zum Erfassen der Geste und mit einer Auswerteeinrichtung (26) zum Auswerten von Signalen der Erfassungseinrichtung (20) und zum Ansteuern einer Rückmeldeeinrichtung (28) des Systems (10). Die Rückmeldeeinrichtung (28) umfasst eine Mehrzahl von Lichtquellen (30), welche dazu ausgebildet sind, als Rückmeldung zu der Geste für den Nutzer (12) sichtbares Licht auszugeben. Mittels der Auswerteeinrichtung (26) ist bei korrekter Durchführung der Geste ein Ausgeben des für den Nutzer (12) sichtbaren Lichts durch die Lichtquellen (30) auf eine erste Art bewirkbar. Bei nicht korrekter Durchführung der Geste ist ein Ausgeben des für den Nutzer (12) sichtbaren Lichts durch die Lichtquellen (30) auf eine zweite Art bewirkbar, welche von der ersten Art verschieden ist.The invention relates to a system (10) and a method for outputting feedback to a user (12) regarding a gesture that the user (12) can perform, with a detection device (20) for detecting the gesture and with an evaluation device (26) for Evaluating signals from the detection device (20) and for controlling a feedback device (28) of the system (10). The feedback device (28) comprises a plurality of light sources (30), which are designed to emit visible light to the user (12) as feedback on the gesture. By means of the evaluation device (26), when the gesture is carried out correctly, the light visible to the user (12) can be output by the light sources (30) in a first way. If the gesture is not carried out correctly, the light visible to the user (12) can be emitted by the light sources (30) in a second way, which is different from the first way.

Description

Die Erfindung betrifft ein System zum Ausgeben einer Rückmeldung an einen Nutzer zu einer von dem Nutzer durchführbaren Geste. Das System umfasst eine Erfassungseinrichtung zum Erfassen der Geste und eine Auswerteeinrichtung zum Auswerten von Signalen der Erfassungseinrichtung sowie zum Ansteuern einer Rückmeldeeinrichtung des Systems. Die Rückmeldeeinrichtung umfasst eine Mehrzahl von Lichtquellen, welche dazu ausgebildet sind, als Rückmeldung zu der Geste für den Nutzer sichtbares Licht auszugeben. Des Weiteren betrifft die Erfindung ein Verfahren zum Ausgeben einer Rückmeldung an einen Nutzer zu einer von dem Nutzer durchgeführten Geste.The invention relates to a system for giving feedback to a user about a gesture that the user can perform. The system includes a detection device for detecting the gesture and an evaluation device for evaluating signals from the detection device and for controlling a feedback device of the system. The feedback device comprises a plurality of light sources which are designed to emit visible light to the user as feedback on the gesture. The invention further relates to a method for giving feedback to a user about a gesture performed by the user.

Die WO 2010/075137 A2 beschreibt ein Smartphone mit einer berührungssensitiven Gestenoberfläche, auf welcher ein Nutzer beispielsweise eine Wischgeste ausführen kann. Wenn ein Nutzer des Smartphones auf der Gestenoberfläche eine Wischgeste ausführt, so kann dies ein Aufleuchten einer ersten Gruppe von Leuchtdioden bewirken, welche auf einer dem Nutzer zugewandten Seite des Smartphones in einer Reihe angeordnet sind.The WO 2010/075137 A2 describes a smartphone with a touch-sensitive gesture interface on which a user can, for example, perform a swipe gesture. If a user of the smartphone performs a swipe gesture on the gesture surface, this can cause a first group of light-emitting diodes to light up, which are arranged in a row on a side of the smartphone facing the user.

Als nachteilig ist hierbei der Umstand anzusehen, dass eine derartige Rückmeldung zu der Wischgeste hinsichtlich ihrer Verwertbarkeit für den Nutzer des Smartphones vergleichsweise beschränkt ist.The disadvantage here is the fact that such feedback on the swipe gesture is comparatively limited in terms of its usability for the smartphone user.

Die US 2016/350589 A1 beschreibt einen Roboter mit Gestenschnittstelle, welcher eine drahtlose Bluetooth-Karte ansteuern kann, um LEDs einzuschalten und auszuschalten. Mittels der LEDs kann kenntlich gemacht werden, welcher Befehl bei einer Bewegung über Puzzle-Zellen des Roboters ausgewählt wurde.The US 2016/350589 A1 describes a robot with a gesture interface that can control a wireless Bluetooth card to turn LEDs on and off. The LEDs can be used to indicate which command was selected when moving over the robot's puzzle cells.

Aufgabe der vorliegenden Erfindung ist es, ein System der eingangs genannten Art zu schaffen, welches hinsichtlich einer Verwertbarkeit der Rückmeldung für den Nutzer verbessert ist, und ein entsprechend verbessertes Verfahren anzugeben.The object of the present invention is to create a system of the type mentioned at the outset, which is improved in terms of the usability of the feedback for the user, and to provide a correspondingly improved method.

Diese Aufgabe wird durch ein System mit den Merkmalen des Patentanspruchs 1 und durch ein Verfahren mit den Merkmalen des Patentanspruchs 12 gelöst. Vorteilhafte Ausgestaltungen mit zweckmäßigen Weiterbildungen der Erfindung sind in den abhängigen Patentansprüchen und in der nachfolgenden Beschreibung angegeben.This task is solved by a system with the features of patent claim 1 and by a method with the features of patent claim 12. Advantageous embodiments with useful developments of the invention are specified in the dependent patent claims and in the following description.

Das erfindungsgemäße System zum Ausgeben einer Rückmeldung an einen Nutzer, insbesondere an einen Nutzer eines Kraftfahrzeugs, zu einer von dem Nutzer durchführbaren Geste umfasst eine Erfassungseinrichtung zum Erfassen der Geste und eine Auswerteeinrichtung zum Auswerten von Signalen der Erfassungseinrichtung. Die Auswerteeinrichtung ist zum Ansteuern einer Rückmeldeeinrichtung des Systems ausgebildet. Die Rückmeldeeinrichtung umfasst eine Mehrzahl von Lichtquellen, welche dazu ausgebildet sind, als Rückmeldung zu der Geste für den Nutzer sichtbares Licht auszugeben. Hierbei ist mittels der Auswerteeinrichtung bei korrekter Durchführung der Geste ein Ausgeben des für den Nutzer sichtbaren Lichts durch die Lichtquellen auf eine erste Art bewirkbar. Des Weiteren ist mittels der Auswerteeinrichtung bei nicht korrekter Durchführung der Geste ein Ausgeben des für den Nutzer sichtbaren Lichts durch die Lichtquellen auf eine zweite Art bewirkbar, welche von der ersten Art verschieden ist.The system according to the invention for outputting feedback to a user, in particular to a user of a motor vehicle, about a gesture that can be carried out by the user comprises a detection device for detecting the gesture and an evaluation device for evaluating signals from the detection device. The evaluation device is designed to control a feedback device of the system. The feedback device comprises a plurality of light sources which are designed to emit visible light to the user as feedback on the gesture. Here, by means of the evaluation device, when the gesture is carried out correctly, the light sources visible to the user can be output in a first way. Furthermore, if the gesture is not carried out correctly, the evaluation device can be used to output the light visible to the user through the light sources in a second way, which is different from the first way.

Dem Nutzer kann daher durch das Ausgeben des sichtbaren Lichts mittels der, insbesondere als Leuchtdioden oder LEDs (LED = light-emitting diode, lichtemittierende Diode) ausgebildeten, Lichtquellen nicht nur zur Kenntnis gebracht werden, ob die Geste korrekt durchgeführt wurde. Vielmehr kann mittels der Lichtquellen durch das Ausgeben des für den Nutzer sichtbaren Lichts auf die zweite Art dem Nutzer eine für den Nutzer verwertbare Rückmeldung selbst dann gegeben werden, wenn die Durchführung der Geste nicht korrekt war.By emitting the visible light using the light sources, in particular designed as light-emitting diodes or LEDs (LED = light-emitting diode), the user can therefore not only be informed whether the gesture was carried out correctly. Rather, by means of the light sources, by emitting the light visible to the user in the second way, the user can be given feedback that can be used by the user, even if the gesture was not carried out correctly.

Dem liegt die Erkenntnis zugrunde, dass Nutzer, insbesondere Nutzer von Kraftfahrzeugen, häufig verunsichert sind, wenn es darum geht, per Gestensteuerung Funktionseinheiten, insbesondere Funktionseinheiten des Kraftfahrzeugs, zu betätigen. Beispielsweise kann es vorkommen, dass die Gestensteuerung nicht erfolgreich war, weil die Geste vom Nutzer nicht korrekt durchgeführt wurde. Der Nutzer stellt in einem solchen Fall zwar fest, dass die Funktionseinheit nicht wie gewünscht reagiert. Jedoch ist dem Nutzer häufig nicht klar, was der Grund für das Ausbleiben der gewünschten Funktion der Funktionseinheit ist.This is based on the knowledge that users, in particular users of motor vehicles, are often confused when it comes to using gesture control to operate functional units, in particular functional units of the motor vehicle. For example, it may happen that gesture control was not successful because the gesture was not carried out correctly by the user. In such a case, the user notices that the functional unit does not react as desired. However, it is often not clear to the user what the reason is for the functional unit not to perform the desired function.

Insbesondere wenn der Nutzer feststellt, dass er nacheinander eine Geste nach seinem Dafürhalten gleichartig beziehungsweise auf gleiche Art und Weise ausgeführt hat, jedoch erst bei der zweiten Ausführung oder Durchführung der Geste die Funktionseinheit angesteuert wurde und somit auf die Geste reagiert hat, kann dies zur Verwirrung des Nutzers beitragen. Eine solche Verwirrung kann dazu führen, dass der Nutzer die Gestensteuerung grundsätzlich ablehnt beziehungsweise der Gestensteuerung zumindest skeptisch gegenübersteht.In particular, if the user notices that he or she has carried out a gesture one after the other in the same way or in the same way, but it was only during the second execution or execution of the gesture that the functional unit was activated and thus reacted to the gesture, this can lead to confusion of the user. Such confusion can lead to the user fundamentally rejecting gesture control or at least being skeptical about gesture control.

Vorliegend erhält der Nutzer jedoch die Rückmeldung beziehungsweise das Feedback sowohl bei korrekter Durchführung der Geste als auch bei nicht korrekter Durchführung der Geste. Anhand des auf die zweite Art ausgegebenen Feedbacks kann der Nutzer somit feststellen, dass seine Durchführung der Geste nicht einer vorbestimmten Weise der Durchführung entsprochen hat. Da dem Nutzer zudem bei korrekter Durchführung der Geste eine positive Rückmeldung gegeben wird, indem die Lichtquellen das für den Nutzer sichtbare Licht auf die erste Art ausgeben, erhält der Nutzer auch bei korrekter Durchführung der Geste ein verwertbares Feedback. Aus den auf die erste Art und die zweite Art gegebenen Rückmeldungen zu der jeweiligen Durchführung der Geste kann der Nutzer sehr einfach rückschließen, ob beziehungsweise welche Probleme bei der Gestensteuerung aufgetreten sind. Folglich ist das System hinsichtlich einer Verwertbarkeit der Rückmeldung für den Nutzer verbessert.In the present case, however, the user receives feedback both when the gesture is carried out correctly and when the gesture is not carried out correctly. Based on the feedback provided in the second way, the Users thus notice that their execution of the gesture did not correspond to a predetermined way of execution. Since the user is also given positive feedback when the gesture is carried out correctly, in that the light sources emit the light visible to the user in the first way, the user also receives usable feedback when the gesture is carried out correctly. From the feedback given in the first type and the second type regarding the respective execution of the gesture, the user can easily conclude whether or which problems have occurred with the gesture control. Consequently, the system is improved in terms of usability of the feedback for the user.

Des Weiteren kann das Ausgeben des für den Nutzer sichtbaren Lichts auf die erste Art und auf die zweite Art dazu führen, dass der Nutzer die Durchführung der Geste im Hinblick auf eine korrekte Ausführung verbessert. Dies ist vorteilhaft. Auf diese Weise kann außerdem das Erfassen der Geste mittels der Erfassungseinrichtung des Systems verbessert werden. Beides ist einer Verbesserung der Gestensteuerung zuträglich.Furthermore, emitting the light visible to the user in the first way and in the second way may cause the user to improve the performance of the gesture for correct execution. This is advantageous. In this way, the detection of the gesture using the detection device of the system can also be improved. Both are conducive to improving gesture control.

Das Ausgeben der Rückmeldung in Form des Aktivierens der Lichtquellen, sodass diese für den Nutzer sichtbares Licht ausgeben, ist zudem sehr intuitiv und dennoch für den Nutzer nicht störend. Dies ist insbesondere dann von Bedeutung, wenn der Nutzer die Geste in dem Kraftfahrzeug durchführt, um eine Funktionseinheit des Kraftfahrzeugs anzusteuern, etwa wenn der Nutzer per Gestensteuerung ein Infotainmentsystem des Kraftfahrzeugs ansteuert. Das von den Lichtquellen ausgegebene sichtbare Licht stört hierbei nämlich nicht den beispielsweise durch eine Frontscheibe des Kraftfahrzeugs das Verkehrsgeschehen beobachtenden Nutzer. Dies ist insbesondere dann von Vorteil, wenn es sich bei dem Nutzer um den Fahrer des Kraftfahrzeugs handelt.Providing feedback in the form of activating the light sources so that they emit visible light to the user is also very intuitive and yet not disruptive to the user. This is particularly important when the user performs the gesture in the motor vehicle in order to control a functional unit of the motor vehicle, for example when the user controls an infotainment system of the motor vehicle using gesture control. The visible light emitted by the light sources does not disturb the user observing the traffic, for example through a windshield of the motor vehicle. This is particularly advantageous if the user is the driver of the motor vehicle.

Dennoch wird in vorteilhafter Weise der Nutzer über den Erfolg oder Misserfolg der durchgeführten Geste unterrichtet, nämlich durch das Ausgeben des für den Nutzer sichtbaren Lichts durch die Lichtquellen auf die erste Art oder auf die zweite Art.Nevertheless, the user is advantageously informed about the success or failure of the gesture performed, namely by emitting the light visible to the user through the light sources in the first way or in the second way.

Das Aktivieren der sichtbares Licht abgebenden Lichtquellen zum Zwecke des Ausgebens der Rückmeldung ist insbesondere vorteilhaft gegenüber einem visuellen Feedback, bei welchem Symbole, Icons oder Texte oder dergleichen auf einem Bildschirm des Kraftfahrzeugs angezeigt werden. Denn das Anzeigen derartiger Symbole oder Icons oder von Texten führt dazu, dass der Nutzer seine Aufmerksamkeit auf diese Icons, Symbole oder Texte richten muss und daher weniger gut dem Verkehrsgeschehen folgen kann. Dies kann vorliegend in vorteilhafter Weise vermieden werden.Activating the light sources that emit visible light for the purpose of outputting the feedback is particularly advantageous compared to visual feedback in which symbols, icons or texts or the like are displayed on a screen of the motor vehicle. Displaying such symbols or icons or texts means that the user has to focus their attention on these icons, symbols or texts and is therefore less able to follow what is happening in the traffic. This can be advantageously avoided in the present case.

Insbesondere bei Verwendung des Systems in dem Kraftfahrzeug ist daher eine Erhöhung der Fahrsicherheit des Kraftfahrzeugs erreichbar, vor allem, wenn es sich bei dem die Geste durchführenden Nutzer um den Fahrer des Kraftfahrzeugs handelt.In particular, when using the system in the motor vehicle, an increase in the driving safety of the motor vehicle can be achieved, especially if the user performing the gesture is the driver of the motor vehicle.

Der Nutzer braucht nämlich beispielsweise nicht seinen Blick von dem Verkehrsgeschehen beziehungsweise der Straße abzuwenden, und dennoch wird durch die Lichtquellen, welche das für den Nutzer sichtbare Licht ausgeben, dem Nutzer eine Rückmeldung über die Qualität der von ihm durchgeführten Geste gegeben. Das Ausgeben der Rückmeldung durch Abgeben des für den Nutzer sichtbaren Lichts mittels der Lichtquellen ist für den Nutzer besonders einfach verständlich beziehungsweise intuitiv nachvollziehbar. Und insbesondere braucht der Nutzer hierfür nicht seinen Blick auf einen Bildschirm oder eine Anzeigevorrichtung des Kraftfahrzeugs zu richten.For example, the user does not need to avert his gaze from the traffic or the street, and yet the light sources, which emit the light visible to the user, provide the user with feedback about the quality of the gesture he or she is performing. The output of the feedback by emitting the light visible to the user using the light sources is particularly easy to understand or intuitive for the user. And in particular, the user does not need to look at a screen or a display device of the motor vehicle.

Das Ausgeben von sichtbarem Licht mittels der Lichtquellen ist außerdem in vorteilhafter Weise nicht davon abhängig, welche Sprache oder Sprachen der Nutzer versteht, wie dies im Gegensatz dazu bei einem Text der Fall wäre. Vielmehr sind die mittels der Lichtquellen ausgegebenen Lichtsignale für jeden Nutzer sichtbar, der sichtbares Licht wahrnehmen kann. Dies gilt auch für beispielsweise farbenblinde Nutzer. Die universelle Verständlichkeit des Ausgebens des Lichts auf die erste Art und auf die zweite Art ist dementsprechend vorteilhaft.The output of visible light by means of the light sources is also advantageously not dependent on which language or languages the user understands, as would be the case with a text. Rather, the light signals emitted by the light sources are visible to every user who can perceive visible light. This also applies to color-blind users, for example. The universal intelligibility of outputting the light in the first way and in the second way is accordingly advantageous.

Vorzugsweise umfasst das System eine Mehrzahl von weiteren Lichtquellen, welche dazu ausgebildet sind, für den Nutzer nicht sichtbares Licht auszugeben. Mittels der Auswerteeinrichtung ist das Ausgeben des für den Nutzer nicht sichtbaren Lichts durch die weiteren Lichtquellen auf die erste Art und auf die zweite Art bewirkbar. Dabei umfasst das System wenigstens eine Empfangseinrichtung, welche zum Erfassen des für den Nutzer nicht sichtbaren Lichts ausgebildet ist. So können die von der Auswerteeinrichtung gewonnen Erkenntnisse über die Korrektheit oder über die fehlerhafte Durchführung der Geste der Empfangseinrichtung auf einfache Weise übermittelt werden. Dies erlaubt eine vielfältige weitere Nutzung dieser Erkenntnisse durch die Empfangseinrichtung.The system preferably comprises a plurality of further light sources which are designed to emit light that is not visible to the user. By means of the evaluation device, the output of the light that is not visible to the user can be effected by the other light sources in the first way and in the second way. The system includes at least one receiving device, which is designed to detect the light that is not visible to the user. In this way, the knowledge gained by the evaluation device about the correctness or incorrect execution of the gesture can be easily transmitted to the receiving device. This allows diverse further use of these findings by the receiving device.

Zudem braucht die Empfangseinrichtung lediglich zum Erfassen des für den Nutzer nicht sichtbaren Lichts ausgebildet zu sein. Jedoch ist es in vorteilhafter Weise nicht erforderlich, dass die Empfangseinrichtung selber eine Bewertung der Geste im Hinblick auf die Korrektheit der Geste vornimmt. Dies ist einer einfachen und aufwandsarmen technischen Umsetzbarkeit der Bewertung der Geste mittels des Systems zuträglich.In addition, the receiving device only needs to be designed to detect the light that is not visible to the user. However, it is advantageously not necessary for the receiving device itself to evaluate the gesture with regard to the correctness of the gesture. This is conducive to simple and low-cost technical implementation of the evaluation of the gesture using the system.

Beispielsweise kann es sich bei den weiteren Lichtquellen um zum Ausgeben von Infrarotlicht ausgebildete Leuchtdioden oder Infrarot-LEDs handeln. Dementsprechend kann als Empfangseinrichtung wenigstens eine Photodiode zum Einsatz kommen, welche zum Empfangen von Infrarotlicht ausgebildet beziehungsweise gegenüber Infrarotlicht empfindlich ist. Dadurch lässt sich die von der Auswerteeinrichtung vorgenommene Beurteilung im Hinblick auf die korrekte Durchführung der Geste sehr einfach und aufwandsarm der Empfangseinrichtung übermitteln. Dies liegt daran, dass die weiteren Lichtquellen und die wenigstens eine Empfangseinrichtung in dem gleichen Frequenzbereich beziehungsweise Wellenlängenbereich der elektromagnetischen Strahlung, insbesondere in Form des Infrarotlichts, arbeiten.For example, the additional light sources can be light-emitting diodes or infrared LEDs designed to emit infrared light. Accordingly, at least one photodiode can be used as the receiving device, which is designed to receive infrared light or is sensitive to infrared light. As a result, the assessment made by the evaluation device with regard to the correct execution of the gesture can be transmitted to the receiving device very easily and with little effort. This is because the other light sources and the at least one receiving device work in the same frequency range or wavelength range of the electromagnetic radiation, in particular in the form of infrared light.

Außerdem können die von den Lichtquellen ausgegebenen Lichtsignale des nicht sichtbaren Lichts, welche die korrekte Durchführung der Geste beziehungsweise die nicht korrekte Durchführung der Geste angeben, von einer Vielzahl von Empfangseinrichtungen des Systems genutzt werden. Diese Empfangseinrichtungen können wiederum die entsprechende, in den Lichtsignalen enthaltene oder codierte Erkenntnis über die korrekte oder nicht korrekte Durchführung der Geste weiterverwenden. Dies ermöglicht es insbesondere, dem Nutzer über mehrere, unterschiedliche Rückmeldeeinrichtungen Feedback zu der Durchführung seiner Geste zu geben.In addition, the light signals of invisible light emitted by the light sources, which indicate the correct execution of the gesture or the incorrect execution of the gesture, can be used by a large number of receiving devices in the system. These receiving devices can in turn continue to use the corresponding knowledge contained or encoded in the light signals about the correct or incorrect execution of the gesture. This makes it possible, in particular, to give the user feedback on the execution of their gesture via several different feedback devices.

Vorzugsweise umfasst das System wenigstens eine weitere Rückmeldeeinrichtung, welche dazu ausgebildet ist, in Abhängigkeit von dem mittels der wenigstens einen Empfangseinrichtung erfassbaren, nicht sichtbaren Licht an den Nutzer eine weitere, von dem sichtbaren Licht verschiedene Rückmeldung zu der Durchführung der Geste auszugeben. Dementsprechend ermöglicht es das Zusammenspiel der wenigstens einen Empfangseinrichtung mit der wenigstens einen weiteren Rückmeldeeinrichtung, das Ausgeben der weiteren Rückmeldung mit dem Ausgeben des sichtbaren Lichts auf die erste Art und auf die zweite Art zu synchronisieren beziehungsweise in Einklang zu bringen. Das Vorsehen der wenigstens einen weiteren Rückmeldeeinrichtung, welche dazu ausgebildet ist, die weitere, von dem sichtbaren Licht verschiedene Rückmeldung auszugeben, ermöglicht es in vorteilhafter Weise, dass der Nutzer besonders vielfältige Rückmeldungen zu der Durchführung seiner Geste erhält.Preferably, the system comprises at least one further feedback device, which is designed to provide the user with further feedback on the execution of the gesture, which is different from the visible light, depending on the invisible light that can be detected by the at least one receiving device. Accordingly, the interaction of the at least one receiving device with the at least one further feedback device makes it possible to synchronize or harmonize the output of the further feedback with the output of the visible light in the first way and in the second way. The provision of the at least one further feedback device, which is designed to output the further feedback that is different from visible light, advantageously enables the user to receive particularly diverse feedback on the execution of his gesture.

Eine solche Kombination unterschiedlicher Rückmeldungen ist für den Nutzer sehr eingängig und intuitiv leicht erfassbar. Dennoch braucht lediglich die Auswerteeinrichtung vorgesehen zu werden, welche die Signale der Erfassungseinrichtung auswertet, um einerseits die das sichtbare Licht ausgebenden Lichtquellen anzusteuern und andererseits durch das Ausgeben des nicht sichtbaren Lichts für die Aktivierung der wenigstens einen weiteren Rückmeldeeinrichtung zu sorgen. Dies macht das System besonders zuverlässig, insbesondere aufgrund der Ausgabe unterschiedlicher Rückmeldungen oder Feedbacks an den Nutzer.Such a combination of different feedback is very clear and intuitive for the user. Nevertheless, only the evaluation device needs to be provided, which evaluates the signals of the detection device in order, on the one hand, to control the light sources that emit the visible light and, on the other hand, to ensure the activation of the at least one further feedback device by emitting the invisible light. This makes the system particularly reliable, especially due to the output of different feedback or feedback to the user.

Vorzugsweise ist die wenigstens eine weitere Rückmeldeeinrichtung dazu ausgebildet, die weitere, von dem sichtbaren Licht verschiedene Rückmeldung in einer der ersten Art und der zweiten Art entsprechenden Weise an den Nutzer auszugeben. So kann der Nutzer sehr einfach das Ausgeben der jeweiligen Rückmeldung auf die erste Art und auf die zweite Art erfassen.Preferably, the at least one further feedback device is designed to output the further feedback, which is different from visible light, to the user in a manner corresponding to the first type and the second type. In this way, the user can easily record the output of the respective feedback in the first way and in the second way.

Vorzugsweise ist die wenigstens eine weitere Rückmeldeeinrichtung als Komponente eines am Körper des Nutzers tragbaren Elements ausgebildet, wobei die wenigstens eine weitere Rückmeldeeinrichtung zum Ausgeben einer haptischen Rückmeldung an den Nutzer ausgebildet ist. Eine solche haptische Rückmeldung etwa in Form einer Vibration lässt sich von dem Nutzer sehr einfach erfassen, ohne dass der Nutzer seinen Blick auf die weitere Rückmeldeeinrichtung zu richten braucht. Dies ist im Hinblick auf das Verhindern einer Ablenkung des Nutzers von einem Geschehen, auf welches der Nutzer blickt, sehr vorteilhaft. Zudem ist die haptische Rückmeldung, etwa in Form einer Vibration des an dem Körper des Nutzers tragbaren Elements, sehr gut spürbar.Preferably, the at least one further feedback device is designed as a component of an element that can be worn on the user's body, wherein the at least one further feedback device is designed to output haptic feedback to the user. Such haptic feedback, for example in the form of a vibration, can be detected very easily by the user without the user having to look at the further feedback device. This is very advantageous in terms of preventing the user from being distracted from an event that the user is looking at. In addition, the haptic feedback, for example in the form of a vibration of the element worn on the user's body, is very noticeable.

Das am Körper des Nutzers tragbare Element kann beispielsweise als Armband ausgebildet sein, wobei das Armband vorzugsweise die Empfangseinrichtung zum Empfangen des für den Nutzer nicht sichtbaren Lichts umfasst. Denn wenn der Nutzer beispielsweise seine das Armband tragende Hand bewegt, um die Geste durchzuführen, so lässt sich mittels der wenigstens einen Empfangseinrichtung des Armbands sehr einfach und zuverlässig das nicht sichtbare Licht erfassen, welches durch die weiteren Lichtquellen auf die erste Art oder auf die zweite Art ausgegeben wird. Die wenigstens eine Rückmeldeeinrichtung des Armbands kann als Haptikeinrichtung ausgebildet sein, welche durch Ausgeben der haptischen Rückmeldung den Nutzer sehr direkt und unmittelbar über die Qualität der Durchführung der Geste informieren kann.The element that can be worn on the user's body can be designed, for example, as a bracelet, the bracelet preferably comprising the receiving device for receiving the light that is not visible to the user. For example, if the user moves his hand wearing the bracelet to perform the gesture, the invisible light can be detected very easily and reliably by means of the at least one receiving device of the bracelet, which is generated by the other light sources in the first way or in the second Type is issued. The at least one feedback device of the bracelet can be designed as a haptic device, which can inform the user very directly and immediately about the quality of the execution of the gesture by outputting the haptic feedback.

Insbesondere wenn die wenigstens eine weitere Rückmeldeeinrichtung, welche im Betrieb die haptische Rückmeldung ausgibt, als Komponente des an dem Körper des Nutzers tragbaren Elements ausgebildet ist, kann vorgesehen sein, dass das Ausgeben des sichtbaren Lichts durch die Lichtquellen auf die erste Art und das Ausgeben der haptischen Rückmeldung auf die erste Art im Wesentlichen synchron oder zumindest im Hinblick auf die Abfolge einzelner Lichtpulse oder Lichtsignale beziehungsweise der einzelnen, von dem Nutzer haptisch wahrnehmbaren Rückmeldungen gleichartig verläuft. Analoges gilt für das Ausgeben des für den Nutzer sichtbaren Lichts durch die Lichtquellen auf die zweite Art und für das Ausgeben der haptischen Rückmeldung an den Nutzer auf die zweite Art. Es können also auch diese Ausgaben im Wesentlichen synchron erfolgen.In particular, if the at least one further feedback device, which outputs the haptic feedback during operation, is designed as a component of the element that can be worn on the user's body, it can be provided that the off Giving visible light through the light sources in the first way and issuing the haptic feedback in the first way is essentially synchronous or at least similar with regard to the sequence of individual light pulses or light signals or the individual feedback that can be haptically perceived by the user. The same applies to the output of the light visible to the user by the light sources in the second way and to the output of the haptic feedback to the user in the second way. These outputs can therefore also take place essentially synchronously.

Zusätzlich oder alternativ kann die wenigstens eine weitere Rückmeldeeinrichtung als Schallausgabeeinheit zum Ausgeben einer akustischen Rückmeldung an den Nutzer ausgebildet sein. Beispielsweise kann als Schallausgabeeinheit ein Lautsprecher oder dergleichen vorgesehen sein, welcher entsprechend der Lichtausgabe des sichtbaren Lichts durch die Lichtquellen Töne oder Schall abgibt. Auf diese Weise lässt sich ein besonders vielfältiges Feedback zu der Durchführung der Geste für den Nutzer bereitstellen.Additionally or alternatively, the at least one further feedback device can be designed as a sound output unit for outputting acoustic feedback to the user. For example, a loudspeaker or the like can be provided as the sound output unit, which emits tones or sound in accordance with the light output of the visible light by the light sources. In this way, particularly diverse feedback on the execution of the gesture can be provided to the user.

In vorteilhafter Weise wird auch durch die Schallausgabeeinheit der Blick des Nutzers nicht von einem Geschehen abgelenkt, während der Nutzer die akustische Rückmeldung erhält. Vielmehr kann der Blick des Nutzers auf das Geschehen gerichtet verbleiben. Dies ist insbesondere bei der Nutzung des Systems in dem Kraftfahrzeug von Vorteil.Advantageously, the sound output unit does not distract the user's gaze from an event while the user receives the acoustic feedback. Rather, the user's gaze can remain focused on what is happening. This is particularly advantageous when using the system in the motor vehicle.

Vorzugsweise sind die Lichtquellen und die weiteren Lichtquellen in einem Sichtfeld des Nutzers in einer Reihe angeordnet, wobei die Lichtquellen und die weiteren Lichtquellen ein Lichtband bilden, dessen Breite geringer ist als eine Länge des Lichtbands. Eine solche linienförmige Anordnung der Lichtquellen und der weiteren Lichtquellen in dem Sichtfeld des Nutzers führt zu einer sehr guten Erfassbarkeit des von den Lichtquellen abgegebenen sichtbaren Lichts, selbst wenn ein Abschnitt des Lichtbands verdeckt sein sollte. Des Weiteren sind auch die von den weiteren Lichtquellen ausgegebenen Signale des nicht sichtbaren Lichts bei der Anordnung der weiteren Lichtquellen in dem Lichtband mittels der wenigstens einen Empfangseinrichtung gut erfassbar.Preferably, the light sources and the further light sources are arranged in a row in the user's field of vision, the light sources and the further light sources forming a light band whose width is less than a length of the light band. Such a linear arrangement of the light sources and the other light sources in the user's field of vision leads to very good detectability of the visible light emitted by the light sources, even if a section of the light band is covered. Furthermore, the signals of the invisible light emitted by the further light sources can also be easily detected by means of the at least one receiving device when the further light sources are arranged in the light band.

Die Lichtquellen und die weiteren Lichtquellen können in einer jeweiligen Reihe angeordnet sein, wobei die beiden Reihen das Lichtband bilden.The light sources and the further light sources can be arranged in a respective row, with the two rows forming the light band.

Eine besonders kompakte Ausbildung des Lichtbands ist erreichbar, wenn in dem Lichtband die Lichtquellen und die weiteren Lichtquellen alternierend angeordnet sind. Zudem kann auf diese Weise dafür gesorgt werden, dass die nicht sichtbares Licht abgebenden Lichtquellen die zum Ausgeben von sichtbarem Licht ausgebildeten Lichtquellen auf Abstand voneinander halten und umgekehrt, ohne dass Bauraum verloren geht. Des Weiteren lässt sich so eine Verschaltung der Lichtquellen und der weiteren Lichtquellen sehr einfach und aufwandsarm realisieren, bei welcher die Lichtquellen und die weiteren Lichtquellen elektrisch in Reihe geschaltet sind. Auch dies ist vorteilhaft.A particularly compact design of the light band can be achieved if the light sources and the other light sources are arranged alternately in the light band. In addition, it can be ensured in this way that the light sources that do not emit visible light keep the light sources designed to emit visible light at a distance from one another and vice versa, without losing installation space. Furthermore, an interconnection of the light sources and the other light sources can be implemented very easily and with little effort, in which the light sources and the other light sources are electrically connected in series. This is also advantageous.

Vorzugsweise ist das Lichtband an einem Rand eines Sichtfelds des Nutzers angeordnet. Denn so stört das von den Lichtquellen des Lichtbands ausgegebene sichtbare Licht den Nutzer besonders wenig. Dennoch nimmt der Nutzer dieses Licht sehr einfach und intuitiv wahr, wenn der Nutzer ein bestimmtes Geschehen im Blick hat, welches sich dementsprechend im Sichtfeld des Nutzers befindet. Dies ist insbesondere im Hinblick darauf vorteilhaft, dass das von den Lichtquellen abgegebene sichtbare Licht den Nutzer wenig stört und trotzdem einfach erkennbar ist.Preferably, the light band is arranged at an edge of the user's field of vision. This means that the visible light emitted by the light sources of the light strip disturbs the user very little. Nevertheless, the user perceives this light very easily and intuitively if the user has a specific event in view, which is therefore in the user's field of vision. This is particularly advantageous in view of the fact that the visible light emitted by the light sources causes little disturbance to the user and is still easily recognizable.

Vorzugsweise ist bei Verwendung des Systems in dem Kraftfahrzeug das Lichtband an einem Rand einer Instrumententafel des Kraftfahrzeugs angeordnet, wobei die Instrumententafel an eine Frontscheibe des Kraftfahrzeugs angrenzt. Denn dann kann der Nutzer des Kraftfahrzeugs, insbesondere der Fahrer des Kraftfahrzeugs, seinen Blick durch die Frontscheibe hindurch auf das Verkehrsgeschehen richten, und dennoch hat der Nutzer oder Fahrer des Kraftfahrzeugs das Lichtband gut im Blick.When using the system in the motor vehicle, the light strip is preferably arranged on an edge of an instrument panel of the motor vehicle, the instrument panel adjoining a windshield of the motor vehicle. Because then the user of the motor vehicle, in particular the driver of the motor vehicle, can direct his gaze through the windshield at the traffic situation, and yet the user or driver of the motor vehicle still has a clear view of the light strip.

Dies gilt insbesondere, wenn das Lichtband an einem in Hochrichtung des Kraftfahrzeugs oberen Rand der Instrumententafel des Kraftfahrzeugs angeordnet ist. Der in Hochrichtung des Kraftfahrzeugs obere Rand der Instrumententafel ist zudem für den Nutzer des Kraftfahrzeugs, insbesondere für den Fahrer des Kraftfahrzeugs, besonders gut und einfach optisch erfassbar.This applies in particular if the light strip is arranged on an upper edge of the instrument panel of the motor vehicle in the vertical direction of the motor vehicle. The upper edge of the instrument panel in the vertical direction of the motor vehicle can also be visually detected particularly well and easily by the user of the motor vehicle, in particular by the driver of the motor vehicle.

Beispielsweise kann die Instrumententafel einen zentralen Bildschirm aufweisen, wobei das Lichtband in Hochrichtung des Kraftfahrzeugs gesehen oberhalb des Bildschirms angeordnet sein kann. Durch eine derartige Anordnung des Lichtbands oberhalb des Zentralbildschirms und in Hochrichtung des Kraftfahrzeugs gesehen unterhalb der Frontscheibe hat der durch die Frontscheibe des Kraftfahrzeugs blickende Nutzer, insbesondere Fahrer, des Kraftfahrzeugs das Lichtband sehr gut aus dem Augenwinkel im Blick, ohne dass der Nutzer seine Augen tatsächlich auf das Lichtband zu richten bräuchte. Dies ist besonders vorteilhaft.For example, the instrument panel can have a central screen, wherein the light strip can be arranged above the screen when viewed in the vertical direction of the motor vehicle. By arranging the light band in this way above the central screen and below the windshield when viewed in the vertical direction of the motor vehicle, the user, in particular the driver, of the motor vehicle looking through the windshield of the motor vehicle has a very good view of the light band from the corner of his eye, without the user actually having to close his eyes would need to be aimed at the light strip. This is particularly advantageous.

Vorzugsweise ist die Auswerteeinrichtung dazu ausgebildet, zusätzlich zu dem Ausgeben des Lichts auf die zweite Art ein Aktivieren der Lichtquellen zu bewirken, durch welches dem Nutzer wenigstens ein Fehlertyp bei der nicht korrekten Durchführung der Geste kommunizierbar ist. Dies ist im Hinblick auf eine besonders gute Verwertbarkeit der Rückmeldung für den Nutzer vorteilhaft. Denn der Nutzer kann so nicht nur erkennen, dass die Durchführung der Geste nicht korrekt war. Vielmehr kann dem Nutzer zur Kenntnis gebracht werden, was für eine Art von Fehler oder welcher Fehlertyp bei der nicht korrekten Durchführung der Geste vorlag. Das Kommunizieren des wenigstens einen Fehlertyps trägt demnach in hohem Maße dazu bei, dass eine Durchführung der Geste bei der Gestensteuerung verbessert werden kann. Dies ist vorteilhaft.Preferably, the evaluation device is designed to, in addition to outputting the Light in the second way to activate the light sources, through which at least one type of error when the gesture is not carried out correctly can be communicated to the user. This is advantageous for the user in terms of particularly good usability of the feedback. The user can not only see that the gesture was not carried out correctly. Rather, the user can be made aware of what type of error or type of error occurred when the gesture was not carried out correctly. Communicating the at least one type of error therefore contributes greatly to improving the performance of the gesture in gesture control. This is advantageous.

Es ist vorteilhaft, wenn die Auswerteeinrichtung dazu ausgebildet ist, dem Nutzer eine Mehrzahl von Fehlertypen durch das Aktivieren der Lichtquellen zu kommunizieren, wobei insbesondere das Kommunizieren vergleichsweise häufig auftretender Fehlertypen günstig ist. So können einerseits üblicherweise auftretende Fehler von dem Nutzer in Zukunft vermieden werden. Dennoch bleibt die Anzahl der Fehlertypen überschaubar, wenn lediglich besonders häufig auftretende Fehlertypen mittels der Auswerteeinrichtung durch das Aktivieren der Lichtquellen dem Nutzer kommuniziert werden. Beispielsweise kann vorgesehen sein, dass die Auswerteeinrichtung dazu ausgebildet ist, dem Nutzer drei unterschiedliche Fehlertypen zu kommunizieren. Dies hält die Anzahl der Fehlertypen in für den Nutzer überschaubaren Grenzen, und dennoch können so besonders häufig auftretende Fehler gut abgedeckt werden.It is advantageous if the evaluation device is designed to communicate a plurality of error types to the user by activating the light sources, with communication of comparatively frequently occurring error types being particularly advantageous. On the one hand, this means that errors that usually occur can be avoided by the user in the future. Nevertheless, the number of error types remains manageable if only particularly frequently occurring error types are communicated to the user by means of the evaluation device by activating the light sources. For example, it can be provided that the evaluation device is designed to communicate three different types of errors to the user. This keeps the number of error types within manageable limits for the user, and yet particularly frequently occurring errors can be well covered.

Der wenigstens eine Fehlertyp kann insbesondere eine falsche Ausrichtung eines beim Durchführen der Geste bewegten Körperteils und/oder Objekts des Nutzers im Raum umfassen. Beispielsweise kann demnach ein erster Fehlertyp darin bestehen, dass der Nutzer beim Durchführen der Geste seine Hand und/oder seine Finger so ausrichtet oder hält, dass die Geste nicht gut mittels der Erfassungseinrichtung erkannt werden kann. Das Anzeigen dieses Fehlertyps ist als Rückmeldung für den Nutzer vorteilhaft.The at least one type of error can in particular include an incorrect alignment of a part of the user's body and/or object that is moved in space when performing the gesture. For example, a first type of error can be that when performing the gesture, the user aligns or holds his hand and/or his fingers in such a way that the gesture cannot be easily recognized by the detection device. Displaying this type of error is beneficial as feedback to the user.

Zusätzlich oder alternativ kann der wenigstens eine Fehlertyp eine fehlende Erfassbarkeit der Geste umfassen. Beispielsweise kann demnach ein zweiter Fehlertyp angeben, dass die Hand und/oder wenigstens ein Finger des Nutzers von der Erfassungseinrichtung gar nicht erfassbar ist, beispielsweise weil der Nutzer einen Handschuh trägt, welcher eine Unterscheidbarkeit der einzelnen Finger des Nutzers nicht zulässt, oder weil die Hand oder Teile der Hand von einem Ärmel eines Kleidungsstücks des Nutzers und/oder von einem Schal oder einem langen Tuch oder dergleichen verdeckt sind. Zusätzlich oder alternativ kann die fehlende Erfassbarkeit der Geste durch die Erfassungseinrichtung dann gegeben sein, wenn die Erfassungseinrichtung selber mittels eines Gegenstands zumindest teilweise zugedeckt oder verdeckt ist. Auch das Kommunizieren dieses Fehlertyps an den Nutzer ist von Vorteil für eine Bewusstseinsschärfung des Nutzers im Hinblick auf die Durchführung der Geste.Additionally or alternatively, the at least one error type can include a lack of detectability of the gesture. For example, a second type of error can indicate that the user's hand and/or at least one finger cannot be detected by the detection device, for example because the user is wearing a glove that does not allow the user's individual fingers to be distinguished, or because the hand or parts of the hand are covered by a sleeve of the user's clothing and/or by a scarf or a long shawl or the like. Additionally or alternatively, the gesture cannot be detected by the detection device if the detection device itself is at least partially covered or obscured by an object. Communicating this type of error to the user is also beneficial for increasing the user's awareness of how to perform the gesture.

Zusätzlich oder alternativ kann der wenigstens eine Fehlertyp ein Abweichen von einer für die Durchführung der Geste vorgesehenen Geschwindigkeit bei der Durchführung der Geste umfassen. Wenn nämlich der Nutzer die Geste beispielsweise zu langsam oder zu schnell durchführt, kann auch dies die korrekte Erfassung der Geste mittels der Erfassungseinrichtung beeinträchtigen. Wenn demnach ein dritter Fehlertyp das Abweichen der Geschwindigkeit bei der Durchführung der Geste von der für die Durchführung der Geste vorgesehenen Geschwindigkeit umfasst, liefert dies dem Nutzer wertvolle Hinweise für die korrekte Durchführung der Geste.Additionally or alternatively, the at least one type of error may include a deviation from a speed intended for performing the gesture when performing the gesture. If the user performs the gesture too slowly or too quickly, for example, this can also affect the correct detection of the gesture by the detection device. Accordingly, if a third type of error involves the speed when performing the gesture deviating from the speed intended for performing the gesture, this provides the user with valuable information for the correct execution of the gesture.

Die vorstehend vorgenommene Bezeichnung der Fehlertypen als erster, zweiter und dritter Fehlertyp dient lediglich einer Unterscheidbarkeit der Fehlertypen voneinander und beinhaltet weder eine Reihenfolge, noch setzt sie das Vorhandensein eines numerisch anders bezeichneten Fehlertyps voraus.The above designation of the error types as first, second and third error types only serves to distinguish the error types from one another and does not contain any order, nor does it presuppose the presence of a numerically differently designated error type.

Vorzugsweise ist die Auswerteeinheit dazu ausgebildet, zusätzlich zu dem Ausgeben des nicht sichtbaren Lichts durch die weiteren Lichtquellen auf die zweite Art ein Aktivieren der weiteren Lichtquellen zu bewirken, um dem Nutzer den wenigstens einen Fehlertyp mittels der wenigstens einen weiteren Rückmeldeeinrichtung zu kommunizieren. Es ist nämlich vorteilhaft, wenn nicht nur durch die das sichtbare Licht ausgebenden Lichtquellen, sondern auch durch die wenigstens eine weitere Rückmeldeeinrichtung dem Nutzer der Fehlertyp kommuniziert werden kann. Denn so werden besonders vielfältige Rückmeldungen auch dahingehend genutzt, dass der Nutzer über den wenigstens einen Fehlertyp in Kenntnis gesetzt wird, wenn das System betrieben wird. Dies sorgt für eine besonders hohe Zuverlässigkeit bei dem Bemühen, dem Nutzer den wenigstens einen Fehlertyp zur Kenntnis zu bringen.Preferably, the evaluation unit is designed to activate the other light sources in the second way in addition to the output of the invisible light by the other light sources in order to communicate the at least one error type to the user by means of the at least one further feedback device. It is advantageous if the error type can be communicated to the user not only by the light sources emitting the visible light, but also by the at least one further feedback device. Particularly diverse feedback is also used to inform the user about at least one type of error when the system is being operated. This ensures a particularly high level of reliability in the effort to make the user aware of at least one type of error.

Vorzugsweise ist die Auswerteeinrichtung dazu ausgebildet, ein Verändern einer Länge einer jeweiligen Zeitspanne des Ausgebens von Licht zu bewirken, um das Licht auf die erste Art und die zweite Art auszugeben. Beispielsweise kann beim Ausgeben des Lichts auf die erste Art vorgesehen sein, die Lichtquellen für eine erste Zeitspanne zu betätigen. Das Ausgeben des Lichts auf die zweite Art kann in diesem Fall darin bestehen, die Lichtquellen über eine zweite Zeitspanne hinweg zu aktivieren, welche weniger lang ist als die erste Zeitspanne, beispielsweise halb so lang wie die erste Zeitspanne. Ein solches, kürzeres Aktivieren der Lichtquellen zum Ausgeben des Lichts auf die zweite Art ist für den Nutzer besonders einfach identifizierbar und von dem Ausgeben des Lichts auf die erste Art gut unterscheidbar.Preferably, the evaluation device is designed to change a length of a respective period of time for emitting light in order to emit the light in the first way and the second way. For example, when emitting the light in the first way, provision can be made to actuate the light sources for a first period of time. Outputting the light in the second way in this case can consist of the light source len over a second period of time, which is less long than the first period of time, for example half as long as the first period of time. Such a shorter activation of the light sources to output the light in the second way is particularly easy for the user to identify and can be easily distinguished from the output of the light in the first way.

Des Weiteren kann vorgesehen sein, dass zum Ausgeben des Lichts auf die zweite Art die Lichtquellen etwa zwei Mal nacheinander, also mit einer Pause dazwischen, jeweils über die zweite, kürzere Zeitspanne hinweg betätigt werden. Ein solches mehrmaliges, insbesondere zweimaliges, kurzzeitiges Aufleuchten der Lichtquellen bei nicht korrekter Durchführung der Geste im Gegensatz zu einem einmaligen, dafür länger andauernden Aufleuchten der Lichtquellen bei korrekter Durchführung der Geste ist für den Nutzer sehr einfach erfassbar. Zudem sind solche unterschiedlichen Arten des Ausgebens des Lichts für den Nutzer sehr einfach voneinander zu unterscheiden.Furthermore, it can be provided that in order to emit the light in the second way, the light sources are actuated approximately twice in succession, i.e. with a pause in between, each over the second, shorter period of time. Such a repeated, in particular twice, short-term illumination of the light sources when the gesture is not carried out correctly, in contrast to a single, longer-lasting illumination of the light sources when the gesture is carried out correctly, is very easy for the user to understand. In addition, such different ways of emitting light are very easy for the user to distinguish from one another.

Es sind jedoch auch andere als die vorliegend beispielhaft genannten Bemessungen der jeweiligen Zeitspanne des Ausgebens des Lichts auf die erste Art und auf die zweite Art möglich, welche zu einer guten Identifizierbarkeit des Ausgebens des Lichts auf die erste Art und auf die zweite Art für den Nutzer führen.However, other dimensions than those mentioned here as examples of the respective time period for emitting the light in the first way and in the second way are also possible, which result in good identification of the output of the light in the first way and in the second way for the user lead.

In analoger Weise kann auch das Kommunizieren des Fehlertyps durch Ausgeben des Lichts während einer jeweiligen Zeitspanne im Anschluss an das Ausgeben des Lichts auf die zweite Art mittels der Auswerteeinrichtung im Betrieb des Systems bewirkt werden. Beispielsweise kann zunächst durch ein, insbesondere zweimaliges, kurzzeitiges Blinken der Lichtquellen dem Nutzer kommuniziert werden, dass die Geste nicht korrekt durchgeführt wurde. Anschließend kann nach einer kurzen Pause durch einmaliges Aufblinken oder Aufleuchten der Lichtquellen auf einen ersten Fehlertyp hingewiesen werden, durch ein zweimaliges Aufblinken oder Aufleuchten der Lichtquellen auf einen zweiten Fehlertyp und durch ein dreimaliges Aufleuchten oder Aufblinken der Lichtquellen auf einen dritten Fehlertyp.In an analogous manner, the error type can also be communicated by outputting the light during a respective period of time following the output of the light in the second way using the evaluation device during operation of the system. For example, the user can first be informed that the gesture was not carried out correctly by flashing the light sources briefly, in particular twice. After a short pause, a first type of error can be indicated by flashing or flashing the light sources once, a second type of error can be indicated by flashing or flashing the light sources twice, and a third type of error can be indicated by flashing or flashing the light sources three times.

Jedoch sind zusätzlich oder alternativ von den vorstehend beispielhaft genannten Kodierungen nach Art eines Morsecodes abweichende Arten des Aktivierens der Lichtquellen beim Ausgeben des Lichts auf die erste Art und auf die zweite Art sowie zum Kommunizieren des Fehlertyps vorstellbar.However, in addition or as an alternative to the above-mentioned Morse code-type codings, different ways of activating the light sources when emitting the light in the first way and in the second way and for communicating the error type are conceivable.

Das Verändern der Länge einer jeweiligen Zeitspanne des Ausgebens von Licht kann sowohl für das Ausgeben des sichtbaren Lichts durch die Lichtquellen als auch für das Ausgeben des nicht sichtbaren Lichts durch die weiteren Lichtquellen mittels der Auswerteeinrichtung bewirkt werden.Changing the length of a respective period of time for emitting light can be effected by means of the evaluation device both for the output of the visible light by the light sources and for the output of the invisible light by the other light sources.

Zusätzlich oder alternativ kann die Auswerteeinrichtung dazu ausgebildet sein, ein Verändern einer Intensität des ausgegebenen Lichts und/oder einer Farbe des ausgegebenen Lichts und/oder einer Reihenfolge beim Ausgeben des Lichts durch die Lichtquellen zu bewirken, um das Licht auf die erste Art und auf die zweite Art auszugeben. Auch derartige Variationen beim Ausgeben des Lichts sind von dem Nutzer einfach und zuverlässig erfassbar. Und auch solche Arten des Veränderns des Ausgebens des Lichts können zum Kommunizieren des Fehlertyps verwendet werden. Des Weiteren gilt auch hier, dass das Verändern des Ausgebens von Licht sowohl für das sichtbare Licht als auch für das nicht sichtbare Licht Anwendung finden kann, welches von den weiteren Lichtquellen ausgegeben wird.Additionally or alternatively, the evaluation device can be designed to change an intensity of the emitted light and / or a color of the emitted light and / or a sequence in the output of the light by the light sources in order to change the light in the first way and in the second way to spend. Such variations in the output of the light can also be easily and reliably detected by the user. And also such ways of changing the output of the light can be used to communicate the error type. Furthermore, it also applies here that changing the output of light can apply to both the visible light and the invisible light that is emitted by the other light sources.

Vorzugsweise ist die Erfassungseinrichtung dazu ausgebildet, eine bezogen auf die Erfassungseinrichtung berührungslose Geste des Nutzers zu erfassen. Hierbei hat für eine korrekte Durchführung der Geste der Nutzer mit einem Körperteil und/oder mit einem Objekt einer vorbestimmten Trajektorie im dreidimensionalen Raum zu folgen, um eine Funktionseinheit zu betätigen. Insbesondere bei einer derartigen, berührungslosen Geste, bei welcher der Nutzer die vorbestimmte Trajektorie im dreidimensionalen Raum nachfährt, um das Betätigen der Funktionseinheit durch Gestensteuerung zu bewirken, ist das Ausgeben der Rückmeldung an den Nutzer über die korrekte beziehungsweise nicht korrekte Durchführung der Geste besonders hilfreich. Denn so kann der Nutzer derartige Gesten, welche insbesondere in dem mittels der Erfassungseinrichtung erfassbaren dreidimensionalen Raum durchgeführt werden, ohne dass die Erfassungseinrichtung berührt wird, sehr einfach und zielgerichtet verbessern. Dadurch kann eine erfolgreiche Betätigung der wenigstens einen Funktionseinheit mittels Gestensteuerung bewirkt werden.Preferably, the detection device is designed to detect a non-contact gesture of the user in relation to the detection device. In order to carry out the gesture correctly, the user has to follow a predetermined trajectory in three-dimensional space with a body part and/or with an object in order to activate a functional unit. Particularly in the case of such a contactless gesture, in which the user follows the predetermined trajectory in three-dimensional space in order to actuate the functional unit through gesture control, giving feedback to the user about the correct or incorrect execution of the gesture is particularly helpful. In this way, the user can very easily and specifically improve such gestures, which are carried out in particular in the three-dimensional space that can be detected by the detection device without touching the detection device. This means that the at least one functional unit can be successfully operated using gesture control.

Dies ist insbesondere dann vorteilhaft, wenn es sich bei der Funktionseinheit um eine Funktionseinheit des Kraftfahrzeugs handelt, beispielsweise um ein Infotainmentsystem des Kraftfahrzeugs, eine Klimatisierungseinrichtung des Kraftfahrzeugs oder dergleichen.This is particularly advantageous if the functional unit is a functional unit of the motor vehicle, for example an infotainment system of the motor vehicle, an air conditioning device of the motor vehicle or the like.

Bei dem erfindungsgemäßen Verfahren zum Ausgeben einer Rückmeldung an einen Nutzer, bei welchem es sich insbesondere um einen Nutzer eines Kraftfahrzeugs handeln kann, zu einer von dem Nutzer durchgeführten Geste wird die Geste mittels einer Erfassungseinrichtung erfasst. Mittels einer Auswerteeinrichtung werden Signale der Erfassungseinrichtung ausgewertet. Mittels der Auswerteeinrichtung wird eine Rückmeldeeinrichtung angesteuert, wobei die Rückmeldeeinrichtung eine Mehrzahl von Lichtquellen umfasst. Die Lichtquellen geben als Rückmeldung zu der Geste Licht aus, welches für den Nutzer sichtbar ist. Mittels der Auswerteeinrichtung wird bei korrekter Durchführung der Geste ein Ausgeben des für den Nutzer sichtbaren Lichts durch die Lichtquellen auf eine erste Art bewirkt. Bei nicht korrekter Durchführung der Geste wird mittels der Auswerteeinrichtung ein Ausgeben des für den Nutzer sichtbaren Lichts durch die Lichtquellen auf eine zweite Art bewirkt, welche von der ersten Art verschieden ist.In the method according to the invention for issuing feedback to a user, who may in particular be a user of a motor vehicle, regarding a gesture carried out by the user, the gesture is detected by means of a detection device. Using an evaluation device, signals from the detection evaluated. A feedback device is controlled by means of the evaluation device, the feedback device comprising a plurality of light sources. The light sources emit light as feedback to the gesture, which is visible to the user. By means of the evaluation device, when the gesture is carried out correctly, the light visible to the user is emitted by the light sources in a first way. If the gesture is not carried out correctly, the evaluation device causes the light sources visible to the user to be output in a second way, which is different from the first way.

Das Verfahren bringt eine verbesserte Verwertbarkeit der Rückmeldung für den Nutzer mit sich. Denn der Nutzer wird sowohl über eine korrekte Durchführung der Geste als auch über eine nicht korrekte Durchführung der Geste in Kenntnis gesetzt, indem die Lichtquellen das sichtbare Licht auf die erste Art oder auf die zweite Art ausgeben.The process results in improved usability of the feedback for the user. This is because the user is informed both about the correct execution of the gesture and about the incorrect execution of the gesture by the light sources emitting the visible light in the first way or in the second way.

Die für das erfindungsgemäße System beschriebenen Vorteile und bevorzugten Ausführungsformen gelten auch für das erfindungsgemäße Verfahren und umgekehrt.The advantages and preferred embodiments described for the system according to the invention also apply to the method according to the invention and vice versa.

Die vorstehend in der Beschreibung genannten Merkmale und Merkmalskombinationen sowie die nachfolgend in der Figurenbeschreibung genannten und/oder in den Figuren alleine gezeigten Merkmale und Merkmalskombinationen sind nicht nur in der jeweils angegebenen Kombination, sondern auch in anderen Kombinationen verwendbar, ohne den Rahmen der Erfindung zu verlassen. Es sind somit auch Ausführungen von der Erfindung als umfasst und offenbart anzusehen, die in den Figuren nicht explizit gezeigt und erläutert sind, jedoch durch separierte Merkmalskombinationen aus den erläuterten Ausführungen hervorgehen und erzeugbar sind. Es sind auch Ausführungen und Merkmalskombinationen als offenbart anzusehen, die somit nicht alle Merkmale eines ursprünglich formulierten unabhängigen Anspruchs aufweisen. Es sind darüber hinaus Ausführungen und Merkmalskombinationen, insbesondere durch die oben dargelegten Ausführungen, als offenbart anzusehen, die über die in den Rückbezügen der Ansprüche dargelegten Merkmalskombinationen hinausgehen oder von diesen abweichen.The features and combinations of features mentioned above in the description as well as the features and combinations of features mentioned below in the description of the figures and/or shown in the figures alone can be used not only in the combination specified in each case, but also in other combinations without departing from the scope of the invention . Embodiments that are not explicitly shown and explained in the figures, but which emerge from the explained embodiments and can be generated by separate combinations of features are therefore also to be regarded as included and disclosed by the invention. Versions and combinations of features are also to be regarded as disclosed, which therefore do not have all the features of an originally formulated independent claim. In addition, versions and combinations of features, in particular through the statements set out above, are to be regarded as disclosed, which go beyond or deviate from the combinations of features set out in the references to the claims.

Weitere Merkmale der Erfindung ergeben sich aus den Ansprüchen, den Figuren und der Figurenbeschreibung. Dabei zeigen:

1 schematisch ein System zum Ausgeben einer Rückmeldung an einen Nutzer eines Kraftfahrzeugs im Hinblick auf eine Geste, welche der Nutzer im Rahmen einer Gestensteuerung durchführt;
2 schematisch in dem Kraftfahrzeug angeordnete Komponenten des Systems;
3 schematisch eine Schaltungsanordnung eines Lichtbands, welches eine alternierende Abfolge von Lichtquellen, insbesondere Leuchtdioden, und Infrarotlichtquellen, insbesondere Infrarot-Leuchtdioden aufweist;
4 schematisch mögliche Betriebsweisen des Lichtbands;
5 schematisch das Ausgeben von Fehlercodes mittels der Leuchtdioden des Lichtbands; und
6 schematisch weitere Rückmeldeeinrichtungen, welche in ein Armband integriert sind, das der Nutzer des Kraftfahrzeugs trägt.

Further features of the invention emerge from the claims, the figures and the description of the figures. Show:

1 schematically a system for outputting feedback to a user of a motor vehicle with regard to a gesture that the user carries out as part of a gesture control;
2 Components of the system arranged schematically in the motor vehicle;
3 schematically a circuit arrangement of a light strip, which has an alternating sequence of light sources, in particular light-emitting diodes, and infrared light sources, in particular infrared light-emitting diodes;
4 schematic possible operating modes of the light strip;
5 schematically the output of error codes using the light-emitting diodes of the light strip; and
6 schematically further feedback devices, which are integrated into a bracelet that the user of the motor vehicle wears.

In den Figuren sind gleiche oder funktionsgleiche Elemente mit identischen Bezugszeichen versehen.In the figures, identical or functionally identical elements are provided with identical reference numbers.

In 1 sind stark schematisiert Komponenten eines Systems 10 gezeigt, welches dazu ausgebildet ist, an einen Nutzer 12 insbesondere eines Kraftfahrzeugs 14 eine Rückmeldung zu einer von dem Nutzer 12 durchgeführten Geste auszugeben. Beispielsweise sei der Fall betrachtet, dass der sich in einem Fahrgastraum 16 des Kraftfahrzeugs 14 befindende Nutzer 12 eine (nicht gezeigte) Einrichtung zur Gestensteuerung von Funktionseinheiten des Kraftfahrzeugs 14 aktiviert hat.In 1 Components of a system 10 are shown in highly schematic form, which is designed to provide a user 12, in particular of a motor vehicle 14, with feedback on a gesture carried out by the user 12. For example, consider the case that the user 12 located in a passenger compartment 16 of the motor vehicle 14 has activated a device (not shown) for gesture control of functional units of the motor vehicle 14.

Nach der Aktivierung der Einrichtung zur Gestensteuerung kann somit der Nutzer 12 in dem Fahrgastraum 16 des Kraftfahrzeugs 14 Gesten durchführen beziehungsweise vornehmen, etwa um an einem Infotainmentsystem 18 des Kraftfahrzeugs 14 Einstellungen vorzunehmen. Beispielsweise kann die von dem Nutzer 12 durchgeführte Geste ein Drehen an einem Lautstärkeregler des Infotainmentsystems 18 in der Luft nachbilden. Eine solche Geste kann der Nutzer 12 etwa vornehmen, um bei der Wiedergabe von Musik in dem Fahrgastraum 16 des Kraftfahrzeugs 14 die Lautstärke zu erhöhen oder zu verringern.After activating the gesture control device, the user 12 can carry out gestures in the passenger compartment 16 of the motor vehicle 14, for example in order to make settings on an infotainment system 18 of the motor vehicle 14. For example, the gesture performed by the user 12 can simulate turning a volume control of the infotainment system 18 in the air. The user 12 can make such a gesture in order to increase or decrease the volume when playing music in the passenger compartment 16 of the motor vehicle 14.

Das System 10 umfasst eine Erfassungseinrichtung, beispielsweise in Form wenigstens einer Kamera 20, zum Erfassen der von dem Nutzer 12 vorgenommenen oder durchgeführten Geste. Bei der Geste handelt es sich vorzugsweise um eine berührungslose Geste, also um eine frei in dem Fahrgastraum 16 des Kraftfahrzeug 14 vorgenommene Geste, bei welcher der Nutzer 12 mit einem Körperteil wie etwa seiner Hand 22 oder wenigstens einem Finger einer vorbestimmten Trajektorie im dreidimensionalen Raum folgt. Beispielsweise kann der Nutzer 12 zum Durchführen der vorstehend beschriebenen Geste mit drei Fingern in einem Erfassungsbereich der Kamera 20 eine Drehbewegung in der Luft vornehmen, wobei diese Geste eine Betätigung des am Ort der Durchführung der Geste gar nicht vorhandenen Lautstärkereglers nachbildet. Das beispielhaft für das Betätigen des Lautstärkereglers beschriebene Vorgehen gilt auch für andere derartige berührungslose, also im freien Raum durchgeführte Gesten.The system 10 includes a detection device, for example in the form of at least one camera 20, for detecting the gesture made or carried out by the user 12. The gesture is preferably a contactless gesture, i.e. a gesture made freely in the passenger compartment 16 of the motor vehicle 14, in which the user 12 follows a predetermined trajectory in three-dimensional space with a body part such as his hand 22 or at least one finger . For example, the user 12 can use three fingers in a detection area to perform the gesture described above the camera 20 makes a rotational movement in the air, this gesture simulating an operation of the volume control that is not present at the location where the gesture is carried out. The procedure described as an example for operating the volume control also applies to other such non-contact gestures, i.e. those carried out in free space.

Zusätzlich oder alternativ zu der in 1 beispielhaft gezeigten Kamera 20 kann die Erfassungseinrichtung des Systems 10 durch wenigstens eine (nicht gezeigte) Radareinrichtung gebildet sein und/oder durch wenigstens eine Infrarotkamera und/oder durch wenigstens eine TOF-Kamera (TOF = time of flight, Laufzeit), also eine auf einem Laufzeitverfahren basierende Kamera zum dreidimensionalen Erfassen von Objekten.In addition or as an alternative to the in 1 Camera 20 shown as an example, the detection device of the system 10 can be formed by at least one radar device (not shown) and / or by at least one infrared camera and / or by at least one TOF camera (TOF = time of flight, transit time), i.e. one on one Camera based on runtime methods for three-dimensional detection of objects.

Wie in 2 veranschaulicht ist, können außerdem in dem Fahrgastraum 16 des Kraftfahrzeugs 14 eine Mehrzahl derartiger Sensoren 24 etwa in Form von Bildsensoren und/oder Radareinrichtungen und/oder Infrarotkameras und/oder TOF-Kamers und/oder von Kameras entsprechend der in 1 beispielhaft gezeigten Kamera 20 vorhanden sein, um die Erfassungseinrichtung des Systems 10 bereitzustellen.As in 2 is illustrated, a plurality of such sensors 24 can also be in the passenger compartment 16 of the motor vehicle 14, for example in the form of image sensors and / or radar devices and / or infrared cameras and / or TOF cameras and / or cameras according to the in 1 Camera 20 shown as an example may be present in order to provide the detection device of the system 10.

Beispielhaft soll im Folgenden mit Bezug auf 1 die Funktionsweise des Systems 10 erläutert werden, wenn die Erfassungseinrichtung lediglich durch die in 1 gezeigte Kamera 20 gebildet ist. Signale der Kamera 20 werden einer Auswerteeinrichtung 26 des Systems 10 übermittelt, und die Auswerteeinrichtung 26 wertet diese Signale aus.An example is given below with reference to: 1 the functionality of the system 10 can be explained if the detection device is only activated by the in 1 camera 20 shown is formed. Signals from the camera 20 are transmitted to an evaluation device 26 of the system 10, and the evaluation device 26 evaluates these signals.

Die Auswerteeinrichtung 26 kann beispielsweise durch eine zur Auswertung der Signale ausgebildete elektronische Recheneinrichtung bereitgestellt sein. Vorliegend ist die Auswerteeinrichtung 26 zum Ansteuern einer Rückmeldeeinrichtung 28 des Systems 10 ausgebildet. Die Rückmeldeeinrichtung 28 umfasst hierbei eine Mehrzahl von Lichtquellen 30, welche beispielsweise als Leuchtdioden ausgebildet sein können. Von den Lichtquellen 30 der Rückmeldeeinrichtung 28 sind in 1 aus Gründen der Übersichtlichkeit lediglich einige mit einem Bezugszeichen versehen.The evaluation device 26 can be provided, for example, by an electronic computing device designed to evaluate the signals. In the present case, the evaluation device 26 is designed to control a feedback device 28 of the system 10. The feedback device 28 includes a plurality of light sources 30, which can be designed, for example, as light-emitting diodes. Of the light sources 30 of the feedback device 28 are in 1 For reasons of clarity, only some of them are given a reference number.

Die Lichtquellen 30 sind dazu ausgebildet, für den Nutzer 12 sichtbares Licht auszugeben. Dementsprechend kann der Nutzer 12 eine Rückmeldung zu seiner Geste erhalten, indem die Lichtquellen 30 der Rückmeldeeinrichtung 28 aufleuchten. Der Nutzer 12 des Kraftfahrzeugs 14 kann hierbei in vorteilhafter Weise seinen Blick auf eine Frontscheibe 32 des Kraftfahrzeugs 14 gerichtet lassen und somit das Verkehrsgeschehen in einer frontseitigen Umgebung 34 (vergleiche 2) des Kraftfahrzeugs 14 weiterhin gut beobachten.The light sources 30 are designed to emit visible light for the user 12. Accordingly, the user 12 can receive feedback on his gesture by the light sources 30 of the feedback device 28 lighting up. The user 12 of the motor vehicle 14 can advantageously keep his gaze directed at a windshield 32 of the motor vehicle 14 and thus see the traffic in a front-side environment 34 (see 2 ) of the motor vehicle 14 continue to monitor closely.

Vorliegend wird an den Nutzer 12 mittels der Lichtquellen 30 sichtbares Licht ausgegeben, damit der Nutzer 12 davon in Kenntnis gesetzt wird, ob die von ihm durchgeführte Geste korrekt war oder nicht. Hierbei bewirkt die Auswerteeinrichtung 26 das Ausgeben des für den Nutzer 12 sichtbaren Lichts durch die Lichtquellen 30.In the present case, visible light is emitted to the user 12 by means of the light sources 30 so that the user 12 is informed whether the gesture he performed was correct or not. Here, the evaluation device 26 causes the light visible to the user 12 to be output by the light sources 30.

Der Nutzer 12 wird jedoch durch das Ausgeben des sichtbaren Lichts mittels der Lichtquellen 30 nicht nur darauf hingewiesen, wenn die Geste korrekt durchgeführt wurde, sondern auch auf eine nicht korrekte Durchführung der Geste. Dementsprechend ist mittels der Auswerteeinrichtung 26 bei korrekter Durchführung der Geste ein Ausgeben des für den Nutzer 12 sichtbaren Lichts durch die Lichtquellen 30 auf eine erste Art bewirkbar. Und bei nicht korrekter Durchführung der Geste ist mittels der Auswerteeinrichtung 26 ein Ausgeben des für den Nutzer 12 sichtbaren Lichts durch die Lichtquellen 30 auf eine zweite Art bewirkbar, welche von der ersten Art verschieden ist.However, by emitting the visible light using the light sources 30, the user 12 is informed not only when the gesture was performed correctly, but also when the gesture was not performed correctly. Accordingly, by means of the evaluation device 26, when the gesture is carried out correctly, the light visible to the user 12 can be output by the light sources 30 in a first way. And if the gesture is not carried out correctly, the evaluation device 26 can be used to output the light visible to the user 12 through the light sources 30 in a second way, which is different from the first way.

Beispielsweise kann eine korrekte oder erfolgreiche Durchführung der Geste dem Nutzer 12 dadurch zur Kenntnis gebracht werden, dass alle Lichtquellen 30, welche vorliegend in einer Reihe angeordnet sind und so ein Lichtband 36 bilden (vergleiche 4), über eine erste Zeitspanne einer ersten Länge hinweg gleichzeitig aufleuchten beziehungsweise aktiviert sind. Durch das Aufleuchten der Lichtquellen 30 über die erste Zeitspanne hinweg kann das Ausgeben des für den Nutzer 12 sichtbaren Lichts auf die erste Art bewirkt sein.For example, a correct or successful execution of the gesture can be made known to the user 12 by all light sources 30, which in the present case are arranged in a row and thus form a light band 36 (compare 4 ), light up or are activated simultaneously over a first period of time of a first length. By lighting up the light sources 30 over the first period of time, the light visible to the user 12 can be output in the first way.

War demgegenüber die Geste nicht erfolgreich beziehungsweise hat der Nutzer 12 die Geste nicht korrekt durchgeführt, so kann die Auswerteeinrichtung 26 ein zwei Mal nacheinander stattfindendes Aufleuchten der das sichtbare Licht ausgebenden Lichtquellen 30 über jeweilige zweite Zeitspannen hinweg bewirken, wobei die jeweilige zweite Zeitspanne beispielsweise halb so lang sein kann wie die erste Zeitspanne. Durch das zweimalige Aufleuchten oder Aktivieren der Lichtquellen 30, welche das sichtbare Licht ausgeben, kann das Ausgeben des für den Nutzer 12 sichtbaren Lichts auf die zweite Art bewirkt sein. Durch derartiges Ausgeben der entsprechenden Lichtsignale mittels der das sichtbare Licht abgebenden Lichtquellen 30 kann somit der Nutzer 12 davon in Kenntnis gesetzt werden, ob er die Geste korrekt durchgeführt hat oder ob die Gestenausführung nicht korrekt war.If, on the other hand, the gesture was not successful or the user 12 did not carry out the gesture correctly, the evaluation device 26 can cause the light sources 30 emitting the visible light to light up twice in succession over respective second time periods, the respective second time period being half as long, for example can be long like the first period of time. By lighting up or activating the light sources 30 twice, which emit the visible light, the light visible to the user 12 can be output in the second way. By outputting the corresponding light signals in this way by means of the light sources 30 emitting the visible light, the user 12 can be informed as to whether he or she has carried out the gesture correctly or whether the execution of the gesture was incorrect.

Des Weiteren kann dem Nutzer 12 nach dem Aktivieren der Einrichtung zur Gestensteuerung etwa durch ein eimaliges Aufleuchten oder Aktivieren der Lichtquellen 30 beispielsweise mit der Dauer der zweiten, kürzeren Zeitspanne mitgeteilt werden, dass sich seine Hand 22 im Erfassungsbereich der Erfassungseinrichtung etwa in Form der Kamera 20 befindet.Furthermore, the user 12 can, after activating the gesture control device, for example by lighting up or activating the device once Light sources 30, for example with the duration of the second, shorter period of time, are informed that his hand 22 is in the detection range of the detection device, approximately in the form of the camera 20.

Zusätzlich oder alternativ kann während eines Hochfahrens des Systems 10 durch ein nacheinander stattfindendes Aufleuchten der einzelnen Lichtquellen 30 entlang der Reihe, beispielsweise von links nach rechts oder von rechts nach links, dem Nutzer 12 zur Kenntnis gebracht werden, dass das System 10 gerade aktiviert wird.Additionally or alternatively, while the system 10 is starting up, the user 12 can be informed that the system 10 is currently being activated by lighting up the individual light sources 30 one after the other along the row, for example from left to right or from right to left.

Bei der Ausbildung der Rückmeldeeinrichtung 28 als das die Lichtquellen 30 umfassende Lichtband 36 ist eine Breite 38 des Lichtbands 36 geringer als eine Länge 40 des Lichtbands 36 (vergleiche 4). Insbesondere wenn sich das Lichtband 36 wie in 1 beispielhaft gezeigt an einem in Hochrichtung des Kraftfahrzeugs 14 oberen Rand einer Instrumententafel 42 des Kraftfahrzeugs 14 befindet, welche an die Frontscheibe 32 des Kraftfahrzeugs 14 angrenzt, kann der Nutzer 12 die aufleuchtenden Lichtquellen 30 gut aus dem Augenwinkel erfassen, ohne seinen durch die Frontscheibe 32 hindurch auf das Verkehrsgeschehen in der Umgebung 34 des Kraftfahrzeugs 14 gerichteten Blick von diesem Verkehrsgeschehen abzuwenden. Dies ist vorteilhaft.When the feedback device 28 is designed as the light band 36 comprising the light sources 30, a width 38 of the light band 36 is less than a length 40 of the light band 36 (see 4 ). In particular if the light band 36 is as in 1 Shown by way of example on an upper edge of an instrument panel 42 of the motor vehicle 14 in the vertical direction of the motor vehicle 14, which adjoins the windshield 32 of the motor vehicle 14, the user 12 can clearly see the illuminating light sources 30 from the corner of his eye without passing through the windshield 32 to avert the view directed at the traffic situation in the area 34 of the motor vehicle 14 from this traffic situation. This is advantageous.

In vorteilhafter Weise ist das Aufleuchten der Lichtquellen 30 auch dann für den Nutzer 12 des Kraftfahrzeugs 14 erfassbar, wenn der Nutzer 12 farbenblind ist. Es kann jedoch zusätzlich oder alternativ zu dem vorstehend Erläuterten vorgesehen sein, dass das Ausgeben des sichtbaren Lichts mittels der Lichtquellen 30 auf die erste Art und auf die zweite Art ein Verändern einer Farbe des ausgegebenen Lichts umfasst. Zusätzlich oder alternativ kann beispielsweise die Intensität des von den Lichtquellen 30 abgegebenen Lichts mittels der Auswerteeinrichtung 26 verändert werden, um das Ausgeben des für den Nutzer 12 sichtbaren Lichts durch die Lichtquellen 30 auf die erste Art und auf die zweite Art mittels der Auswerteeinrichtung 26 zu bewirken.Advantageously, the illumination of the light sources 30 can also be detected by the user 12 of the motor vehicle 14 if the user 12 is color blind. However, in addition or as an alternative to what has been explained above, it may be provided that outputting the visible light by means of the light sources 30 in the first manner and in the second manner includes changing a color of the output light. Additionally or alternatively, for example, the intensity of the light emitted by the light sources 30 can be changed by means of the evaluation device 26 in order to cause the light visible to the user 12 to be output by the light sources 30 in the first way and in the second way by means of the evaluation device 26 .

Das Lichtband 36 kann darüber hinaus weitere Lichtquellen umfassen, welche dazu ausgebildet sind, für den Nutzer 12 nicht sichtbares Licht auszugeben. Beispielsweise können diese weiteren Lichtquellen als Infrarotlichtquellen 44 ausgebildet sein. Aus Gründen der Übersichtlichkeit sind auch von diesen Infrarotlichtquellen 44 in 1 lediglich einige mit einem Bezugszeichen versehen. Dasselbe gilt für die Darstellung der Infrarotlichtquellen 44 in 4. Insbesondere können, so wie in 1 und 4 beispielhaft gezeigt, die Lichtquellen 30 und die Infrarotlichtquellen 44 entlang der Länge 40 des Lichtbands 36 alternierend angeordnet sein.The light band 36 can also include further light sources which are designed to emit light that is not visible to the user 12. For example, these additional light sources can be designed as infrared light sources 44. For reasons of clarity, 44 of these infrared light sources are also included 1 only some are given a reference number. The same applies to the representation of the infrared light sources 44 in 4 . In particular, as in 1 and 4 shown as an example, the light sources 30 and the infrared light sources 44 can be arranged alternately along the length 40 of the light strip 36.

Vorzugsweise werden auch die Infrarotlichtquellen 44 von der Auswerteeinrichtung 26 angesteuert. Dies bewirkt, dass die Infrarotlichtquellen 44 für den Nutzer 12 nicht sichtbares Licht ausgeben, welches mittels wenigstens einer Empfangseinrichtung 46 des Systems 10 erfasst werden kann. In 1 ist beispielhaft gezeigt, dass die Empfangseinrichtung 46 in ein von dem Nutzer 12 tragbares Element etwa in Form eines Armbands 48 integriert sein kann. Das Armband 48 ist in einer weiteren schematisierten Darstellung außerdem in 6 gezeigt. Demgemäß kann das Armband 48 eine Mehrzahl an Empfangseinrichtungen 46 aufweisen, welche zum Erfassen des von den Infrarotlichtquellen 44 ausgegebenen Lichts ausgebildet sind.The infrared light sources 44 are preferably also controlled by the evaluation device 26. This causes the infrared light sources 44 to emit light that is not visible to the user 12 and which can be detected by means of at least one receiving device 46 of the system 10. In 1 is shown by way of example that the receiving device 46 can be integrated into an element that can be worn by the user 12, for example in the form of a bracelet 48. The bracelet 48 is also in another schematic representation 6 shown. Accordingly, the bracelet 48 can have a plurality of receiving devices 46, which are designed to detect the light emitted by the infrared light sources 44.

Beispielsweise können die Empfangseinrichtungen 46 somit als für Infrarotlicht empfindliche Photodioden oder dergleichen ausgebildet sein. Bei Ausbildung der wenigstens einen Empfangseinrichtung 46 als für Infrarotlicht empfindliche Photodiode kann die Photodiode einen Hochpassfilter aufweisen und insbesondere zum Empfangen von Infrarotlicht mit einer Frequenz von etwa 38 Kilohertz ausgebildet sein.For example, the receiving devices 46 can thus be designed as photodiodes or the like that are sensitive to infrared light. If the at least one receiving device 46 is designed as a photodiode sensitive to infrared light, the photodiode can have a high-pass filter and can in particular be designed to receive infrared light with a frequency of approximately 38 kilohertz.

Bei dieser Variante des Systems 10 umfasst das System vorzugsweise wenigstens eine weitere Rückmeldeeinrichtung etwa in Form wenigstens eines Aktuators 50, welcher zum Ausgeben einer haptischen Rückmeldung an den Nutzer 12 ausgebildet ist. Beispielsweise kann das Armband 48 wie in 6 gezeigt eine Mehrzahl von derartiger Aktuatoren 50 oder Haptikeinrichtungen aufweisen, welche nach Art von Vibrationen bewirkenden Vibrationsmotoren oder dergleichen ausgebildet sein können.In this variant of the system 10, the system preferably comprises at least one further feedback device, for example in the form of at least one actuator 50, which is designed to output haptic feedback to the user 12. For example, the bracelet 48 can be as in 6 shown have a plurality of such actuators 50 or haptic devices, which can be designed in the manner of vibration motors or the like that cause vibrations.

Auf diese Weise kann dem Nutzer 12 die Rückmeldung zu seiner Geste nicht nur über die Rückmeldeeinrichtung 28 in Form des Lichtbands 36 durch Aktivieren der Lichtquellen 30 ausgegeben werden. Vielmehr erhält der Nutzer 12 eine weitere, haptische Rückmeldung, beispielsweise indem die Aktuatoren 50 des Armbands 48 vibrieren. Auch diese haptische Rückmeldung ist von dem Nutzer 12 erfassbar, ohne dass der Nutzer 12 seinen Blick von dem Verkehrsgeschehen abwenden muss, welches er durch die Frontscheibe 32 hindurch betrachtet.In this way, the user 12 can receive feedback on his gesture not only via the feedback device 28 in the form of the light band 36 by activating the light sources 30. Rather, the user 12 receives further haptic feedback, for example by the actuators 50 of the bracelet 48 vibrating. This haptic feedback can also be detected by the user 12 without the user 12 having to avert his gaze from the traffic that he is viewing through the windshield 32.

Vorzugsweise wird mittels der weiteren Rückmeldeeinrichtung etwa in Form der Aktuatoren 50 die weitere, von dem sichtbaren Licht verschiedene, beispielsweise haptische Rückmeldung in einer der ersten Art und der zweiten Art entsprechenden Weise an den Nutzer 12 ausgegeben. Dementsprechend können die Aktuatoren 50 beispielsweise entsprechend demjenigen Schema aktiviert werden, welches vorstehend in Bezug auf das Aktivieren der Lichtquellen 30 auf die erste Art und auf die zweite Art beschrieben wurde. Beispielsweise kann somit ein Vibrieren über eine längere Zeitspanne dem Nutzer 12 die korrekte Durchführung der Geste signalisieren. Und zwei kürzere Vibrationen über jeweils kürzere Zeitspannen hinweg können dem Nutzer 12 signalisieren, dass die Geste nicht korrekt durchgeführt wurde.Preferably, by means of the further feedback device, for example in the form of the actuators 50, the further feedback, which is different from visible light, for example haptic feedback, is output to the user 12 in a manner corresponding to the first type and the second type. Accordingly, the actuators 50 can be activated, for example, according to the scheme described above with regard to the actuator four of the light sources 30 were described in the first way and in the second way. For example, vibration over a longer period of time can signal to the user 12 that the gesture has been carried out correctly. And two shorter vibrations over shorter periods of time can signal to the user 12 that the gesture was not performed correctly.

In vorteilhafter Weise braucht jedoch das Armband 48 nicht über eine eigene Auswerteeinrichtung 26 zu verfügen, um die Signale der etwa durch die Kamera 20 (vergleiche 1) bereitgestellten Erfassungseinrichtung auszuwerten. Vielmehr steuert lediglich die Auswerteeinrichtung 26 die Infrarotlichtquellen 44 an, und das von den Infrarotlichtquellen 44 ausgegebene, für den Nutzer 12 nicht sichtbare Licht in Form von Infrarotlicht wird von der wenigstens einen Empfangseinrichtung 46 des Armbands 48 genutzt, um die Aktuatoren 50 entsprechend anzusteuern. Dennoch kann auf einfache Weise eine gute Synchronisierung der Rückmeldeeinrichtungen in Form der Lichtquellen 30 des Lichtbands 36 einerseits und der Aktuatoren 50 des Armbands 48 andererseits erreicht werden.Advantageously, however, the bracelet 48 does not need to have its own evaluation device 26 in order to receive the signals from the camera 20 (see 1 ) to evaluate the detection device provided. Rather, only the evaluation device 26 controls the infrared light sources 44, and the light in the form of infrared light emitted by the infrared light sources 44 and not visible to the user 12 is used by the at least one receiving device 46 of the bracelet 48 to control the actuators 50 accordingly. Nevertheless, good synchronization of the feedback devices in the form of the light sources 30 of the light strip 36 on the one hand and the actuators 50 of the bracelet 48 on the other hand can be achieved in a simple manner.

Wie für die wenigstens eine Empfangseinrichtung 46 des Armbands 48 beschrieben, kann in dem Kraftfahrzeug 14 wenigstens eine weitere Empfangseinrichtung 52 angeordnet sein, welche dazu ausgebildet ist, das von den Infrarotlichtquellen 44 abgegebene, für den Nutzer 12 nicht sichtbare Infrarotlicht zu erfassen (vergleiche 2).As described for the at least one receiving device 46 of the bracelet 48, at least one further receiving device 52 can be arranged in the motor vehicle 14, which is designed to detect the infrared light emitted by the infrared light sources 44 and not visible to the user 12 (cf 2 ).

Die weitere Empfangseinrichtung 52 kann hierbei einer Schallausgabeeinheit etwa in Form wenigstens eines Lautsprechers 54 des Kraftfahrzeugs 14 zugeordnet sein. Dementsprechend kann eine weitere Rückmeldeeinrichtung in Form des Lautsprechers 54 zusätzlich oder alternativ zu der haptischen Rückmeldung, welche mittels des Armbands 48 ausgegeben werden kann, eine akustische Rückmeldung an den Nutzer 12 ausgeben.The further receiving device 52 can be assigned to a sound output unit, for example in the form of at least one loudspeaker 54 of the motor vehicle 14. Accordingly, a further feedback device in the form of the loudspeaker 54 can output acoustic feedback to the user 12 in addition to or as an alternative to the haptic feedback that can be output by means of the bracelet 48.

Auch hier braucht eine die Empfangseinrichtung 52 und den Lautsprecher 54 umfassende Einheit oder Baugruppe des Systems 10 keine eigene Auswerteeinrichtung zu besitzen, welche signaltechnisch mit der Erfassungseinrichtung gekoppelt ist. Vielmehr greift auch die dem Lautsprecher 54 zugeordnete Empfangseinrichtung 52 (vergleiche 2) auf die Signale zurück, welche von den Infrarotlichtquellen 44 ausgegeben werden.Here too, a unit or assembly of the system 10 comprising the receiving device 52 and the loudspeaker 54 does not need to have its own evaluation device, which is coupled to the detection device in terms of signals. Rather, the receiving device 52 assigned to the loudspeaker 54 also takes effect (cf 2 ) back to the signals emitted by the infrared light sources 44.

Während also die das sichtbare Licht ausgebenden Lichtquellen 30 beispielsweise gleichzeitig aufleuchten, können auch die Infrarotlichtquellen 44 des Systems 10 für den Nutzer 12 nicht sichtbare Lichtsignale an die jeweiligen Empfangseinrichtungen 46, 52 aussenden, wobei diese Signale Informationen über den Status des Systems 10 beziehungsweise Gestensteuerungssystems beinhalten. Auf diese Weise können die weiteren Rückmeldeeinrichtungen etwa in Form der Aktuatoren 50 des Armbands 48 und/oder in Form des Lautsprechers 54 mit der Rückmeldeeinrichtung 28 synchronisiert werden, welche über die Lichtquellen 30 das sichtbare Licht ausgibt.So while the light sources 30 emitting the visible light light up simultaneously, for example, the infrared light sources 44 of the system 10 can also emit light signals that are not visible to the user 12 to the respective receiving devices 46, 52, these signals containing information about the status of the system 10 or gesture control system . In this way, the further feedback devices, for example in the form of the actuators 50 of the bracelet 48 and/or in the form of the loudspeaker 54, can be synchronized with the feedback device 28, which emits the visible light via the light sources 30.

In analoger Weise wie für die Situation in dem Kraftfahrzeug 14 beschrieben, kann es sich bei dem Nutzer 12 um einen Piloten eines Flugzeugs handeln, welcher im Cockpit des Flugzeugs eine Gestensteuerung durchführt und seine Aufmerksamkeit nicht von der derzeitigen Flugsituation abwenden möchte. Der Nutzer 12 kann in diesem Fall beispielsweise eine in dem Cockpit angeordnete Funktionseinheit oder Maschine durch Gestensteuerung betätigen. Hierbei gibt das Leuchtschema der in dem Lichtband 36 angeordneten Lichtquellen 30 eine Rückmeldung an den Piloten aus, aufgrund welcher der Pilot über den Systemstatus in Kenntnis gesetzt wird. Der Systemstatus kann dementsprechend zum Inhalt haben, dass die Geste korrekt durchgeführt wurde oder eben nicht korrekt durchgeführt wurde.In an analogous manner to that described for the situation in the motor vehicle 14, the user 12 can be a pilot of an aircraft who carries out gesture control in the cockpit of the aircraft and does not want to avert his attention from the current flight situation. In this case, the user 12 can, for example, operate a functional unit or machine arranged in the cockpit using gesture control. Here, the lighting scheme of the light sources 30 arranged in the light strip 36 outputs feedback to the pilot, based on which the pilot is informed of the system status. The system status can therefore indicate that the gesture was carried out correctly or was not carried out correctly.

Auch für andere Anwendungsfälle ist das System 10 in vorteilhafter Weise einsetzbar. Beispielsweise kann der Nutzer 12 eine (nicht gezeigte) Kaffeemaschine oder eine Waschmaschine oder dergleichen Haushaltsgerät per Gestensteuerung bedienen. Hierbei kann die Kaffeemaschine beispielsweise das Lichtband 36 aufweisen, welches in 4 gezeigt ist. Wenn sich der Nutzer 12 in dem gleichen Raum befindet wie die Kaffeemaschine, kann durch das Aufleuchten der Lichtquellen 30 des Lichtbands 36 entsprechend der Reichweite der Lichtquellen 30 der Nutzer 12 über die korrekte oder nicht korrekte Ausführung der Geste in Kenntnis gesetzt werden.The system 10 can also be used advantageously for other applications. For example, the user 12 can operate a coffee machine (not shown) or a washing machine or similar household appliance using gesture control. Here, the coffee machine can, for example, have the light strip 36, which is in 4 is shown. If the user 12 is in the same room as the coffee machine, the light sources 30 of the light strip 36 can illuminate the user 12 about the correct or incorrect execution of the gesture depending on the range of the light sources 30.

Wenn wie vorstehend in Bezug auf den sich in dem Fahrgastraum 16 des Kraftfahrzeugs 14 befindenden Nutzer 12 beschrieben, der Nutzer 12 außerdem das Armband 48 trägt, welches das Infrarotlicht der Infrarotlichtquellen 44 empfängt, so kann der Nutzer 12 zusätzlich die haptische Rückmeldung etwa über die Aktuatoren 50 des Armbands 48 erhalten. Dadurch braucht der Nutzer 12 nicht einmal auf die Kaffeemaschine zu blicken, um festzustellen, ob die Kaffeemaschine korrekt betätigt wurde oder nicht.If, as described above with regard to the user 12 located in the passenger compartment 16 of the motor vehicle 14, the user 12 also wears the bracelet 48, which receives the infrared light from the infrared light sources 44, the user 12 can additionally receive the haptic feedback, for example via the actuators 50 of bracelet 48 received. As a result, the user 12 does not even need to look at the coffee machine to determine whether the coffee machine was operated correctly or not.

Eine beispielhafte Verschaltung der Lichtquellen 30 in alternierender Abfolge mit den Infrarotlichtquellen 44 ist in 3 schematisch gezeigt. Dementsprechend kann den Lichtquellen 30 und den Infrarotlichtquellen 44 ein Widerstandselement 56 vorgeschaltet sein, um den elektrischen Strom zu begrenzen, mit welchem die Lichtquellen 30 und die Infrarotlichtquellen 44 beaufschlagt werden. Zum Umsetzen der von der Auswerteeinrichtung 26 vorgegebenen Schaltsignale beim Einschalten und Ausschalten der Lichtquellen 30 und der Infrarotlichtquellen 44 kann das System 10 des Weiteren einen in 3 schematisch gezeigten Mikrocontroller 58 umfassen. Die signaltechnische Kopplung der Auswerteeinrichtung 26 mit der Erfassungseinrichtung ist in 3 aus Gründen der Übersichtlichkeit nicht dargestellt.An exemplary connection of the light sources 30 in alternating sequence with the infrared light sources 44 is shown in 3 shown schematically. Accordingly, a resistance element 56 can be connected upstream of the light sources 30 and the infrared light sources 44 in order to transfer the electrical current to limit what the light sources 30 and the infrared light sources 44 are exposed to. To implement the switching signals specified by the evaluation device 26 when switching the light sources 30 and the infrared light sources 44 on and off, the system 10 can also use an in 3 microcontroller 58 shown schematically. The signaling coupling of the evaluation device 26 with the detection device is in 3 not shown for reasons of clarity.

Die Auswerteeinrichtung 26 kann insbesondere zum Ansteuern eines Bildschirms 60 etwa in Form eines Zentralbildschirms des Kraftfahrzeugs 14 ausgebildet sein, wobei das Lichtband 36 in Hochrichtung des Kraftfahrzeugs 14 oberhalb des Bildschirms 60 angeordnet sein kann. Dadurch befindet sich das Lichtband 36 in vorteilhafter Weise in einem unteren Rand des Sichtfelds des Nutzers 12, wenn der Nutzer 12 durch die Frontscheibe 32 hindurch in die Umgebung 34 des Kraftfahrzeugs 14 blickt. Der Bildschirm 60 kann in die Instrumententafel 42 des Kraftfahrzeugs 14 integriert sein (vergleiche 1).The evaluation device 26 can in particular be designed to control a screen 60, for example in the form of a central screen of the motor vehicle 14, wherein the light band 36 can be arranged above the screen 60 in the vertical direction of the motor vehicle 14. As a result, the light band 36 is advantageously located in a lower edge of the field of vision of the user 12 when the user 12 looks through the windshield 32 into the surroundings 34 of the motor vehicle 14. The screen 60 can be integrated into the instrument panel 42 of the motor vehicle 14 (see 1 ).

Die in 3 gezeigten Infrarotlichtquellen 44 können verwendet werden, um die anderen Komponenten des Systems 10, welche mit der Empfangseinrichtung 46, 52 etwa in Form der Photodiode ausgestattet sind, mit der Lichtausgabe durch die Lichtquellen 30 zu synchronisieren. Das Ausgeben des nicht sichtbaren Lichts durch die Infrarotlichtquellen 44 zum Beaufschlagen der jeweiligen Empfangseinrichtung 46, 52 mit dem Infrarotlicht kann man sich analog zu dem Ansteuern eines Geräts mittels einer Infrarotlicht abgebenden Fernbedienung vorstellen. Über das Infrarotlicht können jedoch vorliegend die Informationen über die korrekte oder nicht korrekte Durchführung der Geste den weiteren Rückmeldeeinrichtungen etwa in Form des Armbands 48 und/oder des Lautsprechers 54 übermittelt werden.In the 3 Infrared light sources 44 shown can be used to synchronize the other components of the system 10, which are equipped with the receiving device 46, 52, for example in the form of the photodiode, with the light output by the light sources 30. The output of the invisible light by the infrared light sources 44 to apply the infrared light to the respective receiving device 46, 52 can be imagined analogous to the control of a device using a remote control that emits infrared light. In the present case, however, the information about the correct or incorrect execution of the gesture can be transmitted to the other feedback devices, for example in the form of the bracelet 48 and/or the loudspeaker 54, via the infrared light.

Das die Lichtquellen 30, insbesondere in Form der Leuchtdioden, sowie die Infrarotlichtquellen 44 umfassende Lichtband 36 kann somit über den Status des Systems 10 Aufschluss geben und die weiteren Rückmeldeeinrichtungen etwa in Form der Aktuatoren 50 der Armbands 48 und/oder in Form des Lautsprechers 54 mit der Rückmeldeeinrichtung 28 synchronisieren. Auf diese Weise ist ein sehr umfassendes und gleichförmig arbeitendes Rückmeldesystem bereitgestellt.The light band 36 comprising the light sources 30, in particular in the form of the light-emitting diodes, and the infrared light sources 44 can thus provide information about the status of the system 10 and the other feedback devices, for example in the form of the actuators 50 of the bracelets 48 and/or in the form of the loudspeaker 54 the feedback device 28 synchronize. In this way, a very comprehensive and uniformly functioning feedback system is provided.

Das Lichtband 36 kann in dem Kraftfahrzeug 14 je nach Wunsch an einer geeigneten Stelle angeordnet werden, etwa so wie in 1 gezeigt oberhalb des Bildschirms 60 oder so wie in 2 gezeigt unterhalb des Bildschirms 60. In beiden Fällen wird erreicht, dass der Nutzer 12 das Licht der Lichtquellen 30 aus dem Augenwinkel heraus wahrnehmen kann, ohne von dem durch die Frontscheibe 32 hindurch betrachteten Verkehrsgeschehen abgelenkt zu werden.The light strip 36 can be arranged in the motor vehicle 14 at a suitable location as desired, approximately as shown in 1 shown above the screen 60 or so as in 2 shown below the screen 60. In both cases, the user 12 can perceive the light from the light sources 30 out of the corner of his eye without being distracted by the traffic situation viewed through the windshield 32.

Des Weiteren kann auf diese Weise sichergestellt werden, dass sich die Infrarotlichtquellen 44 im Erfassungsbereich der jeweiligen Empfangseinrichtung 46, 52 befinden. Beispielsweise kann das am Handgelenk des Nutzers 12 getragene Armband 48 die Information über die Durchführung der Geste direkt von den Infrarotlichtquellen 44 empfangen.Furthermore, it can be ensured in this way that the infrared light sources 44 are in the detection range of the respective receiving device 46, 52. For example, the bracelet 48 worn on the wrist of the user 12 can receive the information about the execution of the gesture directly from the infrared light sources 44.

Die Kamera 20 kann in ein Dachmodul 62 des Kraftfahrzeugs 14 integriert sein, um die Gesten des Nutzers 12 gut erfassen zu können. Die Auswerteeinrichtung 26 kann als sich an Bord des Kraftfahrzeugs 14 befindender Computer oder dergleichen Recheneinrichtung ausgebildet sein, welcher das Lichtband 36 ansteuert. Indem die Auswerteeinrichtung 26 das Ausgeben des nicht sichtbarem Lichts durch die Infrarotlichtquellen 44 bewirkt, steuert die Auswerteeinrichtung 26 zugleich die weiteren Rückmeldeeinrichtungen etwa in Form der Aktuatoren 50 des Armbands 48 und/oder den Lautsprecher 54 der die Empfangseinrichtung 52 umfassenden Einheit oder Baugruppe an.The camera 20 can be integrated into a roof module 62 of the motor vehicle 14 in order to be able to capture the gestures of the user 12 well. The evaluation device 26 can be designed as a computer or similar computing device located on board the motor vehicle 14, which controls the light band 36. By causing the evaluation device 26 to output the invisible light through the infrared light sources 44, the evaluation device 26 simultaneously controls the further feedback devices, for example in the form of the actuators 50 of the bracelet 48 and/or the loudspeaker 54 of the unit or assembly comprising the receiving device 52.

Indem unterschiedliche Arten von Rückmeldungen an den Nutzer 12 ausgegeben werden, wird der Nutzer 12 darin unterstützt, mit dem System 10 zu interagieren. Dadurch kann der Nutzer 12 dazu gebracht werden, die Geste besonders natürlich und intuitiv durchzuführen. Dies liegt daran, dass der Nutzer 12 über den Erfolg beziehungsweise die Korrektheit der Geste und auch über eine nicht korrekte Durchführung der Geste einfach und zuverlässig in Kenntnis gesetzt wird.By issuing different types of feedback to the user 12, the user 12 is supported in interacting with the system 10. This allows the user 12 to be made to perform the gesture particularly naturally and intuitively. This is because the user 12 is informed simply and reliably about the success or correctness of the gesture and also about incorrect execution of the gesture.

Als weitere, vorliegend nicht explizit gezeigte Rückmeldeeinrichtung kann beispielsweise ein mobiles Endgerät wie etwa ein Smartphone des Nutzers 12 zum Einsatz kommen, welches, so wie für das Armband 48 beschrieben, die wenigstens eine Empfangseinrichtung 46 aufweist, und welches beispielsweise durch Vibrieren oder dergleichen eine haptische Rückmeldung an den Nutzer 12 ausgeben kann.A further feedback device, not explicitly shown here, can be used, for example, a mobile terminal such as a smartphone of the user 12, which, as described for the bracelet 48, has at least one receiving device 46, and which has a haptic one, for example by vibrating or the like Can output feedback to the user 12.

Insbesondere wenn einzelnen Komponenten des Systems 10 abgeschaltet werden können, ist es vorteilhaft, wenn mehrere Optionen zum Ausgeben der Rückmeldung bestehen, etwa in Form des von den Lichtquellen 30 abgegebenen Lichts und/oder in Form der mittels der Aktuatoren 50 (vergleiche 4) erzeugbaren Vibrationen und/oder in Form der von dem Lautsprecher 54 (vergleiche 2) abgegebenen Töne.In particular if individual components of the system 10 can be switched off, it is advantageous if there are several options for outputting the feedback, for example in the form of the light emitted by the light sources 30 and/or in the form of the light emitted by the actuators 50 (see 4 ) vibrations that can be generated and / or in the form of the loudspeaker 54 (see 2 ) sounds emitted.

Selbst wenn beispielsweise die Infrarotlichtquellen 44 abgeschaltet sein sollten, so sorgen die Lichtquellen 30 weiterhin für das Ausgeben der Rückmeldung an den Nutzer 12. In analoger Weise ist in 4 dargestellt, dass auch nur die Infrarotlichtquellen 44 aktiviert werden können, um etwa über das Armband 48 oder über die den Lautsprecher 54 umfassende Einheit die wenigstens eine Rückmeldung an den Nutzer 12 auszugeben. Des Weiteren kann vorgesehen sein, dass lediglich die Lichtquellen 30 des Lichtbands 36 aktiviert werden. Die beiden letztgenannten Zustände sind in der mittleren und in der unteren Darstellung des Lichtbands 36 in 4 veranschaulicht.Even if, for example, the infrared light sources 44 should be switched off, the light sources 30 continue to provide feedback to the user 12. In an analogous manner, in 4 shown that only the infrared light sources 44 can be activated in order to output at least one feedback to the user 12 via the bracelet 48 or via the unit comprising the loudspeaker 54. Furthermore, it can be provided that only the light sources 30 of the light strip 36 are activated. The latter two states are in the middle and bottom representations of the light band 36 in 4 illustrated.

Dementsprechend sind mittels des Lichtbands 36 unterschiedliche Arten der Kommunikation ermöglicht, beispielsweise nur über die Infrarotlichtquellen 44 oder nur über die Lichtquellen 30 oder einerseits über die Lichtquellen 30 und andererseits unter Nutzung der Infrarotlichtquellen 44 über die wenigstens eine weitere Rückmeldeeinrichtung.Accordingly, different types of communication are made possible by means of the light strip 36, for example only via the infrared light sources 44 or only via the light sources 30 or on the one hand via the light sources 30 and on the other hand using the infrared light sources 44 via the at least one further feedback device.

Die Anzahl der Lichtquellen 30 und/oder der Infrarotlichtquellen 44 kann je Einsatzzweck des Systems 10 variiert werden. Des Weiteren kann eine von den Lichtquellen 30 ausgegebene Farbe und/oder eine Länge der jeweiligen Zeitspanne des Ausgebens von Licht und/oder eine Intensität des ausgegebenen Lichts und/oder eine Reihenfolge des Ausgebens des Lichts der einzelnen Lichtquellen 30 an den gewünschten Einsatzzweck des Systems 10 in einfacher Weise angepasst werden.The number of light sources 30 and/or infrared light sources 44 can be varied depending on the intended use of the system 10. Furthermore, a color emitted by the light sources 30 and/or a length of the respective period of time for emitting light and/or an intensity of the emitted light and/or a sequence of emitting the light of the individual light sources 30 can be tailored to the desired purpose of the system 10 can be easily adjusted.

Anhand von 5 sollen mögliche Arten erläutert werden, dem Nutzer 12 einen Fehlertyp bei der nicht korrekten Durchführung der Geste zu kommunizieren. Beispielsweise kann in 5 ein erstes Symbol 62 den kurzzeitig eingeschalteten Zustand der Lichtquellen 30 beschreiben. Ein in 5 dargestelltes weiteres Symbol veranschaulicht eine Pause 64.Based on 5 Possible ways of communicating to the user 12 a type of error if the gesture is not carried out correctly will be explained. For example, in 5 a first symbol 62 describes the briefly switched on state of the light sources 30. An in 5 Another symbol shown illustrates a break 64.

In der in 5 oberen Darstellung wird durch die beiden Symbole 62, welche der Pause 64 vorangehen, dem Nutzer 12 zunächst mitgeteilt, dass die Geste nicht korrekt durchgeführt wurde. Durch ein einmaliges weiteres Blinken der Lichtquellen 30 im Anschluss an die Pause 64 kann dem Nutzer 12 zur Kenntnis gebracht werden, dass ein erster Fehlertyp vorliegt. Der erste Fehlertyp kann beispielsweise in einer falschen Ausrichtung der die Geste durchführenden Hand 22 und/oder wenigstens eines Fingers des Nutzers 12 bestehen.In the in 5 In the upper illustration, the two symbols 62 that precede the pause 64 initially inform the user 12 that the gesture was not carried out correctly. By flashing the light sources 30 once again following the pause 64, the user 12 can be informed that a first type of error is present. The first type of error can, for example, consist of incorrect alignment of the hand 22 performing the gesture and/or at least one finger of the user 12.

In der in 5 mittleren Darstellung folgen auf die Pause 64 zwei Symbole 62. Dieses Ausgeben von Licht mittels der Lichtquellen 30 kommuniziert dem Nutzer 12 beispielsweise, dass ein zweiter Fehlertyp bei der nicht korrekten Durchführung der Geste vorlag. Der zweite Fehlertyp kann darin bestehen, dass mittels der Erfassungseinrichtung, etwa in Form der Kamera 20, die Hand 22 oder die Finger des Nutzers 12 nicht oder nicht ausreichend gut erfassbar waren, etwa aufgrund einer Verdeckung der Hand 22 und/oder der Kamera 20.In the in 5 In the middle representation, the pause 64 is followed by two symbols 62. This output of light by means of the light sources 30 communicates to the user 12, for example, that a second type of error occurred when the gesture was not carried out correctly. The second type of error can be that the hand 22 or the fingers of the user 12 could not be detected or could not be detected sufficiently well by means of the detection device, for example in the form of the camera 20, for example due to the hand 22 and/or the camera 20 being obscured.

In der in 5 unteren Darstellung folgen auf die Pause 64, welche im Anschluss an die beiden Symbole 62 dargestellt ist, drei kurzzeitige Lichtabgaben durch die Lichtquellen 30. Dementsprechend sind in der in 5 unteren Darstellung rechts von der Pause 64 drei Symbole 62 dargestellt. So kann dem Nutzer 12 das Vorliegen eines dritten Fehlertyps kommuniziert, insbesondere visualisiert werden. Der dritte Fehlertyp kann beispielsweise durch ein Abweichen von einer für die Durchführung der Geste vorgesehenen Geschwindigkeit bei der Durchführung der Geste gegeben sein.In the in 5 In the lower illustration, the break 64, which is shown following the two symbols 62, is followed by three short-term light emissions from the light sources 30. Accordingly, in FIG 5 lower representation to the right of the break 64 three symbols 62 are shown. In this way, the presence of a third type of error can be communicated to the user 12, in particular visualized. The third type of error can be caused, for example, by a deviation from a speed intended for performing the gesture when performing the gesture.

In allen diesen beispielhaft genannten Fällen wird auf den der Pause 64 folgenden Fehlercode zunächst durch das der Pause 64 vorangehende kurzzeitige und zweimalige Blinken der Lichtquellen 30 aufmerksam gemacht. Dieses zweimalige Blinken entsprechend den Symbolen 62 vor der Pause gibt an, dass die Geste nicht korrekt durchgeführt wurde. Diese Information wird dann komplettiert durch die jeweilige Anzahl des kurzzeitigen Aufblinkens der Lichtquellen 30, welches auf die Pause 64 folgt. Die in 5 exemplarisch veranschaulichte Anzahl von Fehlertypen kann von dem Nutzer 12 leicht auseinandergehalten werden, ohne dass der Nutzer 12 verwirrt ist.In all of these cases mentioned as examples, attention is first drawn to the error code following the pause 64 by the short-term and double flashing of the light sources 30 preceding the pause 64. This double flash corresponding to the symbols 62 before the pause indicates that the gesture was not performed correctly. This information is then completed by the respective number of brief flashes of the light sources 30, which follows the pause 64. In the 5 The number of error types illustrated by way of example can be easily distinguished by the user 12 without the user 12 being confused.

Insgesamt zeigen die Beispiele, wie für den Nutzer 12 des Systems 10 eine verbesserte Verwertbarkeit von Rückmeldungen bereitgestellt werden kann. Hierbei sorgt ein Lichtsystem vorzugsweise in Form des Lichtbands 36 für das Ausgeben von Rückmeldungen zu der von dem Nutzer 12 durchgeführten, vorzugsweise berührungslosen Geste.Overall, the examples show how improved usability of feedback can be provided for the user 12 of the system 10. Here, a lighting system, preferably in the form of the light strip 36, ensures that feedback is provided on the preferably non-contact gesture carried out by the user 12.

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents listed by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

WO 2010075137 A2 [0002]
US 2016350589 A1 [0004]

Claims

System (10) for outputting feedback to a user (12), in particular to a user (12) of a motor vehicle (14), regarding a gesture that can be carried out by the user (12), with a detection device (20, 24) for detecting the Gesture, an evaluation device (26) for evaluating signals from the detection device (20, 24) and for controlling a feedback device (28) of the system (10), the feedback device (28) comprising a plurality of light sources (30) which are designed for this purpose are to output visible light for the user (12) as feedback on the gesture, characterized in that , by means of the evaluation device (26), when the gesture is carried out correctly, the light visible to the user (12) is output by the light sources (30). a first way can be effected, and if the gesture is not carried out correctly, the light visible to the user (12) can be output by the light sources (30) in a second way, which is different from the first way.

System (10) after Claim 1 , characterized in that the system (10) comprises a plurality of further light sources (44) which are designed to emit light that is not visible to the user (12), with the evaluation device (26) being used to output the light for the user ( 12) invisible light can be effected by the further light sources (44) in the first way and in the second way, and wherein the system (10) comprises at least one receiving device (46, 52) which is used to detect the light for the user (12 ) is not formed by visible light.

System (10) after Claim 2 , characterized in that the system (10) comprises at least one further feedback device (50, 54), which is designed to send invisible light to the user (12) depending on the invisible light that can be detected by the at least one receiving device (46, 52). ) to provide further feedback on the execution of the gesture, other than visible light.

System (10) after Claim 3 , characterized in that the at least one further feedback device (50, 54) is designed to output the further feedback, which is different from visible light, to the user (12) in a manner corresponding to the first type and the second type.

System (10) after Claim 3 or 4 , characterized in that the at least one further feedback device (50, 54) is designed as a component of an element (48) that can be worn on the body of the user (12) and for outputting haptic feedback to the user (12), and / or as a sound output unit is designed to output acoustic feedback to the user (12).

System (10) according to one of the Claims 2 until 5 , characterized in that the light sources (30) and the further light sources (44) are arranged in a row in a field of vision of the user (12), in particular at an edge of a field of vision of the user (12), and form a light band (36). , the width (38) of which is less than a length (40) of the light strip (36), the light sources (30) and the further light sources (44) being arranged alternately in the light strip (36).

System (10) after Claim 6 , characterized in that when using the system (10) in the motor vehicle (14), the light strip (36) is on one edge, in particular on an upper edge in the vertical direction of the motor vehicle (14), of an instrument panel (42) of the motor vehicle (14). is arranged, which adjoins a windshield (32) of the motor vehicle (14).

System (10) according to one of the preceding claims, characterized in that the evaluation device (26) is designed to activate the light sources (30) in addition to emitting the light in the second way, through which the user (12) at least one type of error can be communicated when the gesture is not carried out correctly, the at least one type of error in particular being an incorrect alignment of a body part (22) and/or object of the user (12) that is moved when the gesture is being carried out in space and/or a lack of detectability of the Gesture and/or a deviation from a speed intended for carrying out the gesture when carrying out the gesture.

System (10) after Claim 8 in its reference to one of the Claims 3 until 7 , characterized in that the evaluation device (26) is designed, in addition to the output of the invisible light by the further light sources (44), to activate the further light sources (44) in the second way in order to provide the user (12) to communicate the at least one error type by means of the at least one further feedback device (50, 54).

System (10) according to one of the preceding claims, characterized in that the evaluation device (26) is designed to change - a length of a respective period of time for emitting light and / or - an intensity of the emitted light and / or - a color of the output light and / or - an order in outputting the light by the light sources (30) to output the light in the first way and in the second way.

System (10) according to one of the preceding claims, characterized in that the detection device (20, 24) is designed to detect a non-contact gesture of the user (12) relative to the detection device (20, 24), for the correct execution of which the Gesture the user (12) has to follow a predetermined trajectory in three-dimensional space with a body part (22) and / or with an object in order to operate a functional unit, in particular a functional unit (18) of the motor vehicle (14).

Method for issuing feedback to a user (12), in particular to a user (12) of a motor vehicle (14), regarding a gesture carried out by the user (12), in which the gesture is detected by means of a detection device (20, 24). , in which signals from the detection device (20, 24) are evaluated by means of an evaluation device (26) and a feedback device (28) is controlled by means of the evaluation device (26), the feedback device (28) comprising a plurality of light sources (30), which as feedback to the gesture, output light which is visible to the user (12), characterized in that , by means of the evaluation device (26), when the gesture is carried out correctly, the light visible to the user (12) is output by the light sources (30) is effected in a first way, and if the gesture is not carried out correctly, the light visible to the user (12) is caused to be emitted by the light sources (30) in a second way, which is different from the first way.