DE102012025320B4 - Method for controlling an electrical device by detecting and evaluating a non-contact manual operation input of a hand of an operator as well as suitable control device and vehicle - Google Patents
Method for controlling an electrical device by detecting and evaluating a non-contact manual operation input of a hand of an operator as well as suitable control device and vehicle Download PDFInfo
- Publication number
- DE102012025320B4 DE102012025320B4 DE102012025320.6A DE102012025320A DE102012025320B4 DE 102012025320 B4 DE102012025320 B4 DE 102012025320B4 DE 102012025320 A DE102012025320 A DE 102012025320A DE 102012025320 B4 DE102012025320 B4 DE 102012025320B4
- Authority
- DE
- Germany
- Prior art keywords
- hand
- movement
- detected
- evaluated
- control
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
Abstract
Verfahren zum Steuern einer elektrischen Einrichtung (20, 20a, 20b) durch Erfassen und Auswerten einer berührungslosen manuellen Bedieneingabe einer Hand (2) einer Bedienperson, mit den Schritten- Erfassen einer Position der Hand (2) und einer Bewegung der Hand (2), wobei die Bewegung eine Drehbewegung ist;- Auswerten der erfassten Position und Drehbewegung;- Steuern der Einrichtung (20, 20a, 20b) basierend auf der Auswertung der . Position und der Drehbewegung; dadurch gekennzeichnet, dass eine Ausrichtung eines mit der Hand (2) verbundenen Unterarms (1) in Bezug auf eine Mittenlängsachse (M) des Unterarms (1) erfasst und ausgewertet wird, das Steuern in Abhängigkeit einer Drehbewegung der Hand (2) um einen Winkel von mindestens 20 Grad um die Mittenlängsachse (M) erfolgt und eine Unterscheidung unter mehreren zu steuernden elektrischen Einrichtungen (20, 20a, 20b) erfolgt, indem vor der Auswertung der Drehbewegung eine Annäherungsbewegung in einen Nahbereich der zu steuernden Einrichtung (20, 20a, 20b) zu dessen Auswahl erfasst und ausgewertet wird.A method of controlling an electrical device (20, 20a, 20b) by detecting and evaluating a non-contact manual operation input of a hand (2) of an operator, comprising the steps of detecting a position of the hand (2) and a movement of the hand (2), wherein the movement is a rotational movement, - evaluating the detected position and rotational movement, - controlling the device (20, 20a, 20b) based on the evaluation of the. Position and rotational movement; characterized in that an orientation of a forearm (1) connected to the hand (2) with respect to a central longitudinal axis (M) of the forearm (1) is detected and evaluated, the control in response to a rotational movement of the hand (2) by an angle of at least 20 degrees about the central longitudinal axis (M) and a distinction among a plurality of electrical devices to be controlled (20, 20a, 20b) takes place by before the evaluation of the rotational movement an approaching movement in a vicinity of the device to be controlled (20, 20a, 20b ) is recorded and evaluated for its selection.
Description
Die Erfindung betrifft ein Verfahren zum Steuern einer elektrischen Einrichtung durch Erfassen und Auswerten einer berührungslosen manuellen Bedieneingabe einer Hand einer Bedienperson gemäß dem Oberbegriff des Anspruchs 1. Des Weiteren betrifft die Erfindung eine Steuervorrichtung zum Steuern der Einrichtung gemäß einem solchen Verfahren sowie ein entsprechendes Fahrzeug.The invention relates to a method for controlling an electrical device by detecting and evaluating a contactless manual operation input of a hand of an operator according to the preamble of
Die gattungsbildende Gebrauchsmusterschrift
Die Offenlegungsschrift
Die Patentschrift
Die Offenlegungsschrift
Die Offenlegungsschrift
Die Offenlegungsschrift
Es ist eine Aufgabe der vorliegenden Erfindung, ein Verfahren und eine Vorrichtung zum zuverlässigen Erkennen von berührungslosen manuellen Bedieneingaben bereitzustellen und Fehlauslösungen dabei effektiv zu vermeiden.It is an object of the present invention to provide a method and apparatus for reliably detecting noncontact manual operator inputs and effectively avoiding false tripping.
Diese Aufgabe wird durch ein Verfahren mit den Merkmalen des Patentanspruchs 1 sowie durch eine Steuervorrichtung und einem Fahrzeug mit den Merkmalen der nebengeordneten Patentansprüche 9 und 10 gelöst. Vorteilhafte Ausgestaltungen mit zweckmäßigen Weiterbildungen der Erfindung sind in den abhängigen Patentansprüchen angegeben.This object is achieved by a method having the features of
Die Erfindung geht aus von einem Verfahren zum Steuern einer elektrischen Einrichtung durch Erfassen und Auswerten einer berührungslosen manuellen Bedieneingabe einer Hand einer Bedienperson, insbesondere zum Steuern einer Funktion eines Fahrzeugs durch einen Insassen des Fahrzeugs, mit den Schritten
- - Erfassen einer Position der Hand und einer Bewegung der Hand, wobei die Bewegung eine Drehbewegung ist;
- - Auswerten der erfassten Position und Drehbewegung;
- - Steuern der Einrichtung basierend auf der Auswertung der Position und der Drehbewegung.
- - detecting a position of the hand and a movement of the hand, the movement being a rotational movement;
- - evaluating the detected position and rotational movement;
- - Controlling the device based on the evaluation of the position and the rotational movement.
Erfindungsgemäß ist vorgesehen; dass eine Ausrichtung eines mit der Hand verbundenen Unterarms in Bezug auf eine Mittenlängsachse des Unterarms erfasst und ausgewertet wird und das Steuern in Abhängigkeit einer Drehbewegung der Hand um einen Winkel von mindestens 20 Grad um die Mittenlängsachse erfolgt.According to the invention is provided; that an orientation of a hand-connected forearm with respect to a central longitudinal axis of the forearm is detected and evaluated and the control is performed in response to a rotational movement of the hand by an angle of at least 20 degrees about the central longitudinal axis.
Durch das Erfassen und Auswerten einer Ausrichtung des Unterarms und der Hand, welche einer grundsätzlich beim Gestikulieren in Verbindung mit zwischenmenschlicher Kommunikation unüblichen, aber dennoch ergonomisch nicht nachteiligen Haltung entspricht, kann eine hohe Funktionssicherheit und Auswertegüte und damit auch eine zuverlässige Bedienbarkeit sichergestellt werden.By detecting and evaluating an orientation of the forearm and the hand, which corresponds to a fundamentally gesticulate in connection with interpersonal communication unusual, but nevertheless ergonomically not disadvantageous attitude, a high reliability and Auswertegüte and thus a reliable operability can be ensured.
Dabei ist die Ausrichtung der Mittenlängsachse des Unterarms bevorzugt über die Elle des Unterarms definiert. Die Elle liegt außen zwischen Ellenbogen und kleinem Finger und weist unabhängig von einem jeweiligen menschlichen Individuum eine zumindest annähernd lineare Erstreckung auf. Die Mittenlängsachse kann wahlweise auch durch Erfassen eines bevorzugt dreidimensionalen Bildes des Unterarms erfolgen und durch Interpolation zwischen einem virtuellen Punkt in der Mitte des Handgelenks und einem zentralen Punkts in einem um den Unterarm gelegten virtuellen Zylindermantel, insbesondere wenn der Ellenbogen nicht erkennbar ist, z.B. weil die entsprechende Person eine dicke Daunenjacke trägt.The alignment of the central longitudinal axis of the forearm is preferably defined via the ulna of the forearm. The ulna lies externally between the elbow and the small finger and has an at least approximately linear extension independently of a respective human individual. Optionally, the center longitudinal axis can also be obtained by detecting a preferably three-dimensional image of the forearm and by interpolating between a virtual point in the middle of the wrist and a central point in a virtual cylinder jacket placed around the forearm, especially if the elbow is not recognizable, e.g. because the appropriate person wears a thick down jacket.
Als eine elektrische Einrichtung ist dabei bevorzugt jede Einrichtung zu verstehen, welche auf irgendeine Art und Weise manuell bedient werden kann, z.B. ein Radio, eine Lüftung, eine Beleuchtung, eine Freisprecheinrichtung, ein Navigationsgerät. Das Verfahren kann zur digitalen Aktivierung oder Deaktivierung einer Funktion einer solchen Einrichtung eines Fahrzeugs dienen, oder auch zum genauen Einstellen eines Levels einer bestimmten bereits aktivierten Funktion.As an electrical device, it is preferable to understand any device which can be manually operated in any way, e.g. a radio, a ventilation, a lighting, a hands-free device, a navigation device. The method may be for digitally enabling or disabling a function of such a device of a vehicle or for accurately setting a level of a particular already activated function.
Bevorzugt erfolgt ein Steuern in Reaktion auf eine Ausrichtung des Unterarms, die während der Drehbewegung konstant ist. Das Auswerten der Ausrichtung des Unterarms liefert bereits eine gute Sicherheit und Genauigkeit beim Erfassen und Steuern, jedoch kann die Sicherheit und Genauigkeit weiter erhöht werden, wenn ein Steuern nur dann erfolgt, falls der Unterarm während der Drehbewegung in einer konstanten Ausrichtung gehalten wird. Eine solche Bewegung ist üblicherweise keine willkürliche Bewegung, trotzdem ist sie leicht erlernbar und in ergonomischer Hinsicht nicht nachteilig.Preferably, control is in response to an orientation of the forearm that is constant during rotational movement. Evaluating the orientation of the forearm already provides good safety and accuracy in detection and control, but safety and accuracy can be further increased if control only occurs if the forearm is held in a constant orientation during rotation. Such a movement is usually not an arbitrary movement, yet it is easy to learn and ergonomically not disadvantageous.
Ein Verschwenken des Handgelenks ist dabei nicht erforderlich. Vielmehr ist es eine bevorzugte Variante des Verfahrens, dass ein Steuern in Abhängigkeit einer Bewegung erfolgt, bei welcher das Handgelenk starr bleibt und die Hand nicht gegenüber dem Unterarm verschwenkt wird, sondern ausschließlich um die Mittenlängsachse gedreht wird. Mit anderen Worten wird die Hand während der Drehbewegung in einer zumindest annähernd konstanten Ausrichtung zu der Mittenlängsachse gehalten. Die Haltung der Hand zumindest annähernd in Verlängerung des Unterarms ist eine eher bewusste als natürliche bzw. willkürliche Haltung, insbesondere von Insassen eine Fahrzeugs, so dass sich bei dieser Variante des Auswertens und Steuerns sehr wenig Fehlauslösungen oder ungenaue Auswertungen ergeben.A pivoting of the wrist is not required. Rather, it is a preferred variant of the method that a control in response to a movement takes place, in which the wrist remains rigid and the hand is not pivoted relative to the lower arm, but is rotated exclusively about the central longitudinal axis. In other words, the hand is held during the rotational movement in an at least approximately constant alignment with the central longitudinal axis. The attitude of the hand at least approximately in extension of the forearm is a more conscious than natural or arbitrary attitude, in particular of occupants a vehicle, so that there are very few false triggering or inaccurate evaluations in this variant of the evaluation and control.
Eine Positionserfassung der Hand ist zweckdienlich, um Fehleingaben auszuschließen. Eine Drehbewegung einer Hand, bei welcher die Hand in Richtung der Mittenlängsachse des Unterarms ausgerichtet bleibt, ist z.B. das manuelle Einschalten des Abblendlichts an einem Tastschalter links vom Lenkrad. Durch eine solche Bedienung, die selbst bei Fahrzeugen mit automatischer Abblendlichteinstellung meist weiterhin noch möglich ist, soll eine andere Funktion nicht ausgelöst werden, also das erfindungsgemäße Verfahren gerade nicht zu einem Steuern einer elektrischen Einrichtung führen.A position detection of the hand is useful to exclude incorrect entries. A rotational movement of a hand, in which the hand remains aligned in the direction of the central longitudinal axis of the forearm, is, for example, the manual switching on of the low beam on a push-button to the left of the steering wheel. By such an operation, which is still possible even in vehicles with automatic low-beam adjustment usually still, should a other function will not be triggered, so the method according to the invention just do not lead to a control of an electrical device.
Bevorzugt wird der Unterarm der Hand während der Drehbewegung in einer zumindest annähernd konstanten Position gehalten, um eine Einrichtung zu steuern. Für eine Auswahl einer von mehreren Einrichtungen kann wahlweise zwar eine translatorische Bewegung und/oder eine Schwenkbewegung des Unterarms erfasst und ausgewertet werden, und wahlweise können auch kombinierte Bewegungen definiert werden, um eher selten genutzte oder besonders spezifische Funktionen zu steuern, jedoch ist es für die Genauigkeit der Auswertung und des Steuervorgangs zweckdienlich, wenn der Unterarm in einer Position verbleibt, wobei die Position auch eine von mehreren definierten Positionen sein kann.Preferably, the forearm of the hand is held in an at least approximately constant position during the rotational movement to control a device. Optionally, for a selection of one of a plurality of devices, a translatory movement and / or a pivoting movement of the forearm may be detected and evaluated, and optionally combined movements may be defined to control infrequently used or specific functions, however, it is for the Accuracy of the evaluation and the control process expedient when the forearm remains in one position, the position may also be one of several defined positions.
Bevorzugt erfolgt ein Steuern der Einrichtung nur dann, wenn auch die Ausrichtung von Fingern der Hand während der Drehbewegung nicht verändert wird. Hierdurch kann eine Fehlbedienung mit guter Sicherheit ausgeschlossen werden. Gemäß einer Variante des Verfahrens kann ein Steuern in weiterer Abstufung in Abhängigkeit davon erfolgen, ob einer oder mehrere Finger eine bestimmte Ausrichtung einnehmen, jedoch wird auch hierbei bevorzugt erfasst, ob die Finger dabei in einer konstanten Ausrichtung verbleiben, insbesondere in Bezug auf die Mittenlängsachse.Preferably, the device is controlled only if the orientation of fingers of the hand during the rotational movement is not changed. As a result, a malfunction with good security can be excluded. According to a variant of the method, a further gradation control can be carried out depending on whether one or more fingers occupy a specific orientation, but here too it is preferably detected whether the fingers remain in a constant orientation, in particular with respect to the central longitudinal axis.
Das Steuern kann dabei ein Ein- oder Ausschalten umfassen, wobei die Bedieneingabe als eine Initialgeste aufgefasst werden kann, oder wahlweise auch das Regeln im Sinne einer Feinjustage. Die Feinjustage kann über eine Auswertung der Handdrehung erfolgen, wodurch z.B. eine dynamische Parametrierung einer Helligkeit in einem Fahrzeuginnenraum, einer Lüftungsstromstärke bei einem spezifischen Mannanströmer, einer Lautstärke eines Radios oder einer Temperatur im Fahrzeuginnenraum erfolgen kann. Sowohl für die Initialgeste als auch für das dynamische Parametrieren kann die Bedieneingabe im Sinne eines virtuellen Drehstellers erfolgen. D.h., eine Person kann frei im Raum ohne Berührung eine bestimmte Einrichtung bedienen über einen virtuellen Drehsteller, insbesondere auch indem sie mit dem Unterarm auf die Einrichtung weist.The control can include switching on or off, wherein the operator input can be interpreted as an initial gesture, or optionally also the rules in the sense of a fine adjustment. The fine adjustment can be done via an evaluation of the hand rotation, whereby e.g. a dynamic parameterization of a brightness in a vehicle interior, a ventilation current at a specific Mannanströmer, a volume of a radio or a temperature in the vehicle interior can be done. Both for the initial gesture and for the dynamic parameterization, the operator input can be in the sense of a virtual turntable. That is, a person can freely operate in the room without touching a particular device via a virtual turntable, especially by pointing with his forearm on the device.
Dabei kann für unterschiedliche zu steuernde Einrichtungen jeweils ein Raum definiert werden, in welchem die manuelle Bedieneingabe erfolgen muss, damit die Einrichtung überhaupt angesteuert wird, sei es eine Initialgeste oder eine Feinjustage betreffend. Hierdurch können Fehleingaben effektiver ausgeschlossen werden.In this case, a space can be defined for different devices to be controlled, in which the manual operator input must be made, so that the device is ever driven, be it an initial gesture or a fine adjustment regarding. As a result, incorrect entries can be ruled out more effectively.
Gemäß einem vorteilhaften Ausführungsbeispiel erfolgt das Steuern in Abhängigkeit einer erfassten und ausgewerteten Ausrichtung der Mittenlängsachse des Unterarms, die zumindest annähernd horizontal oder zumindest annähernd vertikal oder zumindest annähernd 45 Grad gegenüber einer horizontalen Ebene ist.According to an advantageous embodiment, the control takes place as a function of a detected and evaluated orientation of the central longitudinal axis of the lower arm, which is at least approximately horizontal or at least approximately vertical or at least approximately 45 degrees with respect to a horizontal plane.
Der rechte Unterarm einer Bedienperson kann z.B. nach links zur Schulter geführt werden, um einen Gurtbringer zu aktivieren. Wird dabei trotz der unergonomischen Anordnung des Unterarms die Hand zumindest annähernd in Verlängerung des Unterarms ausgerichtet, kann auf eindeutige Weise der Befehl erkannt und umgesetzt werden. Eine Fehlauslösung, z.B. beim Ergreifen eines Türöffners, kann mit guter Sicherheit vermieden werden, da beim Ergreifen eines Türöffners die Hand in Bezug auf den Unterarm verschwenkt wird.The right forearm of an operator may e.g. be led to the left to the shoulder to activate a Gurtbringer. If, in spite of the unergonomic arrangement of the forearm, the hand is aligned at least approximately in extension of the forearm, the command can be clearly recognized and implemented. A false trip, e.g. When grasping a door opener, can be avoided with good security, since when grasping a door opener, the hand is pivoted with respect to the forearm.
Gemäß einem vorteilhaften Ausführungsbeispiel erfolgt das Steuern in Abhängigkeit einer erfasste und ausgewerteten Drehbewegung, die über 25 Grad beträgt, bevorzugt 30 bis 50 Grad, weiter bevorzugt 40 bis 50 Grad, besonders bevorzugt etwa 45 Grad. Durch die Beschränkung auf Drehbewegungen, welche über einem Winkel von 25, 30 oder 40 Grad liegen, kann eine Fehlauslösung mit noch größerer Sicherheit vermieden werden. Je größer die Drehbewegung, desto unwahrscheinlicher ist es, dass eine willkürliche Bewegung eines Insassen eines Fahrzeugs zum Steuern der Einrichtung führt.According to an advantageous embodiment, the control takes place as a function of a detected and evaluated rotational movement, which is over 25 degrees, preferably 30 to 50 degrees, more preferably 40 to 50 degrees, particularly preferably about 45 degrees. By limiting to rotational motions which are over an angle of 25, 30 or 40 degrees, false tripping with even greater certainty can be avoided. The greater the rotational movement, the less likely it is that an arbitrary movement of an occupant of a vehicle results in control of the device.
Gemäß einem vorteilhaften Ausführungsbeispiel wird in Abhängigkeit einer erfassten und ausgewerteten Drehbewegung im Uhrzeigersinn die Einrichtung aktiviert oder ein zu steuernder Parameter der Einrichtung vergrößert, und/oder in Abhängigkeit einer erfassten und ausgewerteten Drehbewegung gegen den Uhrzeigersinn die Einrichtung deaktiviert oder ein zu steuernder Parameter der Einrichtung verkleinert. Durch diese Verfahrensausgestaltung kann eine besonders intuitive Bedienung einer Einrichtung ermöglicht werden. Eine Drehbewegung im Uhrzeigersinn wird intuitiv in Verbindung mit einem Drehregler gebracht, der eine Stellgröße erhöht, z.B. die Lautstärke eines Radios. Ein Bediener kann also die ihm intuitiv bekannte Bedieneingabe blind ausführen, also ohne die zu bedienende Einrichtung berühren zu müssen. Es kann also durch die Bedieneingabe eine Parametrierung erfolgen, insbesondere stufenlos.According to an advantageous embodiment, depending on a detected and evaluated rotational movement in the clockwise direction, the device activates or increases a parameter to be controlled of the device, and / or deactivated depending on a detected and evaluated counterclockwise rotation of the device or reduced to control a parameter of the device , By this method embodiment, a particularly intuitive operation of a device can be made possible. A clockwise rotation is intuitively associated with a knob that increases a manipulated variable, e.g. the volume of a radio. An operator can therefore blindly execute the intuitively known operating input, that is, without having to touch the device to be operated. It can therefore be done by the operator input parameterization, in particular continuously.
Gemäß einem vorteilhaften Ausführungsbeispiel erfolgt das Steuern in Abhängigkeit einer erfasste und ausgewerteten zweistufigen Drehbewegung, wobei die zweistufige Drehbewegung durch eine erste Drehung in einer ersten Richtung und eine nach einem Innehalten ausgeübte zweite Drehung in oder entgegen der ersten Richtung gebildet ist. Hierdurch kann eine größere Funktionalität mittels einer leicht erlernbaren intuitiven Bewegung bedient werden. Beispielsweise kann über die erste Drehbewegung ein Radio eingeschaltet werden und über die zweite Drehbewegung sofort die Lautstärke des Radios geregelt werden, ohne dass der Bediener die Position der Hand verändern muss. Hierdurch kann eine Bedienung auch besonders schnell und einfach erfolgen. Eine zweistufige Drehbewegung durch eine erste Drehung in einer ersten Richtung und eine nach einem Innehalten ausgeübte zweite Drehung entgegen der ersten Richtung kann z.B. für das Einschalten eines Radios in einem MUTE-Modus, also einem stummen Modus, vorgesehen sein, in welchem ein Fahrzeuginsasse nur mit Verkehrs- oder Warnmeldungen informiert wird:According to an advantageous embodiment, the control takes place as a function of a detected and evaluated two-stage rotary movement, wherein the two-stage rotary movement is formed by a first rotation in a first direction and a second rotation after a pause in or against the first direction. This allows greater functionality to be served by means of an easily learned intuitive movement. For example, a radio can be switched on via the first rotary movement and the second rotary movement can be used to control the volume of the radio without the operator having to change the position of the hand. As a result, an operation can also be done very quickly and easily. A two-stage rotary movement by a first rotation in a first direction and a second rotation after a pause against the first direction can eg be provided for switching on a radio in a MUTE mode, ie a silent mode, in which a vehicle occupant only with Traffic or warning messages are informed:
Gemäß einem vorteilhaften Ausführungsbeispiel erfolgt das Steuern in Abhängigkeit einer erfassten und ausgewerteten Ausrichtung von mindestens einem Finger der Hand, wobei bevorzugt erfasst und ausgewertet wird, ob einer oder mehrere der Finger in Richtung der Mittenlängsachse ausgerichtet sind oder ob die Finger eine Faust bilden. Hierdurch kann auf einfache Weise eine taktile manuelle Bedieneingabe, z.B. an einem Lüfter oder einem Radio, von einer berührungslosen manuellen Bedieneingabe unterschieden werden, denn bei der taktilen Bedieneingabe werden Knöpfe oder Drehregler üblicherweise nur mittels Daumen und Zeigefinger gedreht. Eine berührungslose Bedieneingabe, welche sich besonders für das erfindungsgemäße Verfahren eignet, ist daher z.B. durch in Mittenlängsachse ausgerichtete, insbesondere gestreckte, Finger oder durch eine in Mittenlängsachse ausgerichtete Faust gekennzeichnet. Durch die Auswertung einer Ausrichtung mindestens eines Fingers kann auch die Zuverlässigkeit und Genauigkeit des Verfahrens erhöht werden, insbesondere indem diejenige Einrichtung gesteuert wird, auf welche mit einem Finger gewiesen wird.According to an advantageous embodiment, the control is effected as a function of a detected and evaluated orientation of at least one finger of the hand, wherein it is preferably detected and evaluated whether one or more of the fingers are aligned in the direction of the central longitudinal axis or if the fingers form a fist. Thereby, a tactile manual operation input, e.g. on a fan or a radio, are distinguished from a non-contact manual control input, because in the tactile operator input buttons or knobs are usually rotated only by means of thumb and forefinger. A non-contact operating input which is particularly suitable for the method according to the invention is therefore, e.g. characterized by aligned in the center longitudinal axis, in particular elongated, fingers or aligned in the center longitudinal axis fist. By evaluating an alignment of at least one finger, the reliability and accuracy of the method can also be increased, in particular by controlling the device pointed to by a finger.
Gemäß einem vorteilhaften Ausführungsbeispiel erfolgt das Steuern in Abhängigkeit einer erfassten und ausgewerteten Ausrichtung von mindestens zwei Fingern der Hand, wobei erfasst und ausgewertet wird, ob die Finger zum Greifen eines virtuellen Drehstellers ausgerichtet sind. Das Erfassen eines Greifens eines virtuellen Drehstellers kann durch Auswerten der Ausrichtung von mindestens zwei Fingern zueinander erfolgen. D.h., eine Ausrichtung der Finger wird dahingehend erfasst und ausgewertet, ob die Finger, insbesondere drei der Finger, bevorzugt Zeige- und Mittelfinger und Daumen, sich um einen virtuellen Drehknopf anordnen. Die Finger können so gebogen werden, als würden sie sich um einen Drehknopf legen. Die Finger können auch direkt aufeinander gedrückt angeordnet werden, wobei das Erfassen und Auswerten sich auf die relative Lage der Fingerspitzen zueinander bezieht. Vorteilhaft ist dabei, insbesondere für die Eindeutigkeit und Genauigkeit der Auswertung, dass es sich hierbei um eine unnatürliche Bewegung handelt, also eine ganz und gar nicht willkürliche Bewegung, die aber ergonomisch ausführbar und leicht reproduzierbar und einer Bedienperson auch bekannt ist (die Bedienperson kann sie sich daher auch gut merken). Dies liefert eine gute Bediensicherheit und eine hohe Akzeptanz der Art der Bedienung durch die Bedienperson.According to an advantageous embodiment, the control takes place as a function of a detected and evaluated orientation of at least two fingers of the hand, wherein it is detected and evaluated whether the fingers are aligned for gripping a virtual turntable. The detection of a gripping of a virtual turntable can be done by evaluating the alignment of at least two fingers to each other. That is, an alignment of the fingers is detected and evaluated as to whether the fingers, in particular three of the fingers, preferably the index and middle fingers and the thumb, are arranged around a virtual knob. The fingers can be bent as if they were around a knob. The fingers can also be arranged directly pressed against each other, wherein the detection and evaluation refers to the relative position of the fingertips to each other. It is advantageous, in particular for the uniqueness and accuracy of the evaluation, that this is an unnatural movement, that is a wholly non-arbitrary movement, but ergonomically executable and easily reproducible and an operator is also known (the operator can therefore remember well). This provides good operator safety and high acceptance of the type of operation by the operator.
Erfindungsgemäß erfolgt eine Unterscheidung unter mehreren zu steuernden elektrischen Einrichtungen, indem vor der Auswertung der Drehbewegung eine Annäherungsbewegung in einen Nahbereich der zu steuernden Einrichtung zu dessen Auswahl erfasst und ausgewertet wird. Bevorzugt wird auch ein Verbleiben der Hand in dem Nahbereich erfasst, und ein Steuern einer bestimmten Einrichtung erfolgt in Abhängigkeit davon, ob die Hand in dem Nahbereich der Einrichtung verbleibt. Wird die Hand aus dem Nahbereich wegbewegt, so kann das Steuern der Einrichtung abgebrochen werden, selbst wenn die Hand noch eine auswertbare Drehbewegung vollzieht. Durch diese strikte Abgrenzung der Bedieneingaben in Bezug auf einzelne Nahbereiche kann eine Bedieneingabe eindeutiger zugeordnet werden und mehrere elektrische Einrichtungen können berührungslos gesteuert werden, selbst wenn diese nahe zueinander, insbesondere nebeneinander an einer Armatur, angeordnet sind.According to the invention, a distinction is made between a plurality of electrical devices to be controlled, in that, before the evaluation of the rotational movement, an approach movement into a near zone of the device to be controlled for its selection is detected and evaluated. Preferably, the hand remains in the near zone is also detected, and control of a particular device is made depending on whether the hand remains in the vicinity of the device. If the hand is moved away from the near range, then the control of the device can be canceled, even if the hand still performs an evaluable rotational movement. As a result of this strict delineation of the operating inputs with respect to individual near zones, an operator input can be assigned more clearly and a plurality of electrical devices can be controlled without contact, even if they are arranged close to one another, in particular adjacent to one another.
Gemäß einem vorteilhaften Ausführungsbeispiel wird die Ausrichtung des Unterarms in Bezug auf eine von mehreren zu steuernden elektrischen Einrichtungen erfasst und ausgewertet und diejenige Einrichtung gesteuert, auf welche die Mittenlängsachse gerichtet ist. Hierdurch kann auf einfache und intuitive und auch eindeutige Weise eine Steuerung mehrerer Einrichtungen erfolgen.According to an advantageous embodiment, the orientation of the lower arm is detected and evaluated with respect to one of a plurality of electrical devices to be controlled, and the device to which the central longitudinal axis is directed is controlled. This can be done in a simple and intuitive and also clear way, a control of several facilities.
Die Aufgabe wird auch durch eine Vorrichtung zum Steuern einer elektrischen Einrichtung durch Erfassen und Auswerten einer berührungslosen manuellen Bedieneingabe einer Hand einer Bedienperson gelöst, insbesondere einer Vorrichtung zum Steuern einer Funktion eines Fahrzeugs durch einen Insassen des Fahrzeugs, mit
- - einer Erfassungseinrichtung, die dazu ausgebildet ist, eine Position der Hand und eine Bewegung der Hand zu erfassen, wobei die Bewegung eine Drehbewegung ist;
- - einer Auswerteeinrichtung zur Auswertung der erfassten Position und Drehbewegung der Hand;
- - einer Ausgabeeinrichtung zur Ausgabe eines der ausgewerteten Position und Bewegung zugeordneten Steuersignals zum Steuern der Einrichtung; wobei erfindungsgemäß vorgesehen ist, dass die Erfassungseinrichtung dazu ausgebildet ist, eine Ausrichtung eines mit der Hand verbundenen Unterarms in Bezug auf eine Mittenlängsachse des Unterarms zu erfassen, wobei die Auswerteeinrichtung dazu ausgebildet ist, die Ausrichtung auszuwerten, und wobei die Ausgabeeinrichtung dazu ausgebildet ist, in Abhängigkeit einer Drehbewegung der Hand um einen
Winkel von mindestens 20 Grad um die Mittenlängsachse ein Steuersignal an die Einrichtung zu liefern. Dabei erfolgt eine Unterscheidung unter mehreren zu steuernden elektrischen Einrichtungen (20 ,20a ,20b ) dadurch, dass die Erfassungseinrichtung (11 ,11a ,11b ) weiterhin dazu ausgebildet ist, vor der Auswertung der Drehbewegung eine Annäherungsbewegung in einen Nahbereich der zu steuernden Einrichtung (20 ,20a ,20b ) zu dessen Auswahl zu erfassen und die Auswerteeinrichtung (12 ) weiterhin dazu ausgebildet ist, die Annäherungsbewegung in einen Nahbereich der zu steuernden Einrichtung (20 ,20a ,20b ) zu dessen Auswahl auszuwerten.
- a detection means adapted to detect a position of the hand and a movement of the hand, the movement being a rotary movement;
- - An evaluation device for evaluating the detected position and rotational movement of the hand;
- an output device for outputting a control signal associated with the evaluated position and movement for controlling the device; wherein according to the invention it is provided that the detection device is designed to align one with the hand connected to the associated lower arm with respect to a central longitudinal axis of the lower arm, wherein the evaluation device is adapted to evaluate the alignment, and wherein the output device is adapted to a control signal in response to a rotational movement of the hand by an angle of at least 20 degrees about the central longitudinal axis to deliver the device. In this case, a distinction is made between a plurality of electrical devices to be controlled (
20 .20a .20b ) in that the detection device (11 .11a .11b ) is further adapted, before the evaluation of the rotational movement, to approach into a vicinity of the device to be controlled (20 .20a .20b ) for its selection and the evaluation device (12 ) is further adapted to move the approaching movement into a vicinity of the device to be controlled (20 .20a .20b ) to evaluate its selection.
Bevorzugt kann die Erfassungseinrichtung die Drehbewegung mit einer Genauigkeit von mindestens 5 Grad erfassen. Dies liefert den Vorteil, dass eine Bedieneingabe differenziert ausgewertet werden kann und ein stufenweises Einstellen einer Einrichtung möglich ist, z.B. die Helligkeit einer Innenraumbeleuchtung. Weiter bevorzugt ist die Erfassungseinrichtung dazu ausgebildet, die Drehbewegung in einem Bereich von 0 bis 180 Grad zu erfassen. Eine Drehbewegung des Unterarms bzw. der Hand im Bereich von 180 Grad ist eine sehr unübliche Bewegung, die jedoch ergonomisch noch leicht durchführbar ist, und kann bevorzugt für besondere Befehlseingaben verwendet werden, wie z.B. das Öffnen des Dachs eines Cabrios. Eine Drehbewegung des Unterarms bzw. der Hand im Bereich von 90 Grad hingegen fällt leichter und kann bevorzugt für häufigere Befehlseingaben verwendet werden, wie z.B. bei Stillstand des Fahrzeugs das Öffnen oder Schließen einer Kofferraumabdeckung oder einer Schiebetür.Preferably, the detection device can detect the rotational movement with an accuracy of at least 5 degrees. This provides the advantage that an operator input can be evaluated differentiated and a stepwise setting of a device is possible, e.g. the brightness of an interior lighting. More preferably, the detection means is adapted to detect the rotational movement in a range of 0 to 180 degrees. A rotational movement of the forearm or hand in the range of 180 degrees is a very unusual movement, which, however, is ergonomically still feasible, and may preferably be used for special instruction inputs, such as e.g. opening the roof of a convertible. By contrast, rotary movement of the forearm or hand in the region of 90 degrees is easier and can preferably be used for more frequent command inputs, e.g. when the vehicle is stationary, the opening or closing of a boot cover or a sliding door.
Die Erfassungseinrichtung kann dabei neben einer Bewegung und einer Position der Hand bzw. des Unterarms auch eine Ausrichtung der Hand bzw. des Unterarms erfassen, und auch eine Bewegungsrichtung kann erfasst werden.The detection device can detect not only a movement and a position of the hand or forearm but also an orientation of the hand or forearm, and also a direction of movement can be detected.
Die Steuervorrichtung kann dabei auch eine Regelungsfunktion übernehmen. Mit anderen Worten kann die Steuervorrichtung über die Erfassungseinrichtung erfasste Bewegungen auswerten und in Steuersignale umsetzen, gleichzeitig kann aber auch eine Regelung unabhängig von irgendwelchen Bewegungen erfolgen, z.B. in einem Fahrzeug eine Lautstärkeregelung in Abhängigkeit der Fahrzeuggeschwindigkeit, oder eine Helligkeit von Leuchten bzw. vom Fahrzeuginnenraum in Abhängigkeit einer Helligkeit der Umgebung des Fahrzeugs.The control device can also assume a control function. In other words, the control device can evaluate movements detected by the detection device and convert them into control signals, but at the same time a regulation can also take place independently of any movements, e.g. in a vehicle, a volume control function of the vehicle speed, or a brightness of lights or the vehicle interior depending on a brightness of the environment of the vehicle.
Bevorzugt ist die Erfassungseinrichtung dazu ausgebildet, eine Ausrichtung eines mit der Hand verbundenen Unterarms sowie die Ausrichtung der Hand in Bezug auf den Unterarm gleichzeitig mit dem Erfassen der Drehbewegung zu erfassen.Preferably, the detection means is adapted to detect an alignment of a hand-connected forearm and the orientation of the hand with respect to the forearm simultaneously with the detection of the rotational movement.
Die mit Bezug zu dem erfindungsgemäßen Verfahren vorgestellten Ausführungsformen und deren Vorteile gelten entsprechend für die beanspruchte Steuervorrichtung sowie das beanspruchte Fahrzeug.The embodiments presented with reference to the method according to the invention and their advantages apply correspondingly to the claimed control device and the claimed vehicle.
Weitere Vorteile, Merkmale und Einzelheiten der Erfindung ergeben sich aus den Ansprüchen, der nachfolgenden Beschreibung bevorzugter Ausführungsformen sowie anhand der Zeichnungen, wobei gleiche oder funktionsgleiche Elemente mit identischen Bezugszeichen versehen sind. Dabei zeigen:
-
1a ,1b ,1c in einer perspektivischen Ansicht jeweils eine Hand an einem Unterarm einer Bedienperson in einer Ausrichtung, die als eine Bedieneingabe bei einem Verfahren zum Steuern einer elektrischen Einrichtung gemäß einem Ausführungsbeispiel der Erfindung erfasst werden kann; -
2 in einer Seitenansicht eine Hand an einem Unterarm einer Bedienperson, welche axial fluchtend zu einer Mittenlängsachse des Unterarms ausgerichtet ist; -
3 in einer schematischen Darstellung eine Steuervorrichtung gemäß einem Ausführungsbeispiel der Erfindung; und -
4 in einer schematischen Darstellung eine Steuervorrichtung gemäß einem weiteren Ausführungsbeispiel der Erfindung.
-
1a .1b .1c in a perspective view in each case a hand on a forearm of an operator in an orientation that can be detected as an operating input in a method for controlling an electrical device according to an embodiment of the invention; -
2 in a side view, a hand on a forearm of an operator, which is aligned axially in alignment with a central longitudinal axis of the forearm; -
3 in a schematic representation of a control device according to an embodiment of the invention; and -
4 in a schematic representation of a control device according to another embodiment of the invention.
In der
In der
In der
In der
In der
In der
Claims (10)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102012025320.6A DE102012025320B4 (en) | 2012-12-22 | 2012-12-22 | Method for controlling an electrical device by detecting and evaluating a non-contact manual operation input of a hand of an operator as well as suitable control device and vehicle |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102012025320.6A DE102012025320B4 (en) | 2012-12-22 | 2012-12-22 | Method for controlling an electrical device by detecting and evaluating a non-contact manual operation input of a hand of an operator as well as suitable control device and vehicle |
Publications (2)
Publication Number | Publication Date |
---|---|
DE102012025320A1 DE102012025320A1 (en) | 2014-06-26 |
DE102012025320B4 true DE102012025320B4 (en) | 2019-04-04 |
Family
ID=50878353
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102012025320.6A Active DE102012025320B4 (en) | 2012-12-22 | 2012-12-22 | Method for controlling an electrical device by detecting and evaluating a non-contact manual operation input of a hand of an operator as well as suitable control device and vehicle |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102012025320B4 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102015011259A1 (en) | 2015-08-26 | 2016-03-24 | Daimler Ag | Method for controlling an adjustable vehicle roof |
DE102022127890A1 (en) | 2022-10-21 | 2024-05-02 | Bayerische Motoren Werke Aktiengesellschaft | System for displaying information in a vehicle using LED elements integrated in a glass surface |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102004035886B4 (en) | 2004-07-23 | 2006-10-12 | Daimlerchrysler Ag | Gurtbringersystem in a vehicle |
DE102008060768A1 (en) | 2008-12-05 | 2009-09-10 | Daimler Ag | Articulated object part e.g. pedestrian's hand forearm region, classifying method for use in driver assistance process of vehicle, involves transforming image recording such that internal degree of freedom is considered in standard views |
DE102009043798A1 (en) | 2008-12-17 | 2010-06-24 | Northrop Grumman Space & Mission Systems Corporation, Los Angeles | Method for detecting hand gestures |
DE102009046376A1 (en) | 2009-11-04 | 2011-05-05 | Robert Bosch Gmbh | Driver assistance system for automobile, has input device including manually operated control element that is arranged at steering wheel and/or in area of instrument panel, where area lies in direct vicinity of wheel |
DE202012005255U1 (en) | 2012-05-29 | 2012-06-26 | Youse Gmbh | Operating device with a gesture monitoring unit |
DE102011009229A1 (en) | 2011-01-22 | 2012-07-26 | Daimler Ag | Adjusting device for adjusting passenger seat of vehicle e.g. cabriolet, has operating device which is provided with sensor units for detecting gesture of occupant |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102012005255A1 (en) | 2012-03-15 | 2013-09-19 | Volkswagen Aktiengesellschaft | Loading station for electrically charging of electric vehicle, has cover that is arranged on housing wall and provided with access port so that charging connectors are covered by cover |
-
2012
- 2012-12-22 DE DE102012025320.6A patent/DE102012025320B4/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102004035886B4 (en) | 2004-07-23 | 2006-10-12 | Daimlerchrysler Ag | Gurtbringersystem in a vehicle |
DE102008060768A1 (en) | 2008-12-05 | 2009-09-10 | Daimler Ag | Articulated object part e.g. pedestrian's hand forearm region, classifying method for use in driver assistance process of vehicle, involves transforming image recording such that internal degree of freedom is considered in standard views |
DE102009043798A1 (en) | 2008-12-17 | 2010-06-24 | Northrop Grumman Space & Mission Systems Corporation, Los Angeles | Method for detecting hand gestures |
DE102009046376A1 (en) | 2009-11-04 | 2011-05-05 | Robert Bosch Gmbh | Driver assistance system for automobile, has input device including manually operated control element that is arranged at steering wheel and/or in area of instrument panel, where area lies in direct vicinity of wheel |
DE102011009229A1 (en) | 2011-01-22 | 2012-07-26 | Daimler Ag | Adjusting device for adjusting passenger seat of vehicle e.g. cabriolet, has operating device which is provided with sensor units for detecting gesture of occupant |
DE202012005255U1 (en) | 2012-05-29 | 2012-06-26 | Youse Gmbh | Operating device with a gesture monitoring unit |
Also Published As
Publication number | Publication date |
---|---|
DE102012025320A1 (en) | 2014-06-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP1998996B1 (en) | Interactive operating device and method for operating the interactive operating device | |
DE102006028046B4 (en) | Combined display and operating device for a motor vehicle | |
EP2726960A1 (en) | Apparatus and method for contactlessly detecting objects and/or persons and gestures and/or operating procedures made and/or carried out thereby | |
DE102013012466B4 (en) | Operating system and method for operating a vehicle-side device | |
DE102014116292A1 (en) | System for transmitting information in a motor vehicle | |
DE102006019065A1 (en) | Input interface for vehicle cockpit, has control lever with knob head that forms finger contact surface, and detection device generating output signals according to measure of position of finger on surface | |
EP2943367A1 (en) | Method for synchronizing display devices in a motor vehicle | |
WO2014033042A1 (en) | Providing an input for an operating element | |
EP3393843B1 (en) | Vehicle with an image capturing unit and an operating system for operating devices of the vehicle and method for operating the operating system | |
WO2015062751A1 (en) | Method for operating a device for the contactless detection of objects and/or persons and their gestures and/or of control operations in a vehicle interior | |
EP3418861B1 (en) | Method for operating a display device, and a motor vehicle | |
DE102007011543A1 (en) | Method for operating equipment of a vehicle and operating device for such devices | |
DE102012012729A1 (en) | Operating device for motor vehicle, comprises adjusting unit and control unit, which controls adjusting unit, such that display is moved from rest position into gripping position when operating intention of user is detected | |
WO2018137939A1 (en) | Method for operating an operating system, operating system, and vehicle comprising an operating system | |
DE102013226209A1 (en) | Method for the contactless detection of gestures and operation of electric and / or electronic functional modules in motor vehicles, as well as a device for carrying out the method | |
DE102008004970A1 (en) | Operating system for use in cockpit of motor vehicle, has operating unit mechanically moved between position and another position by actuating element when detecting approximation of actuator to operating elements | |
DE102017204976B4 (en) | Operating system for controlling at least one operable device, vehicle with an operating system and method for operating an operating system | |
DE102013000069B4 (en) | Motor vehicle user interface with a control element for detecting a control action | |
DE102013114794A1 (en) | Crooked screen | |
WO2016016050A1 (en) | Method for operating a light function of motor-vehicle headlamps and motor vehicle having a display device and an operating element for operating the light function of the motor-vehicle headlamps | |
DE102012025320B4 (en) | Method for controlling an electrical device by detecting and evaluating a non-contact manual operation input of a hand of an operator as well as suitable control device and vehicle | |
DE102008044332A1 (en) | Operating device and method of operation | |
DE102009037401A1 (en) | Operating element for working an infotainment system in a vehicle, especially a car, makes multiple operator control actions possible like turning a wheel | |
DE102017110104A1 (en) | VEHICLE SWITCHING INTERFACE WITH APPROACH | |
DE102008060363B4 (en) | Motor vehicle with an operating system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R012 | Request for examination validly filed | ||
R016 | Response to examination communication | ||
R018 | Grant decision by examination section/examining division | ||
R020 | Patent grant now final |