WO2020249298A1 - Verfahren zur optimierung der bedienung einer optischen anzeige - Google Patents

Verfahren zur optimierung der bedienung einer optischen anzeige Download PDF

Info

Publication number
WO2020249298A1
WO2020249298A1 PCT/EP2020/061649 EP2020061649W WO2020249298A1 WO 2020249298 A1 WO2020249298 A1 WO 2020249298A1 EP 2020061649 W EP2020061649 W EP 2020061649W WO 2020249298 A1 WO2020249298 A1 WO 2020249298A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
optical display
vehicle
person
touch
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/EP2020/061649
Other languages
English (en)
French (fr)
Inventor
Valtentin BUSS
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mercedes Benz Group AG
Original Assignee
Daimler AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daimler AG filed Critical Daimler AG
Priority to CN202080042719.5A priority Critical patent/CN113966581A/zh
Priority to US17/596,449 priority patent/US20220305910A1/en
Publication of WO2020249298A1 publication Critical patent/WO2020249298A1/de
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03K—PULSE TECHNIQUE
    • H03K17/00—Electronic switching or gating, i.e. not by contact-making and –breaking
    • H03K17/94—Electronic switching or gating, i.e. not by contact-making and –breaking characterised by the way in which the control signals are generated
    • H03K17/96—Touch switches
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/25—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using haptic output
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B60K35/81—Arrangements for controlling instruments for controlling displays
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143—Touch sensitive instrument input devices
    • B60K2360/1438—Touch screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146—Instrument input by gesture
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149—Instrument input by detecting viewing direction not otherwise provided for
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/33—Illumination features
    • B60K2360/349—Adjustment of brightness
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03K—PULSE TECHNIQUE
    • H03K2217/00—Indexing scheme related to electronic switching or gating, i.e. not by contact-making or -breaking covered by H03K17/00
    • H03K2217/94—Indexing scheme related to electronic switching or gating, i.e. not by contact-making or -breaking covered by H03K17/00 characterised by the way in which the control signal is generated
    • H03K2217/96—Touch switches
    • H03K2217/96042—Touch switches with illumination
    • H03K2217/96046—Key-pad combined with display, back-lit
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03K—PULSE TECHNIQUE
    • H03K2217/00—Indexing scheme related to electronic switching or gating, i.e. not by contact-making or -breaking covered by H03K17/00
    • H03K2217/94—Indexing scheme related to electronic switching or gating, i.e. not by contact-making or -breaking covered by H03K17/00 characterised by the way in which the control signal is generated
    • H03K2217/96—Touch switches
    • H03K2217/96062—Touch switches with tactile or haptic feedback

Definitions

  • the invention relates to a method for optimizing the operation of a
  • Touch-sensitive optical display according to the type defined in more detail in the preamble of claim 1.
  • the invention also relates to the use of such a display
  • a generic method is known in principle from US Pat. No. 10,001,837 B2.
  • the method there uses an optical display in the form of a computer display.
  • various functions are triggered in order to simplify operation for the user and to adapt the content of the display accordingly.
  • Context a context-dependent changing surface of such a control element.
  • the object of the present invention is now to further improve a method for optimizing the operation of a touch-sensitive optical display by evaluating the viewing direction of a person using the optical display.
  • Touch-sensitive optical display comprises at least two display and
  • a first display and operating mode is activated when the person's line of sight is directed towards the optical display. If a person looks at the optical display, then the optical display is operated in a first mode, typically in a mode which could also be referred to as “normal operation”. In addition, it can be the case that the direction of gaze of the person is not or only partially aligned with the optical display. However, the person may still want to operate the visual display, either "blindly” or by only looking partially at the visual display, i.e. repeatedly for a short time, or aligning their viewing direction so that the visual display lies in a spatial section of their recorded field of vision. This type of operation in the second display and operating mode could also be referred to as "blind operation”.
  • the second display and operating mode now provides a corresponding simplification of the operation for precisely this application of "blind" operation, so that such a quasi-blind operation still works relatively well.
  • a touch-sensitive optical display as a control element cannot easily be implemented, since the typically smooth surface shows the virtual keys, but does not make a boundary between them perceptible.
  • Operating mode can therefore to facilitate the "blind" operation according to a very advantageous development of the invention at least one of the measures discussed below in comparison to the first display and operating mode, ie the
  • the brightness and / or the contrast of the optical display can be increased. This means that even if you only look out of the corner of your eye, you can see the difference between the individual functional areas easier to see on the visual display, so that "blind" operation can be made easier.
  • the corner of the eye is looked at the optical display. It is also helpful to have a
  • Control signal is generated. It is often the case that numerous functional areas, for example a main menu and a submenu, are displayed accordingly on such an optical display. In order to improve the operability in the second display and operating mode, provision can be made to reduce the number of these functional areas accordingly. This can be achieved in particular with the previously described variant of an increase in the
  • Functional areas go hand in hand. Operation is then reduced to the few actually important functional areas, such as the main menu items. In the next step, some submenu items can then be displayed again, so that overall a simplification of the representation and a reduction in the number of functional areas shown are achieved in order to improve the
  • Another possibility, which can be used in addition or as an alternative, is to increase the force required to transmit a control signal via the
  • haptic and / or thermal boundaries between the functional areas can also be generated, or if these are already present, they can be correspondingly reinforced.
  • Examples of such haptic limits would be, for example, increasing the functional areas compared to the surrounding areas or also reducing the height of the same.
  • Such a method is basically known from DE 10 2015 215 862 A1 mentioned at the beginning.
  • Other methods can also be used here, for example different vibrations of the surface in different functional areas and / or in the
  • haptic feedback which are based on electrostatics, for example, and have an electrical effect on the blood circulation in the fingertip, can also be used to create a haptic impression that is only realized virtually, but for the user like an actual haptic impression can be felt. Furthermore, it would be conceivable to establish thermal limits by, for example, heating the functional areas more intensely than the lighting with other and / or additional wavelengths of light
  • the method according to the invention provides, according to a further very advantageous embodiment, that at least in the event that the direction of view of the person is not or only partially aligned with the optical display, the person's head position is additionally evaluated, with one of the optical Head position facing away from the display, the second display and operating mode is activated. In addition to the pure evaluation of the direction of view, the position of the head of the person can also be determined
  • the head position of the optical display is turned away, it can be assumed that the eyes are also not completely directed towards the optical display, and thus the visual display cannot or only partially be perceived from the corner of the eye.
  • the head position can thus be used as an additional feature in order to activate the second display and operating mode, that is to say the mode for "blind" operation.
  • the fact that the viewing direction is not or only partially directed to the optical display is determined by evaluating the viewing directions occurring during a predetermined time period with regard to their duration. If it is the case here that the duration of the viewing directions on the optical display is shorter than the duration during which the optical display is not looked at, it can accordingly be assumed that the viewing direction is not or only partially oriented on the optical display. Accordingly, in such a case, as an alternative or in addition to the evaluations described above, the second display and
  • Operating mode can be activated.
  • the method according to the invention provides that an optical sensor, in particular a camera, is used to evaluate the person's line of sight.
  • a camera can be used, for example, to detect the direction of gaze of a person by assessing the eyes and / or the reflections occurring on the eyes. If the reflections, which are an image of the optical display on which the gaze is directed, do not correspond to the display or the corresponding reflections lie outside the area of the pupil or are shifted relative to it, one of them must not or only partially affect the optical Direction of viewing can be assumed.
  • the method according to the invention can in principle be used accordingly in the operation of any touch-sensitive optical display by means of an evaluation of the viewing direction.
  • the preferred application should be in the area of a vehicle.
  • a touch-sensitive optical display is arranged, for example, in the central instrument in the area of the center console or in the middle of the dashboard.
  • operation should also take place while driving. A person driving the vehicle does not look at the visual, or at least only for a very short time
  • Display element to operate it accordingly.
  • this operation is relatively easy due to the buttons implemented as hardware.
  • optical display elements with a touch-sensitive surface be it a
  • the method described can be used to allow the person driving the vehicle to have a permanent view of the possibility of simple operation even without the optical display, which at the same time represents the operating element.
  • the use of the method according to the invention provides that to evaluate the viewing direction and in particular the head position, if this is also evaluated, the person driving the vehicle is detected, for which purpose at least one interior camera of the vehicle is used as a sensor.
  • a very advantageous development of this application in a vehicle also provides that the optimization of the operation is only used when the vehicle is moving.
  • the vehicle therefore only offers the optimization of operation when the vehicle is moving and the person driving the vehicle is thus potentially concentrated on the traffic situation. She is then not able to keep her gaze on the visual display without endangering herself and other road users. she will therefore, if there is a need for operation, want to carry out this operation blindly or partially blindly with occasional glances out of the corner of the eye.
  • the method according to the invention is particularly well suited for this purpose, so that it has its particularly preferred use in a moving vehicle.
  • the viewing direction or the partial viewing direction is directed in the direction of travel of the vehicle.
  • the viewing direction in this preferred use of the method according to the invention, it must be assumed that the person driving the vehicle primarily has the traffic flow in mind.
  • the second display and operating mode is activated in order to facilitate blind operation or operation from the corner of the eye.
  • the head position If the head position is aligned in the direction of travel of the vehicle, it must also be assumed that the primary gaze is directed in the direction of travel, so that the second display and operating mode is also activated in this situation.
  • the viewing direction or a viewing direction largely in one direction, for example in the direction of travel of the vehicle, is evaluated either via the spatial distribution of the view, but in particular via the temporal distribution of the view in the direction of travel and on the visual display, so that if the viewing direction is completely or predominantly facing away from the optical display direction, blind operation is correspondingly active.
  • the touch-sensitive optical display can be a touch-sensitive screen permanently installed on the vehicle.
  • touch-sensitive surfaces of a cladding part or decorative element inside the vehicle can be used accordingly, so that the operation of virtual "buttons" arranged therein, which are sometimes only made visible by lighting when a hand approaches, can be made easier .
  • a vehicle designated 1 can be seen in a section.
  • a person designated by 2 who drives the vehicle 1.
  • This person 2 is now additionally provided with an optical display 3, for example the screen of a central operating device.
  • Various functions for example
  • the visual display 3 is thereby via a
  • Control unit 4 activated accordingly.
  • Direction of travel F of the vehicle here directed forward. This is indicated by the arrow labeled a corresponding to the viewing direction. If, on the other hand, the person wants to look at the optical display 3, in particular to see a corresponding one there
  • your viewing direction will be directed towards the optical display 3 in accordance with the arrow b. This is particularly easy when the vehicle 1 is at a standstill. If the vehicle 1 is moving, however, the direction of view a, b will predominate, i.e. that is, with a significantly larger proportion of time, the viewing direction a in the direction of travel F of the vehicle 1 onto the
  • the head 6 of the person 2 is predominantly oriented in the direction of travel F of the vehicle 1 and not diagonally downwards and / or diagonally laterally onto the optical display 3.
  • An interior camera 7 in the vehicle 1 is used to appropriately evaluate the viewing directions a, b of the person 2 and possibly the posture of their head 6. It goes without saying that the use of several cameras which are arranged distributed over the interior is also conceivable. From the viewing direction a, b, the result is that the gaze is not or only partially directed from the corner of the eye to the optical display 3, while something is to be operated on it, because, for example, a hand of the person 2 (not shown here) is directed at it optical display 3 approaches, then from a normal first display and operating mode of the optical display 3 by means of the control device 4 to a second display and
  • Operating mode can be changed. This then allows quasi a "blind" operation of the optical display device 3.
  • various measures can be implemented individually or in combination with one another.
  • an additional device 8 which could also be integrated into the optical display 3, can be controlled accordingly via the control device 4 to generate haptic feedback in order to generate haptic
  • buttons In the second display and operating mode, the force required to trigger an input can also be increased accordingly, so that it is possible to run your finger over the optical display 3 without immediately triggering unwanted inputs. In this case, the input would only be triggered with a stronger pressure force on the optical display 3.
  • This can also be supported by adapting the haptic feedback, for example, to make buttons or the boundaries between the buttons palpable and, for example, to achieve transitions between the buttons.
  • the virtual engagement of buttons can also be achieved through appropriate haptic feedback can be simulated. For example, a simulated surface structure could also be implemented to feel the functional areas.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zur Optimierung der Bedienung einer berührungssensitiven optischen Anzeige (3) mittels einer Auswertung der Blickrichtung (a,b) einer die optische Anzeige (3) nutzenden Person (2). Die Erfindung ist dadurch gekennzeichnet, dass wenigstens zwei Anzeige- und Bedienmodi verfügbar sind, wobei ein erster Anzeige- und Bedienmodus aktiviert wird, wenn die Blickrichtung (a,b) der Person in Richtung auf die optische Anzeige (3) ausgerichtet ist, wobei ein zweiter Anzeige- und Bedienmodus immer dann aktiviert wird, wenn die Blickrichtung (a,b) der Person (2) nicht oder nur zum Teil auf die optische Anzeige (3) ausgerichtet ist. Die bevorzugte Verwendung des Verfahrens erfolgt zur Optimierung der Bedienung einer fest verbauten berührungssensitiven optischen Anzeige (3) in einem Fahrzeug (1).

Description

Verfahren zur Optimierung der Bedienung einer optischen Anzeige
Die Erfindung betrifft ein Verfahren zur Optimierung der Bedienung einer
berührungssensitiven optischen Anzeige nach der im Oberbegriff von Anspruch 1 näher definierten Art. Außerdem betrifft die Erfindung die Verwendung eines derartigen
Verfahrens in einem Fahrzeug.
Ein gattungsgemäßes Verfahren ist prinzipiell aus der US-Patentschrift 10,001 ,837 B2 bekannt. Das dortige Verfahren nutzt eine optische Anzeige in Form eines Displays eines Computers. Über eine Auswertung der Blickrichtung des Nutzers werden verschiedene Funktionen ausgelöst, um so die Bedienung für den Nutzer zu erleichtern und die Inhalte der Anzeige entsprechend anzupassen.
Darüber hinaus ist es bekannt, in Fahrzeugen berührungssensitive optische Anzeigen einzusetzen, welche neben der Funktionalität der Anzeige gleichzeitig die Funktion eines Bedienelements umfassen. Die DE 10 2015 215 862 A1 beschreibt in diesem
Zusammenhang eine sich kontextabhängig verändernde Oberfläche eines solchen Bedienelements.
Die Aufgabe der vorliegenden Erfindung besteht nun darin, ein Verfahren zur Optimierung der Bedienung einer berührungssensitiven optischen Anzeige mittels einer Auswertung der Blickrichtung einer die optische Anzeige nutzenden Person weiter zu verbessern.
Erfindungsgemäß wird dies durch ein Verfahren mit den Merkmalen im Anspruch 1 , und hier insbesondere im kennzeichnenden Teil des Anspruchs 1 erreicht. Weiterführende Ausgestaltungen des erfindungsgemäßen Verfahrens ergeben sich aus den hiervon abhängigen Unteransprüchen. Ferner ist im Anspruch 7 eine besonders bevorzugte Verwendung ebendieses Verfahrens in einem Fahrzeug angegeben. Auch hier ergeben sich vorteilhafte Ausgestaltungen und Weiterbildungen der Verwendung aus den hiervon abhängigen Unteransprüchen.
Das erfindungsgemäße Verfahren zur Optimierung der Bedienung einer
berührungssensitiven optischen Anzeige umfasst wenigstens zwei Anzeige- und
Bedienmodi. Ein erster Anzeige- und Bedienmodus wird aktiviert, wenn die Blickrichtung der Person in Richtung auf die optische Anzeige gerichtet ist. Blickt eine Person auf die optische Anzeige, dann wird die optische Anzeige in einem ersten Modus betrieben, typischerweise in einem Modus, welcher auch als "Normalbetrieb" bezeichnet werden könnte. Daneben kann es so sein, dass die Blickrichtung der Person nicht oder nur zum Teil auf die optische Anzeige ausgerichtet ist. Eventuell möchte die Person die optische Anzeige aber dennoch bedienen, entweder "blind" oder indem sie nur teilweise auf die optische Anzeige blickt, also kurzzeitig immer wieder, oder ihre Blickrichtung so ausrichtet, dass die optische Anzeige in einem räumlichen Teilabschnitt ihres erfassten Blickfeldes liegt. Diese Art der Bedienung in dem zweiten Anzeige- und Bedienmodus könnte auch als "Blindbedienung" bezeichnet werden. Die Person will dabei die optische Anzeige weiterhin bedienen, konzentriert sich aber mit ihrer Blickrichtung auf etwas völlig anderes, beispielsweise auf eine andere Person, auf die Umgebung oder Ähnliches. Der zweite Anzeige- und Bedienmodus sieht nun für genau diesen Anwendungsfall der "blinden" Bedienung eine entsprechende Vereinfachung der Bedienung vor, sodass auch eine solche quasi blinde Bedienung noch relativ gut funktioniert.
Für den Fall realer Tasten oder Tastaturen ist es so, dass über eine haptische
Rückmeldung die einzelnen Tasten zu fühlen sind, sodass festgestellt werden kann, auf welcher Taste beispielsweise ein Finger ruht, auch ohne dass unmittelbar in diese Richtung geblickt werden muss. Dieses Verfahren lässt sich jedoch bei einer
berührungssensitiven optischen Anzeige als Bedienelement nicht ohne Weiteres realisieren, da die typischerweise glatte Oberfläche zwar die virtuellen Tasten zeigt, eine Grenze zwischen diesen jedoch nicht fühlbar macht. Der zweite Anzeige- und
Bedienmodus kann deshalb zur Erleichterung der "blinden" Bedienung gemäß einer sehr vorteilhaften Weiterbildung der Erfindung wenigstens eine der nachfolgend diskutierten Maßnahmen im Vergleich zum ersten Anzeige- und Bedienmodus, also dem
"Normalmodus" umfassen. So kann beispielsweise eine Erhöhung der Helligkeit und/oder des Kontrasts der optischen Anzeige erfolgen. Damit ist auch bei einem Blick lediglich aus dem Augenwinkel heraus der Unterschied zwischen einzelnen Funktionsbereichen auf der optischen Anzeige leichter zu erkennen, sodass die "blinde" Bedienung erleichtert werden kann.
Außerdem ist es so, dass die Funktionsbereiche, durch deren Berührung ein Steuersignal generiert wird, entsprechend vergrößert werden können. Auch dann ist es einfacher, die Bereiche bei einer Bedienung zu treffen, auch wenn nicht oder lediglich aus dem
Augenwinkel auf die optische Anzeige geschaut wird. Ferner ist es hilfreich, eine
Reduzierung der Anzahl von Funktionsbereichen, durch deren Berührung ein
Steuersignal generiert wird, vorzunehmen. Häufig ist es so, dass auf einer solchen optischen Anzeige zahlreiche Funktionsbereiche, beispielsweise eines Hauptmenüs und eines Untermenüs, entsprechend angezeigt werden. Um nun die Bedienbarkeit im zweiten Anzeige- und Bedienmodus zu verbessern, kann es vorgesehen werden, die Anzahl dieser Funktionsbereiche entsprechend zu reduzieren. Dies kann insbesondere mit der zuvor beschriebenen Ausführungsvariante einer Vergrößerung der
Funktionsbereiche einhergehen. Die Bedienung wird dann auf die tatsächlich wichtigen wenigen Funktionsbereiche, beispielsweise die Hauptmenüpunkte, reduziert. Im nächsten Schritt können dann wieder einige Untermenüpunkte angezeigt werden, sodass jedoch insgesamt eine Vereinfachung der Darstellung und eine Verringerung der Anzahl der dargestellten Funktionsbereiche erreicht wird, um hier eine Verbesserung der
Bedienbarkeit ohne direkten vollständigen Blickkontakt zu erreichen.
Eine weitere Möglichkeit, welche ergänzend oder alternativ eingesetzt werden kann, ist eine Vergrößerung der benötigten Kraft, um ein Steuersignal über die
berührungssensitive optische Anzeige auszulösen. Eine solche Vergrößerung der notwendigen Kraft, bis ein Steuersignal bei der Berührung eines Funktionsbereichs ausgelöst wird, hat ebenfalls entscheidende Vorteile. Dadurch ist es möglich,
beispielsweise mit der Fingerspitze über die Anzeige zu fahren, ohne damit bereits eine Funktion auszulösen. Die Funktion wird erst dann ausgelöst, wenn ein deutlich stärkerer Druck mit der Fingerspitze ausgelöst wird. Dies erlaubt ein verbessertes Suchen bzw. Liegenlassen des Fingers, um dann nach einem kurzzeitigen Blick aus dem Augenwinkel auf die Situation den richtigen Funktionsbereich entsprechend zu berühren und durch eine stärkere Krafteinwirkung das gewünschte Steuersignal auszulösen. Insbesondere muss bei liegen gelassenem Finger nicht bei jedem Blick aus dem Augenwinkel neu begonnen werden etwas zu suchen. Auch ist es möglich, eine haptische Rückmeldung im Falle der Bedienung entsprechend zu erzeugen, oder falls eine solche ohnehin vorgesehen ist, diese entsprechend zu verstärken. Hierdurch wird es möglich, durch die Verbesserung der Rückmeldung auch bei einer "blinden" Bedienung ein sehr gutes Gefühl für die Tatsache, ob die Bedienung erfolgt ist oder nicht, zu vermitteln.
Als weiteren, aber wichtigen Punkt können außerdem haptische und/oder thermische Grenzen zwischen den Funktionsbereichen generiert, oder falls diese ohnehin vorhanden sind, entsprechend verstärkt werden. Beispiele für solche haptische Grenzen wären beispielsweise die Erhöhung der Funktionsbereiche gegenüber den umliegenden Bereichen oder auch eine Reduzierung der Höhe derselben. Ein solches Verfahren ist grundlegend aus der eingangs genannten DE 10 2015 215 862 A1 bekannt. Auch lassen sich weitere Verfahren hier einsetzen, beispielsweise unterschiedliche Vibrationen der Oberfläche bei unterschiedlichen Funktionsbereichen und/oder bei den
Funktionsbereichen und den zwischen diesen liegenden sie begrenzenden Abschnitten. Auch weitere haptische Rückmeldungen, welche beispielsweise auf der Elektrostatik basieren und eine elektrische Wirkung auf die Blutzirkulation in der Fingerspitze bewirken, können genutzt werden, um so einen haptischen Eindruck zu erzeugen, welcher lediglich virtuell realisiert wird, jedoch für den Benutzer wie ein tatsächlicher haptischer Eindruck zu spüren ist. Ferner wäre es denkbar, thermische Grenzen zu errichten, indem beispielsweise die Funktionsbereiche durch die Beleuchtung mit anderen und/oder zusätzlichen Wellenlängen des Lichts stärker aufgeheizt werden als die
Grenzbereiche dazwischen, um so durch den über die Fingerspitzen ertastbaren
T emperaturunterschied feststellen zu können, ob man sich auf einem Funktionsbereich oder auf einer Grenze zwischen den Funktionsbereichen befindet.
Insbesondere in Kombination mit einer Vergrößerung der Kraft und der Reduzierung der Anzahl von Funktionsbereichen wäre es so möglich, beispielsweise vom leicht tastbaren Rand der optischen Anzeige aus über die Funktionsbereiche zu fahren und damit haptisch und/oder thermisch festzustellen, dass nun beispielsweise drei
Funktionsbereiche passiert worden sind, man sich mit dem Finger also auf dem vierten Funktionsbereich befindet. Dieser könnte dann entsprechend betätigt werden, wenn dies der gewünschte Funktionsbereich ist, und zwar auch ohne, dass aus dem Augenwinkel heraus der Blick zumindest kurzzeitig auf die optische Anzeige gerichtet werden müsste. Somit wäre eine tatsächliche Blindbedienung grundlegend denkbar. Das erfindungsgemäße Verfahren sieht es gemäß einer weiteren sehr vorteilhaften Ausgestaltung vor, dass zumindest für den Fall, dass die Blickrichtung der Person nicht oder nur zum Teil auf die optische Anzeige ausgerichtet ist, ergänzend die Kopfstellung der Person ausgewertet wird, wobei im Falle einer der optischen Anzeige abgewandten Kopfstellung der zweite Anzeige- und Bedienmodus aktiviert wird. Neben der reinen Auswertung der Blickrichtung lässt sich also auch die Kopfstellung der Person
berücksichtigen. Ist die Kopfstellung der optischen Anzeige abgewandt, kann davon ausgegangen werden, dass die Augen auch nicht vollständig auf die optische Anzeige gerichtet sind, und somit die Wahrnehmung der optischen Anzeige nicht oder nur teilweise aus dem Augenwinkel heraus möglich ist. Die Kopfstellung kann also als zusätzliches Merkmal genutzt werden, um den zweiten Anzeige- und Bedienmodus, also den Modus zur "blinden" Bedienung zu aktivieren.
Eine sehr vorteilhafte Weiterbildung des Verfahrens sieht es dabei vor, dass die
Tatsache, dass die Blickrichtung nicht oder nur zum Teil auf die optische Anzeige gerichtet ist, dadurch ermittelt wird, dass die auftretenden Blickrichtungen während einer vorgegebenen Zeitspanne hinsichtlich ihrer zeitlichen Dauer ausgewertet werden. Ist es dabei so, dass die Dauer der Blickrichtungen auf die optische Anzeige kürzer sind als die Dauer während der nicht auf die optische Anzeige geblickt wird, kann dementsprechend von einer nicht oder nur zum Teil auf die optische Anzeige ausgerichteten Blickrichtung ausgegangen werden. Dementsprechend kann auch in einem solchen Fall alternativ oder ergänzend zu den bisher beschriebenen Auswertungen der zweite Anzeige- und
Bedienmodus aktiviert werden.
Das erfindungsgemäße Verfahren sieht es vor, dass zur Auswertung der Blickrichtung der Person ein optischer Sensor eingesetzt wird, insbesondere eine Kamera. Über eine solche Kamera lässt sich beispielsweise die Blickrichtung einer Person durch eine Beurteilung der Augen und/oder der auf den Augen auftretenden Spiegelungen erfassen. Entsprechen die Spiegelungen, welche ein Abbild der optischen Anzeige auf die der Blick gerichtet ist, sind, der Anzeige nicht oder die entsprechenden Spiegelungen liegen außerhalb des Bereichs der Pupille bzw. sind gegenüber dieser verschoben, muss von einer nicht oder nur zum Teil auf die optische Anzeige gerichteten Blickrichtung ausgegangen werden. Darüber hinaus ist es möglich, die Kopfstellung der Person über den optischen Sensor, insbesondere die Kamera, auszuwerten, um so weitere Rückschlüsse und eine
Verbesserung der Auswertung zur Aktivierung des zweiten Bedien- und Anzeigemodus zu erreichen.
Das erfindungsgemäße Verfahren lässt sich prinzipiell bei der Bedienung jeder berührungssensitiven optischen Anzeige mittels einer Auswertung der Blickrichtung entsprechend einsetzen. Der bevorzugte Anwendungsfall soll jedoch im Bereich eines Fahrzeugs liegen. In einem Fahrzeug ist es häufig so, dass eine berührungssensitive optische Anzeige beispielsweise im Zentralinstrument im Bereich der Mittel konsole oder in der Mitte des Armaturenbretts angeordnet ist. In der Praxis ist es so, dass häufig eine Bedienung auch während der Fahrt erfolgen soll. Eine das Fahrzeug fahrende Person richtet den Blick dann nicht oder zumindest nur sehr kurzzeitig auf das optische
Anzeigeelement, um es entsprechend zu bedienen. Bei herkömmlichen Bedienelementen ist durch die als Hardware realisierten T asten diese Bedienung relativ einfach. Bei optischen Anzeigeelementen mit berührungssensitiver Oberfläche, sei es nun ein
Bildschirm oder eine virtuelle Taste in einem Zierelement, einem Verkleidungsteil oder dergleichen, ist dies quasi nicht mehr möglich, da diese Taste typischerweise nicht ertastbar hervorsteht, um so den optischen Eindruck des Verkleidungsteils oder
Zierelements bzw. die Darstellungsflexibilität des Bildschirms nicht weiter zu
beeinträchtigen. Genau für diesen Fall ist es nun besonders vorteilhaft, wenn das beschriebene Verfahren genutzt werden kann, um für die das Fahrzeug fahrende Person die Möglichkeit einer einfachen Bedienung auch ohne die optische Anzeige, welche gleichzeitig das Bedienelement darstellt, dauerhaft im Blick zu haben, ermöglicht. Die erfindungsgemäße Verwendung des Verfahrens sieht es dabei vor, dass zur Auswertung der Blickrichtung und insbesondere der Kopfstellung, wenn diese mit ausgewertet wird, die das Fahrzeug fahrende Person erfasst wird, wozu wenigstens eine Innenraumkamera des Fahrzeugs als Sensor genutzt wird.
Eine sehr vorteilhafte Weiterbildung dieser Anwendung in einem Fahrzeug sieht es ferner vor, dass die Optimierung der Bedienung nur bei fahrendem Fahrzeug Anwendung findet. Das Fahrzeug bietet die Optimierung der Bedienung also nur, wenn das Fahrzeug fährt, und die das Fahrzeug fahrende Person damit potenziell auf das Verkehrsgeschehen konzentriert ist. Sie ist dann nicht in der Lage, ihren Blick dauerhaft auf die optische Anzeige zu richten, ohne sich und andere Verkehrsteilnehmer zu gefährden. Sie wird daher, wenn ein Bedarf zur Bedienung besteht, diese Bedienung blind oder teilweise blind mit gelegentlichen Blicken aus dem Augenwinkel heraus vornehmen wollen.
Insbesondere dafür ist das erfindungsgemäße Verfahren besonders gut geeignet, sodass es bei einem fahrenden Fahrzeug seine besonders bevorzugte Verwendung hat.
Bei der Auswertung der Blickrichtung kann in dieser bevorzugten Verwendung des erfindungsgemäßen Verfahrens dabei ausgewertet werden, ob die Blickrichtung oder die teilweise Blickrichtung in Fahrtrichtung des Fahrzeugs gerichtet ist. Bei einer solchen Blickrichtung in Fahrtrichtung des Fahrzeugs muss davon ausgegangen werden, dass die das Fahrzeug fahrende Person primär den Verkehrsfluss im Auge hat. Für diesen Fall wird der zweite Anzeige- und Bedienmodus aktiviert, um die Blindbedienung oder die Bedienung aus dem Augenwinkel heraus entsprechend zu erleichtern.
Vergleichbares gilt für die Kopfstellung. Wenn die Kopfstellung in Fahrtrichtung des Fahrzeugs ausgerichtet ist, muss ebenfalls davon ausgegangen werden, dass der primäre Blick in Fahrtrichtung gerichtet ist, sodass auch in dieser Situation der zweite Anzeige- und Bedienmodus aktiviert wird. Auch hier ist es so, dass die Blickrichtung oder eine großenteils in eine Richtung, beispielsweise in Fahrtrichtung des Fahrzeugs, gerichtete Blickrichtung entweder über die räumliche Aufteilung des Blicks insbesondere jedoch über die zeitliche Aufteilung des Blicks in die Fahrtrichtung und auf die optische Anzeige ausgewertet wird, sodass bei einer ganz oder überwiegend der optischen Anzeigerichtung abgewandten Blickrichtung die Blindbedienung entsprechend aktiv ist.
Die berührungssensitive optische Anzeige kann wie bereits erwähnt ein an dem Fahrzeug fest verbauter berührungssensitiver Bildschirm sein. Ergänzend oder alternativ dazu können auch berührungssensitive Oberflächen eines Verkleidungsteils oder Zierelements im Inneren des Fahrzeugs entsprechend verwendet werden, sodass die Bedienung von darin angeordneten virtuellen "Knöpfen", welche teilweise nur bei Annäherung einer Hand überhaupt durch eine Beleuchtung sichtbar gemacht werden, entsprechend erleichtert werden kann.
Weitere vorteilhafte Ausgestaltungen des erfindungsgemäßen Verfahrens sowie seiner Verwendung ergeben sich auch aus dem Ausführungsbeispiel, welches nachfolgend unter Bezugnahme auf die Figur näher dargestellt ist. Die einzige beigefügte Figur zeigt einen Teil eines Fahrzeugs mit einer darin befindlichen das Fahrzeug fahrenden Person zur Erläuterung des erfindungsgemäßen Verfahrens.
In der Darstellung der einzigen beigefügten Figur ist ein mit 1 bezeichnetes Fahrzeug in einem Ausschnitt zu erkennen. In dem Fahrzeug 1 befindet sich eine mit 2 bezeichnete Person, welche das Fahrzeug 1 fährt. Dieser Person 2 steht nun zusätzlich eine optische Anzeige 3 beispielsweise der Bildschirm eines zentralen Bediengeräts zur Verfügung. Über diese optische Anzeige 3 können verschiedene Funktionen, beispielsweise
Mediengeräte, Funktionen des Fahrzeugs, Navigationsfunktionen und dergleichen, angesteuert und visualisiert werden. Die optische Anzeige 3 wird dabei über ein
Steuergerät 4 entsprechend angesteuert. Die gewünschten Inhalte werden für die Person
2 auf der optischen Anzeige 3 entsprechend dargestellt und virtuelle Funktionsbereiche werden angezeigt, welche auf der berührungsempfindlichen Oberfläche der optischen Anzeige 3 beispielsweise durch ein Fingertippen entsprechende Steuersignale auslösen, um damit die Funktionen zu steuern.
Zumindest während der Fahrt des Fahrzeugs 1 in der Fahrtrichtung F oder auch in einer entgegengesetzten Fahrtrichtung beim Rückwärtsfahren des Fahrzeugs 1 ist es so, dass die Person 2 sich ganz oder größtenteils auf das Verkehrsgeschehen konzentrieren wird. Ihre von einem angedeuteten Auge 5 ausgehende Blickrichtung a, b ist also in
Fahrtrichtung F des Fahrzeugs, hier also nach vorn gerichtet. Dies ist durch den mit a bezeichneten Pfeil der Blickrichtung entsprechend angedeutet. Will die Person dagegen die optische Anzeige 3 betrachten, insbesondere um dort einen entsprechenden
Funktionsbereich zur Bedienung anzutippen, wird ihre Blickrichtung entsprechend des Pfeils b eher auf die optische Anzeige 3 gerichtet sein. Dies ist insbesondere dann einfach möglich, wenn das Fahrzeug 1 sich im Stillstand befindet. Fährt das Fahrzeug 1 jedoch, wird die Blickrichtung a, b überwiegen, d.h. also mit einem deutlich größeren Zeitanteil die Blickrichtung a in Fahrtrichtung F des Fahrzeugs 1 auf das
Verkehrsgeschehen sein, und für den Fall, dass etwas auf der optischen Anzeige 3 bedient werden soll, wird nur ein kleiner Teil der Zeit für einen Blick quasi aus dem Augenwinkel auf die optische Anzeige 3 entsprechend der Blickrichtung b genutzt. Die Person 2 ist also während der Fahrt nur eingeschränkt in der Lage, die optische Anzeige
3 zu betrachten und die darauf befindlichen Funktionsbereiche zu bedienen.
Typischerweise ist dies auch dadurch zu erkennen, dass der Kopf 6 der Person 2 überwiegend in Fahrtrichtung F des Fahrzeugs 1 ausgerichtet ist und eben nicht schräg nach unten und/oder schräg seitlich auf die optische Anzeige 3.
Um nun die Blickrichtungen a, b der Person 2 sowie gegebenenfalls die Haltung ihres Kopfes 6 entsprechend auszuwerten, wird eine Innenraumkamera 7 in dem Fahrzeug 1 genutzt. Selbstverständlich ist auch die Nutzung mehrerer Kameras, welche über den Innenraum verteilt angeordnet sind, denkbar. Ergibt sich nun aus der Blickrichtung a, b, dass der Blick nicht oder nur teilweise quasi aus dem Augenwinkel heraus auf die optische Anzeige 3 gerichtet ist, während auf dieser etwas bedient werden soll, weil sich beispielsweise eine hier nicht dargestellte Hand der Person 2 dieser optischen Anzeige 3 annähert, dann kann von einem normalen ersten Anzeige- und Bedienmodus der optischen Anzeige 3 mittels des Steuergeräts 4 auf einen zweiten Anzeige- und
Bedienmodus gewechselt werden. Dieser erlaubt dann quasi eine "blinde" Bedienung der optischen Anzeigeeinrichtung 3. Hierfür lassen sich verschiedene Maßnahmen einzeln oder in Kombination miteinander realisieren. Beispielsweise lässt sich ein Zusatzgerät 8, welches auch in die optische Anzeige 3 integriert sein könnte, zur Erzeugung haptischer Rückmeldungen über das Steuergerät 4 entsprechend ansteuern, um haptische
Rückmeldungen bei der Bedienung der optischen Anzeige 3 zu geben oder diese gegenüber dem Normalmodus der Bedienung zu verstärken. Andere Möglichkeiten zur Verbesserung und Vereinfachung der Bedienbarkeit der optischen Anzeige 3, ohne auf sie zu blicken oder bei nur gelegentlichem Blick aus dem Augenwinkel heraus auf die optische Anzeige 3, sind ebenfalls möglich. Die dafür eingesetzten Aspekte können einzeln oder in Kombination miteinander, beispielsweise die Erhöhung der Helligkeit, eine Vergrößerung der Schaltflächen, eine Vergrößerung des Kontrasts und/oder ein
Ausblenden von untergeordneten oder passiven Funktionen zugeordneten
Funktionsbereichen, bzw. Schaltflächen, umfassen. Auch kann in dem zweiten Anzeige- und Bedienmodus die zur Auslösung einer Eingabe benötigte Kraft entsprechend erhöht werden, sodass es möglich ist, mit dem Finger über die optische Anzeige 3 zu fahren, ohne sofort ungewollte Eingaben auszulösen. Erst bei einer stärkeren Druckkraft auf die optische Anzeige 3 würde in diesem Fall die Eingabe ausgelöst. Unterstützt werden kann dies außerdem durch eine Anpassung des haptischen Feedbacks, um beispielsweise Schaltflächen bzw. die Grenzen zwischen den Schaltflächen fühlbar zu machen und beispielsweise Übergänge zwischen den Schaltflächen zu erreichen. Auch das virtuelle Einrasten von Schaltknöpfen kann durch ein entsprechendes haptisches Feedback simuliert werden. Auch ließe sich beispielsweise eine simulierte Oberflächenstruktur zum Ertasten der Funktionsbereiche umsetzen.
Eine Möglichkeit, dies zu realisieren, wäre beispielsweise der Einsatz von an sich bekannten piezoelektrischen Motoren, um ein piezoelektrisches Feedback zu geben. Auch ließe sich ein thermisches Feedback realisieren, um so unterschiedliche
Funktionsbereiche bzw. die Grenzen zwischen diesen durch unterschiedliche
Temperaturen der Oberfläche der optischen Anzeige zu realisieren. All dies vereinfacht die Bedienung mit abgewandtem oder teilweise abgewandtem Blick. Vorteilhafterweise wird dies durch größere Funktionsbereiche und stärkere Kontraste ergänzt, um auch aus dem Augenwinkel heraus, wenn die das Fahrzeug 1 nutzende Person 2 gewissermaßen nur im Seitenblick auf die optische Anzeige 3 schielt, eine vereinfachte Bedienung zu gewährleisten.

Claims

Patentansprüche
1. Verfahren zur Optimierung der Bedienung einer berührungssensitiven optischen Anzeige (3) mittels einer Auswertung der Blickrichtung (a,b) einer die optische Anzeige (3) nutzenden Person (2) ,
dadurch gekennzeichnet, dass
wenigstens zwei Anzeige- und Bedienmodi verfügbar sind, wobei ein erster Anzeige- und Bedienmodus aktiviert wird, wenn die Blickrichtung (a,b) der Person in Richtung auf die optische Anzeige (3) ausgerichtet ist, wobei ein zweiter Anzeige- und Bedienmodus immer dann aktiviert wird, wenn die Blickrichtung (a,b) der Person (2) nicht oder nur zum Teil auf die optische Anzeige (3) ausgerichtet ist.
2. Verfahren nach Anspruch 1 ,
dadurch gekennzeichnet, dass
zumindest für den Fall, dass die Blickrichtung (a,b) der Person nicht oder nur zum Teil auf die optische Anzeige (3) ausgerichtet ist ergänzend die Kopfstellung der Person (2) ausgewertet wird, wobei im Falle einer der optischen Anzeige (3) abgewandten Kopfstellung der zweite Anzeige- und Bedienmodus aktiviert wird.
3. Verfahren nach Anspruch 1 oder 2,
dadurch gekennzeichnet, dass
die Tatsache, dass die Blickrichtung (a,b) nicht oder nur zum Teil auf die optische Anzeige (3) gerichtet ist, dadurch ermittelt wird, dass die aufgetretenen
Blickrichtungen (a,b) während einer vorgegebene Zeitspanne hinsichtlich ihrer zeitlichen Dauer ausgewertet werden, wobei bei einer kürzeren Dauer der
Blickrichtungen (a,b) auf die optische Anzeige (3) als nicht auf die optische Anzeige (3) von einer Blickrichtung (a,b) nicht oder nur zum Teil auf die optische Anzeige (3) ausgegangen wird.
4. Verfahren nach Anspruch 1 , 2 oder 3
dadurch gekennzeichnet, dass
die Blickrichtung (a,b) der Person (2) über einen optischen Sensor, insbesondere eine Kamera (7), ausgewertet wird.
5. Verfahren nach einem der Ansprüche 2 bis 4,
dadurch gekennzeichnet, dass
die Kopfstellung der Person (2) über einen optischen Sensor, insbesondere eine Kamera (7), ausgewertet wird.
6. Verfahren nach einem der Ansprüche 1 bis 5,
dadurch gekennzeichnet, dass
der zweite Anzeige- und Bedienmodus wenigstens eine der folgenden Maßnahmen im Vergleich zum ersten Anzeige- und Bedienmodus umfasst:
eine Erhöhung der Helligkeit und/oder des Kontrasts der optischen Anzeige
(3);
eine Vergrößerung von Funktionsbereichen, durch deren Berührung ein Steuersignal generiert wird;
eine Reduzierung der Anzahl von Funktionsbereichen, durch deren Berührung ein Steuersignal generiert wird;
eine Vergrößerung der benötigten Kraft um ein Steuersignal über die berührungssensitive optische Anzeige (3) auszulösen;
eine haptische Rückmeldung im Falle der Bedienung wird erzeugt oder verstärkt; und/oder
haptische und/oder thermische Grenzen zwischen Funktionsbereichen durch deren Berührung ein Steuersignal generiert wird werden geschaffen oder verstärkt.
7. Verwendung des Verfahrens nach einem der Ansprüche 1 bis 6 zur Optimierung der Bedienung einer berührungssensitiven optischen Anzeige (3) in einem
Fahrzeug (1),
dadurch gekennzeichnet, dass
zur Auswertung der Blickrichtung (a,b), und insbesondere der Kopfstellung, die das Fahrzeug (1) fahrende Person (2) erfasst wird, wozu wenigstens eine
Innenraumkamera (7) des Fahrzeugs (1) als Sensor genutzt wird.
8. Verwendung nach Anspruch 7,
dadurch gekennzeichnet, dass
die Optimierung der Bedienung nur bei fahrendem Fahrzeug (1) Anwendung findet.
9. Verwendung nach Anspruch 7 oder 8,
dadurch gekennzeichnet, dass
bei einer Blickrichtung (a,b) ganz oder größeren Teils in Fahrtrichtung (F) des Fahrzeugs (1) der zweite Anzeige- und Bedienmodus aktiviert wird.
10. Verwendung nach Anspruch 7, 8 oder 9,
dadurch gekennzeichnet, dass
bei einer Kopfstellung in Fahrtrichtung (F) des Fahrzeugs (1) der zweite Anzeige- und Bedienmodus aktiviert wird.
11. Verwendung nach einem der Ansprüche 7 bis 10,
dadurch gekennzeichnet, dass
als berührungssensitive optische Anzeige (3) ein im Fahrzeug (1) fest verbauter berührungssensitiver Bildschirm oder eine berührungssensitive Oberfläche eines Verkleidungsteils oder Zierelements in dem Innenraum des Fahrzeugs (1) verwendet wird.
PCT/EP2020/061649 2019-06-12 2020-04-27 Verfahren zur optimierung der bedienung einer optischen anzeige Ceased WO2020249298A1 (de)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202080042719.5A CN113966581A (zh) 2019-06-12 2020-04-27 用于优化光学显示装置的操作的方法
US17/596,449 US20220305910A1 (en) 2019-06-12 2020-04-27 Method for optimising the operation of an optical display

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102019004167.4 2019-06-12
DE102019004167.4A DE102019004167A1 (de) 2019-06-12 2019-06-12 Verfahren zur Optimierung der Bedienung einer optischen Anzeige

Publications (1)

Publication Number Publication Date
WO2020249298A1 true WO2020249298A1 (de) 2020-12-17

Family

ID=70482615

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2020/061649 Ceased WO2020249298A1 (de) 2019-06-12 2020-04-27 Verfahren zur optimierung der bedienung einer optischen anzeige

Country Status (4)

Country Link
US (1) US20220305910A1 (de)
CN (1) CN113966581A (de)
DE (1) DE102019004167A1 (de)
WO (1) WO2020249298A1 (de)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102019004692B3 (de) * 2019-07-03 2020-11-12 Daimler Ag Vorrichtung und Verfahren zur Ermittlung von Bilddaten der Augen, von Augenpositionen und/oder einer Blickrichtung eines Fahrzeugnutzers in einem Fahrzeug
DE102022104154A1 (de) 2022-02-22 2023-08-24 Sioptica Gmbh Verfahren zur Auswahl eines nicht im unmittelbaren Blickfeld eines Bedieners befindlichen Bedienelements in einem Fahrzeug und Anordnung zur erleichterten Bedienung von Bedienelementen eines Fahrzeugs

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002088824A2 (de) * 2001-05-02 2002-11-07 Robert Bosch Gmbh Vorrichtung zur steuerung von geräten mittels blickrichtung
DE102007025531A1 (de) * 2007-05-31 2008-12-04 Volkswagen Ag Blickrichtungsgesteuertes Anzeigesystem und blickrichtungsgesteuertes Anzeigeverfahren für ein Kraftfahrzeug
DE102007049710A1 (de) * 2007-10-17 2009-04-23 Robert Bosch Gmbh Visuelles Auslösen von Vorgängen in einem Kraftfahrzeug
WO2012162060A2 (en) * 2011-05-25 2012-11-29 Sony Computer Entertainment Inc. Eye gaze to alter device behavior
DE102012010757A1 (de) * 2012-05-31 2012-12-06 Daimler Ag Beleuchtungsvorrichtung für ein Fahrzeug
DE102015212850A1 (de) * 2015-07-09 2017-01-12 Volkswagen Aktiengesellschaft Anwenderschnittstelle und Verfahren zum Unterstützen eines Anwenders bei der Interaktion mit einer Anwenderschnittstelle
DE102015215862A1 (de) 2015-08-20 2017-02-23 Bayerische Motoren Werke Aktiengesellschaft Interieurteilsystem für ein Kraftfahrzeug umfassend ein Interieurteil mit einem Oberflächenbereich, der ein, insbesondere kontextabhängig, veränderbares Bedienelement aufweist
US10001837B2 (en) 2014-12-23 2018-06-19 Intel Corporation Technologies for interacting with computing devices using haptic manipulation

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102013009217A1 (de) * 2013-05-31 2014-12-04 Man Truck & Bus Ag Verfahren und Vorrichtung zur Umfelderfassung und -überwachung von Fahrzeugen, insbesondere von Nutzfahrzeugen
DE102013019572B4 (de) * 2013-11-22 2025-02-06 Audi Ag Verfahren zum Betreiben eines Infotainmentsystems eines Kraftwagens und Kraftwagen mit einem Infotainmentsystem
US11907421B1 (en) * 2014-03-01 2024-02-20 sigmund lindsay clements Mixed reality glasses operating public devices with gaze and secondary user input
US10802582B1 (en) * 2014-04-22 2020-10-13 sigmund lindsay clements Eye tracker in an augmented reality glasses for eye gaze to input displayed input icons
DE102015200037A1 (de) * 2015-01-05 2016-07-07 Volkswagen Aktiengesellschaft Bedienvorrichtung mit verbesserter haptischer Rückmeldung
US20170169653A1 (en) * 2015-12-11 2017-06-15 Igt Canada Solutions Ulc Enhanced electronic gaming machine with x-ray vision display
EP3483713A1 (de) * 2017-11-08 2019-05-15 Ecole Nationale de l'Aviation Civile System und verfahren zur modulation einer steuerschnittstellenrückkopplung
US11221669B2 (en) * 2017-12-20 2022-01-11 Microsoft Technology Licensing, Llc Non-verbal engagement of a virtual assistant
US12522142B2 (en) * 2019-10-23 2026-01-13 Sony Group Corporation Display system, display device, display method, and mobile apparatus
US11269420B1 (en) * 2020-11-05 2022-03-08 Harman International Industries, Incorporated Techniques for detecting acknowledgment from a driver of a vehicle

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002088824A2 (de) * 2001-05-02 2002-11-07 Robert Bosch Gmbh Vorrichtung zur steuerung von geräten mittels blickrichtung
DE102007025531A1 (de) * 2007-05-31 2008-12-04 Volkswagen Ag Blickrichtungsgesteuertes Anzeigesystem und blickrichtungsgesteuertes Anzeigeverfahren für ein Kraftfahrzeug
DE102007049710A1 (de) * 2007-10-17 2009-04-23 Robert Bosch Gmbh Visuelles Auslösen von Vorgängen in einem Kraftfahrzeug
WO2012162060A2 (en) * 2011-05-25 2012-11-29 Sony Computer Entertainment Inc. Eye gaze to alter device behavior
DE102012010757A1 (de) * 2012-05-31 2012-12-06 Daimler Ag Beleuchtungsvorrichtung für ein Fahrzeug
US10001837B2 (en) 2014-12-23 2018-06-19 Intel Corporation Technologies for interacting with computing devices using haptic manipulation
DE102015212850A1 (de) * 2015-07-09 2017-01-12 Volkswagen Aktiengesellschaft Anwenderschnittstelle und Verfahren zum Unterstützen eines Anwenders bei der Interaktion mit einer Anwenderschnittstelle
DE102015215862A1 (de) 2015-08-20 2017-02-23 Bayerische Motoren Werke Aktiengesellschaft Interieurteilsystem für ein Kraftfahrzeug umfassend ein Interieurteil mit einem Oberflächenbereich, der ein, insbesondere kontextabhängig, veränderbares Bedienelement aufweist

Also Published As

Publication number Publication date
US20220305910A1 (en) 2022-09-29
DE102019004167A1 (de) 2020-12-17
CN113966581A (zh) 2022-01-21

Similar Documents

Publication Publication Date Title
EP2062121B1 (de) Touchpad oder -screen und stellelement für touchpad oder -screen
EP1935704B1 (de) Anzeige- und Bedienvorrichtung in einem Kraftfahrzeug mit von einer Position einer Bedienhand abhängig eingeblendeten Menüs
DE102017209562B4 (de) Verfahren zum Betreiben einer Anzeigeanordnung eines Kraftfahrzeugs, Bedienvorrichtung, und Kraftfahrzeug
EP3535154B1 (de) Anordnung einer grafischen benutzerschnittstelle in einem fahrzeug und verfahren zum bereitstellen einer grafischen benutzerschnittstelle in einem fahrzeug
EP3508968A1 (de) Verfahren zum betreiben einer mensch-maschinen-schnittstelle sowie mensch-maschinen-schnittstelle
DE102012016109A1 (de) Bedienvorrichtung zum Einstellen einer Klimatisierungsvorrichtung eines Fahrzeugs und Verfahren hierzu
EP3895929B1 (de) Anzeigevorrichtung für ein kraftfahrzeug und kraftfahrzeug
DE102017101669A1 (de) Verfahren zum Betreiben einer Mensch-Maschinen-Schnittstelle sowie Mensch-Maschinen-Schnittstelle
DE102016210288A1 (de) Bedienvorrichtung mit Eyetrackereinheit und Verfahren zum Kalibrieren einer Eyetrackereinheit einer Bedienvorrichtung
DE102011112448A1 (de) Verfahren und Vorrichtung zum Bereitstellen einer Nutzerschnittstelle, insbesondere in einem Fahrzeug
DE102006029506B4 (de) Eingabevorrichtung
DE102012206247A1 (de) Verfahren und Vorrichtung zur Anzeige einer Hand eines Bedieners eines Bedienelements eines Fahrzeugs
EP3508967A1 (de) Verfahren zum betreiben einer mensch-maschinen-schnittstelle sowie mensch-maschinen-schnittstelle
WO2020249298A1 (de) Verfahren zur optimierung der bedienung einer optischen anzeige
EP3372435A1 (de) Verfahren und bediensystem zum bereitstellen einer bedienschnittstelle
EP3418861A1 (de) Verfahren zum betreiben einer anzeigevorrichtung sowie ein kraftfahrzeug
DE102016218003B4 (de) Verfahren und Vorrichtung zur Optimierung der Darstellung auf mehreren Displays in einem Fahrzeug
DE102016003978B4 (de) Bedienvorrichtung für ein Kraftfahrzeug und Kraftfahrzeug
DE102013000069B4 (de) Kraftfahrzeug-Bedienschnittstelle mit einem Bedienelement zum Erfassen einer Bedienhandlung
DE102010013843A1 (de) Bedienvorrichtung
DE102014018634A1 (de) Eingabevorrichtung für ein Kraftfahrzeug mit einer Eingabevorrichtung
DE102014200609B4 (de) Berührungssensitive Bedienvorrichtung mit Mulde
WO2023280513A1 (de) Bedien- und anzeigevorrichtung
WO2016202863A1 (de) Fahrzeugsitz
DE102015011648B4 (de) Kraftfahrzeug-Bedienvorrichtung mit Schiebereglern und Verfahren zum Betreiben einer Bedienvorrichtung

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20723316

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20723316

Country of ref document: EP

Kind code of ref document: A1