DE102018215597A1 - Method for assisting a user in performing a scrolling process, device and motor vehicle - Google Patents

Method for assisting a user in performing a scrolling process, device and motor vehicle Download PDF

Info

Publication number
DE102018215597A1
DE102018215597A1 DE102018215597.6A DE102018215597A DE102018215597A1 DE 102018215597 A1 DE102018215597 A1 DE 102018215597A1 DE 102018215597 A DE102018215597 A DE 102018215597A DE 102018215597 A1 DE102018215597 A1 DE 102018215597A1
Authority
DE
Germany
Prior art keywords
user
scrolling
scrolling process
gaze
scrollable content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102018215597.6A
Other languages
German (de)
Inventor
Bastian Hinterleitner
Stefan Mayer
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Audi AG
Original Assignee
Audi AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Audi AG filed Critical Audi AG
Priority to DE102018215597.6A priority Critical patent/DE102018215597A1/en
Priority to PCT/EP2019/071788 priority patent/WO2020052894A1/en
Publication of DE102018215597A1 publication Critical patent/DE102018215597A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning

Abstract

Die Erfindung betrifft ein Verfahren zum Unterstützen eines Benutzers (12) beim Durchführen eines Scroll-Vorgangs zum Scrollen eines scrollbaren Inhalts (14) auf einer Anzeigeeinrichtung (16), wobei der Scroll-Vorgang in Abhängigkeit von einer vom Benutzer (12) durchgeführten Auslösebedienhandlung ausgelöst wird und nach dem Auslösen zumindest für eine vorgebbare Zeitdauer automatisch fortgeführt wird. Dabei wird eine Blickcharakteristik (B) des Benutzers (12) im zeitlichen Verlauf (t1, t2, t3, ,t4, t5, t6, t7, t8, t9, t10, t11, t12) erfasst und unter der Bedingung, dass der zeitliche Verlauf (t1, t2, t3, ,t4, t5, t6, t7, t8, t9, t10, t11, t12) der Blickcharakteristik (B) mit Bezug auf den scrollbaren Inhalt (14) ein vorbestimmtes Kriterium erfüllt, wird bestimmt, dass der Benutzer (12) während des automatischen Fortführens des Scroll-Vorgangs an zumindest einem Teil (14a) des scrollbaren Inhalts (14), der aktuell auf der Anzeigeeinrichtung (16) angezeigt wird, interessiert ist, und eine aktuelle Geschwindigkeit (v1) des automatisch fortgeführten Scroll-Vorgangs wird reduziert.The invention relates to a method for supporting a user (12) when performing a scrolling process for scrolling scrollable content (14) on a display device (16), the scrolling process being triggered as a function of a triggering action performed by the user (12) is and is continued automatically after triggering at least for a predetermined period of time. A gaze characteristic (B) of the user (12) is recorded over time (t1, t2, t3,, t4, t5, t6, t7, t8, t9, t10, t11, t12) and on the condition that the time Course (t1, t2, t3,, t4, t5, t6, t7, t8, t9, t10, t11, t12) of the gaze characteristic (B) with respect to the scrollable content (14) fulfills a predetermined criterion, it is determined that the user (12) is interested in at least a part (14a) of the scrollable content (14) which is currently displayed on the display device (16) during the automatic continuation of the scrolling process, and a current speed (v1) of the automatically continued scrolling is reduced.

Description

Die Erfindung betrifft ein Verfahren zum Unterstützen eines Benutzers beim Durchführen eines Scroll-Vorgangs zum Scrollen eines scrollbaren Inhalts auf einer Anzeigeeinrichtung, wobei der Scroll-Vorgang in Abhängigkeit von einer erfassten vom Benutzer durchgeführten Auslösebedienhandlung ausgelöst wird und nach dem Auslösen zumindest für eine vorgebbare Zeitdauer automatisch fortgeführt wird. Zur Erfindung gehört auch eine Vorrichtung zum Unterstützen eines Benutzers beim Durchführen eines Scroll-Vorgangs, sowie ein Kraftfahrzeug.The invention relates to a method for supporting a user when performing a scrolling process for scrolling scrollable content on a display device, the scrolling process being triggered as a function of a detected triggering operation performed by the user and automatically after triggering at least for a predefinable period of time is continued. The invention also includes a device for supporting a user when performing a scrolling process, and a motor vehicle.

Hauptbestandteil heutiger Interaktionskonzepte sind oft horizontale oder vertikale Listen, welche auf einem Display angezeigt werden. Durch diese Listen kann man entweder mit Hilfe einer Remote-Bedienung, zum Beispiel einer Walze oder eines Rads am Lenkrad, einem Touchpad oder Trackpad oder Freihandgesten, oder einer direkten Bedienung, zum Beispiel mittels Touch-Gesten am Display selbst, navigieren. Beispielweise kann dabei mit einer Geste ein schnelles Scrollen der Liste angestoßen werden, welche dann von alleine weiterscrollt und dabei immer langsamer wird.The main component of today's interaction concepts are often horizontal or vertical lists, which are shown on a display. You can navigate through these lists either using remote control, for example a roller or a wheel on the steering wheel, a touchpad or trackpad or freehand gestures, or direct control, for example using touch gestures on the display itself. For example, a gesture can be used to initiate a quick scrolling of the list, which then scrolls on by itself and becomes ever slower.

Bei einem derartigen Scroll-Verhalten kann es vor allem bei großen Listen leicht passieren, dass der Scroll-Vorgang nicht automatisch bei dem Element endet, welches der Benutzer in dieser Liste sucht. Oft ist die Scrollgeschwindigkeit schlecht zu kontrollieren, was zu einem „Überscrollen“ des Eintrags führen kann. Das bedeutet, dass in der Liste über den gesuchten Eintrag hinaus gescrollt wird, sodass der Eintrag nicht mehr sichtbar ist. In diesem Fall ist ein weiterer Scroll-Vorgang in die entgegengesetzte Richtung notwendig, um den gesuchten Eintrag wieder zu erreichen.With such a scroll behavior, especially with large lists, it can easily happen that the scrolling process does not automatically end with the element that the user is looking for in this list. The scrolling speed is often difficult to control, which can lead to the entry being “scrolled over”. This means that the list is scrolled beyond the entry you are looking for, so that the entry is no longer visible. In this case, a further scrolling process in the opposite direction is necessary to reach the searched entry again.

Auch sind Systeme aus dem Stand der Technik bekannt, bei denen Scroll-Vorgänge unter Verwendung von Eye-Trackern durchgeführt werden. Beispielsweise beschreibt die DE 10 2013 021 814 A1 eine Bedienvorrichtung mit einem Eye-Tracker, wobei auf einer Anzeigeeinrichtung zumindest ein grafisches Objekt, wie zum Beispiel ein Icon oder ein Listenelement einer Auswahlliste, angezeigt wird. Das grafische Objekt kann mittels eines grafischen Auswahlelements, wie zum Beispiel eines Auswahlzeigers, ausgewählt werden, indem das Auswahlelement blickrichtungsgesteuert auf das auszuwählende Objekt ausgerichtet oder darauf positioniert wird oder mit dem Auswahlelement markiert wird. Zusätzlich ist eine Lenkeinheit vorgesehen, zum Beispiel eine Wipp-Taste, mittels welcher das grafische Objekt verschoben oder zumindest ein weiteres grafisches Objekt eingeblendet werden kann. Die Auswahlliste kann also mittels der Lenkeinheit gescrollt werden und ein Listenelement blickrichtungsgesteuert ausgewählt werden. Die Problematik bei einem Scroll-Vorgang möglichst schnell zu einem gewünschten Element zu finden, bleibt hierbei dennoch ungelöst.Systems are also known from the prior art, in which scroll processes are carried out using eye trackers. For example, the DE 10 2013 021 814 A1 an operating device with an eye tracker, wherein at least one graphic object, such as an icon or a list element of a selection list, is displayed on a display device. The graphical object can be selected by means of a graphical selection element, such as, for example, a selection pointer, by aligning or positioning the selection element in a direction-controlled manner in relation to the object to be selected, or by marking it with the selection element. In addition, a steering unit is provided, for example a rocker button, by means of which the graphic object can be moved or at least one further graphic object can be shown. The selection list can thus be scrolled by means of the steering unit and a list element can be selected in a direction-controlled manner. The problem of finding a desired element as quickly as possible during a scrolling process remains unsolved.

Weiterhin beschreibt die US 2015/0135133 A1 ein Verfahren zum blickrichtungsabhängigen Anpassen der Scrollgeschwindigkeit. Hierzu kann beispielsweise eine gedachte horizontale Linie definiert sein und der Scroll-Vorgang kann in Abhängigkeit von einem Abstand eines Blickpunkts des Benutzers von dieser gedachten Linie durchgeführt werden. Zu diesem Zweck kann die Scrollgeschwindigkeit entsprechend erhöht oder verringert werden.Furthermore describes the US 2015/0135133 A1 a method for adjusting the scroll speed depending on the viewing direction. For this purpose, for example, an imaginary horizontal line can be defined and the scrolling process can be carried out as a function of a distance between a user's point of view and this imaginary line. For this purpose, the scroll speed can be increased or decreased accordingly.

Weiterhin beschreibt die US 2015/0128075 A1 ein blickbasiertes automatisches Scrollen. Hierbei kann ein Scroll-Vorgang aktiviert und automatisch durchgeführt werden, zum Beispiel solange ein Benutzer auf eine vorbestimmte Scroll-Zone auf dem Display blickt.Furthermore describes the US 2015/0128075 A1 an eye-based automatic scrolling. Here, a scroll process can be activated and carried out automatically, for example as long as a user is looking at a predetermined scroll zone on the display.

Derartige blickgesteuerte Scroll-Vorgänge scheinen jedoch die Suche nach einem gewünschten Element in einem scrollbaren Inhalt nur zu erschweren und nicht zu erleichtern, denn derartige Verfahren erfordern zusätzlich, zur Steuerung des Scroll-Vorgangs, zum Beispiel zu dessen Aktivierung oder zur Steuerung dessen Geschwindigkeit, dass ein Benutzer an eine bestimmte Position auf der Anzeigeeinrichtung blickt, was es dem Benutzer wiederum nicht ermöglicht, gleichzeitig nach einem gewünschten Element innerhalb des scrollbaren Inhalts zu suchen.However, such look-controlled scroll processes only seem to make the search for a desired element in a scrollable content more difficult and not easier, because such processes additionally require that in order to control the scroll process, for example to activate it or to control its speed a user looks at a certain position on the display device, which in turn does not allow the user to simultaneously search for a desired element within the scrollable content.

Aufgabe der vorliegenden Erfindung ist es daher, ein Verfahren zum Unterstützen eines Benutzers beim Durchführen eines Scroll-Vorgangs zum Scrollen es scrollbaren Inhalts auf einer Anzeigeeinrichtung, eine Vorrichtung und ein Kraftfahrzeug bereitzustellen, welche einem Benutzer die Suche nach einem bestimmten Element oder Abschnitt innerhalb des scrollbaren Inhalts erleichtern.It is therefore an object of the present invention to provide a method for assisting a user in performing a scrolling process for scrolling scrollable content on a display device, a device and a motor vehicle, which enables a user to search for a specific element or section within the scrollable one Facilitate content.

Diese Aufgabe wird gelöst durch ein Verfahren, eine Vorrichtung und ein Kraftfahrzeug mit den Merkmalen gemäß den jeweiligen unabhängigen Patentansprüchen. Vorteilhafte Ausgestaltungen der Erfindung sind Gegenstand der abhängigen Patentansprüche, der Beschreibung sowie der Figuren.This object is achieved by a method, a device and a motor vehicle with the features according to the respective independent patent claims. Advantageous embodiments of the invention are the subject of the dependent claims, the description and the figures.

Bei einem erfindungsgemäßen Verfahren zum Unterstützen eines Benutzers beim Durchführen eines Scroll-Vorgangs zum Scrollen eines scrollbaren Inhalts auf einer Anzeigeeinrichtung wird der Scroll-Vorgang in Abhängigkeit von einer erfassten vom Benutzer durchgeführten Auslösebedienhandlung ausgelöst und nach dem Auslösen zumindest für eine vorgebbare Zeitdauer automatisch fortgeführt. Weiterhin wird eine Blickcharakteristik des Benutzers im zeitlichen Verlauf mittels einer Blickerfassungseinrichtung erfasst und unter der Bedingung, dass der zeitliche Verlauf der Blickcharakteristik mit Bezug auf den scrollbaren Inhalt ein vorbestimmtes Kriterium erfüllt, wird bestimmt, dass der Benutzer während des automatischen Fortführens des Scroll-Vorgangs an zumindest einem Teil des scrollbaren Inhalts, der aktuell auf der Anzeigeeinrichtung angezeigt wird, interessiert ist, und eine aktuelle Geschwindigkeit des automatisch fortgeführten Scroll-Vorgangs wird reduziert.In a method according to the invention for supporting a user when performing a scrolling process for scrolling scrollable content on a display device, the scrolling process is triggered as a function of a triggered triggering action performed by the user and is automatically continued after the triggering for at least a predefinable period of time. Furthermore, a gaze characteristic of the user is recorded over the course of time by means of a gaze detection device, and on the condition that the temporal course of the gaze characteristic with respect to the scrollable content fulfills a predetermined criterion, it is determined that the user turns on during the automatic continuation of the scrolling process at least a portion of the scrollable content currently displayed on the display device is interested, and a current speed of the automatically continued scrolling process is reduced.

Die Erfindung beruht auf der Erkenntnis, dass sich der zeitliche Verlauf der Blickcharakteristik eines Benutzers, also zum Beispiel ein Blickmuster des Benutzers, beim Suchen nach einem bestimmten Element innerhalb eines aktuell angezeigten Inhalts deutlich von dem Blickmuster unterscheidet, wenn der Benutzer das gewünschte Element innerhalb des aktuell angezeigten Inhalts gefunden hat. Ist also das gesuchte Element zum Beispiel in einer Liste auf dem Bildschirm während des Scrollens noch nicht sichtbar, so kann zum Beispiel ein suchendes Blickverhalten beziehungsweise Blickmuster beim Benutzer erkannt werden. Ist das gesuchte Element sichtbar, so zeigt sich beim Benutzer ein fixierender Blick. Hierdurch lässt sich vorteilhafterweise also anhand einer Auswertung des Blickverhaltens im zeitlichen Verlauf während des Scroll-Vorgangs bestimmen, ob oder wann der Benutzer wahrscheinlich an zumindest einem Teil des scrollbaren Inhalts, also zum Beispiel einem bestimmten Element, beispielsweise in einer Liste oder in einem Text, welches aktuell auf der Anzeigeeinrichtung angezeigt wird, interessiert ist. Dadurch, dass dann entsprechend die aktuelle Geschwindigkeit des automatisch fortgeführten Scroll-Vorgangs definiert reduziert wird, wird auch die Wahrscheinlichkeit eines „Überscrollens“ deutlich verringert. Mit anderen Worten wird die Reduktion der Geschwindigkeit durch das Bestimmten, dass der Benutzer an einem Teil des Inhalts interessiert ist, ausgelöst. Dadurch kann ein Benutzer deutlich einfacher und vor allem rechtzeitig den Scroll-Vorgang anhalten und das gewünschte Element eventuell auswählen oder den gewünschten Textabschnitt lesen, oder ähnliches. Besonders vorteilhaft ist dabei vor allem, dass das Blickmuster des zeitlichen Verlaufs des Blicks des Benutzers an sich verwendet wird, um zu bestimmen, wann ein gewünschtes bzw. gesuchtes Element vermutlich auf der aktuellen Anzeige der Anzeigeeinrichtung erscheint, um entsprechend die Geschwindigkeit des Scroll-Vorgangs zu reduzieren, ohne dass hierfür irgendwelche separaten Interaktionsflächen, auf die der Benutzer aktiv blicken muss, vorzusehen. Denn dies ermöglicht es vorteilhafterweise, dass ein Benutzer sich voll und ganz auf die Suche nach einem gewünschten Element oder einer gewünschten Passage des scrollbaren Inhalts konzentrieren kann, während die blickgestützte Unterstützung des Benutzers durch Anpassung der Scrollgeschwindigkeit ganz subtil, und im Optimalfall für den Benutzer nicht merkbar im Hintergrund stattfindet. Mit anderen Worten wird also die Steuerung der Scrollgeschwindigkeit automatisch in Abhängigkeit vom Blick des Benutzers durchgeführt, das heißt ohne dass eine aktive Steuerung des Blicks durch den Benutzer selbst erforderlich ist. Hierdurch kann die Suche nach einem gewünschten Element in einem scrollbaren Inhalt für einen Benutzer deutlich komfortabler gestaltet werden, und vor allen Dingen einfacher, schneller und dadurch zeiteffizienter.The invention is based on the knowledge that the temporal course of the gaze characteristics of a user, for example a gaze pattern of the user, differs significantly from the gaze pattern when searching for a certain element within a currently displayed content if the user desires the desired element within the found the currently displayed content. If, for example, the searched element is not yet visible in a list on the screen while scrolling, a searching gaze behavior or gaze pattern can be recognized by the user, for example. If the element you are looking for is visible, the user shows a fixative look. In this way, it is advantageously possible to determine on the basis of an evaluation of the gaze behavior over time during the scroll process whether or when the user is likely to work on at least part of the scrollable content, for example a specific element, for example in a list or in a text. which is currently displayed on the display device is interested. The fact that the current speed of the automatically continued scrolling process is then reduced accordingly also significantly reduces the probability of “scrolling over”. In other words, the speed reduction is triggered by determining that the user is interested in part of the content. As a result, a user can stop the scrolling process significantly more easily and, above all, in good time and possibly select the desired element or read the desired text section, or the like. It is particularly advantageous here that the gaze pattern of the time course of the gaze of the user itself is used to determine when a desired or searched element is likely to appear on the current display of the display device, and accordingly the speed of the scrolling process to reduce without having to provide any separate interaction surfaces that the user must actively look at. This advantageously enables a user to concentrate fully on the search for a desired element or a desired passage of the scrollable content, while the view-based support of the user by adjusting the scrolling speed is very subtle, and optimally not for the user takes place noticeably in the background. In other words, the control of the scroll speed is carried out automatically as a function of the user's gaze, that is to say without the user himself having to actively control the gaze. In this way, the search for a desired element in a scrollable content can be made significantly more convenient for a user, and above all, simpler, faster and therefore more time-efficient.

Im Allgemeinen ist unter einem scrollbaren Inhalt dabei ein Inhalt zu verstehen, der nicht als Ganzes auf der Anzeigeeinrichtung angezeigt wird, sondern immer nur Abschnittsweise. Unter einem Scrollen beziehungsweise einem Scroll-Vorgang ist dabei ein Vorgang zu verstehen, bei welchem eine Darstellung, das heißt der scrollbare Inhalt, die auf dem Bildschirm nicht im Ganzen erfasst werden kann, in Ausschnitten nach und nach auf dem Bildschirm verschoben wird. Die Verschieberichtung ist dabei der Scrollrichtung entgegengesetzt. Wird beispielsweise nach unten gescrollt, so wird der Inhalt auf der Anzeigeeinrichtung nach oben verschoben. Die Verschiebung des scrollbaren Inhalts kann dabei beispielsweise nach oben, nach unten, nach links oder nach rechts erfolgen, und im Allgemeinen in jede beliebige Richtung.In general, a scrollable content is to be understood as content that is not displayed as a whole on the display device, but rather only in sections. A scrolling or a scrolling process is to be understood to mean a process in which a representation, that is to say the scrollable content, which cannot be captured on the screen as a whole, is gradually shifted in sections on the screen. The direction of displacement is opposite to the scrolling direction. For example, if you scroll down, the content on the display device is moved up. The scrollable content can be shifted upward, downward, left or right, for example, and generally in any direction.

Weiterhin kann es sich beim scrollbaren Inhalt beispielsweise um eine Liste mit mehreren Listenelementen und/oder Einträgen handeln, oder auch um einen Text, zum Beispiel einen Fließtext oder einen in mehrere Abschnitte oder Absätze gegliederten Text und/oder um grafisch veranschaulichte Inhalte oder ähnliches. Verschiedene Auslösebedienhandlungen sind später näher erläutert. Durch eine solche vom Benutzer durchgeführte Auslösebedienhandlung kann beispielsweise auch gleichzeitig eine Anfangsgeschwindigkeit, mit welcher dann der Scroll-Vorgang automatisch weitergeführt wird, vorgegeben werden. Es kann aber auch eine fest vorgegebene Anfangsgeschwindigkeit beim Auslösen des Scroll-Vorgangs vorgegeben sein, die unabhängig von der Auslösebedienhandlung ist. Weiterhin kann sich diese Initialgeschwindigkeit auch ohne, dass ein Interesse des Benutzers an zumindest einem Teil des scrollbaren Inhalts erkannt wird, im zeitlichen Verlauf des automatisch vorgeführten Scroll-Vorgangs verlangsamen, insbesondere bis zum Stillstand und/oder bis der Benutzer erneut die Auslösebedienhandlung zum Anstoßen eines neuen Scroll-Vorgangs durchführt. In diesem Fall ist unter der Reduktion der aktuellen Geschwindigkeit im Fall, dass das Interesse des Benutzers an dem zumindest einen Teil des Inhalts erkannt wird, eine zusätzliche Reduktion der Geschwindigkeit zu verstehen, d.h. die Verlangsamung der Verschiebung des Inhalts erfolgt schneller im Vergleich zu dem Fall, dass kein Interesse des Benutzers detektiert wurde. Mit anderen Worten ändert sich die dann auch die negative Beschleunigung der Verschiebung in vorbestimmbarer Weise. Die initiale Scrollgeschwindigkeit kann aber auch während des automatisch fortgeführten Scroll-Vorgangs immer konstant bleiben, insbesondere solange bis das Interesse des Benutzers an dem einen Teil des scrollbaren Inhalts detektiert wird oder der Benutzer den Scroll-Vorgang anderweitig, zum Beispiel manuell, stoppt. Entsprechend stellt dann auch die vorgebbare Zeitdauer, für welche nach dem Auslösen der Scroll-Vorgang automatisch fortgeführt wird, beispielsweise diejenige Zeitdauer dar, bis der durch den Benutzer angestoßene Scroll-Vorgang automatisch durch kontinuierliche Verlangsamung der Scrollgeschwindigkeit wieder zum Stillstand kommt oder bis der Benutzer durch zum Beispiel eine weitere Bedienhandlung den Scroll-Vorgang selbst stoppt. Während dieser Zeitdauer wird der Scroll-Vorgang automatisch fortgeführt, das heißt ohne jegliche Benutzerinteraktion oder ein Zutun des Benutzers.Furthermore, the scrollable content can be, for example, a list with several list elements and / or entries, or also a text, for example a continuous text or a text divided into several sections or paragraphs and / or graphically illustrated content or the like. Various trigger operations are explained in more detail later. Such a triggering operation performed by the user can, for example, also simultaneously specify an initial speed at which the scrolling process is then automatically continued. However, there can also be a predetermined initial speed when triggering the scrolling process, which is independent of the trigger operation. Furthermore, this initial speed can also slow down over the course of the automatically performed scrolling process, in particular to a standstill and / or until the user again triggers the triggering action to initiate one, without the user being identified in at least part of the scrollable content new scrolling process. In this case, the reduction in the current speed in the event that the interest of the user in the at least part of the content is recognized means an additional reduction in the speed, that is to say the shifting of the content is slowed down faster compared to the case that no user interest was detected. In other words, the negative acceleration of the displacement then changes in a predeterminable manner. However, the initial scrolling speed can also always remain constant during the automatically continued scrolling process, in particular until the interest of the user in one part of the scrollable content is detected or the user otherwise stops the scrolling process, for example manually. Correspondingly, the predefinable period of time for which the scrolling process is automatically continued after the triggering is then, for example, the period of time until the scrolling process initiated by the user automatically comes to a standstill again by continuously slowing down the scrolling speed or until the user goes through for example, another operator action stops the scrolling process itself. During this period, the scrolling process continues automatically, that is, without any user interaction or user intervention.

Darüber hinaus kann zur Auswertung der Blickcharakteristik mit Bezug auf den scrollbaren Inhalt der zeitliche Verlauf des Blickpunkts des Benutzers auf der Anzeigeeinrichtung, das heißt der Anzeigefläche der Anzeigeeinrichtung, auf welcher der scrollbare Inhalt angezeigt wird, mit Bezug auf die an den jeweiligen Positionen aktuell dargestellten Teilinhalte ausgewertet werden. So kann also beispielsweise festgestellt werden, ob ein Benutzer dauerhaft auf ein und dasselbe Element blickt, während dieses entgegen der Scrollrichtung über den Bildschirm läuft, oder auf unterschiedliche Elemente des angezeigten Inhalts, was einem suchenden Blickverhalten entspricht und darauf hindeutet, dass der Benutzer das gesuchte Element noch nicht gefunden hat. Die Blickcharakteristik mit Bezug auf den scrollbaren Inhalt kann aber auch so verstanden werden, dass lediglich die Blickcharakteristik des Benutzers, während dieser auf die Anzeigeeinrichtung mit dem dargestellten Teil des scrollbaren Inhalts blickt, ausgewertet wird. Dabei müssen jedoch nicht notwendigerweise erfasste Blickpunkte mit den aktuell an diesen Orten angezeigten Inhalten in Bezug gesetzt werden. Es können also auch Blickmuster als solches ausgewertet werden. Häufig wechselnde bzw. springende Fixationen, die nur sehr kurz andauern, sind dabei charakteristisch für ein suchendes Blickverhalten, bei welchem der Benutzer das gewünschte Element noch nicht gefunden hat, während länger andauernde Fixationen, die sich beispielsweise auch kontinuierlich entgegen der Scrollgeschwindigkeit über den Bildschirm bewegen, dafür charakteristisch sind, das ein Benutzer nun an einem konkreten angezeigten Element auf der Anzeigeeinrichtung interessiert ist.In addition, in order to evaluate the gaze characteristic with reference to the scrollable content, the time course of the user's point of view on the display device, that is to say the display area of the display device on which the scrollable content is displayed, can be used with reference to the partial contents currently displayed at the respective positions be evaluated. So it can be determined, for example, whether a user is constantly looking at one and the same element while it is running against the scroll direction on the screen, or at different elements of the displayed content, which corresponds to a searching look behavior and indicates that the user is looking for the item Element has not yet been found. However, the gaze characteristic with reference to the scrollable content can also be understood such that only the gaze characteristic of the user is evaluated while the user is looking at the display device with the part of the scrollable content shown. However, viewpoints that are not necessarily recorded must be related to the content currently displayed at these locations. Gaze patterns can also be evaluated as such. Frequently changing or jumping fixations, which only last very briefly, are characteristic of a searching gaze behavior in which the user has not yet found the desired element, while longer-lasting fixations which, for example, also continuously move against the scrolling speed across the screen , are characteristic that a user is now interested in a specific displayed element on the display device.

Somit kann also vorteilhafter Weise unabhängig von einer Überprüfung, ob der Benutzer in einen vorbestimmten Positionsbereich auf der Anzeigeeinrichtung blickt, in welchem kein scrollbarer Inhalt angezeigt wird, bestimmt werden, ob der Benutzer während des automatischen Fortführens des Scroll-Vorgangs an dem zumindest einen Teil des scrollbaren Inhalts, der aktuelle auf der Anzeigeeinrichtung angezeigt wird, interessiert ist. Mit anderen Worten müssen keine separaten Interaktionsflächen vorgesehen werden, auf die der Benutzer aktiv blicken muss, um zum Beispiel die Scrollgeschwindigkeit oder ähnliches zu steuern.Thus, independently of a check of whether the user is looking into a predetermined position area on the display device in which no scrollable content is displayed, it can thus advantageously be determined whether the user is on the at least part of the screen during the automatic continuation of the scrolling process scrollable content that is currently displayed on the display device is interested. In other words, no separate interaction areas need to be provided, which the user must actively look at, for example to control the scrolling speed or the like.

Bei einer weiteren vorteilhaften Ausgestaltung der Erfindung ist es vorgesehen, dass das vorbestimmte Kriterium als erfüllt gilt, wenn eine vorbestimmt signifikante Änderung des zeitlichen Verlaufs der Blickcharakteristik erfasst wird. Dies hat den großen Vorteil, dass keine absoluten Kriterien bezüglich des Blickverhaltens, welches auftritt, wenn der Benutzer das gewünschte Element gefunden hat, angelegt beziehungsweise vorgegeben werden müssen. Stattdessen kann zum Bestimmen, dass der Benutzer an einem bestimmten Teil des scrollbaren Inhalts interessiert ist, welcher aktuell auf der Anzeigeeinrichtung angezeigt wird, auf einfache Weise eine signifikante Änderung gegenüber des bisherigen Blickverhaltens beziehungsweise Blickmusters als Indikator herangezogen werden. Beispielsweise kann der Scroll-Vorgang verlangsamt bzw. bezüglich einer ohnehin vorhandenen Verlangsamung zusätzlich verlangsamt werden, sobald eine Fixation des Blicks auf ein Element erkannt wird, welches sich von den Fixationen auf die anderen Elemente, zum Beispiel einer Liste, unterscheidet, da zu erwarten ist, dass das Fixationsverhalten auf dem gesuchten Element anders ist, als auf den für den Nutzer irrelevanten Elementen. Beispielsweise dauert eine Fixation auf dem gesuchten Element deutlich länger an als auf anderen. Hierbei muss also vorteilhafterweise kein Grenzwert für diese Mindestdauer einer Fixation als Absolutwert vorgegeben werden, sondern das Interesse des Benutzers an einem bestimmten angezeigten Element kann auf Basis des Unterschieds zum vorhergehenden Fixationsverhalten festgestellt werden. Dadurch lassen sich vorteilhafterweise auch benutzerspezifische Besonderheiten berücksichtigen, denn sowohl das Fixationsverhalten bei gefundenem Element als auch dasjenige bei der Suche nach dem gewünschten Element kann sich insbesondere mit Hinblick auf die Zeitdauer solcher Fixationen von Benutzer zu Benutzer sehr stark unterscheiden.In a further advantageous embodiment of the invention, it is provided that the predetermined criterion is considered to be met if a predetermined significant change in the temporal course of the gaze characteristic is detected. This has the great advantage that no absolute criteria with regard to the gaze behavior that occurs when the user has found the desired element need not be set or specified. Instead, to determine that the user is interested in a certain part of the scrollable content that is currently displayed on the display device, a significant change compared to the previous gaze behavior or gaze pattern can be used as an indicator in a simple manner. For example, the scrolling process can be slowed down or additionally slowed down with regard to an already existing slowdown as soon as a fixation of the gaze on an element is recognized, which differs from the fixations on the other elements, for example a list, since it can be expected that the fixation behavior on the searched element is different than on the elements irrelevant to the user. For example, a fixation on the searched element lasts significantly longer than on others. In this case, advantageously, no limit value for this minimum duration of a fixation has to be specified as an absolute value, but the user's interest in a particular displayed element can be determined on the basis of the difference to the previous fixation behavior. As a result, user-specific peculiarities can advantageously also be taken into account, since both the fixation behavior when the element is found and that when searching for the desired element can differ very greatly from user to user, particularly with regard to the duration of such fixations.

Zur Analyse der Blickmuster des Benutzers können beispielsweise auch bekannte Mustererkennungsalgorithmen und/oder lernende Verfahren herangezogen werden. Hierdurch lassen sich auf besonders vorteilhafte Weise benutzerspezifische Eigenheiten im Blickverhalten durch das System automatisch erlernen. Hierdurch lässt sich auch besonders einfach und zuverlässig, insbesondere zum Beispiel nach einer Lernphase, unterscheiden, zu welchem Zeitpunkt ein Benutzer noch auf der Suche nach dem gewünschten Element ist und zu welchem Zeitpunkt er dieses vermutlich gefunden hat.Known pattern recognition algorithms and / or learning methods can also be used to analyze the user's gaze pattern, for example. In this way, user-specific peculiarities in gaze behavior can be automatically learned by the system in a particularly advantageous manner. This also makes it special distinguish easily and reliably, especially after a learning phase, for example, at what point in time a user is still looking for the desired element and at what point in time he has presumably found it.

Wie bereits erwähnt, ist ein besonders guter Indikator dafür, dass der Benutzer an einem bestimmten Teil des angezeigten Inhalts interessiert ist, die Dauer einer Fixation. Entsprechend stellt es eine weitere besonders vorteilhafte Ausgestaltung der Erfindung dar, wenn das vorbestimmte Kriterium als erfüllt gilt, wenn eine vorbestimmt lange Zeitdauer einer Fixation eines Blicks des Benutzers in Bezug auf den Teil des scrollbaren Inhalts erfasst wird. Diese vorbestimmte lange Zeitdauer muss dabei, wie bereits beschrieben, nicht als Absolutwert definiert sein, wenngleich dies ebenso eine mögliche Ausgestaltung darstellt, sondern kann sich auch als Relativwert auf die durchschnittliche Zeitdauer von Fixationen auf nicht gesuchte Elemente der Liste beziehen. Erhöht sich also beispielsweise während des automatischen Fortführens des Scroll-Vorgangs die durchschnittliche Zeitdauer der Fixation des Blicks des Benutzers signifikant, so kann festgestellt werden, dass der Benutzer nun an einem bestimmten Element oder an einem Teil des Inhalts der aktuell angezeigt wird, interessiert ist. Auf diese Weise lässt sich das Interesse des Benutzers an einem Teil des Inhalts besonders zuverlässig detektieren.As already mentioned, a particularly good indicator that the user is interested in a certain part of the displayed content is the duration of a fixation. Accordingly, it is a further particularly advantageous embodiment of the invention if the predetermined criterion is considered to be fulfilled if a predetermined long period of time of a fixation of a gaze of the user in relation to the part of the scrollable content is recorded. As already described, this predetermined long period of time does not have to be defined as an absolute value, although this is also a possible embodiment, but can also relate as a relative value to the average period of time of fixations to elements of the list that are not sought. If, for example, the average duration of the fixation of the user's gaze increases significantly during the automatic continuation of the scrolling process, it can be determined that the user is now interested in a certain element or in part of the content that is currently being displayed. In this way, the user's interest in part of the content can be detected particularly reliably.

Bei einer weiteren vorteilhaften Ausgestaltung der Erfindung gilt das vorbestimmte Kriterium als erfüllt, insbesondere alternativ oder zusätzlich, wenn eine vorbestimmt räumlich lange bewegte Fixation eines Blicks des Benutzers in Bezug auf den Teil des scrollbaren Inhalts erfasst wird. Eine bewegte Fixation stellt dabei eine Fixation auf einen auf der Anzeigeeinrichtung dargestellten Punkt dar, welcher sich bewegt. Bei einem üblichen Scroll-Vorgang folgt der Blick eines Benutzers üblicherweise den aktuell angezeigten Inhalten entgegen der Scrollrichtung, und springt dann üblicherweise in Scrollrichtung zurück und folgt wiederum neu auftauchenden Inhalten entgegen der Scrollrichtung. Wird also beispielsweise nach unten gescrollt, so verlaufen Bildinhalte auf der Anzeigeeinrichtung nach oben. In einem solchen Fall folgt also der Blick des Benutzers üblicherweise den angezeigten Bildinhalten etwas nach oben und springt dann nach unten zurück und folgt wiederum neu angezeigten Inhalten stückweise nach oben, sodass sich insgesamt im zeitlichen Verlauf ein sägezahnartiges Blickmuster ergibt. Die räumliche Länge der einzelnen „Sägezähne“ ist dabei üblicherweise relativ kurz, typischerweise deutlich kürzer als die Ausdehnung der Anzeigefläche in Scrollrichtung, auf welcher der scrollbare Inhalt angezeigt wird. Wird aber nun ein Element auf dem Bildschirm angezeigt, welches für den Benutzer von Interesse ist, beziehungsweise welches das gesuchte Element darstellt, so hat sich gezeigt, dass dann der Blick des Benutzers typischerweise über deutlich größere räumliche Längen hinweg entgegen der Scrollrichtung diesem Element folgt. Mit anderen Worten sind bewegte Fixationen während der Benutzer noch nach einem bestimmten Element sucht auf dem Bildschirm beziehungsweise auf der Anzeigeeinrichtung in ihrer räumlichen Ausdehnung relativ kurz im Vergleich zur bewegten Fixation auf dem gefundenen und gesuchten Element. Damit kann vorteilhafterweise alternativ oder zusätzlich auch die räumliche Ausdehnung solcher bewegten Fixationen als Indikator für das Interesse eines Benutzers an einem Teil des angezeigten Inhalts dienen und entsprechend vorteilhafterweise zur Detektion dieses Interesses genutzt werden.In a further advantageous embodiment of the invention, the predetermined criterion is considered to be met, in particular alternatively or additionally, if a predetermined, spatially long-moving fixation of a gaze of the user in relation to the part of the scrollable content is detected. A moving fixation represents a fixation on a point shown on the display device which is moving. In a normal scrolling process, a user's gaze usually follows the currently displayed content in the opposite direction to the scrolling direction, and then usually jumps back in the scrolling direction and in turn follows newly emerging content in the opposite direction to the scrolling direction. For example, if you scroll down, the image content on the display device runs upwards. In such a case, the user's gaze usually follows the displayed image contents somewhat upwards and then jumps backwards and in turn follows new contents one by one upwards, so that overall a sawtooth-like gaze pattern results over time. The spatial length of the individual “saw teeth” is usually relatively short, typically significantly shorter than the extent of the display area in the scroll direction on which the scrollable content is displayed. However, if an element is now displayed on the screen that is of interest to the user or that represents the element being searched for, it has been shown that the user's gaze then typically follows this element over significantly greater spatial lengths opposite the scroll direction. In other words, moving fixations while the user is still looking for a certain element on the screen or on the display device are relatively short in their spatial extent compared to the moving fixation on the element found and searched for. As an alternative or in addition, the spatial extent of such moving fixations can thus advantageously serve as an indicator of a user's interest in part of the displayed content and can accordingly be used advantageously for the detection of this interest.

Bei einer weiteren vorteilhaften Ausgestaltung der Erfindung wird der Scroll-Vorgang dann ausgelöst, wenn als die Auslösebedienhandlung eine vom Benutzer durchgeführte blickunabhängige Auslösebedienhandlung erfasst wird. Eine solche Bedienhandlung kann beispielsweise eine manuelle Bedienhandlung, eine gestengesteuerte Bedienhandlung oder auch eine sprachbasierte beziehungsweise spracherkennungsbasierte Bedienhandlung darstellen. Beispielsweise kann ein entsprechendes Bedienelement vorgesehen sein, wie zum Beispiel ein Rad oder eine Walze, zum Beispiel an einem Lenkrad, welches dann durch manuelles Drehen den Scroll-Vorgang auslöst. Je stärker die Auslösebedienhandlung durchgeführt wird, das heißt mit je höherer Drehgeschwindigkeit und/oder räumlich größerer Drehbewegung am Rad, desto größer kann beispielsweise die initiale Scrollgeschwindigkeit festgelegt werden. Auch kann ein Touchpad oder ein Trackpad vorgesehen sein, welches mittels Gesten durch den Benutzer bedienbar ist, zum Beispiel mittels einer Streichgeste, um den Scroll-Vorgang auszulösen beziehungsweise anzustoßen. Auch hier lässt sich die Initialgeschwindigkeit in Abhängigkeit von der Art der ausgeführten Geste steuern. Auch kann die Anzeigeeinrichtung gleichzeitig mit einem Touchscreen ausgebildet sein, sodass der Benutzer die Auslösebedienhandlung als entsprechende Geste direkt auf diesem Touchscreen durchführen kann. Damit sind dem Benutzer vielzählige vorteilhafte Möglichkeiten bereitgestellt, um auf einfache und zuverlässige Weise einen Scroll-Vorgang anzustoßen. Vor allem bei Kraftfahrzeuganwendungen ist es besonders vorteilhaft, das Auslösen des Scroll-Vorgangs durch eine blickunabhängige Auslösebedienhandlung vorzunehmen, insbesondere dann wenn es sich bei dem Benutzer um den Fahrer des Kraftfahrzeugs handelt, da hierdurch die Ablenkung des Fahrers von der Straße auf ein Minimum reduziert werden kann.In a further advantageous embodiment of the invention, the scrolling process is triggered when a triggering operation, which is performed by the user and is independent of the eye, is recorded as the triggering operation. Such an operating action can represent, for example, a manual operating action, a gesture-controlled operating action or also a voice-based or speech recognition-based operating action. For example, a corresponding control element can be provided, such as a wheel or a roller, for example on a steering wheel, which then triggers the scrolling process by manual rotation. The more the triggering operation is carried out, that is to say with the higher rotational speed and / or spatially larger rotational movement on the wheel, the greater the initial scroll speed can be set, for example. A touchpad or a trackpad can also be provided, which can be operated by gestures by the user, for example by means of a swipe gesture, in order to trigger or initiate the scrolling process. Here, too, the initial speed can be controlled depending on the type of gesture performed. The display device can also be designed with a touchscreen at the same time, so that the user can perform the trigger operation as a corresponding gesture directly on this touchscreen. This provides the user with numerous advantageous options for initiating a scrolling process in a simple and reliable manner. Especially in motor vehicle applications, it is particularly advantageous to trigger the scrolling process by means of a look-independent trigger operation, in particular when the user is the driver of the motor vehicle, since this reduces the driver's distraction from the road to a minimum can.

Bei einer weiteren vorteilhaften Ausgestaltung der Erfindung wird die Geschwindigkeit auf einen von Null verschiedenen Geschwindigkeitswert reduziert, wobei das automatische Fortführen des Scroll-Vorgangs bei Erfassen einer vom Benutzer durchgeführten blickunabhängigen Beendigungsbedienhandlung beendet wird. Prinzipiell ist es auch denkbar, dass wenn bestimmt wird, dass der Benutzer an dem zumindest einen Teil des scrollbaren Inhalts interessiert ist, die aktuelle Geschwindigkeit, zum Beispiel kontinuierlich, bis auf Null reduziert wird. Eine Reduktion der Geschwindigkeit auf einen von Null verschiedenen positiven Geschwindigkeitswert unter Beibehaltung der aktuellen Scrollrichtung hat jedoch den Vorteil, dass für den Fall, dass das Interesse des Benutzers an dem zumindest einen Teil des scrollbaren Inhalts fälschlicherweise bestimm wurde, der automatisch fortgeführte Scroll-Vorgang dennoch nicht abgebrochen wird. Dies ermöglicht es vorteilhafterweise dem Benutzer, weiterhin nach dem gewünschten Element zu suchen, ohne dass dieser erneut einen Scroll-Vorgang anstoßen muss. Hat der Benutzer das gewünschte Element gefunden, so kann dieser durch die Beendigungsbedienhandlung manuell oder durch eine andere Eingabemöglichkeit, zum Beispiel sprachgesteuert, selbst aktiv den Scroll-Vorgang beenden. Somit wird vorteilhafterweise selbst bei Fehldetektionen des Interesses des Benutzers der Benutzer in seiner Suche nicht gestört oder gehindert.In a further advantageous embodiment of the invention, the speed is reduced to a non-zero speed value, the automatic continuation of the Scrolling process is terminated upon detection of a look-independent termination operation performed by the user. In principle, it is also conceivable that if it is determined that the user is interested in the at least part of the scrollable content, the current speed, for example continuously, is reduced to zero. However, reducing the speed to a non-zero positive speed value while maintaining the current scroll direction has the advantage that in the event that the interest of the user in the at least part of the scrollable content was incorrectly determined, the automatically continued scroll process nevertheless is not canceled. This advantageously enables the user to continue to search for the desired element without having to initiate a scroll process again. Once the user has found the desired element, the user can actively end the scrolling process manually or using another input option, for example voice-controlled, using the termination operation. Thus, the user is advantageously not disturbed or hindered in his search even in the event of false detections of the user's interest.

Dabei ist es weiterhin vorteilhaft, dass, wenn zum Beispiel nach einer Reduktion der Geschwindigkeit erfasst wird, dass der zeitliche Verlauf der Blickcharakteristik ein zweites vorbestimmtes Kriterium erfüllt, die aktuelle Geschwindigkeit des automatisch fortgeführten Scroll-Vorgangs erhöht wird. Wird also beispielsweise festgestellt, zum Beispiel anhand der Analyse des zeitlichen Blickverlaufs anhand der oben bereits beschriebenen Charakteristiken, dass der Benutzer wieder in einen Suchvorgang wechselt, also scheinbar das gesuchte Element immer noch nicht gefunden hat, so kann die Scrollgeschwindigkeit wiederum erhöht werden. Auch dies steigert wiederum den Bedienkomfort und ermöglicht ein schnelleres Auffinden des gesuchten Elements. Dieses zweite vorbestimmte Kriterium kann also beispielsweise wiederum darin bestehen, dass eine vorbestimmte signifikante Änderung des zeitlichen Verlaufs der Blickcharakteristik erfasst wird, zum Beispiel wenn die Zeitdauer der Fixation des Blicks sich wieder verkürzt oder auch die räumliche Länge der Fixationen des Blicks kürzer werden.It is also advantageous that if, for example after a reduction in speed, it is detected that the temporal course of the gaze characteristic fulfills a second predetermined criterion, the current speed of the automatically continued scrolling process is increased. If, for example, it is found, for example on the basis of the analysis of the course of the gaze over time based on the characteristics already described above, that the user switches back to a search process, ie apparently still has not found the element he is looking for, the scroll speed can be increased again. This also increases the ease of use and enables the element to be found more quickly. This second predetermined criterion can in turn consist, for example, in that a predetermined significant change in the temporal course of the gaze characteristic is detected, for example when the time period of the fixation of the gaze shortens again or the spatial length of the fixations of the gaze become shorter.

Des Weiteren betrifft die Erfindung eine Vorrichtung zum Unterstützen eines Benutzers beim Durchführen eines Scroll-Vorgangs zum Scrollen eines scrollbaren Inhalts auf einer Anzeigeeinrichtung, wobei die Vorrichtung die Anzeigeeinrichtung aufweist, die dazu ausgelegt ist, den scrollbaren Inhalt anzuzeigen, sowie eine Bedieneinrichtung, die dazu ausgelegte ist, eine vom Benutzer durchgeführte Auslösebedienhandlung zu erfassen. Weiterhin weist die Vorrichtung eine Steuereinrichtung auf, die dazu ausgelegt ist, in Abhängigkeit von der erfassten vom Benutzer durchgeführten Auslösebedienhandlung den Scroll-Vorgang auszulösen und nach dem Auslösen zumindest für eine vorgebbare Zeitdauer automatisch fortzuführen. Darüber hinaus weist die Vorrichtung eine Blickerfassungseinrichtung auf, die dazu ausgelegt ist, eine Blickcharakteristik des Benutzers im zeitlichen Verlauf zu erfassen, wobei die Steuereinrichtung dazu ausgelegt ist, zu überprüfen, ob der zeitliche Verlauf der Blickcharakteristik mit Bezug auf den scrollbaren Inhalt ein vorbestimmtes Kriterium erfüllt, und falls dem so ist, zu bestimmen, dass der Benutzer während des automatischen Fortführens des Scroll-Vorgangs an zumindest einem Teil des scrollbaren Inhalts, der aktuell auf der Anzeigeeinrichtung angezeigt wird, interessiert ist, und eine aktuelle Geschwindigkeit des automatisch fortgeführten Scroll-Vorgangs zu reduzieren.Furthermore, the invention relates to a device for assisting a user in carrying out a scrolling process for scrolling scrollable content on a display device, the device having the display device which is designed to display the scrollable content, and an operating device designed therefor is to capture a trigger operation performed by the user. Furthermore, the device has a control device which is designed to trigger the scrolling process as a function of the detected trigger operation performed by the user and to continue it automatically at least for a predeterminable period of time after the triggering. In addition, the device has a gaze detection device which is designed to detect a gaze characteristic of the user over time, the control device being designed to check whether the temporal course of the gaze characteristic with respect to the scrollable content fulfills a predetermined criterion , and if so, determine that the user is interested in at least a portion of the scrollable content currently displayed on the display device, and a current speed of the automatically proceeding scroll, during the automatic scrolling progress to reduce.

Darüber hinaus betrifft die Erfindung auch ein Kraftfahrzeug mit einer erfindungsgemäßen Vorrichtung oder einer ihrer Ausgestaltungen. Darüber hinaus soll auch ein Speichermedium mit einem Programmcode, das dazu eingerichtet ist, bei Ausführen durch eine Prozessoreinrichtung ein erfindungsgemäßes Verfahren oder eine seiner Ausführungsformen durchzuführen, als zur Erfindung gehörend angesehen werden, sowie auch ein mobiles, portables Endgerät mit einem solchen Speichermedium.In addition, the invention also relates to a motor vehicle with a device according to the invention or one of its configurations. In addition, a storage medium with a program code that is set up to carry out a method according to the invention or one of its embodiments when executed by a processor device should also be regarded as belonging to the invention, and also a mobile, portable terminal with such a storage medium.

Die für das erfindungsgemäße Verfahren und ihre Ausgestaltungen beschriebenen Vorteile gelten in gleicher Weise für die erfindungsgemäße Vorrichtung, das erfindungsgemäße Kraftfahrzeug und das portable Endgerät. Darüber hinaus ermöglichen die im Zusammenhang mit dem erfindungsgemäßen Verfahren und seinen Ausführungsformen beschriebenen Verfahrensschritte die Weiterbildung der erfindungsgemäßen Vorrichtung durch weitere korrespondierende gegenständliche Merkmale.The advantages described for the method according to the invention and its configurations apply in the same way to the device according to the invention, the motor vehicle according to the invention and the portable terminal. In addition, the method steps described in connection with the method according to the invention and its embodiments enable further development of the device according to the invention by means of further corresponding objective features.

Die erfindungsgemäße Vorrichtung oder ihre Ausgestaltungen können im Allgemeinen nicht nur im Kraftfahrzeug zum Einsatz kommen, sondern beispielsweise im Zusammenhang mit jeder beliebigen Anzeigeeinrichtung zum Anzeigen von Inhalten, insbesondere scrollbaren Inhalten. Die erfindungsgemäße Vorrichtung oder ihre Ausgestaltungen kann zum Beispiel auch Teil eines mobilen, portablen Endgeräts, insbesondere eines mobilen Kommunikationsgeräts, wie zum Beispiel eines Smartphones, sein, oder auch Teil eines Desktopcomputers, eines Laptops, eines Fernsehers, einer Spielekonsole oder ähnlichem. Zur Interaktion können dabei grundsätzlich jegliche Displays verwendet werden, auf denen Listen oder andere scrollbare Inhalte angezeigt werden können. Als Blickerfassungseinrichtung kann beispielsweise ein statischer Eye-Tracker verwendet werden, der so angeordnet ist, dass er eine Blickerfassung des Benutzers auf der Anzeigeeinrichtung ermöglicht. Bei Kraftfahrzeuganwendungen kommen als Anzeigeeinrichtung beispielsweise Head-up-Displays, Kombidisplays, MMI(Multi Media Interface)-Displays und virtuelle Außenspiegel in Frage. Die Blickerkennung mittels der Blickerfassungseinrichtung kann dabei beispielsweise auch durch eine Fahrerbeobachtungskamera erfolgen, welche zum Beispiel im Bereich des Kombidisplays angeordnet ist.The device according to the invention or its configurations can generally not only be used in the motor vehicle, but for example in connection with any display device for displaying content, in particular scrollable content. The device according to the invention or its configurations can for example also be part of a mobile, portable terminal, in particular a mobile communication device, such as a smartphone, or also part of a desktop computer, a laptop, a television, a game console or the like. In principle, any display can be used for interaction on which lists or other scrollable content can be displayed. A static eye tracker, for example, can be used as the eye detection device, which is arranged in such a way that it detects the eye of the user on the display device enables. In motor vehicle applications, for example, head-up displays, combination displays, MMI (Multi Media Interface) displays and virtual exterior mirrors can be used as the display device. The gaze detection by means of the gaze detection device can also be carried out, for example, by a driver observation camera which is arranged, for example, in the area of the combination display.

Die Erfindung umfasst auch die Kombinationen der Merkmale der beschriebenen Ausführungsformen.The invention also includes combinations of the features of the described embodiments.

Im Folgenden sind Ausführungsbeispiele der Erfindung beschrieben. Hierzu zeigt:

  • 1 eine schematische Darstellung einer Vorrichtung zum Unterstützen eines Benutzers beim Durchführen eines Scroll-Vorgangs, wobei der Benutzer während des Scroll-Vorgangs nach einem Element des angezeigten scrollbaren Inhaltes sucht; und
  • 2 eine schematische Darstellung der Vorrichtung zum Unterstützen des Benutzers beim Durchführen des Scroll-Vorgangs, wobei der Benutzer seinen Blick auf das gesuchte Element fokussiert.
Exemplary embodiments of the invention are described below. This shows:
  • 1 a schematic representation of a device for assisting a user in performing a scrolling process, the user looking for an element of the displayed scrollable content during the scrolling process; and
  • 2nd is a schematic representation of the device to support the user when performing the scrolling process, the user focusing his gaze on the element sought.

Bei den im Folgenden erläuterten Ausführungsbeispielen handelt es sich um bevorzugte Ausführungsformen der Erfindung. Bei den Ausführungsbeispielen stellen die beschriebenen Komponenten der Ausführungsformen jeweils einzelne, unabhängig voneinander zu betrachtende Merkmale der Erfindung dar, welche die Erfindung jeweils auch unabhängig voneinander weiterbilden. Daher soll die Offenbarung auch andere als die dargestellten Kombinationen der Merkmale der Ausführungsformen umfassen. Des Weiteren sind die beschriebenen Ausführungsformen auch durch weitere der bereits beschriebenen Merkmale der Erfindung ergänzbar.The exemplary embodiments explained below are preferred embodiments of the invention. In the exemplary embodiments, the described components of the embodiments each represent individual features of the invention that are to be considered independently of one another and that further develop the invention independently of one another. Therefore, the disclosure is intended to include combinations of the features of the embodiments other than those shown. Furthermore, the described embodiments can also be supplemented by further features of the invention that have already been described.

In den Figuren bezeichnen gleiche Bezugszeichen jeweils funktionsgleiche Elemente.In the figures, the same reference numerals designate elements that have the same function.

1 zeigt eine schematische Darstellung einer Vorrichtung 10 zum Unterstützen eines Benutzers 12 beim Durchführen eines Scroll-Vorgangs zum Scrollen eines scrollbaren Inhalts 14 auf einer Anzeigeeinrichtung 16, gemäß einem Ausführungsbeispiel der Erfindung. Die Vorrichtung 10 weist dabei weiterhin eine Bedieneinrichtung 18 auf, die in diese Fall exemplarisch als ein Touchpad, das heißt als ein Tastfeld, ausgebildet ist. Über diese Bedieneinrichtung 18 kann der Benutzer 12 eine Auslösebedienhandlung zum Auslösen des Scroll-Vorgangs eingeben. Dies kann beispielsweise eine Wischgeste in die gewünschte Scrollrichtung oder in die gewünschte Verschieberichtung sein. Diese Bedieneinrichtung 18 zum Erfassen der Auslösebedienhandlung des Benutzers 12 kann aber auch beliebig anders ausgebildet sein, zum Beispiel als Scrollrad, zum Beispiel an einem Lenkrad eines Kraftfahrzeugs, in welchem die Vorrichtung 10 Anwendung findet, oder als eine Sprachbefehlserkennungseinrichtung, als Bedienwippe, Taster, Drehdrücksteller oder ähnliches. Auch kann beispielsweise die Anzeigeeinrichtung 16 mit einem Touchscreen, das heißt einem Berührungsbildschirm, ausgebildet sein, sodass gleichzeitig auch die Bedieneinrichtung 18 Teil der Anzeigeeinrichtung 16 ist. 1 shows a schematic representation of a device 10th to support a user 12th when performing a scrolling operation to scroll a scrollable content 14 on a display device 16 , according to an embodiment of the invention. The device 10th still has an operating device 18th on, which in this case is exemplarily designed as a touchpad, that is, as a touch panel. About this control device 18th the user can 12th enter a trigger operation to trigger the scroll operation. This can be, for example, a swipe gesture in the desired scroll direction or in the desired direction of displacement. This control device 18th to capture the user's trigger operation 12th but can also be designed in any other way, for example as a scroll wheel, for example on a steering wheel of a motor vehicle, in which the device 10th Is used, or as a voice command recognition device, as a rocker switch, button, rotary pushbutton or the like. The display device can also be used, for example 16 be designed with a touchscreen, that is to say a touchscreen, so that at the same time the operating device 18th Part of the display device 16 is.

Weiterhin umfasst die Vorrichtung, in diesem Beispiel als Teil der Anzeigeeinrichtung 16, auch eine Blickerfassungseinrichtung 20, die zum Beispiel eine Kamera aufweisen kann, sowie eine Steuereinrichtung 22. Diese Blickerfassungseinrichtung 20 kann aber auch separiert von der Anzeigeeinrichtung angeordnet sein und als eigenständige Komponente ausgebildet sein. Die Blickerfassungseinrichtung 20 kann beispielsweise als Eye-Tracker ausgebildet sein. Weiterhin ist die Blickerfassungseinrichtung 20 dazu ausgelegt, den Blickpunkt B des Benutzers 12 mit Bezug auf die Anzeigeeinrichtung 16, insbesondere deren Anzeigefläche, auf welcher der scrollbare Inhalte 14 angezeigt wird, zu bestimmen. Verfahren zum Bestimmen der Blickrichtung beziehungsweise der Blickpunkte B sind aus dem Stand der Technik bekannt und werden hier deswegen nicht detailliert beschrieben. Dabei kann aus mittels der Kamera der Blickerfassungseinrichtung 20 aufgenommenen Bildern von einem oder beiden Augen des Benutzers 12, insbesondere optional unter Zuhilfenahme von Infrarotlichtquellen, die Blickrichtung zum Beispiel als Blickrichtungsvektor im Raum ermittelt werden und dieser Vektor kann mit der Anzeigefläche der Anzeigeeinrichtung 16 geschnitten werden, was den aktuellen Blickpunkt B liefert. Schematisch sind in 1 die Blickpunkte B für sieben verschiedene Zeitpunkte t1, t2, t3, t4, t5, t6, t7 dargestellt.Furthermore, the device comprises, in this example, part of the display device 16 , also a gaze detection device 20th which can have a camera, for example, and a control device 22 . This eye-tracking device 20th can, however, also be arranged separately from the display device and designed as an independent component. The eye detection device 20th can be designed, for example, as an eye tracker. Furthermore, the eye detection device 20th designed to be the focal point B of the user 12th with respect to the display device 16 , in particular their display area, on which the scrollable content 14 is displayed to determine. Method for determining the viewing direction or the viewing points B are known from the prior art and are therefore not described in detail here. In this case, the gaze detection device can be operated using the camera 20th captured images from one or both eyes of the user 12th , in particular optionally with the aid of infrared light sources, the viewing direction can be determined, for example, as a viewing direction vector in space and this vector can be displayed on the display surface of the display device 16 be cut what the current point of view B delivers. Are schematic in 1 the viewpoints B for seven different times t1 , t2 , t3 , t4 , t5 , t6 , t7 shown.

Bei herkömmlichen Scroll-Vorgängen kann durch den Benutzer ein Scroll-Vorgang angestoßen werden, welcher dann von alleine weiterscrollt und dabei immer langsamer wird. Dabei kann es jedoch leicht passieren, dass der Scroll-Vorgang nicht automatisch bei dem Element endet, welches der Benutzer in dieser Liste sucht. Oft ist die Scrollgeschwindigkeit schlecht zu kontrollieren, was dann häufig zu einem Überscrollen des Eintrags führt.In conventional scroll processes, the user can initiate a scroll process, which then scrolls on by itself and becomes ever slower. However, it can easily happen that the scrolling process does not automatically end with the element that the user is looking for in this list. The scroll speed is often difficult to control, which often leads to the entry being scrolled over.

Dieses Problem wird nun vorteilhafter Weise dadurch gelöst, dass die Scrollgeschwindigkeit blickgestützt angepasst werden kann, und zwar auf besonders subtile Weise, sodass die Auswertung des Blickverhaltens im Optimalfall für den Nutzer nicht merkbar im Hintergrund stattfindet, sowie auch die Anpassung der Scrollgeschwindigkeit. Diese Scrollgeschwindigkeit ist in 1 durch den Pfeil v1 veranschaulicht. In diesem Beispiel findet ein nach unten Scrollen statt, das heißt der angezeigte Inhalt 14 bewegt sich in Pfeilrichtung mit der Scrollgeschwindigkeit v1 nach oben. Während des automatischen Fortführens dieses durch den Benutzer 12 angestoßenen Scroll-Vorgangs erfasst die Blickerfassungseinrichtung 20 eine Blickcharakteristik des Benutzers 12 im zeitlichen Verlauf, die von der Steuereinrichtung 22 ausgewertet wird. Dabei wird überprüft, ob der zeitliche Verlauf dieser Blickcharakteristik mit Bezug auf den scrollbaren Inhalt 14 ein vorbestimmtes Kriterium erfüllt, und falls dem so ist wird bestimmt, dass der Benutzer während des automatischen Fortführens des Scroll-Vorgangs an zumindest einem Teil 14a (vergleiche 2) des Inhalts 14 interessiert ist, und die aktuelle Scrollgeschwindigkeit v1 des automatisch fortgeführten Scroll-Vorgangs wird reduziert.This problem is now advantageously solved in that the scrolling speed can be adjusted with the aid of the eye, and in a particularly subtle way, so that the evaluation of the viewing behavior optimally does not take place in the background for the user, and also the adjustment of the scrolling speed. This scrolling speed is in 1 by the arrow v1 illustrated. In this example, one finds Scrolling down instead, that means the displayed content 14 moves in the direction of the arrow at the scrolling speed v1 up. During the automatic continuation of this by the user 12th The gaze detection device detects the initiated scroll process 20th a gaze characteristic of the user 12th over time by the control device 22 is evaluated. It is checked whether the chronological course of this gaze characteristic with reference to the scrollable content 14 a predetermined criterion is met, and if so, it is determined that the user picks up at least a portion during the automatic scrolling operation 14a (compare 2nd ) of the content 14 is interested, and the current scroll speed v1 the automatically continued scrolling process is reduced.

Dies beruht auf der Idee, dass sich das Blickverhalten beziehungsweise die Blickcharakteristik des Benutzers 12 ändert, wenn auf der Anzeigeeinrichtung 16 das vom Benutzer 12 gesuchte Element 14a erscheint. 1 veranschaulicht dabei eine Situation, in welcher das gesuchte Element 14a noch nicht auf der Anzeigeeinrichtung 16 zu sehen ist. In dieser Situation zeigt der Benutzer 12 ein typisches suchendes Blickverhalten. Es kann zum Beispiel als scrollbarer Inhalt eine Liste, zum Beispiel mit 100 Einträgen angezeigt werden, wobei auf der Anzeigeeinrichtung 16 zum Beispiel maximal fünf Einträge dieser Liste gleichzeitig dargestellt werden können, zum Beispiel untereinander angezeigt werden. Wenn der Benutzer 12 nun einen Eintrag weiter unten in der Liste, zum Beispiel auf Platz 85 sucht und den Scroll-Vorgang auslöst, zum Beispiel mit einer Touch-Swipe-Bewegung auf der Bedieneinrichtung 18, so beobachtet der Benutzer 12 zunächst die in Scrollrichtung mit der aktuellen Scrollgeschwindigkeit v1 laufenden Listeneinträge. Während der Suche nach einem bestimmten Listeneintrag verläuft der Blick B typischerweise sägezahnartig, das heißt er liegt kurzzeitig auf den in diesem Beispiel nach oben verlaufenden Listeneinträgen und wandert beziehungsweise springt dann wiederum zurück zum unteren Bildschirmrand der Anzeigeeinrichtung 16.This is based on the idea that the user's gaze behavior or gaze characteristics 12th changes when on the display device 16 by the user 12th searched item 14a appears. 1 illustrates a situation in which the element sought 14a not yet on the display device 16 you can see. In this situation the user shows 12th a typical looking gaze behavior. For example, a list can be displayed as scrollable content, for example with 100 entries, whereby on the display device 16 For example, a maximum of five entries from this list can be displayed at the same time, for example displayed below one another. If the user 12th now one entry further down in the list, for example on space 85 searches and triggers the scrolling process, for example with a touch swipe movement on the operating device 18th , the user observes 12th first the one in the scroll direction with the current scroll speed v1 current list entries. When looking for a specific list entry, the view runs B typically sawtooth-like, that is, it lies briefly on the list entries running upwards in this example and then wanders or jumps back again to the bottom edge of the display device 16 .

2 zeigt schematisch die Vorrichtung 10 mit dem Benutzer 12 in einer anderen Situation, in welcher nun das gesuchte Element 14a, wie zum Beispiel der bestimmte Listeneintrag, auf der Anzeigeeinrichtung 16 erscheint. Insbesondere ist dieses gesuchte Element 14a in 2 schematisch in seinem zeitlichen Verlauf gestrichelt dargestellt. In dieser Situation fixiert der Benutzer 12 typischerweise seinen Blick B auf dieses gesuchte Element 14a, während dieses nach oben verläuft. Exemplarisch sind auch in 2 die Blickpunkte B für verschiedene aufeinanderfolgende Zeitpunkte t8, t9, t10, t11 und t12 dargestellt. Daraus ergeben sich typische Unterschiede dieses Blickverhaltens im Vergleich zum suchenden Blickverhalten, wie dieses in 1 illustriert ist. Dieser Unterschied im Blickverhalten lässt sich nun vorteilhafterweise nutzen, um zu erkennen, wann der Benutzer 12 an einem bestimmten Element 14a, welches aktuell auf der Anzeigeeinrichtung 16 angezeigt wird, interessiert ist. Wird dann entsprechend ein solches Interesse des Benutzers 12 detektiert, so wird die Scrollgeschwindigkeit v1 reduziert auf eine kleinere Scrollgeschwindigkeit v2, wie diese in 2 dargestellt ist. Diese Reduktion erfolgt dabei vorzugsweise kontinuierlich und nicht abrupt. Dies unterstützt den Benutzer 12 vorteilhafterweise bei der Auswahl eines gewünschten Elements 14a, und reduziert das Risiko für ein Überscrollen. Dadurch können vorteilhafterweise Fehlbedienungen reduziert werden, was zu einer sichereren, schnelleren Bedienung und einem besseren Benutzererlebnis führt. 2nd shows schematically the device 10th with the user 12th in another situation, in which the element we are looking for 14a , such as the particular list entry, on the display device 16 appears. In particular, this element is searched 14a in 2nd shown schematically in dashed lines in its chronological course. In this situation, the user fixes 12th typically his gaze B on this searched item 14a as it goes up. Examples are also in 2nd the viewpoints B for different successive times t8 , t9 , t10 , t11 and t12 shown. This results in typical differences of this gaze behavior compared to the searching gaze behavior, like this one in 1 is illustrated. This difference in gaze behavior can now be used advantageously to recognize when the user 12th on a particular item 14a which is currently on the display device 16 is shown, is interested. Then such an interest of the user 12th the scroll speed is detected v1 reduced to a lower scroll speed v2 how this in 2nd is shown. This reduction is preferably carried out continuously and not abruptly. This supports the user 12th advantageously when selecting a desired element 14a , and reduces the risk of scrolling. In this way, incorrect operation can advantageously be reduced, which leads to safer, faster operation and a better user experience.

Aus dem im zeitlichen Verlauf erfassten Blickmuster lassen sich darüber hinaus bestimmte Kenngrößen extrahieren, die zur Identifikation eines Interesses des Benutzers 12 herangezogen werden können. Beispielsweise ist zu erwarten, dass das Fixationsverhalten auf dem gesuchten Element 14a anders ist, als auf den für den Benutzer 12 irrelevanten Elementen. Insbesondere dauert eine Fixation auf dem gesuchten Element 14a typischerweise länger an als auf für den Benutzer 12 irrelevanten Elementen.In addition, certain parameters can be extracted from the gaze pattern recorded in the course of time, which are used to identify a user's interest 12th can be used. For example, it can be expected that the fixation behavior on the element sought 14a is different than the one for the user 12th irrelevant elements. In particular, a fixation on the element sought takes 14a typically longer than on for the user 12th irrelevant elements.

Diese Fixationsdauer ist in 1 mit Δt1 bezeichnet und stellt in diesem Beispiel die Zeitdauer dar, während welcher der Benutzer 12 über die Zeitpunkte t4, t5 und t6 hinweg auf das gleiche Element fixiert ist, bis der Blick zum Zeitpunkt t7 wieder auf ein neues am unteren Rand erscheinendes Element springt. Diese Zeitdauer ist im Fall, dass der Benutzer seinen Blick B auf ein ihn interessierendes Element 14a fixiert, deutlich länger, was in 2 durch die korrespondierende Fixationszeitdauer Δt2 illustriert ist. Dies stellt die Zeitdauer dar, während welcher der Benutzer 12 auf das ihn interessierende Elemente 14a über die Zeitpunkte t8, t9, t10, t11 und t12 hinweg fixiert. Durch diese deutlich längere Zeitdauer Δt2 lässt sich vorteilhafterweise das Interesse des Benutzers an einem bestimmten Teil 14a der aktuellen Darstellung auf der Anzeigeeinrichtung 16 erkennen.This fixation period is in 1 With Δt1 denotes and in this example represents the length of time during which the user 12th about the times t4 , t5 and t6 fixed on the same element until the point of view t7 jumps to a new element appearing at the bottom. This length of time is in the event that the user gazes B to an element that interests him 14a fixed, much longer, what in 2nd by the corresponding fixation period Δt2 is illustrated. This represents the length of time during which the user 12th to the element that interests him 14a about the times t8 , t9 , t10 , t11 and t12 fixed away. Because of this significantly longer period of time Δt2 can advantageously be the user's interest in a particular part 14a the current representation on the display device 16 detect.

Eine weitere Blickcharakteristik, die dies ermöglicht, stellt beispielsweise auch die räumliche Länge einer bewegten Fixation des Benutzers 12 dar. Diese räumliche Länge ist in 1 mit ΔI1 bezeichnet und in 2 mit ΔI2. Mit anderen Worten überstreicht der Blick B des Benutzers 12, wenn dieser ein ihn interessierendes Element 14a auf der Anzeigeeinrichtung 16 erkennt, eine deutlich größere räumliche Länge ΔI2, als im Fall des suchenden Blickverhaltens, wie in 1 dargestellt. Auch daran lässt sich also vorteilhafterweise das Interesse des Benutzers 12 an einem bestimmten Element 14a des scrollbaren Inhalts 14 erkennen.Another visual characteristic that makes this possible is, for example, the spatial length of a moving fixation of the user 12th This spatial length is in 1 With ΔI1 designated and in 2nd With ΔI2 . In other words, the look sweeps over B of the user 12th if this is an element that interests him 14a on the display device 16 recognizes a significantly greater spatial length ΔI2 than in the case of looking behavior, as in 1 shown. The interest of the user can also be advantageously used in this 12th on a particular item 14a the scrollable content 14 detect.

Es können aber auch deutlich komplexere Blickmustercharakteristiken herangezogen werden, zum Beispiel auf Basis lernender Verfahren, um mit hoher Zuverlässigkeit das Interesse des Benutzer an einem bestimmten Element 14a zu detektieren. Eine Auswahl des ihn interessierenden Elements, sofern es sich um ein auswählbares Element handelt, kann dann beispielsweise wiederum mittels der Bedieneinrichtung 18 manuell durch den Benutzer 12 ausgeführt werden. However, significantly more complex gaze pattern characteristics can also be used, for example on the basis of learning methods, in order to reliably determine the interest of the user in a certain element 14a to detect. A selection of the element that interests him, provided that it is a selectable element, can then again be done, for example, using the operating device 18th manually by the user 12th be carried out.

Insgesamt zeigen die Beispiele, wie durch die Erfindung ein Verfahren zum blickunterstützten Scrollen bereitgestellt wird, mittels welchem einem Benutzer eine sehr subtile Hilfestellung geboten werden kann, die Fehlbedienungen reduziert und ein sicheres, schnelleres Bedienen und ein deutlich gesteigertes Nutzererlebnis ermöglicht.Overall, the examples show how the invention provides a method for gaze-assisted scrolling, by means of which a user can be offered very subtle help, which reduces incorrect operation and enables safe, faster operation and a significantly increased user experience.

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents listed by the applicant has been generated automatically and is only included for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturPatent literature cited

  • DE 102013021814 A1 [0004]DE 102013021814 A1 [0004]
  • US 2015/0135133 A1 [0005]US 2015/0135133 A1 [0005]
  • US 2015/0128075 A1 [0006]US 2015/0128075 A1 [0006]

Claims (10)

Verfahren zum Unterstützen eines Benutzers (12) beim Durchführen eines Scroll-Vorgangs zum Scrollen eines scrollbaren Inhalts (14) auf einer Anzeigeeinrichtung (16), wobei der Scroll-Vorgang in Abhängigkeit von einer erfassten vom Benutzer (12) durchgeführten Auslösebedienhandlung ausgelöst wird und nach dem Auslösen zumindest für eine vorgebbare Zeitdauer automatisch fortgeführt wird, dadurch gekennzeichnet, dass eine Blickcharakteristik (B) des Benutzers (12) im zeitlichen Verlauf (t1, t2, t3, ,t4, t5, t6, t7, t8, t9, t10, t11, t12) mittels einer Blickerfassungseinrichtung (20) erfasst wird und unter der Bedingung, dass der zeitliche Verlauf (t1, t2, t3, ,t4, t5, t6, t7, t8, t9, t10, t11, t12) der Blickcharakteristik (B) mit Bezug auf den scrollbaren Inhalt (14) ein vorbestimmtes Kriterium erfüllt, bestimmt wird, dass der Benutzer (12) während des automatischen Fortführens des Scroll-Vorgangs an zumindest einem Teil (14a) des scrollbaren Inhalts (14), der aktuell auf der Anzeigeeinrichtung (16) angezeigt wird, interessiert ist, und eine aktuelle Geschwindigkeit (v1) des automatisch fortgeführten Scroll-Vorgangs reduziert wird.Method for assisting a user (12) in carrying out a scrolling process for scrolling scrollable content (14) on a display device (16), the scrolling process being triggered depending on a triggering action performed by the user (12) and after the triggering is automatically continued at least for a predeterminable time period, characterized in that a gaze characteristic (B) of the user (12) over time (t1, t2, t3,, t4, t5, t6, t7, t8, t9, t10, t11, t12) is detected by means of a gaze detection device (20) and under the condition that the time profile (t1, t2, t3,, t4, t5, t6, t7, t8, t9, t10, t11, t12) of the gaze characteristic ( B) with respect to the scrollable content (14) fulfills a predetermined criterion, it is determined that the user (12) during the automatic continuation of the scrolling process on at least a part (14a) of the scrollable content (14) that is currently on the Display device (16) is displayed, is interested, and a current speed (v1) of the automatically continued scrolling process is reduced. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass unabhängig von einer Überprüfung, ob der Benutzer (12) in einen vorbestimmten Positionsbereich auf der Anzeigeeinrichtung (16) blickt, in welchem kein scrollbarer Inhalt (14) angezeigt wird, bestimmt wird, ob der Benutzer (12) während des automatischen Fortführens des Scroll-Vorgangs an dem zumindest einem Teil (14a) des scrollbaren Inhalts (14), der aktuell auf der Anzeigeeinrichtung (16) angezeigt wird, interessiert ist.Procedure according to Claim 1 , characterized in that, regardless of a check whether the user (12) looks into a predetermined position area on the display device (16) in which no scrollable content (14) is displayed, it is determined whether the user (12) during the automatic continuation of the scrolling process in which at least a part (14a) of the scrollable content (14) that is currently displayed on the display device (16) is interested. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das vorbestimmte Kriterium als erfüllt gilt, wenn eine vorbestimmt signifikante Änderung des zeitlichen Verlaufs (t1, t2, t3, ,t4, t5, t6, t7, t8, t9, t10, t11, t12) der Blickcharakteristik (B) erfasst wird.Method according to one of the preceding claims, characterized in that the predetermined criterion is considered to be met if a predetermined significant change in the time profile (t1, t2, t3,, t4, t5, t6, t7, t8, t9, t10, t11, t12) the gaze characteristic (B) is recorded. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das vorbestimmte Kriterium als erfüllt gilt, wenn eine vorbestimmt lange Zeitdauer (Δt2) einer Fixation eines Blicks (B) des Benutzers (12) in Bezug auf den Teil (14a) des scrollbaren Inhalts (14) erfasst wird.Method according to one of the preceding claims, characterized in that the predetermined criterion is met if a predetermined long period (Δt2) of a fixation of a look (B) of the user (12) in relation to the part (14a) of the scrollable content ( 14) is recorded. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet dadurch, dass das vorbestimmte Kriterium als erfüllt gilt, wenn eine vorbestimmt räumlich lange bewegte Fixation eines Blicks (B) des Benutzers (12) in Bezug auf den Teil (14a) des scrollbaren Inhalts (14) erfasst wird.Method according to one of the preceding claims, characterized in that the predetermined criterion is considered to be met if a predetermined spatially long-moving fixation of a gaze (B) of the user (12) in relation to the part (14a) of the scrollable content (14) is recorded. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet dadurch, dass der Scroll-Vorgang dann ausgelöst wird, wenn als die Auslösebedienhandlung eine vom Benutzer (12) durchgeführte blickunabhängige Auslösebedienhandlung erfasst wird.Method according to one of the preceding claims, characterized in that the scrolling process is triggered when a triggering operation which is carried out by the user (12) and which is carried out by the user (12) is detected as the triggering operation. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Geschwindigkeit (v1) auf einen von Null verschiedenen Geschwindigkeitswert (v2) reduziert wird, wobei das automatische Fortführen des Scroll-Vorgangs bei Erfassen einer vom Benutzer (12) durchgeführten blickunabhängigen Beendigungsbedienhandlung beendet wird.Method according to one of the preceding claims, characterized in that the speed (v1) is reduced to a non-zero speed value (v2), the automatic continuation of the scrolling process being terminated upon detection of a view-independent termination operation performed by the user (12). Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass wenn nach einer Reduktion der Geschwindigkeit (v1) erfasst wird, dass der zeitliche Verlauf (t1, t2, t3, ,t4, t5, t6, t7, t8, t9, t10, t11, t12) der Blickcharakteristik (B) ein zweites vorbestimmtes Kriterium erfüllt, die aktuelle Geschwindigkeit (v2) des automatisch fortgeführten Scroll-Vorgangs erhöht wird.Method according to one of the preceding claims, characterized in that if after a reduction in speed (v1) it is detected that the time profile (t1, t2, t3,, t4, t5, t6, t7, t8, t9, t10, t11 , t12) the gaze characteristic (B) fulfills a second predetermined criterion, the current speed (v2) of the automatically continued scrolling process is increased. Vorrichtung (10) zum Unterstützen eines Benutzers (12) beim Durchführen eines Scroll-Vorgangs zum Scrollen eines scrollbaren Inhalts (14) auf einer Anzeigeeinrichtung (16), wobei die Vorrichtung (10) aufweist: - die Anzeigeeinrichtung (16), die dazu ausgelegt ist, den scrollbaren Inhalt (14) anzuzeigen; - eine Bedieneinrichtung (18), die dazu ausgelegte ist, eine vom Benutzer (12) durchgeführte Auslösebedienhandlung zu erfassen; und - eine Steuereinrichtung (22), die dazu ausgelegt ist, in Abhängigkeit von der erfassten vom Benutzer (12) durchgeführten Auslösebedienhandlung den Scroll-Vorgang auszulösen und nach dem Auslösen zumindest für eine vorgebbare Zeitdauer automatisch fortzuführen, dadurch gekennzeichnet, dass die Vorrichtung (10) eine Blickerfassungseinrichtung (20) aufweist, die dazu ausgelegt ist, eine Blickcharakteristik (B) des Benutzers (12) im zeitlichen Verlauf (t1, t2, t3, ,t4, t5, t6, t7, t8, t9, t10, t11, t12) zu erfassen, wobei die Steuereinrichtung (22) dazu ausgelegt ist, zu überprüfen, ob der zeitliche Verlauf (t1, t2, t3, ,t4, t5, t6, t7, t8, t9, t10, t11, t12) der Blickcharakteristik (B) mit Bezug auf den scrollbaren Inhalt (14) ein vorbestimmtes Kriterium erfüllt, und falls dem so ist, zu bestimmen, dass der Benutzer (12) während des automatischen Fortführens des Scroll-Vorgangs an zumindest einem Teil (14a) des scrollbaren Inhalts (14), der aktuell auf der Anzeigeeinrichtung (16) angezeigt wird, interessiert ist, und eine aktuelle Geschwindigkeit (v1) des automatisch fortgeführten Scroll-Vorgangs zu reduzieren.Device (10) for supporting a user (12) in performing a scrolling process for scrolling scrollable content (14) on a display device (16), the device (10) comprising: - the display device (16), which is designed for this purpose is to display the scrollable content (14); - An operating device (18), which is designed to detect a trigger operation performed by the user (12); and - a control device (22) which is designed to trigger the scrolling process as a function of the detected trigger operation performed by the user (12) and to continue it automatically at least for a predefinable period of time after the triggering, characterized in that the device (10 ) has a gaze detection device (20) which is designed to display a gaze characteristic (B) of the user (12) over time (t1, t2, t3,, t4, t5, t6, t7, t8, t9, t10, t11, t12), the control device (22) being designed to check whether the time profile (t1, t2, t3,, t4, t5, t6, t7, t8, t9, t10, t11, t12) of the gaze characteristic (B) fulfills a predetermined criterion with respect to the scrollable content (14) and, if so, to determine that the user (12) during the automatic continuation of the scrolling process on at least a part (14a) of the scrollable content (14), which is currently on the display device device (16) is displayed, is interested, and to reduce a current speed (v1) of the automatically continued scrolling process. Kraftfahrzeug mit einer Vorrichtung (10) nach Anspruch 9.Motor vehicle with a device (10) Claim 9 .
DE102018215597.6A 2018-09-13 2018-09-13 Method for assisting a user in performing a scrolling process, device and motor vehicle Pending DE102018215597A1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE102018215597.6A DE102018215597A1 (en) 2018-09-13 2018-09-13 Method for assisting a user in performing a scrolling process, device and motor vehicle
PCT/EP2019/071788 WO2020052894A1 (en) 2018-09-13 2019-08-14 Method for assisting a user in performing a scrolling process, apparatus and motor vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102018215597.6A DE102018215597A1 (en) 2018-09-13 2018-09-13 Method for assisting a user in performing a scrolling process, device and motor vehicle

Publications (1)

Publication Number Publication Date
DE102018215597A1 true DE102018215597A1 (en) 2020-03-19

Family

ID=67660097

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102018215597.6A Pending DE102018215597A1 (en) 2018-09-13 2018-09-13 Method for assisting a user in performing a scrolling process, device and motor vehicle

Country Status (2)

Country Link
DE (1) DE102018215597A1 (en)
WO (1) WO2020052894A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111452616B (en) * 2020-03-30 2021-10-12 广州小鹏汽车科技有限公司 Information display control method and device and vehicle

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110175932A1 (en) * 2010-01-21 2011-07-21 Tobii Technology Ab Eye tracker based contextual action
US20170212583A1 (en) * 2016-01-21 2017-07-27 Microsoft Technology Licensing, Llc Implicitly adaptive eye-tracking user interface

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013168173A1 (en) 2012-05-11 2013-11-14 Umoove Services Ltd. Gaze-based automatic scrolling
US20150135133A1 (en) 2013-11-11 2015-05-14 Lenovo (Singapore) Pte. Ltd. Adjustable smooth scrolling
DE102013021814A1 (en) 2013-12-20 2015-06-25 Audi Ag Control device with eyetracker
US20180284886A1 (en) * 2015-09-25 2018-10-04 Itu Business Development A/S Computer-Implemented Method of Recovering a Visual Event

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110175932A1 (en) * 2010-01-21 2011-07-21 Tobii Technology Ab Eye tracker based contextual action
US20170212583A1 (en) * 2016-01-21 2017-07-27 Microsoft Technology Licensing, Llc Implicitly adaptive eye-tracking user interface

Also Published As

Publication number Publication date
WO2020052894A1 (en) 2020-03-19

Similar Documents

Publication Publication Date Title
WO2017211817A1 (en) Operator control comprising eye tracker unit and method for calibrating an eye tracker unit for an operator control
EP2567194B1 (en) Method and device for operating a user interface
EP3116737B1 (en) Method and apparatus for providing a graphical user interface in a vehicle
WO2007107368A1 (en) Interactive operating device and method for operating the interactive operating device
WO2010046147A1 (en) Method and device for displaying information sorted into lists
EP2924551B1 (en) Method and device for providing a graphical user interface in a vehicle
DE102012020607A1 (en) Method for controlling selection element e.g. cursor, on monitor of e.g. navigation device, of motor vehicle i.e. passenger car, involves activating function of electronic device by control device based on relative position of finger
EP2924540B1 (en) Method and system for operating a display device
DE102013217558A1 (en) Method for controlling an information display device and device with an information display device
EP2987066B1 (en) Motor vehicle having a display and operating device and corresponding method
WO2015162058A1 (en) Gesture interaction with a driver information system of a vehicle
WO2014111241A1 (en) Method and system for controlling at least one functional unit, and motor vehicle and mobile terminal device having such a system
EP3123309A1 (en) Method and device for providing a selection possibility while producing display content
WO2017054894A1 (en) Interactive operating system and method for carrying out an operational action in an interactive operating system
DE102018215597A1 (en) Method for assisting a user in performing a scrolling process, device and motor vehicle
EP2925552B1 (en) Operating method and operating system in a road vehicle
DE102013001327B4 (en) Method and display system for viewing direction-dependent scaling of a representation
EP3963434B1 (en) Method and device for selecting input fields displayed on a screen and/or for activating input content displayed in a selected input field on the screen by means of manual inputs
EP3025214B1 (en) Method for operating an input device, and input device
DE102017218718A1 (en) Method, device and means of transport for supporting a gesture control for a virtual display
WO2020011943A1 (en) Method and user interface for capturing an input by means of pointing gestures
WO2014114428A1 (en) Method and system for controlling, depending on the line of vision, a plurality of functional units, motor vehicle and mobile terminal having said system
DE102013003047A1 (en) Method for controlling functional unit of motor vehicle, involves activating control function for controlling functional unit, when user has performed given blink pattern that is specified as double blink of the user
DE10144329A1 (en) Graphical user interface for use with portable computer devices and particularly for vehicle navigation systems, enables positioning of the cursor almost without any need to look at the output screen
DE102014217969A1 (en) Method for operating an input device, input device

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R082 Change of representative

Representative=s name: HOFSTETTER, SCHURACK & PARTNER - PATENT- UND R, DE