DE102013019117A1

DE102013019117A1 - Method for calibrating a viewing direction detection device for a motor vehicle, calibration device and motor vehicle

Info

Publication number: DE102013019117A1
Application number: DE102013019117.3A
Authority: DE
Inventors: Marcus Kühne
Original assignee: Audi AG
Current assignee: Audi AG
Priority date: 2013-11-15
Filing date: 2013-11-15
Publication date: 2015-05-21

Abstract

Die Erfindung betrifft ein Verfahren zum Kalibrieren einer Blickrichtungserfassungseinrichtung (14) für ein Kraftfahrzeug (10), bei dem ein Kalibrierungsvorgang gestartet wird (S10) und automatisch zeitlich aufeinanderfolgend mehrere zumindest zum Teil räumlich voneinander verschiedene Fixierungsbereiche (20; 20a; 20b; 20c) auf einer Anzeigeeinrichtung (16) angezeigt werden (S12a; S12b; S12c). Dabei wird für jeweils einen angezeigten Fixierungsbereich (20; 20a; 20b; 20c) zumindest eine Messung eines Reflexionsverhaltens zumindest eines Auges eines Benutzers während einer jeweiligen Dauer des Anzeigens (S14a; S14b; S14c) eines jeweiligen Fixierungsbereichs (20; 20a; 20b; 20c) durchgeführt (S16a; S16b; S16c). Weiterhin wird die Blickrichtungserfassungseinrichtung (14) zumindest anhand der durchgeführten Messungen kalibriert (S18). Bei diesem Verfahren wird erfindungsgemäß jedem Fixierungsbereich (20; 20a; 20b; 20c) eine jeweilige Darstellung zugeordnet (S12a; S12b; S12c), wobei beim Anzeigen (S14a; S14b; S14c) eines jeweiligen Fixierungsbereichs (20; 20a; 20b; 20c) die diesem zugeordnete Darstellung innerhalb des Fixierungsbereichs (20; 20a; 20b; 20c) dargestellt wird.The invention relates to a method for calibrating a viewing direction detection device (14) for a motor vehicle (10) in which a calibration process is started (S10) and automatically in succession several at least partially spatially different fixation regions (20; 20a; 20b; 20c) display means (16) are displayed (S12a, S12b, S12c). At least one measurement of a reflection behavior of at least one eye of a user during a respective duration of the display (S14a; S14b; S14c) of a respective fixation region (20; 20a; 20b; 20c) is produced for each one indicated fixation region (20; ) (S16a, S16b, S16c). Furthermore, the sight line detection device (14) is calibrated at least on the basis of the measurements carried out (S18). According to the invention, a respective representation is assigned to each fixation region (S12a, S12b, S12c), wherein when displaying (S14a, S14b, S14c) a respective fixation region (20, 20a, 20b, 20c) the representation associated therewith is shown within the fixing area (20; 20a; 20b; 20c).

Description

Die Erfindung betrifft ein Verfahren zum Kalibrieren einer Blickrichtungserfassungseinrichtung für ein Kraftfahrzeug gemäß dem Oberbegriff des Patentanspruchs 1 und eine Kalibrierungseinrichtung gemäß dem Oberbegriff des Patentanspruchs 10 und ein Kraftfahrzeug mit einer solchen Kalibrierungseinrichtung.The invention relates to a method for calibrating a sight line detection device for a motor vehicle according to the preamble of patent claim 1 and a calibration device according to the preamble of patent claim 10 and a motor vehicle having such a calibration device.

Bei gattungsgemäßen Verfahren zum Kalibrieren von Eye Tracking Systemen in Kraftfahrzeugen gemäß dem Stand der Technik ist eine einmalige Kalibrierung des Systems auf die Augen des Nutzers erforderlich. Dazu muss der Blick des Nutzers sequentiell auf einer Reihe von Kalibrierungsbereichen oder Kalibrierungspunkten, die z. B. auf der Anzeigeeinrichtung des Kraftfahrzeugs sequentiell angezeigt werden, ruhen. Während dieses Vorgangs wird das Reflektionsverhalten der Augen des Nutzers gemessen. Dieser Kalibrierungsvorgang ist jedoch für einen Benutzer sehr eintönig.In generic methods for calibrating eye tracking systems in motor vehicles according to the prior art, a one-time calibration of the system to the eyes of the user is required. For this purpose, the user's gaze must be sequential on a series of calibration areas or calibration points, e.g. B. are sequentially displayed on the display device of the motor vehicle, rest. During this process, the reflection behavior of the user's eyes is measured. However, this calibration process is very monotonous for a user.

Diese Eintönigkeit des Kalibrierungsvorgangs wird gemäß der WO 2012/052061 A1 versucht dadurch zu umgehen, dass der Kalibrierungsvorgang nicht zu einem bestimmten Zeitpunkt gestartet und durchlaufen wird, sondern erst beim Auftreten eines Ereignisses eine einzelne Kalibrierungsphase durchgeführt wird. Ein solches Ereignis kann dabei beispielsweise sein, dass ein Benutzer an einem Bildschirm ein bestimmtes Icon auswählt oder einen Knopf betätigt. Bei diesem Verfahren wird angenommen, dass der Blick des Benutzers zum Zeitpunkt der Ausführung dieser genannten Aktionen auf eine bestimmte Stelle gerichtet ist, also auf das Icon bzw. den Knopf, was dann als tatsächliche Blickrichtung angenommen wird. Führt ein Benutzer also eine solche Aktion aus, wird von einem Blickrichtungsdetektor die Blickrichtung bestimmt. Sind mehrere solcher Kalibrierungsphasen durchgeführt, so wird anhand der bestimmten Blickrichtungen und den als tatsächlich angenommenen Blickrichtungen der Blickrichtungsdetektor kalibriert.This monotony of the calibration process is performed according to the WO 2012/052061 A1 This approach attempts to avoid that the calibration process is started and run at a specific time, but a single calibration phase is performed only when an event occurs. Such an event may be, for example, that a user selects a particular icon on a screen or presses a button. In this method, it is assumed that the user's gaze at the time of execution of said actions is directed to a particular location, the icon or button, which is then assumed to be the actual gaze direction. So if a user performs such an action, the viewing direction is determined by a sight line detector. If a plurality of such calibration phases are performed, then the view direction detector is calibrated on the basis of the determined viewing directions and the actually assumed viewing directions.

Ein ähnliches Vorgehen ist weiterhin in der DE 10 2007 013 977 A1 beschrieben, wobei dort das Auslöseereignis zum Erfassen einer Blickrichtung des Benutzers durch eine Blickrichtungserfassungseinrichtung eine Betätigung der Bordausrüstung eines Fahrzeugs durch den Benutzer darstellt.A similar procedure is still in the DE 10 2007 013 977 A1 described therein, where there is the triggering event for detecting a viewing direction of the user by a viewing direction detection means an actuation of the on-board equipment of a vehicle by the user.

Durch derartige Vorgehensweisen soll erreicht werden, dass ein Benutzer nicht merkt, dass gerade ein Kalibrierungsvorgang läuft. Nachteilig bei solchen Verfahren ist jedoch, dass die Kalibrierung dabei an bestimmte durch einen Benutzer ausgeführte Aktionen gebunden ist. Fährt ein Benutzer beispielsweise gerade in einem Kraftfahrzeug und führt dabei längere Zeit keine oder nur selten irgendwelche Bedienhandlungen, wie das Betätigen von Betätigungselementen, aus, so kann sich der Kalibrierungsvorgang sehr lange hinziehen. D. h. es kann unter Umständen sehr lange dauern bis ein Benutzer von der kalibrierten Blickrichtungserfassungseinrichtung profitieren kann, was wiederum den Komfort für den Benutzer stark mindert, insbesondere in Fahrzeugen, in welchen die Funktionsfähigkeit vieler Systeme und Einrichtungen von der Blickrichtungserfassung abhängig sind.Such procedures are intended to ensure that a user does not notice that a calibration process is currently in progress. A disadvantage of such methods, however, is that the calibration is bound to specific actions performed by a user. For example, if a user is currently driving in a motor vehicle and for a long time does not perform any or only rarely any operator actions, such as the actuation of actuating elements, then the calibration process can take a long time. Ie. It may take a very long time for a user to benefit from the calibrated line of sight detection device, which in turn greatly reduces comfort to the user, especially in vehicles where the functionality of many systems and devices is dependent on line of sight detection.

Aufgabe der vorliegenden Erfindung ist es daher, ein Verfahren zum Kalibrieren einer Blickrichtungserfassungseinrichtung für ein Kraftfahrzeug, eine Kalibrierungseinrichtung sowie ein Kraftfahrzeug bereitzustellen, mittels welchen ein möglichst schnelles und für einen Benutzer komfortables Kalibrieren einer Blickrichtungserfassungseinrichtung möglich ist.The object of the present invention is therefore to provide a method for calibrating a viewing direction detection device for a motor vehicle, a calibration device, and a motor vehicle, by means of which a viewing direction detection device which is as fast as possible and comfortable for a user is possible.

Diese Aufgabe wird durch gelöst durch ein Verfahren zum Kalibrieren einer Blickrichtungserfassungseinrichtung für ein Kraftfahrzeug, einer Kalibrierungseinrichtung und einem Kraftfahrzeug gemäß den unabhängigen Ansprüchen. Vorteilhafte Ausgestaltungen der Erfindung finden sich in den abhängigen Ansprüchen.This object is achieved by a method for calibrating a sight line detection device for a motor vehicle, a calibration device and a motor vehicle according to the independent claims. Advantageous embodiments of the invention can be found in the dependent claims.

Beim erfindungsgemäßen Verfahren zum Kalibrieren einer Blickrichtungserfassungseinrichtung für ein Kraftfahrzeug wird ein Kalibrierungsvorgang gestartet. Zeitlich nach dem Starten des Kalibrierungsvorgangs werden automatisch zeitlich aufeinanderfolgend mehrere zumindest zum Teil räumlich voneinander verschiedene Fixierungsbereiche auf einer Anzeigeeinrichtung angezeigt. Für jeweils einen angezeigten Fixierungsbereich wird zumindest eine dem jeweiligen Fixierungsbereich zugeordnete Messung eines Reflexionsverhaltens zumindest eines Auges eines in einem vorbestimmten Erfassungsbereich befindlichen Benutzers während einer jeweiligen Dauer des Anzeigens eines jeweiligen Fixierungsbereichs auf der Anzeigeeinrichtung durchgeführt. Weiterhin wird die Blickrichtungserfassungseinrichtung zumindest anhand der durchgeführten Messungen kalibriert. Des Weiteren wird jedem Fixierungsbereich eine jeweilige Darstellung zugeordnet, wobei beim Anzeigen eines jeweiligen Fixierungsbereichs die diesem zugeordnete Darstellung innerhalb des Fixierungsbereichs dargestellt wird.In the method according to the invention for calibrating a sight line detection device for a motor vehicle, a calibration process is started. After the start of the calibration process, a plurality of at least partially spatially different fixation regions are displayed on a display device in chronological succession. For at least one fixation area that is displayed, at least one measurement of a reflection behavior of at least one eye of a user located in a predetermined detection area, assigned to the respective fixation area, is performed on the display device during a respective duration of displaying a respective fixation area. Furthermore, the sight line detection device is calibrated at least on the basis of the measurements carried out. Furthermore, a respective representation is assigned to each fixation region, the representation associated therewith being displayed within the fixation region when displaying a respective fixation region.

Dadurch ist es möglich, dass ein Benutzer durch die Darstellungen beispielsweise unterhalten oder informiert werden kann, während der Kalibrierungsvorgang durchgeführt wird und dieser somit nicht mehr gelangweilt auf einfarbig leuchtende Fixierungsbereiche starren muss. Gleichzeitig wird durch das automatische zeitlich aufeinanderfolgende Anzeigen der Fixierungsbereiche, d. h. bevorzugt in einer vorbestimmten und festgelegten zeitlichen Reihenfolge und ohne, dass dies durch eine jeweilige Benutzerhandlung ausgelöst wird, ermöglicht, das Kalibrierungsverfahren möglichst schnell durchzuführen. Somit kann auf vorteilhafte Weise das Kalibrierungsverfahren für einen Benutzer unterhaltsam und abwechslungsreich gestaltet werden und gleichzeitig eine möglichst schnelle Kalibrierung erreicht werden, so dass der Benutzer sehr schnell von der kalibrierten Blickrichtungserfassungseinrichtung profitieren kann. Darüber hinaus kann durch dieses Verfahren zusätzlich zur einer für den Benutzer abwechslungsreichen und unterhaltsamen Ausgestaltung des Kalibrierungsvorgangs auch die Erfolgsquote für eine erfolgreiche Kalibrierung erhöht werden. Denn bei den aus dem Stand der Technik bekannten Verfahren, bei denen zum Auslösen von Kalibrierungsphasen Bedienhandlugen und Aktionen vom Benutzer durchgeführt werden müssen, bewegt sich ein Benutzer üblicherweise beim Durchführen dieser Aktionen und verändert dadurch ggf. seinen Körperhaltung und Kopfposition, was die Wahrscheinlichkeit für Fehlmessungen oder sogar das Bewegen des Benutzers aus einem Erfassungsbereich hinaus erhöht. Dadurch, dass gemäß dem erfindungsgemäßen Verfahren während der Durchführung der Messungen keine Bedienhandlungen des Benutzers erforderlich sind, wird somit auch die Wahrscheinlichkeit für eine erfolgreiche Durchführung des Kalibrierungsvorgangs erhöht. Darüber hinaus kann diese Wahrscheinlichkeit zudem noch durch die unterhaltsame Ausgestaltung des Kalibrierungsvorgangs gesteigert werden, denn durch die Anzeige von Darstellungen in den Fixierungsbereichen kann die Aufmerksamkeit und das Interesse eines Benutzers gesteigert werden und so durch die unterhaltsame Ausgestaltung sein Blick auf den jeweiligen Fixierungsbereiche konzentriert gehalten werden. Weiterhin folgt aus der erhöhten Erfolgsquote des Kalibrierungsvorgangs wiederum, dass die Wahrscheinlichkeit dafür, den Kalibrierungsvorgang aufgrund eines Fehlschlags wiederholen zu müssen, sinkt, was wiederum vorteilhafterweise zur Beschleunigung der Kalibrierung beiträgt.As a result, it is possible that a user can be entertained or informed by the representations, for example, while the calibration process is being carried out and the latter therefore no longer has to stare at monochrome fixed fixing areas. At the same time, the automatic time-sequential display of the fixing areas, ie preferably in a predetermined and fixed chronological order and without this being triggered by a respective user action, allows to carry out the calibration process as quickly as possible. Thus, advantageously, the calibration procedure can be made entertaining and varied for a user, while at the same time achieving the fastest possible calibration, so that the user can benefit very quickly from the calibrated sight-direction detection device. In addition, this method can be used to increase the success rate for a successful calibration in addition to a user-friendly and entertaining design of the calibration process. For in the known from the prior art methods in which to trigger calibration phases Bedienhandlugen and actions must be performed by the user, a user usually moves in performing these actions and thereby possibly changed his posture and head position, which is the probability of incorrect measurements or even increasing the user's movement beyond a detection range. Due to the fact that, according to the method according to the invention, no operator actions of the user are required during the execution of the measurements, the probability for a successful execution of the calibration procedure is thus also increased. In addition, this probability can also be increased by the entertaining design of the calibration process, because by the display of representations in the fixation areas the attention and interest of a user can be increased and kept his focus on the respective fixation areas by the entertaining design , Furthermore, the increased success rate of the calibration process again implies that the likelihood of having to repeat the calibration procedure due to a failure will decrease, which in turn advantageously contributes to the acceleration of the calibration.

Unter einer Messung des Reflexionsverhaltens des Auges, und insbesondere auch beider Augen des Benutzers, kann dabei unter anderem auch eine Bildaufnahme, z. B. durch eine Kamera, von zumindest eines Auges oder zumindest beider Augen des Benutzers verstanden werden und/oder die Weiterverarbeitung dieser Bildaufnahme, z. B. durch eine Verarbeitungseinrichtung der Blickrichtungserfassungseinrichtung, z. B. zur Ermittelung der Blickrichtung aus der Bildaufnahme, und dergleichen.Under a measurement of the reflection behavior of the eye, and in particular also the eyes of the user, among other things, an image recording, z. B. by a camera, understood by at least one eye or at least both eyes of the user and / or the further processing of this image capture, z. B. by a processing device of the sight line detection device, for. B. to determine the line of sight from the image capture, and the like.

Bei einer vorteilhaften Ausgestaltung der Erfindung wird eine jeweilige Darstellung auf Basis zumindest eines aus einem Speicher ausgelesenen Werts erzeugt. insbesondere kann dabei der Inhalt der jeweiligen Darstellung durch den mindestens einen ausgelesenen Wert bestimmt sein. Dies stellt vorteilhafterweise vielfältige Ausgestaltungsmöglichkeiten der jeweiligen Darstellungen auf zugleich sehr einfache Weise bereit. Dabei kann es beispielsweise vorgesehen sein, dass ein Darstellungsinhalt in fest vorgegebenen Weise im Speicher abgelegt ist und/oder es kann auch ein zeitlich veränderbarer, sich aktualisierender Wert in dem Speicher abgelegt sein und fortwährend aktualisiert werden, so dass eine jeweilige Darstellung zum Zeitpunkt der Zuordnung der Darstellung zu einem Fixierungsbereich anhand eines aktuellen Werts erzeugt wird und insbesondere diesen aktuelle Wert repräsentiert. Durch diese vielzähligen Variationsmöglichkeiten der jeweiligen Darstellungen wird somit ein für den Benutzer abwechslungsreicher und unterhaltsamer Kalibrierungsvorgang ermöglicht.In an advantageous embodiment of the invention, a respective representation is generated on the basis of at least one value read from a memory. In particular, the content of the respective representation can be determined by the at least one read-out value. This advantageously provides a variety of design options of the respective representations in a very simple way at the same time. In this case, it can be provided, for example, that a presentation content is stored in the memory in a predefined manner and / or a time-variable, updating value can also be stored in the memory and updated continuously, so that a respective representation at the time of the assignment the representation is generated to a fixation region based on a current value and in particular represents this current value. Thus, a variety of possible variations of the respective representations a varied and entertaining calibration process is made possible for the user.

Bei einer weiteren vorteilhaften Ausgestaltung der Erfindung ist eine Mehrzahl an jeweilige Darstellungen bestimmenden Datensätzen in einem Speicher abgelegt, wobei insbesondere beim Zuordnen der Darstellungen zu einem jeweiligen Fixierungsbereich anhand der jeweiligen Datensätze (D1; D2; D3) in einer vorbestimmten Reihenfolge eine jeweilige Darstellung erzeugt und die erzeugten jeweiligen Darstellungen den jeweiligen Fixierungsbereichen in ihrer zeitlichen Abfolge zugeordnet werden. Dadurch wird es auf vorteilhafte Weise ermöglicht, dass mehr darstellungserzeugende Datensätze in einem Speicher abgelegt werden als z. B. für einen durchschnittlichen Kalibrierungsvorgang Fixierungsbereiche angezeigt werden. Dadurch und in Kombination mit der vorbestimmten Reihenfolge kann verhindert werden, dass sich im Laufe des Kalibrierungsvorgangs Darstellungen wiederholen und der Benutzer dadurch gelangweilt wird. Vor allem, falls ein Kalibrierungsvorgang, z. B. aufgrund nur unzureichend genauer Messwerte, nicht erfolgreich sein sollte und daraufhin wiederholt werden muss, stellt dies eine besonders vorteilhafte Möglichkeit dar, einen Benutzer über einen oder mehrere Kalibrierungsvorgänge hinweg zu unterhalten und/oder zu informieren.In a further advantageous embodiment of the invention, a plurality of data sets determining respective representations are stored in a memory, wherein in particular when assigning the representations to a respective fixation region based on the respective data sets (D1; D2; D3) generates a respective representation in a predetermined order and the respective representations are assigned to the respective fixation areas in their time sequence. This advantageously makes it possible for more presentation-generating data records to be stored in a memory than, for. For example, fixation areas may be displayed for an average calibration procedure. Thereby, and in combination with the predetermined order, it is possible to prevent representations from being repeated during the course of the calibration process and thus the user being bored. Especially if a calibration process, for. B. due to insufficiently accurate measurements, should not be successful and then must be repeated, this represents a particularly advantageous way to entertain a user over one or more calibration procedures away and / or to inform.

Bei einer weiteren vorteilhaften Ausgestaltung der Erfindung wird als zumindest eine Darstellung ein aktueller Parameterwert zumindest eines Parameters, insbesondere eines Fahrzeugparameters, dargestellt. Der aktuelle Parameterwert kann dabei beispielsweise ein aktuelles Datum und/oder eine aktuelle Uhrzeit und/oder einen aktuellen Tankfüllstand des Kraftfahrzeugs und/oder eine aktuelle Innenraumtemperatur des Kraftfahrzeugs und/oder eine aktuelle Außentemperatur des Kraftfahrzeugs und/oder einen aktuellen Ladezustand einer Batterie des Kraftfahrzeugs und/oder einen aktuellen Kilometerstand des Kraftfahrzeugs betreffen. Dabei können auch Parameterwerte mehrerer Parameter in einer bestimmten zeitlichen Reihenfolge dargestellt werden oder auch Parameterwerte des selben Parameters, wie z. B. der Uhrzeit, wiederholt mit jeweils dem aktuellen Parameterwert. Darüber hinaus kann auch die Darstellung von Parameterwerten anderer oder weiterer Parameter als die oben genannten vorgesehen sein, insbesondere können dabei jede Art von Parametern, insbesondere mit veränderbaren Parameterwerten, die mittels einer entsprechenden Sensorik oder Erfassungseinrichtungen des Kraftfahrzeugs erfassbar sind, angezeigt werden. Dadurch kann ein Benutzer umfangreich über das Kraftfahrzeug, seinen aktuellen Zustand und/oder seine Umgebung informiert werden, und vor allem auf besonders zeitsparende Weise, da gleichzeitig der Kalibrierungsvorgang durchgeführt wird.In a further advantageous embodiment of the invention, a current parameter value of at least one parameter, in particular a vehicle parameter, is displayed as at least one representation. The current parameter value may be, for example, a current date and / or a current time and / or a current tank level of the motor vehicle and / or a current interior temperature of the motor vehicle and / or a current outside temperature of the motor vehicle and / or a current state of charge of a battery of the motor vehicle and / or relate to a current mileage of the motor vehicle. It is also possible to display parameter values of several parameters in a specific chronological order or also parameter values of the same Parameters, such as As the time, repeated with each of the current parameter value. In addition, the representation of parameter values of other or further parameters than those mentioned above can also be provided, in particular any type of parameters, in particular with variable parameter values, which can be detected by means of a corresponding sensor system or detection devices of the motor vehicle, can be displayed. As a result, a user can be extensively informed about the motor vehicle, its current state and / or its environment, and above all in a particularly time-saving manner, since the calibration process is carried out simultaneously.

Dabei ist es besonderes vorteilhaft, wenn der zumindest eine aktuelle Parameterwert aus dem Speicher ausgelesen wird und die zumindest eine Darstellung auf Basis des ausgelesenen Parameterwerts erzeugt wird. Auf diese Weise kann ein aktueller Parameterwert als Darstellung umgesetzt werden. Insbesondere wird also beim Zuordnen einer jeweiligen Darstellung zu einem Fixierungsbereich zunächst ein aktueller Parameterwert aus dem Speicher ausgelesen, dann für diesen Parameterwert eine Darstellung erzeugt und daraufhin die erzeugte Darstellung in dem zugeordneten Fixierungsbereich angezeigt.It is particularly advantageous if the at least one current parameter value is read from the memory and the at least one representation is generated on the basis of the read-out parameter value. In this way, a current parameter value can be converted as a representation. In particular, when assigning a respective representation to a fixation region, a current parameter value is first read from the memory, then a representation is generated for this parameter value, and then the generated representation is displayed in the assigned fixation region.

Darüber hinaus können die Darstellungen auch andere Inhalte als die Repräsentation von Parameterwerten umfassen, wie beispielsweise auch unveränderliche und in einem Speicher abgelegte Inhalte. Z. B. können durch eine Reihe an Darstellungen die Eigenschaften und Vorteile des Blickrichtungserfassungssystems einem Benutzer vermittelt werden. Auch andere Inhalte bezüglich anderer Fahrzeugsysteme des Kraftfahrzeugs können als eine Reihe von Darstellungen im Speicher abgelegt sein. Darüber hinaus ist es auch denkbar, den Benutzer aus mehreren Darstellungsreihen oder Darstellungsinhalten, welche durch Darstellungsreihen repräsentiert werden sollen, selbst zu wählen. Dazu kann jedem wählbaren Inhalt ein Set an Datensätzen zugeordnet sein, wobei aus einem jeweiligen Datensatz eine jeweilige Reihe an Darstellungen erzeugt werden kann.In addition, the representations may include content other than the representation of parameter values, such as immutable and stored contents. For example, through a series of representations, the features and benefits of the gaze direction sensing system can be conveyed to a user. Other contents relating to other vehicle systems of the motor vehicle can also be stored as a series of representations in the memory. In addition, it is also conceivable to select the user from several display rows or display contents, which are to be represented by display rows, themselves. For this purpose, each selectable content can be assigned a set of data records, wherein a respective set of representations can be generated from a respective data record.

Bei einer weiteren vorteilhaften Ausgestaltung der Erfindung kann eine jeweilige Darstellung ein Bild und/oder einen Text beinhalten. Insbesondere können dabei Bilder Text und Textabschnitte als Datensätze im Speicher abgelegt sein. Durch diese Darstellungselemente lassen sich besonders einfach jede beliebige Art von Darstellungsinhalten auf besonders eingängige und flexible Art einem Benutzer vermitteln. Weiterhin kann es auch vorgesehen sein, in einem jeweiligen Fixierungsbereich mehrere Darstellungen in Form von zeitlich aufeinanderfolgenden Bildsequenzen, wie z. B. einer Animation und/oder eines Videos für die Dauer des Anzeigens dieses jeweiligen Fixierungsbereichs darzustellen, um einem Benutzer auf besonders eingängige und unterhaltsame Weise z. B. bestimmte Funktonalitäten der Blickrichtungserfassungseinrichtung und/oder des Kraftfahrzeugs und/oder von Bedienweisen des Kraftfahrzeugs und/oder bestimmter Kraftfahrzeugkomponenten und/oder Kraftfahrzeugsystemen zu veranschaulichen und zu vermitteln.In a further advantageous embodiment of the invention, a respective representation may include an image and / or a text. In particular, images text and text sections can be stored as data records in the memory. By means of these display elements, it is particularly easy to convey any type of presentation content to a user in a particularly catchy and flexible manner. Furthermore, it can also be provided in a respective fixation area several representations in the form of temporally successive image sequences, such. As an animation and / or video for the duration of displaying this particular fixation area to a user in a particularly catchy and entertaining way z. B. to illustrate and convey certain functionalities of the viewing direction detection device and / or the motor vehicle and / or operating modes of the motor vehicle and / or specific motor vehicle components and / or motor vehicle systems.

Bei einer weiteren vorteilhaften Ausgestaltung wird zum Kalibrieren der Blickrichtungserfassung weiterhin eine Qualität des Kalibrierungsvorgangs ermittelt, und falls die ermittelte Qualität ein vorbestimmtes Kriterium nicht erfüllt, werden zumindest wiederholt automatisch zeitlich aufeinanderfolgend die mehreren zumindest zum Teil räumlich voneinander verschiedenen Fixierungsbereiche auf der Anzeigeeinrichtung angezeigt und für jeweils einen angezeigten Fixierungsbereich wiederholt zumindest eine dem jeweiligen Fixierungsbereich zugeordnete Messung des Reflexionsverhaltens zumindest eines Auges des in einem vorbestimmten Erfassungsbereich befindlichen Benutzers während einer jeweiligen Dauer des Anzeigens eines jeweiligen Fixierungsbereichs auf der Anzeigeeinrichtung durchgeführt. Dabei wird auch bei dem wiederholten Anzeigen der Fixierungsbereiche jedem Fixierungsbereich eine jeweilige Darstellung zugeordnet und beim Anzeigen eines jeweiligen Fixierungsbereichs die diesem zugeordnete Darstellung innerhalb des Fixierungsbereichs dargestellt. Wenn ein Kalibrierungsvorgang somit beispielsweise erfolglos ist und aufgrund mangelnder Kalibrierungsqualität erneut durchgeführt werden muss, so kann der Benutzer vorteilhafterweise auch während dieser Wiederholung unterhalten und informiert werden, was den Komfort für den Benutzer beim Kalibrieren der Blickrichtungserfassungseinrichtung, gerade wenn dieser Vorgang länger dauert, enorm steigert.In a further advantageous embodiment, a quality of the calibration process is further determined for calibrating the viewing direction detection, and if the determined quality does not meet a predetermined criterion, the plurality of at least partially spatially mutually different fixation regions are displayed at least repeatedly automatically in chronological succession on the display device and for each a displayed fixation region is repeated at least one of the respective fixation region associated measurement of the reflection behavior of at least one eye of the user located in a predetermined detection range during a respective duration of displaying a respective fixation region performed on the display device. In this case, each fixation region is associated with a respective representation even when the fixation regions are repeatedly displayed, and the representation assigned thereto is displayed within the fixation region when a respective fixation region is displayed. Thus, for example, if a calibration procedure is unsuccessful and needs to be redone due to lack of calibration quality, the user may advantageously be entertained and informed during that repetition, greatly increasing user comfort in calibrating the line of sight sensing device, especially if this process takes longer ,

Für die Ausgestaltung des vorbestimmten Kriteriums stehen dabei vielzählige Möglichkeiten bereit. Beispielsweise kann es sein, dass beim Durchführen der Messungen des Reflexionsverhaltens der Augen des Benutzer manche Messungen fehlschlagen und das Reflexionsverhalten nicht ermittelt werden kann bzw. nach dem Durchführen einer Messung kein Messwert vorliegt. Das vorbestimmte Kriterium kann dann beispielsweise nicht erfüllt sein, wenn die Anzahl an Fehlmessungen einen vorbestimmten absoluten oder relativen bzw. prozentualen Grenzwert überschreitet.Numerous options are available for the design of the predetermined criterion. For example, it may be that in carrying out the measurements of the reflection behavior of the eyes of the user, some measurements fail and the reflection behavior can not be determined or there is no measured value after performing a measurement. The predetermined criterion may not be met, for example, if the number of incorrect measurements exceeds a predetermined absolute or relative or percentage limit value.

Des Weiteren kann es vorgesehen sein, dass aus eine jeweiligen durchgeführten Messung des Reflexionsverhaltens der Augen eine Blickrichtung des Benutzers ermittelt wird. Diese ermittelte Blickrichtung kann daraufhin mit der theoretischen Blickrichtung des Benutzers, die dadurch gegeben ist, dass angenommen wird, dass der Benutzer während der Durchführung dieser Messung auf den während dieser Dauer angezeigten Fixierungsbereich der Anzeigeeinrichtung geblickt hat, verglichen werden. Anhand dieses Vergleichs kann dann die Blickrichtungserkennungseinrichtung kalibriert werden. Ist jedoch die Abweichung der ermittelten Blickrichtung von der theoretischen Blickrichtung zu groß, oder tritt diese zu große Abweichung für mehr als eine vorgegebenen Anzahl an Messungen auf, so kann auch dies als das Nicht-Erfülltsein des vorbestimmten Kriteriums dienen.Furthermore, it can be provided that a viewing direction of the user is determined from a respective measurement of the reflection behavior of the eyes. This determined viewing direction can then be compared with the theoretical line of sight of the user given that it is assumed that the user during the Performing this measurement has looked at the displayed during this period fixation range of the display device, are compared. Based on this comparison, the viewing direction detection device can then be calibrated. However, if the deviation of the determined viewing direction from the theoretical viewing direction is too great, or if this deviation occurs too large for more than a predetermined number of measurements, then this too can serve as the non-fulfillment of the predetermined criterion.

Des Weiteren kann es auch vorgesehen sein, dass, unabhängig von der Art der Blickrichtungserfassungseinrichtung und dem dieser zugrunde liegenden Konzept zur Blickrichtungserfassung und/oder Blickrichtungsbestimmung, die Überprüfung auf das Erfüllt-Sein des vorbestimmten Kriteriums dadurch erfolgt, dass im Anschluss eines (ersten) Kalibrierungsvorgangs nach einer (erstmaligen) Kalibrierung der Blickrichtungserfassungseinrichtung zumindest ein weiterer Fixierungsbereich angezeigt wird, während der Dauer dieses Anzeigens eine weitere Messung des Reflexionsverhaltens der Augen bestimmt wird und auf Basis der Abweichung des anhand dieser Messung bestimmten Blickrichtung von der durch den Fixierungsbereich festgelegten theoretischen Blickrichtung die Qualität der Kalibrierung bestimmt wird. Ist z. B. diese Abweichung dabei größer als ein vorbestimmter Grenzwert, gilt das vorbestimmte Kriterium als nicht erfüllt. Dann kann ein neuer Kalibrierungsvorgang gestartet und durchgeführt werden.Furthermore, it can also be provided that, irrespective of the type of viewing direction detection device and its underlying concept for sight line detection and / or sight direction determination, checking for the fulfillment of the predetermined criterion is carried out by following a (first) calibration process after a (first) calibration of the viewing direction detection device at least one further fixation area is displayed, during the duration of this display, a further measurement of the reflection behavior of the eyes is determined and on the basis of the deviation of the determined by this measurement viewing direction of the fixed by the fixation area theoretical line of sight quality the calibration is determined. Is z. B. this deviation is greater than a predetermined threshold, the predetermined criterion is considered not met. Then a new calibration process can be started and performed.

Weiterhin kann die Blickrichtungserfassungseinrichtung dabei auch auf einem neuronalen Netz basieren. Zum Kalibrieren dieser Blickrichtungserfassungseinrichtung kann als jeweilige Messung des Reflexionsverhaltens der Augen eine Bildaufnahme nur von den Augen des Benutzers oder von einem Teilbereich des Gesichts einschließlich der Augen des Benutzers oder vom gesamten Gesicht des Benutzers oder auch einem noch größeren Bildaufnahmebereich gemacht werden. Anhand der gemachten Aufnahmen und deren jeweilige Zuordnung zur, wie oben beschriebenen, jeweils bestimmten theoretischen Blickrichtung kann das neuronale Netz der Blickrichtungserfassungseinrichtung trainiert und dadurch kalibriert werden. Dann kann für das Anzeigen eines weiteren Fixierungsbereichs die Blickrichtung des Benutzers anhand der kalibrierten Blickrichtungserfassungseinrichtung und deren Abweichung von der theoretischen Blickrichtung bestimmt werden. Überschreitet die Abweichung einen vorbestimmten Grenzwert, so gilt das vorbestimmte Kriterium als nicht erfüllt.Furthermore, the sight line detection device can also be based on a neural network. For calibrating this line of sight detecting means, as each measurement of the reflection behavior of the eyes, image picking can be made only from the eyes of the user or a part of the face including the eyes of the user or the whole face of the user or even an even larger image picking area. On the basis of the images taken and their respective assignment to, as described above, each determined theoretical line of sight, the neural network of the line of sight detection device can be trained and thereby calibrated. Then, for displaying a further fixation region, the viewing direction of the user can be determined on the basis of the calibrated sight-direction detection device and its deviation from the theoretical viewing direction. If the deviation exceeds a predetermined limit value, the predetermined criterion is deemed not fulfilled.

Bei einer weiteren vorteilhaften Ausgestaltung der Erfindung werden die Schritte des Anzeigens der Fixierungsbereiche und des Durchführens der diesen Fixierungsbereichen zugeordneten Messungen so oft wiederholt werden, bis das vorbestimmte Kriterium erfüllt ist. Dabei kann optional auch der Schritt des Kalibrierens der Blickrichtungserfassungseinrichtung im Zuge jeder Wiederholung dieser Schritte erneut durchgeführt werden. Je nach Wahl des vorbestimmten Kriteriums können entweder bereits vor der Durchführung der Kalibrierung bereits Rückschlüsse auf die Qualität der Kalibrierung gezogen werden, was eine anschließende Kalibrierung obsolet macht, so dass das die Fixierungsbereiche wiederholt angezeigt und die Messungen wiederholt durchgeführt werden können ohne eine jeweils vorhergehende Kalibrierung, oder, wenn die Qualität der Kalibrierung erst nach Abschluss einer Kalibrierung anhand des vorbestimmten Kriteriums festgestellt wird, so wird bevorzugt bei jeder Wiederholung der Schritte des Anzeigens und Messens auch der Schritt der Kalibrierung wiederholt.In a further advantageous embodiment of the invention, the steps of displaying the fixing areas and performing the measurements assigned to these fixing areas are repeated until the predetermined criterion is met. Optionally, the step of calibrating the sight line detection device can also be performed again in the course of each repetition of these steps. Depending on the choice of the predetermined criterion, conclusions can already be drawn about the quality of the calibration even before the calibration is carried out, which makes a subsequent calibration obsolete, so that the fixing areas can be repeatedly displayed and the measurements can be carried out repeatedly without a respective preceding calibration or, if the quality of the calibration is determined only after completion of a calibration based on the predetermined criterion, it is also preferable to repeat the step of calibration each time the steps of displaying and measuring are repeated.

Die Erfindung betrifft weiterhin eine Kalibrierungseinrichtung zum Kalibrieren einer Blickrichtungserfassungseinrichtung. Dabei umfasst die Kalibrierungseinrichtung die Blickrichtungserfassungseinrichtung und eine Anzeigeeinrichtung, wobei die Blickrichtungserfassungseinrichtung Mittel zum Messen eines Reflexionsverhaltens zumindest eines Auges eines Benutzers aufweist. Des Weiteren ist die Kalibrierungseinrichtung dazu ausgelegt, einen Kalibrierungsvorgang zu starten, zeitlich nach dem Starten des Kalibrierungsvorgangs automatisch ein zeitlich aufeinanderfolgendes Anzeigen mehrerer zumindest zum Teil räumlich voneinander verschiedener Fixierungsbereiche durch die Anzeigeeinrichtung zu bewirken, und für jeweils einen angezeigten Fixierungsbereich zumindest eine dem jeweiligen Fixierungsbereich zugeordnete Messung eines Reflexionsverhaltens zumindest eines Auges eines in einem vorbestimmten Erfassungsbereich befindlichen Benutzers während einer jeweiligen Dauer des Anzeigens eines jeweiligen Fixierungsbereichs auf der Anzeigeeinrichtung durchzuführen. Darüber hinaus ist die Kalibrierungseinrichtung dazu ausgelegt, jedem Fixierungsbereich eine jeweilige Darstellung zuzuordnen und weiterhin dazu ausgelegt, beim Anzeigen eines jeweiligen Fixierungsbereichs die diesem zugeordnete Darstellung innerhalb des Fixierungsbereichs auf der Anzeigeeinrichtung darzustellen.The invention further relates to a calibration device for calibrating a sight line detection device. In this case, the calibration device comprises the sight line detection device and a display device, wherein the sight line detection device has means for measuring a reflection behavior of at least one eye of a user. Furthermore, the calibration device is designed to start a calibration process, to effect temporally successive display of several at least partially spatially mutually different fixation regions by the display device after the start of the calibration process, and for at least one displayed fixation region at least one associated with the respective fixation region Measure a reflection behavior of at least one eye of a user located in a predetermined detection area during a respective duration of displaying a respective fixing area on the display device. In addition, the calibration device is designed to associate a respective representation with each fixation region and furthermore designed to display the representation associated therewith within the fixation region on the display device when displaying a respective fixation region.

Des Weiteren betrifft die Erfindung ein Kraftfahrzeug mit einer erfindungsgemäßen Kalibrierungseinrichtung.Furthermore, the invention relates to a motor vehicle with a calibration device according to the invention.

Die für das erfindungsgemäße Verfahren beschriebenen Ausgestaltungen, Merkmale und deren Vorteile gelten in gleicher Weise, soweit anwendbar, für die erfindungsgemäße Kalibrierungseinrichtung sowie für das erfindungsgemäße Kraftfahrzeug. Die für das erfindungsgemäße Verfahren und seine Ausgestaltungen genannten verfahrensgemäßen Merkmale ermöglichen dabei die Weiterbildung der erfindungsgemäßen Kalibrierungseinrichtung und des erfindungsgemäßen Kraftfahrzeugs durch weitere gegenständliche Merkmale.The embodiments, features and their advantages described for the method according to the invention apply in the same way, as far as applicable, to the calibration device according to the invention and to the motor vehicle according to the invention. The process according to the invention and its embodiments mentioned process Features allow the development of the calibration device according to the invention and the motor vehicle according to the invention by further representational features.

Weitere Vorteile, Merkmale und Einzelheiten der Erfindung ergeben sich aus den Ansprüchen, der nachfolgenden Beschreibung bevorzugter Ausführungsformen sowie anhand der Zeichnungen. Dabei zeigt:Further advantages, features and details of the invention will become apparent from the claims, the following description of preferred embodiments and from the drawings. Showing:

1 eine schematische Darstellung eines Kraftfahrzeugs mit einer Kalibrierungseinrichtung gemäß einem Ausführungsbeispiel der Erfindung; und 1 a schematic representation of a motor vehicle with a calibration device according to an embodiment of the invention; and

2 eine schematische Darstellung eines Ablaufdiagramms zur Veranschaulichung der Verfahrensschritte zur Kalibrierung einer Blickrichtungserfassungseinrichtung gemäß einem Ausführungsbeispiel der Erfindung. 2 a schematic representation of a flowchart for illustrating the method steps for calibrating a sight line detection device according to an embodiment of the invention.

1 zeigt eine schematische Darstellung eines Kraftfahrzeugs 10 mit einer Kalibrierungseinrichtung 12 gemäß einem Ausführungsbeispiel der Erfindung. Die Kalibrierungseinrichtung 12 weist dabei eine. Blickrichtungserfassungseinrichtung 14, eine Anzeigeeinrichtung 16, einen Speicher 17 und eine Steuereinrichtung 18 auf. Das Kraftfahrzeug 10 weist hier exemplarisch weiterhin eine Mehrzahl an Erfassungsmitteln S1, S2, S3 und S4 und/oder Sensoren auf, welche gleichzeitig auch als Teil der Kalibrierungseinrichtung 12 gesehen werden können oder zumindest mit dieser derart in Verbindung stehen, dass von den Erfassungsmitteln S1, S2, S3 und S4 und/oder Sensoren erfasste Größen der Kalibrierungseinrichtung 12 zugänglich sind. Die Blickrichtungserfassungseinrichtung 14 weist dabei Mittel zum Messen eines Reflexionsverhaltens zumindest eines Auges, insbesondere beider Augen, eines Benutzers auf. Diese Mittel können dabei beispielsweise als eine oder mehrere Lichtquellen zum Beleuchten der Augen des Benutzers, insbesondere mittels Licht im sichtbaren Wellenlängenbereich und/oder auch nur im infraroten Wellenlängenbereich ausgebildet sein und/oder als eine oder mehrere Bildaufnahmeeinrichtungen, wie. z. B. Kameras, zum Aufnehmen von Bildern eines vorbestimmten Erfassungsbereichs. Die Mittel können beispielsweise auch als eine Verarbeitungseinrichtung ausgebildet sein, die dazu ausgelegt ist, aus aufgenommenen Bildern das Reflexionsverhalten der Augen und daraus die Blickrichtung zu bestimmen. Weiterhin kann die Verarbeitungseinrichtung auch bestimmen, ob sich ein Benutzer bzw. zumindest dessen Augen und/oder Kopf im vorbestimmten Erfassungsbereich befindet. 1 shows a schematic representation of a motor vehicle 10 with a calibration device 12 according to an embodiment of the invention. The calibration device 12 has one. Sight detector 14 , a display device 16 , a store 17 and a controller 18 on. The car 10 Here, by way of example, a plurality of detection means S1, S2, S3 and S4 and / or sensors which at the same time also form part of the calibration device 12 can be seen, or are at least associated with it in such a way that the variables of the calibration device detected by the detection means S1, S2, S3 and S4 and / or sensors 12 are accessible. The sight line detection device 14 has means for measuring a reflection behavior of at least one eye, in particular of both eyes, of a user. These means may be formed, for example, as one or more light sources for illuminating the eyes of the user, in particular by means of light in the visible wavelength range and / or only in the infrared wavelength range and / or as one or more image recording devices, such as. z. As cameras, for taking pictures of a predetermined detection area. By way of example, the means may also be designed as a processing device which is designed to determine the reflection behavior of the eyes and from this the viewing direction from recorded images. Furthermore, the processing device can also determine whether a user or at least his eyes and / or head is in the predetermined detection range.

Zur Inbetriebnahme der Blickrichtungserfassungseinrichtung 14 ist eine einmalige Kalibrierung des Systems auf die Augen eines bestimmten Benutzers erforderlich. Zur Kalibrierung ist es dazu erforderlich, dass der Blick des Benutzers dabei sequenziell auf einer Reihe von Kalibrierungsbereichen ruht. Dazu werden auf der Anzeigeeinrichtung 16 nach dem Starten des Kalibrierungsvorgangs automatisch zeitlich aufeinanderfolgend Fixierungsbereiche 20 für eine vorgegebene Zeitdauer angezeigt. In dieser schematischen Darstellung sind exemplarisch fünf Fixierungsbereiche 20 der Anzeigeeinrichtung 16 eingezeichnet. Diese Darstellung ist hierbei jedoch nicht so zu verstehen, dass diese Fixierungsbereiche 20 gleichzeitig angezeigt werden, sondern so, dass für die vorgegebene Zeitdauer jeweils nur ein einziger Fixierungsbereich 20 angezeigt wird. Die zeitlich aufeinanderfolgend angezeigten Fixierungsbereiche 20 sind dabei zumindest zum Teil räumlich verschieden. Dies gilt insbesondere für jeweils zwei zeitlich aufeinanderfolgend angezeigte Fixierungsbereiche 20, wobei zwei nicht zeitlich aufeinanderfolgende Fixierungsbereiche 20 am selben Ort der Anzeigeeinrichtung 16 angezeigt werden können. Diesen Fixierungsbereichen 20 sind jeweils Darstellungen zugeordnet, insbesondere in der Weise, dass eine einem Fixierungsbereich 20 zugeordnete Darstellung innerhalb des Fixierungsbereichs 20 für die Dauer der Anzeige des Fixierungsbereichs 20 dargestellt wird. Diese Darstellungen werden dabei jeweils auf Basis zumindest eines aus dem Speicher 17 ausgelesenen Werts P1, P2, P3, ..., D1, D2, D3, ... erzeugt. Die Darstellungen können dabei Bilder, Text, Textabschnitte, Animationen, Videos und dergleichen umfassen. Diese können beispielsweise als jeweilige Datensätze D1, D2, D3, ..., im Speicher 17 abgelegt sein. Soll nun eine Darstellung in einem Fixierungsbereich 20 angezeigt werden, so wird eine Darstellung mit durch einen entsprechenden Datensatz D1, D2, D3, ... definierten Inhalt erzeugt und auf der Anzeigeeinrichtung 16 angezeigt. Beispielsweise können dadurch während des Kalibrierungsvorgangs dem Benutzer die Vorteile des Blickrichtungserfassungseinrichtung 14, insbesondere des Eye Tracking Systems in kleinen zeitlich aufeinanderfolgenden Bild- und Textabschnitten vermittelt werden. Auch andere Inhalte können dabei als Datensätze vorliegen und einem Benutzer durch eine entsprechende Reihe an Darstellungen vermittelt werden, wodurch der Benutzer somit während des Kalibrierungsvorgangs informiert und unterhalten werden kann.To start up the sight line detection device 14 A one-time calibration of the system to the eyes of a specific user is required. Calibration requires the user's gaze to rest sequentially on a series of calibration areas. These are on the display device 16 automatically after the start of the calibration process, temporally successive fixing areas 20 displayed for a given period of time. In this schematic illustration are exemplary five fixing areas 20 the display device 16 located. However, this representation is not to be understood that these fixation areas 20 be displayed simultaneously, but so that for the given period of time in each case only a single fixation area 20 is shown. The temporally successive displayed fixation areas 20 are at least partially spatially different. This applies in particular to two each time sequentially displayed fixation areas 20 wherein two non-temporally successive fixation areas 20 at the same location of the display device 16 can be displayed. These fixation areas 20 representations are associated with each, in particular in such a way that a fixation area 20 associated representation within the fixation area 20 for the duration of the display of the fixation area 20 is pictured. These representations are each based on at least one of the memory 17 read out value P1, P2, P3, ..., D1, D2, D3, ... generated. The representations may include images, text, sections of text, animations, videos and the like. These can, for example, as respective data sets D1, D2, D3, ..., in the memory 17 be filed. Should now be a representation in a fixation area 20 are displayed, a representation is generated by a corresponding data set D1, D2, D3, ... content and on the display device 16 displayed. For example, during the calibration process, the user can benefit from the sight line detection device 14 , in particular the eye tracking system in small temporally successive image and text sections are taught. Other contents may also exist as data records and be communicated to a user through a corresponding series of representations, whereby the user can thus be informed and maintained during the calibration process.

Weiterhin kann es auch vorgesehen sein, als Darstellung einen Parameterwert P1, P2, P3, ... zu repräsentieren. Dazu können mehrere Parameterwerte P1, P2, P3, ... für jeweilige Parameter im Speicher 17 abgelegt sein. Parameter können dabei beispielsweise das Datum, die Uhrzeit, der Tankfüllstand des Kraftfahrzeugs 10, die Innenraumtemperatur des Kraftfahrzeugs 10, die Außentemperatur des Kraftfahrzeugs 10, der Ladezustand einer Batterie des Kraftfahrzeugs 10 und/oder der Kilometerstand des Kraftfahrzeugs 10, der Ölstand des Kraftfahrzeugs 10, usw. sein, wobei die Parameterwerte P1, P2, P3, ... die aktuellen Werte dieser genannte Parameter sind. Diese Parameterwerte P1, P2, P3, ... können dabei beispielsweise durch jeweilige Erfassungseinrichtungen erfasst werden, insbesondere fortlaufend kontinuierlich oder periodisch. Sobald ein neuer aktueller Parameterwert P1, P2, P3, ... durch ein Erfassungseinrichtung ermittelt wurde, kann dieser aktuelle Parameterwert im Speicher 17 abgelegt werden, und beispielsweise einen älteren dort abgespeicherten Parameterwert P1, P2, P3, ... des selben Parameters ersetzen, so dass im Speicher 17 immer die aktuellsten Parameterwerte P1, P2, P3, ... der entsprechenden Parameter vorliegen.Furthermore, it can also be provided to represent a parameter value P1, P2, P3,... As representation. For this purpose, several parameter values P1, P2, P3, ... for respective parameters in the memory 17 be filed. Parameters can be, for example, the date, the time, the tank level of the motor vehicle 10 , the interior temperature of the motor vehicle 10 , the outside temperature of the motor vehicle 10 , the charging state of a battery of the motor vehicle 10 and / or the mileage of the motor vehicle 10 , the oil level of the motor vehicle 10 , etc., where the parameter values P1, P2, P3, ... are the current values of these parameters. These parameter values P1, P2, P3,... Can be detected by respective detection devices, in particular continuously or continuously. As soon as a new current parameter value P1, P2, P3,... Has been determined by a detection device, this current parameter value can be stored in memory 17 are stored, and replace, for example, an older stored there parameter value P1, P2, P3, ... of the same parameter, so that in the memory 17 always the most recent parameter values P1, P2, P3, ... of the corresponding parameters.

Die Steuereinrichtung soll hierbei dazu dienen, die einzelnen Abläufe des Kalibrierungsverfahrens zu koordinieren und zu steuern, also beispielsweise das Starten des Kalibrierungsvorgangs, das Abspeichern von durch die Erfassungseinrichtungen erfassten Parameterwerten, das Auslesen von Werten aus dem Speicher, das Erzeugen der Darstellungen anhand der ausgelesenen Werte, das Anzeigen der Darstellungen auf der Anzeigeeinrichtung in den Fixierungsbereichen, die Durchführung der Messungen, die Kalibrierung der Blickrichtungserfassungseinrichtung anhand der Messwerte und die Überprüfung auf das vorbestimmte Qualitätskriterium zu bewirken und eine Wiederholung des Kalibrierungsvorgangs zu veranlassen gemäß dem Nicht-Erfülltsein des vorbestimmten Kriteriums, usw., und insbesondere diese Vorgänge in ihrer vorbestimmten zeitlichen Abfolge zu bewirken. Hierbei ist in 1 exemplarisch eine zentrale Steuereinrichtung dargestellt, aber es kann auch vorgesehen sein, dass zur Durchführung der obengenannten Aufgaben auch mehrere Steuereinrichtungen vorgesehen sind und/oder jede Komponenten wie die Blickrichtungserfassungseinrichtung, Anzeigeeinrichtung, usw. ihre eigenen Steuereinrichtungen aufweisen, die interagieren können.In this case, the control device is intended to coordinate and control the individual processes of the calibration process, for example starting the calibration process, storing parameter values acquired by the detection devices, reading out values from the memory, generating the representations on the basis of the read-out values to effect displaying the representations on the display means in the fixation areas, performing the measurements, calibrating the sight line detection means based on the measurements, and checking for the predetermined quality criterion and causing the calibration process to repeat in accordance with the non-compliance with the predetermined criterion, etc ., And in particular to effect these operations in their predetermined time sequence. Here is in 1 By way of example, a central control device is shown, but it can also be provided that a plurality of control devices are provided for carrying out the abovementioned tasks and / or each component such as the sight line detection device, display device, etc. have their own control devices that can interact.

2 zeigt eine schematische Darstellung eines Ablaufdiagramms zur Veranschaulichung der Verfahrensschritte zur Kalibrierung einer Blickrichtungserfassungseinrichtung 14 gemäß einem Ausführungsbeispiel der Erfindung. Hierbei wird in Schritt S10 der Kalibrierungsvorgang gestartet. Das Starten kann dabei durch eine Bedienhandlung eines Benutzers erfolgen, wie beispielsweise das Betätigen einer Betätigungseinrichtung zum Starten des Kalibrierungsvorgangs. Daraufhin wird automatisch in einer vordefinierten zeitlichen Reihenfolge das Anzeigen von Fixierungsbereichen 20a, 20b, 20c auf der Anzeigeeinrichtung 16 bewirkt, wobei innerhalb eines jeweiligen Fixierungsbereichs 20a, 20b, 20c eine diesem Fixierungsbereich 20a, 20b, 20c zugeordnete Darstellung dargestellt wird. Dabei wird der jeweilige Fixierungsbereich 20a, 20b, 20c und auch darin dargestellte Darstellungen nur in einem räumlich begrenzten Teilbereich der Anzeigeeinrichtung 16 dargestellt. 2 shows a schematic representation of a flowchart for illustrating the method steps for calibrating a sight line detection device 14 according to an embodiment of the invention. Here, in step S10, the calibration process is started. The starting can be done by an operator action of a user, such as operating an actuator to start the calibration process. This will automatically display fixation areas in a predefined order of time 20a . 20b . 20c on the display device 16 causes, wherein within a respective fixation area 20a . 20b . 20c a fixation area 20a . 20b . 20c assigned representation is displayed. In this case, the respective fixation area 20a . 20b . 20c and representations shown therein only in a spatially limited portion of the display device 16 shown.

Zum Anzeigen eines ersten Fixierungsbereichs 20a wird dabei zunächst in Schritt S12a zumindest ein erster Wert aus dem Speicher 17 ausgelesen. Beispielsweise kann dabei als zumindest erster Wert ein aktueller Parameterwert P1, P2, P3 und/oder ein ganzer Datensatz D1, D2, D3, der einen Darstellungsinhalt definiert, ausgelesen werden. Weiterhin wird in diesem Schritt S12a auf Basis des ausgelesenen Werts bzw. der ausgelesenen Werte eine dem ersten Fixierungsbereich 20a zugeordnete Darstellung erzeugt und in Schritt S14a auf der Anzeigeeinrichtung 16 innerhalb des Fixierungsbereichs 20a für eine erste vorgegebenen Zeitdauer angezeigt. Insbesondere können die Parameterwerte P1, P2, P3, ... dabei z. B. als Zahlenwerte und/oder auch in graphischer oder symbolhafter Darstellung ausgegeben werden und Datensätze D1, D2, D3 ebenfalls in graphischer Form, z. B. als Bild und/oder Text und/oder Textabschnitt und/oder Video, usw.To display a first fixation area 20a At first, in step S12a, at least a first value is output from the memory 17 read. For example, an actual parameter value P1, P2, P3 and / or an entire data record D1, D2, D3, which defines a presentation content, can be read out as the at least first value. Further, in this step S12a, based on the read-out value and the read-out value, respectively, the first fixation area 20a associated representation generated and in step S14a on the display device 16 within the fixation area 20a displayed for a first predetermined period of time. In particular, the parameter values P1, P2, P3,... B. as numerical values and / or in graphical or symbolic representation and records D1, D2, D3 also in graphical form, eg. B. as image and / or text and / or text and / or video, etc.

Während dieser ersten vorgegebenen Zeitdauer wird in Schritt 16a eine Messung des Reflexionsverhaltens der Augen des Benutzers durchgeführt. Nach Ablauf der ersten vorgegebenen Zeitdauer wird in Schritt S12b zumindest ein zweiter Wert aus dem Speicher 17 ausgelesen und auf Basis dieses zumindest einen zweiten Werts eine zweite Darstellung erzeugt. Diese wird in Schritt S14b innerhalb des zweiten Fixierungsbereichs 20b auf der Anzeigeeinrichtung 16 für eine zweite vorbestimmte Zeitdauer dargestellt. Während dieser zweiten Zeitdauer wird in Schritt S16b eine zweite Messung des Reflexionsverhalten der Augen des Benutzers durchgeführt. Auf diese Weise wird nun für eine vorgegebene Mehrzahl an Fixierungsbereichen 20 verfahren, insbesondere bis zur Anzeige eines letzten Fixierungsbereichs 20c. Auch hierfür wird in Schritt S12c mindestens ein Wert aus dem Speicher 17 ausgelesen, auf Basis dieses Werts eine Darstellung erzeugt und diese in Schritt S14 für eine vorbestimmte Zeitdauer auf der Anzeigeeinrichtung 16 innerhalb des ihr zugeordneten Fixierungsbereichs 20c angezeigt, wobei wiederum während dieser Zeitdauer in Schritt S16c eine Messung des Reflexionsverhalten der Augen durchgeführt wird. Auf Basis der durchgeführten Messungen, aus welchen sich eine Blickrichtung bestimmten lässt, sowie in Kombination mit den den jeweiligen Messungen zugeordneten Fixierungsbereichen 20a, 20b, 20c, aus welchen sich eine theoretische Blickrichtung ableiten lässt, kann nun in Schritt S18 die Blickrichtungserfassungseinrichtung 14 kalibriert werden. Optional kann in Schritt S20 überprüft werden, ob die Kalibrierung ein vorbestimmtes Qualitätskriterium erfüllt. Falls dem so ist, ist damit der Kalibrierungsvorgang in Schritt S22 beendet. Falls dem nicht so ist, was beispielsweise im Falle zu vieler zu schlechter oder ungenauer Messungen der Fall sein kann, wird der Kalibrierungsvorgang wiederholt. Insbesondere werden dazu wiederum mehrere Fixierungsbereiche 20a, 20b, 20c mit jeweils zugeordneten und innerhalb der jeweiligen Fixierungsbereich dargestellten Darstellungen angezeigt und während der jeweiligen Dauern des Anzeigens zumindest eine jeweilige Messung durchgeführt, usw. Dabei kann es vorgesehen sein, dass sich die Inhalte der im ersten Durchgang dargestellten Darstellungen im zweiten und ggf. weiteren Durchgängen nicht wiederholen, um für mehr Abwechslung für einen Benutzer zu sorgen. Beispielsweise kann dazu im Speicher 17 eine Anzahl an Datensätzen D1, D2, D3 und/oder Parameterwerten P1, P2, P3 für eine Anzahl an Parametern abgelegt sein, die um ein Vielfaches größer ist als die für einen Kalibrierungsdurchgang vorgegebene Anzahl an Fixierungsbereichen 20a, 20b, 20c.During this first predetermined period of time will be in step 16a performed a measurement of the reflection behavior of the eyes of the user. After the first predetermined period of time has elapsed, at least one second value is output from the memory in step S12b 17 is read out and generates a second representation on the basis of this at least one second value. This becomes within the second fixation area in step S14b 20b on the display device 16 for a second predetermined period of time. During this second period, a second measurement of the reflection behavior of the user's eyes is performed in step S16b. In this way, now for a given plurality of fixation areas 20 method, in particular until the display of a last fixing area 20c , Also for this purpose, at least one value is output from the memory in step S12c 17 is read out, based on this value generates a representation and this in step S14 for a predetermined period of time on the display device 16 within its assigned fixation area 20c is displayed, again during this period in step S16c, a measurement of the reflection behavior of the eyes is performed. On the basis of the measurements made, from which a viewing direction can be determined, as well as in combination with the fixing areas assigned to the respective measurements 20a . 20b . 20c from which a theoretical viewing direction can be derived, the viewing direction detection device can now in step S18 14 be calibrated. Optionally, it can be checked in step S20 whether the calibration fulfills a predetermined quality criterion. If so, the calibration process is completed in step S22. If this is not the case, for example, in the case of too many too bad or inaccurate measurements of the case can be, the calibration process is repeated. In particular, in turn, multiple fixation areas 20a . 20b . 20c displayed with each assigned and displayed within the respective fixation area representations and performed during the respective durations of the display at least one respective measurement, etc. It may be provided that the contents of the representations shown in the first passage in the second and possibly further passages not repeat to provide more variety for a user. For example, this can be done in memory 17 a number of data records D1, D2, D3 and / or parameter values P1, P2, P3 may be stored for a number of parameters which is many times greater than the number of fixing areas predetermined for a calibration pass 20a . 20b . 20c ,

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

WO 2012/052061 A1 [0003]
DE 102007013977 A1 [0004]

Claims

Method for calibrating a sight line detection device ( 14 ) for a motor vehicle ( 10 ), comprising the steps of: a) starting a calibration process (S10); b) temporally after the start of the calibration process (S10) automatic time-sequential display (S12a, S12b, S12c) of a plurality of at least partially spatially different fixation regions (S10) 20 ; 20a ; 20b ; 20c ) on a display device ( 16 ); c) For each displayed fixation area ( 20 ; 20a ; 20b ; 20c ) (S16a; S16b; S16c) at least one of the respective fixing areas (S16c). 20 ; 20a ; 20b ; 20c ) measurement of a reflection behavior of at least one eye of a user located in a predetermined detection area during a respective duration of the display (S14a; S14b; S14c) of a respective fixation area ( 20 ; 20a ; 20b ; 20c ) on the display device ( 16 ); d) calibrating (S18) the sight line detection device ( 14 ) at least based on the measurements made; characterized in that each fixation area ( 20 ; 20a ; 20b ; 20c S12b, S12c), wherein in step b) in displaying (S14a; S14b; S14c) of a respective fixing area (S12a) 20 ; 20a ; 20b ; 20c ) the representation associated therewith within the fixing area ( 20 ; 20a ; 20b ; 20c ) is pictured.

A method according to claim 1, characterized in that a respective representation based on at least one of a memory ( 17 ) (P1, P2, P3, D1, D2, D3) is generated (S12a, S12b, S12c).

Method according to claim 2, characterized in that a plurality of data records (D1, D2, D3) determining respective representations are stored in the memory (FIG. 17 ), in particular when assigning the representations to a respective fixation area ( 20 ; 20a ; 20b ; 20c ) generates a respective representation in a predetermined sequence on the basis of the respective data sets (D1, D2; D3) and generates the respective representations produced in the respective fixation regions (FIG. 20 ; 20a ; 20b ; 20c ) are assigned in their time sequence.

Method according to one of the preceding claims, characterized in that at least one current parameter value (P1, P2, P3) of at least one parameter, in particular of a vehicle parameter, is displayed as at least one representation.

Method according to Claim 4, characterized in that the at least one current parameter value (P1; P2; P3) is output from the memory ( 17 ) is read out (S12a, S12b, S12c) and the at least one representation is generated on the basis of the read-out parameter value (P1, P2, P3) (S12a, S12b, S12c).

Method according to one of claims 4 or 5, characterized in that the current parameter value (P1, P2, P3) is a current date and / or a current time and / or a current tank level of the motor vehicle ( 10 ) and / or a current interior temperature of the motor vehicle ( 10 ) and / or a current outside temperature of the motor vehicle ( 10 ) and / or a current state of charge of a battery of the motor vehicle ( 10 ) and / or a current mileage of the motor vehicle ( 10 ).

Method according to one of the preceding claims, characterized in that a respective representation includes an image and / or a text.

Method according to one of the preceding claims, characterized by the further step: e) determining a quality of the calibration process (S20), and if the determined quality does not satisfy a predetermined criterion, repeating at least steps b) and c).

A method according to claim 8, characterized in that at least steps b) and c) are repeated until the predetermined criterion is met.

Calibration device ( 12 ) for calibrating a sight line detection device ( 14 ), the calibration device ( 12 ) the sight line detection device ( 14 ) and a display device ( 16 ), wherein the sight line detection device ( 14 ) Comprises means for measuring a reflection behavior of at least one eye of a user, wherein the calibration device ( 12 ) is designed to: - start a calibration process, - temporally after the start of the calibration procedure, a time-sequential display of several at least partially spatially different fixation regions ( 20 ; 20a ; 20b ; 20c ) by the display device ( 16 ), and - for each indicated fixation area ( 20 ; 20a ; 20b ; 20c ) at least one of the respective fixation area ( 20 ; 20a ; 20b ; 20c ) measuring a reflection behavior of at least one eye of a user located in a predetermined detection area during a respective duration of displaying a respective one Fixation area ( 20 ; 20a ; 20b ; 20c ) on the display device ( 16 ) perform; characterized in that the calibration device ( 12 ) is adapted to each fixation area ( 20 ; 20a ; 20b ; 20c ) to associate a respective representation and is further designed, when displaying a respective fixation region, the representation associated therewith within the fixation region (FIG. 20 ; 20a ; 20b ; 20c ) on the display device ( 16 ).

Motor vehicle ( 10 ) with a calibration device ( 12 ) according to claim 10.