ES2945789T3 - Method and device for calibrating an oculometer - Google Patents
Method and device for calibrating an oculometer Download PDFInfo
- Publication number
- ES2945789T3 ES2945789T3 ES19204663T ES19204663T ES2945789T3 ES 2945789 T3 ES2945789 T3 ES 2945789T3 ES 19204663 T ES19204663 T ES 19204663T ES 19204663 T ES19204663 T ES 19204663T ES 2945789 T3 ES2945789 T3 ES 2945789T3
- Authority
- ES
- Spain
- Prior art keywords
- eye
- user
- acquired
- data
- gaze direction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 65
- 238000006073 displacement reaction Methods 0.000 claims description 33
- 238000004590 computer program Methods 0.000 claims description 14
- 238000012545 processing Methods 0.000 claims description 13
- 230000003287 optical effect Effects 0.000 claims description 2
- 210000001747 pupil Anatomy 0.000 description 7
- 208000024875 Infantile dystonia-parkinsonism Diseases 0.000 description 4
- 208000001543 infantile parkinsonism-dystonia Diseases 0.000 description 4
- 238000004891 communication Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/19—Sensors therefor
Abstract
Se divulga un método para calibrar un dispositivo de seguimiento ocular para adaptarse a un usuario del dispositivo de seguimiento ocular (600), en el que se calcula una configuración de calibración del dispositivo de seguimiento ocular (600) asociado con un usuario en función de los datos oculares adquiridos de el usuario cuando mira un conjunto de puntos de referencia (1). El método comprende mostrar (202) un punto de referencia del conjunto al usuario; adquirir (204), por medio de al menos una cámara (10) del dispositivo de seguimiento ocular (600), datos oculares de al menos uno de los ojos del usuario cuando mira al punto de referencia; comparar (206) los datos oculares adquiridos con conjuntos de datos oculares almacenados relacionados con el punto de referencia, en el que cada uno de los conjuntos de datos oculares almacenados está asociado con un ajuste de calibración del dispositivo de seguimiento ocular; y si los datos oculares adquiridos coinciden con uno de los conjuntos de datos oculares almacenados, (Traducción automática con Google Translate, sin valor legal)A method for calibrating an eye tracking device to fit a user of the eye tracking device (600) is disclosed, wherein a calibration setting of the eye tracking device (600) associated with a user is calculated based on the ocular data acquired from the user when looking at a set of landmarks (1). The method comprises displaying (202) a reference point of the assembly to the user; acquiring (204), by means of at least one camera (10) of the eye tracking device (600), ocular data of at least one of the user's eyes when looking at the reference point; comparing (206) the acquired eye data with stored eye data sets related to the reference point, wherein each of the stored eye data sets is associated with a calibration setting of the eye tracking device; and if the acquired eye data matches one of the stored eye data sets, (Automatic translation with Google Translate, no legal value)
Description
DESCRIPCIÓNDESCRIPTION
Método y dispositivo para calibrar un oculómetroMethod and device for calibrating an oculometer
Campo técnicotechnical field
La presente descripción se refiere, en general, a métodos, sistemas y dispositivos para calibrar un dispositivo de seguimiento ocular para adaptarse a un usuario individual.This description relates generally to methods, systems, and devices for calibrating an eye tracking device to suit an individual user.
AntecedentesBackground
En la técnica, se conocen varios sistemas diferentes de seguimiento ocular. Tales sistemas pueden emplearse, por ejemplo, para permitir que un usuario indique una ubicación en una pantalla de ordenador mirando hacia ese punto. El sistema de seguimiento ocular puede capturar imágenes de la cara del usuario y, a continuación, emplear un procesamiento de imágenes para extraer características clave de la cara del usuario, tal como el centro de la pupila y destellos de iluminadores que iluminan la cara del usuario. Las características extraídas pueden emplearse después para determinar dónde está mirando el usuario en el sistema de representación.A number of different eye tracking systems are known in the art. Such systems can be used, for example, to allow a user to indicate a location on a computer screen by looking at that point. The eye tracking system can capture images of the user's face and then use image processing to extract key features of the user's face, such as the center of the pupil and flashes from illuminators that illuminate the user's face. . The extracted features can then be used to determine where the user is looking in the rendering system.
Para que un usuario tenga una experiencia de seguimiento ocular exacta y precisa, el usuario necesita calibrar el oculómetro. Esto se hace normalmente mirando un conjunto dado de puntos de referencia durante un cierto período de tiempo y adquiriendo datos oculares del usuario relacionados con la dirección de mirada del usuario. Una vez que el usuario ha mirado el conjunto de puntos de referencia, se establece un perfil de calibración, definiendo las características de al menos uno de los ojos de la persona. Este perfil de calibración puede contener datos sobre las características del o los ojos del usuario, por ejemplo, la distancia interocular (IOD), la distancia interpupilar (IPD), el tamaño de la pupila, las variaciones del tamaño de la pupila, el contraste de pupila brillante, el contraste de pupila oscura, radio corneal y similares. Esta información puede ser preexistente en el perfil de calibración o puede incorporarse al perfil de calibración en el momento del análisis. Alternativamente, los parámetros predeterminados pueden almacenarse en el oculómetro para que sirvan como punto de partida inicial.In order for a user to have an accurate and precise eye tracking experience, the user needs to calibrate the oculometer. This is typically done by looking at a given set of landmarks for a certain period of time and acquiring eye data from the user related to the user's gaze direction. Once the user has looked at the set of reference points, a calibration profile is established, defining the characteristics of at least one of the person's eyes. This calibration profile may contain data about the characteristics of the user's eye(s), for example, interocular distance (IOD), interpupillary distance (IPD), pupil size, pupil size variations, contrast bright pupil, dark pupil contrast, corneal radius and the like. This information may be pre-existing in the calibration profile or may be incorporated into the calibration profile at the time of analysis. Alternatively, the default settings can be stored in the oculometer to serve as an initial starting point.
El proceso de calibración puede llevar mucho tiempo y ser tedioso. Reducir la cantidad de tiempo dedicado a este proceso es clave para una buena experiencia de seguimiento ocular. En consecuencia, existe una necesidad de mejora cuando se trata de facilitar la calibración en dispositivos de seguimiento ocular.The calibration process can be time consuming and tedious. Reducing the amount of time spent on this process is key to a good eye tracking experience. Consequently, there is a need for improvement when it comes to facilitating calibration in eye tracking devices.
El documento de patente US-2016/0029883 A1 es un ejemplo de dispositivo de seguimiento de mirada que usa una fecha de calibración anterior cuando hay una coincidencia entre los conjuntos de mediciones de calibración actuales y anteriores. Puede encontrarse otro ejemplo de cómo realizar una calibración de un dispositivo de seguimiento de mirada en el documento de patente US-2016/0134863 A1.The patent document US-2016/0029883 A1 is an example of a gaze tracking device that uses a previous calibration date when there is a match between the current and previous sets of calibration measurements. Another example of how to perform a calibration of a gaze tracking device can be found in patent document US-2016/0134863 A1.
ResumenSummary
Es un objeto de la invención abordar al menos algunos de los problemas y cuestiones resaltados anteriormente. Un objeto de las realizaciones de la invención es proporcionar un dispositivo y un método que mejore la experiencia de seguimiento ocular para un usuario con respecto al proceso de calibración. Puede ser posible conseguir estos objetos, y otros, usando métodos, dispositivos y programas informáticos como se define en las reivindicaciones independientes adjuntas.It is an object of the invention to address at least some of the problems and issues highlighted above. An object of embodiments of the invention is to provide a device and a method that improves the eye tracking experience for a user with respect to the calibration process. It may be possible to achieve these objects, and others, using methods, devices and computer programs as defined in the appended independent claims.
Según un primer aspecto de la presente invención, se proporciona un método para calibrar un dispositivo de seguimiento ocular para adaptarse a un usuario del dispositivo de seguimiento ocular, en donde se calcula una configuración de calibración del dispositivo de seguimiento ocular asociado con un usuario basándose en los datos oculares adquiridos del usuario cuando mira un conjunto de puntos de referencia, comprendiendo el método las etapas de: mostrar un punto de referencia del conjunto al usuario; adquirir, por medio de al menos una cámara del dispositivo de seguimiento ocular, datos oculares de al menos uno de los ojos del usuario cuando mira al punto de referencia; comparar los datos oculares adquiridos con los conjuntos de datos oculares almacenados relacionados con el punto de referencia, en donde cada uno de los conjuntos de datos oculares almacenados está asociado con una configuración de calibración del dispositivo de seguimiento ocular; y si los datos oculares adquiridos coinciden con uno de los conjuntos de datos oculares almacenados, abandonar el proceso de calibración y cargar la configuración de calibración asociada con los datos oculares almacenados coincidentes.According to a first aspect of the present invention, there is provided a method for calibrating an eye tracking device to suit a user of the eye tracking device, wherein a calibration setting of the eye tracking device associated with a user is calculated based on ocular data acquired from the user when looking at a set of reference points, the method comprising the steps of: displaying a reference point of the set to the user; acquiring, by means of at least one camera of the eye tracking device, eye data from at least one of the user's eyes when looking at the reference point; comparing the acquired eye data with the stored eye data sets related to the reference point, wherein each of the stored eye data sets is associated with a calibration setting of the eye tracking device; and if the acquired eye data matches one of the stored eye data sets, exiting the calibration process and loading the calibration setup associated with the matching stored eye data.
Reduciendo la cantidad de puntos de referencia mostrados al usuario y comparando los datos oculares adquiridos con los datos oculares almacenados para obtener una coincidencia, el tiempo necesario para el proceso de calibración se reduce significativamente y se logra una calibración viable que se adapta en gran medida al usuario.By reducing the number of reference points displayed to the user and comparing the acquired eye data to the stored eye data for a match, the time required for the calibration process is significantly reduced and a workable calibration is achieved that is highly tailored to the user. user.
Sin embargo, si los datos oculares adquiridos no coinciden con ninguno de los conjuntos de datos oculares almacenados, el método comprende además: repetir las etapas de mostrar los puntos de referencia y adquirir los datos oculares para los puntos de referencia restantes en el conjunto; calcular una configuración de calibración en función de los datos oculares adquiridos para todos los puntos de referencia del conjunto; y almacenar la configuración de calibración calculada y los datos oculares adquiridos para todos los puntos de referencia en el conjunto. Si no se encuentra coincidencia, el proceso de calibración continúa de la manera convencional en donde la configuración de calibración y los datos oculares asociados se almacenan para su uso futuro durante una calibración posterior del dispositivo de seguimiento ocular para un usuario.However, if the acquired eye data does not match any of the stored eye data sets, the method further comprises: repeating the steps of displaying the landmarks and acquiring the eye data for the remaining landmarks in the set; calculating a calibration setup based on the acquired ocular data for all reference points in the set; and store the calculated calibration settings and the acquired eye data for all reference points in the set. If I dont know If a match is found, the calibration process continues in the conventional manner wherein the calibration settings and associated eye data are stored for future use during a subsequent calibration of the eye-tracking device for a user.
En una realización preferida adicional, se determina una coincidencia si la diferencia entre los datos oculares adquiridos y los datos oculares almacenados no supera un valor umbral predeterminado. El umbral define un límite para la comparación de los datos oculares adquiridos y almacenados y garantiza que una coincidencia determinada proporcione una calibración viable para el usuario.In a further preferred embodiment, a match is determined if the difference between the acquired eye data and the stored eye data does not exceed a predetermined threshold value. The threshold defines a limit for the comparison of the acquired and stored eye data and ensures that a given match provides a viable calibration for the user.
Según la invención, la etapa de adquirir datos oculares comprende determinar un desplazamiento de dirección de mirada entre la dirección de mirada de al menos uno de los ojos del usuario y el punto de referencia y la etapa de comparar los datos oculares comprende comparar el desplazamiento de dirección de mirada adquirido con desplazamientos de dirección de mirada almacenados. El desplazamiento de dirección de mirada es un ejemplo de datos oculares usados frecuentemente en el campo del seguimiento ocular y proporciona una forma sencilla y fiable de comparar datos oculares adquiridos y almacenados.According to the invention, the step of acquiring ocular data comprises determining a gaze direction displacement between the gaze direction of at least one of the user's eyes and the reference point and the step of comparing the ocular data comprises comparing the displacement of gaze direction acquired with gaze direction offsets stored. Gaze direction displacement is an example of eye data frequently used in the field of eye tracking and provides a simple and reliable way to compare acquired and stored eye data.
En realización preferida adicional, el método comprende además adquirir el desplazamiento de dirección de mirada para ambos ojos. El uso de datos de ambos ojos del usuario aumenta la precisión y la confiabilidad del método para determinar una configuración de calibración adecuada.In a further preferred embodiment, the method further comprises acquiring the gaze direction offset for both eyes. Using data from both eyes of the user increases the accuracy and reliability of the method in determining a proper calibration setting.
En una realización ventajosa, la etapa de comparar comprende además determinar una relación entre los desplazamientos de dirección de mirada del ojo izquierdo y el ojo derecho y comparar la relación determinada con una relación correspondiente entre los desplazamientos de dirección de mirada almacenados del ojo izquierdo y el ojo derecho. Preferiblemente, la relación entre los desplazamientos de dirección de mirada del ojo izquierdo y el ojo derecho comprende la distancia desde los desplazamientos de dirección de mirada del ojo izquierdo y el ojo derecho hasta el punto de referencia, respectivamente, y/o el ángulo entre los desplazamientos de dirección de mirada del ojo izquierdo y del ojo derecho. El uso de la relación entre los desplazamientos de dirección de mirada del ojo izquierdo y del ojo derecho proporciona una base adicional para la comparación que mejora aún más la precisión y la fiabilidad del método para determinar una configuración de calibración viable.In an advantageous embodiment, the step of comparing further comprises determining a ratio between the gaze direction offsets of the left eye and the right eye and comparing the determined ratio with a corresponding ratio between the stored gaze direction offsets of the left eye and the right eye. right eye. Preferably, the ratio between the gaze direction displacements of the left eye and the right eye comprises the distance from the gaze direction displacements of the left eye and the right eye to the reference point, respectively, and/or the angle between the displacements of direction of gaze of the left eye and the right eye. The use of the relationship between the left eye and right eye gaze direction displacements provides an additional basis for comparison that further improves the accuracy and reliability of the method for determining a viable calibration setup.
En una realización alternativa, la etapa de adquirir datos oculares comprende además determinar una de una distancia interocular (IOD) y una distancia interpupilar (IPD), y la etapa de comparar datos oculares comprende comparar la IOD o la IPD adquirida con las IOD o las IPD almacenadas. El uso de datos relacionados con la distancia entre los ojos aumenta aún más la precisión y la fiabilidad del método para determinar una configuración de calibración adecuada. De forma adicional, al combinar diferentes datos oculares en dos o más etapas, una primera comparación puede excluir calibraciones no viables para reducir el número de comparaciones en etapas posteriores, logrando de este modo un proceso de calibración más rápido.In an alternative embodiment, the step of acquiring ocular data further comprises determining one of an interocular distance (IOD) and an interpupillary distance (IPD), and the step of comparing ocular data comprises comparing the acquired IOD or IPD with the IODs or the Stored IPDs. The use of data related to the distance between the eyes further increases the accuracy and reliability of the method in determining a suitable calibration setup. Additionally, by combining different ocular data in two or more steps, a first comparison can exclude non-feasible calibrations to reduce the number of comparisons in later steps, thus achieving a faster calibration process.
En un segundo aspecto de la presente invención, se proporciona un dispositivo de seguimiento ocular que opera para seguir la dirección de mirada de un usuario, en donde se calcula una configuración de calibración del dispositivo de seguimiento ocular asociado con un usuario basándose en los datos oculares adquiridos del usuario cuando mira un conjunto de puntos de referencia, comprendiendo el dispositivo al menos una cámara; un sistema de circuitos de procesamiento; y una memoria, conteniendo dicha memoria instrucciones ejecutables por dicho sistema de circuitos de procesamiento, donde dicho dispositivo de seguimiento ocular puede operarse para: mostrar un punto de referencia del conjunto al usuario; adquirir, por medio de la cámara, datos de al menos uno de los ojos del usuario cuando mira al punto de referencia; comparar los datos oculares adquiridos con los conjuntos de datos oculares almacenados relacionados con el punto de referencia, en donde cada uno de los conjuntos de datos oculares almacenados está asociado con una configuración de calibración del dispositivo de seguimiento ocular; y si los datos oculares adquiridos coinciden con uno de los conjuntos de datos oculares almacenados, abandonar el proceso de calibración y cargar la configuración de calibración asociada con los datos oculares almacenados coincidentes.In a second aspect of the present invention, there is provided an eye tracking device that operates to track the gaze direction of a user, wherein a calibration setting of the eye tracking device associated with a user is calculated based on the eye data. acquired from the user when looking at a set of reference points, the device comprising at least one camera; a system of processing circuitry; and a memory, said memory containing instructions executable by said processing circuitry, wherein said eye tracking device is operable to: display a set reference point to the user; acquiring, by means of the camera, data from at least one of the user's eyes when looking at the reference point; comparing the acquired eye data with the stored eye data sets related to the reference point, wherein each of the stored eye data sets is associated with a calibration setting of the eye tracking device; and if the acquired eye data matches one of the stored eye data sets, exiting the calibration process and loading the calibration setup associated with the matching stored eye data.
El seguimiento ocular es operativo además para, si los datos oculares adquiridos no coinciden con ninguno de los conjuntos de datos oculares almacenados, repetir las etapas de mostrar los puntos de referencia y adquirir los datos oculares para los puntos de referencia restantes en el conjunto, calcular una configuración de calibración basada en los datos oculares adquiridos para todos los puntos de referencia en el conjunto y almacenar la configuración de calibración calculada y los datos oculares adquiridos para todos los puntos de referencia en el conjunto.Eye tracking is further operative to, if the acquired eye data does not match any of the stored eye data sets, repeat the steps of displaying the landmarks and acquiring the eye data for the remaining landmarks in the set, calculating a calibration setup based on the acquired eye data for all the reference points in the set and store the calculated calibration setup and the acquired eye data for all the reference points in the set.
En una realización alternativa, se determina una coincidencia si la diferencia entre los datos oculares adquiridos y los datos oculares almacenados no supera un valor umbral predeterminado.In an alternate embodiment, a match is determined if the difference between the acquired eye data and the stored eye data does not exceed a predetermined threshold value.
El dispositivo de seguimiento ocular puede operarse además para determinar un desplazamiento de dirección de mirada entre la dirección de mirada de al menos uno de los ojos del usuario y el punto de referencia; y comparar el desplazamiento de dirección de mirada adquirido con los desplazamientos de dirección de mirada almacenados. The eye tracking device is further operable to determine a gaze direction offset between the gaze direction of at least one of the user's eyes and the reference point; and comparing the acquired gaze direction offset to the stored gaze direction offsets.
En una realización alternativa, el dispositivo de seguimiento ocular es operativo además para adquirir el desplazamiento de dirección de mirada para ambos ojos. In an alternate embodiment, the eye tracking device is further operative to acquire gaze direction offset for both eyes.
En una realización preferida, el dispositivo de seguimiento ocular puede operarse además para determinar una relación entre los desplazamientos de dirección de mirada del ojo izquierdo y el ojo derecho y comparar la relación determinada con una relación correspondiente entre los desplazamientos de dirección de mirada almacenados del ojo izquierdo y el derecho. Preferiblemente, la relación entre los desplazamientos de dirección de mirada del ojo izquierdo y el ojo derecho comprende la distancia desde los desplazamientos de dirección de mirada del ojo izquierdo y el ojo derecho hasta el punto de referencia, respectivamente, y/o el ángulo entre el desplazamiento de dirección de mirada del ojo izquierdo y el ojo derecho.In a preferred embodiment, the eye tracking device is further operable to determine a relationship between the gaze direction displacements of the left eye and the right eye and compare the determined relationship with a corresponding relationship between the stored gaze direction displacements of the eye. left and the right. Preferably, the ratio between the gaze direction displacements of the left eye and the right eye comprises the distance from the gaze direction displacements of the left eye and the right eye to the reference point, respectively, and/or the angle between the displacement of gaze direction of the left eye and the right eye.
En una realización ventajosa, el dispositivo de seguimiento ocular puede operarse además para determinar una distancia interocular (IOD) y una distancia interpupilar (IPD), y comparar la IOD o la IPD adquirida con las IOD o las IPD almacenadas.In an advantageous embodiment, the eye tracking device is further operable to determine an interocular distance (IOD) and an interpupillary distance (IPD), and compare the acquired IOD or IPD with the stored IOD or IPD.
En un tercer aspecto de la presente invención, se proporciona un programa informático que comprende medios de código legible por ordenador para ejecutarse en un dispositivo de seguimiento ocular para seguir la dirección de mirada de un usuario, en donde se calcula una configuración de calibración del dispositivo de seguimiento ocular asociado con un usuario basándose en los datos oculares adquiridos del usuario cuando mira un conjunto de puntos de referencia, medios de código legible por ordenador que cuando se ejecutan en el dispositivo de seguimiento ocular hacen que el dispositivo de seguimiento ocular realice las siguientes etapas: mostrar un punto de referencia del conjunto al usuario; adquirir, por medio de al menos una cámara del dispositivo de seguimiento ocular, datos oculares de al menos uno de los ojos del usuario cuando mira al punto de referencia; comparar los datos oculares adquiridos con los conjuntos de datos oculares almacenados relacionados con el punto de referencia, en donde cada uno de los conjuntos de datos oculares almacenados está asociado con una configuración de calibración del dispositivo de seguimiento ocular; y si los datos oculares adquiridos coinciden con uno de los conjuntos de datos oculares almacenados, abandonar el proceso de calibración y cargar la configuración de calibración asociada con los datos oculares almacenados coincidentes.In a third aspect of the present invention, there is provided a computer program comprising computer-readable code means for executing on an eye-tracking device for tracking the gaze direction of a user, wherein a calibration setting of the device is calculated. eye-tracking device associated with a user based on eye data acquired from the user when looking at a set of landmarks, means of computer-readable code that when executed on the eye-tracking device causes the eye-tracking device to perform the following stages: show a reference point of the set to the user; acquiring, by means of at least one camera of the eye tracking device, eye data from at least one of the user's eyes when looking at the reference point; comparing the acquired eye data with the stored eye data sets related to the reference point, wherein each of the stored eye data sets is associated with a calibration setting of the eye tracking device; and if the acquired eye data matches one of the stored eye data sets, exiting the calibration process and loading the calibration setup associated with the matching stored eye data.
En un cuarto aspecto de la presente invención, se proporciona un soporte que contiene el programa informático según el tercer aspecto, en donde el soporte es una señal electrónica, una señal óptica, una señal de radio o un medio de almacenamiento legible por ordenador.In a fourth aspect of the present invention, a medium containing the computer program according to the third aspect is provided, wherein the medium is an electronic signal, an optical signal, a radio signal or a computer-readable storage medium.
Otras características y beneficios posibles de esta solución se harán evidentes a partir de la siguiente descripción detallada. Breve descripción de Ios dibujosOther possible features and benefits of this solution will become apparent from the following detailed description. Brief description of the drawings
La solución se describirá ahora con más detalle por medio de realizaciones ilustrativas y haciendo referencia a las figuras adjuntas, en donde:The solution will now be described in more detail by means of illustrative embodiments and with reference to the attached figures, where:
la figura 1a es una vista superior en un plano horizontal que ilustra la dirección de mirada de un usuario en relación con un punto de referencia;Figure 1a is a top view in a horizontal plane illustrating the gaze direction of a user in relation to a reference point;
la figura 1b es una vista en un plano de intersección vertical que ilustra el desplazamiento de dirección de mirada de un usuario en relación con un punto de referencia;Figure 1b is a view in a vertical intersecting plane illustrating the gaze direction displacement of a user relative to a reference point;
la figura 2a es una vista superior en un plano horizontal que ilustra la dirección de mirada de un usuario en relación con un punto de referencia en comparación con las direcciones de mirada almacenadas de otros usuarios;Figure 2a is a top view in a horizontal plane illustrating a user's gaze direction relative to a reference point in comparison to other users' stored gaze directions;
la figura 2b es una vista en un plano de intersección vertical de un desplazamiento de dirección de mirada de un usuario en relación con un punto de referencia en comparación con los desplazamientos de dirección de mirada almacenados de otros usuarios;Figure 2b is a view in a vertical intersecting plane of a user's gaze direction offset relative to a reference point in comparison to other users' stored gaze direction offsets;
la figura 3 es un diagrama de flujo que muestra esquemáticamente las etapas del método de una realización de un método según la presente descripción;Fig. 3 is a flowchart schematically showing the method steps of one embodiment of a method according to the present disclosure;
la figura 4 es un diagrama de flujo que muestra esquemáticamente las etapas del método de otra realización de un método según la presente descripción;Fig. 4 is a flow chart schematically showing the method steps of another embodiment of a method according to the present disclosure;
la figura 5 muestra un esquema de bloques de un dispositivo de seguimiento ocular según una realización.Figure 5 shows a block diagram of an eye tracking device according to one embodiment.
Descripción detalladaDetailed description
Brevemente descrito, se proporciona un método para calibrar un dispositivo de seguimiento ocular para adaptarse a un usuario del dispositivo de seguimiento ocular, reduciendo el tiempo empleado en el proceso de calibración de un dispositivo de seguimiento ocular para mejorar la experiencia de seguimiento ocular del usuario. Mediante el uso de métodos, dispositivos y programas informáticos según la presente descripción, la experiencia de seguimiento ocular para el usuario puede mejorarse al permitir una calibración rápida para una configuración de calibración preexistente del dispositivo de seguimiento ocular.Briefly described, a method for calibrating an eye-tracking device to suit a user of the eye-tracking device is provided, reducing the time spent in the process of calibrating an eye-tracking device to improve the user's eye-tracking experience. Through the use of methods, devices and computer programs according to the present description, the eye tracking experience for the user can be improved by allowing a quick calibration for a pre-existing calibration setup of the eye tracker device.
La figura 1a ilustra la dirección de mirada de un usuario cuando mira un punto de referencia 1 generado y mostrado por un dispositivo de seguimiento ocular. La figura 1 es una vista superior en un plano horizontal, paralelo a un plano transversal o axial del usuario. Como puede verse, la dirección de mirada de cada ojo del usuario, ilustrada por las flechas 2L y 2R, no coincide con el punto de referencia 1, sino que está desplazada en relación con el punto de referencia 1. El desplazamiento de la dirección de mirada, generalmente denominado desplazamiento de dirección de mirada, se determina realizando una prueba de intersección de rayo frente a plano. Más específicamente, la intersección entre el rayo definido por la dirección de mirada 2L, 2R del ojo respectivo y un plano vertical sustancialmente perpendicular al usuario y que contiene el punto de referencia 1.Figure 1a illustrates the gaze direction of a user when looking at a reference point 1 generated and displayed by an eye tracking device. Figure 1 is a top view in a horizontal plane, parallel to a transverse or axial plane of the user. As can be seen, the gaze direction of each eye of the user, illustrated by the arrows 2L and 2R, does not coincide with the reference point 1, but is displaced relative to the reference point 1. The displacement of the direction of gaze, generally referred to as the gaze direction offset, is determined by performing a ray versus plane intersection test. More specifically, the intersection between the ray defined by the gaze direction 2L, 2R of the respective eye and a vertical plane substantially perpendicular to the user and containing the reference point 1.
También en la figura 1a, se proporciona una ilustración de la distancia interocular (IOD) y la distancia interpupilar (IPD). La distancia interocular se define como la distancia entre el centro del ojo izquierdo y el centro del ojo derecho del usuario y es sustancialmente un valor fijo constante independiente del movimiento de los ojos. Por otro lado, la distancia interpupilar se define como la distancia entre los centros de la pupila del ojo izquierdo y la pupila del ojo derecho del usuario y puede variar a medida que el usuario mueve los ojos al mirar diferentes objetos, por ejemplo, objetos cercanos o lejanos, u objetos a la izquierda o a la derecha del usuario.Also in Figure 1a, an illustration of interocular distance (IOD) and interpupillary distance (IPD) is provided. The interocular distance is defined as the distance between the center of the user's left eye and the center of the user's right eye and is a substantially constant fixed value independent of eye movement. On the other hand, the interpupillary distance is defined as the distance between the centers of the pupil of the user's left eye and the pupil of the right eye of the user and may vary as the user moves their eyes when looking at different objects, for example, close objects. or far away, or objects to the left or right of the user.
En la figura 1b, se ilustra el plano de intersección vertical que contiene el punto de referencia 1. Como puede verse, los puntos de intersección 3L y 3R correspondientes a los desplazamientos 3L, 3R de dirección de mirada del ojo izquierdo y del ojo derecho, respectivamente, están separados del punto de referencia 1 por las distancias dL y dR, respectivamente, y presentan diferentes orientaciones angulares con respecto al punto de referencia. El ángulo a entre los desplazamientos 3L, 3R de dirección de mirada del ojo izquierdo y del ojo derecho, respectivamente, con el punto de referencia 1 que define el origen, también se ilustra en la figura 1 b.In figure 1b, the vertical intersection plane containing the reference point 1 is illustrated. As can be seen, the intersection points 3L and 3R corresponding to the displacements 3L, 3R of the gaze direction of the left eye and the right eye, respectively, they are separated from the reference point 1 by the distances dL and dR, respectively, and have different angular orientations with respect to the reference point. The angle a between the gaze direction displacements 3L, 3R of the left eye and the right eye, respectively, with the reference point 1 defining the origin, is also illustrated in Fig. 1b.
El oculómetro puede tener parámetros predeterminados para comenzar. La calibración predeterminada crea un patrón semiúnico de datos oculares por usuario. El patrón único creado al usar la calibración predeterminada puede almacenarse junto con una calibración realizada y compararse si el usuario vuelve a mirar los mismos puntos de referencia. Por lo tanto, cuando el mismo usuario inicia el dispositivo de seguimiento ocular en un momento posterior, el proceso de calibración según la presente invención solo requerirá que el usuario mire un punto de referencia para determinar una coincidencia con la configuración de calibración previamente almacenada del usuario. Sin embargo, el proceso de calibración también puede usarse para cargar rápidamente una configuración de calibración adecuada para un nuevo usuario.The oculometer may have default parameters to start with. The default calibration creates a semi-unique pattern of eye data per user. The unique pattern created using the default calibration can be stored alongside a performed calibration and compared if the user looks at the same reference points again. Therefore, when the same user starts the eye-tracking device at a later time, the calibration process according to the present invention will only require the user to look at a reference point to determine a match with the user's previously stored calibration settings. . However, the calibration process can also be used to quickly load a suitable calibration setup for a new user.
La invención propuesta empareja los datos oculares con otros datos oculares existentes para probar y ver si hay una calibración similar disponible. En las realizaciones, esto se logra comparando el desplazamiento de dirección de mirada del usuario, la distancia interocular IOD y/o la distancia interpupilar IPD como se ha definido anteriormente con los correspondientes desplazamientos de dirección de mirada almacenados, la IOD y/o la IPD.The proposed invention pairs the eye data with other existing eye data to test and see if a similar calibration is available. In embodiments, this is achieved by comparing the user's gaze direction offset, interocular distance IOD and/or IPD as defined above with the corresponding stored gaze direction offsets, IOD and/or IPD .
La figura 2a ilustra en una vista superior similar a la figura 1a, una situación con configuraciones de calibración preexistentes asociadas con datos oculares almacenados de los usuarios primero y segundo anteriores. El primer usuario anterior se ilustra usando líneas discontinuas y el segundo usuario anterior con líneas de puntos discontinuas. El usuario actual se ilustra con líneas continuas. Como puede verse, la dirección de mirada 2L, 2R en relación con el punto de referencia 1 del usuario actual difiere significativamente de la dirección de mirada 2L’, 2R’ del primer usuario anterior, pero corresponde en gran medida a la dirección de mirada 2L” , 2R” del segundo usuario anterior. Por lo tanto, parece que una configuración de calibración almacenada asociada con el segundo usuario anterior proporcionaría una buena coincidencia para el usuario actual.Figure 2a illustrates in a top view similar to Figure 1a, a situation with pre-existing calibration settings associated with stored eye data from the first and second previous users. The first prior user is illustrated using dashed lines and the second prior user with dashed dotted lines. The current user is illustrated with solid lines. As can be seen, the gaze direction 2L, 2R relative to reference point 1 of the current user differs significantly from the gaze direction 2L', 2R' of the first previous user, but largely corresponds to the gaze direction 2L ” , 2R” from the second previous user. So it seems that a stored calibration setup associated with the second previous user would provide a good match for the current user.
Volviendo ahora a la figura 2b, los desplazamientos 3L, 3R de dirección de mirada del ojo izquierdo y derecho, respectivamente, del usuario actual se muestran como puntos en el plano vertical junto con los desplazamientos 3L’, 3R’; 3L” , 3R” de dirección de mirada almacenados de los usuarios primero y segundo anteriores. Al comparar los desplazamientos de dirección de mirada, se comparan los puntos correspondientes en el plano y si la distancia entre los mismos está dentro de una cierta cantidad, se considera una calibración viable. Como ya se ha analizado anteriormente en relación con la figura 2a, los desplazamientos 3L, 3R de dirección de mirada del usuario actual difieren significativamente de los desplazamientos 3L’, 3R’ de dirección de mirada del primer usuario anterior, mientras que se corresponden estrechamente con los desplazamientos 3L” , 3R” de dirección de mirada del segundo usuario anterior. Se muestra un círculo discontinuo centrado en cada uno de los desplazamientos 3L, 3R de dirección de mirada del usuario actual que representa un valor umbral para la comparación entre los desplazamientos de dirección de mirada. Dado que los desplazamientos 3L” , 3R” de dirección de mirada del segundo usuario anterior se encuentran dentro del umbral representado por el círculo discontinuo respectivo centrado en los desplazamientos 3L, 3R de la dirección de mirada del usuario actual, proporcionan una coincidencia en el contexto del presente invención. En una situación donde varios desplazamientos de dirección de mirada almacenados proporcionan una coincidencia, es decir, se encuentran dentro del círculo discontinuo que representa el umbral, se selecciona el desplazamiento de dirección de mirada con la diferencia más pequeña. Esto puede lograrse, por ejemplo, disminuyendo sucesivamente el umbral (disminuyendo el radio del círculo discontinuo) hasta que solo un único desplazamiento de dirección de mirada almacenado coincida con el desplazamiento 3L, 3R de dirección de mirada adquirido del usuario actual.Turning now to Fig. 2b, the gaze direction displacements 3L, 3R of the left and right eye, respectively, of the current user are shown as points in the vertical plane together with the displacements 3L', 3R'; Stored gaze direction 3L'', 3R'' of the above first and second users. When comparing the gaze direction displacements, the corresponding points in the plane are compared and if the distance between them is within a certain amount, it is considered a viable calibration. As already discussed above in connection with Fig. 2a, the gaze direction offsets 3L, 3R of the current user differ significantly from the gaze direction offsets 3L', 3R' of the first previous user, while closely corresponding to the displacements 3L”, 3R” of the gaze direction of the second previous user. A dashed circle is shown centered on each of the current user's gaze direction offsets 3L, 3R representing a threshold value for comparison between the gaze direction offsets. Since the second previous user's gaze direction offsets 3L", 3R" lie within the threshold represented by the respective dashed circle centered on the current user's gaze direction offsets 3L, 3R", they provide a match in context of the present invention. In a situation where several stored gaze direction offsets provide a match, ie, lie within the dashed circle representing the threshold, the gaze direction offset with the smallest difference is selected. This can be achieved, for example, by successively lowering the threshold (decreasing the radius of the dashed circle) until only a single stored gaze direction offset matches the current user's acquired gaze direction offset 3L, 3R.
La figura 3, junto con las figuras 1 y 2, muestra una realización de un método para calibrar un dispositivo 600 de seguimiento ocular, en donde el dispositivo 600 de seguimiento ocular comprende al menos una cámara 10. Una configuración de calibración del dispositivo 600 de seguimiento ocular asociada con un usuario se calcula basándose en los datos oculares adquiridos del usuario cuando mira un conjunto de puntos de referencia 1. El método puede, en algunas realizaciones, realizarse por el dispositivo 600 de seguimiento ocular y, en algunas realizaciones, el método puede realizarse en otro lugar usando los datos obtenidos del dispositivo 600 de seguimiento ocular, por ejemplo, en un entorno de nube al que está operativamente conectado el dispositivo 600 de seguimiento ocular.Figure 3, together with Figures 1 and 2, shows one embodiment of a method for calibrating an eye tracking device 600, wherein the eye tracking device 600 comprises at least one camera 10. A calibration configuration of the device 600 of The eye tracking associated with a user is calculated based on the user's acquired eye data when looking at a set of reference points 1. The method may, in some embodiments, be performed by the eye tracking device 600 and, in some embodiments, the method it may be performed elsewhere using the data obtained from the eye tracking device 600, for example, in a cloud environment to which the eye tracking device 600 is operationally connected.
El método comprende mostrar 202 un punto de referencia 1 del conjunto al usuario. El método comprende además adquirir 204 datos oculares de al menos uno de los ojos del usuario cuando mira al punto de referencia 1. El método comprende además comparar 206 los datos oculares adquiridos con los conjuntos de datos oculares almacenados relacionados con el punto de referencia 1, en donde cada uno de los conjuntos de datos oculares almacenados está asociado con una configuración de calibración del dispositivo de seguimiento ocular. El método comprende además, si los datos oculares adquiridos coinciden con uno de los conjuntos de datos oculares almacenados, abandonar 208 el proceso de calibración y cargar 210 la configuración de calibración asociada con los datos oculares almacenados coincidentes.The method comprises displaying 202 a reference point 1 of the set to the user. The method further comprises acquiring 204 eye data from at least one of the user's eyes when looking at reference point 1. The method further comprises comparing 206 the acquired eye data with stored eye data sets related to reference point 1, wherein each of the stored eye data sets is associated with a calibration setting of the eye tracking device. The method further comprises, if the acquired eye data matches one of the stored eye data sets, exiting 208 the calibration process and loading 210 the calibration setup associated with the matching stored eye data.
La etapa de adquirir 204 datos oculares comprende determinar un desplazamiento 3L, 3R de dirección de mirada entre una dirección de mirada 2L, 2R de al menos uno de los ojos del usuario y el punto de referencia 1, y la etapa de comparar 206 datos oculares comprende comparar el desplazamiento 3L, 3R de dirección de mirada adquirido con los desplazamientos 3L’, 3R’; 3L” , 3R” de dirección de mirada almacenados.The step of acquiring 204 eye data comprises determining a gaze direction offset 3L, 3R between a gaze direction 2L, 2R of at least one of the user's eyes and the reference point 1, and the step of comparing 206 eye data comprises comparing the acquired gaze direction displacement 3L, 3R with the displacements 3L', 3R'; 3L”, 3R” gaze direction stored.
En algunas realizaciones, la etapa de adquirir 204 datos oculares comprende determinar una distancia interocular (IOD) y una distancia interpupilar (IPD) del usuario, y la etapa de comparar 206 datos oculares comprende comparar la IOD o la IPD adquirida con las IOD o las IPD almacenadas.In some embodiments, the step of acquiring 204 ocular data comprises determining an interocular distance (IOD) and an interpupillary distance (IPD) of the user, and the step of comparing 206 ocular data comprises comparing the acquired IOD or IPD to the IODs or Stored IPDs.
Los datos oculares adquiridos pueden, por supuesto, incluir otros valores y medidas relevantes relacionados con el usuario y pueden combinarse y compararse de diversas formas y en cualquier orden. Por ejemplo, la IOD y/o la IPD pueden usarse en una primera comparación para excluir las IOD y/o las IPD almacenadas que no coinciden y, a continuación, puede realizarse una segunda comparación usando los desplazamientos 3L, 3R de dirección de mirada adquiridos para encontrar los desplazamientos 3L’, 3R’; 3L” , 3R” de dirección de mirada almacenadas que más coincidan. Alternativamente, los desplazamientos de dirección de mirada pueden compararse antes con las IOD y/o las IPD.The acquired ocular data may, of course, include other relevant user-related values and measurements and may be combined and compared in various ways and in any order. For example, the IOD and/or IPD can be used in a first comparison to exclude mismatched stored IODs and/or IPDs, and then a second comparison can be performed using the acquired gaze direction offsets 3L, 3R to find the displacements 3L', 3R'; 3L”, 3R” gaze direction stored that most match. Alternatively, the gaze direction offsets can be compared beforehand with the IODs and/or IPDs.
En algunas realizaciones, se determina una coincidencia si la diferencia entre los datos oculares adquiridos y los datos oculares almacenados no supera un valor de umbral predeterminado.In some embodiments, a match is determined if the difference between the acquired eye data and the stored eye data does not exceed a predetermined threshold value.
La figura 4, junto con las figuras 1 y 2, muestra las etapas adicionales del método para calibrar un dispositivo 600 de seguimiento ocular en el caso en donde los datos oculares adquiridos no coincidan con ninguno de los conjuntos de datos oculares almacenados. El método comprende además repetir 212 las etapas 202 y 204 para los puntos de referencia restantes en el conjunto. El método comprende además calcular 214 una configuración de calibración basándose en los datos oculares adquiridos para todos los puntos de referencia en el conjunto. El método comprende además almacenar 216 la configuración de calibración calculada y los datos oculares adquiridos para todos los puntos de referencia en el conjunto.Figure 4, together with Figures 1 and 2, shows additional method steps for calibrating an eye tracking device 600 in the case where the acquired eye data does not match any of the stored eye data sets. The method further comprises repeating 212 steps 202 and 204 for the remaining reference points in the set. The method further comprises calculating 214 a calibration pattern based on the acquired eye data for all reference points in the array. The method further comprises storing 216 the calculated calibration settings and the acquired eye data for all reference points in the array.
La figura 5, junto con la figura 1, muestra un dispositivo 600 de seguimiento ocular, capaz de seguir los ojos de un usuario. El dispositivo 600 de seguimiento ocular comprende un sistema 603 de circuitos de procesamiento y una memoria 604. El sistema 603 de circuitos de procesamiento puede comprender uno o más procesadores programables, circuitos integrados de aplicación específica, matrices de puertas programables en campo o combinaciones de los mismos (no mostradas) adaptadas para ejecutar instrucciones. La memoria contiene instrucciones ejecutables por dicho sistema de circuitos de procesamiento, donde el dispositivo 600 de seguimiento ocular puede operarse para mostrar un punto de referencia 1 del conjunto al usuario. El dispositivo 600 de seguimiento ocular puede operarse además para adquirir datos oculares para al menos uno de los ojos del usuario cuando mira el punto de referencia 1. El dispositivo 600 de seguimiento ocular puede operarse además para comparar los datos oculares adquiridos con los conjuntos de datos oculares almacenados relacionados con el punto de referencia, en donde cada uno de los conjuntos de datos oculares almacenados está asociado con una configuración de calibración del dispositivo 600 de seguimiento ocular. El dispositivo 600 de seguimiento ocular puede operarse además para, si los datos oculares adquiridos coinciden con uno de los conjuntos de datos oculares almacenados, abandonar el proceso de calibración y cargar la configuración de calibración asociada con los datos oculares almacenados coincidentes.Figure 5, together with Figure 1, shows an eye tracking device 600, capable of tracking a user's eyes. Eye tracking device 600 comprises processing circuitry 603 and memory 604. Processing circuitry 603 may comprise one or more programmable processors, application-specific integrated circuits, field-programmable gate arrays, or combinations thereof. themselves (not shown) adapted to execute instructions. The memory contains instructions executable by said processing circuitry, where the eye tracker 600 can be operated to display a reference point 1 of the array to the user. The eye tracker 600 is further operable to acquire eye data for at least one of the user's eyes when looking at reference point 1. The eye tracker 600 is further operable to compare the acquired eye data with the data sets. reference point-related stored eyepieces, wherein each of the stored eyepiece data sets is associated with a calibration setting of eyetracker 600. Eye tracking device 600 is further operable to, if the acquired eye data matches one of the stored eye data sets, exit the calibration process and load the calibration setup associated with the matching stored eye data.
El dispositivo 600 de seguimiento ocular puede operarse además para, si los datos oculares adquiridos no coinciden con ninguno de los conjuntos de datos oculares almacenados, repetir las etapas de mostrar un punto de referencia y adquirir los datos oculares para los puntos de referencia restantes en el conjunto, calcular una configuración de calibración basándose en los datos oculares adquiridos para todos los puntos de referencia en el conjunto y almacenar la configuración de calibración calculada y los datos oculares adquiridos para todos los puntos de referencia en el conjunto.The eye tracking device 600 is further operable to, if the acquired eye data does not match any of the stored eye data sets, repeat the steps of displaying a landmark and acquiring eye data for the remaining landmarks in the set, compute a configuration of calibration based on the acquired eye data for all reference points in the set and store the calculated calibration settings and the acquired eye data for all reference points in the set.
Según una realización, se determina una coincidencia si la diferencia entre los datos oculares adquiridos y los datos oculares almacenados no supera un valor de umbral predeterminado.According to one embodiment, a match is determined if the difference between the acquired eye data and the stored eye data does not exceed a predetermined threshold value.
El dispositivo 600 de seguimiento ocular puede operarse además para determinar un desplazamiento de dirección de mirada entre la dirección de mirada de al menos uno de los ojos del usuario y el punto de referencia; y comparar el desplazamiento de dirección de mirada adquirido con los desplazamientos de dirección de mirada almacenados. The eye tracking device 600 is further operable to determine a gaze direction offset between the gaze direction of at least one of the user's eyes and the reference point; and comparing the acquired gaze direction offset to the stored gaze direction offsets.
Según una realización, el dispositivo 600 de seguimiento ocular puede operarse además para adquirir el desplazamiento de dirección de mirada para ambos ojos.According to one embodiment, the eye tracking device 600 is further operable to acquire gaze direction offset for both eyes.
Según una realización, el dispositivo 600 de seguimiento ocular puede operarse además para determinar una relación entre los desplazamientos de dirección de mirada del ojo izquierdo y el ojo derecho y comparar la relación determinada con una relación correspondiente entre los desplazamientos de dirección de mirada almacenados del ojo izquierdo y el derecho. Según una realización, la relación entre los desplazamientos de dirección de mirada del ojo izquierdo y el ojo derecho comprende la distancia dL, dR desde los desplazamientos de dirección de mirada del ojo izquierdo y el ojo derecho hasta el punto de referencia, respectivamente, y/o el ángulo a entre el desplazamiento de dirección de mirada del ojo izquierdo y el ojo derecho.According to one embodiment, the eye tracking device 600 is further operable to determine a relationship between the gaze direction displacements of the left eye and the right eye and compare the determined relationship with a corresponding relationship between the stored gaze direction displacements of the eye. left and the right. According to one embodiment, the relationship between the gaze direction displacements of the left eye and the right eye comprises the distance dL, dR from the gaze direction displacements of the left eye and the right eye to the reference point, respectively, and/ or the angle a between the gaze direction displacement of the left eye and the right eye.
Como se ha analizado anteriormente junto con la figura 1b, las distancias dL, dR y/o el ángulo a pueden usarse para establecer además el ajuste más cercano entre el usuario actual y las configuraciones de calibración almacenadas. Esto puede llevarse a cabo en varias etapas en donde, después de identificar una serie de configuraciones de calibración almacenadas adecuadas comparando los desplazamientos 3L, 3R de dirección de mirada adquiridas con los desplazamientos 3L’, 3R’; 3L” , 3R” de dirección de mirada almacenados, la relación entre los desplazamientos de dirección de mirada (distancia dL, dR y/o ángulo a) puede usarse además para diferenciar entre las candidatas de las configuraciones de calibración almacenadas adecuadas para encontrar la óptima, es decir, la que tiene la diferencia más pequeña en comparación con los datos oculares adquiridos del usuario actual.As discussed above in conjunction with Figure 1b, the distances dL, dR and/or the angle a can be used to further establish the closest fit between the current user and the stored calibration settings. This can be accomplished in several steps where, after identifying a number of suitable stored calibration patterns by comparing the acquired gaze direction offsets 3L, 3R with offsets 3L', 3R'; 3L”, 3R” gaze direction stored, the relationship between the gaze direction offsets (distance dL, dR and/or angle a) can further be used to differentiate between candidates of suitable stored calibration setups to find the optimum , that is, the one with the smallest difference compared to the acquired eye data of the current user.
Según una realización, el dispositivo 600 de seguimiento ocular puede operarse además para determinar una distancia interocular (IOD) y una distancia interpupilar (IPD); y comparar la IOD o la IPD adquirida con las IOD o las IPD almacenadas. According to one embodiment, the eye tracking device 600 is further operable to determine an interocular distance (IOD) and an interpupillary distance (IPD); and comparing the acquired IOD or IPD with the stored IOD or IPD.
En algunas realizaciones, la o las características del dispositivo 600 de seguimiento ocular, por ejemplo, el sistema 603 de circuitos de procesamiento y la memoria 604, que realizan las etapas del método, pueden ser un grupo de nodos de red, en donde la funcionalidad para realizar el método se distribuye entre diferentes nodos físicos o virtuales de la red. En otras palabras, la o las características del dispositivo 600 de seguimiento ocular que realizan las etapas del método pueden ser una solución en la nube, es decir, la o las características del dispositivo 600 de seguimiento ocular que realizan las etapas del método pueden implementarse como recursos de computación en la nube que pueden estar distribuidos en la red.In some embodiments, the eye-tracking device 600 feature(s), eg, processing circuitry 603 and memory 604, which perform the method steps, may be a group of network nodes, where the functionality to perform the method is distributed among different physical or virtual nodes of the network. In other words, the feature(s) of the eye tracking device 600 that performs the method steps can be a cloud solution, that is, the feature(s) of the eye tracking device 600 that performs the method steps can be implemented as cloud computing resources that may be distributed over the network.
Según otras realizaciones, el dispositivo 600 de seguimiento ocular puede comprender además una unidad de comunicación 602 que puede considerarse que comprende medios convencionales para comunicarse con entidades relevantes tal como otros ordenadores o dispositivos a los que está operativamente conectada. Las instrucciones ejecutables por dicho sistema 603 de circuitos de procesamiento pueden disponerse como un programa informático 605 almacenado, por ejemplo, en la memoria 604. El sistema 603 de circuitos de procesamiento y la memoria 604 pueden disponerse en una subdisposición 601. La subdisposición 601 puede ser un microprocesador y software adecuado y almacenamiento para el mismo, un dispositivo lógico programable, PLD, u otro u otros componentes electrónicos/circuitos de procesamiento configurados para realizar los métodos mencionados anteriormente.According to other embodiments, the eye tracking device 600 may further comprise a communication unit 602 which may be considered to comprise conventional means for communicating with relevant entities such as other computers or devices to which it is operatively connected. The instructions executable by said processing circuitry 603 may be arranged as a computer program 605 stored, for example, in memory 604. Processing circuitry 603 and memory 604 may be arranged in a subarray 601. Subarray 601 may be a microprocessor and suitable software and storage therefor, a programmable logic device, PLD, or other electronic component(s)/processing circuitry configured to perform the aforementioned methods.
El programa informático 605 puede comprender medios de código legibles por ordenador, que cuando se ejecutan en un dispositivo 600 de seguimiento ocular hacen que el dispositivo 600 de seguimiento ocular realice las etapas descritas en cualquiera de las realizaciones descritas del dispositivo 600 de seguimiento ocular. El programa informático 605 puede llevarse por un producto de programa informático conectable al sistema 603 de circuitos de procesamiento. El producto de programa informático puede ser la memoria 604. La memoria 604 puede realizarse como, por ejemplo, una RAM (memoria de acceso aleatorio), una ROM (memoria de sólo lectura) o una EEPROM (ROM programable borrable eléctricamente). Además, el programa informático puede llevarse por un medio legible por ordenador separado, tal como un CD, DVD o memoria flash, desde el que el programa podría descargarse en la memoria 604. Alternativamente, el programa informático puede almacenarse en un servidor o cualquier otra entidad conectada al dispositivo 600 de seguimiento ocular, al que el dispositivo 600 de seguimiento ocular tiene acceso a través de la unidad de comunicación 602. A continuación, el programa informático puede descargarse desde el servidor a la memoria 604.The computer program 605 may comprise computer-readable code means, which when executed in an eye tracker 600 causes the eye tracker 600 to perform the steps described in any of the described embodiments of the eye tracker 600. The computer program 605 may be carried by a computer program product connectable to the processing circuitry 603. The computer program product may be the memory 604. The memory 604 may be embodied as, for example, a RAM (Random Access Memory), a ROM (Read Only Memory) or an EEPROM (Electrically Erasable Programmable ROM). In addition, the computer program may be carried on a separate computer-readable medium, such as a CD, DVD, or flash drive, from which the program could be downloaded into memory 604. Alternatively, the computer program may be stored on a server or any other entity connected to eye tracker 600, which is accessed by eye tracker 600 via communication unit 602. The computer program can then be downloaded from the server to memory 604.
Aunque la descripción anterior contiene una pluralidad de especificidades, estas no deben interpretarse como limitantes del alcance del concepto descrito en el presente documento, sino simplemente como ilustraciones de algunas realizaciones ilustradas del concepto descrito. Se apreciará que el alcance del concepto que se describe en el presente abarca totalmente otras realizaciones que pueden resultar evidentes para los expertos en la técnica y que, por consiguiente, el alcance del concepto que se describe en el presente no debe limitarse. La referencia a un elemento en singular no pretende significar “uno y solo uno” a menos que se indique explícitamente, sino “uno o más” . En las figuras ilustrativas, una línea discontinua generalmente significa que la característica dentro de la línea discontinua es opcional. Although the previous description contains a plurality of specificities, these should not be interpreted as limiting the scope of the concept described in the present document, but simply as illustrations of some Illustrated embodiments of the described concept. It will be appreciated that the scope of the concept described herein fully encompasses other embodiments that may be apparent to those skilled in the art and that accordingly the scope of the concept described herein should not be limited. Reference to an element in the singular is not intended to mean “one and only one” unless explicitly stated, but rather “one or more”. In the illustrative figures, a dashed line generally means that the feature within the dashed line is optional.
Claims (7)
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| SE1851425 | 2018-11-15 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| ES2945789T3 true ES2945789T3 (en) | 2023-07-07 |
Family
ID=68342538
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| ES19204663T Active ES2945789T3 (en) | 2018-11-15 | 2019-10-22 | Method and device for calibrating an oculometer |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US10936063B2 (en) |
| EP (1) | EP3656285B1 (en) |
| CN (1) | CN111190482B (en) |
| ES (1) | ES2945789T3 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111639017A (en) * | 2020-05-29 | 2020-09-08 | 京东方科技集团股份有限公司 | Method and equipment for measuring delay amount of eyeball tracking equipment and eyeball tracking system |
| CN111857333B (en) * | 2020-06-29 | 2022-09-13 | 维沃移动通信有限公司 | Eye movement tracking method and device and electronic equipment |
| SE2250757A1 (en) * | 2022-06-21 | 2023-12-22 | Tobii Ab | Method and system for determining a current gaze direction |
Family Cites Families (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101255219B1 (en) * | 2011-10-13 | 2013-04-24 | 상명대학교 산학협력단 | Method of eye-gaze tracking and system adopting the method |
| EP2587341B1 (en) * | 2011-10-27 | 2017-01-04 | Tobii AB | Power management in an eye-tracking system |
| GB201305726D0 (en) * | 2013-03-28 | 2013-05-15 | Eye Tracking Analysts Ltd | A method for calibration free eye tracking |
| EP2886041A1 (en) * | 2013-12-17 | 2015-06-24 | ESSILOR INTERNATIONAL (Compagnie Générale d'Optique) | Method for calibrating a head-mounted eye tracking device |
| US9760772B2 (en) * | 2014-03-20 | 2017-09-12 | Lc Technologies, Inc. | Eye image stimuli for eyegaze calibration procedures |
| US9785233B2 (en) * | 2014-04-11 | 2017-10-10 | Facebook, Inc. | Systems and methods of eye tracking calibration |
| DE102014008852A1 (en) * | 2014-06-14 | 2015-12-17 | Audi Ag | Calibration of a motor vehicle eye tracking system |
| US9936195B2 (en) * | 2014-11-06 | 2018-04-03 | Intel Corporation | Calibration for eye tracking systems |
| US20160131902A1 (en) * | 2014-11-12 | 2016-05-12 | Anthony J. Ambrus | System for automatic eye tracking calibration of head mounted display device |
| US10016131B2 (en) * | 2014-11-14 | 2018-07-10 | Sensomotoric Instruments Gesellschaft Fur Innovative Sensorik Mbh | Eye tracking system and method to detect the dominant eye |
| CN107683446B (en) * | 2015-03-13 | 2020-11-03 | 苹果公司 | Method for automatically identifying at least one user of an eye tracking device and eye tracking device |
| KR20180057693A (en) * | 2015-09-24 | 2018-05-30 | 토비 에이비 | Eye wearable wearable devices |
| US9983709B2 (en) * | 2015-11-02 | 2018-05-29 | Oculus Vr, Llc | Eye tracking using structured light |
| KR101732618B1 (en) * | 2016-02-02 | 2017-05-08 | 동국대학교 산학협력단 | Device and method for gaze tracking |
| KR101857466B1 (en) * | 2017-06-16 | 2018-05-15 | 주식회사 비주얼캠프 | Head mounted display and method for calibrating the same |
| TWI704501B (en) * | 2018-08-09 | 2020-09-11 | 宏碁股份有限公司 | Electronic apparatus operated by head movement and operation method thereof |
-
2019
- 2019-10-22 EP EP19204663.9A patent/EP3656285B1/en active Active
- 2019-10-22 ES ES19204663T patent/ES2945789T3/en active Active
- 2019-11-12 CN CN201911099824.8A patent/CN111190482B/en active Active
- 2019-11-12 US US16/681,030 patent/US10936063B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN111190482B (en) | 2024-01-26 |
| US10936063B2 (en) | 2021-03-02 |
| CN111190482A (en) | 2020-05-22 |
| EP3656285B1 (en) | 2023-04-19 |
| EP3656285A1 (en) | 2020-05-27 |
| US20200192474A1 (en) | 2020-06-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| ES2945789T3 (en) | Method and device for calibrating an oculometer | |
| ES2793574T3 (en) | Automated eye alignment detection | |
| ES2886136T3 (en) | System for measuring the refractive error of an eye based on the subjective measurement of distances | |
| US10702148B2 (en) | Component, computer program, system, and kit for corrective lens determination | |
| ES2952550T3 (en) | Image overlay for registration of a patient's eye for laser surgery | |
| JP6631951B2 (en) | Eye gaze detection device and eye gaze detection method | |
| ES2754310T3 (en) | Aid procedure for determining the vision parameters of a subject | |
| ES2853524T3 (en) | Ophthalmic surgical image processing | |
| KR20180105879A (en) | Server and method for diagnosing dizziness using eye movement measurement, and storage medium storin the same | |
| CN111295129A (en) | Visual acuity examination | |
| ES2939003T3 (en) | Method and system for estimation of 3D position of the cornea | |
| JP6324119B2 (en) | Rotation angle calculation method, gazing point detection method, information input method, rotation angle calculation device, gazing point detection device, information input device, rotation angle calculation program, gazing point detection program, and information input program | |
| JP2014042806A (en) | Gaze line measuring method, gaze line measuring device, eyeball turning point measuring method and eye point measuring device | |
| ES2926953T3 (en) | Train an eye tracking model | |
| WO2017179280A1 (en) | Eye tracking device and eye tracking method | |
| BR112016013392B1 (en) | PROCESS TO CONTROL THE FITTING CONFORMITY OF A FRAME AND CORRECTIVE LENSES AND CONTROL DEVICE TO CARRY OUT THE PROCESS | |
| RU2271783C1 (en) | Method for determining eye prosthesis mobility | |
| CN116195967A (en) | Pupil distance measuring method and device, computer equipment and storage medium | |
| CN114266817A (en) | Fluorescent depth image synthesis method and device, electronic equipment and storage medium | |
| CN116211241A (en) | Human eye automatic alignment method, device, computer equipment and storage medium | |
| CN114513983A (en) | Method and system for determining a prescription for an eye of a person |