ES2326503B2 - ACCESS SYSTEM TO A COMPUTER BASED ON VOLUNTARY WINDS. - Google Patents
ACCESS SYSTEM TO A COMPUTER BASED ON VOLUNTARY WINDS. Download PDFInfo
- Publication number
- ES2326503B2 ES2326503B2 ES200601762A ES200601762A ES2326503B2 ES 2326503 B2 ES2326503 B2 ES 2326503B2 ES 200601762 A ES200601762 A ES 200601762A ES 200601762 A ES200601762 A ES 200601762A ES 2326503 B2 ES2326503 B2 ES 2326503B2
- Authority
- ES
- Spain
- Prior art keywords
- voluntary
- winks
- allows
- control
- application
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000002747 voluntary effect Effects 0.000 title claims abstract description 16
- 238000001514 detection method Methods 0.000 claims abstract description 27
- 238000001914 filtration Methods 0.000 claims abstract description 8
- 230000003321 amplification Effects 0.000 claims abstract description 7
- 238000003199 nucleic acid amplification method Methods 0.000 claims abstract description 7
- 238000012545 processing Methods 0.000 claims description 11
- 230000004913 activation Effects 0.000 claims description 5
- 238000001994 activation Methods 0.000 claims description 5
- 239000011159 matrix material Substances 0.000 claims description 4
- 238000012549 training Methods 0.000 claims description 3
- 210000004087 cornea Anatomy 0.000 claims description 2
- 238000000034 method Methods 0.000 abstract description 13
- 239000011521 glass Substances 0.000 abstract description 7
- 230000004424 eye movement Effects 0.000 abstract description 4
- 230000008569 process Effects 0.000 abstract description 3
- 239000002184 metal Substances 0.000 description 7
- 238000004891 communication Methods 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 239000000047 product Substances 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 206010065042 Immune reconstitution inflammatory syndrome Diseases 0.000 description 1
- 208000012902 Nervous system disease Diseases 0.000 description 1
- 208000025966 Neurological disease Diseases 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 238000009792 diffusion process Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000005684 electric field Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000005284 excitation Effects 0.000 description 1
- 208000030533 eye disease Diseases 0.000 description 1
- 230000000193 eyeblink Effects 0.000 description 1
- 239000012467 final product Substances 0.000 description 1
- 230000004886 head movement Effects 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 235000013490 limbo Nutrition 0.000 description 1
- 210000004279 orbit Anatomy 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000010349 pulsation Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000004461 rapid eye movement Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61F—FILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
- A61F4/00—Methods or devices enabling patients or disabled persons to operate an apparatus or a device not forming part of the body
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Heart & Thoracic Surgery (AREA)
- General Physics & Mathematics (AREA)
- Biomedical Technology (AREA)
- Physics & Mathematics (AREA)
- Vascular Medicine (AREA)
- Life Sciences & Earth Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Position Input By Displaying (AREA)
Abstract
Sistema de acceso a un ordenador basado en guiños voluntarios.Computer access system based on voluntary winks.
La presente invención tiene por objeto un sistema que permite el acceso a un ordenador por personas discapacitadas cuya capacidad motora se ve reducida a la región ocular. El usuario interactúa con un ordenador a través de un sistema de detección de guiños voluntarios que utiliza emisores y receptores de infrarrojos montados en unos raíles que se han instalado en unas gafas y que se encuentran enfocados hacia el centro del ojo. Los parpadeos, guiños o movimientos oculares son detectados por los receptores, que envían sus señales al sistema de detección, el cual, tras un proceso de demodulación, filtrado y amplificación, genera una señal de tensión que es digitalizada y tratada por un microcontrolador.The present invention aims at a system that allows access to a computer by people disabled whose motor capacity is reduced to the region ocular. The user interacts with a computer through a voluntary wink detection system that uses emitters and infrared receivers mounted on rails that have been installed in glasses and that are focused on the eye center Blinks, winks or eye movements are detected by the receivers, which send their signals to the system of detection, which, after a demodulation process, filtering and amplification, generates a voltage signal that is digitized and treated by a microcontroller.
La invención también se distingue por implementar la parte del control del PC en el propio PC y por minimizar el tiempo de latencia con objeto de reducir la fatiga del usuario.The invention is also distinguished by implement the control part of the PC on the PC itself and by minimize latency time in order to reduce fatigue of Username.
Description
Sistema de acceso a un ordenador basado en guiños voluntarios.Computer access system based on voluntary winks.
La presente invención tiene por objeto un sistema que permite el acceso a un ordenador por personas discapacitadas cuya capacidad motora se ve reducida a la región ocular. El usuario interactúa con un ordenador a través de un sistema de detección de guiños voluntarios que utiliza emisores y receptores de infrarrojos montados en unos raíles que se han instalado en unas gafas y que se encuentran enfocados hacia el centro del ojo. Los parpadeos, guiños o movimientos oculares son detectados por los receptores, que envían sus señales al sistema de detección, el cual, tras un proceso de demodulación, filtrado y amplificación, genera una señal de tensión que es digitalizada y tratada por un microcontrolador.The present invention aims at a system that allows access to a computer by people disabled whose motor capacity is reduced to the region ocular. The user interacts with a computer through a voluntary wink detection system that uses emitters and infrared receivers mounted on rails that have been installed in glasses and that are focused on the eye center Blinks, winks or eye movements are detected by the receivers, which send their signals to the system of detection, which, after a demodulation process, filtering and amplification, generates a voltage signal that is digitized and treated by a microcontroller.
La invención también se distingue por implementar la parte del control del PC en el propio PC y por minimizar el tiempo de latencia con objeto de reducir la fatiga del usuario.The invention is also distinguished by implement the control part of the PC on the PC itself and by minimize latency time in order to reduce fatigue of Username.
Existen varias técnicas para la detección de eventos oculares. La mayor parte de ellas, derivadas de otras, más sofisticadas, que buscan obtener la zona sobre la que un sujeto mira, dependiendo de la posición del ojo. Una buena introducción a las distintas técnicas de medición de la posición ocular aparece en (1), donde son clasificadas en tres grandes bloques: basadas en luz reflejada, en potenciales eléctricos y en lentes de contacto, y que, a continuación, se describen brevemente.There are several techniques for the detection of eye events Most of them, derived from others, more sophisticated, seeking to obtain the area on which a subject look, depending on the position of the eye. A good introduction to the different techniques of measuring the ocular position appears in (1), where they are classified into three large blocks: based on light reflected, in electrical potentials and in contact lenses, and which, below, are briefly described.
- --
- Las basadas en luz reflejada utilizan como iluminación luz infrarroja y la detección es determinada por dos métodos distintos: cámaras de video adaptadas a la luz infrarroja o, simplemente, sensores de infrarrojos. La más habitual es la primera, que requiere procesamiento de imágenes y, dependiendo de qué parte de la imagen recibida se procesa, se clasifica en: reflexión de limbos, reflexión de pupila, relación entre la reflexión de la córnea y la pupila, reflexión de las imágenes de Purkinje. Todas ellas se encuadran dentro de la denominada video-oculografía (VOG) que también trabaja con cámaras o webcam con iluminación ambiental. La mayoría de las empresas del sector muestran productos de éste tipo. La segunda técnica, la basada por sensores infrarrojos, es la utilizada en el sistema desarrollado y la de menor difusión en el mercado, existiendo pocos equipos y bastante caros. En (2) se muestra una empresa que comercializa un dispositivo similar, basado en el mismo principio, aplicado al estudio clínico del ojo.The based on reflected light use infrared light as lighting and detection is determined by two different methods: cameras video adapted to infrared light or simply sensors infrared The most common is the first, which requires image processing and, depending on what part of the image received is processed, classified in: limbo reflection, Pupil reflection, relationship between the reflection of the cornea and the pupil, reflection of Purkinje images. They all know fit within the so-called video-oculography (VOG) that also works with cameras or webcam with lighting environmental. Most companies in the sector show products of this type. The second technique, the sensor based infrared, is the one used in the developed system and that of less diffusion in the market, there are few teams and quite expensive In (2) a company that markets a similar device, based on the same principle, applied to the clinical study of the eye.
- --
- La técnica basada en potenciales eléctricos (EOG) utiliza electrodos situados en posiciones próximas a las cuencas de los ojos y detectan el campo eléctrico que genera el dipolo ocular. El movimiento ocular provoca una rotación del dipolo que es detectado con un cambio de potencial en los electrodos.The electric potential based technique (EOG) uses electrodes located in positions close to the eye sockets and detect the electric field generated by the eye dipole. The movement eyepiece causes a dipole rotation that is detected with a potential change in the electrodes.
- --
- La última técnica utiliza lentes de contacto en las que se insertan micro-espejos que permiten reflejar una luz incidente. Dependiendo de la posición del ojo, la luz reflejada variará en intensidad. La medición de ésta determinará la posición del ojo. Una variante de esta técnica es la que utiliza núcleos magnéticos insertados en las lentes de contacto. La posición del ojo se determina mediante sofisticados sistemas de medición electromagnética situados en la cabeza.The latest technique uses contact lenses in which they are inserted micro-mirrors that reflect a light incident. Depending on the position of the eye, the reflected light It will vary in intensity. The measurement of this will determine the position Of the eye. A variant of this technique is the one that uses cores magnetic inserts in the contact lenses. The position of eye is determined by sophisticated measurement systems electromagnetic located in the head.
Las aplicaciones de las técnicas de detección de la mirada son muy diversas. Se han utilizado estas técnicas con fines sociológicos (estudios sobre qué miran determinados sujetos ante una imagen proyectada), publicitarios (en el mismo sentido que el anterior), clínico-médicas (determinación de enfermedades oculares o neurológicas), de accesibilidad (permitir el control de determinadas aplicaciones o dispositivos por personas con grados elevados de discapacidad), etc.The applications of detection techniques The look are very diverse. These techniques have been used with sociological purposes (studies on what certain subjects look at before a projected image), advertising (in the same sense as the former), clinical-medical (determination of eye or neurological diseases), of accessibility (allow control of certain applications or devices by people with high degrees of disability), etc.
Los aspectos de accesibilidad han sido (y lo están siendo) objeto de interés tecnológico durante los últimos años. Existen numerosas publicaciones en este ámbito y, actualmente, existen también casas comerciales que han sacado algunos productos relacionados. Hay que destacar que la gran mayoría de dispositivos e investigaciones, se han basado en la detección de la mirada mediante técnicas VOG y EOG, para el manejo de determinadas aplicaciones específicas orientadas, fundamentalmente, a la escritura de texto.The accessibility aspects have been (and what are being) object of technological interest during the last years. There are numerous publications in this area and, Currently, there are also commercial houses that have taken out Some related products. It should be noted that the vast majority of devices and investigations, have been based on the detection of the look through VOG and EOG techniques, for the management of certain specific applications oriented, fundamentally, to text writing.
Un sistema basado en EOG ha sido desarrollado en la EUP de la U. Alcalá (3) para el control de una silla de ruedas eléctrica. También, como aplicación del sistema, se permite la escritura de texto utilizando una aplicación particular para el PC.An EOG based system has been developed in the EUP of the U. Alcalá (3) for the control of a wheelchair electric Also, as an application of the system, the writing text using a particular application for PC
Sistemas que permiten a discapacitados la escritura de texto existen gran variedad. Destacamos (4), un dispositivo que, conectado a una impresora, permite la escritura del texto seleccionado mediante unas gafas sobre las que se han montado unos diodos de infrarrojos. La dirección de la mirada permite la selección de la letra situada en una matriz de 7x6 en el propio dispositivo y ordenada según la frecuencia de uso de las letras en un lenguaje concreto. Existe el barrido horizontal y vertical. Se usan opciones adicionales para controles de iluminación, etc. Es un dispositivo de "bolsillo", lo que lo hace fácilmente transportable por el discapacitado, pero no dispone de conectividad con un PC.Systems that allow disabled people the Text writing there are great variety. We highlight (4), a device that, connected to a printer, allows writing of the selected text by means of glasses on which mounted infrared diodes. The direction of the look allows the selection of the letter located in a 7x6 matrix in the own device and ordered according to the frequency of use of the letters in a specific language. There is the horizontal sweep and vertical. Additional options are used for controls lighting, etc. It is a "pocket" device, which makes it easily transportable by the disabled, but does not have of connectivity with a PC.
Una aplicación de PC interesante para la escritura rápida de texto controlada por el ratón, y de libre distribución es Dasher (5). Consiste en que el texto va saliendo por la derecha de la pantalla a mayor o menor velocidad dependiendo de la cercanía del ratón al extremo derecho de la pantalla. Incorpora un sistema predictivo que, a medida que se van seleccionando letras, agrupa las letras que faltan para completar una posible palabra. Esta aplicación se apoya en cualquier sistema de medición que permita el control del ratón. Como ejemplo, sus diseñadores, han utilizado un sistema basado en VOG para la detección de la mirada.An interesting PC application for the fast typing of text controlled by the mouse, and free distribution is Dasher (5). It is that the text is coming out on the right of the screen at a higher or lower speed depending from the proximity of the mouse to the right end of the screen. It incorporates a predictive system that, as they leave selecting letters, group the missing letters to complete A possible word. This application is supported on any system of measurement that allows the control of the mouse. As an example, your designers have used a VOG based system for the look detection
Otro sistema para la escritura rápida de caracteres se muestra en (6), basados en mediciones horizontal y vertical de la mirada mediante diodos de infrarrojos montados en unas gafas. El sistema dispone de una pantalla sobre la que se proyectan los caracteres seleccionados por el usuario. Ambos sistemas requieren calibración cada vez que se utilicen por un mismo sujeto y no permiten el manejo de cualquier aplicación del PC.Another system for fast writing of characters shown in (6), based on horizontal measurements and vertical look through infrared diodes mounted on glasses The system has a screen on which Project the characters selected by the user. Both of them systems require calibration every time they are used by a same subject and do not allow the handling of any application of the PC
En (7) se presenta un estudio de comunicación mediante guiños voluntarios. El sistema utilizado para la obtención de la señal es VOG y muestra la posibilidad de utilizar una aplicación de escritura específica seleccionando palabras mediante secuencias de guiños de distinta duración, a modo de lenguaje "morse". Tampoco permite el control de cualquier aplicación del PC.In (7) a communication study is presented through voluntary winks. The system used to obtain of the signal is VOG and shows the possibility of using a specific writing application by selecting words by wink sequences of different duration, by way of language "Morse". Nor does it allow control of any application of the PC.
El sistema EagleEyes (8) se basa en EOG para controlar un PC mediante el control del cursor del mismo. Se requiere un dispositivo externo y un software de configuración y calibración. Permite el manejo del ratón tanto por mirada como por movimientos leves de cabeza. Requiere de calibración cada vez que se utilice el sistema.The EagleEyes system (8) is based on EOG to Control a PC by controlling the cursor on it. Be requires an external device and configuration software and calibration. It allows the mouse to be handled both by look and by slight head movements. Requires calibration every time Use the system.
En (9), se muestra un dispositivo que permite a un usuario emular el ratón y el teclado de un ordenador, lo que le posibilita la aplicación de cualquier aplicación del mismo. No obstante, el método utilizado se basa en un pulsador mecánico, y una pantalla gráfica, distinta a la del ordenador, acoplada en una silla de ruedas, con la que se permite seleccionar diferentes acciones a partir de las pulsaciones. Dichas acciones se traducen en el envío de las señales eléctricas equivalentes a las que generarían un ratón o un teclado convencionales.In (9), a device that allows a user emulate the mouse and keyboard of a computer, which enables the application of any application thereof. Do not However, the method used is based on a mechanical button, and a graphic display, different from that of the computer, coupled in a wheelchair, with which you can select different actions from the pulsations. These actions translate into sending the electrical signals equivalent to those They would generate a conventional mouse or keyboard.
Figura 1.- Diagrama de bloques de la arquitectura del sistema de detección de guiños voluntarios. Figure 1.- Block diagram of the architecture of the voluntary wink detection system.
- 1. one.
- UsuarioUsername
- 2. 2.
- Generador de relojClock generator
- 3. 3.
- AmplificaciónAmplification
- 4. Four.
- Filtrado paso de bandaBandpass Filtering
- 5. 5.
- Multiplicador analógicoAnalog multiplier
- 6. 6.
- Filtrado paso de bajaLow pass filtering
- 7. 7.
- Etapa de amplificación y offset regulableAdjustable amplification and offset stage
- 8. 8.
- Conversión ADAD conversion
- 9. 9.
- MicrocontroladorMicrocontroller
- 10. 10.
- Interfaz paraleloParallel interface
- 11. eleven.
- Interfaz serieSerial interface
- 12. 12.
- Interfaz con los diodosDiode interface
- 13. 13.
- Fuente de alimentaciónPower supply
- 14. 14.
- Cable de alimentaciónPower cord
- 15. fifteen.
- Potenciómetros de ajusteAdjustment potentiometers
- 16. 16.
- Diodos de visualizaciónDisplay diodes
- 17. 17.
- Conector BCN de salida en tensiónBCN voltage output connector
Figura 2.- Detalle del sistema de soporte de los diodos y fototransistores. Figure 2.- Detail of the support system of the diodes and phototransistors.
- 20. twenty.
- Tornillo pasanteThrough screw
- 21. twenty-one.
- Eje metálicoMetal shaft
- 22. 22
- Chapa circularCircular plate
- 23. 2. 3.
- Cilindro metálicoMetal cylinder
- 24. 24.
- Monturas de plásticoPlastic frames
- 25. 25.
- Tornillo de fijaciónFixing screw
- 26. 26.
- Hueco para el tornillo de fijaciónFixing screw hole
Figura 3.- Diagrama de bloques del programa de control del PC. Figure 3.- Block diagram of the PC control program.
- 30. 30
- Estado inicialInitial state
- 31. 31.
- Estado intermedioIntermediate state
- 32. 32
- Estado finalFinal state
La presente invención permite el acceso a un ordenador por personas discapacitadas cuya capacidad motora se ve reducida a la región ocular. El usuario interactúa con un ordenador a través del sistema de detección de guiños voluntarios, aunque también sirven los movimientos oculares rápidos en dirección vertical, y una aplicación específica que corre en el sistema operativo Windows. El sistema de detección está basado en la emisión, reflexión y recepción de un haz de infrarrojos montados en unos raíles que se han instalado en unas gafas sobre las que se han situado unos diodos emisores y receptores de infrarrojos y que se encuentran enfocados hacia el centro del ojo. El sistema de detección se comunica al sistema de procesado a través de un bus de entradas/salidas analógicas para el control de los diodos y fototransistores ubicados en unos cilindros móviles a lo largo de los raíles que atraviesan las monturas de las gafas.The present invention allows access to a computer for disabled people whose motor capacity is seen reduced to the ocular region. The user interacts with a computer through the voluntary wink detection system, although they also serve the rapid eye movements in the direction vertical, and a specific application that runs in the system Windows operating. The detection system is based on the emission, reflection and reception of an infrared beam mounted on rails that have been installed in glasses on which they have located some infrared emitting and receiving diodes and that They are focused towards the center of the eye. System detection is communicated to the processing system through a bus analog inputs / outputs for diode control and phototransistors located in mobile cylinders along the rails that cross the frames of the glasses.
Para cada ojo se han montado, pues, dos raíles sobre los que los cilindros metálicos que soportan los dispositivos se pueden desplazar verticalmente. Los cilindros, además del desplazamiento a lo largo del raíl pueden girar sobre éste, lo que les confiere dos grados de libertad muy útiles para conseguir un buen ajuste del sistema de procesado. Con el movimiento vertical (cilindro desplazándose a lo largo del eje) se permite ubicar el emisor o el receptor de manera centrada con el ojo. Con el movimiento de rotación, se permite el enfoque hacia el centro del ojo. Un raíl soporta al emisor y el otro al receptor con una separación suficiente como para no perder la visión frontal.Two rails have been mounted for each eye on which the metal cylinders that support the devices They can move vertically. The cylinders, in addition to the displacement along the rail can rotate on it, which it gives them two very useful degrees of freedom to get a Good adjustment of the processing system. With vertical movement (cylinder moving along the axis) it is allowed to locate the sender or receiver centered with the eye. With the rotation movement, focus is allowed towards the center of the eye. One rail supports the sender and the other the receiver with a enough separation not to lose frontal vision.
Los receptores reciben, tanto la radiación infrarroja emitida por el emisor, como la natural existente en el ambiente (de baja frecuencia) como la artificial suministrada por las luminarias de interior (de 100 Hz). Con objeto de poder distinguir adecuadamente la fuente de infrarrojos montada en las gafas frente a las demás, ésta se genera de forma pulsada a una frecuencia de 2.5 KHz, muy superior a la de las otras fuentes. Por consiguiente, la señal que se deberá procesar se corresponderá con la que tenga una pulsación cuadrada de alta frecuencia.The receptors receive both radiation infrared emitted by the emitter, such as the natural existing in the ambient (low frequency) like the artificial one supplied by indoor luminaires (100 Hz). In order to power properly distinguish the infrared source mounted on the glasses in front of the others, this one is generated in a pulsed way to a 2.5 KHz frequency, much higher than that of the other sources. By consequently, the signal to be processed will correspond to the one with a high frequency square pulse.
El sistema de procesado cuenta con una fuente de alimentación interna, un conjunto de indicadores luminosos que permiten avisar de la detección correcta de un guiño, un sistema de amplificación y filtrado de las señales procedente del sistema de detección y un microcontrolador.The processing system has a source of internal power, a set of indicator lights that allow to warn of the correct detection of a wink, a system of amplification and filtering of signals from the system detection and a microcontroller.
El microcontrolador implementa un algoritmo de detección que busca la generación de una señal binaria asociada a la detección o no, de un guiño voluntario, permitiendo la detección robusta de guiños, eliminando parpadeos involuntarios y señales espúreas procedentes de cualquier otro tipo de movimiento ocular no vertical o de cabeza (si éste existiera). El algoritmo realiza en el siguiente orden y a partir de la señal digitalizada, las siguientes operaciones: a) un filtrado digital (valor medio de las últimas 16 muestras), b) diferenciación de la señal para la obtención de las pendientes, c) trinarización (1,0,-1) de la señal de pendientes utilizando umbrales ajustables a cada usuario y d) el procesado de la señal trinaria mediante una máquina de estados también parametrizable que decide sobre la concurrencia de un guiño voluntario y el filtrado de los parpadeos involuntarios.The microcontroller implements an algorithm of detection that seeks the generation of a binary signal associated with the detection or not, of a voluntary wink, allowing the detection robust winks, eliminating involuntary flickers and signals spurs from any other type of eye movement not vertical or head (if it exists). The algorithm performs in the following order and from the digitized signal, the following operations: a) digital filtering (average value of the last 16 samples), b) differentiation of the signal to obtain the slopes, c) trinarization (1,0, -1) of the slope signal using thresholds adjustable to each user and d) the processing of the trinary signal through a state machine also parametrizable that decides on the concurrence of a wink voluntary and involuntary flicker filtering.
Mediante un bus de salida que se conecta con el puerto paralelo del PC, el sistema transmite los valores binarios asociados a la detección o no de un guiño voluntario, a través de un programa de control que traduce el valor de la entrada del puerto paralelo del PC a códigos de tecla virtual y su introducción en la cola de mensajes del sistema operativo del PC.Through an output bus that connects to the parallel port of the PC, the system transmits binary values associated with the detection or not of a voluntary wink, through a control program that translates the input value of the parallel port of the PC to virtual key codes and their introduction in the message queue of the PC operating system.
El programa de control dispone de un teclado matricial de 4x4 teclas en la pantalla del PC consiguiéndose la selección de una tecla mediante dos activaciones consecutivas recibidas por el puerto paralelo. Cada tecla puede contener letras para la edición de textos o funciones especiales para el manejo del entorno y, para el caso de escritura de texto, se permite la predicción de la palabra buscada en función del número de letras seleccionadas.The control program has a keyboard 4x4 key matrix on the PC screen getting the one key selection by two consecutive activations received by the parallel port. Each key can contain letters for the edition of texts or special functions for the management of environment and, in the case of text writing, the prediction of the searched word based on the number of letters selected.
El sistema dispone de una aplicación de ajuste, un bus de entrada/salida que se conecta al puerto serie del PC, para la configuración del sistema y el entrenamiento del usuario, visualización de la señal adquirida, los parámetros ajustables y los resultados del procesamiento de la señal mediante indicadores luminosos.The system has an adjustment application, an input / output bus that connects to the serial port of the PC, for system configuration and user training, Display of acquired signal, adjustable parameters and Signal processing results through indicators bright.
La presente invención presenta la ventaja de que el sistema sólo requiere un ajuste inicial sencillo y para siempre, que lo diferencia de otros sistemas similares que requieren continuas calibraciones. La invención también presenta la ventaja de implementar la parte del control del PC en el propio PC (ventana con teclado reducido y gestión de mensajes de teclas virtuales), lo que permite el abaratamiento del producto final. Asimismo, se ha buscado la minimización del tiempo de latencia (tiempo que el usuario emplea en la escritura de una palabra o un comando) con objeto de reducir la fatiga del usuario.The present invention has the advantage that the system only requires a simple initial setup and forever, that differentiates it from other similar systems that require continuous calibrations. The invention also has the advantage to implement the control part of the PC on the PC itself (window with reduced keyboard and virtual key message management), what which allows the lowering of the final product. It also has sought minimization of latency time (time that the user employs in writing a word or a command) with in order to reduce user fatigue.
Para una mejor comprensión de la invención, seguidamente se realizará un modo de realización del sistema:For a better understanding of the invention, Next, an embodiment of the system will be carried out:
En unas monturas de plástico (24), se instalan cuatro ejes metálicos (21) cortados a medida y dispuestos verticalmente por parejas y con una separación suficiente como para no reducir excesivamente la visión. A un cilindro metálico (23) se le practica una perforación (26) y se le suelda una chapa metálica de forma circular (22) con el diámetro adecuado para sustentar un diodo o un fototransistor. El cilindro metálico (23) confiere al diodo o al fototransistor, dos grados de libertad (movimiento longitudinal vertical y rotacional sobre el eje). El tornillo (25) permite fijar la posición del cilindro (23).In plastic frames (24), they are installed four metal shafts (21) cut to size and arranged vertically in pairs and with a sufficient separation to Do not excessively reduce vision. To a metal cylinder (23) is he is perforated (26) and a metal plate is welded circular in shape (22) with the appropriate diameter to support a diode or a phototransistor. The metal cylinder (23) gives the diode or phototransistor, two degrees of freedom (movement longitudinal vertical and rotational on the axis). The screw (25) allows to set the position of the cylinder (23).
Los diodos y los fototransistores se sueldan a un cable plano (12) que finaliza en un conector que se adapta a la entrada del sistema de detección. La selección de los cables para los diodos de excitación y los fototransistores se realizará siguiendo criterios que reduzcan interferencias entre los mismos. El bloque (2) genera la señal de reloj a 2.5 Khz que se utilizará uno para la activación de los diodos y otro, por el multiplicador (5) en la fase de demodudación.Diodes and phototransistors are soldered to a flat cable (12) that ends in a connector that adapts to the detection system input. The selection of cables for the excitation diodes and phototransistors will be performed following criteria that reduce interference between them. He block (2) generates the clock signal at 2.5 Khz that one will be used for the activation of the diodes and other, by the multiplier (5) in the demodudation phase.
La señal recibida por los fototransistores pasa por los siguientes bloques: (3) amplificador, (4) filtro paso de banda sintonizado con la frecuencia de activación de los diodos, (5) multiplicador analógico, (6) filtro paso de baja, (7) etapa de amplificación y offset regulable mediante sendos potenciómetros (15) situados en el frontal del sistema y cuya salida se muestra en el conector (17), (8) convertidor analógico/digital y (9) microcontrolador, el cual, actúa señalizando los guiños detectados mediante un diodo LED (16) externo y a través del cable (10) hacia el puerto paralelo del ordenador. Mediante el cable (11) conectado al puerto serie del PC, se posibilita la parametrización del algoritmo de detección residente en la memoria del microcontrolador (9). La fuente de alimentación (13), conectada a 220 V mediante un cable normal de red (14) genera la tensión necesaria para cada uno de los dispositivos que constituyen el sistema.The signal received by the phototransistors passes by the following blocks: (3) amplifier, (4) step filter band tuned to the frequency of activation of the diodes, (5) analog multiplier, (6) low pass filter, (7) stage of amplification and offset adjustable by means of two potentiometers (15) located on the front of the system and whose output is shown in the connector (17), (8) analog / digital converter and (9) microcontroller, which acts by signaling the winks detected by means of an external LED (16) and through the cable (10) towards The parallel port of the computer. Via the cable (11) connected to the serial port of the PC, the parameterization of the microcontroller memory resident detection algorithm (9). The power supply (13), connected to 220 V by means of a normal network cable (14) generates the necessary voltage for each of the devices that constitute the system.
El software de ajuste mostrará la señal asociada a un guiño y permitirá el manejo de los potenciómetros con el fin de que dicha señal tenga niveles adecuados. Asimismo, permitirá la configuración del tiempo de duración del guiño y otros parámetros, anteriormente descritos, utilizando el enlace serie (11) que une el PC con el sistema de detección. Este software no es esencial, puesto que un polímetro conectado a (17) y cualquier software que permita el uso del puerto serie, pueden realizar las mismas funciones salvo las de entrenamiento.The adjustment software will show the associated signal to a wink and will allow the potentiometers to be handled in order that said signal has adequate levels. It will also allow wink duration setting and other parameters, previously described, using the serial link (11) that joins the PC with the detection system. This software is not essential, since a multimeter connected to (17) and any software that allow the use of the serial port, they can perform the same functions except training.
El software de gestión comprueba la activación de algunas de las líneas (10) de entrada del puerto paralelo y muestra un teclado matricial 4x4 siempre en primer plano. Su funcionamiento se resume, grosso modo, con el diagrama de bloques representado en la Figura 3. Inicialmente se arranca en el bloque (30) donde se inicia el barrido vertical cíclico del teclado. Un evento en el puerto paralelo provoca la selección de la fila por la que el barrido pasaba y la transición al bloque (31), en el que se procede al barrido horizontal cíclico. En (31) se dispara un temporizador, por el que si, transcurrido cierto tiempo, no se ha detectado un evento, se vuelve al bloque (30), borrando cualquier texto o comando seleccionado hasta el momento. Si en (31) se detecta un evento, se vuelve a (30), pero la letra, o el comando seleccionado, se muestra en una ventana asociada. La selección del comando ENTER en (31) provoca el paso al bloque (32) donde se procesa el texto o el grupo de comandos escritos, mandando los mensajes a la cola del sistema operativo. De (32) se vuelve a (30) borrando todo lo seleccionado previamente.The management software checks the activation of some of the parallel line input lines (10) and It shows a 4x4 matrix keyboard always in the foreground. its operation is summarized, roughly, with the block diagram represented in Figure 3. Initially it starts in the block (30) where the cyclical vertical scan of the keyboard starts. A event in the parallel port causes row selection by the that the sweep passed and the transition to block (31), in which proceeds to the cyclical horizontal scan. In (31) a timer, so if, after a certain time, it has not Once an event is detected, it returns to block (30), deleting any text or command selected so far. If in (31) you detects an event, returns to (30), but the letter, or the command selected, it is displayed in an associated window. The selection of ENTER command in (31) causes the step to block (32) where process the text or group of written commands, sending the messages to the operating system queue. From (32) it returns to (30) deleting everything previously selected.
Claims (5)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
ES200601762A ES2326503B2 (en) | 2006-06-26 | 2006-06-26 | ACCESS SYSTEM TO A COMPUTER BASED ON VOLUNTARY WINDS. |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
ES200601762A ES2326503B2 (en) | 2006-06-26 | 2006-06-26 | ACCESS SYSTEM TO A COMPUTER BASED ON VOLUNTARY WINDS. |
Publications (2)
Publication Number | Publication Date |
---|---|
ES2326503A1 ES2326503A1 (en) | 2009-10-13 |
ES2326503B2 true ES2326503B2 (en) | 2010-04-16 |
Family
ID=41112776
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
ES200601762A Active ES2326503B2 (en) | 2006-06-26 | 2006-06-26 | ACCESS SYSTEM TO A COMPUTER BASED ON VOLUNTARY WINDS. |
Country Status (1)
Country | Link |
---|---|
ES (1) | ES2326503B2 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102393796B (en) * | 2011-07-25 | 2014-06-18 | 金宇 | Control method based on winking-characteristic extraction and shooting spectacles based on the same |
ES2605053B1 (en) * | 2015-09-10 | 2017-12-19 | Universidad De Sevilla | Adaptive slight movement detection system for people with disabilities |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2075671B (en) * | 1980-05-09 | 1984-03-28 | Tamkin Elec Control Services | Control in response to eye closure for the handicapped |
ES2107937B1 (en) * | 1994-11-03 | 1998-08-01 | Univ Murcia | ENTRANCE PERIPHERAL TO A COMPUTER FOR DISABLED USERS. |
ES2124153B1 (en) * | 1995-10-31 | 1999-09-16 | Univ Valencia Politecnica | INTERFACE FOR EMULATION OF "MOUSE" AND KEYBOARD IN PC COMPUTERS FOR PHYSICAL DISABLED. |
ES2116910B1 (en) * | 1996-05-03 | 1999-02-16 | Amengual Colom Antonio | PROCEDURE AND DEVICE FOR THE ACTIVATION OF A SWITCH THROUGH THE EYE WINK. |
JPH11212715A (en) * | 1998-01-29 | 1999-08-06 | Shimadzu Corp | Line-of-sight input device |
FR2775588B1 (en) * | 1998-03-03 | 2000-08-11 | Jacques Patrick Andres | SYSTEM FOR ENABLING PEOPLE WITH DISABILITIES TO COMMUNICATE WITH THEIR ENVIRONMENT USING THE MOVEMENT OF THEIR EYES AND EYELIDS |
-
2006
- 2006-06-26 ES ES200601762A patent/ES2326503B2/en active Active
Non-Patent Citations (1)
Title |
---|
BASE DE DATOS WPI en EPOQUE, (Londres, GB), JP 11212715 A (SHIMADZU CORPORATION) 06.08.1999, resumen; figura 1. * |
Also Published As
Publication number | Publication date |
---|---|
ES2326503A1 (en) | 2009-10-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10353460B2 (en) | Eye and head tracking device | |
ES2669058T3 (en) | Eye detection system and method that uses sequential data flow | |
CN104603673B (en) | Head-mounted system and the method for being calculated using head-mounted system and rendering digital image stream | |
ES2271272T3 (en) | INTERACTIVE VIDEO DISPLAY SYSTEM. | |
US7572008B2 (en) | Method and installation for detecting and following an eye and the gaze direction thereof | |
US4950069A (en) | Eye movement detector with improved calibration and speed | |
Hutton | Eye tracking methodology | |
EP2008576A3 (en) | Topographic wavefront analysis system and method of mapping an optical system | |
CN1561179A (en) | Alertness monitor | |
Horvath et al. | FingerSight: Fingertip haptic sensing of the visual environment | |
WO2019095013A1 (en) | Training of vehicles to improve autonomous capabilities | |
CN106102566A (en) | For measuring the device of the infrared output of ABREU brain fever passage | |
CN104434022A (en) | optical array system and method for performing pupil tracking using retro-reflectivity | |
CN103793045B (en) | Pupil tracing device | |
Różanowski et al. | An infrared sensor for eye tracking in a harsh car environment | |
ES2326503B2 (en) | ACCESS SYSTEM TO A COMPUTER BASED ON VOLUNTARY WINDS. | |
CN112585663B (en) | Eyepiece, eye simulator device, human body simulator and training method | |
Baker et al. | Perceived movement in depth as a function of luminance and velocity | |
Gu et al. | A study on natural movement of artificial eye implant | |
Zhao | Micro-Scanning Mirror based Eye-tracking Technology | |
Lakshminarayanan | Ibn al-Haytham: Founder of Physiological Optics? | |
Yeung | Mouse cursor control with head and eye movements: A low-cost approach | |
Huang et al. | A data-driven approach for gaze tracking | |
US20200085291A1 (en) | Apparatus and a Method of Quantifying Visual Patterns | |
CN204410779U (en) | A kind of mancarried device for juvenile's Vision screening |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
EC2A | Search report published |
Date of ref document: 20091013 Kind code of ref document: A1 |
|
FG2A | Definitive protection |
Ref document number: 2326503B2 Country of ref document: ES |