FR3080697A1 - Procede et dispositif de detection d'un clignement d'une paupiere - Google Patents

Procede et dispositif de detection d'un clignement d'une paupiere Download PDF

Info

Publication number
FR3080697A1
FR3080697A1 FR1853652A FR1853652A FR3080697A1 FR 3080697 A1 FR3080697 A1 FR 3080697A1 FR 1853652 A FR1853652 A FR 1853652A FR 1853652 A FR1853652 A FR 1853652A FR 3080697 A1 FR3080697 A1 FR 3080697A1
Authority
FR
France
Prior art keywords
distance
eyelid
state
limit value
predetermined limit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
FR1853652A
Other languages
English (en)
Other versions
FR3080697B1 (fr
Inventor
Charlotte Airaud
Fabrice Ducloux
Erwan Larie-Kerboull
Maxime Loubar
Sarah Mougharbel
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Agece
Original Assignee
Agece
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Agece filed Critical Agece
Priority to FR1853652A priority Critical patent/FR3080697B1/fr
Publication of FR3080697A1 publication Critical patent/FR3080697A1/fr
Application granted granted Critical
Publication of FR3080697B1 publication Critical patent/FR3080697B1/fr
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1103Detecting eye twinkling
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/168Evaluating attention deficit, hyperactivity
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802Sensor mounted on worn items
    • A61B5/6803Head-worn items, e.g. helmets, masks, headphones or goggles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2503/00Evaluating a particular growth phase or type of persons or animals
    • A61B2503/20Workers
    • A61B2503/22Motor vehicles operators, e.g. drivers, pilots, captains
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6893Cars

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Biomedical Technology (AREA)
  • General Engineering & Computer Science (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Physics & Mathematics (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Developmental Disabilities (AREA)
  • Social Psychology (AREA)
  • Psychology (AREA)
  • Ophthalmology & Optometry (AREA)
  • Psychiatry (AREA)
  • Hospice & Palliative Care (AREA)
  • Educational Technology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Multimedia (AREA)
  • Physiology (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • User Interface Of Digital Computer (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

Un procédé (100) de détection de clignement d'un œil, qui comporte les étapes suivantes : - capture (11) d'une distance entre un capteur de distance et une paupière lorsque la paupière est dans un premier état, - détermination (12) d'une distance moyenne entre le capteur et la paupière dans le premier état, en fonction de la une distance capturée, - mesure (13) d'une distance entre le capteur et la paupière, - comparaison (14) de la distance mesurée avec une valeur limite, si la distance est inférieure à la valeur limite, un deuxième état de la paupière est détecté correspondant à un clignement, si la distance est supérieure à la valeur limite, la paupière est dans le premier état, - calcul (17) d'une moyenne de la distance mesurée entre le capteur et la paupière sur plusieurs changements du premier au deuxième état récents pour détecter un changement de la fatigue de l'utilisateur et - ajustement (18) de la valeur limite en fonction de la distance moyenne calculée pour faire correspondre la détection de clignements avec la fatigue de l'utilisateur.

Description

DOMAINE TECHNIQUE DE L’INVENTION
La présente invention vise un procédé et un dispositif de détection de clignement d’une paupière d’au moins un œil. Elle s’applique, notamment, à la communication pour personnes handicapées au moyen de clignements d’œil. Plus particulièrement, la présente invention s’applique pour améliorer le confort de vie des personnes atteintes de la Sclérose Latérale Amyotrophique (d’acronyme « SLA ») aussi connue sous le nom de maladie de Charcot.
ÉTAT DE LA TECHNIQUE
De nombreux dispositifs ayant pour vocation d’aider les personnes atteintes de SLA existent actuellement. La plupart de ces dispositifs utilisent le mouvement des yeux de l’utilisateur pour permettre à l’utilisateur de naviguer au sein d’une interface et de communiquer. Le problème quant à l’utilisation du mouvement des yeux pour diriger le dispositif, survient pour les personnes qui n’arrivent pas à accomplir certains mouvements des yeux, et qui, donc, n’accèdent pas à certaines fonctionnalités. Par exemple, si la fonctionnalité est « Regardez dans le coin à droite pour retourner à la page précédente », l’utilisateur reste bloqué sur la page actuelle et nécessite une assistance pour utiliser l’application, ce qui réduit l’indépendance du patient.
La détection du mouvement des yeux nécessite par ailleurs une calibration rigoureuse et souvent longue, qui a tendance à décourager les patients qui utilisent donc peu ces dispositifs.
Enfin, un aspect non négligeable qui ne semble pas être pris en compte par les dispositifs existant actuellement est la baisse des facultés oculo-motrices de l’utilisateur due à la fatigue lors de l’utilisation du système. En effet, à force d’utiliser l’application, l’utilisateur se fatigue et peut accéder à de moins en moins de fonctionnalités, ou doit fournir plus d’effort pour y avoir accès. Or, si l’utilisateur ne peut correctement réaliser une commande, telle que « Regardez en haut à droite », il ne peut plus du tout utiliser l’application. À noter également, parfois il s’avère qu’à l’inverse, lors de certaines utilisations, l’utilisateur soit en forme et se retrouve frustré par la lenteur du dispositif qui ne s’adapte pas à ses facultés.
On connaît la demande de brevet internationale WO 2016 142 900, qui divulgue un procédé et un dispositif permettant à un utilisateur de communiquer à partir d’un signal émis par les yeux. Une interface présente une panoplie d’options de communication. Selon l’orientation des yeux de l’utilisateur, détectée grâce à un capteur infrarouge, une option de communication est sélectionnée. Chaque option de communication est associée à une orientation de l’œil. Ceci présente donc les inconvénients exprimés ci-dessus en termes d’adaptation aux facultés de l’utilisateur.
On connaît également la demande de brevet américaine US 2016/0 246 367, qui divulgue un dispositif qui à partir d’au moins un capteur et un contrôleur identifie une position d’un œil. Cette position est ensuite associée à une commande de l’utilisateur.
OBJET DE L’INVENTION
La présente invention vise à remédier à tout ou partie de ces inconvénients. Notamment, le procédé et le dispositif de la présente invention s’adaptent au niveau de fatigue de l’utilisateur et à sa morphologie pour calibrer automatiquement et rapidement le dispositif pour une utilisation facilitée tout au long de la durée d’utilisation du dispositif.
À cet effet, selon un premier aspect, la présente invention vise un procédé de détection de clignement d’une paupière d’au moins un œil d’un utilisateur, qui comporte les étapes suivantes :
- capture d’au moins une distance entre au moins un capteur de distance positionné en regard d’une paupière et ladite paupière lorsque la paupière est dans un premier état,
- détermination d’une distance moyenne entre ledit capteur de distance en regard de ladite paupière et ladite paupière lorsque la paupière est dans le premier état, en fonction d’au moins une distance capturée,
- mesure d’une distance entre ledit capteur de distance positionné en regard de ladite paupière et ladite paupière,
- comparaison de la distance mesurée avec une première valeur limite prédéterminée, si la distance mesurée est inférieure à la première valeur limite prédéterminée, un deuxième état de la paupière est détecté correspondant à un clignement, si la distance mesurée est supérieure ou égale à la première valeur limite prédéterminée, la paupière est considérée comme étant dans le premier état,
- calcul d’une moyenne de la distance mesurée entre ledit capteur et ladite paupière sur un nombre prédéterminé de changements du premier état au deuxième état détectés le plus récemment pour détecter un changement du niveau de fatigue de l’utilisateur et
- ajustement de la première valeur limite prédéterminée en fonction de la distance moyenne calculée pour faire correspondre la détection de clignements avec le niveau de fatigue de l’utilisateur.
Grâce à ces dispositions, une dérive sur les derniers clignements captés est calculée. La dérive est représentative d’une distance plus ou moins importante entre le capteur et la paupière, ce qui montre un effort plus ou moins grand fourni par l’utilisateur pour faire détecter un clignement. Comme la première valeur limite prédéterminée est adaptée en temps réel, l’effort fournit par l’utilisateur est sensiblement constant même si l’utilisateur fatigue. L’utilisateur a donc une utilisation similaire du procédé objet de la présente invention ou d’une application, sur un terminal portable communiquant, commandée par le procédé peut importe l’état de fatigue de l’utilisateur. Egalement, si l’utilisateur fournit moins d’efforts car il est moins fatigué, la première valeur limite prédéterminée est adaptée pour augmenter le confort d’utilisation de l’utilisateur.
De plus, la mesure des clignements est adaptée à la morphologie de l’utilisateur puisque la dérive est calculée de façon relative par rapport à une position « au repos », le premier état, au début de l’utilisateur du procédé objet de la présente invention.
Dans des modes de réalisation, le dispositif objet de la présente invention comporte, de plus, une étape de commande d’au moins un terminal portable communiquant, en fonction d’un changement d’état du premier état au deuxième état détecté.
L’avantage de ces modes de réalisation est de pouvoir commander une application de texte ou de lecture, par exemple.
Dans des modes de réalisation, l’étape de comparaison de la distance mesurée avec une première valeur limite prédéterminée comporte de plus :
- une étape d’évaluation d’une durée pendant laquelle la distance mesurée est inférieure à la première valeur limite prédéterminée et
- une étape de détection d’un type de commande en fonction d’un changement d’état du premier état au deuxième état et de la durée évaluée, chaque type de commande, envoyant une commande différente.
Ces modes de réalisation permettent d’avoir plusieurs types de commandes en fonction de la durée d’un clignement. Par exemple des clignements courts et longs peuvent être définis donnant lieu à des action de sélection différente, tels qu’une suppression d’une lettre, pour un clignement court ou de l’intégralité d’une phrase pour un clignement long.
Dans des modes de réalisation, le dispositif objet de la présente invention comporte, de plus, une phase de détermination de types de commandes accessibles à l’utilisateur, qui comporte :
- une étape d’émission d’une instruction de production d’un changement d’état d’une paupière de l’utilisateur entre un premier état et un deuxième état, correspondant à un type de commande,
- une étape capture d’au moins une distance entre au moins un capteur de distance positionné en regard d’une paupière et ladite paupière lorsque la paupière est dans le premier état,
- une étape détermination d’une distance moyenne entre ledit capteur de distance en regard de ladite paupière et ladite paupière lorsque la paupière est dans le premier état, en fonction d’au moins une distance capturée,
- une étape de mesure d’une distance entre ledit capteur de distance positionné en regard de ladite paupière et ladite paupière,
- une étape de comparaison de la distance mesurée avec une deuxième valeur limite prédéterminée,
- une étape de classement d’un type de commande :
- si la distance mesurée est inférieure à la deuxième valeur limite prédéterminée, le type de commande est inaccessible et
- si la distance mesurée est supérieure ou égale à la deuxième valeur limite prédéterminée, le type de commande accessible.
Grâce à ces dispositions, avant de réaliser des commandes, on détermine si l’utilisateur est capable de réaliser les types de commandes envisagés dans l’utilisation d’une application sur un terminal portable communiquant. Une interface utilisateur peut ensuite être adaptée pour que l’utilisateur conserve l’accès a toutes les fonctionnalités de l’interface même sans pouvoir réaliser tous les types de commandes.
Dans des modes de réalisation, au cours de la phase de détermination et au cours de l’étape d’émission d’une instruction de production d’un changement d’état, une durée de maintien du changement d’état est précisée, correspondant à un type de commande, le procédé comporte, de plus :
- une étape de mesure d’une durée pendant laquelle le deuxième état est détecté,
- une étape de comparaison de la durée avec une durée limite prédéterminée dépendante de l’instruction,
- lors de l’étape de classement d’un type de commande :
- si la distance mesurée est inférieure à la deuxième valeur limite prédéterminée, le type de commande est inaccessible,
- si la distance mesurée est supérieure ou égale à la deuxième valeur limite prédéterminée, et si la durée mesurée est inférieure à la durée limite prédéterminée, le type de commande inaccessible et
- si la distance mesurée est supérieure ou égale à la deuxième valeur limite prédéterminée, et si la durée mesurée est supérieure ou égale à la durée limite prédéterminée, le type de commande accessible.
Ce mode de réalisation permet de détecter si l’utilisateur peut réaliser des commandes dites courtes et/ou longues par rapport à la durée limite prédéterminée.
Dans des modes de réalisation, le procédé objet de la présente invention comporte, de plus, une étape de détection d’une commande manuelle du terminal portable communiquant, la phase de détermination étant mise en œuvre lorsqu’une commande manuelle du terminal portable communiquant est détectée.
L’avantage de ces modes de réalisation est de détecter si un utilisateur a dû demander de l’aide à quelqu’un pour réaliser une fonctionnalité, par exemple. Si tel est le cas, il est très probable qu’un type de commande ne soit plus détecté ou réalisable par l’utilisateur et donc que r les types de commandes accessibles en fonction des capacités de l’utilisateur soit reprogrammé.
Dans des modes de réalisation, le procédé objet de la présente invention comporte, de plus, une étape d’émission d’un signal sonore et/ou visuel lorsque type de commande correspondant à l’instruction a été classé.
Ces modes de réalisation permettent d’indiquer à l’utilisateur qu’un type de commande lui est accessible ou non pour que l’utilisateur adapte ses mouvements à l’interface. De plus, pour les types de commandes longues, ces modes de réalisation permettent à l’utilisateur d’arrêter le clignement.
Dans des modes de réalisation, le nombre prédéterminé de clignements détectés le plus récemment est supérieur à cinq.
Grâce à ces dispositions, l’échantillon de clignement est suffisamment significatif pour calculer une dérive.
Selon un deuxième aspect, la présente invention vise un dispositif de détection de clignement d’une paupière d’au moins un œil d’un utilisateur, qui comporte :
- au moins un capteur d’une distance entre ledit capteur de distance positionné en regard d’une paupière et ladite paupière,
- au moins un moyen de détermination d’une distance moyenne entre ledit capteur de distance en regard de ladite paupière et ladite paupière lorsque la paupière est dans le premier état, en fonction d’au moins une distance capturée,
- au moins un moyen de comparaison de la distance mesurée avec une première valeur limite prédéterminée, si la distance mesurée est inférieure à la première valeur limite prédéterminée, un deuxième état de la paupière est détecté correspondant à un clignement, si la distance mesurée est supérieure ou égale à la première valeur limite prédéterminée, la paupière est considérée comme étant dans le premier état,
- au moins un moyen calcul d’une moyenne de la distance mesurée entre ledit capteur et ladite paupière sur un nombre prédéterminé de changements du premier état au deuxième état détectés le plus récemment pour détecter un changement du niveau de fatigue de l’utilisateur et
- au moins un moyen d’ajustement de la première valeur limite prédéterminée en fonction de la distance moyenne calculée pour faire correspondre la détection de clignements avec le niveau de fatigue de l’utilisateur.
Les buts, avantages et caractéristiques particulières du dispositif objet de la présente invention étant similaires à ceux du procédé objet de la présente invention, ils ne sont pas rappelés ici.
BRÈVE DESCRIPTION DES FIGURES
D’autres avantages, buts et caractéristiques particulières de l’invention ressortiront de la description non limitative qui suit d’au moins un mode de réalisation particulier du procédé et du dispositif objets de la présente invention, en regard des dessins annexés, dans lesquels :
- la figure 1 représente, schématiquement et sous forme d’un logigramme, une succession d’étapes particulière d’un premier mode de réalisation du procédé objet de la présente invention,
- la figure 2 représente, schématiquement et sous forme d’un logigramme, une deuxième succession d’étapes particulière d’un deuxième mode de réalisation du procédé objet de la présente invention et
- la figure 3 représente, schématiquement, un premier mode de réalisation particulier du dispositif objet de la présente invention.
DESCRIPTION D’EXEMPLES DE RÉALISATION DE L’INVENTION
La présente description est donnée à titre non limitatif, chaque caractéristique d’un mode de réalisation pouvant être combinée à toute autre caractéristique de tout autre mode de réalisation de manière avantageuse.
On note dès à présent que les figures ne sont pas à l’échelle.
On observe, sur la figure 1, qui n’est pas à l’échelle, une suite d’étapes, sous forme de logigramme, d’un procédé 100 objet de la présente invention.
Le procédé 100 de détection de clignement d’une paupière d’au moins un œil d’un utilisateur, comporte les étapes suivantes :
- capture 11 d’au moins une distance entre au moins un capteur de distance, 310 ou 315, positionné en regard d’une paupière et ladite paupière lorsque la paupière est dans un premier état,
- détermination 12 d’une distance moyenne 335 entre ledit capteur de distance, 310 ou 315, en regard de ladite paupière et ladite paupière lorsque la paupière est dans le premier état, en fonction d’au moins une distance capturée, 325 ou 320,
- mesure 13 d’une distance entre ledit capteur de distance, 310 ou 315, positionné en regard de ladite paupière et ladite paupière,
- comparaison 14 de la distance mesurée, avec une première valeur limite prédéterminée, si la distance mesurée est inférieure à la première valeur limite prédéterminée 365, un deuxième état de la paupière est détecté correspondant à un clignement, si la distance mesurée est supérieure ou égale à la première valeur limite prédéterminée 365, la paupière est considérée comme étant dans le premier état,
- calcul 17 d’une moyenne de la distance mesurée entre ledit capteur et ladite paupière sur un nombre prédéterminé de changements du premier état au deuxième état détectés le plus récemment pour détecter un changement du niveau de fatigue de l’utilisateur et
- ajustement 18 de la première valeur limite prédéterminée 365 en fonction de la distance moyenne calculée 355 pour faire correspondre la détection de clignements avec le niveau de fatigue de l’utilisateur.
Le procédé 100 décrit peut être réalisé à partir de données issues d’un ou plusieurs capteurs de distance, 310 et 315. Le procédé 100 est, par exemple, appliqué indépendamment aux données issues de chaque capteur, 310 et 315.
Lors de l’étape de capture 11, une capture de distance entre au moins un capteur, 310 et 315, et la paupière en regard du capteur est effectuée. L’étape de capture de distance 11 mesure une distance dans une premier état. Préférentiellement, le premier état correspond à la paupière lorsque l’œil est ouvert. Dans des modes de réalisation, le premier état correspond à la paupière lorsque l’œil est fermé. Préférentiellement, au cours de l’étape de capture 11, au moins deux captures sont effectuées. Préférentiellement, au cours de l’étape de capture 11, la distance est capturée en continue pendant une durée prédéterminée. Préférentiellement, la durée prédéterminée est de l’ordre de la dizaine de secondes.
Lors de l’étape de détermination 12, une distance moyenne est déterminée à partir d’au moins une distance capturée lors de l’étape de capture 11. Préférentiellement, la distance moyenne est déterminée à partir de l’ensemble de distances qui a ont capturées en continue sur la durée prédéterminée. Ces modes de réalisation permettent de définir une distance pour laquelle la paupière est considérée comme étant dans le premier état. Préférentiellement, un intervalle de tolérance est appliqué à la durée moyenne déterminée.
Lors de l’étape de mesure 13, le capteur de distance, 310 ou 315, mesure une distance entre la paupière et le capteur, 310 ou 315, quel que soit l’état de la paupière. L’étape de mesure 13 est réalisée ultérieurement à l’étape de capture 11. Le deuxième état peut correspondre à un état dans lequel la paupière est fermée par un clignement volontaire de l’utilisateur.
On note ici qu’un clignement volontaire de l’utilisateur demande une plus grande force exercée sur les muscles de la paupière que lors d’un clignement involontaire, réduisant ainsi la distance entre le capteur, 310 ou 315, et la paupière par rapport à la distance entre le capteur, 310 ou 315, et la paupière lors d’un clignement involontaire. Les clignements involontaires peuvent donc être filtrés par traitement du signal issu du capteur, 310 ou 315, ou par réglage de la sensibilité du capteur, 310 ou 315 par des étapes connues de l’homme du métier.
Préférentiellement, après les étapes de capture 11 et de détermination 12 initiales, la distance entre la paupière et le capteur, 310 et 315, est mesurée en continue lors de l’étape de mesure 13.
Lors de l’étape de comparaison 14, la distance mesurée est comparée à une première valeur limité prédéterminée. Préférentiellement, la première valeur limite prédéterminée est déterminé en fonction de la distance moyenne calculée à l’étape de détermination 12.
Si la distance mesurée, 320 ou 325, est inférieure à la première valeur limite prédéterminée 365, un deuxième état de la paupière est détecté correspondant à un clignement. Le deuxième état est, par exemple, un état au moins semi-fermé volontairement de la paupière.
Si la distance mesurée, 320 ou 325, est supérieure ou égale à la première valeur limite prédéterminée 365, la paupière est considérée comme étant dans le premier état.
La distance mesurée sur un nombre prédéterminé de changements du premier état au deuxième état détectés immédiatement antérieurs est enregistrée. Autrement dit, il s’agit des « x » dernières distances au changement d’état du premier état vers le deuxième état mesurées, « x » étant un nombre.
Préférentiellement, la distance mesurée correspond à la distance moyenne sur la durée entre deux changements d’état.
Préférentiellement, le nombre prédéterminé de changements du premier état au deuxième état est supérieur à cinq, encore plus préférentiellement le nombre prédéterminé est égal à 10.
Lorsque le nombre de distances mesurées préalablement pour des changements d’état du premier état au deuxième état est inférieur au nombre prédéterminé, l’étape de calcul de la distance moyenne 17 est mis en œuvre sur le nombre de distances existantes.
Lors de l’étape de calcul 17 de la distance moyenne, la valeur moyenne est calculée sur les valeurs de mesures enregistrées. Généralement, lorsque la distance moyenne diminue, l’utilisateur devient de plus en plus fatigué et peut fournir moins d’efforts, la première valeur limite prédéterminée doit donc être augmentée.
Lors de l’étape d’ajustement 18, l’ajustement de la première valeur limite prédéterminée est ajustée en fonction de la distance moyenne, par exemple en diminuant la première valeur limite prédéterminée si la distance moyenne diminue. La première valeur limite prédéterminée est ensuite utilisée lors de l’étape de comparaison 14.
Préférentiellement, les étapes 13 à 18 du procédé 100 sont réalisées en continue et pour chaque œil de l’utilisateur, c’est-à-dire pour chaque capteur, 310 et 315.
Préférentiellement, le procédé 100 comporte, de plus, une étape de commande 21 d’au moins un terminal portable communiquant 395, en fonction d’un changement d’état du premier état au deuxième état détecté.
Lors de l’étape de commande 21, une commande est envoyée en fonction d’un changement d’état du premier état au deuxième état. Par exemple, lorsque l’utilisateur cligne l’œil droit, le capteur 310, envoie une distance qui après comparaison lors de l’étape de comparaison 14 envoie une information de changement d’état du premier état au deuxième état interprété comme une commande et similairement pour l’œil gauche. Une commande de l’œil droit signifie par exemple, une avance rapide d’un défilement alors qu’une commande de l’œil gauche signifie une sélection.
L’étape de commande 21 peut, de plus, commander un terminal portable communiquant 395 selon plusieurs types de commandes détectées dont la détermination est décrite en regard de la figure 2.
Dans des modes de réalisation préférentiels, l’étape de comparaison 14 de la distance mesurée avec une première valeur limite prédéterminée comporte de plus :
- une étape d’évaluation 19 d’une durée pendant laquelle la distance mesurée est inférieure à la première valeur limite prédéterminée et
- une étape détection 20 d’un type de commande en fonction d’un changement d’état du premier état au deuxième état et de la durée évaluée, chaque type de commande, envoyant une commande différente.
Lors de l’étape d’évaluation 19, la durée est évaluée entre un changement d’état du premier état au deuxième état et un changement d’état du deuxième état au premier état successif audit changement d’état du premier état au deuxième état. Autrement dit, la durée mesurée correspond à la durée pendant laquelle un deuxième état est détecté en continue.
L’étape de détection 20 comporte, une étape de comparaison de la durée évaluée avec au moins une valeur limite prédéterminée de durée. Chaque valeur limite prédéterminée de durée correspond à une durée au-delà de laquelle un nouveau type de commande est détecté. Par exemple, si une valeur limite prédéterminée de durée est égale à une seconde, tout clignement de durée supérieure à ladite durée est considéré comme un clignement long et commande un terminal portable communiquant 395 en conséquence.
Les types de commandes sont, par exemple :
- un clignement de l’œil droit, soit un changement du premier état au deuxième état sur les données issues du capteur 310 en regard de l’œil droit,
- un clignement de l’œil gauche, soit un changement du premier état au deuxième état sur les données issues du capteur 315 en regard de l’œil gauche,
- un clignement des deux yeux en même temps, soit un changement du premier état au deuxième état sur les données issues des deux capteurs, 310 et 315, sensiblement simultanément,
- un clignement de l’œil droit long, soit un changement du premier état au deuxième état sur les données issues du capteur 310 en regard de l’œil droit, le deuxième état ayant duré plus longtemps que la valeur limite prédéterminée de durée,
- un clignement de l’œil gauche long, soit un changement du premier état au deuxième état sur les données issues du capteur 315 en regard de l’œil gauche, le deuxième état ayant duré plus longtemps que la valeur limite prédéterminée de durée, et/ou
- un clignement des deux yeux en même temps, soit un changement du premier état au deuxième état sur les données issues des deux capteurs, 310 et 315, sensiblement simultanément, le deuxième état ayant duré plus longtemps que la valeur limite prédéterminée de durée sur les données issues de chaque capteur, 310 et 315.
La figure 2 représente une suite de procédé 200 d’étapes additionnelles et optionnelles par rapport au procédé 100.
Le procédé 200 comporte, une phase de détermination de types de commandes accessibles à l’utilisateur, qui comporte :
- une étape d’émission 23 d’une instruction de production d’un changement d’état d’une paupière de l’utilisateur entre un premier état et un deuxième état, correspondant à un type de commande,
- une étape capture 24 d’au moins une distance entre au moins un capteur de distance positionné en regard d’une paupière et ladite paupière lorsque la paupière est dans le premier état,
- une étape détermination 25 d’une distance moyenne entre ledit capteur de distance en regard de ladite paupière et ladite paupière lorsque la paupière est dans le premier état, en fonction d’au moins une distance capturée,
- une étape de mesure 26 d’une distance entre ledit capteur de distance positionné en regard de ladite paupière et ladite paupière,
- une étape de comparaison 27 de la distance mesurée avec une deuxième valeur limite prédéterminée,
- une étape de classement 28 d’un type de commande :
- si la distance mesurée est inférieure à la deuxième valeur limite prédéterminée, le type de commande est inaccessible 29 et
- si la distance mesurée est supérieure ou égale à la deuxième valeur limite prédéterminée, le type de commande accessible 30.
La phase de détermination peut être réalisée après l’étape de détermination 12 initiale du procédé 10 ou suite à une demande de l’utilisateur.
Lors de l’étape d’émission 23 d’une instruction, une instruction correspondant à un type de commande est émise pour être lue et/ou entendue par l’utilisateur. L’utilisateur doit tenter de suivre l’instruction. L’instruction est, par exemple, « Clignez l’œil droit >> ou encore « Clignez l’œil gauche pendant plus d’une seconde >>.
Préférentiellement, lors de l’étape d’émission 23 l’instruction est affichée sur un écran ou émise d’un transducteur électro-acoustique d’un terminal portable communiquant 395. Dans des modes de réalisation, un décompte est émis pour que l’utilisateur puisse réaliser l’action à la fin du décompte.
Les étapes de capture 24, détermination 25 et mesure 26, sont similaires aux étapes de capture 11, détermination 12 et mesure 13, du procédé 100.
Les inventeurs ont remarqué que pour fournir un clignement volontaire, la paupière se contracte plus que pour fournir un clignement involontaire. Ainsi, la deuxième valeur limite prédéterminée est représentative de la distance entre au moins un capteur de distance, 310 ou 315, et une paupière lorsqu’un clignement involontaire est réalisé, c’est-à-dire lorsque la paupière est fermée lors d’un clignement involontaire, préférentiellement muni d’un intervalle de tolérance.
Lors de l’étape de comparaison 27, la distance est mesurée pour déterminer si le mouvement effectué par la paupière est volontaire ou non. Lors de l’étape de classement 28, un type de commande est classé dans deux catégories, accessible à l’utilisateur ou inaccessible à l’utilisateur. L’étape de classement 28 dépend du résultat de l’étape de comparaison 27.
Si la distance mesurée est inférieure à la deuxième valeur limite prédéterminée, le type de commande est inaccessible 29. C’est-à-dire s’il est difficile de déterminer si le clignement est volontaire ou non, le type de commande est considéré comme ne pouvant pas être réalisé par l’utilisateur. Le type de commande ne peut donc être activé lors de l’étape de commande 21.
Si la distance mesurée est supérieure ou égale à la deuxième valeur limite prédéterminée, le type de commande accessible 30. C’est-à-dire s’il est possible de déterminer que le clignement est volontaire, le type de commande est considéré comme pouvant être réalisé par l’utilisateur. Le type de commande peut donc être activé lors de l’étape de commande 21.
Préférentiellement, au cours de la phase de détermination et au cours de l’étape d’émission 23 d’une instruction de production d’un changement d’état, une durée de maintien du changement d’état est précisée, correspondant à un type de commande, le procédé 200 comporte, de plus :
- une étape de mesure 31 d’une durée pendant laquelle le deuxième état est détecté,
- une étape de comparaison 32 de la durée avec une durée limite prédéterminée dépendante de l’instruction,
- lors de l’étape de classement 28 d’un type de commande :
- si la distance mesurée est inférieure à la deuxième valeur limite prédéterminée, le type de commande est inaccessible 28,
- si la distance mesurée est supérieure ou égale à la deuxième valeur limite prédéterminée, et si la durée mesurée est inférieure à la durée limite prédéterminée, le type de commande inaccessible 33 et
- si la distance mesurée est supérieure ou égale à la deuxième valeur limite prédéterminée, et si la durée mesurée est supérieure ou égale à la durée limite prédéterminée, le type de commande accessible 34.
L’étape de mesure de la durée 31 est similaire à l’étape d’évaluation 19 du procédé 100.
La durée limite prédéterminée de l’étape de comparaison dépend de l’instruction. Par exemple, pour détecter un clignement long, la durée limite prédéterminée peut être fixée à une seconde. Lors de l’étape d’émission d’une instruction 23, l’instruction précise une durée pendant laquelle l’utilisateur doit faire l’action au moins égale à la durée limite prédéterminée.
Ainsi, lors de l’étape de classement 28, si l’utilisateur est dans l’incapacité de réaliser l’action pendant la durée qui lui est demandée, le type de commande correspondant à l’instruction est considéré comme inaccessible à l’utilisateur. Et si l’utilisateur ne peut faire l’action indépendamment de la durée, le type de commande correspondant à l’instruction est également considéré comme inaccessible à l’utilisateur. Si l’utilisateur maintien l’action pendant la durée limite prédéterminée, le type de commande correspondant à l’instruction est considéré comme accessible à l’utilisateur pour commander un terminal portable communiquant 395.
Préférentiellement, le procédé 200 comporte, de plus, une étape de détection 22 d’une commande manuelle du terminal portable communiquant 395, la phase de détermination étant mise en œuvre lorsqu’une commande manuelle du terminal portable communiquant 395 est détecté.
Une commande manuelle du terminal portable communiquant 395, tel un appui sur un bouton virtuel affiché sur un écran ou un bouton du terminal portable communiquant 395, reflète qu’une autre personne a dû intervenir sur le terminal portable communiquant 395, par exemple pour effectuer une action sur une application du terminal portable communiquant 395. Une telle intervention implique que l’utilisateur n’avait plus accès à une fonctionnalité. Ainsi, si une commande manuelle est effectuée sur le terminal portable communiquant 395, le procédé 200 lance automatiquement la phase de détermination pour adapter l’application aux types de commandes accessibles à l’utilisateur nouvellement déterminées. L’utilisateur n’est donc pas lésé pour utiliser l’application.
Dans des modes de réalisation, le procédé 200 comporte, de plus, une étape d’émission d’un signal sonore et/ou visuel lorsqu’un état a été déterminé pour le type de commande correspondant à l’instruction a été classé.
Le signal sonore et/ou visuel peut être émis une fois la durée limite prédéterminée achevée, par exemple, pour signaler à l’utilisateur de rouvrir au moins un œil. Le signal sonore et/ou visuel signale également à l’utilisateur quels types de commandes l’utilisateur a à sa disposition pour utiliser une application du terminal portable communiquant 395.
Préférentiellement, le procédé, 100 ou 200, objet de la présente invention est précédé d’un procédé d’apprentissage des types de commandes réalisables. Par exemple, une application présentant un jeu entraînant l’utilisateur à cligner uniquement de l’œil droit ou gauche est mise en œuvre jusqu’à ce que l’utilisateur sache faire des clignements séparés des deux yeux pendant une durée plus ou moins longue.
Le dispositif objet de la présente invention présente tous les moyens pour réaliser les étapes du procédé objet de la présente invention.
On observe, sur la figure 3, une représentation schématique d’un mode de réalisation d’un dispositif 300 objet de la présente invention.
Le dispositif 300 de détection de clignement d’une paupière d’au moins un œil d’un utilisateur, comporte au moins un capteur, 310 et 315, d’une distance entre ledit capteur de distance, 310 ou 315, positionné en regard d’une paupière et ladite paupière.
Chaque capteur, 310 et 315, peut être positionné sur une monture de lunettes 305, la monture peut comporter des verres de vue. Préférentiellement, chaque capteur, 310 et 315, est positionné en regard d’une paupière inférieure. Autrement dit, chaque capteur, 310 et 315, est positionné vis-à-vis de la région infra-orbitaire du visage de l’utilisateur et plus particulièrement vis-à-vis d’un muscle occulo-orbitaire, préférentiellement de la partie palpébrale d’un muscle occulo-orbitaire. Un tel positionnement présente l’avantage de limiter l’occultation de la vue de l’utilisateur en plus de mesurer efficacement le clignement des yeux de l’utilisateur.
Préférentiellement, chaque capteur est un capteur infrarouge, par exemple, un capteur infrarouge QRD1114 de la société Fairchild (marque déposée).
Dans le mode de réalisation représenté en figure 3, le dispositif 300 comporte deux capteurs, 310 et 315, chaque capteur étant positionné vis-à-vis d’une paupière de l’utilisateur comme décrit ci-dessus.
Le dispositif 300 comporte au moins un moyen de détermination 330 d’une distance moyenne entre ledit capteur de distance, 310 ou 315, en regard de ladite paupière et ladite paupière lorsque la paupière est dans le premier état, en fonction d’au moins une distance capturée.
Préférentiellement, la sensibilité de chaque capteur, 310 et 315, est configurée pour détecter les clignements volontaires de l’utilisateur et non les clignements naturels autrement appelés clignements involontaires.
Chaque capteur, 310 et 315, transmet en continue, la distance captée au moyen de détermination 330. Notamment, chaque capteur, 310 et 315, mesure un changement d’état comme décrit en regard du procédé 100.
Préférentiellement, chaque moyen de détermination 330 est un circuit informatique de commande, tel un microprocesseur, exécutant un programme informatique.
Préférentiellement, la distance est déterminée en continue par le moyen de détermination 330. La distance déterminée 335 est transmise à un moyen de comparaison 340 et définit un premier état.
Le moyen de détermination 330 exécute les étapes de détermination 12 et 25 des procédés 100 et 200.
Le dispositif 300 comporte également au moins un moyen de comparaison 340 de la distance mesurée avec une première valeur limite prédéterminée 365, si la distance mesurée 335 est inférieure à la première valeur limite prédéterminée 365, un deuxième état de la paupière est détecté, si la distance mesurée 335 est supérieure ou égale à la première valeur limite prédéterminée 365, la paupière est considérée comme étant dans le premier étant. Le clignement correspond à un deuxième état de la paupière, par exemple, la paupière est fermée volontairement.
Préférentiellement, chaque moyen de comparaison 340 est un circuit informatique de commande, tel un microprocesseur, exécutant un programme informatique. Préférentiellement, chaque moyen de détermination 330 est le même circuit informatique que chaque moyen de comparaison 340. Le moyen de comparaison 340 exécute les étapes de comparaison 14 et 27 des procédés 100 et 200.
Le résultat de la comparaison 345 et 370 est envoyé d’une part à au moins un moyen de calcul 350 et d’autre part à au moins un moyen de commande 375.
Le dispositif 300 comporte au moins un moyen de calcul 350 d’une moyenne de la distance mesurée 335 entre ledit capteur, 310 ou 315, et ladite paupière sur un nombre prédéterminé de changements au deuxième état détectés le plus récemment pour détecter un changement du niveau de fatigue de l’utilisateur.
Préférentiellement, chaque moyen de calcul 350 est un circuit informatique de commande, tel un microprocesseur, exécutant un programme informatique. Préférentiellement, chaque moyen de calcul 350 est le même circuit informatique que chaque moyen de comparaison 340. Le moyen de calcul 350 exécute l’étape de calcul 17 du procédé 100.
Le moyenne calculée 355 est ensuite transmise à un moyen d’ajustement 360.
Le dispositif 300 comporte au moins un moyen d’ajustement 360 de la première valeur limite prédéterminée 365 en fonction de la distance moyenne calculée 355 pour faire correspondre la détection de clignements avec le niveau de fatigue de l’utilisateur.
Préférentiellement, chaque moyen de d’ajustement 360 est un circuit informatique de commande, tel un microprocesseur, exécutant un programme informatique. Préférentiellement, chaque moyen d’ajustement 360 est le même circuit informatique que chaque moyen de comparaison 340. Le moyen d’ajustement 360 exécute l’étape d’ajustement 18 du procédé 100.
Ainsi, une moyenne glissante sur le nombre de prédéterminé de clignements permet d’ajuster en continue, en fonction des efforts de l’utilisateur pour fournir le clignement, la première valeur limite prédéterminé 365.
La première valeur limite prédéterminée ajustée 365 est ensuite retransmise au moyen de comparaison 340 qui prend en compte la première valeur limite prédéterminée ajustée 365 pour la comparaison future suivante. Comme la première valeur limite prédéterminée ajustée 365 dépend d’une moyenne sur un nombre de valeurs immédiatement antérieures, la première valeur limite prédéterminée ajustée 365 est adaptée d’un clignement à un autre.
Dans des modes de réalisation préférentiels, le dispositif 300 comporte également au moins un moyen de commande 375 d’au moins un terminal portable communiquant 395, en fonction d’un changement d’état du premier état au deuxième état détecté.
Préférentiellement, chaque moyen de commande 375 est un circuit informatique de commande, tel un microprocesseur, exécutant un programme informatique. Préférentiellement, chaque moyen de commande 375 est le même circuit informatique que chaque moyen de comparaison 340. Le moyen de commande 375 exécute l’étape de commande 21 du procédé 100.
Dans des modes de réalisation, en fonction d’une durée de clignement calculée par le moyen de comparaison et/ou en fonction du capteur 310 ou 315 ayant capté la réduction de distance, le moyen de commande 375 associe un type de commande au clignement détecté 370 comme décrit en regard des étapes 19 et 20 du procédé 100. Le type de commande et la commande 380 est ensuite transmise à au moins un moyen de communication 385 avec le terminal portable communiquant 395.
Le moyen de communication 385 est préférentiellement un émetteur Bluetooth (marque déposée). Le moyen de communication 385 peut être tout moyen de communication filaire ou sans fil connu de l’homme du métier.
La commande envoyée 390 est reçue par le terminal portable communiquant 395 présentant au moins un moyen de communication correspondant.
La commande affecte une sélection sur un application comprise sur le terminal portable communiquant 395.
Le terminal portable communiquant 395 est un intelliphone, une tablette numérique ou un ordinateur, par exemple.
La description ci-après présente un mode de réalisation d’une application commandée par le dispositif 300. L’application présente une interface permettant de faciliter la communication rapide de l’utilisateur. En effet, c’est l’interface qui prévoit le maximum du message et qui se met à jour selon les préférences de l’utilisateur, afin que l’utilisateur n’ai plus qu’à sélectionner ce qu’il souhaite exprimer.
Dans la description ci-dessous, le terme bouton correspond à un affichage sur un écran du terminal portable communiquant 395 qui peut être sélectionné au moyen d’au moins une commande 390 reçue par le terminal portable communiquant 395. Dans des modes de réalisation l’écran peut être connecté au terminal portable communiquant 395.
L’application mobile inclue préférentiellement les modes de fonctionnement suivants :
- la saisie de texte,
- la lecture d’un message par une voix intégrée au téléphone ; la voix est paramétrable,
- la sauvegarde de phrases
- la suggestion de mots ou phrases en fonction des habitudes et préférences de l’utilisateur
- la personnalisation de l’utilisation de l’interface comme l’accélération ou le ralentissement du défilement, la modification du nombre de signaux en entrée, la modification du nombre de tours avant désélection ou encore la modification du clavier,
- la personnalisation de l’aspect graphique de l’interface.
D’autres options permettant une communication plus élaborée de l’utilisateur peuvent être intégrées à l’application, telles que : la composition et l’envoi de messages et emails, la connexion à Internet, ou encore la possibilité de démarrer une visioconférence.
Sur la page d’accueil de l’application, qui se divise en quatre boutons, les mots « OUI » et « NON » sont affichées. Les mots « OUI » et « NON » correspondent aux éléments que l’utilisateur utilise le plus souvent. Un troisième bouton « Texte » ouvre une sous-application de traitement de texte, pour composer un message. Un quatrième bouton « Menu » renvoie l’utilisateur vers le Menu d’options.
Une pré-sélection de bouton alterne, ou défile, entre les quatre boutons « OUI », « NON », « Texte » et « Menu ». L’utilisateur peut donc envoyer une commande, tel un clignement court, une seule fois pour cliquer sur un bouton de la page d’accueil lorsque la pré-sélection est positionnée sur ledit bouton.
La description qui suit, décrit la sous-application de traitement de texte si l’utilisateur sélectionne le bouton « Texte »
Les lignes d’un clavier virtuel défilent une par une. Dès que l’utilisateur sélectionne une ligne, les cases, chacune correspondant à une lettre ou un symbole, au sein de la ligne défilent les unes après les autres. L’utilisateur peut ensuite sélectionner la case correspondant à la lettre ou au symbole qu’il souhaite taper. La sélection s’effectue au moyen d’une commande tel un clignement court. Dans le cas où l’utilisateur s’est trompé de ligne, les lettres de la ligne défilent un nombre prédéterminé de fois. Le nombre prédéterminé peut être fixé dans les paramètres accessibles depuis le bouton menu. Puis le défilement reprend ligne par ligne, une fois le nombre prédéterminé de défilements atteint.
Simultanément à la saisie, les deux premières lignes du clavier font apparaître, respectivement, des phrases pré-enregistrées par l’utilisateur ou des mots enregistrés dans le dictionnaire. Ainsi, l’utilisateur n’a pas besoin de taper toute une phrase, ni même tout un mot, et peut s’exprimer grâce aux raccourcis des deux premières lignes.
En appuyant sur le bouton Menu en bas du clavier, l’utilisateur peut choisir de alternativement :
- faire lire la phrase composée par terminal portable communiquant 395 au moyen d’un transducteur électronico-accoustique,
- sauvegarder la phrase au sein d’une catégorie,
- ajouter le dernier mot qui a été composé au dictionnaire,
- effacer tout ce qui vient d’être tapé ou
- restaurer ce qui étant en train d’être écrit avant de quitter l’application texte la fois précédente.
Afin de ranger les phrases enregistrées par l’utilisateur, des catégories peuvent être créées. Les catégories peuvent être divisées en sous-catégories qui contiennent les phrases. Les catégories et éventuellement sous-catégories permettent à l’utilisateur de retrouver une phrase enregistrée, dans une catégorie qui a du sens pour l’utilisateur et également d’éviter de la re-saisir à chaque fois dans l’application Texte. Par exemple, la phrase “H fait beau aujourd’hui !” peut être rangée dans la sous-catégorie « Météo » de la catégorie « Quotidien ».
Dans le but de préserver la cohérence de l’interface, les catégories se présentent de la même manière que la page d’accueil : sous forme de page divisée en quatre boutons (trois catégories et une flèche d’accès aux catégories suivantes). Toujours dans le but de rendre la communication plus rapide, les catégories, respectivement, les sous-catégories et les phrases, sont ordonnées par fréquence d’utilisation. Par exemple, les catégories les plus utilisées seront plus rapides d’accès, le bouton peut être placé en haut à gauche pour être présélectionné en premier.
En sélectionnant le bouton « ‘Menu » sur la page d’accueil, l’utilisateur arrive sur le Menu qui présente les boutons suivants.
Le bouton « Commandes » pour définir les paramètres de l’application. Les paramètres sont, par exemple :
- modifier le nombre de commandes, c’est-à-dire spécifier combien de types de clignement l’utilisateur est ou se sent capable de faire, l’utilisateur peut ainsi diminuer le nombre de commandes accessibles si l’utilisateur se sent fatigué, ou l’augmenter si l’utilisateur se sent en forme,
- modifier la vitesse du défilement de l’application, par exemple en fonction de l’état de fatigue de l’utilisateur
- modifier le nombre de tours avant désélection, par exemple dans le cas de l’application texte, ou similairement pour la sélection d’une page.
- choisir un type de clavier pour l’interface de traitement de texte, par exemple un clavier, AZERTY, QWERTY, ABCDEF
- choisir la voix de lecture des messages, par exemple, pour au moins un message, la voix de l’utilisateur peut être enregistrée afin de donner plus de réconfort aux proches de l’utilisateur.
Le bouton « Edition » permet à l’utilisateur de déplacer, renommer ou supprimer des catégories ou sous-catégories, phrases ou mots-préenregistrés. Le bouton « Edition » donne accès à un sous-menu présentant les boutons « Design », « Déplacer », « Renommer » et « Commandes »
Le bouton « Design » permet à l’utilisateur de personnaliser l’interface graphique de l’application. L’utilisateur peut changer la police ainsi que la taille de l’écriture, ou encore changer les couleurs, par exemple. Le sous-menu « Design » est présenté de manière similaire au sous-menu « Commandes » détaillé précédemment.
Dans la mesure où les catégories, respectivement, les sous-catégories et les phrases, sont automatiquement rangées par fréquence, le bouton « Déplacer » permet à l’utilisateur de choisir l’emplacement des catégories. Ainsi, si l’utilisateur vient de créer une nouvelle catégorie qu’il sait qu’il utilisera fréquemment, l’utilisateur peut éviter que la fréquence de la catégorie se mette à jour. L’utilisateur peut directement placer ladite catégorie parmi les catégories présélectionnées en premier. L’interface pour renommer ainsi que l’interface pour supprimer une catégorie, respectivement une sous-catégorie ou une phrase, se présente de la même manière que l’interface pour déplacer.
Le bouton « Association de commandes » permet de modifier le type de commande associé à une action.
Au sein de l’interface, un premier type de commande sert à sélectionner la case sur laquelle le défilement est actuellement arrêté, un deuxième type de commande sert de « Suivant », un troisième type de commande sert de « Retour », par exemple. Selon le confort de l’utilisateur, l’utilisateur peut choisir d’associer une commande en particulier à un clignement en particulier. Par exemple, s’il est très à l’aise avec le clignement de l’œil droit, l’utilisateur peut décider d’en faire la première commande. D’autre part, si un jour l’utilisateur est fatigué de l’œil droit, il peut modifier l’association de commandes pour faire du clignement de l’œil gauche la première commande.

Claims (9)

  1. REVENDICATIONS
    1. Procédé (100, 200) de détection de clignement d’une paupière d’au moins un œil d’un utilisateur, caractérisé en ce qu’il comporte les étapes suivantes :
    - capture (11) d’au moins une distance entre au moins un capteur (310, 315) de distance positionné en regard d’une paupière et ladite paupière lorsque la paupière est dans un premier état,
    - détermination (12) d’une distance moyenne entre ledit capteur de distance en regard de ladite paupière et ladite paupière lorsque la paupière est dans le premier état, en fonction d’au moins une distance capturée,
    - mesure (13) d’une distance entre ledit capteur de distance positionné en regard de ladite paupière et ladite paupière,
    - comparaison (14) de la distance mesurée avec une première valeur limite prédéterminée, si la distance mesurée est inférieure à la première valeur limite prédéterminée, un deuxième état de la paupière est détecté correspondant à un clignement, si la distance mesurée est supérieure ou égale à la première valeur limite prédéterminée, la paupière est considérée comme étant dans le premier état,
    - calcul (17) d’une moyenne de la distance mesurée entre ledit capteur et ladite paupière sur un nombre prédéterminé de changements du premier état au deuxième état détectés le plus récemment pour détecter un changement du niveau de fatigue de l’utilisateur et
    - ajustement (18) de la première valeur limite prédéterminée en fonction de la distance moyenne calculée pour faire correspondre la détection de clignements avec le niveau de fatigue de l’utilisateur.
  2. 2. Procédé (100, 200) selon la revendication 1, qui comporte, de plus, une étape de commande (21) d’au moins un terminal portable communiquant (395), en fonction d’un changement d’état du premier état au deuxième état détecté.
  3. 3. Procédé (100, 200) selon la revendication 2, dans lequel l’étape de comparaison (14) de la distance mesurée avec une première valeur limite prédéterminée comporte de plus :
    - une étape d’évaluation (19) d’une durée pendant laquelle la distance mesurée est inférieure à la première valeur limite prédéterminée et
    - une étape détection (20) d’un type de commande en fonction d’un changement d’état du premier état au deuxième état et de la durée évaluée, chaque type de commande, envoyant une commande différente.
  4. 4. Procédé (100, 200) selon la revendication 3, qui comporte, de plus, une phase de détermination de types de commandes accessibles à l’utilisateur, qui comporte :
    - une étape d’émission (23) d’une instruction de production d’un changement d’état d’une paupière de l’utilisateur entre un premier état et un deuxième état, correspondant à un type de commande,
    - une étape capture (24) d’au moins une distance entre au moins un capteur de distance positionné en regard d’une paupière et ladite paupière lorsque la paupière est dans le premier état,
    - une étape détermination (25) d’une distance moyenne entre ledit capteur de distance en regard de ladite paupière et ladite paupière lorsque la paupière est dans le premier état, en fonction d’au moins une distance capturée,
    - une étape de mesure (26) d’une distance entre ledit capteur de distance positionné en regard de ladite paupière et ladite paupière,
    - une étape de comparaison (27) de la distance mesurée avec une deuxième valeur limite prédéterminée,
    - une étape de classement (28) d’un type de commande :
    - si la distance mesurée est inférieure à la deuxième valeur limite prédéterminée, le type de commande est inaccessible et
    - si la distance mesurée est supérieure ou égale à la deuxième valeur limite prédéterminée, le type de commande accessible.
  5. 5. Procédé (100, 200) selon la revendication 4, dans lequel, au cours de la phase de détermination et au cours de l’étape d’émission d’une instruction de production d’un changement d’état, une durée de maintien du changement d’état est précisée, correspondant à un type de commande, le procédé comporte, de plus :
    - une étape de mesure (31) d’une durée lorsque pendant laquelle le deuxième état est détecté,
    - une étape de comparaison (32) de la durée avec une durée limite prédéterminée dépendante de l’instruction,
    - lors de l’étape de classement (28) d’un type de commande :
    - si la distance mesurée est inférieure à la deuxième valeur limite prédéterminée, le type de commande est inaccessible,
    - si la distance mesurée est supérieure ou égale à la deuxième valeur limite prédéterminée, et si la durée mesurée est inférieure à la durée limite prédéterminée, le type de commande inaccessible et
    - si la distance mesurée est supérieure ou égale à la deuxième valeur limite prédéterminée, et si la durée mesurée est supérieure ou égale à la durée limite prédéterminée, le type de commande accessible.
  6. 6. Procédé (100, 200) selon l’une des revendications 4 ou 5, qui comporte, de plus, une étape de détection (22) d’une commande manuelle du terminal portable communiquant (395), la phase de détermination étant mise en œuvre lorsqu’une commande manuelle du terminal portable communiquant est détectée.
  7. 7. Procédé (100, 300) selon l’une des revendications 4 à 6, qui comporte, de plus, une étape d’émission (35) d’un signal sonore et/ou visuel lorsqu’un état a été déterminé pour le type de commande a été classé.
  8. 8. Procédé (100, 200) selon l’une des revendications 1 à 7, dans lequel le nombre prédéterminé de clignements détectés le plus récemment est supérieur à cinq.
  9. 9. Dispositif (300) de détection de clignement d’une paupière d’au moins un œil d’un utilisateur, caractérisé en ce qu’il comporte :
    - au moins un capteur (310, 315) d’une distance entre ledit capteur de distance positionné en regard d’une paupière et ladite paupière,
    - au moins un moyen de détermination (330) d’une distance moyenne (335) entre ledit capteur de distance en regard de ladite paupière et ladite paupière lorsque la paupière est dans le premier état, en fonction d’au moins une distance capturée,
    - au moins un moyen de comparaison (340) de la distance mesurée avec une première valeur limite prédéterminée (365), si la distance mesurée est inférieure à la première valeur limite prédéterminée, un deuxième état de la paupière est détecté correspondant à un clignement, si la distance mesurée est supérieure ou égale à la
    5 première valeur limite prédéterminée, la paupière est considérée comme étant dans le premier état,
    - au moins un moyen calcul (350) d’une moyenne (355) de la distance mesurée entre ledit capteur et ladite paupière sur un nombre prédéterminé de changements aux deuxième état détectés le plus récemment pour détecter un îo changement du niveau de fatigue de l’utilisateur et
    - au moins un moyen d’ajustement (360) de la première valeur limite prédéterminée en fonction de la distance moyenne calculée pour faire correspondre la détection de clignements avec le niveau de fatigue de l’utilisateur.
FR1853652A 2018-04-26 2018-04-26 Procede et dispositif de detection d'un clignement d'une paupiere Active FR3080697B1 (fr)

Priority Applications (1)

Application Number Priority Date Filing Date Title
FR1853652A FR3080697B1 (fr) 2018-04-26 2018-04-26 Procede et dispositif de detection d'un clignement d'une paupiere

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR1853652A FR3080697B1 (fr) 2018-04-26 2018-04-26 Procede et dispositif de detection d'un clignement d'une paupiere
FR1853652 2018-04-26

Publications (2)

Publication Number Publication Date
FR3080697A1 true FR3080697A1 (fr) 2019-11-01
FR3080697B1 FR3080697B1 (fr) 2020-05-22

Family

ID=63637957

Family Applications (1)

Application Number Title Priority Date Filing Date
FR1853652A Active FR3080697B1 (fr) 2018-04-26 2018-04-26 Procede et dispositif de detection d'un clignement d'une paupiere

Country Status (1)

Country Link
FR (1) FR3080697B1 (fr)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023022733A1 (fr) * 2021-08-20 2023-02-23 Hewlett-Packard Development Company, L.P. Atténuation de la fatigue d'une téléconférence

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160203359A1 (en) * 2015-01-12 2016-07-14 BMT Business Meets Technology Holding AG Wink Gesture Based Control System
US20160225244A1 (en) * 2015-01-29 2016-08-04 Vigo Technologies Inc. Infrared sensing of eye and eyelid movements to detect drowsiness
US20170131765A1 (en) * 2015-11-06 2017-05-11 Oculus Vr, Llc Eye tracking using optical flow
US9727790B1 (en) * 2010-06-04 2017-08-08 Masoud Vaziri Method and apparatus for a wearable computer with natural user interface

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9727790B1 (en) * 2010-06-04 2017-08-08 Masoud Vaziri Method and apparatus for a wearable computer with natural user interface
US20160203359A1 (en) * 2015-01-12 2016-07-14 BMT Business Meets Technology Holding AG Wink Gesture Based Control System
US20160225244A1 (en) * 2015-01-29 2016-08-04 Vigo Technologies Inc. Infrared sensing of eye and eyelid movements to detect drowsiness
US20170131765A1 (en) * 2015-11-06 2017-05-11 Oculus Vr, Llc Eye tracking using optical flow

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023022733A1 (fr) * 2021-08-20 2023-02-23 Hewlett-Packard Development Company, L.P. Atténuation de la fatigue d'une téléconférence

Also Published As

Publication number Publication date
FR3080697B1 (fr) 2020-05-22

Similar Documents

Publication Publication Date Title
US11223899B2 (en) User interfaces for managing audio exposure
CA2910292C (fr) Procede de personnalisation d'un dispositif electronique afficheur d'image
US20200382867A1 (en) User interfaces for managing audio exposure
JP2021144250A5 (fr)
FR2747346A1 (fr) Appareil et procede d'estimation du niveau de somnolence du conducteur d'un vehicule
FR2950713A1 (fr) Systeme et procede de reconnaissance de gestes
EP2778885A1 (fr) Procédé de traitement d'un geste composé, dispositif et terminal d'utilisateur associés
KR102458358B1 (ko) 영상 처리 장치 및 방법
FR2788615A1 (fr) Appareil comportant une interface utilisateur vocale ou manuelle et procede d'aide a l'apprentissage des commandes vocales d'un tel appareil
KR20180109499A (ko) 사용자의 음성 입력에 대한 답변을 제공하는 방법 및 장치
KR102388543B1 (ko) 오디오 노출을 관리하기 위한 사용자 인터페이스들
CN106600530A (zh) 照片合成方法及装置
FR3080697A1 (fr) Procede et dispositif de detection d'un clignement d'une paupiere
EP1570632A1 (fr) Dispositif electronique portable avec une interface adaptable en fonction de son environnement
EP2917868B1 (fr) Procede d'identification
WO2022068304A1 (fr) Procédé et dispositif de détection de la qualité sonore
CN107820116A (zh) 视频播放方法及装置
EP2124435A1 (fr) Système de télécommande à distance d'une carte électronique connectée à un écran de télévision ou moniteur et procédé d'émission de signaux de commande
CN113792943B (zh) 一种群体决策方法和装置
CN117546471A (zh) 用于指示和/或控制内容项回放格式的用户界面
EP4310639A1 (fr) Procédé d adaptation d'interface homme machine
FR3088458A1 (fr) Procede de reconnaissance et de description contextuelles d'un objet d'interet pour un utilisateur deficient visuel, dispositif mettant en oeuvre ledit procede
WO2014090754A1 (fr) Dispositif et procédé de reconnaissance de gestes pour un contrôle d'interface utilisateur
EP3721319A1 (fr) Procédé d'interaction avec un sous-titre affiché sur un écran de télévision, dispositif, produit-programme d'ordinateur et support d'enregistrement pour la mise en oeuvre d'un tel procédé
EP3572915B1 (fr) Technique de saisie d'au moins un caractère au moyen d'une interface utilisateur d'un dispositif électronique

Legal Events

Date Code Title Description
PLFP Fee payment

Year of fee payment: 2

PLSC Publication of the preliminary search report

Effective date: 20191101

PLFP Fee payment

Year of fee payment: 3

PLFP Fee payment

Year of fee payment: 4

PLFP Fee payment

Year of fee payment: 5

PLFP Fee payment

Year of fee payment: 6