FR2978267A1 - Procede et dispositif de controle d'un appareil en fonction de la detection de personnes a proximite de l'appareil - Google Patents

Procede et dispositif de controle d'un appareil en fonction de la detection de personnes a proximite de l'appareil Download PDF

Info

Publication number
FR2978267A1
FR2978267A1 FR1156495A FR1156495A FR2978267A1 FR 2978267 A1 FR2978267 A1 FR 2978267A1 FR 1156495 A FR1156495 A FR 1156495A FR 1156495 A FR1156495 A FR 1156495A FR 2978267 A1 FR2978267 A1 FR 2978267A1
Authority
FR
France
Prior art keywords
distance
detected
face
image
detected face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
FR1156495A
Other languages
English (en)
Inventor
David Coulon
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
STMicroelectronics Rousset SAS
Original Assignee
STMicroelectronics Rousset SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by STMicroelectronics Rousset SAS filed Critical STMicroelectronics Rousset SAS
Priority to FR1156495A priority Critical patent/FR2978267A1/fr
Priority to US13/552,426 priority patent/US8963831B2/en
Publication of FR2978267A1 publication Critical patent/FR2978267A1/fr
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/70Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer
    • G06F21/82Protecting input, output or interconnection devices
    • G06F21/84Protecting input, output or interconnection devices output devices, e.g. displays or monitors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6245Protecting personal data, e.g. for financial or medical purposes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation

Abstract

L'invention concerne un procédé de contrôle d'un appareil électronique (DV), comprenant des étapes consistant à : acquérir une image de l'environnement de l'appareil, détecter la présence de visages de personnes (P1, P2) dans l'image acquise, estimer une position respective de chaque visage détecté par rapport à l'appareil, et émettre un signal vers l'appareil pour activer une fonction de l'appareil, si une condition est réalisée en ce qui concerne un nombre de visage détecté dans l'image et/ou la position estimée de chaque visage détecté.

Description

i
PROCEDE ET DISPOSITIF DE CONTROLE D'UN APPAREIL EN FONCTION DE LA DETECTION DE PERSONNES A PROXIMITE DE L'APPAREIL
La présente invention concerne la détection de présence de personnes dans un champ de vision. La présente invention s'applique notamment à la protection d'informations confidentielles présentées sur un écran d'affichage d'un appareil électronique fixe ou mobile, tel qu'un s ordinateur personnel, un téléphone mobile ou un assistant électronique personnel PDA (Persona) Digital Assistant). L'utilisation d'un tel appareil notamment dans un lieu public peut exposer des informations confidentielles affichées à l'écran, à des personnes non autorisées. Pour tenter d'apporter une solution à ce problème, il a déjà io été proposé des filtres dits de "confidentialité" (privacy filters) se présentant sous la forme d'un film que l'on dispose sur l'écran d'affichage pour réduire la largeur du champ d'observation de l'écran, centré sur un axe perpendiculaire et centré sur l'écran. Un tel filtre qui est par exemple décrit dans le document WO 2007/118122, permet aux seules personnes situées ls au voisinage de cet axe de visualiser les informations affichées, ces informations n'étant pas visibles aux personnes situées à distance de cet axe. Un tel filtre n'empêche donc pas une personne située derrière l'utilisateur au voisinage de cet axe de visualiser les informations affichées. En outre, un tel filtre affecte les couleurs et la luminosité des images 20 affichées par l'écran. Pour compenser cet effet négatif, la luminosité de l'écran peut être forcée, mais cela augmente la consommation électrique de l'écran, ce qui n'est pas souhaitable dans le cas d'appareils alimentés par batterie. Il a également été proposé, notamment dans le document 25 WO 2006/023384, un filtre électronique qui peut être activé ou désactivé selon les besoins de l'utilisateur. Lorsqu'il est actif, ce filtre agit sensiblement de la même façon que le film passif disposé sur l'écran décrit précédemment. Toutefois, cette solution peut utiliser des ressources de l'appareil pour modifier les images affichées afin de limiter le champ de 30 vision de ces images. Cette solution exige également que l'utilisateur active ou désactive manuellement le filtre électronique. L'utilisateur peut donc oublier d'activer le filtre lorsqu'il commande l'affichage d'informations confidentielles à l'écran de l'appareil, ou peut ne pas remarquer qu'une personne s'est approchée de l'écran et peut avoir accès aux informations s affichées. Certains utilisateurs préfèrent donc laisser le filtre actif en permanence pour éviter d'oublier de l'activer. Dans ce cas, ce filtre présente donc sensiblement les mêmes inconvénients que le filtre passif décrit précédemment quant à la luminosité et à la surconsommation de l'écran. L'utilisation d'un tel filtre électronique présente également io l'inconvénient d'introduire une certaine complexité supplémentaire dans l'utilisation de l'appareil. Cet inconvénient peut être atténué en prévoyant un bouton de commande supplémentaire sur l'appareil. Toutefois, l'ajout d'un tel bouton peut soulever des problèmes d'intégration, notamment lorsque l'appareil est de petites dimensions, comme dans le cas des téléphones ls mobiles, et induit un coût de fabrication supplémentaire. Par ailleurs, de tels filtres, qu'ils soient passifs ou activables électroniquement, ne permettent pas de protéger des données confidentielles qui seraient introduites au moyen d'un clavier de l'appareil. En effet, une personne mal intentionnée peut observer à l'insu de l'utilisateur, 20 les mouvements des doigts de l'utilisateur par exemple pendant la saisie d'un code confidentiel, et ainsi avoir accès à ce dernier. Il est donc souhaitable de protéger la confidentialité d'informations affichées sur écran de visualisation d'un appareil électronique ou introduites lors de l'utilisation d'un tel appareil. Il est également souhaitable que cette 25 protection puisse être effectuée sans augmenter notablement la consommation électrique de l'appareil mettant en oeuvre cette protection.
Des modes de réalisation concernent un procédé de contrôle d'un appareil électronique, comprenant des étapes consistant à : acquérir une 30 image de l'environnement de l'appareil, et détecter la présence de visages de personnes dans l'image acquise. Selon un mode de réalisation, le procédé comprend des étapes consistant à : estimer une position respective de chaque visage détecté par rapport à l'appareil, et émettre un signal vers l'appareil pour activer une fonction de l'appareil, si une condition est réalisée en ce qui concerne un nombre de visage détecté dans l'image et/ou la position estimée de chaque visage détecté. Selon un mode de réalisation, l'estimation de la position de chaque visage détecté dans une image comprend une étape d'estimation d'un angle s formé entre une direction de prise de vue de l'image acquise et une direction dans laquelle le visage détecté est localisé. Selon un mode de réalisation, l'estimation de la position de chaque visage détecté comprend l'estimation d'une distance entre l'appareil et le visage détecté. Io Selon un mode de réalisation, l'estimation de la distance entre l'appareil et un visage détecté dans l'image, est effectuée par triangulation à partir de deux images obtenues à partir de points de prise de vue espacés l'un de l'autre, ou en appliquant la formule suivante : D = k oh ps mos ls dans laquelle : D est la distance à estimer, oh est une distance réelle choisie dans un visage humain, mos est la valeur de la distance choisie dans le visage détecté, mesurée dans l'image en nombre de pixels, ps est la largeur d'un pixel, et k est une constante liée à des caractéristiques du capteur d'image. 20 Selon un mode de réalisation, le procédé comprend des étapes de détermination si chaque visage détecté dans un champ d'observation de l'appareil, est celui d'un utilisateur de l'appareil ou d'une personne autorisée par l'utilisateur, ou celui d'un intrus potentiel, sur la base de la distance estimée entre l'appareil et le visage détecté. 25 Selon un mode de réalisation, la fonction activée de l'appareil comprend au moins l'une des opérations suivantes : entrée dans un mode de veille de l'appareil si aucun visage n'est détecté à une distance inférieure à un seuil de distance, et à un angle par rapport à une direction de prise de vue de l'image acquise, inférieur à un seuil d'angle, sortie du mode veille si 30 un visage est à nouveau détecté à une distance inférieure au seuil de distance, et à un angle par rapport à la direction de prise de vue, inférieur au seuil d'angle, et activation d'une fonction de protection de confidentialité si au moins deux visages sont détectés à un angle par rapport à la direction de prise de vue, inférieur au seuil d'angle, et à des distances de l'appareil 35 respectivement inférieure et supérieure au seuil de distance ou espacées d'une valeur de seuil d'écart de distance.
Selon un mode de réalisation, la fonction de protection comprend au moins une des opérations suivantes : émission ou affichage d'un signal d'alerte, affichage du visage d'une personne détectée comme intruse, et activation d'un filtre de confidentialité sur un écran d'affichage de l'appareil. s Selon un mode de réalisation, le procédé comprend des étapes de détermination de la luminosité moyenne de l'image acquise et d'allumage d'un dispositif d'éclairage si la luminosité moyenne déterminée est insuffisante. Des modes de réalisation concernent également un dispositif de Io contrôle d'un appareil électronique, comprenant un capteur d'image, et une unité de traitement connectée au capteur d'image et configurée pour mettre en oeuvre le procédé précédemment défini. Selon un mode de réalisation, le capteur d'image est configuré pour fournir des images en couleur ou monochromes. ls Selon un mode de réalisation, le capteur d'image est associé à un objectif présentant un champ de prise de vue compris entre 80° et 120°. Selon un mode de réalisation, le dispositif comprend un circuit d'interface pour relier l'unité de traitement à un dispositif d'éclairage, l'unité de traitement étant configurée pour commander le dispositif d'éclairage en 20 fonction d'une luminosité moyenne des images transmises par le capteur d'image. Selon un mode de réalisation, le dispositif est intégré dans un système sur puce et comprenant un microcontrôleur et une matrice de cellules photosensibles. 25 Des exemples de réalisation de l'invention seront décrits dans ce qui suit, à titre non limitatif en relation avec les figures jointes parmi lesquelles : la figure 1 représente schématiquement un appareil électronique équipé d'un dispositif de protection de confidentialité, selon un mode de 30 réalisation, les figures 2A, 2B représentent l'appareil électronique et une image prise par le dispositif de protection, dans une situation d'utilisation de l'appareil, prise en compte par le dispositif de protection, selon un mode de réalisation, 35 les figures 3A, 3B représentent l'appareil électronique et une image prise par le dispositif de protection, dans une situation d'utilisation de 2978267 s
l'appareil, prise en compte par le dispositif de protection, selon un mode de réalisation, les figures 4 et 5 représentent l'appareil électronique dans d'autres situations d'utilisation prises en compte par le dispositif de protection, selon s un mode de réalisation, la figure 6 représente schématiquement des circuits du dispositif de protection, selon un mode de réalisation, la figure 7 représente une séquence d'étapes pouvant être exécutée par le dispositif de protection, selon un mode de réalisation. io La figure 1 représente un appareil électronique DV comprenant un écran d'affichage DSP. Selon un mode de réalisation, l'appareil DV est équipé d'un dispositif de protection PPD comprenant un capteur d'image associé à un objectif. L'ensemble du capteur d'image et de l'objectif dispose d'un champ de vision FV présentant une largeur horizontale HFW et une ls largeur verticale VFW, liées à la focale de l'objectif et aux dimensions de la surface photosensible du capteur d'image. Le champ FV peut inclure un champ de visualisation de l'écran DFV, dans lequel une personne doit se trouver pour pouvoir visualiser une image affichée à l'écran DSP de l'appareil DV. 20 L'appareil DV peut être n'importe appareil affichant des images à partir d'un flux vidéo. Si l'appareil comporte un clavier ou des touches de commandes permettant à un utilisateur d'introduire des informations confidentielles, le champ FV peut inclure également un champ à partir duquel une personne peut voir le clavier ou les touches. 25 Selon un mode de réalisation, le dispositif PPD est configuré pour détecter des visages humains dans les images fournies par le capteur d'image, et pour localiser les visages détectés afin de déterminer si chaque visage détecté est ou non situé dans une zone à partir de laquelle des images affichées à l'écran DSP peuvent être observées de manière 30 intelligible. Il existe plusieurs algorithmes permettant de détecter des visages humains dans une image. Ainsi, le document "Detecting Faces in Images: A Survey", Ming-Hsuan Yang, J. Kriegman, Narendra Ahuja, IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol. 24, No. 1, January 2002, décrit plusieurs algorithmes de détection de visages humains 35 qui peuvent être mis en oeuvre par le dispositif PPD. Il existe également des algorithmes de détection de visages humains dans des images basés sur la couleur de la peau, qui peuvent être mis en oeuvre si le capteur d'image utilisé fournit des informations de chrominance (voir par exemple le document "A Robust Skin Color Based Face Detection Algorithm", Sanjay s Kr. Singh, D. S. Chauhan, Mayank Vatsa, Richa Singh, Tamkang Journal of Science and Engineering, Vol. 6, No. 4, pp. 227-234, 2003). Les figures 2A, 2B représentent l'appareil électronique DV et une image prise par le dispositif de protection PPD, dans une situation d'utilisation prise en compte par le dispositif de protection. Sur les figures 2A, io 2B, deux personnes P1, P2 se trouvent devant l'écran DSP. La personne P1 se trouve dans une zone à partir de laquelle une image affichée à l'écran DSP peut être observée de manière intelligible. Cette zone est délimitée par des plans verticaux LS, RS qui forment un angle MA avec un axe OZ correspondant à la direction de prise de vue du capteur d'image du dispositif ls PPD. L'axe OZ peut être situé dans un plan vertical passant par une ligne médiane de l'écran DSP. L'angle MA correspond à un angle maximum d'observation intelligible des images affichées à l'écran DSP. La personne P2 se trouve en dehors de la zone délimitée par les plans LS, RS et donc ne peut pas voir l'image affichée à l'écran DSP. 20 Le dispositif PPD détermine si chaque visage détecté est ou non dans la zone délimitée par les plans LS, RS. A cet effet, le dispositif PPD détermine dans chaque image où des visages ont été détectés, une distance A1, A2 entre chaque visage et une ligne médiane verticale ML de l'image correspondant à la direction OZ. Chacune des distances A1, A2 correspond 25 à un angle IA1, IA2 par rapport à l'axe OZ. La distance obtenue est ensuite comparée avec une valeur de seuil de distance correspondant à l'angle MA, et égale à la distance entre la ligne ML et des lignes correspondant aux plans LS, RS. Les figures 3A, 3B représentent l'appareil DV et une image prise par 30 le dispositif de protection PPD, dans une situation d'utilisation prise en compte par le dispositif de protection. Sur les figures 3A, 3B, les deux personnes P1, P2 se trouvent devant l'écran DSP, dans la zone délimitée par les plans LS, RS, mais à des distances différentes de l'écran DSP. Le visage de la personne P2 est détecté à une distance A2' de la ligne médiane 35 ML d'une image fournie par le capteur d'image du dispositif PPD. La distance A2' correspond à un angle IA2' avec l'axe OZ, inférieur à l'angle MA. Selon un mode de réalisation, le dispositif PPD est également configuré pour déterminer une distance entre chaque visage détecté et s l'écran DSP ou le capteur d'image du dispositif PPD. A cet effet, le dispositif PPD peut comprendre deux capteurs d'image pour obtenir deux images prises sous des angles différents et utiliser ces deux images pour déterminer les distances recherchées par triangulation. La méthode de calcul de distance par triangulation peut également être employée si le dispositif PPD io comprend un seul capteur d'image et un dispositif optique formant deux images juxtaposées sur le capteur d'image. La distance entre chaque visage détecté et le capteur d'image peut également être estimée sur la base de la distance entre les deux yeux du visage apparaissant dans une image. A cet effet, le dispositif PPD peut mettre en oeuvre par exemple l'algorithme décrit ls dans le document "Person to Camera Distance Measurement Based on Eye-Distance", Khandaker Abir Rahman et al., 2009 Third International Conference on Multimedia and Ubiquitous Engineering, IEEE Computer Society. Selon un mode de réalisation, le dispositif PPD estime la distance D 20 entre le capteur d'image et chaque visage détecté en appliquant la formule suivante : D = k oh (1) ps mos dans laquelle : oh est une distance réelle choisie dans un visage humain (hauteur, 25 largeur du visage, ou distance entre les yeux, etc.) mos est la valeur de la distance choisie dans le visage, mesurée dans l'image en nombre de pixels, ps est la largeur d'un pixel, et k est une constante liée aux caractéristiques des lentilles de l'objectif 30 et de la matrice de cellules photosensibles du capteur d'image. La distance oh peut être choisie égale à une valeur moyenne obtenue à partir de mesures réalisées sur un grand nombre de visages d'adultes. Si la distance oh est choisie égale à la hauteur d'un visage, elle peut être fixée à une valeur comprise entre 10 et 15 cm. La valeur mos dépend de la distance réelle entre le visage et le capteur d'image et de caractéristiques du capteur d'image telles que la largeur d'un pixel et les dimensions en nombre de pixels de la matrice de cellules photosensibles du capteur d'image. Le dispositif PPD peut être configuré pour déterminer si chaque s visage détecté dans le champ entre les plans LS, RS, est celui de l'utilisateur de l'appareil DV ou d'une personne autorisée par l'utilisateur, ou celui d'un intrus potentiel, sur la base de la distance entre chaque visage détecté et le capteur d'image du dispositif PPD. Les figures 4 et 5 représentent l'appareil DV et des visages de io personnes détectés par le dispositif PPD à proximité de l'appareil. Sur la figure 4, deux visages sont détectés devant l'écran DSP dans la zone délimitée par les plans LS, RS, à savoir le visage de la personne P1 située à une distance D1 du capteur d'image, et le visage de la personne P2 située à une distance D2. Le dispositif PPD est configuré pour appliquer une valeur ls de seuil de distance DT aux distances estimées D1, D2 des visages détectés. Ainsi, si la distance D1, D2 estimée d'un visage détecté est inférieure à la valeur de seuil DT, il est considéré que le visage correspondant est celui d'un utilisateur de l'appareil DV. Si la distance D1, D2 estimée d'un visage détecté est supérieure à la valeur de seuil DT, le 20 visage correspondant peut être celui d'un intrus cherchant à observer l'écran DSP à l'insu de l'utilisateur de l'appareil. Dans l'exemple des figures 4 et 5, la personne P1 à la distance D1 du capteur d'image est considérée comme un utilisateur de l'appareil DV, et la personne P2 à la distance D2 est considérée comme un intrus potentiel. 25 Sur la figure 5, le visage d'une troisième personne P3 est détecté à une distance sensiblement égale à la distance D1 du visage de la personne P1. Il est alors considéré que la personne P3 est nécessairement vue par la personne P1 et donc observe l'écran DSP avec l'autorisation de l'utilisateur de l'appareil DV. 30 Selon un autre mode de réalisation, la détermination de visages d'intrus potentiels peut être également effectuée sur la base d'un écart de distance entre la distance estimée du visage le plus proche de l'écran DSP ou du capteur d'image et celles des autres visages éventuellement détectés. Si cet écart est inférieur à une valeur de seuil d'écart pour un visage détecté, 35 il est alors considéré que ce visage est celui d'une personne nécessairement vue par l'utilisateur et donc autorisée par ce dernier. Si cet écart de distance est supérieur à la valeur de seuil d'écart pour un visage détecté, il est considéré que le visage le plus éloigné de l'écran DSP est celui d'un intrus potentiel. s Si un intrus potentiel est détecté, le dispositif PPD est configuré pour avertir l'utilisateur, par exemple en émettant un signal d'alarme sonore, ou en affichant un message à l'écran. Le message à l'écran peut être associé à une partie d'image extraite de l'image issue du capteur d'image dans laquelle se trouve le visage de l'intrus potentiel détecté. L'utilisateur peut alors io prendre toute mesure appropriée, notamment en fonction de la nature confidentielle des informations affichées à l'écran DSP. Si l'appareil DV comporte un filtre électronique de confidentialité placé devant l'écran, l'utilisateur peut activer ce filtre. Le dispositif PPD peut également être configuré pour commander automatiquement l'activation de ce filtre en cas ls de détection d'un intrus potentiel. Le dispositif PPD peut être également configuré pour simplement transmettre à l'appareil DV un signal de détection d'intrus potentiel, ce signal étant ensuite exploité par l'appareil pour signaler l'intrusion à l'utilisateur, d'une des manières décrites précédemment ou pour activer un filtre électronique de confidentialité. 20 Le dispositif PPD peut également être configuré pour commander la mise en veille ou l'activation de l'appareil DV en fonction de l'absence ou la présence d'un visage détecté devant l'écran DSP dans la zone de détection délimitée par les plans LS, RS et le seuil de distance DT. Le dispositif PPD peut simplement être configuré pour transmettre à l'appareil DV un signal de 25 présence d'une personne dans la zone de détection, afin de permettre à l'appareil DV de commander la mise en veille ou l'extinction de l'écran DSP en cas d'absence de l'utilisateur de l'appareil, et l'activation ou l'allumage de l'écran lorsqu'une personne est à nouveau détectée devant l'écran DSP. L'appareil peut également simplement activer ou désactiver un économiseur 30 d'écran en fonction de ce signal de détection. Dans le cas où l'appareil DV est un ordinateur tel qu'un ordinateur portable ou un téléphone mobile, par exemple un "smartphone", le dispositif PPD peut être réalisé sous la forme d'un programme exécuté par le processeur principal de l'ordinateur ou du téléphone, et utilisant une caméra 35 (webcam) qui est montée au dessus de l'écran d'affichage de l'appareil ou 2978267 io
disposée à côté de ce dernier. La caméra peut alors fournir des images en couleur au dispositif PPD. Selon un mode de réalisation, le dispositif PPD est réalisé sous la forme de circuits autonomes associant un capteur d'image à un processeur s programmé pour assurer des fonctions de traitement d'image afin de détecter des visages et estimer la position de chaque visage détecté. La figure 6 représente le dispositif PPD selon un mode de réalisation. Le dispositif PPD comprend : une unité de traitement PU connectée à un bus d'adresse et de données io ADB, une matrice de cellules photosensibles PMS connectée au bus ADB et à une mémoire de trame FM qui est connectée au bus ADB, des mémoires volatiles et non volatiles VM et NVM également connectées au bus ADB, la mémoire non volatile permettant de stocker des ls programmes exécutés par l'unité PU et des données nécessaires à son fonctionnement, un circuit d'interface de communication CINT connectée au bus ADB et permettant à l'unité PU de communiquer notamment avec l'appareil DV, un circuit d'horloge ICC fournissant les signaux d'horloge nécessaires au 20 fonctionnement notamment de l'unité de traitement PU et de la matrice PMS, et un circuit d'alimentation électrique PS alimentant les circuits du dispositif PPD. La matrice PMS est associée à un objectif optique WL, par exemple 25 au moyen d'un boitier dans lequel est monté le dispositif PPD. Le circuit d'interface CINT permet à l'utilisateur de configurer le dispositif PPD à partir de l'appareil DV et permet à l'unité PU de transmettre à l'appareil notamment un signal d'alerte à la suite de la détection d'un intrus potentiel. Le circuit CINT n'a pas besoin de fournir un débit de transmission important, du fait 30 qu'il n'a pas à transmettre des images, sauf éventuellement de petites images s'il est prévu d'afficher à l'écran DSP les images des visages des intrus potentiels détectés. Ainsi le circuit CINT peut comprendre un circuit d'interface SPI et/ou 12C qui présente l'avantage de présenter une consommation électrique plus faible qu'une interface de type USB. Par 35 ailleurs, comme le dispositif PPD peut fonctionner sans transmettre d'image ii
à l'appareil, on évite le risque qu'un programme espion installé dans l'appareil (du type ordinateur personnel), transmette par exemple par le réseau Internet, des images prises par le capteur d'image. Dans l'exemple de la figure 6, le capteur d'image (PMS, WL) est s propre au dispositif de protection PPD. Il peut donc être choisi de manière à être spécifiquement adapté à la fonction de détection de visages. Ainsi, l'objectif peut être à grand angle de champ, pour bénéficier d'une zone de détection élargie, un tel objectif n'étant pas adapté à l'obtention de prises de vue de qualité. La matrice PMS peut être monochrome, notamment pour io obtenir une meilleure sensibilité qu'une matrice de cellules équipée de filtres colorés prévue pour produire des images en couleurs. La matrice PMS peut ne pas être équipée d'un filtre infrarouge et donc être sensible à des rayonnements en proche infrarouge afin de pour fournir des images d'une scène faiblement éclairée. L'utilisation d'un capteur d'image monochrome ls permet également de simplifier la détection de visages en évitant d'avoir à traiter des données de chrominance. Le fait que le dispositif PPD comporte sa propre unité de traitement PU pour traiter les images issues du capteur d'image, permet d'éviter de consommer les ressources de puissance de calcul de l'appareil surveillé DV, 20 pour effectuer une détection de visage dans des images. En effet, un tel traitement de détection peut occuper jusqu'à 200/0 de la puissance de calcul d'un ordinateur personnel. En outre, il n'est pas nécessaire de transmettre des images à l'extérieur du dispositif PPD et donc de prévoir une interface de communication adaptée à la transmission d'une quantité relativement 25 importante de données. Le dispositif PPD peut donc assurer une fonction de surveillance, même si l'appareil surveillé DV est dans un mode veille. Le dispositif PPD peut donc activer et désactiver l'appareil DV en fonction de la présence d'un utilisateur à proximité de l'appareil. Par ailleurs, l'unité de traitement PU peut accéder directement à la mémoire de trame FM où sont 30 formées les images issues de la matrice PMS, sans passer par une interface de communication avec un circuit externe. Il en résulte que le traitement d'image peut être beaucoup plus rapide que si les images devaient être transmises par un circuit d'interface de type USB par exemple. Le dispositif PPD peut également comprendre un circuit de 35 commande LDRV d'un dispositif d'éclairage LD, par exemple à diode électroluminescente, permettant d'éclairer si nécessaire la scène observée par le capteur d'image constitué de la matrice PMS et de l'objectif WL. Le circuit LDRV est également connecté au bus ADB. L'unité PU peut ainsi être configurée pour déterminer la luminosité moyenne de chaque image acquise s par la matrice PMS et pour commander l'allumage du dispositif d'éclairage LD si la luminosité moyenne est insuffisante pour effectuer une détection de visages. Selon un mode de réalisation, l'objectif WL est un objectif grand angle présentant un champ compris entre 80° et 120°, par exemple égal à 90°, 10 pour pouvoir surveiller l'ensemble de la zone à partir de laquelle l'écran DSP peut être observé de manière intelligible. Selon un mode de réalisation, le dispositif PPD est réalisé sous la forme d'un système sur puce SoC (System on Chip) dans lequel sont intégrés les circuits du dispositif PPD décrits précédemment et notamment 15 un microcontrôleur, et la matrice de cellules photosensibles PMS. La figure 7 représente une séquence d'étapes exécutée par le dispositif PPD, par exemple par l'unité PU. La séquence comprend des étapes S1 à S17 permettant d'activer un mode de veille de l'appareil si aucun visage n'est détecté à un angle inférieur à l'angle MA par rapport à la 20 direction de prise de vue du capteur d'image et à une distance inférieure au seuil DT. Cette séquence permet également d'activer une fonction de protection de confidentialité si au moins deux visages sont détectés à un angle inférieur à l'angle MA et à des distances respectives inférieures et supérieures au seuil de distance DT. A l'étape S1, l'unité PU reçoit une 25 image du capteur d'image, par exemple dans la mémoire FM. A l'étape S2, l'unité PU exécute un algorithme de détection de visage pour détecter des visages dans l'image acquise à l'étape S1. A l'étape S3, le nombre de visages détectés dans l'image est testé. Si ce nombre est nul, l'unité PU exécute l'étape S14, puis retourne à l'étape S1, sinon elle exécute les étapes 30 S4 à S6. A l'étape S14, l'unité PU émet vers l'appareil un signal de commande de mise en veille ou un signal indiquant l'absence d'utilisateur devant l'appareil. L'appareil DV peut ainsi prendre toute mesure appropriée ou adaptée à ses capacités pour empêcher que des données confidentielles soient visibles à l'écran DSP. A cet effet, l'appareil DV peut par exemple se 35 mettre dans un mode veille dans lequel au moins l'écran DSP est en veille ou éteint, ou encore affiche un économiseur d'écran. A l'issue de l'étape S14, l'unité PU commande l'acquisition d'une nouvelle image à l'étape S1. A l'étape S4, l'unité PU initialise un paramètre N au nombre de visages détectés, et des compteurs INT et U à 0. A l'étape S5, l'unité PU s calcule la distance dans l'image entre un des visages détectés et la ligne médiane verticale ML de l'image, cette distance correspondant à un angle formé entre la direction OZ et celle du visage détecté. A l'étape S6, si l'angle correspondant à cette distance est supérieur à l'angle maximum MA, indiquant que le visage détecté est en dehors de la zone d'observation 10 intelligible de l'écran DSP, l'unité PU exécute les étapes S11 et S12. Dans le cas contraire, l'unité PU exécute les étapes S7 et S8. A l'étape S7, l'unité PU procède à l'estimation de la distance D1, D2 entre le visage détecté et le capteur d'image. A l'étape S8, l'unité PU compare cette distance avec une valeur de seuil DT. Si cette distance est inférieure à la valeur de seuil DT, 15 l'unité PU considère le visage détecté comme celui d'un utilisateur et exécute l'étape S9 où elle incrémente de un le compteur U du nombre d'utilisateurs. Si la distance estimée du visage D1, D2 est supérieure à la valeur de seuil DT, l'unité PU exécute l'étape S10 où un compteur de nombre d'intrus potentiel est incrémenté de un. Après les étapes S6, S9 et S10, l'unité PU 20 exécute l'étape S11 où le nombre N de visages détectés restant à traiter est décrémenté de un. Ensuite, à l'étape S12, l'unité PU teste le nombre N et poursuit l'exécution de la séquence à l'étape S5 s'il reste des visages détectés à traiter, ou à l'étape S13 si tous les visages détectés ont été traités durant les étapes S5 à S10. 25 A l'étape S13, le nombre d'utilisateurs détectés U est testé. L'unité PU poursuit l'exécution de la séquence à l'étape S14, si ce nombre est nul et à l'étape S15 dans le cas contraire. A l'étape S15, l'unité PU émet vers l'appareil DV un signal de commande d'activation ou un signal indiquant la présence d'un utilisateur devant l'appareil, permettant à l'appareil DV 30 d'effectuer si nécessaire une opération inverse de celle exécutée à l'étape S14, c'est-à-dire sortir d'un mode de veille ou allumer l'écran DSP. A l'étape S16, l'unité PU teste le nombre d'intrus potentiels INT. L'unité PU poursuit l'exécution de la séquence à l'étape S1 si le nombre INT est nul, et à l'étape S17, puis l'étape S1 dans le cas contraire. A l'étape S17, l'unité PU transmet 35 à l'appareil DV un signal d'alerte indiquant la présence d'intrus potentiels.
L'appareil DV peut ainsi prendre toute mesure de protection appropriée ou adaptée à ses capacités, comme émettre un signal sonore, afficher un message d'alerte à l'écran DSP, activer un filtre de confidentialité, etc. Il apparaîtra clairement à l'homme de l'art que la présente invention s est susceptible de diverses variantes de réalisation et diverses applications. En particulier, l'invention ne s'applique pas nécessairement à un appareil comportant un écran d'affichage ou affichant des informations confidentielles. Ainsi, les informations confidentielles à protéger peuvent être simplement introduites par l'utilisateur par exemple au moyen d'un clavier.
10 L'appareil à protéger peut être par exemple un terminal de paiement ou un distributeur de billets de banque. Dans ce cas, le dispositif PPD surveille une zone à partir de laquelle les touches d'un clavier peuvent être observées et signale simplement la présence d'un intrus potentiel dans cette zone, en dehors de l'utilisateur. Plus généralement, la présente invention s'applique à 15 la commande d'un appareil, comportant ou non un écran d'affichage, en fonction de la présence ou l'absence de personnes au voisinage de l'appareil et/ou en fonction des positions respectives des personnes détectées au voisinage de l'appareil. Ainsi, la présente invention peut s'appliquer à la commande d'un appareil de climatisation d'une pièce, en fonction du nombre 20 de personnes et des positions respectives de ces personnes dans la pièce. La présente invention peut également s'appliquer à l'ouverture automatique d'une porte seulement si un visage humain est détecté devant la porte, ou la commande d'un jouet en fonction de la présence et éventuellement de la position de chaque utilisateur du jouet. L'invention peut également être 25 utilisée dans des dispositifs de comptage de personnes, par exemple pour compter le nombre de personnes ayant été dans un rayon de supermarché ou devant un écran publicitaire, et leur temps de passage, ou encore pour compter le nombre de passagers dans des véhicules passant devant le dispositif. 30

Claims (13)

  1. REVENDICATIONS1. Procédé de contrôle d'un appareil électronique (DV), comprenant des étapes consistant à : acquérir une image de l'environnement de l'appareil, et détecter la présence de visages de personnes (P1, P2, P3) dans s l'image acquise, caractérisé en ce qu'il comprend des étapes consistant à : estimer une position respective de chaque visage détecté par rapport à l'appareil, et émettre un signal vers l'appareil pour activer une fonction de io l'appareil, si une condition est réalisée en ce qui concerne un nombre de visage détecté dans l'image et/ou la position estimée de chaque visage détecté.
  2. 2. Procédé selon la revendication 1, dans lequel l'estimation de la ls position de chaque visage détecté (P1, P2) dans une image comprend une étape d'estimation d'un angle (IA1, IA2) formé entre une direction de prise de vue (OZ) de l'image acquise et une direction dans laquelle le visage détecté est localisé. 20
  3. 3. Procédé selon la revendication 1 ou 2, dans lequel l'estimation de la position de chaque visage détecté (P1, P2) comprend l'estimation d'une distance (D1, D2) entre l'appareil (DV) et le visage détecté.
  4. 4. Procédé selon la revendication 3, dans lequel l'estimation de la 25 distance (D1, D2) entre l'appareil (DV) et un visage détecté (P1, P2) dans l'image, est effectuée par triangulation à partir de deux images obtenues à partir de points de prise de vue espacés l'un de l'autre, ou en appliquant la formule suivante : D - k oh ps mos 30 dans laquelle : D est la distance à estimer, oh est une distance réelle choisie dans un visage humain, 15mos est la valeur de la distance choisie dans le visage détecté, mesurée dans l'image en nombre de pixels, ps est la largeur d'un pixel, et k est une constante liée à des caractéristiques du capteur d'image. s
  5. 5. Procédé selon l'une des revendications 3 et 4, comprenant des étapes de détermination si chaque visage détecté (P1, P2) dans un champ d'observation de l'appareil, est celui d'un utilisateur de l'appareil (DV) ou d'une personne autorisée par l'utilisateur, ou celui d'un intrus potentiel, sur la 10 base de la distance estimée (D1, D2) entre l'appareil et le visage détecté.
  6. 6. Procédé selon l'une des revendications 1 à 5, dans lequel la fonction activée de l'appareil comprend au moins l'une des opérations suivantes : 15 entrée dans un mode de veille de l'appareil si aucun visage n'est détecté à une distance inférieure à un seuil de distance (DT), et à un angle par rapport à une direction de prise de vue (OZ) de l'image acquise, inférieur à un seuil d'angle (MA), sortie du mode veille si un visage est à nouveau détecté à une 20 distance inférieure au seuil de distance, et à un angle par rapport à la direction de prise de vue, inférieur au seuil d'angle, et activation d'une fonction de protection de confidentialité si au moins deux visages sont détectés à un angle par rapport à la direction de prise de vue, inférieur au seuil d'angle, et à des distances de l'appareil 25 respectivement inférieure et supérieure au seuil de distance ou espacées d'une valeur de seuil d'écart de distance.
  7. 7. Procédé selon la revendication 6, dans lequel la fonction de protection comprend au moins une des opérations suivantes : 30 émission ou affichage d'un signal d'alerte, affichage du visage d'une personne détectée comme intruse, et activation d'un filtre de confidentialité sur un écran d'affichage (DSP) de l'appareil. s
  8. 8. Procédé selon l'une des revendications 1 à 7, comprenant des étapes de détermination de la luminosité moyenne de l'image acquise et d'allumage d'un dispositif d'éclairage (LD) si la luminosité moyenne déterminée est insuffisante.
  9. 9. Dispositif de contrôle d'un appareil électronique, comprenant un capteur d'image (PMS), et une unité de traitement (PU) connectée au capteur d'image et configurée pour mettre en oeuvre le procédé selon l'une des revendications 1 à 8. io
  10. 10. Dispositif selon la revendication 9, dans lequel le capteur d'image (PMS) est configuré pour fournir des images en couleur ou monochromes.
  11. 11. Dispositif selon la revendication 9 ou 10, dans lequel le capteur ls d'image est associé à un objectif présentant un champ de prise de vue compris entre 80 ° et 120 °.
  12. 12. Dispositif selon la revendication 9 à 11, comprenant un circuit d'interface (LDRV) pour relier l'unité de traitement (PU) à un dispositif 20 d'éclairage (LD), l'unité de traitement étant configurée pour commander le dispositif d'éclairage en fonction d'une luminosité moyenne des images transmises par le capteur d'image (PMS).
  13. 13. Système sur puce comprenant un microcontrôleur et une matrice 25 de cellules photosensibles (PMS), configuré pour mettre en oeuvre le procédé selon l'une des revendications 1 à 8.
FR1156495A 2011-07-18 2011-07-18 Procede et dispositif de controle d'un appareil en fonction de la detection de personnes a proximite de l'appareil Withdrawn FR2978267A1 (fr)

Priority Applications (2)

Application Number Priority Date Filing Date Title
FR1156495A FR2978267A1 (fr) 2011-07-18 2011-07-18 Procede et dispositif de controle d'un appareil en fonction de la detection de personnes a proximite de l'appareil
US13/552,426 US8963831B2 (en) 2011-07-18 2012-07-18 Method and device for controlling an apparatus as a function of detecting persons in the vicinity of the apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
FR1156495A FR2978267A1 (fr) 2011-07-18 2011-07-18 Procede et dispositif de controle d'un appareil en fonction de la detection de personnes a proximite de l'appareil

Publications (1)

Publication Number Publication Date
FR2978267A1 true FR2978267A1 (fr) 2013-01-25

Family

ID=44802218

Family Applications (1)

Application Number Title Priority Date Filing Date
FR1156495A Withdrawn FR2978267A1 (fr) 2011-07-18 2011-07-18 Procede et dispositif de controle d'un appareil en fonction de la detection de personnes a proximite de l'appareil

Country Status (2)

Country Link
US (1) US8963831B2 (fr)
FR (1) FR2978267A1 (fr)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230244823A1 (en) * 2022-01-31 2023-08-03 Dell Products L.P. Selective display information security system

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9092605B2 (en) * 2011-04-11 2015-07-28 NSS Lab Works LLC Ongoing authentication and access control with network access device
JP5845783B2 (ja) * 2011-09-30 2016-01-20 カシオ計算機株式会社 表示装置、表示制御方法及びプログラム
JP5966624B2 (ja) * 2012-05-29 2016-08-10 株式会社リコー 情報処理装置及び情報表示システム
US20140075569A1 (en) * 2012-09-11 2014-03-13 Samsung Electronics Co., Ltd. Display apparatus and display program
KR20140052727A (ko) * 2012-10-25 2014-05-07 삼성전자주식회사 단말 장치, 서버, 단말 장치 제어 방법 및 서버 제어 방법
US8955147B2 (en) * 2012-12-05 2015-02-10 Verizon Patent And Licensing Inc. Mobile device privacy application
US9094576B1 (en) 2013-03-12 2015-07-28 Amazon Technologies, Inc. Rendered audiovisual communication
EP2973202A4 (fr) * 2013-03-15 2016-08-17 Intel Corp Confidentialité d'affichage dotée d'une configuration dynamique
TW201437922A (zh) * 2013-03-29 2014-10-01 Wistron Corp 畫面控制方法及應用其之電子裝置
US11199906B1 (en) 2013-09-04 2021-12-14 Amazon Technologies, Inc. Global user input management
CN105719439A (zh) * 2014-12-05 2016-06-29 富泰华工业(深圳)有限公司 护眼系统及方法
US10345641B2 (en) 2014-12-18 2019-07-09 Sakai Display Products Corporation Liquid crystal display apparatus and method of driving liquid crystal display apparatus
US9600680B2 (en) * 2015-02-23 2017-03-21 International Business Machines Corporation Unmasking of confidential content
JP6490811B2 (ja) * 2015-06-23 2019-03-27 堺ディスプレイプロダクト株式会社 液晶表示装置及び液晶表示装置の駆動方法
CN105574436B (zh) 2015-12-23 2019-11-26 Tcl移动通信科技(宁波)有限公司 一种基于移动终端的个人信息保护方法、系统及移动终端
US10546153B2 (en) * 2016-09-20 2020-01-28 International Business Machines Corporation Attention based alert notification
KR102594792B1 (ko) * 2016-09-30 2023-10-30 엘지디스플레이 주식회사 유기발광표시장치 및 그 제어방법
CN106682540A (zh) * 2016-12-06 2017-05-17 上海斐讯数据通信技术有限公司 一种智能防偷窥方法及装置
US10498968B1 (en) * 2017-03-01 2019-12-03 Altia Systems, Inc. Intelligent zoom method and video system implementing same
US10728683B2 (en) * 2017-09-01 2020-07-28 Dts, Inc. Sweet spot adaptation for virtualized audio
CN108229952A (zh) * 2018-01-30 2018-06-29 努比亚技术有限公司 一种终端的支付方法、终端及存储介质
US10853526B2 (en) * 2018-09-10 2020-12-01 Lenovo (Singapore) Pte. Ltd. Dynamic screen filtering
US20210208267A1 (en) * 2018-09-14 2021-07-08 Hewlett-Packard Development Company, L.P. Device operation mode change
CN110070015B (zh) * 2019-04-12 2021-07-02 西安科芮智盈信息技术有限公司 图像识别方法及装置、系统
US20220171889A1 (en) * 2019-08-12 2022-06-02 Hewlett-Packard Development Company, L.P. Controlling display devices based on viewing angles
WO2021131059A1 (fr) * 2019-12-27 2021-07-01 楽天グループ株式会社 Système d'authentification, dispositif d'authentification, procédé d'authentification, et programme
US11199652B2 (en) * 2020-02-07 2021-12-14 Sony Interactive Entertainment Inc. Active privacy screen
FR3139656A1 (fr) * 2022-09-13 2024-03-15 Charvet Industries Procédé de commande d’un panneau d’affichage public

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070150827A1 (en) * 2005-12-22 2007-06-28 Mona Singh Methods, systems, and computer program products for protecting information on a user interface based on a viewability of the information
US20100124363A1 (en) * 2008-11-20 2010-05-20 Sony Ericsson Mobile Communications Ab Display privacy system

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100312486B1 (ko) * 1998-11-13 2002-02-28 구자홍 영상표시기기의자동회전장치와그회전방법
US20060044290A1 (en) 2004-08-24 2006-03-02 Hurwitz Roger A Electronic privacy filter
JP4252954B2 (ja) * 2004-12-02 2009-04-08 インターナショナル・ビジネス・マシーンズ・コーポレーション 情報処理装置、情報処理装置のパワーマネージメント方法、およびそのためのプログラム
JP2007279424A (ja) 2006-04-07 2007-10-25 Three M Innovative Properties Co 覗き見防止シート及びそれを含むディスプレイ装置
US20080046930A1 (en) * 2006-08-17 2008-02-21 Bellsouth Intellectual Property Corporation Apparatus, Methods and Computer Program Products for Audience-Adaptive Control of Content Presentation
WO2010021373A1 (fr) * 2008-08-22 2010-02-25 ソニー株式会社 Dispositif d'affichage d'image, procédé de commande et programme d'ordinateur
US8613008B2 (en) * 2010-01-11 2013-12-17 Lead Technology Capital Management, Llc System and method for broadcasting media

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070150827A1 (en) * 2005-12-22 2007-06-28 Mona Singh Methods, systems, and computer program products for protecting information on a user interface based on a viewability of the information
US20100124363A1 (en) * 2008-11-20 2010-05-20 Sony Ericsson Mobile Communications Ab Display privacy system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230244823A1 (en) * 2022-01-31 2023-08-03 Dell Products L.P. Selective display information security system

Also Published As

Publication number Publication date
US20130021240A1 (en) 2013-01-24
US8963831B2 (en) 2015-02-24

Similar Documents

Publication Publication Date Title
FR2978267A1 (fr) Procede et dispositif de controle d'un appareil en fonction de la detection de personnes a proximite de l'appareil
EP1364351B8 (fr) Procede et dispositif de detection de feux base sur l'analyse d'images
US9600688B2 (en) Protecting display of potentially sensitive information
CN110895861B (zh) 异常行为预警方法、装置、监控设备和存储介质
JP6469975B2 (ja) 映像監視装置、映像監視システムおよび映像監視方法
US9870700B2 (en) Method and device for avoiding false alarms in monitoring systems
EP3320527A1 (fr) Systeme de surveillance de l'etat de vigilance d'un operateur
JPWO2015136675A1 (ja) 検知装置、検知方法、および、プログラム
JP2019004424A (ja) 処理装置、処理システム、方法及びプログラム
US20220279119A1 (en) Method and system for activity detection with obfuscation
EP2307948B1 (fr) Dispositif interactif et procédé d'utilisation
CN110874905A (zh) 监控方法及装置
FR3111452A1 (fr) Procédé de protection automatique d’un objet, d’une personne ou d’une information ou œuvre visuelle vis-à-vis d’un risque d’observation non désirée
JP2017228316A (ja) 検知装置、検知方法、および、プログラム
FR2871273A1 (fr) Dispositif et procede d'etablissement d'une zone de surveillance d'image
FR2985070A1 (fr) Procede et systeme de detection de chutes de personnes
CN112153300A (zh) 多目摄像头曝光方法、装置、设备及介质
FR3072199A1 (fr) Procede de detection d'une presence d'une partie corporelle porteuse d'une empreinte digitale sur un capteur d'empreintes digitales
FR3093565A1 (fr) Procédé de détection de défauts de température et dispositif mettant en œuvre ledit procédé
US11671695B2 (en) Systems and methods for detecting tampering with privacy notifiers in recording systems
FR3088457A1 (fr) Procede de detection automatique de l'usurpation de visage
US10652480B2 (en) Display exposure monitoring module
WO2023156475A1 (fr) Procédé de protection d'informations affichées sur un dispositif d'affichage et dispositif d'affichage
EP4254250A1 (fr) Méthode et appareil pour détecter un spectateur d'appareil mobile basée sur des données de profondeur
TWI403985B (zh) 一種用於可攜式電子設備的防盜系統和方法

Legal Events

Date Code Title Description
ST Notification of lapse

Effective date: 20150331