FR2944884A1 - Procede de systeme de correction d'une representation d'une region centrale d'un oeil sur une image photographique dudit oeil prise avec un flash. - Google Patents

Procede de systeme de correction d'une representation d'une region centrale d'un oeil sur une image photographique dudit oeil prise avec un flash. Download PDF

Info

Publication number
FR2944884A1
FR2944884A1 FR0952755A FR0952755A FR2944884A1 FR 2944884 A1 FR2944884 A1 FR 2944884A1 FR 0952755 A FR0952755 A FR 0952755A FR 0952755 A FR0952755 A FR 0952755A FR 2944884 A1 FR2944884 A1 FR 2944884A1
Authority
FR
France
Prior art keywords
eye
photographic image
flash
additional
representation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
FR0952755A
Other languages
English (en)
Other versions
FR2944884B1 (fr
Inventor
Santini Gwladys Hermant
Jean Gobert
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ST Ericsson SA
Original Assignee
ST Ericsson SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ST Ericsson SA filed Critical ST Ericsson SA
Priority to FR0952755A priority Critical patent/FR2944884B1/fr
Priority to PCT/EP2010/055587 priority patent/WO2010125039A1/fr
Publication of FR2944884A1 publication Critical patent/FR2944884A1/fr
Application granted granted Critical
Publication of FR2944884B1 publication Critical patent/FR2944884B1/fr
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • G03B15/02Illuminating scene
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof
    • G06T5/94Dynamic range modification of images or parts thereof based on local image properties, e.g. for local contrast enhancement
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04N1/62Retouching, i.e. modification of isolated colours only or in isolated picture areas only
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04N1/62Retouching, i.e. modification of isolated colours only or in isolated picture areas only
    • H04N1/624Red-eye correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30216Redeye defect

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Eye Examination Apparatus (AREA)

Abstract

Procédé de correction d'une représentation d'une région centrale d'un oeil sur une image photographique dudit oeil prise avec un flash et système associé. Le procédé comprend une prise d'une image photographique supplémentaire de l'oeil sans flash, et un remplacement dans l'image photographique prise avec flash de ladite représentation de la région centrale de l'oeil par la représentation correspondante de ladite région centrale de l'oeil sur l'image photographique supplémentaire, en cas de détection d'une anomalie chromatique de la représentation d'une centrale de l'oeil sur l'image photographique prise avec flash.

Description

B08-5213FR - EHE/EVH 07-MGEX-061 Société anonyme : ST-Ericsson SA (ST-Ericsson Ltd) Procédé et système de correction d'une représentation d'une région centrale d'un oeil sur une image photographique dudit oeil prise avec un flash Inventeurs : Gwladys HERMANT-SANTINI Jean GOBERT Procédé et système de correction d'une représentation d'une région centrale d'un oeil sur une image photographique dudit oeil prise avec un flash L'invention concerne le traitement d'images photographiques et plus particulièrement la correction des yeux rouges sur une image photographique numérique prise avec un flash. Les appareils photographiques numériques utilisent des systèmes produisant des flashs préliminaires de préparation avant la prise d'une image photographique avec un flash. La lumière intense ainsi émise par les flashs de préparation est utilisée pour contraindre les pupilles des personnes photographiées à se contracter. De cette manière, la surface de l'oeil réfléchissant la lumière émise par le flash, c'est-à-dire la pupille, est minimisée, minimisant par conséquent l'effet d'yeux rouges apparaissant sur une image photographique prise avec flash. Bien que la surface réfléchissante soit minimisée, la surface de la pupille n'est jamais nulle. Par conséquent, l'effet d'yeux rouges n'est jamais complètement inexistant sur une photographie.
Par ailleurs, ces systèmes sont souvent défaillants. En effet, ces systèmes ne fonctionnent pas, par exemple, dans le cas où le sujet regarde dans une direction autre que celle de l'objectif de l'appareil photographique. Il est également connu de corriger les yeux rouges en agissant sur les couleurs des pixels des yeux de l'image photographique après la capture de celle-ci grâce à des logiciels internes à un appareil photographique numérique, ou grâce à des logiciels de traitement d'image sur des ordinateurs. Malheureusement, ces solutions produisent en général des résultats peu satisfaisants avec des regards inexpressifs. Ces regards inexpressifs sont dus à des pupilles dont la couleur est d'un gris opaque ou d'une couleur aberrante irréelle. Dans le cas d'une couleur de pupille incohérente ou aberrante, la pupille dilatée est complètement corrigée par désaturation des couleurs, c'est-à-dire en diminuant la saturation des couleurs, induisant quelquefois des résultats non réels. I1 est proposé de pallier aux inconvénients mentionnés ci-dessus en remplaçant par exemple les pixels rouges d'une pupille d'un oeil sur une image photographique prise avec flash par les pixels de la pupille de l'oeil correspondant sur une image photographique prise sans flash, et ainsi retrouver la véritable texture de la pupille de l'oeil. Selon un aspect, il est proposé un procédé de correction d'une représentation d'une région centrale d'un oeil sur une image photographique dudit oeil prise avec un flash. Selon une caractéristique générale de cet aspect, le procédé comprend une prise d'une image photographique supplémentaire de l'oeil sans flash, et un remplacement dans l'image photographique prise avec flash de ladite représentation de la région centrale de l'oeil par la représentation correspondante de ladite région centrale de l'oeil sur l'image photographique supplémentaire, en cas de détection d'une anomalie chromatique de la représentation de la région centrale d'un oeil sur l'image photographique prise avec flash. Une détection d'une anomalie chromatique de la représentation de la région centrale d'un oeil peut, par exemple, correspondre à une détection d'un oeil rouge. Cette détection peut être réalisée par analyse de la chrominance de la représentation de la région centrale de l'oeil. Si une couleur, comme le rouge par exemple dans le cas des yeux rouges, est présente sur un nombre significatif de pixels, jusqu'à à un seuil déterminé pour ladite couleur, alors la représentation de la région centrale de l'oeil peut être considérée comme présentant une anomalie chromatique. Les seuils déterminés pour les différentes chrominances (les différentes couleurs) sont bien connus de l'homme du métier pour une région centrale de l'oeil et peuvent être ajustés en fonction des caractéristiques optiques et numériques de l'appareil photographique numérique utilisé. La région centrale de l'oeil comprend par exemple la pupille et/ou l'iris.
La prise de l'image photographique supplémentaire peut comprendre une prise de plusieurs images photographiques additionnelles prises sans flash et une sélection de ladite image photographique supplémentaire parmi les images photographiques additionnelles prises sans flash. La prise d'image photographique peut être réalisée dans une fenêtre temporelle proche avant et/ou après la prise de l'image photographique prise avec un flash. A titre indicatif, la fenêtre temporelle proche peut être comprise entre -0.5 seconde et +0.5 seconde. La sélection de l'image photographique supplémentaire parmi les images photographiques additionnelles peut être réalisée à partir du taux d'ouverture de l'oeil. En comparant le taux d'ouverture d'un oeil sur l'image photographique prise avec un flash au taux d'ouverture de l'oeil correspondant sur chaque image photographique additionnelle prise sans flash, on peut déterminer l'image photographique additionnelle dont l'écart entre le taux d'ouverture de l'oeil de l'image photographique additionnelle et celui de l'image photographique prise avec flash est le plus petit, et ainsi sélectionner cette image photographique additionnelle comme image photographique supplémentaire. Dans les systèmes photographiques numériques, des images de prévisualisation à résolution réduite permettent de visionner sur un écran de contrôle de l'appareil photographique numérique les images photographiques précédant le déclenchement de la capture. Certains systèmes ne sont pas capables d'enregistrer plusieurs images additionnelles en pleine résolution, car cela nécessite une grande bande passante pour transférer les images et une grande place mémoire pour les stocker. Une telle limitation n'existe pas pour les images de prévisualisation, car du fait de leur résolution réduite, elles sont moins lourdes en mémoire et en bande passante. Dans ce cas, un nombre d'images de prévisualisation peut être enregistré avant la prise de l'image photographique prise avec un flash et il est possible d'utiliser ces images comme images additionnelles. Ces images de prévisualisation doivent être sur-échantillonnées pour pallier la différence de résolution avec l'image photographique prise avec flash. Ainsi, par sur-échantillonnage d'une image de prévisualisation, l'image photographique supplémentaire possède la même résolution, et donc le même nombre de pixels, que l'image photographique prise avec flash. En effet, le sur-échantillonnage d'une image photographique permet d'augmenter sa résolution et donc le nombre de pixels la définissant. Le remplacement de la représentation de la région centrale de l'oeil sur l'image photographique prise avec un flash par la représentation centrale de l'oeil correspondante sur l'image photographique supplémentaire comporte préférentiellement une compensation de mouvement entre l'image photographique prise avec flash et l'image photographique supplémentaire. L'expression compensation de mouvement s'entend ici de façon large et peut s'appliquer sur l'ensemble de l'image ou bien sur une partie seulement, par exemple, en compensant au moins une partie de l'image photographique supplémentaire englobant la représentation de la région centrale de l'oeil. Selon un mode de mise en oeuvre, si les coordonnées de la représentation de la région centrale d'un oeil sur l'image photographique supplémentaire diffèrent des coordonnées de la représentation correspondante de la région centrale de l'oeil sur l'image photographique prise avec flash, un vecteur de translation de correction est appliqué à la représentation de la région centrale de l'oeil sur l'image photographique supplémentaire afin de faire correspondre les représentations des régions centrales de l'oeil détecté des images photographiques. De cette manière, un remplacement pixel par pixel pourra être réalisé. Ainsi, si le sujet ou l' oeil du sujet a bougé entre les deux images photographiques prises, c'est-à-dire entre l'image photographique prise avec flash et l'image photographique supplémentaire prise sans flash, une correction de mouvement de la représentation de la région centrale de l'oeil permet de venir remplacer les pixels correspondants aux endroits correspondants sur l'image photographique prise avec flash. Le remplacement de la représentation de la région centrale de l'oeil sur l'image photographique prise avec un flash par la représentation centrale de l'oeil correspondante sur l'image photographique supplémentaire peut avantageusement comprendre une correction de la luminosité d'au moins une partie de l'image photographique supplémentaire englobant la représentation de la région centrale de l'oeil. De cette manière, le défaut de luminosité de l'image photographique supplémentaire prise sans flash est pallié. On obtient ainsi une image photographique supplémentaire prise sans flash dont la luminosité est équivalente à la luminosité de l'image photographique prise avec flash. De cette manière, le remplacement des pixels de la pupille de l'oeil de l'image photographique prise avec flash par les pixels de la pupille de l'oeil de l'image photographique prise sans flash est réalisé avec une luminosité des pixels équivalente. Selon un autre aspect, il est proposé un appareil photographique numérique comprenant des moyens de correction d'une représentation d'une région centrale de l'oeil sur une image photographique dudit oeil prise avec un flash.
Les moyens de correction comprennent des moyens de capture d'une image photographique supplémentaire aptes à réaliser une prise d'image photographique supplémentaire de l'oeil sans flash, des moyens de détection d'une anomalie chromatique aptes à détecter une anomalie chromatique sur la représentation d'une région centrale de l'oeil sur l'image photographique avec flash et à délivrer un signal de détection en cas d'une telle détection, et des moyens de remplacement aptes à remplacer, en réponse au signal de détection, dans l'image photographique prise avec un flash ladite représentation d'une région centrale de l'oeil par la représentation correspondante de ladite région centrale de l'oeil sur l'image photographique supplémentaire. Avantageusement, les moyens de correction peuvent comprendre des moyens de commande aptes à commander une prise de plusieurs images photographiques additionnelles prises sans flash, et des moyens de sélection aptes à sélectionner ladite image photographique supplémentaire parmi les images photographiques additionnelles prises sans flash. Les moyens de sélection comprennent préférentiellement des moyens de détermination du taux d'ouverture de l'oeil. Avantageusement, les moyens de correction comprennent des moyens de sur-échantillonnage aptes à augmenter la résolution d'une image photographique. Les moyens de remplacement peuvent avantageusement comprendre des moyens de compensation de mouvement aptes à compenser le mouvement entre l'image photographique prise avec flash et l'image photographique supplémentaire, par exemple, en remplaçant au moins une partie de l'image photographique supplémentaire englobant la représentation de la région centrale de l'oeil. De préférence, les moyens de remplacement comprennent des moyens de compensation de luminosité aptes à corriger la luminosité d'au moins une partie de l'image photographique supplémentaire englobant la représentation de la région centrale de l'oeil.
Selon un autre aspect, il est proposé un appareil de téléphonie mobile comprenant un appareil photographique numérique tel que définit ci-avant. D'autres avantages et caractéristiques de l'invention apparaîtront à l'examen de la description détaillée des modes de réalisation et de mise en oeuvre, nullement limitative, et des dessins annexés, sur lesquels : - la figure 1 représente, de manière schématique, un mode de réalisation d'un appareil de téléphonie mobile comprenant un appareil photographique numérique comportant des moyens de correction d'une représentation d'une région centrale de l'oeil sur une image photographique dudit oeil prise avec un flash ; - la figure 2 représente, de manière schématique, un mode de réalisation des moyens de correction d'une représentation d'une région centrale de l'oeil sur une image photographique dudit oeil prise avec un flash ; - la figure 3 représente, de manière schématique, un mode de réalisation des moyens de sélection de l'image photographique supplémentaire ; - la figure 4 illustre un mode de réalisation des moyens de remplacement ; - la figure 5 représente un synopsis d'un mode de mise en oeuvre d'un procédé de correction d'une représentation d'une région centrale d'un oeil sur une image photographique dudit oeil prise avec un flash. Sur la figure 1, est représenté un appareil de téléphonie mobile T comportant un appareil photographique numérique P. L'appareil photo numérique P comprend en outre des moyens de correction 1 20 permettant la correction d'une anomalie chromatique d'une représentation d'une région centrale de l'oeil, tel qu'un phénomène d'yeux rouges sur une image photographique prise avec un flash. La figure 2 illustre un mode de réalisation des moyens de correction 1. Les moyens de correction 1 comprennent en outre des 25 moyens de capture 2 permettant la prise d'une image photographique, des moyens 3 de détection des yeux, des moyens 4 de détection de la représentation du centre d'un oeil, des moyens 5 de détection d'anomalie chromatique, des moyens 6 de sélection, des moyens 7 de remplacement, et des moyens de commande 8. 30 Les moyens de capture 2 sont commandés par des moyens de commande 8 qui commandent également des moyens d'activation 9 d'un flash lors d'une prise d'une image photographique avec un flash. Certains de ces moyens sont bien connus en soi de l'homme du métier. I1 s'agit notamment des moyens de capture 2, des moyens de 10 15 détection 3 et 4. Plus précisément, et à titre indicatif, les moyens de détection 3 et 4 mettent en oeuvre des méthodes logicielles connues en soi et par exemple décrites dans les articles Driver Fatigue Detection Based on eye Tracking and Dynamic Template Matching et Real- time pupil detection based on three-step hierarchy publiés dans la revue IEEE. L'image photographique prise avec flash ainsi capturée est délivrée aux moyens 3 de détection des yeux. A l'aide d'une des méthodes connues dans l'état de la technique, les moyens 3 de détection des yeux détectent la position des yeux sur un visage présent sur l'image photographique prise avec flash. L'image photographique prise avec flash complétée de l'information sur la position d'au moins un oeil d'un visage visible sur l'image photographique prise avec flash est délivrée aux moyens 4 de détection de la représentation du centre d'un oeil. Les moyens de détection 4 permettent de détecter, à partir des informations délivrées par les moyens 3 de détection des yeux, la position de la représentation du centre de l'oeil pour chacun des yeux détectés sur l'image photographique avec flash. La pupille et/ou l'iris de chaque oeil détecté est ainsi repérée. L'image photographique prise avec flash complétée de l'information de la position de la représentation du centre de l'oeil est ensuite délivrée aux moyens de détection d'anomalie chromatique 5 qui reçoivent également en entrée une information provenant des moyens d'activation 9 d'un flash. L'information délivrée par les moyens d'activation d'un flash 9 permet de savoir si le flash a été utilisé lors de la capture de l'image photographique, et si l'image reçue par les moyens de sélection correspond à l'image photographique prise avec flash ou à une image photographique additionnelle prise sans flash. Les moyens de détection 5 permettent de détecter une anomalie chromatique sur la représentation d'une région centrale de l'oeil sur l'image photographique avec flash, telle qu'un oeil rouge. La détection par les moyens 5 est réalisée, dans ce mode de réalisation, par analyse de la chrominance d'une représentation de la région centrale de l'oeil. Si une couleur, comme la chrominance rouge par exemple dans le cas des yeux rouges, est détectée, par exemple, sur des pixels contenus dans une zone de travail comprenant l' oeil détecté alors la représentation de la région centrale de l'oeil peut être considérée comme présentant une anomalie chromatique. Si l'image photographique prise avec flash ne possède pas d'anomalie chromatique d'une représentation d'une région centrale d'un oeil, les moyens 5 de détection délivrent l'image photographique directement en sortie des moyens de correction 1. L'image photographique prise avec flash ne subit ainsi aucune correction, et devient l'image photographique finale. En revanche, si une anomalie chromatique d'une représentation de la région centrale d'un oeil est détectée sur l'image photographique prise avec flash, cette dernière, complétée de l'information de la position de la représentation du centre de l'oeil, est alors délivrée aux moyens 6 de sélection qui reçoivent également en entrée une information provenant des moyens d'activation 9 d'un flash.
L'information délivrée par les moyens d'activation d'un flash 9 permet de savoir si le flash a été utilisé lors de la capture de l'image photographique, et si l'image reçue par les moyens de sélection correspond à l'image photographique prise avec flash ou à une image photographique additionnelle prise sans flash.
Plusieurs images photographiques additionnelles sont capturées avant et/ou après la prise de l'image photographique prise avec flash à l'aide des moyens de capture 2. Les moyens de commande 8 commandent la prise de plusieurs images photographiques additionnelles sans activer les moyens d'activation de flash 9 afin que celles-ci soient prises sans flash. Les images photographiques additionnelles peuvent être capturées dans une zone temporelle située autour de l'image photographique prise avec flash, et ces images photographiques additionnelles peuvent être des images de prévisualisation.
Les images photographiques additionnelles ainsi capturées par les moyens de capture 2 sont délivrées à des moyens de suréchantillonage 100. Si une image photographique additionnelle est une image de prévisualisation, celle-ci est sur-échantillonnée par les moyens 100 afin d'augmenter sa résolution jusqu'à la résolution de l'image photographique prise avec flash. Après un sur-échantillonnage d'une image de prévisualisation, cette dernière comprend la même résolution, c'est-à-dire le même nombre de pixels, que l'image photographique prise avec flash. Sinon, la résolution de l'image photographique n'est pas modifiée. Chaque image photographique additionnelle est alors délivrée ensuite aux moyens 3 de détection des yeux qui détectent les yeux de chaque visage présent sur l'image photographique additionnelle. L'image photographique additionnelle complétée de l'information sur la position des yeux de chaque visage détecté sur l'image photographique supplémentaire est délivrée aux moyens 4 de détection de la représentation du centre d'un oeil. A partir des informations délivrées par les moyens 3 de détection des yeux, les moyens de détection 4 détectent la position de la représentation du centre de l'oeil pour chacun des yeux détectés sur l'image photographique additionnelle. L'image photographique additionnelle complétée de l'information sur la position de la représentation du centre de chaque oeil détecté présent sur l'image photographique additionnelle est alors délivrée aux moyens 5 de détection d'anomalie chromatique. Les moyens 5 de détection d'anomalie chromatique reçoivent également une information provenant des moyens d'activation 9 d'un flash. Les moyens 9 délivrent dans ce cas une information indiquant que l'image photographique a été prise sans flash. Les moyens 5 de détection d'anomalie chromatique ne font aucun traitement ou analyse de l'image photographique prise sans flash et délivrent en sortie l'image photographique additionnelle complétée de l'information sur la position de la représentation du centre de chaque oeil détecté présent sur l'image photographique additionnelle telle que délivrée par les moyens de détection 4. Les moyens de sélection 6 réalisent alors une sélection d'une image photographique supplémentaire prise sans flash à partir des images photographiques additionnelles prises sans flash. Les moyens de sélection 6 délivrent alors en sortie l'image photographique prise avec flash et l'image photographique supplémentaire prise sans flash aux moyens 7 de remplacement. Les moyens 7 de remplacement remplacent alors dans l'image photographique prise avec un flash ladite représentation d'une région centrale de l'oeil par la représentation correspondante de ladite région centrale de l'oeil sur l'image photographique supplémentaire prise sans flash pour chaque oeil détecté. La figure 3 illustre un mode de réalisation des moyens de sélection 6. Dans ce mode de réalisation, les moyens de sélection 6 comprennent des moyens de détermination du taux d'ouverture de l'oeil 10, des moyens de mémorisation 11, ainsi qu'un module de sélection 12. Les moyens 10 de détermination du taux d'ouverture d'un oeil sont aptes à déterminer le taux d'ouverture d'un oeil à partir, par exemple, du taux surfacique d'occupation du blanc d'un oeil dans une zone déterminée comprenant un oeil détecté. Les moyens de détermination 10 du taux d'ouverture d'un oeil mesurent ainsi le taux d'ouverture de chaque oeil détecté pour chaque image qui leur est délivrée. Ainsi, le taux d'ouverture de chaque oeil détecté sur l'image photographique prise avec flash sera déterminé et l'image photographique prise avec flash complétée des informations du taux d'ouverture de chaque oeil détecté sera délivrée aux moyens de mémorisation 11. Les moyens de mémorisation 11 reçoivent également en entrée l'information issue des moyens 8 de génération d'un flash permettant d'indiquer si l'image photographique mémorisée a été prise avec un flash ou non. De cette manière, les moyens de mémorisation déterminent si l'image photographique mémorisée est l'image photographique prise avec flash et donc l'image photographique à corriger, ou une image photographique additionnelle qui servira pour la correction de l'image photographique prise avec flash.
Chaque image photographique additionnelle prise sans flash sera également délivrée aux moyens 10 de détermination du taux d'ouverture d'un oeil, qui délivreront alors aux moyens de mémorisation 11 les images photographiques additionnelles complétées de l'information du taux d'ouverture de chaque oeil détecté sur chacune des images photographiques. Les moyens de mémorisation 11 délivrent alors au module de sélection 12 les images photographiques additionnelles complétées des informations de taux d'ouverture de chaque oeil détecté, ainsi que l'image photographique prise avec flash qui sert de référence pour la sélection de l'image photographique additionnelle la plus proche de l'image photographique prise avec flash. Le module de sélection 12 sélectionne alors l'image photographique supplémentaire, en l'espèce ici, l'image photographique additionnelle prise sans flash la plus proche de l'image photographique prise avec flash, c'est-à-dire, l'image photographique prise sans flash ayant le taux d'ouverture de chaque oeil le plus proche du taux d'ouverture de chaque oeil correspondant sur l'image photographique prise avec flash. Dans le cas où plusieurs visages, et donc plusieurs yeux, sont détectés sur les images photographiques additionnelles et celle prise avec flash, on peut par exemple sélectionner l'image photographique additionnelle comprenant un écart moyen des taux d'ouverture le plus petit. On calcule pour cela l'écart entre le taux d'ouverture d'un oeil d'une image photographique additionnelle et le taux d'ouverture de l'oeil correspondant, pour chaque oeil détecté. On calcule la moyenne des écarts ainsi calculés. L'image photographique additionnelle sélectionnée comme image photographique supplémentaire sera celle dont la moyenne des écarts sera la plus petite. Le module de sélection 12 délivre ensuite en sortie l'image photographique supplémentaire prise sans flash correspondant à l'image photographique additionnelle prise sans flash sélectionnée par le module de sélection 12, qui sera délivrée aux moyens 7 de remplacement. Les moyens de mémorisation 11 délivrent également en sortie l'image photographique prise avec flash aux moyens 7 de remplacement. L'image photographique prise avec flash et l'image photographique supplémentaire sont alors délivrées aux moyens de remplacement 7. La figure 4 illustre schématiquement un mode de réalisation des moyens de remplacement 7. Les moyens de remplacement 7 comprennent dans ce mode de réalisation, des moyens de compensation de mouvement 20, des moyens de compensation de luminosité 21, et des moyens 22 de remplacement des pixels du centre de l'oeil. Les moyens 20 de compensation de mouvement de l'oeil détecté, permettent de compenser le mouvement de l'oeil, et plus particulièrement de la représentation du centre de l'oeil, entre l'image photographique prise avec flash et l'image photographique supplémentaire prise sans flash. Les moyens de compensation de mouvement 20 comparent les coordonnées du centre d'un oeil sur l'image photographique supplémentaire déterminées précédemment par les moyens 4 de détection de la représentation du centre d'un oeil, aux coordonnées du centre d'un oeil correspondant sur l'image photographique prise avec flash dans une fenêtre spatiale limitée autour de la position de l'oeil considéré. Si une différence apparaît entre les coordonnées de la représentation du centre de l'oeil sur l'image photographique supplémentaire par rapport à l'image photographique prise avec un flash, une compensation de mouvement est réalisée en appliquant une translation à la représentation du centre de l'oeil de l'image photographique supplémentaire. Le centre de l'oeil de l'image photographique supplémentaire a alors les mêmes coordonnées que la représentation du centre de l'oeil correspondant sur l'image photographique prise avec un flash. Les moyens de compensation de mouvement 20, délivrent alors en sortie l'image photographique prise avec un flash et l'image photographique supplémentaire dont le mouvement a été compensé, aux moyens de compensation de la luminosité 21. Les moyens de compensation de luminosité 21 permettent de corriger la luminosité, par exemple en l'augmentant, d'au moins une partie de l'image photographique supplémentaire englobant la représentation de la région centrale de l'oeil de manière à pallier la différence de luminosité entre l'image photographique supplémentaire et l'image photographique prise avec un flash. La luminosité de l'image photographique supplémentaire et plus particulièrement la luminosité d'une partie de l'image photographique supplémentaire englobant la représentation de la région centrale de l'oeil, est corrigée par un traitement numérique interne de manière à obtenir une luminosité comparable à la luminosité obtenue sur l'image photographique prise avec un flash.
De cette manière, lors du remplacement de la représentation de la région centrale de l'oeil de l'image photographique prise avec un flash par la représentation de la région centrale de l'oeil de l'image photographique supplémentaire prise sans flash, la différence de luminosité entre les deux images ne sera pas perçue et le remplacement sera d'autant plus discret et le rendu sera d'autant plus réel. Les moyens de compensation de luminosité 21 délivrent alors en sortie l'image photographique prise avec un flash et l'image photographique supplémentaire dont le mouvement a été compensé et dont la luminosité a été corrigée, aux moyens 22 de remplacement des pixels. Les moyens 22 de remplacement des pixels vont alors réaliser un remplacement pixel par pixel, des pixels de la représentation de la région centrale de l'oeil de l'image photographique prise avec un flash par les pixels correspondants de la représentation de la région centrale de l'oeil de l'image photographique supplémentaire. Les moyens de remplacement 22 des pixels délivrent alors en sortie l'image photographique prise avec un flash corrigée, c'est-à-dire l'image photographique prise avec un flash dont la représentation de la région centrale de chaque oeil a été remplacée par la représentation de la région centrale de chaque oeil correspondant de l'image photographique supplémentaire. La figure 5 représente un synopsis d'un procédé de correction d'une représentation d'une région centrale d'un oeil sur une image photographique dudit oeil prise avec un flash, selon un mode de mise en oeuvre. Dans une première étape 501, une image photographique est prise avec l'activation d'un flash. Dans une étape suivante 502, une détection des yeux est réalisée sur l'image photographique prise avec un flash ainsi capturée. La détection des yeux est réalisée, par exemple, à l'aide d'une méthode connue de variations de luminance à partir d'une zone détectée correspondant à un visage. Dans une troisième étape 503, une détection de la représentation du centre de l'oeil est réalisée pour chaque oeil détecté sur l'image photographique prise avec flash. Dans une quatrième étape 504, une détection d'anomalie chromatique d'une représentation d'une région centrale d'un oeil est réalisée. Si aucune anomalie n'est détectée, on passe directement à l'étape finale 510 dans laquelle l'image finale délivrée correspond à l'image photographique prise avec flash sans correction. Sinon, une détermination du taux d'ouverture d'oeil est réalisée, dans une étape suivante 505, pour chaque oeil détecté à partir, par exemple, du taux surfacique que représente le blanc de l'oeil pour une zone de travail comprenant l'oeil détecté.
Avant et/ou après la première étape 501 de capture d'une image photographique avec un flash, des images photographiques additionnelles peuvent être capturées sans flash dans une étape 511. Dans une étape suivante 512, si une des images photographiques est une image de prévisualisation, celle-ci est sur- échantillonnée afin d'augmenter sa résolution. Dans une étape suivante 513, une détection des yeux est réalisée sur chacune des images photographiques additionnelles ainsi capturées. Dans une étape 514, une détection de la représentation du centre de l'oeil est réalisée pour chaque oeil détecté pour chacune des images photographiques additionnelles. Une détermination du taux d'ouverture d'oeil est alors réalisée, dans une étape suivante 515, pour chaque oeil détecté de chaque image photographique additionnelle. Dans une étape 506, une image photographique supplémentaire est sélectionnée parmi les images photographiques additionnelles sans flash. La sélection est réalisée en comparant le taux d'ouverture de chaque oeil d'une image photographique additionnelle au taux d'ouverture de chaque oeil correspondant de l'image photographique prise avec flash. La comparaison est ainsi faite pour toutes les images photographiques additionnelles par rapport à l'image photographique prise avec flash. L'image photographique additionnelle, possédant un écart du taux d'ouverture de chaque oeil avec le taux d'ouverture de chaque oeil correspondant sur l'image photographique prise avec flash le plus petit, est sélectionnée.
Dans une étape suivante 507, une compensation de mouvement est réalisée sur l'image photographique supplémentaire afin de corriger un déplacement éventuel de la représentation du centre d'un oeil entre l'image photographique supplémentaire et l'image photographique prise avec un flash. Pour compenser un déplacement éventuel, une translation est appliquée au moins à la partie de l'image photographique supplémentaire comprenant la représentation de la région centrale de l'oeil. Le vecteur de translation est déterminé à partir de la différence de coordonnées de la représentation du centre d'un oeil entre l'image photographique prise avec flash et l'image photographique supplémentaire. Dans une étape suivante 508, une compensation de luminosité est effectuée sur l'image photographique supplémentaire afin de pallier à la différence de luminosité existant entre l'image photographique prise avec flash et l'image photographique supplémentaire. Ainsi, la luminosité d'au moins une partie de l'image photographique supplémentaire comprenant la représentation de la région centrale de l'oeil est augmentée de manière à obtenir une luminosité comparable, voire égale, à la luminosité de l'image photographique prise avec un flash.
Dans une étape suivante 509, un remplacement pixel par pixel de la représentation de la région centrale de l'oeil de l'image photographique prise avec flash par la représentation de la région centrale de l'oeil correspondant sur l'image photographique supplémentaire est réalisé. L'image photographique prise avec un flash corrigée est alors délivrée comme image photographique finale prise avec flash à l'issue de l'étape finale 510. I1 est à noter que si aucune anomalie chromatique n'est détectée sur l'image photographique prise avec flash à l'étape 504, les étapes 512 à 515, et 505 à 509 ne sont pas réalisées.

Claims (14)

  1. REVENDICATIONS1. Procédé de correction d'une représentation d'une région centrale d'un oeil sur une image photographique dudit oeil prise avec un flash, caractérisé en ce qu'il comprend une prise d'une image photographique supplémentaire de l'oeil sans flash, et un remplacement dans l'image photographique prise avec flash de ladite représentation de la région centrale de l'oeil par la représentation correspondante de ladite région centrale de l'oeil sur l'image photographique supplémentaire, en cas de détection d'une anomalie chromatique de la représentation d'une centrale de l'oeil sur l'image photographique prise avec flash.
  2. 2. Procédé selon la revendication 1, dans lequel la prise de l'image photographique supplémentaire comprend une prise de plusieurs images photographiques additionnelles sans flash et une sélection de ladite image photographique supplémentaire parmi les images photographiques additionnelles prises sans flash.
  3. 3. Procédé selon la revendication 2, dans lequel la sélection de l'image photographique supplémentaire est réalisée à partir du taux d'ouverture de l'oeil.
  4. 4. Procédé selon l'une des revendications 2 ou 3, dans lequel au moins une desdites images photographiques additionnelles prises sans flash est une image de prévisualisation sur-échantillonnée.
  5. 5. Procédé selon l'une des revendications 1 à 4, dans lequel ledit remplacement comporte une compensation de mouvement entre l'image photographique prise avec flash et l'image photographique supplémentaire.
  6. 6. Procédé selon l'une des revendications 1 à 5, caractérisé en ce que le remplacement comprend une correction de la luminosité d'au moins une partie de l'image photographique supplémentaire englobant la représentation de la région centrale de l'oeil.
  7. 7. Procédé selon l'une des revendications 1 à 6, dans lequel le centre de l'oeil comprend la pupille et/ou l'iris.
  8. 8. Appareil photographique numérique comprenant des moyens de correction (1) d'une représentation d'une région centrale de l'oeil sur une image photographique dudit oeil prise avec un flash, caractérisé en ce que les moyens de correction (1) comprennent des moyens de capture d'une image photographique supplémentaire aptes à réaliser une prise d'une image photographique supplémentaire de l'oeil sans flash, des moyens de détection d'une anomalie chromatique aptes à détecter une anomalie chromatique sur la représentation d'une région centrale de l'oeil sur l'image photographique avec flash et à délivrer un signal de détection en cas d'une telle détection, et des moyens de remplacement (6) aptes à remplacer, en réponse au signal de détection, dans l'image photographique prise avec un flash ladite représentation d'une région centrale de l'oeil par la représentation correspondante de ladite région centrale de l'oeil sur l'image photographique supplémentaire.
  9. 9. Appareil photographique numérique selon la revendication 8, caractérisé en ce que les moyens de correction (1) comprennent des moyens de commande (8) aptes à commander une prise de plusieurs images photographiques additionnelles prises sans flash, et des moyens de sélection (4) aptes à sélectionner ladite image photographique supplémentaire parmi les images photographiques additionnelles prises sans flash.
  10. 10. Appareil photographique numérique selon la revendication 9, caractérisé en ce que les moyens de sélection comprennent des moyens de détermination du taux d'ouverture de l'oeil (10) apte à déterminer le taux d'ouverture d'un oeil détecté.
  11. 11. Appareil photographique numérique selon l'une des revendications 8 à 10, caractérisé en ce que les moyens de correction comprennent des moyens de sur-échantillonnage aptes à augmenter la résolution d'une image photographique.
  12. 12. Appareil photographique numérique selon l'une des revendications 8 à 11, caractérisé en ce que les moyens de remplacement (6) comprennent des moyens (20) de compensation de mouvement aptes à compenser le mouvement entre l'imagephotographique prise avec flash et l'image photographique supplémentaire.
  13. 13. Appareil photographique numérique selon l'une des revendications 8 à 12, caractérisé en ce que les moyens (6) de remplacement comprennent des moyens (21) de compensation de luminosité aptes à corriger la luminosité d'au moins une partie de l'image photographique supplémentaire englobant la représentation de la région centrale de l'oeil.
  14. 14. Appareil de téléphonie mobile, caractérisé en ce qu'il comprend un appareil photographique numérique selon l'une des revendications 8 à 13.
FR0952755A 2009-04-27 2009-04-27 Procede de systeme de correction d'une representation d'une region centrale d'un oeil sur une image photographique dudit oeil prise avec un flash. Expired - Fee Related FR2944884B1 (fr)

Priority Applications (2)

Application Number Priority Date Filing Date Title
FR0952755A FR2944884B1 (fr) 2009-04-27 2009-04-27 Procede de systeme de correction d'une representation d'une region centrale d'un oeil sur une image photographique dudit oeil prise avec un flash.
PCT/EP2010/055587 WO2010125039A1 (fr) 2009-04-27 2010-04-27 Procédé et système de correction d'une représentation d'une région centrale d'un oeil dans une image photographique dudit oeil prise avec un flash

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
FR0952755A FR2944884B1 (fr) 2009-04-27 2009-04-27 Procede de systeme de correction d'une representation d'une region centrale d'un oeil sur une image photographique dudit oeil prise avec un flash.

Publications (2)

Publication Number Publication Date
FR2944884A1 true FR2944884A1 (fr) 2010-10-29
FR2944884B1 FR2944884B1 (fr) 2011-07-01

Family

ID=41211981

Family Applications (1)

Application Number Title Priority Date Filing Date
FR0952755A Expired - Fee Related FR2944884B1 (fr) 2009-04-27 2009-04-27 Procede de systeme de correction d'une representation d'une region centrale d'un oeil sur une image photographique dudit oeil prise avec un flash.

Country Status (2)

Country Link
FR (1) FR2944884B1 (fr)
WO (1) WO2010125039A1 (fr)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020150306A1 (en) * 2001-04-11 2002-10-17 Baron John M. Method and apparatus for the removal of flash artifacts
JP2004117776A (ja) * 2002-09-26 2004-04-15 Fuji Photo Film Co Ltd デジタルカメラ
EP1615169A2 (fr) * 2004-07-06 2006-01-11 Microsoft Corporation Photographie numérique avec/sans extension de flash
WO2007025578A1 (fr) * 2005-08-30 2007-03-08 Fotonation Vision Limited Procede et systeme de segmentation de l'image
EP1840835A2 (fr) * 2006-03-30 2007-10-03 Canon Kabushiki Kaisha Traitement d'image pour la correction de l'effet des yeux rouges

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020150306A1 (en) * 2001-04-11 2002-10-17 Baron John M. Method and apparatus for the removal of flash artifacts
JP2004117776A (ja) * 2002-09-26 2004-04-15 Fuji Photo Film Co Ltd デジタルカメラ
EP1615169A2 (fr) * 2004-07-06 2006-01-11 Microsoft Corporation Photographie numérique avec/sans extension de flash
WO2007025578A1 (fr) * 2005-08-30 2007-03-08 Fotonation Vision Limited Procede et systeme de segmentation de l'image
EP1840835A2 (fr) * 2006-03-30 2007-10-03 Canon Kabushiki Kaisha Traitement d'image pour la correction de l'effet des yeux rouges

Also Published As

Publication number Publication date
WO2010125039A1 (fr) 2010-11-04
FR2944884B1 (fr) 2011-07-01

Similar Documents

Publication Publication Date Title
US11132771B2 (en) Bright spot removal using a neural network
EP2465255B1 (fr) Système et procédé de capture d'images avec deux modes de fonctionnement
EP3657784B1 (fr) Procédé d'estimation d'un défaut d'un système de capture d'images et systèmes associés
FR2872661A1 (fr) Procede et dispositif de prise de vue a resolution multiplie
FR3038431A1 (fr) Bloc camera haute resolution pour drone, avec correction des instabilites de type oscillations ondulantes
FR2775813A1 (fr) Procede et dispositif de remplacement de panneaux cibles dans une sequence video
FR2940841A1 (fr) Systeme de capture d'images et utilisation associee pour ameliorer la qualite des images acquises
FR2861936A1 (fr) Systeme et methode destines a compenser la balance des blancs d'images saisies
WO2016202926A1 (fr) Procédé et dispositif de production d'une image numérique
JP2023548748A (ja) フレーム処理および/またはキャプチャ命令システムおよび技法
FR3027144A1 (fr) Procede et dispositif de determination de mouvement entre des images video successives
FR2969353A1 (fr) Procede de realisation d'une image panoramique a partir d'une sequence video et appareil de mise en oeuvre.
EP3301644A1 (fr) Procédé de construction d'une carte de profondeur d'une scène et/ou d'une image entièrement focalisée
US20230120604A1 (en) System and Method for Maximizing Inference Accuracy using Recaptured Datasets
FR2944884A1 (fr) Procede de systeme de correction d'une representation d'une region centrale d'un oeil sur une image photographique dudit oeil prise avec un flash.
US20220182534A1 (en) Dynamic quality proxy plural camera image blending
WO2019166720A1 (fr) Détection dynamique de lumière parasite dans une image numérique
FR3048104A1 (fr) Procede et dispositif de capture d'images d'un vehicule
FR2937209A1 (fr) Correction de deviation de blanc dans une image captee
FR2910673A1 (fr) Procede de traitement d'image et dispositif implementant ledit procede
EP1929777B1 (fr) Systeme et procede de traitement d'images par annulation d'echo video
WO2022253932A1 (fr) Procede de traitement de données de pixels, dispositif et programme correspondant
WO2024038231A1 (fr) Procédé de traitement d'une image infrarouge par fusion de plusieurs traitements de l'image infrarouge
FR2711812A1 (fr) Procédé et système de commande automatique du diaphragme du dispositif de formation d'image.
FR3028611A1 (fr) Dispositif et procede de determination de positions de points dans un environnement tridimensionnel, dispositif de detection d'obstacles et vehicule equipe d'un tel dispositif

Legal Events

Date Code Title Description
RM Correction of a material error
ST Notification of lapse

Effective date: 20121228