FR3066633A1 - Procede de defloutage d'une image - Google Patents

Procede de defloutage d'une image Download PDF

Info

Publication number
FR3066633A1
FR3066633A1 FR1754532A FR1754532A FR3066633A1 FR 3066633 A1 FR3066633 A1 FR 3066633A1 FR 1754532 A FR1754532 A FR 1754532A FR 1754532 A FR1754532 A FR 1754532A FR 3066633 A1 FR3066633 A1 FR 3066633A1
Authority
FR
France
Prior art keywords
image
observed
acquisition means
optical acquisition
observable
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
FR1754532A
Other languages
English (en)
Other versions
FR3066633B1 (fr
Inventor
Aldo Maalouf
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Idemia Identity & Security France Fr
Original Assignee
Safran Identity and Security SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Safran Identity and Security SAS filed Critical Safran Identity and Security SAS
Priority to FR1754532A priority Critical patent/FR3066633B1/fr
Publication of FR3066633A1 publication Critical patent/FR3066633A1/fr
Application granted granted Critical
Publication of FR3066633B1 publication Critical patent/FR3066633B1/fr
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/73Deblurring; Sharpening
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/10Image enhancement or restoration using non-spatial domain filtering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/30Noise filtering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1347Preprocessing; Feature extraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20048Transform domain processing
    • G06T2207/20064Wavelet transform [DWT]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Collating Specific Patterns (AREA)

Abstract

La présente invention concerne un procédé de défloutage d'une image observée acquise par des moyens d'acquisition optique (20) de sorte à déterminer une image observable correspondant à l'image observée défloutée, ladite image observable et ladite image observée étant chacune constituée comme un ensemble de pixels définis par au moins une valeur numérique, le procédé étant caractérisé en ce qu'il comprend la mise en œuvre par des moyens de traitement de données (11) d'étapes de : (a) Expression de l'image observable comme solution minimisant une fonctionnelle de Tikhonov définie par l'image observée, une fonction d'étalement du point des moyens d'acquisition optique (20) et un opérateur de transformée en ondelettes, ladite fonctionnelle de Tikhonov comprenant un premier terme en norme L2 et un deuxième terme de régularisation en norme L1 ; (b) Approximation dudit deuxième terme dans le domaine des ondelettes de sorte à obtenir une fonctionnelle modifiée qui soit différentiable avec un gradient de Lipschitz continu ; (c) Détermination de ladite image observable par application à ladite fonctionnelle modifiée d'un algorithme de minimisation en norme L2 basé sur le gradient. La présente invention concerne également un procédé d'authentification ou d'identification d'un individu.

Description

PROCEDE DE DEFLOUTAGE D’UNE IMAGE
DOMAINE TECHNIQUE GENERAL
La présente invention concerne le domaine de l’identification, et en particulier un procédé de défloutage d’une image observée, notamment une image de doigt.
ETAT DE L’ART
On trouve aujourd’hui des scanners d’empreintes digitales sur de nombreux équipements grand public tels que des terminaux mobiles ou des ordinateurs, à des fins d’identification de l’utilisateur. Ces scanners comprennent des moyens d’acquisition optique haute résolution capable de prendre une photo d’un doigt en vue de la comparer avec une image de référence.
Aujourd’hui, de tels systèmes apportent satisfaction, mais on constate que les « faux rejets » sont nombreux. Il est parfois nécessaire d’acquérir deux ou trois images du doigt avant que le système reconnaisse l’utilisateur.
Ces faux rejets sont dus à des dégradations subies par les images, notamment du flou. Ce peut être du flou de bougé (si le doigt n’est pas parfaitement immobile) ou du flou optique (si la mise au point est mal faite, ce que l’on appelle le « défocus » - typiquement si le doigt n’est pas parfaitement plaqué contre le scanner).
Si l’on souhaite limiter ce phénomène et réduire le taux de faux rejets, il est nécessaire de parvenir au « défloutage » de l’image, c’est-à-dire un traitement mathématique visant à retrouver l’image observable (c’est-à-dire la scène « réelle ») à partir de l’image observée (l’image floue).
Mathématiquement, on peut considérer un modèle d’acquisition g = h*u + b, où u e 5în est l’image observable, g eF l’image observée, b e un biais additif issu de l’électronique du système (appelé bruit), et h : 5în une transformée linéaire continue, typiquement une fonction de point d’étalement (dite PSF, pour « Point Spread Function »), c’est-à-dire une fonction décrivant la réponse d'un système d'imagerie à une source ponctuelle (on parle également de réponse impulsionnelle optique), représentant un noyau de convolution introduisant le flou (de bougé et optique) dans l’image.
Débouter l’image observée g revient à retrouver l’image observable u à partir de l’image observée g, ce qui est un problème de déconvolution mal posé.
De façon générale pour résoudre un tel problème, Tikhonov a défini une solution régularisée connue sous le nom de fonctionnelle de Tikhonov, exprimée comme :
argmin[||Hu - #||2 + λ||x||2} ueKn
Le premier terme représente la fidélité à l’image observée, et le second terme est dit de régularisation.
On connaît depuis des années de nombreuses méthodes de déconvolution rangées dans cinq catégories : les méthodes linéaires (simples à implémenter mais elle très sensibles aux erreurs sur les données de la PSF utilisée pour l'estimation ; ce qui conduit à des artefacts dans l'image déboutée), les méthodes non linéaires (elles n’ont qu'un effet régularisant sur l'image dégradée, et sont limitées par l'hypothèse que le bruit de dégradation peut être modélisé par un modèle de bruit Gaussien additif), les méthodes statistiques, les méthodes basées ondelettes, et les méthodes aveugles.
L'utilisation de la transformation en ondelettes a suscité beaucoup de travaux en raison de sa capacité à représenter une image à différentes résolutions. Certains de ces algorithmes proposent un procédé d'estimation inverse qui combine l'analyse de Fourier avec l'approche par ondelettes. Plus précisément, les algorithmes proposés comportent un système d’inversion dans le domaine de Fourier qui se traduit par un filtre inverse régularisé permettant à l'algorithme de fonctionner même lorsque le système est non-inversible. Ce processus est généralement suivi de la suppression du bruit dans le domaine des ondelettes (par exemple par la mise à zéro des coefficients non significatifs). L'ensemble fonctionne en utilisant l'erreur quadratique moyenne pour trouver un équilibre optimal entre la régularisation du domaine de Fourier (adapté au système) et la régularisation du domaine d'ondelettes (adapté au signal/image).
Un autre algorithme, présenté dans le document Figueiredo, M. A. T. et R. D. Nowak. 2003. An EM algorithm for wavelet-based image restoration. IEEE Transactions on Image Processing, 12 (8):906-916, propose une approche
Expectation-Maximisation (EM) pour la restauration d'images basée sur le maximum de vraisemblance pénalisé qui est formulé dans le domaine des ondelettes. Dans cet algorithme, la régularisation est réalisée en favorisant une reconstruction avec une faible complexité exprimée en termes de coefficients d'ondelettes et tire profit de la parcimonie de la représentation en ondelettes. Le problème, en général, avec des méthodes basées sur la représentation en ondelettes est que la plupart d'entre elles nécessitent des méthodes d'optimisation très exigeantes, car l'opérateur de convolution est généralement très difficile à représenter dans le domaine des ondelettes. Ceci suggère naturellement la possibilité de combiner la déconvolution basée sur Fourier et le débruitage basé sur les ondelettes.
Ces algorithmes requièrent un temps de calcul important et ne traitent qu’un seul type de flou (le flou de bougé ou le flou de défocus).
Alternativement, il a été propose dans Chambolle and R. DeVore and N.-Y. Lee and B.J. Lucier, Nonlinear wavelet image processing : Variational problème, compression, and noise removal through wavelet shrinkage, IEEE Trans. Image Processing, 7(3) :319-335, 1998, d’utiliser des algorithmes de type « Itérative Shrinkage/Thresolding ». Ceux-ci utilisent l’opérateur proximal et procèdent de façon itérative à un seuillage des coefficients d’ondelettes. Ces algorithment permet de traiter à la fois le flou de bougé et le flou de défocus, mais leur taux de convergence peut devenir très lent si le problème est mal conditionné.
Il serait par conséquent souhaitable de disposer d’un nouveau procédé de défloutage qui traite efficacement tous les types de flou et qui soit rapide en toutes circonstances.
PRESENTATION DE L’INVENTION
Selon un premier aspect, la présente invention concerne un procédé de défloutage d’une image observée acquise par des moyens d’acquisition optique de sorte à déterminer une image observable correspondant à l’image observée défloutée, ladite image observable et ladite image observée étant chacune constituée comme un ensemble de pixels définis par au moins une valeur numérique, le procédé étant caractérisé en ce qu’il comprend la mise en œuvre par des moyens de traitement de données d’étapes de :
(a) Expression de l’image observable comme solution minimisant une fonctionnelle de Tikhonov définie par l’image observée, une fonction d'étalement du point des moyens d’acquisition optique et un opérateur de transformée en ondelettes, ladite fonctionnelle de Tikhonov comprenant un premier terme en norme L2 et un deuxième terme de régularisation en norme l_i ;
(b) Approximation dudit deuxième terme dans le domaine des ondelettes de sorte à obtenir une fonctionnelle modifiée qui soit différentiable avec un gradient de Lipschitz continu ;
(c) Détermination de ladite image observable par application à ladite fonctionnelle modifiée d’un algorithme de minimisation en norme L2 basé sur le gradient.
Selon d’autres caractéristiques avantageuses et non limitatives :
• ledit algorithme de minimisation en norme L2 basé sur le gradient est l’algorithme de Nesterov ;
• l’étape (b) comprend l’application audit deuxième terme de régularisation dans le domaine des ondelettes d’un algorithme de rétrécissement des coefficients d’ondelettes ;
• l’étape (b) comprend l’application à chaque coefficient d’ondelettes du deuxième terme de régularisation d'une transformation choisie parmi
M Sl (|x| si |x| > T 2 T et Ψ(χ) = 1 2τ , où T est un écart type calculé à ψ(*) = x
Figure FR3066633A1_D0001
partir des valeurs numériques définissant les pixels de l’image observée ;
• le premier terme de ladite fonctionnelle de Tikhonov est \\Hu -5ΊΙ2, où u est l'inconnue, g l’image observée, et H la fonction d'étalement du point des moyens d’acquisition optique ;
• le deuxième terme de ladite fonctionnelle de Tikhonov est HV/itUi, où W est l’opérateur de transformée en ondelettes ;
• ladite fonctionnelle de Tikhonov est argminue9în{|||/fu-^||^ + HWlIi} ;
• le procédé comprend une étape préalable d’acquisition de ladite image observée par les moyens d’acquisition optique ;
• le procédé comprend l’estimation préalable de ladite fonction d'étalement du point des moyens d’acquisition optique par :
- détermination de fonction gaussiennes reliant chacune une image observée de référence et une image observable de référence pour une pluralité de déplacements d’amplitude prédéterminée devant les moyens d’acquisition optique et/ou une pluralité de hauteurs de prise de vue prédéterminées par rapport aux moyens d’acquisition optique,
- moyenne desdites fonctions gaussiennes calculées, • lesdits moyens d’acquisition optique sont un capteur d’empreinte digitale de type en vue directe, ladite image observée étant une image de doigt comprenant au moins une empreinte digitale.
Selon un deuxième aspect, l’invention concerne un procédé d'authentification ou d’identification d’individu, comprenant la mise en œuvre d’un procédé selon le premier aspect de défloutage d’une image observée acquise par des moyens d’acquisition optique de sorte à déterminer une image observable correspondant à l’image observée défloutée, et une étape (d) d'authentification ou d’identification d’individu par comparaison d’empreintes digitales sur la base de l'image observable déterminée.
Selon un troisième aspect, l’invention concerne une unité de traitement comprenant des moyens de traitement de données configurés pour :
- Exprimer une image observable correspondant à une image observée défloutée, l’image observée étant acquise par des moyens d’acquisition optique, ladite image observable et ladite image observée étant chacune constituée comme un ensemble de pixels définis par au moins une valeur numérique, comme solution minimisant une fonctionnelle de Tikhonov définie par l’image observée, une fonction d'étalement du point des moyens d’acquisition optique et un opérateur de transformée en ondelettes, ladite fonctionnelle de Tikhonov comprenant un premier terme en norme L2 et un deuxième terme de régularisation en norme l_i ;
- Approximer ledit deuxième terme dans le domaine des ondelettes de sorte à obtenir une fonctionnelle modifiée qui soit différentiable avec un gradient de Lipschitz continu ;
- Déterminer ladite image observable par application à ladite fonctionnelle modifiée d’un algorithme de minimisation en norme L2 basé sur le gradient.
Selon d’autres caractéristiques avantageuses et non limitatives, est proposé un système comprenant l’unité de traitement et lesdits moyens d’acquisition optique.
Selon un quatrième et un cinquième aspect, l’invention propose un produit programme d’ordinateur comprenant des instructions de code pour l’exécution d’un procédé selon le premier ou le deuxième aspect de défloutage d’une image observée ou d'authentification ou d’identification d’individu ; et un moyen de stockage lisible par un équipement informatique sur lequel un produit programme d’ordinateur comprend des instructions de code pour l’exécution d’un procédé selon le premier ou le deuxième aspect de défloutage d’une image observée ou d'authentification ou d’identification d’individu.
PRESENTATION DES FIGURES
D’autres caractéristiques, buts et avantages de la présente invention apparaîtront à la lecture de la description détaillée qui va suivre, au regard des figures annexées, données à titre d’exemples non limitatifs et sur lesquelles :
- La figure 1 représente schématiquement un système de traitement d’images pour la mise en œuvre du procédé selon l’invention, ;
- La figure 2 représente un exemple de fonction d'étalement du point ;
- Les figures 3a à 3b représentent respectivement un exemple d’image observée et l’image observable correspondante obtenue par la mise en œuvre du procédé selon l’invention.
DESCRIPTION DETAILLEE
Architecture
En référence à la figure 1, est proposé un procédé de défloutage d’une image observée mis en œuvre au sein d’un système du traitement d’images 1 tel que représenté. Par « défloutage », on entend la suppression ou du moins la limitation du flou sur l’image observée, c’est-à-dire la détermination d’une image observable correspondant à l’image observée défloutée.
On rappelle en effet que l’image observée est celle acquise par des moyens d’acquisition optique 20, possiblement floue du fait d’un mouvement lors de l’acquisition (flou de bougé) ou d’une mauvaise position par rapport à la distance focale (flou de défocus), alors que l’image observable est l’image « réelle » c’est à celle qui aurait pu être acquise si les conditions de prise de vue étaient parfaites.
En d’autres termes, le présent procédé est un procédé de traitement d’une image observée de sorte à reconstruire une image de meilleure qualité qui aurait être pu être acquise si les conditions de positionnement et de mouvement étaient optimales.
Lesdites images (observable ou observée) sont chacune constituée comme un ensemble de pixels définis par au moins une valeur numérique. De façon préférée, chaque pixel est défini par une unique valeur numérique, classiquement compris entre 0 et 255, on dit alors qu’il est associé à un niveau de gris. Alternativement chaque pixel peut être en couleur et défini par un triplet de valeurs numériques (RGB).
Ces images sont avantageusement des images d’un ou plusieurs doigts, du côté de la paume de la main, et figurant l’extrémité du ou des doigts sur lesquelles se trouvent les empreintes digitales, ou la paume même de la main. Plus avantageusement, les moyens d’acquisition optique 20 sont un capteur (ou scanner) d’empreinte digitale de type en vue directe, comme un capteur basé sur la technologie des transistors en couche mince (TFT). On pourra se référer par exemple aux documents US 2002/0054394 ou US 2002/0000915. Une image acquise par un tel capteur se présente généralement avec des pixels majoritairement blancs, c'est-à-dire avec un niveau de gris à 255, et avec des zones sombres correspondant aux ombres et aux empreintes présentant des pixels avec des niveaux de gris proches de 0.
On a représenté sur la figure 3a un exemple d’image observée acquise à partir d’un capteur d’empreintes digitales en vue directe. Comme on peut le constater, cette image est floue (du fait d’un mouvement du doigt sur le capteur lors de l’acquisition) et n’est pas facilement exploitable en l’état pour réaliser un traitement d’identification ou d’authentification sur les empreintes digitales, par exemple par extraction et comparaison des minuties. Elle comporte en effet des zones (en particulier au centre dans l’exemple représenté), où le flou rend les sillons peu discernables.
On comprendra toutefois que le présent procédé n’est pas limité aux images de doigts.
Comme représenté schématiquement sur la figure 1, le système de traitement d’images 1 comporte une unité de traitement 10, c’est-à-dire un équipement informatique comme par exemple un ordinateur. L’unité de traitement 10 comprend des moyens de traitement de données 11 comme par exemple un processeur. Le traitement d’image peut être implémenté par un algorithme informatique approprié. Les moyens de traitement 11 sont alors adaptés pour exécuter des instructions de code permettant de mettre en œuvre l’algorithme de défloutage.
Le système de traitement d’images 1 comprend avantageusement également lesdits moyens d’acquisition optique 20 (capteur d’image), adaptés pour communiquer avec l’unité de traitement 10 pour lui transmettre les images acquises. A ce titre, le procédé peut comprendre une étape préalable d’acquisition de ladite image observée par les moyens d’acquisition optique 20. Avantageusement, le capteur d'image est un capteur d’empreintes digitales en vue directe, par exemple du type à transistor en couche mince.
Les moyens d’acquisition optique 20 peut être distant de l’unité de traitement, et connecté à celle-ci par une connexion sans fil, par exemple de type wifi etc.
L’unité de traitement 10 peut comporter une mémoire 12 une interface de communication avec les moyens d’acquisition optique 20, et une interface utilisateur (un écran notamment). En variante, le système de traitement d’images peut aussi comprendre une base de données d’images (par exemple stockée sur la mémoire 12), à partir de laquelle l’unité de traitement peut récupérer des images à traiter, ces images ayant été obtenues par des moyens d’acquisition optique distants. Dans un mode de réalisation, le système 1 ne comprend ainsi pas les moyens d’acquisition optique 20 (les images observées lui sont fournies depuis un serveur distant 3 par un tiers qui réalise lui-même l’acquisition, par exemple un aéroport dans lequel de l’identification de passagers par reconnaissance d’empreintes digitale est mise en œuvre). Il suffit juste que l’unité 10 connaisse les caractéristiques. On notera que le système 1 peut à la fois traiter des images acquises par des moyens d’acquisition 20 locaux et des images fournies depuis un serveur 3. Un réseau 2 peut relier les éventuels divers éléments 10, 3, 20.
Comme l’on verra, l’unité 10 doit disposer de la fonction d'étalement du point (PSF) des moyens d’acquisition optique 20, c’est-à-dire la fonction mathématique décrivant la réponse impulsionnelle optique (RIO) des moyens 20 à une source ponctuelle, dont l’effet est décrit comme une opération de convolution. On répète que l’on considère en effet un modèle d’acquisition g = h*u + b, où u eF est l’image observable, g e l’image observée, b e le bruit, et h ; 5în la PSF (qui sera représentée dans la suite de la description par une matrice H).
La PSF peut être connue et fournie à l’unité 10, alternativement (en particulier lorsque le système 1 inclut les moyens 20) le procédé peut comprend une étape préalable d’estimation de la PSF des moyens d’acquisition optique 20.
Pour cela on peut supposer que la PSF est modélisée mathématiquement en utilisant le concept des faisceaux gaussiens. Pour cela son estimation peut comprendre la détermination de fonctions gaussiennes reliant chacune une image ίο observée de référence et une image observable de référence (on prend préférentiellement l’image d’une source ponctuelle) pour une pluralité de déplacements d’amplitude prédéterminée devant les moyens d’acquisition optique 20 (par exemple, pour un capteur d’empreintes digitales, des déplacements d’amplitude comprise entre un et cent pixels avec un pas de cinq pixels) et/ou une pluralité de hauteurs de prise de vue prédéterminées par rapport aux moyens d’acquisition optique 20 (par exemple, pour un capteur d’empreintes digitales, des hauteurs comprises entre zéro et deux centimètres par rapport à la surface du capteur avec un pas d’un millimètre).
L’idée est d’avoir une pluralité de couples d’images observable/observée correspondant à des flous « calibrés ». Les premières gaussiennes correspondent au flou de bougé (déplacement de la source devant le capteur) et les secondes gaussiennes correspondent au flou de défocus (source trop loin du capteur).
Ensuite, les différentes fonctions gaussiennes calculées sont moyennées pour obtenir une estimation de la PSF, dont un exemple est représenté par la figure 2.
Procédé de défloutage
Comme expliqué, le présent procédé de défloutage est mis en œuvre par les moyens de traitement de données 11 de l’unité 10 sur l’image, soit acquise par les moyens 20 soit reçue depuis le serveur distant 3.
De façon connue, le procédé commence par une étape (a) d’expression de l’image observable comme solution minimisant une fonctionnelle de Tikhonov définie par l’image observée, une fonction d'étalement du point des moyens d’acquisition optique 20 et un opérateur de transformée en ondelettes, ladite fonctionnelle de Tikhonov comprenant un premier terme en norme L2 et un deuxième terme de régularisation en norme Li.
Comme expliqué avant, la régularisation Tikhonov est la méthode la plus utilisée pour résoudre les problèmes qui sont mal posés comme le présent problème de déconvolution. Le premier terme de la fonctionnelle représente la fidélité à l’image observée, et le deuxième terme est dit de régularisation.
La fonctionnelle peut être exprimée dans le domaine des ondelettes ou directement dans le domaine de l’image. Dans le cadre de la présente invention, le domaine de l’image sera préféré.
Ainsi, le premier terme de ladite fonctionnelle de Tikhonov est avantageusement UHu-gll?, où u est l'inconnue, g l’image observée, et H la fonction d'étalement du point des moyens d’acquisition optique 20. On comprend que u a pour valeur l’image observable correspondant à l’image observée g lorsque le problème est résolu, c’est-à-dire la fonctionnelle minimisée. On appelle û la valeur de u solution.
Similairement, le deuxième terme de ladite fonctionnelle de Tikhonov est avantageusement llV/ulli, où V/:5în^5îm est l’opérateur de transformée en ondelettes (W-. 5înm est l’opérateur de reconstruction, et on a c = Wu et u = Wc si c est la transformée en ondelettes de u).
La fonctionnelle de Tikhonov est une combinaison linéaire de deux termes, en particulier argminueMn[|||tfu-#||^ + llWlIi}, avec | \\Hu - g\\j + ||W||i noté Dans le domaine des ondelettes, la même fonctionnelle s’exprime par la formule argmince9îm ||HI¥c - + ||σ||^.
Par norme L2, on entend la norme euclidienne classique, obtenue à partir du produit scalaire, induisant la distance usuelle. Par norme Li on entend la somme des modules des valeurs absolues des coefficients, induisant la distance de déplacement à angle droit sur un damier, dite « distance de Manhattan ».
Le problème est que la norme Li n’est pas dérivable en zéro, on régularise le deuxième terme en zéro. Or l’utilisation de cette norme Li est souhaitable car elle donne les meilleurs résultats. Le document Chambolle et al. contourne cette difficulté en utilisant pour le deuxième terme la norme dans un espace Y dit « smoothness space », c’est-à-dire dans lequel la fonctionnelle est dérivable partout.
Le présent procédé propose une solution consistant dans une étape (b) à approximer ledit deuxième terme (en norme Li) dans le domaine des ondelettes de sorte à obtenir une fonctionnelle modifiée qui soit différentiable avec un gradient de Lipschitz continu. Plus précisément, on « lisse » la fonctionnelle dans le domaine des ondelettes.
Pour cela, la solution proposée est l’application audit deuxième terme dans le domaine des ondelettes d’un algorithme de rétrécissement (« shrinkage ») des coefficients d’ondelettes (on rappelle que c = Wu est u exprimée dans le domaine des ondelettes, i.e. comme somme d’ondelettes pondérées par des coefficients d’ondelettes).
Le principe d’un algorithme de seuillage (« thresholding ») est simple. On commence par se fixer un seuil T. Si la valeur absolue d'un coefficient d'ondelette donné est supérieure au seuil T, on garde ce coefficient tel quel. Sinon, on le met à zéro.
Dans le présent cas, on souhaite éviter justement les coefficients nuis pour permettre le lissage. Ainsi, dans le présent algorithme de rétrécissement, si la valeur absolue du coefficient est inférieure au seuil T on ne met pas le coefficient à zéro mais on le remplace par une fonction continue à valeur strictement positive.
Par exemple, on utilise avantageusement la transformation
Ψ(χ) x si x > T •2 T --1— sinon [2T 2 où l’on voit que le minimum est
T/2 en zéro, ou la transformation Ψ(χ) = \x| si \x| > T
2T sinon l+e-(|x|-T)
T est préférentiellement un écart type calculé à partir des valeurs numériques définissant les pixels de l’image observée.
La fonctionnelle ainsi modifiée est différentiable avec un gradient de Lipschitz continu (i.e. ||VV>(ii) - Vi/>(v)ll2 < - v||2). En effet, le but est de garantir qu’une solution existe et que cette solution peut être trouvée par une méthode de minimisation de premier ordre. Les fonctions Lipschitz différentiables sont facilement minimisables par les méthodes de premier ordre.
Peut alors être appliqué dans une étape (c) à ladite fonctionnelle modifiée un algorithme de minimisation en norme L2 basé sur le gradient, de sorte à déterminer une solution du problème qui est ladite image observable.
L’homme du métier connaît de tels algorithme, mais on utilisera de façon préféré l’algorithme de Nesterov qui est très rapide (On pourra citer à ce titre les publications Y. Nesterov. Excessive gap technique in nonsmooth convex minimization. SIOPT, 16 :235-249, 2005, Y. Nesterov. Smooth minimization of non-smooth functions. Mathematic Programming, Ser. A, 103 :127-152, 2005, et Y. Nesterov. Smooth minimization of non-smooth functions. Mathematic Programming, Ser. A, 103 :127-152, 2005). Une convergence est obtenue en pratique en trois itérations.
Pour la minimisation en norme L2, on a νψ(ιι) = AHT(Hu - g) + V(Wu). On note que V(Wu) est déjà connu (du fait de l’approximation des coefficient d’ondelette à l’étape (b)).
Résultats
Les tests montrent que pour une image observée de 2080x1080 pixels, l’image observable correspondante est obtenue en 0.18 secondes sur un processeur Core Duo. La figure 3b montre l’image obtenue par défloutage de l’image de la figure 3a. On voit clairement le gain de qualité sur la partie centrale.
Procédé d’identification ou d’authentification
Selon un deuxième aspect, l’invention concerne un procédé d'authentification ou d’identification d’individu comprenant le procédé de défloutage selon le premier aspect.
Plus précisément, dans le cas où lesdits moyens d’acquisition optique 20 sont un capteur d’empreinte digitale de type en vue directe (ladite image observée étant une image de doigt comprenant au moins une empreinte digitale). Le procédé d'authentification ou d’identification d’individu comprend suite au défloutage de l’image observée de sorte à déterminer une image observable correspondant à l’image observée défloutée, une étape (d) d'authentification ou d’identification d’individu par comparaison d’empreintes digitales sur la base de l'image observable déterminée.
Unité de traitement et système
Selon un troisième aspect, l’invention propose l’unité de traitement 10 pour la mise en œuvre du procédé selon le premier ou le deuxième aspect.
L’unité de traitement 10 comprend à ce titre des moyens de traitement de données 11, et le cas échéant une mémoire 12 ou une interface 13.
De façon préférée un système de traitement d’images 1 comprend l’unité 10 et les moyens d’acquisition d’image 20.
Les moyens de traitement de données 11 sont configurés pour :
- Exprimer une image observable correspondant à une image observée défloutée, l’image observée étant acquise par des moyens d’acquisition optique 20, ladite image observable et ladite image observée étant chacune constituée comme un ensemble de pixels définis par au moins une valeur numérique, comme solution minimisant une fonctionnelle de Tikhonov définie par l’image observée, une fonction d'étalement du point des moyens d’acquisition optique 20 et un opérateur de transformée en ondelettes, ladite fonctionnelle de Tikhonov comprenant un premier terme en norme L2 et un deuxième terme de régularisation en norme Li ;
- Approximer ledit deuxième terme dans le domaine des ondelettes de sorte à obtenir une fonctionnelle modifiée qui soit différentiable avec un gradient de Lipschitz continu ;
- Déterminer ladite image observable par application à ladite fonctionnelle modifiée d’un algorithme de minimisation en norme L2 basé sur le gradient.
Produit programme d’ordinateur
Selon un quatrième et un cinquième aspects, l’invention concerne un produit programme d’ordinateur comprenant des instructions de code pour l’exécution (en particulier sur les moyens de traitement de données 11 de l’unité
10) d’un procédé selon le premier aspect de défloutage d’une image observée ou un procédé selon le deuxième aspect de l’invention d'authentification ou d’identification d’individu, ainsi que des moyens de stockage lisibles par un équipement informatique (une mémoire 12 de l’unité 10) sur lequel on trouve ce produit programme d’ordinateur.

Claims (15)

  1. REVENDICATIONS
    1. Procédé de défloutage d’une image observée acquise par des moyens d’acquisition optique (20) de sorte à déterminer une image observable correspondant à l’image observée défloutée, ladite image observable et ladite image observée étant chacune constituée comme un ensemble de pixels définis par au moins une valeur numérique, le procédé étant caractérisé en ce qu’il comprend la mise en œuvre par des moyens de traitement de données (11) d’étapes de :
    (a) Expression de l’image observable comme solution minimisant une fonctionnelle de Tikhonov définie par l’image observée, une fonction d'étalement du point des moyens d’acquisition optique (20) et un opérateur de transformée en ondelettes, ladite fonctionnelle de Tikhonov comprenant un premier terme en norme l_2 et un deuxième terme de régularisation en norme l_i ;
    (b) Approximation dudit deuxième terme dans le domaine des ondelettes de sorte à obtenir une fonctionnelle modifiée qui soit différentiable avec un gradient de Lipschitz continu ;
    (c) Détermination de ladite image observable par application à ladite fonctionnelle modifiée d’un algorithme de minimisation en norme L2 basé sur le gradient.
  2. 2. Procédé selon la revendication 1, dans lequel ledit algorithme de minimisation en norme L2 basé sur le gradient est l’algorithme de Nesterov.
  3. 3. Procédé selon l’une des revendications 1 et 2, dans lequel l’étape (b) comprend l’application audit deuxième terme de régularisation dans le domaine des ondelettes d’un algorithme de rétrécissement des coefficients d’ondelettes.
  4. 4. Procédé selon la revendication 3, dans lequel l’étape (b) comprend l’application à chaque coefficient d’ondelettes du deuxième terme de x si x >7 régularisation d'une transformation choisie parmi
    Ψ(χ) = < x2 T_
    27' 2 sinon et ( \x| si \x| > T
    Ψ(χ) = 1 2τ . , où T est un écart type calculé à partir des valeurs
    ----dd -r* sinon numériques définissant les pixels de l’image observée.
  5. 5. Procédé selon l’une des revendications 1 à 4, dans lequel le premier terme de ladite fonctionnelle de Tikhonov est HHu-gll^, où u est l'inconnue, g l’image observée, et H la fonction d'étalement du point des moyens d’acquisition optique (20).
  6. 6. Procédé selon la revendication 5, dans lequel le deuxième terme de ladite fonctionnelle de Tikhonov est HV/itUi, où W est l’opérateur de transformée en ondelettes.
  7. 7. Procédé selon la revendication 6, dans lequel ladite fonctionnelle de Tikhonov est argminue9în \\Hu - g\\j + HV/uHij.
  8. 8. Procédé selon l’une des revendications 1 à 7, comprenant une étape préalable d’acquisition de ladite image observée par les moyens d’acquisition optique (20).
  9. 9. Procédé selon l’une des revendication 1 à 8, comprenant l’estimation préalable de ladite fonction d'étalement du point des moyens d’acquisition optique (20) par :
    - détermination de fonction gaussiennes reliant chacune une image observée de référence et une image observable de référence pour une pluralité de déplacements d’amplitude prédéterminée devant les moyens d’acquisition optique (20) et/ou une pluralité de hauteurs de prise de vue prédéterminées par rapport aux moyens d’acquisition optique (20),
    - moyenne desdites fonctions gaussiennes calculées.
  10. 10. Procédé selon l’une des revendication 1 à 9, dans lequel lesdits moyens d’acquisition optique (20) sont un capteur d’empreinte digitale de type en vue directe, ladite image observée étant une image de doigt comprenant au moins une empreinte digitale.
  11. 11. Procédé d'authentification ou d’identification d’individu, comprenant la mise en œuvre d’un procédé selon la revendication 10 de défloutage d’une image observée acquise par des moyens d’acquisition optique (20) de sorte à déterminer une image observable correspondant à l’image observée défloutée selon la revendication 10, et une étape (d) d'authentification ou d’identification d’individu par comparaison d’empreintes digitales sur la base de l'image observable déterminée.
  12. 12. Unité de traitement (10) comprenant des moyens de traitement de données (11) configurés pour :
    - Exprimer une image observable correspondant à une image observée défloutée, l’image observée étant acquise par des moyens d’acquisition optique (20), ladite image observable et ladite image observée étant chacune constituée comme un ensemble de pixels définis par au moins une valeur numérique, comme solution minimisant une fonctionnelle de Tikhonov définie par l’image observée, une fonction d'étalement du point des moyens d’acquisition optique (20) et un opérateur de transformée en ondelettes, ladite fonctionnelle de Tikhonov comprenant un premier terme en norme L2 et un deuxième terme de régularisation en norme Li ;
    - Approximer ledit deuxième terme dans le domaine des ondelettes de sorte à obtenir une fonctionnelle modifiée qui soit différentiable avec un gradient de Lipschitz continu ;
    - Déterminer ladite image observable par application à ladite fonctionnelle modifiée d’un algorithme de minimisation en norme L2 basé sur le gradient.
    5
  13. 13. Système de traitement d’image (1) comprenant une unité (10) selon la revendication 12 et lesdits moyens d’acquisition optique (20).
  14. 14. Produit programme d’ordinateur comprenant des instructions de code pour l’exécution d’un procédé selon l’une des revendications 1 à 11 de
    10 défloutage d’une image observée ou d'authentification ou d’identification d’individu , lorsque ledit programme est exécuté par un ordinateur.
  15. 15. Moyen de stockage lisible par un équipement informatique sur lequel un produit programme d’ordinateur comprend des instructions de code pour
    15 l’exécution d’un procédé selon l’une des revendications 1 à 11 de défloutage d’une image observée ou d'authentification ou d’identification d’individu.
FR1754532A 2017-05-22 2017-05-22 Procede de defloutage d'une image Active FR3066633B1 (fr)

Priority Applications (1)

Application Number Priority Date Filing Date Title
FR1754532A FR3066633B1 (fr) 2017-05-22 2017-05-22 Procede de defloutage d'une image

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR1754532A FR3066633B1 (fr) 2017-05-22 2017-05-22 Procede de defloutage d'une image
FR1754532 2017-05-22

Publications (2)

Publication Number Publication Date
FR3066633A1 true FR3066633A1 (fr) 2018-11-23
FR3066633B1 FR3066633B1 (fr) 2021-07-02

Family

ID=60202077

Family Applications (1)

Application Number Title Priority Date Filing Date
FR1754532A Active FR3066633B1 (fr) 2017-05-22 2017-05-22 Procede de defloutage d'une image

Country Status (1)

Country Link
FR (1) FR3066633B1 (fr)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111242861A (zh) * 2020-01-09 2020-06-05 浙江光珀智能科技有限公司 去除tof相机杂散光方法及装置、电子设备及存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150254810A1 (en) * 2014-03-07 2015-09-10 The University Of British Columbia System and method for solving inverse imaging problems

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150254810A1 (en) * 2014-03-07 2015-09-10 The University Of British Columbia System and method for solving inverse imaging problems

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
C.J. BUDD ET AL: "Regularization techniques for ill-posed inverse problems in data assimilation", COMPUTERS AND FLUIDS, vol. 46, no. 1, 29 October 2010 (2010-10-29), GB, pages 168 - 173, XP055455774, ISSN: 0045-7930, DOI: 10.1016/j.compfluid.2010.10.002 *
M. CARLAVAN ET AL: "Algorithme rapide pour la restauration d'image régularisée sur les coefficients d'ondelettes", GRETSI, SEP 2009, DIJON, FRANCE, 1 September 2009 (2009-09-01), XP055455786, Retrieved from the Internet <URL:https://hal.inria.fr/inria-00417654/document> [retrieved on 20180301] *
MOSLEH ALI ET AL: "Camera intrinsic blur kernel estimation: A reliable framework", 2015 IEEE CONFERENCE ON COMPUTER VISION AND PATTERN RECOGNITION (CVPR), IEEE, 7 June 2015 (2015-06-07), pages 4961 - 4968, XP032793955, DOI: 10.1109/CVPR.2015.7299130 *
NIVEDITA SONI ET AL: "Filtering Techniques used for Blurred Images in Fingerprint Recognition", INTERNATIONAL JOURNAL OF SCIENTIFIC AND RESEARCH PUBLICATIONS, vol. 3, no. 5, 1 May 2013 (2013-05-01), XP055455790 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111242861A (zh) * 2020-01-09 2020-06-05 浙江光珀智能科技有限公司 去除tof相机杂散光方法及装置、电子设备及存储介质
CN111242861B (zh) * 2020-01-09 2023-09-12 浙江光珀智能科技有限公司 去除tof相机杂散光方法及装置、电子设备及存储介质

Also Published As

Publication number Publication date
FR3066633B1 (fr) 2021-07-02

Similar Documents

Publication Publication Date Title
US10949952B2 (en) Performing detail enhancement on a target in a denoised image
FR3088755A1 (fr) Procede de defloutage d’une image
WO2005122086A2 (fr) Reduction de bruit d’image numerique
US20050030393A1 (en) Method and device for sensor level image distortion abatement
FR3073312A1 (fr) Procede d&#39;estimation de pose d&#39;une camera dans le referentiel d&#39;une scene tridimensionnelle, dispositif, systeme de realite augmentee et programme d&#39;ordinateur associe
EP2880623B1 (fr) Procede et dispositif pour la reconstruction d&#39;images a super-resolution
WO2004102474A2 (fr) Procede et dispositif permettant de reduire les distorsions d&#39;image au niveau du capteur
FR3028988A1 (fr) Procede et dispositif de filtrage adaptatif temps reel d&#39;images de disparite ou de profondeur bruitees
JP2019508921A (ja) フォーカス検出
EP3490255B1 (fr) Compression intelligente de contenus vidéo grainés
EP3123394A1 (fr) Système d&#39;identification d&#39;un modèle d&#39;appareil photographique associe a une image compressée au format jpeg, procédé, utilisations et applications associes
US20240020796A1 (en) Noise reconstruction for image denoising
FR3060180A1 (fr) Procede de traitement d’image numerique
Abdullah-Al-Mamun et al. A new full-reference image quality metric for motion blur profile characterization
Zhang et al. Self-supervised image restoration with blurry and noisy pairs
FR3066633A1 (fr) Procede de defloutage d&#39;une image
Ko et al. Low cost blur image detection and estimation for mobile devices
WO2016071461A1 (fr) Procédé de détection de pixels défectueux
FR3078427A1 (fr) Detection dynamique de lumiere parasite dans une image numerique
CA3105372C (fr) Traitement d&#39;un bruit impulsionnel dans une sequence video
Chahal et al. Robust statistics based filter to remove salt and pepper noise in digital images
FR2933520A1 (fr) Procede et dispositif de restauration d&#39;une sequence video
EP2943935A1 (fr) Estimation de mouvement d&#39;une image
EP2825995A1 (fr) Système pour déterminer l&#39;identification d&#39;un appareil photographique a partir d&#39;une photographie et procédé mis en oeuvre dans un tel système
US20240169497A1 (en) Airy-Disk Correction for Deblurring an Image

Legal Events

Date Code Title Description
PLFP Fee payment

Year of fee payment: 2

PLSC Publication of the preliminary search report

Effective date: 20181123

PLFP Fee payment

Year of fee payment: 3

PLFP Fee payment

Year of fee payment: 4

PLFP Fee payment

Year of fee payment: 5

PLFP Fee payment

Year of fee payment: 6

CA Change of address

Effective date: 20230124

CD Change of name or company name

Owner name: IDEMIA IDENTITY & SECURITY FRANCE, FR

Effective date: 20230124

PLFP Fee payment

Year of fee payment: 7

PLFP Fee payment

Year of fee payment: 8