FR2828977A1 - Dispositif et procede d'estimation du niveau de bruit, systeme de reduction de bruit et systeme de codage comprenant un tel dispositif - Google Patents
Dispositif et procede d'estimation du niveau de bruit, systeme de reduction de bruit et systeme de codage comprenant un tel dispositif Download PDFInfo
- Publication number
- FR2828977A1 FR2828977A1 FR0110977A FR0110977A FR2828977A1 FR 2828977 A1 FR2828977 A1 FR 2828977A1 FR 0110977 A FR0110977 A FR 0110977A FR 0110977 A FR0110977 A FR 0110977A FR 2828977 A1 FR2828977 A1 FR 2828977A1
- Authority
- FR
- France
- Prior art keywords
- noise level
- dfd
- local
- estimating
- variations
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 11
- 230000009467 reduction Effects 0.000 title claims description 13
- 230000006870 function Effects 0.000 description 14
- 238000006073 displacement reaction Methods 0.000 description 10
- 238000001914 filtration Methods 0.000 description 7
- 239000013598 vector Substances 0.000 description 5
- 230000006978 adaptation Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000009499 grossing Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/21—Circuitry for suppressing or minimising disturbance, e.g. moiré or halo
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Picture Signal Circuits (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Image Processing (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
La présente invention concerne un dispositif et un procédé d'estimation du niveau de bruit d'images vidéo avant codage.Le dispositif comprend notamment des moyens de stockage d'au moins une image d'entrée, un module d'estimation de mouvement par blocs, prévu pour produire par blocs des premières grandeurs représentatives de variations d'images compensées en mouvement, à partir d'une image d'entrée courante et d'au moins une image d'entrée stockée antérieurement dans lesdits moyens de stockage, des moyens d'estimation d'un niveau de bruit global pour chaque image en fonction d'au moins certaines desdites grandeurs représentatives de variations d'images compensées en mouvement.Ledit dispositif comprend des moyens d'estimation d'un niveau de bruit local pour chaque bloc de l'image en fonction de secondes grandeurs représentatives de variations d'images compensées en mouvement et du niveau de bruit global.
Description
<Desc/Clms Page number 1>
La présente invention est relative à un dispositif et à un procédé d'estimation du niveau de bruit ainsi qu'à un système de réduction de bruit et à un système de codage comprenant un tel dispositif.
Elle concerne les techniques d'estimation de niveau de bruit appliquées à des signaux vidéo numériques. Ces techniques d'estimation du niveau de bruit sont utilisées dans les techniques de réduction de bruit. Les techniques de réduction de bruit s'appliquent généralement à des images vidéo numériques se présentant sous la forme d'une matrice d'échantillons ; chaque échantillon est composé d'un signal de luminance et, pour un signal en couleur, d'un signal de chrominance.
L'acquisition des séquences d'images vidéo est encore aujourd'hui largement réalisée sous une forme analogique de sorte que les images, une fois acquises et éventuellement transmises et stockées dans des formats analogiques, présentent une part sensible de bruit dans leur contenu. Une fois numérisées, ces images sont également souvent soumises à des opérations de stockage/édition qui, à leur tour, introduisent un bruit de nature numérique, cette fois. En final, une séquence d'images subit généralement une succession de transformations ayant pour résultat un bruit patio-temporel de nature fortement aléatoire.
Pour obtenir un fonctionnement performant, les méthodes de réduction de bruit faisant appel à un filtrage récursif considèrent la très forte corrélation temporelle des images d'une séquence vidéo. Par conséquent, les notions de mouvement et de déplacement sont importantes pour la mise au point d'une réduction de bruit efficace.
Par déplacement , on entend le changement de position d'un objet dans une scène, ce changement de position étant localisé et propre à cet objet. Par mouvement , on entend l'ensemble des déplacements d'objets dans une séquence vidéo.
<Desc/Clms Page number 2>
Le mouvement est classiquement détecté soit par simple différence d'images à images, soit en utilisant un estimateur de mouvement.
Lorsque l'on utilise un estimateur de mouvement, on tient compte des déplacements en effectuant des différences d'images à des instants distincts ainsi qu'en se déplaçant spacialement dans les trames. Ces déplacements sont représentés par des champs de vecteurs de mouvement appliqués à des pixels (estimation de mouvement au pixel) ou à des blocs (estimation de mouvement par blocs). On obtient ainsi des différences d'images compensées en mouvement, appelées DFDs (Displacement Frame Differences), par pixels ou par blocs.
Dans des systèmes connus, l'estimation du niveau de bruit est faite au niveau des trames d'images. Cette estimation conduit à uniformiser le bruit sur la trame et par voie de conséquence le filtrage ce qui peut engendrer certains défauts tels la perte de définition sur certaines zones non bruitées, l'apparition de flou ou le lissage de certaines textures (les pelouses par exemple). De tels systèmes sont par exemple décrits dans la demande de brevet Français 009684 déposée le 24 juillet 2000 au nom de la société Thomson Multimédia.
La présente invention concerne un dispositif d'estimation du niveau de bruit fondé sur une estimation locale du bruit tenant ainsi compte de son caractère fortement aléatoire. Les effets négatifs exposés ci-dessus sont alors considérablement réduits contribuant à l'augmentation de la qualité d'image.
L'invention est également relative à un système de réduction de bruit et à un système de codage comprenant un tel dispositif ainsi qu'à un procédé de filtrage récursif compensé en mouvement correspondant.
<Desc/Clms Page number 3>
A cet effet, l'invention a trait à un dispositif d'estimation du niveau de bruit d'images vidéo avant codage comportant : - des moyens de stockage d'au moins une image d'entrée, - un module d'estimation de mouvement par blocs, prévu pour produire par blocs des grandeurs représentatives de variations d'images compensées en mouvement, à partir d'une image d'entrée courante et d'au moins une image d'entrée stockée antérieurement dans lesdits moyens de stockage, - des moyens d'estimation d'un niveau de bruit global pour chaque image en fonction d'au moins lesdites grandeurs représentatives de variations d'images compensées en mouvement,
Selon l'invention ce dispositif comprend : - des moyens d'estimation d'un niveau de bruit local pour chaque bloc de l'image en fonction de grandeurs représentatives de variations d'images compensées en mouvement et du niveau de bruit global.
Selon l'invention ce dispositif comprend : - des moyens d'estimation d'un niveau de bruit local pour chaque bloc de l'image en fonction de grandeurs représentatives de variations d'images compensées en mouvement et du niveau de bruit global.
Par grandeurs représentatives de variations d'images compensées en mouvement , on entend des grandeurs qui quantifient des modifications temporelles dans une séquence d'images (préférentiellement par blocs) en tenant compte de l'estimation de mouvement. Ces grandeurs consistent avantageusement en les DFDs.
Les DFDs sont assez bien représentatives de la quantité de bruit contenue dans une séquence vidéo. Les DFDs en donnent même une expression exacte si la compensation de mouvement est idéale (c'est-à-dire si la compensation est parfaite, quelles que soient la nature du mouvement et les déformations).
En tenant compte de la nature fortement aléatoire du bruit, l'estimation d'un niveau de bruit local permet la diminution des artefacts de filtrage ; ces derniers sont la conséquence directe d'un niveau de bruit
<Desc/Clms Page number 4>
uniforme sur la trame synonyme d'un filtrage identique sur un bloc bruité et sur un bloc non bruité.
Ainsi l'estimation du niveau de bruit au niveau local permet de réduire notamment la forte perte de définition sur les zones de l'image non bruitées, l'apparition de flou et le lissage de certaines textures, par exemple, les pelouses.
En estimant le niveau de bruit local en fonction du niveau de bruit global de la trame, il est possible de situer le niveau de bruit du bloc courant par rapport au niveau de bruit global de la trame et ainsi d'améliorer l'estimation du niveau de bruit global.
Préférentiellement, lesdites grandeurs représentatives de variations d'images compensées en mouvement pour déterminer ledit niveau de bruit global sont une grandeur minimale et une grandeur moyenne calculées par le module d'estimation de mouvement par bloc.
Préférentiellement, lesdites grandeurs représentatives de variations d'images compensées en mouvement pour déterminer ledit niveau de bruit local sont une grandeur locale et une grandeur moyenne calculées par le module d'estimation de mouvement par bloc.
Selon un mode de réalisation préféré, les moyens d'estimation d'un niveau de bruit local sont prévus pour déterminer le niveau de bruit local en fonction de la différence entre la DFD moyenne et la DFD locale et en fonction du rapport de ladite différence sur la DFD moyenne.
De façon préférée, le niveau de bruit local est ajusté différemment en fonction de la comparaison entre les valeurs de ladite différence et au moins une valeur de seuil prédéterminée.
<Desc/Clms Page number 5>
Ceci permet d'ajuster le niveau de bruit en fonction de seuils prédéterminés et ainsi de limiter les fluctuations du niveau de bruit local en interdisant au niveau de bruit local de sortir d'une plage de valeurs prédéfinies.
L'invention concerne également un dispositif de réduction du bruit comprenant un dispositif d'estimation du niveau de bruit conforme à l'invention.
L'invention est également relative à un système de codage comprenant un dispositif d'estimation du niveau de bruit conforme à l'invention.
Elle s'applique également à un procédé d'estimation du niveau de bruit d'images vidéo avant codage dans lequel : - on stocke au moins une image d'entrée courante, - on effectue une estimation de mouvement par blocs de façon à produire par blocs des grandeurs représentatives de variations d'images compensées en mouvement, à partir d'une image d'entrée courante et d'au moins une image d'entrée stockée antérieurement dans lesdits moyens de stockage, - on détermine un niveau de bruit global pour chaque image en fonction d'au moins lesdites grandeurs représentatives de variations d'images compensées en mouvement,
Selon l'invention, - on détermine un niveau de bruit local pour chaque bloc de l'image en fonction de grandeurs représentatives de variations d'images compensées en mouvement et du niveau de bruit global.
Selon l'invention, - on détermine un niveau de bruit local pour chaque bloc de l'image en fonction de grandeurs représentatives de variations d'images compensées en mouvement et du niveau de bruit global.
L'invention sera mieux comprise et illustrée au moyen d'exemples de modes de réalisation et de mise en oeuvre avantageux, nullement limitatifs,
<Desc/Clms Page number 6>
en référence aux figures annexées sur lesquelles : - la figure 1 représente un dispositif d'estimation de niveau de bruit comprenant un module d'estimation de niveau de bruit local conformément à l'invention, - la figure 2 montre un organigramme de fonctionnement du module d'estimation d'un niveau de bruit local pour un bloc, et - la figure 3 représente un schéma montrant les modifications apportées au niveau de bruit global pour obtenir le niveau de bruit local en fonction de seuils prédéterminés.
On note : - x, y et t respectivement l'abscisse, l'ordonnée et le temps, - u (x, y ; t) un signal d'entrée courant, - u (x, y ; t-T) un signal d'entrée retardé d'un délai T (T représente un délai d'une trame vidéo par exemple), - d (dx, dy) un vecteur de déplacement, dx désignant le décalage (offset) de déplacement suivant l'axe des abscisses et dy le décalage de déplacement suivant l'axe des ordonnées, - v (x, y ; t) la sortie du filtre, - cyglobal un niveau de bruit estimé pour l'image entière, - local un niveau de bruit estimé pour un bloc de l'image, - DFD (x, y ; t) : DFD (x, y ; t) = u (x, y ; t)-u (x+dx, y+dy ; t-T) appliquée sur un pixel ou sur un bloc de pixels.
Le dispositif de filtrage comprend une mémoire 1, prévue pour stocker une image d'entrée (signal u (x, y ; t)) et un estimateur de mouvement par blocs 2, prévu pour produire par blocs des vecteurs de mouvement d (dx, dy) et des DFDs, à partir d'une image d'entrée courante (signal u (x, y ; t)) et d'une
<Desc/Clms Page number 7>
image d'entrée stockée antérieurement (signal u (x, y ; t-T)) dans la mémoire 1.
Le dispositif est également pourvu d'un module 3 d'estimation d'un niveau de bruit global à l'image en fonction des DFDs moyenne (DFDmoy) et minimale (DFDmin).
Il comprend également une mémoire 5 pour mémoriser les DFDs locales de l'instant t. La DFD moyenne est calculée après avoir parcouru toutes les DFDs locales de la trame.
Il comprend également un module d'estimation 4 d'un niveau de bruit local pour un bloc en fonction du niveau de bruit crglobal calculé par le module 3 d'estimation d'un niveau de bruit global à l'image, de la DFD locale (DFD (x, y ; t)) et de la DFD moyenne (DFDmoy). Le fonctionnement de ce module est détaillé dans la figure 2.
La DFD moyenne (DFDmoy) et la DFD minimale (DFDmin) sont calculées au préalable, avant de calculer la DFD locale (DFD (x, y ; t)).
Il comprend enfin un module 6 de réduction du niveau de bruit compensé et/ou adapté en mouvement, en fonction du vecteur de déplacement d (dx, dy) et du niveau de bruit local local (x, y ; t).
Le module 6 produit en sortie l'image filtrée courante v (x, y ; t).
Le module 6 peut être un module de filtrage appliqué à la réduction du bruit ou plus généralement un module de traitement d'images.
La DFD minimale (DFDmin) en sortie du module d'estimation de mouvement par bloc 2 peut être calculée de différentes manières.
Selon un premier mode de réalisation, elle peut représenter la DFD minimale de la trame. Cette solution est simple et peu onéreuse mais peu
<Desc/Clms Page number 8>
précise car il suffit que l'une des DFDs soit faible pour avoir une DFD minimale faible. Cela donne donc :
avec - resX (respectivement resY) la résolution horizontale (respectivement verticale), - block (respectivement blocY) la taille du bloc horizontale en général de taille 16 pixels (respectivement verticale en général de taille 8 pixels).
avec - resX (respectivement resY) la résolution horizontale (respectivement verticale), - block (respectivement blocY) la taille du bloc horizontale en général de taille 16 pixels (respectivement verticale en général de taille 8 pixels).
Selon un second mode de réalisation, la DFDmin représente un pourcentage des DFDs minimales de la trame. Dans ce mode de réalisation, la DFDmin est donc calculée à partir d'un ensemble de valeurs et ne représente donc pas une seule valeur comme dans le mode précédent.
Cette solution est donc plus précise mais plus complexe car elle nécessite de classer toutes les DFDs de la trame.
La DFD moyenne, DFDmoy. représente la moyenne de toutes les DFDs de la trame. La DFD moyenne est donc la somme des DFD locales sur le nombre de DFDs dans la trame. Cela donne donc :
A titre d'exemple illustratif, pour une trame de résolution 720*288 et des blocs de 16*8, il y a (720/16) * (288/8) DFDs soit 1620 DFDs. Dans ce cas, la moyenne est effectuée sur ces 1620 DFDs et est affectée à la DFD moyenne.
<Desc/Clms Page number 9>
Ce module reçoit en entrée la DFD locale du bloc en cours de traitement DFD (x, y ; t), la DFD moyenne DFDmoy ainsi que le niveau de bruit global global
Ce module réalise une adaptation locale du niveau de bruit en fonction de la DFD moyenne DFDmoy et de la DFD locale DFD (x, y ; t) du bloc courant. Cette adaptation est contrôlée d'une part par la différence (ERREURDFD) entre la DFD moyenne et la DFD locale et d'autre part par le rapport (RapportDFD) de cette différence sur la DFD moyenne.
Ce module réalise une adaptation locale du niveau de bruit en fonction de la DFD moyenne DFDmoy et de la DFD locale DFD (x, y ; t) du bloc courant. Cette adaptation est contrôlée d'une part par la différence (ERREURDFD) entre la DFD moyenne et la DFD locale et d'autre part par le rapport (RapportDFD) de cette différence sur la DFD moyenne.
La différence entre la DFD moyenne et la DFD locale détermine le sens de variation de l'adaptation ; en effet, lorsque l'erreur est positive (signifiant que la DFD locale est inférieure à la DFD moyenne) le niveau de bruit doit être diminué. Par contre, lorsque l'erreur est négative, elle provoque une augmentation du niveau de bruit.
Le rapport de la différence entre la DFD moyenne et la DFD locale sur la DFD moyenne qualifie, sous forme normalisée par rapport à la DFD moyenne, l'erreur commise.
Afin de ne pas faire une correction binaire qui créerait des artefacts visibles sur l'image, une solution est de faire une correction en fonction de seuils. La plage de variation de l'erreur ERREURDFD est donc découpée en plusieurs zones.
L'exemple, donné à titre illustratif dans la suite, définit deux seuils découpant cette plage en quatre zones, comme représenté sur la figure 3.
- Lorsque l'erreur est comprise entre 0 et Seuil1 (SI), la DFD locale est inférieure à la DFD moyenne. Le niveau de bruit doit donc être diminué ;
<Desc/Clms Page number 10>
pour une erreur proche de 0, la diminution est faible et pour une erreur proche de Seuil1 la diminution est maximale sur cet intervalle, comme indiqué lors de l'étape E9 de la figure 2.
- Lorsque l'erreur est comprise entre 0 et Seuil2 (S2), la DFD locale est supérieure à la DFD moyenne. Le niveau de bruit doit donc être augmenté ; pour une erreur proche de 0, l'augmentation est faible et pour une erreur proche de Seuil2 (S2) l'augmentation est maximale sur cet intervalle comme indiqué lors de l'étape E4 de la figure 2.
- Lorsque l'erreur est supérieure à Seuil1 (S1), la diminution du niveau de bruit est limitée à une valeur maximale en fonction de paramètres comme indiqué lors de l'étape E10 de la figure 2.
- Lorsque l'erreur est inférieure à Seuil2 (S2), la DFD locale est supérieure à la DFD moyenne, le niveau de bruit local doit donc être augmenté. Pour réaliser l'adaptation locale du niveau de bruit, on considère 2 cas : - en présence d'un mouvement fort, on fait l'hypothèse que l'estimateur de mouvement a effectué une mauvaise compensation. La DFD locale représente donc un mélange de bruit et de signal utile. L'augmentation du niveau de bruit locale est alors limitée par une valeur maximale comme indiqué lors de l'étape E6 de la figure 2.
- dans le cas contraire, c'est à dire en présence d'un faible mouvement, on considère que l'estimateur de mouvement est très fiable. La compensation de mouvement est jugée de bonne qualité. Par conséquent, la DFD locale représente du bruit.
L'augmentation du niveau de bruit local n'est donc pas limitée comme indiqué lors de l'étape E7 de la figure 2.
L'augmentation du niveau de bruit local n'est donc pas limitée comme indiqué lors de l'étape E7 de la figure 2.
Des coefficients de pondération ss1 et dz permettent d'accentuer plus ou moins l'effet de l'ajustement local. Différentes manières de faire cette pondération sont possibles et l'exemple de réalisation proposé n'est donné qu'à titre illustratif.
<Desc/Clms Page number 11>
Nous allons maintenant décrire la figure 2 décrivant un mode de réalisation du module 4 d'estimation d'un niveau de bruit local pour un bloc.
Le module 4 reçoit en entrée la DFD moyenne DFDmoy et la DFD locale (DFD (x, y ; t)) et calcule lors de l'étape E1 la différence entre la DFD moyenne et la DFD locale appe ! ée ERREURDFD.
Au cours de l'étape E2, il effectue un test de comparaison pour déterminer si cette différence est positive ou négative.
Si cette différence est négative, il passe à l'étape E3 de comparaison de cette différence avec le seuil S2.
Si ERREUR~DFD est supérieure ou égale au seuil S2, alors il passe à l'étape E4. Au cours de l'étape E4, le niveau de bruit local est augmenté. A titre illustratif, l'augmentation peut être effectuée en utilisant la formule suivante : Glocal=cyglobal-Rapport-DFDxP2
Si ERREUR~DFD est inférieure à S2, alors il passe à l'étape E5. Au cours de l'étape E5, il effectue un test et compare la valeur du vecteur de déplacement d (x, y) à un seuil de mouvement S3. Si d (x, y) est supérieure à S3, alors il passe à l'étape E7. Au cours de l'étape E7, le niveau de bruit local est augmenté et seuillé. A titre illustratif, ceci peut-être fait de la façon suivante : OElocal=cîglobal + P2/2
Si ERREUR~DFD est inférieure à S2, alors il passe à l'étape E5. Au cours de l'étape E5, il effectue un test et compare la valeur du vecteur de déplacement d (x, y) à un seuil de mouvement S3. Si d (x, y) est supérieure à S3, alors il passe à l'étape E7. Au cours de l'étape E7, le niveau de bruit local est augmenté et seuillé. A titre illustratif, ceci peut-être fait de la façon suivante : OElocal=cîglobal + P2/2
<Desc/Clms Page number 12>
Si d (x, y) est inférieur ou égal à S3, alors il passe à l'étape E6 au cours de laquelle le niveau de bruit local est augmenté. A titre illustratif, ceci peut- être fait de la façon suivante : < 7local=réel-Rapport~DFDxss2
Si, au cours de l'étape E2, ERREUR~DFD est négative, alors il passe à l'étape E8 de comparaison de cette différence avec le seuil S1.
Si, au cours de l'étape E2, ERREUR~DFD est négative, alors il passe à l'étape E8 de comparaison de cette différence avec le seuil S1.
Si ERREURDFD est inférieure ou égale au seuil S1, alors il passe à l'étape E9. Au cours de l'étape E9, le niveau de bruit local est diminué. A titre illustratif, la diminution peut être effectuée en utilisant la formule suivante : #local=#global - Rapport~DFD#ss 1
Si ERREURDFD est supérieure au seuil S1, alors il passe à l'étape E10. Au cours de l'étape E10, le niveau de bruit local est diminué et un seuillage effectué selon la formule suivante donnée à titre illustratif #local=#global - ss1/2
Ensuite il passe à l'étape E11 au cours de laquelle la valeur du niveau de bruit local est lissée en imposant une valeur minimale amin et une valeur maximale amax. La valeur finale du niveau de bruit obtenue est soit la valeur obtenue lors des étapes E4, E6, E7, E9 ou E10 ou amax si cette valeur est supérieure à amax ou amin si cette valeur est inférieure à amin-
Dans certains modes de réalisation particuliers, à titre illustratif, on pourra prendre les valeurs suivantes pour les différents seuils.
Si ERREURDFD est supérieure au seuil S1, alors il passe à l'étape E10. Au cours de l'étape E10, le niveau de bruit local est diminué et un seuillage effectué selon la formule suivante donnée à titre illustratif #local=#global - ss1/2
Ensuite il passe à l'étape E11 au cours de laquelle la valeur du niveau de bruit local est lissée en imposant une valeur minimale amin et une valeur maximale amax. La valeur finale du niveau de bruit obtenue est soit la valeur obtenue lors des étapes E4, E6, E7, E9 ou E10 ou amax si cette valeur est supérieure à amax ou amin si cette valeur est inférieure à amin-
Dans certains modes de réalisation particuliers, à titre illustratif, on pourra prendre les valeurs suivantes pour les différents seuils.
<Desc/Clms Page number 13>
Pour faire apparaître une symétrie, on pourra prendre 81 =1821 et ss2=ss1.
81 = 0. 5xDFD~moyenne, S2 =-0. 5xDFD~moyenne, ss2=ss1= 6, (on assimile ces coefficients à ss) S3 = 20. amin = 3.5 amax = 15.5
Claims (8)
1. Dispositif d'estimation du niveau de bruit d'images vidéo avant codage comprenant : - des moyens de stockage (1) d'au moins une image d'entrée u (x, y ; t) - un module (2) d'estimation de mouvement par blocs, prévu pour produire par blocs des premières grandeurs représentatives de variations d'images compensées en mouvement (DFD), à partir d'une image d'entrée courante (u (x, y ; t)) et d'au moins une image d'entrée stockée antérieurement (u (x, y ; t-T)) dans lesdits moyens de stockage (1), - des moyens (3) d'estimation d'un niveau de bruit global (aglobal) pour chaque image en fonction d'au moins certaines desdites premières grandeurs représentatives de variations d'images compensées en mouvement (DFD), caractérisé en ce que ledit dispositif comprend - des moyens (4) d'estimation d'un niveau de bruit local (6local) pour chaque bloc de l'image en fonction de secondes grandeurs représentatives de variations d'images compensées en mouvement (DFD) et du niveau de bruit global (global).
2. Dispositif selon la revendication 1 caractérisé en ce que lesdites certaines premières grandeurs représentatives de variations d'images compensées en mouvement (DFD) pour déterminer ledit niveau de bruit global (oglobal) sont une grandeur minimale (DFDmin) et une grandeur moyenne (DFDmoy) calculées par le module (4) d'estimation de mouvement par bloc.
<Desc/Clms Page number 15>
3. Dispositif selon la revendication 2 caractérisé en ce que lesdites secondes grandeurs représentatives de variations d'images compensées en mouvement (DFD) pour déterminer ledit niveau de bruit local (local) sont une grandeur locale (DFD (x, y ; t)) et une grandeur moyenne (DFDmoy) calculées par le module (2) d'estimation de mouvement par bloc.
4. Dispositif selon l'une des revendications 1 ou 2 caractérisé en ce que les moyens (4) d'estimation d'un niveau de bruit local (local) sont prévus pour déterminer le niveau de bruit local en fonction de la différence (ERREURDFD) entre la DFD moyenne (DFDmoy) et la DFD locale (DFD (x, y ; t)) et en fonction du rapport de ladite différence sur la DFD moyenne (DFDmoy).
5. Dispositif selon la revendication 4 caractérisé en ce que le niveau de bruit local (6local) est ajusté différemment en fonction de la comparaison entre les valeurs de ladite différence (ERREURDFD) et au moins une valeur de seuil prédéterminée (S1, S2, S3).
6. Système de réduction du bruit caractérisé en ce qu'il comporte un dispositif d'estimation du niveau de bruit selon l'une des revendications 1 à 5.
7. Système de codage comprenant un dispositif d'estimation du niveau de bruit selon l'une des revendications 1 à 5.
8. Procédé d'estimation du niveau de bruit d'images vidéo avant codage dans lequel : - on stocke au moins une image d'entrée courante (u (x, y ; t)),
<Desc/Clms Page number 16>
on effectue une estimation de mouvement par blocs de façon à produire par blocs des premières grandeurs représentatives de variations d'images compensées en mouvement (DFD), à partir d'une image d'entrée courante (u (x, y ; t)) et d'au moins une image d'entrée stockée antérieurement (u (x, y ; t-T)) dans lesdits moyens de stockage (1), on détermine un niveau de bruit global (global) pour chaque image (u (x, y ; t)) en fonction d'au moins certaines desdites grandeurs représentatives de variations d'images compensées en mouvement (DFD), caractérisé en ce que - on détermine (E4, E6, E7, E9, E10, E11) un niveau de bruit local (6local) pour chaque bloc de l'image en fonction de secondes grandeurs représentatives de variations d'images compensées en mouvement (DFD) et du niveau de bruit global (6global)
Priority Applications (7)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR0110977A FR2828977B1 (fr) | 2001-08-21 | 2001-08-21 | Dispositif et procede d'estimation du niveau de bruit, systeme de reduction de bruit et systeme de codage comprenant un tel dispositif |
| PCT/EP2002/008810 WO2003019947A1 (fr) | 2001-08-21 | 2002-08-06 | Dispositif et procede pour evaluer un niveau de bruit, systeme de reduction de bruit et systeme de codage comprenant un tel dispositif |
| EP02796209A EP1419658A1 (fr) | 2001-08-21 | 2002-08-06 | Dispositif et procede pour evaluer un niveau de bruit, systeme de reduction de bruit et systeme de codage comprenant un tel dispositif |
| JP2003524268A JP2005518689A (ja) | 2001-08-21 | 2002-08-06 | ノイズレベルを推定する装置および方法、当該装置を含むノイズリダクションシステムおよび符号化システム |
| US10/487,197 US7515638B2 (en) | 2001-08-21 | 2002-08-06 | Device and process for estimating noise level, noise reduction system and coding system comprising such a device |
| KR10-2004-7002526A KR20040054676A (ko) | 2001-08-21 | 2002-08-06 | 노이즈 레벨 추정 디바이스 및 프로세스, 노이즈 감소시스템 및 이러한 디바이스를 포함하는 코딩 시스템 |
| CNB028163230A CN1266943C (zh) | 2001-08-21 | 2002-08-06 | 估计噪声电平的装置及方法、噪声减少系统及编码系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR0110977A FR2828977B1 (fr) | 2001-08-21 | 2001-08-21 | Dispositif et procede d'estimation du niveau de bruit, systeme de reduction de bruit et systeme de codage comprenant un tel dispositif |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| FR2828977A1 true FR2828977A1 (fr) | 2003-02-28 |
| FR2828977B1 FR2828977B1 (fr) | 2003-12-05 |
Family
ID=8866642
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| FR0110977A Expired - Fee Related FR2828977B1 (fr) | 2001-08-21 | 2001-08-21 | Dispositif et procede d'estimation du niveau de bruit, systeme de reduction de bruit et systeme de codage comprenant un tel dispositif |
Country Status (7)
| Country | Link |
|---|---|
| US (1) | US7515638B2 (fr) |
| EP (1) | EP1419658A1 (fr) |
| JP (1) | JP2005518689A (fr) |
| KR (1) | KR20040054676A (fr) |
| CN (1) | CN1266943C (fr) |
| FR (1) | FR2828977B1 (fr) |
| WO (1) | WO2003019947A1 (fr) |
Families Citing this family (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20050119422A (ko) * | 2004-06-16 | 2005-12-21 | 삼성전자주식회사 | 움직임 보상에 기반한 입력 영상의 노이즈 예측 및 그장치와, 이를 사용한 노이즈 제거 및 동영상 부호화 방법,이를 수행하기 위한 프로그램이 기록된 기록 매체 |
| JP4483516B2 (ja) * | 2004-10-08 | 2010-06-16 | ソニー株式会社 | 画像処理装置および方法、並びにプログラム |
| US20080204598A1 (en) * | 2006-12-11 | 2008-08-28 | Lance Maurer | Real-time film effects processing for digital video |
| TW200901751A (en) * | 2007-06-20 | 2009-01-01 | Sunplus Technology Co Ltd | System and method for estimating noise in a video frame |
| US8938005B2 (en) * | 2007-11-05 | 2015-01-20 | Canon Kabushiki Kaisha | Image encoding apparatus, method of controlling the same, and computer program |
| US8208065B2 (en) * | 2008-07-30 | 2012-06-26 | Cinnafilm, Inc. | Method, apparatus, and computer software for digital video scan rate conversions with minimization of artifacts |
| CN101504769B (zh) * | 2009-03-23 | 2014-07-16 | 上海视涛电子科技有限公司 | 一种基于编码器框架的自适应性的噪声强度估计的方法 |
| US8279345B2 (en) * | 2009-07-21 | 2012-10-02 | Qualcomm Incorporated | System and method for random noise estimation in a sequence of images |
| US9215355B2 (en) * | 2011-09-30 | 2015-12-15 | Apple Inc. | Scene adaptive temporal filtering |
| US10200698B2 (en) * | 2016-08-09 | 2019-02-05 | Intel Corporation | Determining chroma quantization parameters for video coding |
| US10674045B2 (en) * | 2017-05-31 | 2020-06-02 | Google Llc | Mutual noise estimation for videos |
| CN110095193B (zh) * | 2019-05-14 | 2021-03-12 | 武汉高芯科技有限公司 | 一种红外热像仪噪声等效温差测试方法及系统 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0244001A2 (fr) * | 1986-04-19 | 1987-11-04 | Philips Patentverwaltung GmbH | Codeur hybride pour des signaux vidéo |
| EP0649262A1 (fr) * | 1993-10-13 | 1995-04-19 | RCA Thomson Licensing Corporation | Appareil de compression du signal vidéo utilisant une réduction de bruit |
| US5568196A (en) * | 1994-04-18 | 1996-10-22 | Kokusai Denshin Denwa Kabushiki Kaisha | Motion adaptive noise reduction filter and motion compensated interframe coding system using the same |
| EP0777388A2 (fr) * | 1995-12-08 | 1997-06-04 | Kabushiki Kaisha Toshiba | Codeur et décodeur vidéo avec réduction de bruit |
| US6005626A (en) * | 1997-01-09 | 1999-12-21 | Sun Microsystems, Inc. | Digital video signal encoder and encoding method |
Family Cites Families (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE3613343A1 (de) * | 1986-04-19 | 1987-10-22 | Philips Patentverwaltung | Hybrid-codierer |
| GB8829063D0 (en) * | 1988-12-13 | 1989-01-25 | British Telecomm | Predictive coding and decoding |
| US5151784A (en) * | 1991-04-30 | 1992-09-29 | At&T Bell Laboratories | Multiple frame motion estimation |
| JP3178026B2 (ja) * | 1991-08-23 | 2001-06-18 | ソニー株式会社 | ディジタル信号符号化装置及び復号化装置 |
| US5748231A (en) * | 1992-10-13 | 1998-05-05 | Samsung Electronics Co., Ltd. | Adaptive motion vector decision method and device for digital image stabilizer system |
| US5764307A (en) * | 1995-07-24 | 1998-06-09 | Motorola, Inc. | Method and apparatus for spatially adaptive filtering for video encoding |
| US6957350B1 (en) * | 1996-01-30 | 2005-10-18 | Dolby Laboratories Licensing Corporation | Encrypted and watermarked temporal and resolution layering in advanced television |
| US5923775A (en) * | 1996-04-04 | 1999-07-13 | Eastman Kodak Company | Apparatus and method for signal dependent noise estimation and reduction in digital images |
| EP0957367A1 (fr) * | 1998-04-14 | 1999-11-17 | THOMSON multimedia | Méthode d'estimation du niveau de bruit dans une séquence vidéo |
| JP4344964B2 (ja) * | 1999-06-01 | 2009-10-14 | ソニー株式会社 | 画像処理装置および画像処理方法 |
| US6668090B1 (en) * | 2000-05-26 | 2003-12-23 | Eastman Kodak Company | Producing a compressed digital image organized into layers corresponding to increasing visual quality levels and providing rate-control of such compressed digital image |
| US6847408B1 (en) * | 2000-07-27 | 2005-01-25 | Richard W. Webb | Method and apparatus for reducing noise in an image sequence |
-
2001
- 2001-08-21 FR FR0110977A patent/FR2828977B1/fr not_active Expired - Fee Related
-
2002
- 2002-08-06 US US10/487,197 patent/US7515638B2/en active Active
- 2002-08-06 JP JP2003524268A patent/JP2005518689A/ja active Pending
- 2002-08-06 CN CNB028163230A patent/CN1266943C/zh not_active Expired - Fee Related
- 2002-08-06 EP EP02796209A patent/EP1419658A1/fr not_active Ceased
- 2002-08-06 WO PCT/EP2002/008810 patent/WO2003019947A1/fr active Application Filing
- 2002-08-06 KR KR10-2004-7002526A patent/KR20040054676A/ko not_active Application Discontinuation
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0244001A2 (fr) * | 1986-04-19 | 1987-11-04 | Philips Patentverwaltung GmbH | Codeur hybride pour des signaux vidéo |
| EP0649262A1 (fr) * | 1993-10-13 | 1995-04-19 | RCA Thomson Licensing Corporation | Appareil de compression du signal vidéo utilisant une réduction de bruit |
| US6115071A (en) * | 1993-10-13 | 2000-09-05 | Thomson Licensing S.A. | Video signal compression apparatus using noise reduction |
| US5568196A (en) * | 1994-04-18 | 1996-10-22 | Kokusai Denshin Denwa Kabushiki Kaisha | Motion adaptive noise reduction filter and motion compensated interframe coding system using the same |
| EP0777388A2 (fr) * | 1995-12-08 | 1997-06-04 | Kabushiki Kaisha Toshiba | Codeur et décodeur vidéo avec réduction de bruit |
| US6005626A (en) * | 1997-01-09 | 1999-12-21 | Sun Microsystems, Inc. | Digital video signal encoder and encoding method |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20040054676A (ko) | 2004-06-25 |
| FR2828977B1 (fr) | 2003-12-05 |
| US7515638B2 (en) | 2009-04-07 |
| CN1266943C (zh) | 2006-07-26 |
| US20040179602A1 (en) | 2004-09-16 |
| EP1419658A1 (fr) | 2004-05-19 |
| CN1545812A (zh) | 2004-11-10 |
| WO2003019947A1 (fr) | 2003-03-06 |
| JP2005518689A (ja) | 2005-06-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8570389B2 (en) | Enhancing digital photography | |
| US8169486B2 (en) | Image acquisition method and apparatus | |
| US20080170124A1 (en) | Apparatus and method for blur detection, and apparatus and method for blur correction | |
| EP2136554A2 (fr) | Appareil, procédé et programme de traitement d'images | |
| FR2828977A1 (fr) | Dispositif et procede d'estimation du niveau de bruit, systeme de reduction de bruit et systeme de codage comprenant un tel dispositif | |
| KR20090102610A (ko) | 영상 스케일링 검출 방법 및 장치 | |
| CN102665034A (zh) | 一种针对摄像机采集视频的夜间效果去除方法 | |
| EP0418952B1 (fr) | Dispositif de codage d'informations bidimensionnelles et dispositif de décodage correspondant | |
| CN111340732B (zh) | 一种低照度视频图像增强方法及装置 | |
| US11677938B2 (en) | Method to reduce contour artifacts on recursive temporal filters | |
| CN107911599B (zh) | 一种红外图像全局自动对焦方法及装置 | |
| FR2860941A1 (fr) | Dispositif et procede d'estimation de bruit d'un signal video | |
| FR2790852A1 (fr) | Procede d'evaluation d'images codees, dispositif mettant en oeuvre le procede et utilisation du dispositif et procede | |
| CN111640077A (zh) | 一种简单高效的模糊文本图片清晰化处理方法 | |
| EP1297710B1 (fr) | Dispositif et procede de codage video avec filtrage recursif compense en mouvement | |
| KR102395305B1 (ko) | 저조도 영상 개선 방법 | |
| EP3540685B1 (fr) | Appareil de traitement d'images permettant de réduire les artéfacts d'escalier d'un signal d'image | |
| FR2860940A1 (fr) | Dispositif et procede de reduction de bruit d'un signal video | |
| CN116823662A (zh) | 一种融合原生特征的图像去噪去模糊方法 | |
| EP1223554A1 (fr) | Méthode de réduction de bruit | |
| KR102445008B1 (ko) | 이벤트 기반 영상 센싱 장치 및 방법 | |
| FR2817694A1 (fr) | Procede et dispositif de lissage spatial pour les zones sombres d'une image | |
| FR2820927A1 (fr) | Procede et dispositif de detection de fiabilite d'un champ de vecteurs mouvement | |
| Xu et al. | An image sharpening algorithm for high magnification image zooming | |
| FR2829345A1 (fr) | Dispositif et procede de codage d'images video par compensation de mouvement |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| TP | Transmission of property | ||
| ST | Notification of lapse |
Effective date: 20110502 |