EP3671706A1 - Procede d'ajustement des parametres colorimetriques d'un dispositif de visualisation - Google Patents

Procede d'ajustement des parametres colorimetriques d'un dispositif de visualisation Download PDF

Info

Publication number
EP3671706A1
EP3671706A1 EP19214880.7A EP19214880A EP3671706A1 EP 3671706 A1 EP3671706 A1 EP 3671706A1 EP 19214880 A EP19214880 A EP 19214880A EP 3671706 A1 EP3671706 A1 EP 3671706A1
Authority
EP
European Patent Office
Prior art keywords
triplet
triplets
calibration
display device
control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
EP19214880.7A
Other languages
German (de)
English (en)
Other versions
EP3671706B1 (fr
Inventor
Siegfried Rouzes
Sébastien Pelletier
Arnaud Petitdemange
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thales SA
Original Assignee
Thales SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thales SA filed Critical Thales SA
Publication of EP3671706A1 publication Critical patent/EP3671706A1/fr
Application granted granted Critical
Publication of EP3671706B1 publication Critical patent/EP3671706B1/fr
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/006Electronic inspection or testing of displays and display drivers, e.g. of LED or LCD displays
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0242Compensation of deficiencies in the appearance of colours
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0666Adjustment of display parameters for control of colour parameters, e.g. colour temperature
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0693Calibration of display systems
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/14Detecting light within display terminals, e.g. using a single or a plurality of photosensors
    • G09G2360/145Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light originating from the display screen
    • G09G2360/147Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light originating from the display screen the originated light output being determined for each pixel
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed

Definitions

  • the general technical field of the invention is that of display devices for applications requiring very high colorimetric and photometric performances.
  • the preferred field of the invention is that of aeronautical dashboards.
  • a dashboard In the aeronautical field, a dashboard has several display screens.
  • the colorimetry and luminance of the images displayed on these screens are subject to very specific requirements so that the crew members always have the same image quality. In particular, the continuity of the gradations between the different colors must be perfectly ensured. Furthermore, when a display screen is replaced, it is essential that this replacement be done while maintaining the same color and photometric requirements.
  • a colored pixel of a screen conventionally comprises a triplet of colored sub pixels, a first red sub-pixel, a second green sub-pixel and a third blue sub-pixel.
  • Each sub-pixel can take 255 values. Therefore, potentially, each pixel can have 255 3 levels of color or luminance, or just over 16 million levels. It is of course impossible to make an individualized correction for each level which would require a colossal amount of preliminary measurements and very large capacities for storing the necessary corrections on each on-board display device.
  • each color is defined by a triplet (X, Y, Z) or a triplet (X Y Z).
  • the triplet (u ' w , v' w , Y w ) corresponds to the color coordinates of white.
  • MacAdam ellipse EMA
  • EMA MacAdam ellipse
  • four MacAdam ellipses are represented on the figure 1 . These ellipses are enlarged 10 times in this figure.
  • the method according to the invention is based on this property.
  • the color correction does not have to be perfect. It is enough that this correction is sufficiently precise to enter the criteria of MacAdam.
  • the second plurality of calibration control triplets comprises a group of control triplets corresponding to specific colors, said group being taken into account, in step 5, in the calculation of the corrections applied to the control triplets of the measurement device. visualization.
  • the corrections are inversely proportional to the distances separating the triplet emitted from the specific colors, the distances being measured in the first color space.
  • the first color space is the space (R, G, B) and that the second color space is the CIE 1976 space.
  • the first plurality is equal to 255 3 and that the second plurality is between 10,000 and 15,000.
  • the method for adjusting the photometric and colorimetric parameters applies to a display device composed of bright colored dots.
  • Each point consists of a triplet of colored pixels.
  • Each point can take a number N of triplets of command values.
  • this number N is equal to 255 3 , that is to say a little more than 16.5 million values.
  • the triplets are referenced in a first color space.
  • this space is space (R, G, B).
  • Each triplet of control values corresponds to a triplet of emission color values, said triplets of color values being referenced in a second color space. This space is the color space (u ', v', L) as defined above.
  • the method requires a reference display device, a measurement and calibration bench comprising colorimetric and photometric measurement means, means for memorizing the collected data and means for processing said data in order to extract the calibration corrections to be applied to it. some specific color points.
  • the display device must also include means for storing the calibration corrections and calculation means for calculating the correction to be applied to any color triplet received as a function of the calibration corrections.
  • the method according to the invention comprises several steps detailed below.
  • the first three steps are implemented on the optical bench. They consist in determining the corrections to be made to a certain number of colorimetric triplets for calibration.
  • the following steps are implemented in the display device itself when it is operating. They consist in applying, in real time, from the previous correction data, the corrections to be applied to any color triplet emitted.
  • the first step consists in measuring, for the reference display device, for a number I of calibration control triplets, triplets of emission colorimetric values called reference triplets, the second plurality being three orders of magnitude less than the first plurality.
  • the number I is equal to 12800.
  • the figure 2 illustrates this step.
  • the triplets of points (r i , g i , b i ) of calibration commands are referenced in the color space (R, G, B).
  • the parameter i varies between 1 and I.
  • these triplets are represented by circles on this figure 2 .
  • the calibration control points are located on a three-dimensional grid, part of which is represented by dotted lines on the figure 2 and are regularly spaced on this grid.
  • Each triplet of calibration control points (r i , g i , b i ) therefore associates a triplet of emission colorimetric values called reference triplet whose coordinates in the color space (u ', v', L) are (u i *, v i *, L i *) TH .
  • the second step consists in measuring, for the display device, for the same second plurality of calibration control triplets (r i , g i , b i ), triplets of emission colorimetric values known as calibration triplets which are noted (u i *, v i *, L i *) in the color space (u ', v', L).
  • This third step 3 comprises the following intermediate steps:
  • a triplet subfamily close to the triplet ( r i , g i , b i ) .
  • this subfamily corresponds to the vertices of the cube including the triplet ( r i , g i , b i ).
  • J i the triplets belonging to this family are therefore ⁇ ( r j , g j , b j ) ⁇ j ⁇ J i .
  • Each corresponding emission triple is noted u j * v j * L j * and each corresponding reference treble is noted u j * v j * L j * TH .
  • a third step of this third step we deduce, for each j ⁇ J i , the deviation vector ( dr j , dg j , db j ).
  • This derivative is equal to the matrix M which minimizes the following form: ⁇ j ⁇ J i ⁇ M dr j dg j db j - u j * v j * L j * - u j * v j * L j * TH ⁇ 2
  • a fourth step of this third step the inverse of the derivative of the application noted is determined.
  • This last stage of the third stage is illustrated on the figure 3 which represents a calibration triplet ( r i , g i , b i ). with the associated corrections ( dr i , dg i , db i ), the corrected triplet being noted ( r i , g i , b i ) cor .
  • the second and third steps are also carried out for critical colors.
  • the fourth step of the method consists, for any control triplet (r, g, b) of the display device said triplet emitted, to determine a subset of calibration triplets closest to said triplet emitted in the first color space.
  • this subset corresponds to the vertices of the cube including the triplet (r, g, b).
  • the triplets belonging to this family are therefore ⁇ ( r k , g k , b k ) ⁇ k ⁇ J k . When the command triplet is close to one or more critical colors, these are also determined.
  • This step is illustrated on the figure 4 which represents a triplet of points (r, g, b) with all the triplets of points to be taken into account for the establishment of the corrections.
  • eight calibration points numbered from T1 to T8 are taken into account as well as two critical colors C1 and C2.
  • the derived matrix ⁇ r g b ⁇ r g b which is used as a basis for the calculation of these corrections is obtained by linear interpolation of the values of the matrices ⁇ r k g k b k ⁇ , extended interpolation to values ( r k , g k , b k ) close to the triplet (r, g, b).
  • the corrective value (dr2, dg 2, db 2) due to the critical colors is calculated by weighted average of the sum of the influences of the critical colors sufficiently close, the weighting being inversely proportional to the distance to each of these critical colors.
  • the final function ( dr , dg , db ) is calculated by weighted average over the corrections ( dr 1, dg 1, db 1) and ( dr 2, dg 2, db 2) knowing that the weighting remains proportional to the inverse of the distance to the nearest critical color.
  • the triplet (r, g, b) corresponds exactly to a critical color
  • the final corrective value is exactly that of the critical color in question.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Spectrometry And Color Measurement (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

Le domaine technique de l'invention est celui des procédés d'ajustement des paramètres photométriques et colorimétriques d'un dispositif de visualisation composé de points colorés lumineux. Le procédé selon l'invention permet d'étalonner le dispositif de visualisation en fonction d'un dispositif de visualisation de référence. Le procédé consiste, à partir d'un nombre de points de mesures colorimétriques limité, à établir les corrections à apporter aux valeurs de commande de chaque point coloré de façon que l'émission lumineuse dudit point corresponde à celle du dispositif de visualisation de référence. Cette application prend en compte les points de mesure les plus proches du point coloré. La tolérance sur les corrections est suffisamment faible pour que les différences colorimétriques entre l'émission lumineuse réelle du dispositif de visualisation et l'émission de référence ne soient pas perceptibles par un observateur humain.

Description

  • Le domaine technique général de l'invention est celui des dispositifs de visualisation pour des applications nécessitant de très hautes performances colorimétriques et photométriques. Le domaine privilégié de l'invention est celui des planches de bord aéronautiques.
  • Dans le domaine aéronautique, une planche de bord comporte plusieurs écrans de visualisation. La colorimétrie et la luminance des images affichées sur ces écrans font l'objet d'exigences très précises afin que les membres de l'équipage aient toujours la même qualité d'image. En particulier, la continuité des dégradés entre les différentes couleurs doit être parfaitement assurée. Par ailleurs, lorsqu'un écran de visualisation est remplacé, il est essentiel que ce remplacement se fasse en conservant les mêmes exigences colorimétriques et photométriques.
  • Ces performances colorimétriques vont au-delà des standards appliqués par les fournisseurs d'écrans de visualisation, tout particulièrement lorsque l'on change de modèle d'écran de visualisation ou de fournisseurs. Une correction est donc nécessaire pour conserver les performances photométriques et colorimétriques.
  • Un pixel coloré d'un écran comporte classiquement un triplé de sous pixels colorés, un premier sous-pixel rouge, un second sous-pixel vert et un troisième sous-pixel bleu. Chaque sous-pixel peut prendre 255 valeurs. Par conséquent, potentiellement, chaque pixel peut avoir 2553 niveaux de couleur ou de luminance, soit un peu plus de 16 millions de niveaux. Il est bien entendu impossible de faire une correction individualisée pour chaque niveau qui nécessiterait une quantité colossale de mesures préliminaires et de très importantes capacités de stockage des corrections nécessaires sur chaque dispositif de visualisation embarquée.
  • Par ailleurs, il est impossible d'établir un modèle mathématique qui, à partir d'un nombre limité de mesures de corrections permettrait de calculer toutes les mesures de correction appliquées à chaque sous-pixel. En effet, la sensibilité de l'œil humain aux variations de couleur ou de luminance varie très fortement en fonction de cette couleur ou de ce niveau et n'obéit pas à des règles simples faciles à mettre en œuvre, une fois quelques points de référence connus.
  • On sait qu'une couleur peut être décrite dans un espace bidimensionnel dit CIE 1976, cet espace étant issu de l'espace CIE 1931. Dans ce premier espace, chaque couleur est définie par un triplet (X, Y, Z) ou un triplet (x, y, z). Dans l'espace CIE 1976, chaque couleur est définie par deux coordonnées (u', v') définie de la façon suivante : { = 4 X X + 15 Y + 3 Z = 4 x 2 x + 12 y + 3 = 9 Y X + 15 Y + 3 Z = 9 y 2 x + 12 y + 3
    Figure imgb0001
  • Cet espace est représenté sur la figure 1. La ligne SL courbe en traits gras représente le spectrum locus et la ligne droite LP qui ferme cette courbe représente la ligne des pourpres. Le spectrum locus varie environ de 420 nm à 680 nm. Dans cet espace, une différence de couleur Δ E UV *
    Figure imgb0002
    entre deux teintes voisines vaut : Δ E U V * = Δ L * 2 + Δ u * 2 + Δ v * 2
    Figure imgb0003
    avec { L * = { 116 Y / Y w 16 2 si L * 8 29 3 3 Y / Y w si L * < 8 u * = 13 L * u w ʹ v * = 13 L * v w ʹ
    Figure imgb0004
  • Le triplet (u'w, v'w, Yw) correspond aux coordonnées colorimétriques du blanc.
  • Il a été démontré qu'autour de chaque couleur, il existe une zone appelée ellipse de MacAdam ou EMA à l'intérieur de laquelle les différences entre couleurs ne sont pas perceptibles par l'œil humain. A titre d'exemple, quatre ellipses de MacAdam sont représentées sur la figure 1. Ces ellipses sont agrandies 10 fois sur cette figure.
  • Le procédé selon l'invention repose sur cette propriété. Il n'est pas nécessaire que la correction des couleurs soit parfaite. Il suffit que cette correction soit suffisamment précise pour entrer dans les critères de MacAdam.
  • Plus précisément, le procédé selon l'invention est un procédé d'ajustement des paramètres photométriques et colorimétriques d'un dispositif de visualisation composé de points colorés lumineux, chaque point étant constitué d'un triplé de pixels colorés, chaque point pouvant prendre une première pluralité de triplets de valeurs de commande, lesdits triplets étant référencés dans un premier espace colorimétrique, à chaque triplet de valeurs de commande correspond un triplé de valeurs colorimétriques d'émission, lesdits triplets de valeurs colorimétriques étant référencés dans un second espace colorimétrique, ledit dispositif de visualisation étant étalonné par rapport à un dispositif de visualisation de référence, caractérisé en ce que le procédé comporte les étapes suivantes :
    • Etape 1 : Mesure, pour le dispositif de visualisation de référence, pour une seconde pluralité de triplets de commande de calibration, des triplets de valeurs colorimétriques d'émission dits triplet de référence, la seconde pluralité étant de trois ordres de grandeur inférieure à la première pluralité ;
    • Etape 2 : Mesure, pour le dispositif de visualisation, pour la même seconde pluralité de triplets de commande de calibration, des triplets de valeurs colorimétriques d'émission dits triplets de calibration ;
    • Etape 3 : Pour chaque triplet de calibration, calcul des corrections à appliquer au triplet de commande de calibration correspondant de façon que le triplet de valeurs colorimétriques obtenu ait les mêmes valeurs que le triplet d'émission de référence correspondant ;
    • Etape 4 : A tout triplet de commande du dispositif de visualisation dit triplet émis, détermination d'un sous-ensemble de triplets de calibration les plus proches dudit triplet émis dans le premier espace colorimétrique ;
    • Etape 5 : calcul des corrections à appliquer au triplet émis en fonction des corrections appliquées au sous-ensemble des triplets de calibration déterminé à l'étape 4.
  • Avantageusement, la seconde pluralité de triplets de commande de calibration comporte un groupe de triplets de commande correspondant à des couleurs spécifiques, ledit groupe étant pris en compte, à l'étape 5, dans le calcul des corrections appliquées aux triplets de commande du dispositif de visualisation.
  • Avantageusement, les corrections sont inversement proportionnelles aux distances séparant le triplet émis des couleurs spécifiques, les distances étant mesurées dans le premier espace colorimétrique.
  • Avantageusement, l'étape 3 comporte les sous-étapes suivantes :
    • Etape 3.1 : Détermination d'une application qui associe à chaque triplet de commande de calibration le triplet d'émission correspondant ;
    • Etape 3.2 : Détermination d'un groupement de triplets de commande de calibration les plus proches dudit triplet de commande de calibration dans le premier espace colorimétrique ;
    • Etape 3.3 : Détermination, pour chaque triplet de commande de calibration, de la dérivée de l'application en fonction du triplet de calibration et du triplet de référence correspondant ;
    • Etape 3.4 : Détermination de l'inverse de la dérivée de l'application, pour le triplet de commande de calibration considéré, en fonction de la différence des valeurs entre les triplets de calibration et les triplets de référence correspondant aux triplets de commande de calibration dudit groupement, l'inverse de cette dérivée étant représentative de la correction à apporter au triplet de commande de calibration.
  • Avantageusement, le premier espace colorimétrique est l'espace (R, V, B) et que le second espace colorimétrique est l'espace CIE 1976.
  • Avantageusement, la première pluralité est égale à 2553 et que la seconde pluralité est comprise entre 10000 et 15000.
  • Les dessins annexés illustrent l'invention :
    • [Fig.1] représente l'espace colorimétrique CIE 1976 ;
    • [Fig.2] représente l'espace de mesure colorimétrique tridimensionnel (r, g, b) utilisé dans les étapes 1 et 2 du procédé selon l'invention ;
    • [Fig.3] représente les corrections à apporter à un triplé de calibration telles que définies dans l'étape 3 du procédé selon l'invention ;
    • [Fig.4] représente les corrections à apporter à un triplé quelconque telles que définies dans les étapes 4 et 5 du procédé selon l'invention ;
  • Le procédé d'ajustement des paramètres photométriques et colorimétriques s'applique à un dispositif de visualisation composé de points colorés lumineux. Chaque point est constitué d'un triplé de pixels colorés. Chaque point peut prendre un nombre N de triplets de valeurs de commande. Généralement, chaque pixel pouvant prendre 255 valeurs différentes, ce nombre N vaut 2553, soit un peu plus de 16.5 millions de valeurs. Les triplets sont référencés dans un premier espace colorimétrique. Généralement, cet espace est l'espace (R, G, B). A chaque triplet de valeurs de commande correspond un triplé de valeurs colorimétriques d'émission, lesdits triplets de valeurs colorimétriques étant référencés dans un second espace colorimétrique. Cet espace est l'espace colorimétrique (u', v', L) tel que défini précédemment.
  • Le procédé nécessite un dispositif de visualisation de référence, un banc de mesure et de calibration comportant des moyens de mesure colorimétriques et photométriques, des moyens de mémorisation des données recueillis et des moyens de traitement desdites données pour en extraire les corrections de calibration à appliquer à certains points colorimétriques particuliers. Le dispositif de visualisation doit également comporter des moyens de mémorisation des corrections de calibration et des moyens de calcul permettant de calculer la correction à appliquer à tout triplé colorimétrique reçu en fonction des corrections de calibration. Ces différents moyens techniques sont connus de l'homme du métier et ne posent aucun problème de réalisation particulier.
  • Le procédé selon l'invention comporte plusieurs étapes détaillées ci-dessous. Les trois premières étapes sont mises en œuvre sur le banc de mesure optique. Elles consistent à déterminer les corrections à apporter à un certain nombre de triplés colorimétriques de calibration.
  • Les étapes suivantes sont mises en œuvre dans le dispositif de visualisation lui-même lorsqu'il fonctionne. Elles consistent à appliquer, en temps réel, à partir des données de correction précédentes, les corrections à appliquer à tout triplé colorimétrique émis.
  • La première étape consiste à mesurer, pour le dispositif de visualisation de référence, pour un nombre I de triplets de commande de calibration, des triplets de valeurs colorimétriques d'émission dits triplet de référence, la seconde pluralité étant de trois ordres de grandeur inférieure à la première pluralité. A titre d'exemple, le nombre I vaut 12800. La figure 2 illustre cette étape. Les triplets de points (ri, gi, bi) de commande de calibration sont référencés dans l'espace colorimétrique (R, G, B). le paramètre i varie entre 1 et I. ces triplés sont représentés par des cercles sur cette figure 2. Les points de commande de calibration sont situés sur une grille tridimensionnelle dont une partie est représentée en pointillés sur la figure 2 et sont régulièrement espacés sur cette grille. A chaque triplet de points de commande de calibration (ri, gi, bi), on associe donc un triplé de valeurs colorimétriques d'émission dit triplet de référence dont les coordonnées dans l'espace colorimétrique (u', v', L) sont (ui*, vi*, Li*)TH.
  • Il existe certains points colorimétriques (rj, gj, bj) appelés couleurs critiques dont l'émission associée doit correspondre à une colorimétrie parfaitement définie. Dans le domaine aéronautique, ces couleurs critiques peuvent correspondre, par exemple, à des alarmes. Par nature, ces points critiques ne correspondent pas nécessairement aux points de mesure de la grille tridimensionnelle. Un de ces points (rj, gj, bj) est représenté par un double cercle concentrique sur la figure 2.
  • La seconde étape consiste à mesurer, pour le dispositif de visualisation, pour la même seconde pluralité de triplets de commande de calibration (ri, gi, bi), des triplets de valeurs colorimétriques d'émission dits triplets de calibration qui sont notés (ui*, vi*, Li*) dans l'espace colorimétrique (u', v', L).
  • Dans une troisième étape, on calcule les corrections à appliquer à chaque triplet de commande de calibration (ri, gi, bi) de façon que le triplet de valeurs colorimétriques obtenu ait les mêmes valeurs que le triplet d'émission de référence correspondant. Cette troisième étape 3 comporte les étapes intermédiaires suivantes :
  • Dans un premier temps de cette troisième étape, on détermine une application Ψ telle que : Ψ r i g i b i = u i * v i * L i *
    Figure imgb0005
    qui associe à chaque triplet de commande de calibration le triplet d'émission correspondant ;
  • Dans un second temps de cette troisième étape, on détermine, pour chaque triplé (ri , gi , bi ), i appartenant à I, une sous-famille de triplés proche du triplé (ri , gi , bi ). A titre d'exemple, cette sous-famille correspond aux sommets du cube englobant le triplé (ri , gi , bi ). On note cette famille Ji. Les triplés appartenant à cette famille sont donc {(rj ,gj ,bj )} jJi . Chaque triplé d'émission correspondant est noté u j * v j * L j *
    Figure imgb0006
    et chaque triplé de référence correspondant est noté u j * v j * L j * TH .
    Figure imgb0007
  • Dans un troisième temps de cette troisième étape, on déduit, pour chaque jJi , le vecteur d'écart (drj , dgj ,dbj ). Ce vecteur est égal à : dr j dg j db j = r i g i b i r j g j b j .
    Figure imgb0008
    On en déduire la matrice dérivée Ψ r g b ʹ r i g i b i
    Figure imgb0009
    de l'application Ψ(ri ,gi ,bi ) au point (ri ,gi ,bi ). Cette dérivée est égale à la matrice M qui minimise la forme suivante : j J i M dr j dg j db j u j * v j * L j * u j * v j * L j * TH 2
    Figure imgb0010
  • Dans un quatrième temps de cette troisième étape, on détermine l'inverse de la dérivée de l'application notée Ψ r g b ʹ 1
    Figure imgb0011
    pour le triplet de commande de calibration considéré (ri , gi ,bi ), en fonction de la différence des valeurs entre les triplets de calibration et les triplets de référence correspondant aux triplets de commande de calibration de la, l'inverse de sous-famille, cette dérivée étant représentative de la correction (dri , dbi , dgi ) apporter au triplet de commande de calibration. On a la relation : dr i dg i db i = Ψ r g b ʹ 1 u i * v i * L i * u i * v i * L i * TH
    Figure imgb0012
  • Ce dernier temps de la troisième étape est illustré sur la figure 3 qui représente un triplé de calibration (ri ,gi ,bi ). avec les corrections associées (dri , dgi , dbi ), le triplé corrigé étant noté (ri ,gi ,bi ) cor .
  • La seconde et la troisième étape sont également réalisées pour les couleurs critiques.
  • Ces corrections étant connues pour l'ensemble des triplés de commande de calibration, il est alors nécessaire de déterminer les corrections à apporter à n'importe quel triplé de commande (r, g, b) appliqué au dispositif de visualisation. C'est l'objet des quatrième et cinquième étapes du procédé. Ces étapes sont mises en œuvre en temps réel dans le dispositif de visualisation.
  • La quatrième étape du procédé consiste, pour tout triplet de commande (r, g, b) du dispositif de visualisation dit triplet émis, à déterminer un sous-ensemble de triplets de calibration les plus proches dudit triplet émis dans le premier espace colorimétrique. A titre d'exemple, ce sous-ensemble correspond aux sommets du cube englobant le triplé (r, g, b). On note ce sous-ensemble Jk. Les triplés appartenant à cette famille sont donc {(rk ,gk ,bk )} kJk . Lorsque le triplet de commande est proche d'une ou de plusieurs couleurs critiques, celles-ci sont également déterminées. Cette étape est illustrée sur la figure 4 qui représente un triplé de points (r, g, b) avec l'ensemble des triplés de points à prendre en compte pour l'établissement des corrections. Dans cet exemple, huit points de calibrations numérotés de T1 à T8 sont pris en compte ainsi que deux couleurs critiques C1 et C2.
  • La cinquième étape consiste à calculer les corrections (dr, dg, db) à appliquer au triplet émis. Ces corrections sont fonction :
    • des corrections (dr1, dg1, db1) appliquées au sous-ensemble des triplets de calibration déterminé à l'étape précédente et,
    • lorsqu'elles sont présentes, des corrections (dr2, dg2, db2) issues des couleurs critiques proches.
  • Concernant les corrections (dr1, dg1, db1) issues des triplés de calibration, la matrice dérivée Ψ r g b ʹ r g b
    Figure imgb0013
    qui sert de base au calcul de ces corrections est obtenue par interpolation linéaire des valeurs des matrices Ψ r k g k b k ʹ ,
    Figure imgb0014
    interpolation étendue aux valeurs (rk , gk , bk ) proches du triplet (r, g, b).
  • La valeur corrective (dr2, dg2, db2) due aux couleurs critiques est calculée par moyenne pondérée de la somme des influences des couleurs critiques suffisamment proches, la pondération étant inversement proportionnelle à la distance à chacune de ces couleurs critiques.
  • La fonction finale (dr, dg, db) est calculée par moyenne pondérée sur les corrections (dr1, dg1, db1) et (dr2, dg2, db2) sachant que la pondération reste proportionnelle à l'inverse de la distance à la couleur critique la plus proche. Ainsi, si le triplet (r, g, b) correspond exactement à une couleur critique, la valeur corrective finale est exactement celle de la couleur critique en question.

Claims (6)

  1. Procédé d'ajustement des paramètres photométriques et colorimétriques d'un dispositif de visualisation composé de points colorés lumineux, chaque point étant constitué d'un triplé de pixels colorés (r, g, b), chaque point pouvant prendre une première pluralité de triplets de valeurs de commande, lesdits triplets étant référencés dans un premier espace colorimétrique (R, G, B), à chaque triplet de valeurs de commande correspond un triplé de valeurs colorimétriques d'émission (u', v', L), lesdits triplets de valeurs colorimétriques étant référencés dans un second espace colorimétrique, ledit dispositif de visualisation étant étalonné par rapport à un dispositif de visualisation de référence, caractérisé en ce que le procédé comporte les étapes suivantes :
    - Etape 1 : Mesure, pour le dispositif de visualisation de référence, pour une seconde pluralité de triplets de commande de calibration (ri, gi, bi), des triplets de valeurs colorimétriques d'émission dits triplet de référence (ui*, vi*, Li*)TH, la seconde pluralité étant de trois ordres de grandeur inférieure à la première pluralité, comprise entre 10000 et 15000, de façon que les corrections appliquées à tout triplet de commande du dispositif de visualisation dit triplet émis (r, g, b) soient suffisantes pour entrer dans les critères de variation chromatique tolérable de MacAdam ;
    - Etape 2 : Mesure, pour le dispositif de visualisation, pour la même seconde pluralité de triplets de commande de calibration, des triplets de valeurs colorimétriques d'émission dits triplets de calibration (ui*, vi*, Li*) ;
    - Etape 3 : Pour chaque triplet de calibration, calcul des corrections (dri, dgi, dbi), à appliquer au triplet de commande de calibration correspondant de façon que le triplet de valeurs colorimétriques obtenu ait les mêmes valeurs que le triplet d'émission de référence correspondant ;
    - Etape 4 : A tout triplet de commande du dispositif de visualisation dit triplet émis (r, g, b), détermination d'un sous-ensemble de triplets de calibration les plus proches dudit triplet émis dans le premier espace colorimétrique ;
    - Etape 5 : calcul des corrections (dr, dg, db) à appliquer au triplet émis en fonction des corrections appliquées au sous-ensemble des triplets de calibration déterminé à l'étape 4.
  2. Procédé d'ajustement des paramètres photométriques et colorimétriques d'un dispositif de visualisation selon la revendication 1, caractérisé en ce que la seconde pluralité de triplets de commande de calibration comporte un groupe de triplets de commande correspondant à des couleurs spécifiques, ledit groupe étant pris en compte, à l'étape 5, dans le calcul des corrections appliquées aux triplets de commande du dispositif de visualisation.
  3. Procédé d'ajustement des paramètres photométriques et colorimétriques d'un dispositif de visualisation selon la revendication 2, caractérisé en ce que les corrections sont inversement proportionnelles aux distances séparant le triplet émis des couleurs spécifiques, les distances étant mesurées dans le premier espace colorimétrique.
  4. Procédé d'ajustement des paramètres photométriques et colorimétriques d'un dispositif de visualisation selon l'une des revendications précédentes, caractérisé en ce que l'étape 3 comporte les sous-étapes suivantes :
    - Etape 3.1 : Détermination d'une application (Ψ) qui associe à chaque triplet de commande de calibration le triplet d'émission correspondant ;
    - Etape 3.2 : Détermination d'un groupement de triplets de commande de calibration les plus proches dudit triplet de commande de calibration dans le premier espace colorimétrique ;
    - Etape 3.3 : Détermination, pour chaque triplet de commande de calibration, de la dérivée (Ψ') de l'application en fonction du triplet de calibration et du triplet de référence correspondant ;
    - Etape 3.4 : Détermination de l'inverse (Ψ'-1) de la dérivée de l'application, pour le triplet de commande de calibration considéré, en fonction de la différence des valeurs entre les triplets de calibration et les triplets de référence correspondant aux triplets de commande de calibration dudit groupement, l'inverse de cette dérivée étant représentative de la correction à apporter au triplet de commande de calibration.
  5. Procédé d'ajustement des paramètres photométriques et colorimétriques d'un dispositif de visualisation selon l'une des revendications précédentes, caractérisé en ce que le premier espace colorimétrique est l'espace (R, V, B) et que le second espace colorimétrique est l'espace CIE 1976.
  6. Procédé d'ajustement des paramètres photométriques et colorimétriques d'un dispositif de visualisation selon l'une des revendications précédentes, caractérisé en ce que la première pluralité est égale à 2553. 1
EP19214880.7A 2018-12-18 2019-12-10 Procede d'ajustement des parametres colorimetriques d'un dispositif de visualisation Active EP3671706B1 (fr)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
FR1872959A FR3090176B1 (fr) 2018-12-18 2018-12-18 Procédé d’ajustement des paramètres colorimétriques d’un dispositif de visualisation

Publications (2)

Publication Number Publication Date
EP3671706A1 true EP3671706A1 (fr) 2020-06-24
EP3671706B1 EP3671706B1 (fr) 2022-03-09

Family

ID=66690506

Family Applications (1)

Application Number Title Priority Date Filing Date
EP19214880.7A Active EP3671706B1 (fr) 2018-12-18 2019-12-10 Procede d'ajustement des parametres colorimetriques d'un dispositif de visualisation

Country Status (2)

Country Link
EP (1) EP3671706B1 (fr)
FR (1) FR3090176B1 (fr)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140043369A1 (en) * 2012-08-08 2014-02-13 Marc ALBRECHT Displays and Display Pixel Adaptation
US20150213771A1 (en) * 2014-01-30 2015-07-30 Sharp Kabushiki Kaisha Display calibration system and storage medium
US20170221403A1 (en) * 2015-08-19 2017-08-03 Boe Technology Group Co., Ltd. Apparatus and method for adjusting display parameters and display apparatus
US20180114475A1 (en) * 2016-10-24 2018-04-26 Samsung Electronics Co., Ltd. Display apparatus and calibration method thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140043369A1 (en) * 2012-08-08 2014-02-13 Marc ALBRECHT Displays and Display Pixel Adaptation
US20150213771A1 (en) * 2014-01-30 2015-07-30 Sharp Kabushiki Kaisha Display calibration system and storage medium
US20170221403A1 (en) * 2015-08-19 2017-08-03 Boe Technology Group Co., Ltd. Apparatus and method for adjusting display parameters and display apparatus
US20180114475A1 (en) * 2016-10-24 2018-04-26 Samsung Electronics Co., Ltd. Display apparatus and calibration method thereof

Also Published As

Publication number Publication date
FR3090176B1 (fr) 2021-07-30
FR3090176A1 (fr) 2020-06-19
EP3671706B1 (fr) 2022-03-09

Similar Documents

Publication Publication Date Title
CA1298916C (fr) Procede de representation de l&#39;image en perspective d&#39;un terrain et systeme pour sa mise en oeuvre
US9805670B2 (en) Driving method and driving device of liquid crystal panel
US9646370B2 (en) Automatic detection method for defects of a display panel
US7865031B2 (en) Method and system for automatic correction of chromatic aberration
US20060119870A1 (en) Color gamut mapping
KR20100079532A (ko) 색수차 검출 및 보정 방법, 이를 이용한 영상 처리 장치 및그 방법
WO1997044642A2 (fr) Procede et dispositif de mesure de la couleur
KR20090068364A (ko) 칼러 맵핑 방법
US20160379577A1 (en) Display panel inspection apparatus
CN103049915B (zh) 评价标准参数的建立方法及显示屏图像质量的评价方法
JPWO2018034166A1 (ja) 信号処理装置および信号処理方法、並びにプログラム
CN103051922B (zh) 评价标准参数的建立方法及显示屏图像质量的评价方法
US20170263171A1 (en) Offset method and equipment of rgbw panel subpixel
EP3671706B1 (fr) Procede d&#39;ajustement des parametres colorimetriques d&#39;un dispositif de visualisation
CA2455764A1 (fr) Dispositif de correction electronique des distorsions optiques d&#39;une visualisation collimatee obtenue a partir d&#39;un afficheur matriciel
EP3723363A1 (fr) Dispositif de traitement d&#39;informations, système de traitement d&#39;informations et procédé de traitement d&#39;informations
EP3847638B1 (fr) Procede de mesure d&#39;un espace de couleur propre a un individu et procede de correction d&#39;images numeriques en fonction de l&#39;espace de couleur propre a l&#39;individu
CN119494805A (zh) 图像冻结检出装置以及图像冻结检出方法
EP0757498A1 (fr) Procédé pour correction des défauts de chromaticité et de luminance d&#39;un écran matriciel et écran matriciel et circuit mettant en oeuvre un tel procédé
EP1789949A1 (fr) Procédé et système d&#39;affichage d&#39;une image numérique en couleurs vraies
EP1528792A2 (fr) Reconstruction de voie de chrominance d&#39;un dispositif d&#39;affichage
EP3575746A1 (fr) Dispositif et procédé d&#39;insensibilisation à des pannes d&#39;un système d&#39;affichage
EP1405038B1 (fr) Procede de synthese d&#39;une image altimetrique
EP4034863B1 (fr) Système et procédé de contrôle de la couleur d&#39;un article en déplacement
EP4622250A1 (fr) Dispositif, système et procédé de mélange de niveau de noir dans des projecteurs

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION HAS BEEN PUBLISHED

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20201208

RBV Designated contracting states (corrected)

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: GRANT OF PATENT IS INTENDED

RIC1 Information provided on ipc code assigned before grant

Ipc: G09G 5/02 20060101ALI20210903BHEP

Ipc: G09G 3/00 20060101AFI20210903BHEP

INTG Intention to grant announced

Effective date: 20210928

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE PATENT HAS BEEN GRANTED

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

REG Reference to a national code

Ref country code: CH

Ref legal event code: EP

Ref country code: AT

Ref legal event code: REF

Ref document number: 1474806

Country of ref document: AT

Kind code of ref document: T

Effective date: 20220315

REG Reference to a national code

Ref country code: DE

Ref legal event code: R096

Ref document number: 602019012321

Country of ref document: DE

REG Reference to a national code

Ref country code: IE

Ref legal event code: FG4D

Free format text: LANGUAGE OF EP DOCUMENT: FRENCH

REG Reference to a national code

Ref country code: LT

Ref legal event code: MG9D

REG Reference to a national code

Ref country code: NL

Ref legal event code: MP

Effective date: 20220309

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

Ref country code: RS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

Ref country code: NO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220609

Ref country code: LT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

Ref country code: HR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

Ref country code: BG

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220609

REG Reference to a national code

Ref country code: AT

Ref legal event code: MK05

Ref document number: 1474806

Country of ref document: AT

Kind code of ref document: T

Effective date: 20220309

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LV

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

Ref country code: GR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220610

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: NL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SM

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

Ref country code: RO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

Ref country code: PT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220711

Ref country code: ES

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

Ref country code: EE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

Ref country code: CZ

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

Ref country code: AT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: PL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220709

Ref country code: AL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

REG Reference to a national code

Ref country code: DE

Ref legal event code: R097

Ref document number: 602019012321

Country of ref document: DE

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

26N No opposition filed

Effective date: 20221212

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

P01 Opt-out of the competence of the unified patent court (upc) registered

Effective date: 20230427

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

REG Reference to a national code

Ref country code: CH

Ref legal event code: PL

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20221210

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LI

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20221231

Ref country code: IE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20221210

Ref country code: CH

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20221231

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: HU

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT; INVALID AB INITIO

Effective date: 20191210

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CY

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MC

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: TR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

Ref country code: MC

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

GBPC Gb: european patent ceased through non-payment of renewal fee

Effective date: 20231210

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20220309

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: GB

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20231210

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: GB

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20231210

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20251119

Year of fee payment: 7

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20251124

Year of fee payment: 7

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: BE

Payment date: 20251117

Year of fee payment: 7