CN114067740A - 屏幕校准方法及装置、电子设备及存储介质 - Google Patents
屏幕校准方法及装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN114067740A CN114067740A CN202010763483.6A CN202010763483A CN114067740A CN 114067740 A CN114067740 A CN 114067740A CN 202010763483 A CN202010763483 A CN 202010763483A CN 114067740 A CN114067740 A CN 114067740A
- Authority
- CN
- China
- Prior art keywords
- color gamut
- matrix
- pixel value
- preset
- calibrated
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 43
- 238000003860 storage Methods 0.000 title claims abstract description 11
- 238000013507 mapping Methods 0.000 claims abstract description 63
- 238000012360 testing method Methods 0.000 claims abstract description 41
- 239000011159 matrix material Substances 0.000 claims description 157
- 238000006243 chemical reaction Methods 0.000 claims description 64
- 230000009466 transformation Effects 0.000 claims description 28
- 230000001131 transforming effect Effects 0.000 claims description 7
- 238000004364 calculation method Methods 0.000 abstract description 4
- 238000004891 communication Methods 0.000 description 10
- 238000012545 processing Methods 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 201000005569 Gout Diseases 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 241000287196 Asthenes Species 0.000 description 1
- 101100160804 Bacillus subtilis (strain 168) yxaD gene Proteins 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 102220171488 rs760746448 Human genes 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
- G09G3/22—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
- G09G3/30—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels
- G09G3/32—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED]
- G09G3/3208—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED] organic, e.g. using organic light-emitting diodes [OLED]
- G09G3/3225—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED] organic, e.g. using organic light-emitting diodes [OLED] using an active matrix
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/10—Complex mathematical operations
- G06F17/16—Matrix or vector computation, e.g. matrix-matrix or matrix-vector multiplication, matrix factorization
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
- G09G3/2003—Display of colours
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Mathematical Physics (AREA)
- Mathematical Analysis (AREA)
- Computational Mathematics (AREA)
- Mathematical Optimization (AREA)
- Computer Hardware Design (AREA)
- Pure & Applied Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Computing Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Algebra (AREA)
- Databases & Information Systems (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Image Processing (AREA)
Abstract
本公开是关于一种屏幕校准方法及装置、电子设备及存储介质。该方法包括：在待校准屏幕在原生色域显示测试图像时，获取所述测试图像的像素值在预设色彩空间的第一坐标值；其中，所述测试图像的像素值与所述原生色域内节点的像素值相同；获取目标色域中标准像素值在所述预设色彩空间的第二坐标值；确定所述第一坐标值和所述第二坐标值之间的映射关系；基于所述映射关系，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值，并基于所述校准后的像素值进行屏幕图像显示。该方法的计算量小，因而能提升对屏幕的校准效率。
Description
技术领域
本公开涉及显示技术领域，尤其涉及一种屏幕校准方法及装置、电子设备及存储介质。
背景技术
目前高端的智能手机都采用了有机发光半导体(Organic Light-EmittingDiode，OLED)材料的屏幕，OLED的屏幕具有色域高、对比度高等优势。然而，目前手机行业的标准色域是sRGB色域和Display-P3色域，这两个色域比OLED屏幕本身的色域小。对此，为了能够在手机上显示更加真实自然的色彩，不至于屏幕色彩过于艳丽，就需要通过屏幕校准(Gamut Mapping)技术，进行色域的校准和优化。
发明内容
本公开提供一种屏幕校准方法及装置、电子设备及存储介质。
根据本公开实施例的第一方面，提供一种屏幕校准方法，包括：
在待校准屏幕在原生色域显示测试图像时，获取所述测试图像的像素值在预设色彩空间的第一坐标值；其中，所述测试图像的像素值与所述原生色域内节点的像素值相同；
获取目标色域中标准像素值在所述预设色彩空间的第二坐标值；
确定所述第一坐标值和所述第二坐标值之间的映射关系；
基于所述映射关系，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值，并基于所述校准后的像素值进行屏幕图像显示。
可选的，所述确定所述第一坐标值和所述第二坐标值之间的映射关系，包括：
确定所述第二坐标值映射到所述第一坐标值的映射矩阵。
可选的，所述基于所述映射关系，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值，包括：
将所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值与第一预设转化矩阵相乘，获得第一矩阵；其中，所述第一预设转化矩阵为所述原生色域对应的节点所在色彩空间到所述预设色彩空间的转化矩阵；
将预先确定的所述目标色域的标准像素值对应在所述原生色域的理想像素值与所述第一预设转化矩阵相乘，获得第二矩阵；
基于所述映射矩阵，获得所述第一矩阵转化到所述第二矩阵的目标转化矩阵；其中，所述第二矩阵与所述映射矩阵的乘积等于所述第一矩阵；
基于所述目标转化矩阵，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值。
可选的，通过以下方式获取所述目标色域的标准像素值对应在所述原生色域的理想像素值：
基于所述第一预设转化矩阵与第二预设转化矩阵，获得所述目标色域的标准像素值对应在所述原生色域的理想像素值；其中，所述第二预设转化矩阵为所述目标色域对应的所述预设色彩空间的坐标值到所述标准像素值所在色彩空间的转化矩阵。
可选的，所述预设色彩空间为XYZ色彩空间。
根据本公开实施例的第二方面，提供一种屏幕校准装置，包括：
第一获取模块，配置为在待校准屏幕在原生色域显示测试图像时，获取所述测试图像的像素值在预设色彩空间的第一坐标值；其中，所述测试图像的像素值与所述原生色域内节点的像素值相同；
第二获取模块，配置为获取目标色域中标准像素值在所述预设色彩空间的第二坐标值；
确定模块，配置为确定所述第一坐标值和所述第二坐标值之间的映射关系；
校准模块，配置为基于所述映射关系，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值，并基于所述校准后的像素值进行屏幕图像显示。
可选的，所述确定模块，配置为确定所述第二坐标值映射到所述第一坐标值的映射矩阵。
可选的，所述校准模块，配置为将所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值与第一预设转化矩阵相乘，获得第一矩阵；其中，所述第一预设转化矩阵为所述原生色域对应的节点所在色彩空间到所述预设色彩空间的转化矩阵；将预先确定的所述目标色域的标准像素值对应在所述原生色域的理想像素值与所述第一预设转化矩阵相乘，获得第二矩阵；基于所述映射矩阵，获得所述第一矩阵转化到所述第二矩阵的目标转化矩阵；其中，所述第二矩阵与所述映射矩阵的乘积等于所述第一矩阵；基于所述目标转化矩阵，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值。
可选的，所述校准模块还用于通过以下方式获取所述目标色域的标准像素值对应在所述原生色域的理想像素值：
基于所述第一预设转化矩阵与第二预设转化矩阵，获得所述目标色域的标准像素值对应在所述原生色域的理想像素值；其中，所述第二预设转化矩阵为所述目标色域对应的所述预设色彩空间的坐标值到所述标准像素值所在色彩空间的转化矩阵。
可选的，所述预设色彩空间为XYZ色彩空间。
根据本公开实施例的第三方面，提供一种电子设备，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行如上述第一方面中所述的屏幕校准方法。
根据本公开实施例的第四方面，提供一种存储介质，包括：
当所述存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行如上述第一方面中所述的屏幕校准方法。
本公开的实施例提供的技术方案可以包括以下有益效果：
在本公开的实施例中，由于映射关系表征的是预设色彩空间下测试图像的第一坐标值(实际值)与标准像素对应的第二坐标值(理想值)之间的关系，且预设色彩空间与原生色域内节点所在色彩空间(同目标色域的标准像素值所在色彩空间)之间是线性的，因此，基于预设空间建立的映射关系，也可同样获得原生色域内节点所在色彩空间下实际值和理想值之间的关系。其中，原生色域内节点所在色彩空间的理想值是标准3D LUT中目标色域的标准像素值对应在原生色域的理想像素值，那么即可将原生色域内节点所在色彩空间下的实际值确定为待校准屏幕的原生色域内节点的像素值在目标色域中校准后的像素值。
可以理解的是，本公开通过转换到预设色彩空间下，建立实际值和理想值之间的映射关系，并基于映射关系获得待校准屏幕的原生色域内节点的像素值在目标色域中校准后的像素值，计算量小，因而能提升对屏幕的校准效率。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。
图1是本公开实施例示出的一种屏幕校准方法流程图一。
图2是本公开实施例示出的一种屏幕校准方法流程图二。
图3是本公开实施例示出的一种屏幕校准方法流程图三。
图4是根据一示例性实施例示出的一种屏幕校准装置图。
图5是本公开实施例示出的一种电子设备的框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
图1是本公开实施例示出的一种屏幕校准方法流程图一，如图1所示，应用于电子设备中的屏幕校准方法包括以下步骤：
S11、在待校准屏幕在原生色域显示测试图像时，获取所述测试图像的像素值在预设色彩空间的第一坐标值；其中，所述测试图像的像素值与所述原生色域内节点的像素值相同；
S12、获取目标色域中标准像素值在所述预设色彩空间的第二坐标值；
S13、确定所述第一坐标值和所述第二坐标值之间的映射关系；
S14、基于所述映射关系，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值，并基于所述校准后的像素值进行屏幕图像显示。
本公开的屏幕校准方法应用于电子设备中，电子设备包括：移动设备和固定设备。所述移动设备包括：手机、平板电脑或可穿戴式设备等；所述固定设备包括但不限于个人电脑(Personal Computer，PC)。
电子设备包括显示屏幕，用于显示图像。然而，电子设备在显示图像时，因不同的显示需求，可能需要进行色域转换，色域是指可呈现的颜色范围。其中，不同的显示需求，包括：例如图像是sRGB色域的图像，而OLED屏幕的色域相对于sRGB色域较大，因此在利用OLED屏幕显示sRGB图像时，需要进行色域转换。再例如，图像处理软件中，可能需要在特定色域下才能执行相应的图像处理功能，因此也需要将不属于特定色域的图像转化为特定色域下显示。
在本公开的实施例中，将转换前的色域称为原生色域，将转换后的色域称为目标色域。例如，原生色域可以是sRGB色域、Display-P3色域、NTSC色域或AdobeRGB色域中任一之一，而目标色域和原生色域属于不同的色域。
在进行色域转换时，通常基于3D LUT中存储的转换前原生色域的各节点的像素值进行查表，获得节点对应的转换后的目标色域中的像素值，其中节点是指3D LUT中的查找对象，该对象代表像素点对应的像素值。3D LUT中可包括如9*9*9，或者17*17*17个节点的像素值。具体的，3D LUT中存储了转换前的输入节点的红色(R)、绿色(G)和蓝色(B)像素值(例如，表示为Rin/Gin/Bin)，还存储了节点对应的目标色域下的红色、绿色和蓝色像素值(例如，表示为Rout/Gout/Bout)，因此方便电子设备基于3D LUT中存储的转换前和转换后对应的像素值进行转化。
然而，不同的电子设备，因工艺差异或生产环境的差异，可能存在屏幕的色彩差异，因此并不能使用统一标准的3D LUT进行色域转换。基于此，本公开提出一种针对不同电子设备生成合适的3D LUT的方法，以实现对屏幕的校准。其中，针对不同电子设备生成合适的3D LUT，是指针对不同电子设备生成3D LUT中各节点对应的目标色域中校准后的像素值。
在本公开的实施例中，电子设备利用测试图像对待校准屏幕进行校准。在步骤S11中，利用测试图像获得测试图像的像素值在预设色彩空间的第一坐标值，其中，测试图像的像素值与原生色域内节点的像素值相同。例如，原生色域内全部节点个数为4913(17*17*17)个，则测试图像的像素值可与4913个节点的像素值相同。
在一种方式中，一个测试图像的像素值与4913个节点中一个节点的像素值，因而电子设备需要测试4913张不同的图像来获得第一坐标值。
电子设备在原生色域显示测试图像时，电子设备会获取测试图像的像素值在预设色彩空间的第一坐标值。例如，电子设备通过测试仪器，获取测试图像的像素值在预设色彩空间的第一坐标值。其中，预设色彩空间可以是与原生色域内节点的像素值所在色彩空间不同的色彩空间。源色域内节点的像素值所在色彩空间为RGB色彩空间，在一种实施例中，预设色彩空间为XYZ色彩空间；在另一种实施例中，预设色彩空间还可为Lab色彩空间。
在步骤S12中，电子设备还会获取目标色域中标准像素值在预设色彩空间的第二坐标值。需要说明的是，其中，目标色域中的标准像素值可以是指标准的3D LUT中，节点对应的目标色域下的红色、绿色和蓝色像素值(即Rout/Gout/Bout部分)。
电子设备在将目标色域中标准像素值转化为预设色彩空间的第二坐标值时，可根据预设转化矩阵来获得。
例如，目标色域是sRGB色域，预设色彩空间是XYZ空间，则可基于sRGB色域下的RGB色彩空间到XYZ色彩空间的转化矩阵，将目标色域中标准像素值转化为XYZ色彩空间的第二坐标值。
再例如，目标色域是sRGB色域，预设色彩空间是Lab空间，则可基于sRGB色域下的RGB色彩空间到XYZ色彩空间的转化矩阵，将目标色域中标准像素值转化为XYZ色彩空间的坐标值，再基于XYZ色彩空间到Lab空间的转化矩阵，将XYZ色彩空间的坐标值转换到Lab空间的第二坐标值。
在步骤S13中，电子设备会确定第一坐标值和第二坐标值之间的映射关系。因第一坐标值是电子设备在原生色域显示测试图像时对应在预设色彩空间的实际测试值，第二坐标值是目标色域对应的标准3D LUT中标准像素值在预设色彩空间的转换值，即理想值，因此，第一坐标值和第二坐标值之间的映射关系表征的是实际测试值和理想值之间的映射关系。
在步骤S14中，基于映射关系，电子设备即可获得待校准屏幕的原生色域内节点的像素值在目标色域中校准后的像素值，并基于校准后的像素值进行屏幕图像显示。
在该实施例中，由于映射关系表征的是预设色彩空间下实际测试值和理想值之间的关系，且预设色彩空间与原生色域内节点所在色彩空间(同目标色域的标准像素值所在色彩空间)之间是线性变化关系，因此，基于预设空间的映射关系，也可同样获得原生色域内节点所在色彩空间下实际值和理想值之间的关系。其中，原生色域内节点所在色彩空间的理想值是标准3D LUT中目标色域的标准像素值对应在原生色域的理想像素值，那么即可将原生色域内节点所在色彩空间下的实际值确定为待校准屏幕的原生色域内节点的像素值在目标色域中校准后的像素值。
在获得该校准后的像素值后，即可基于校准后的像素值进行屏幕显示，从而实现屏幕显示时色彩的优化。例如，当OLED显示屏上需要显示sRGB色域的图像，可基于源色域内各节点的像素值对应的sRGB色域中校准后的像素值，将待显示图像中属于各节点的像素值切换到对应的校准后的像素值进行图像的显示。
可以理解的是，本公开通过在不同于原生色域内节点所在色彩空间的预设色彩空间下，建立实际测试值和理想值之间的映射关系，并基于映射关系获得待校准屏幕的原生色域内节点的像素值在目标色域中校准后的像素值，计算量小，因而能提升对屏幕的校准效率。
图2是本公开实施例示出的一种屏幕校准方法流程图二，如图2所示，图1中的步骤S13中的确定所述第一坐标值和所述第二坐标值之间的映射关系，可包括如下步骤：
S13A、确定所述第二坐标值映射到所述第一坐标值的映射矩阵。
在该实施例中，例如，预设色彩空间是XYZ色彩空间，那么第一坐标值可表示为(X2，Y2，Z2)，第二坐标值可表示(X1，Y1，Z1)。其中，X1和X2对应XYZ空间中X坐标的值；Y1和Y2对应XYZ空间中Y坐标的值；Z1和Z2对应XYZ空间中Z坐标的值。
将第一坐标值和第二坐标值以3*1矩阵的表示，那么对应的映射矩阵可以是一个3*3的矩阵。如下公式所示：
其中，
即为得到的映射矩阵，通过映射矩阵，形成第一坐标值和第二坐标值之间的映射关系。
可以理解的是，因为第一坐标值和第二坐标值并非为单一数值，而是色彩空间的坐标系下的一组值，因而适用于用映射矩阵的方式建立第一坐标值和第二坐标值之间的映射关系，计算简单。
图3是本公开实施例示出的一种屏幕校准方法流程图三，如图3所示，图1中的步骤S14中的基于所述映射关系，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值，并基于校准后的像素值进行屏幕图像的显示，可包括如下步骤：
S14A、将所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值与第一预设转化矩阵相乘，获得第一矩阵；其中，所述第一预设转化矩阵为所述原生色域对应的节点所在色彩空间到所述预设色彩空间的转化矩阵；
S14B、将预先确定的所述目标色域的标准像素值对应在所述原生色域的理想像素值与所述第一预设转化矩阵相乘，获得第二矩阵；
S14C、基于所述映射矩阵，获得所述第一矩阵转化到所述第二矩阵的目标转化矩阵；其中，所述第二矩阵与所述映射矩阵的乘积等于所述第一矩阵；
S14D、基于所述目标转化矩阵，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值，并基于校准后的像素值进行屏幕图像的显示。
如前所述的，且预设色彩空间与原生色域内节点所在色彩空间(同目标色域的标准像素值所在色彩空间)之间是线性变化关系。因此，在步骤S14A中，电子设备将待校准屏幕的原生色域内节点的像素值在目标色域中校准后的像素值与第一预设转化矩阵相乘，来表征显示屏校准后在预设色彩空间的坐标值。其中，第一预设转化矩阵为原生色域对应的节点所在色彩空间到预设色彩空间的转化矩阵。
例如，预设色彩空间是XYZ空间，则第一预设转化矩阵D1为原生色域下RGB色彩空间到XYZ色彩空间的转化矩阵，见如下公式：
D1＝|RGBtoXYZ| (2)
其中，D1可以为一个3*3的矩阵，例如用
表示。
在本公开的实施例中，假设待校准屏幕的原生色域内节点的像素值在目标色域中校准后的像素值用矩阵形式表示为
那么第一矩阵表征为D1与
相乘。
进一步的，在步骤S14B中，电子设备还将预先确定的目标色域的标准像素值对应在原生色域的理想像素值与第一预设转化矩阵相乘，获得第二矩阵，通过第二矩阵来表征原生色域的理想像素值在预设色彩空间的理想值。
示例性的，在本公开的实施例中，预先确定的目标色域的标准像素值对应在原生色域的理想像素值可以用矩阵形式表示为
那么第二矩阵表征为D1与
相乘。
基于确定预设色彩空间下实际值与理想值之间的映射矩阵，因此，在步骤S14C中，可建立第一矩阵和第二矩阵的映射关系，如下公式(3)所示：
需要说明的是，步骤S14C中所述的基于映射矩阵，获得第一矩阵转化到第二矩阵的目标转化矩阵，是指基于映射矩阵建立公式(3)中左侧与右侧的矩阵转化等式。
从公式(3)中可以看出，只有
为未知的，因此在步骤S14D中，即可基于矩阵转化等式求解出
也即获得待校准屏幕的原生色域内节点的像素值在目标色域中校准后的像素值。
在一种实施例中，可通过以下方式获取所述目标色域的标准像素值对应在所述原生色域的理想像素值：
基于所述第一预设转化矩阵与第二预设转化矩阵，获得所述目标色域的标准像素值对应在所述原生色域的理想像素值；其中，所述第二预设转化矩阵为所述目标色域对应的所述预设色彩空间的坐标值到所述标准像素值所在色彩空间的转化矩阵。
在该实施例中，目标色域的标准像素值可通过预设矩阵映射到原生色域，预设矩阵包括第一预设矩阵和第二预设矩阵。其中，第一预设矩阵即为前述的原生色域下RGB色彩空间到预设色彩空间的转化矩阵，例如，是RGB色彩空间到XYZ色彩空间的转化矩阵D1。第二预设矩阵为目标色域对应的预设色彩空间的坐标值到标准像素值所在色彩空间的转化矩阵。例如，目标色域是sRGB，则第二预设矩阵D2即为sRGB色域下XYZ色彩空间到RGB色彩空间的转换矩阵。
电子设备基于第一预设转化矩阵与第二预设转化矩阵，获得目标色域的标准像素值对应在原生色域的理想像素值，可通过如下公式表示：
其中，|RGBtoXYZ|即为D1，|XYZtoRGB|即为D2，
为目标色域下的标准像素值。
将公式(4)中得到的
带入到公式(3)，即可求解出
也即获得待校准屏幕的原生色域内节点的像素值在目标色域中校准后的像素值。
图4是根据一示例性实施例示出的一种屏幕校准装置图。参照图4，在一个可选的实施例中，所述装置还包括：
第一获取模块101，配置为在待校准屏幕在原生色域显示测试图像时，获取所述测试图像的像素值在预设色彩空间的第一坐标值；其中，所述测试图像的像素值与所述原生色域内节点的像素值相同；
第二获取模块102，配置为获取目标色域中标准像素值在所述预设色彩空间的第二坐标值；
确定模块103，配置为确定所述第一坐标值和所述第二坐标值之间的映射关系；
校准模块104，配置为基于所述映射关系，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值，并基于所述校准后的像素值进行屏幕图像显示。
可选的，所述确定模块103，配置为确定所述第二坐标值映射到所述第一坐标值的映射矩阵。
可选的，所述校准模块104，配置为将所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值与第一预设转化矩阵相乘，获得第一矩阵；其中，所述第一预设转化矩阵为所述原生色域对应的节点所在色彩空间到所述预设色彩空间的转化矩阵；将预先确定的所述目标色域的标准像素值对应在所述原生色域的理想像素值与所述第一预设转化矩阵相乘，获得第二矩阵；基于所述映射矩阵，获得所述第一矩阵转化到所述第二矩阵的目标转化矩阵；其中，所述第二矩阵与所述映射矩阵的乘积等于所述第一矩阵；基于所述目标转化矩阵，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值。
可选的，所述校准模块104，还用于通过以下方式获取所述目标色域的标准像素值对应在所述原生色域的理想像素值：
基于所述第一预设转化矩阵与第二预设转化矩阵，获得所述目标色域的标准像素值对应在所述原生色域的理想像素值；其中，所述第二预设转化矩阵为所述目标色域对应的所述预设色彩空间的坐标值到所述标准像素值所在色彩空间的转化矩阵。
可选的，所述预设色彩空间为XYZ色彩空间。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
图5是根据一示例性实施例示出的一种移动电子设备装置800的框图。例如，装置800可以是移动电话，移动电脑等。
参照图5，装置800可以包括以下一个或多个组件：处理组件802，存储器804，电源组件806，多媒体组件808，音频组件810，输入/输出(I/O)的接口812，传感器组件814，以及通信组件816。
处理组件802通常控制装置800的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件802可以包括一个或多个模块，便于处理组件802和其他组件之间的交互。例如，处理组件802可以包括多媒体模块，以方便多媒体组件808和处理组件802之间的交互。
存储器804被配置为存储各种类型的数据以支持在设备800的操作。这些数据的示例包括用于在装置800上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。
电源组件806为装置800的各种组件提供电力。电力组件806可以包括电源管理系统，一个或多个电源，及其他与为装置800生成、管理和分配电力相关联的组件。
多媒体组件808包括在所述装置800和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件808包括一个前置摄像头和/或后置摄像头。当设备800处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件810被配置为输出和/或输入音频信号。例如，音频组件810包括一个麦克风(MIC)，当装置800处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中，音频组件810还包括一个扬声器，用于输出音频信号。
I/O接口812为处理组件802和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件814包括一个或多个传感器，用于为装置800提供各个方面的状态评估。例如，传感器组件814可以检测到设备800的打开/关闭状态，组件的相对定位，例如所述组件为装置800的显示器和小键盘，传感器组件814还可以检测装置800或装置800一个组件的位置改变，用户与装置800接触的存在或不存在，装置800方位或加速/减速和装置800的温度变化。传感器组件814可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件814还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
通信组件816被配置为便于装置800和其他设备之间有线或无线方式的通信。装置800可以接入基于通信标准的无线网络，如Wi-Fi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件816还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。
在示例性实施例中，装置800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器804，上述指令可由装置800的处理器820执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种非临时性计算机可读存储介质，当所述存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行屏幕校准方法，所述方法包括：
在待校准屏幕在原生色域显示测试图像时，获取所述测试图像的像素值在预设色彩空间的第一坐标值；其中，所述测试图像的像素值与所述原生色域内节点的像素值相同；
获取目标色域中标准像素值在所述预设色彩空间的第二坐标值；
确定所述第一坐标值和所述第二坐标值之间的映射关系；
基于所述映射关系，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值，并基于所述校准后的像素值进行屏幕图像显示。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。
Claims (12)
1.一种屏幕校准方法，其特征在于，所述方法包括：
在待校准屏幕在原生色域显示测试图像时，获取所述测试图像的像素值在预设色彩空间的第一坐标值；其中，所述测试图像的像素值与所述原生色域内节点的像素值相同；
获取目标色域中标准像素值在所述预设色彩空间的第二坐标值；
确定所述第一坐标值和所述第二坐标值之间的映射关系；
基于所述映射关系，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值，并基于所述校准后的像素值进行屏幕图像显示。
2.根据权利要求1所述的方法，其特征在于，所述确定所述第一坐标值和所述第二坐标值之间的映射关系，包括：
确定所述第二坐标值映射到所述第一坐标值的映射矩阵。
3.根据权利要求2所述的方法，其特征在于，所述基于所述映射关系，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值，包括：
将所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值与第一预设转化矩阵相乘，获得第一矩阵；其中，所述第一预设转化矩阵为所述原生色域对应的节点所在色彩空间到所述预设色彩空间的转化矩阵；
将预先确定的所述目标色域的标准像素值对应在所述原生色域的理想像素值与所述第一预设转化矩阵相乘，获得第二矩阵；
基于所述映射矩阵，获得所述第一矩阵转化到所述第二矩阵的目标转化矩阵；其中，所述第二矩阵与所述映射矩阵的乘积等于所述第一矩阵；
基于所述目标转化矩阵，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值。
4.根据权利要求3所述的方法，其特征在于，通过以下方式获取所述目标色域的标准像素值对应在所述原生色域的理想像素值：
基于所述第一预设转化矩阵与第二预设转化矩阵，获得所述目标色域的标准像素值对应在所述原生色域的理想像素值；其中，所述第二预设转化矩阵为所述目标色域对应的所述预设色彩空间的坐标值到所述标准像素值所在色彩空间的转化矩阵。
5.根据权利要求1至4中任一项所述的方法，其特征在于，所述预设色彩空间为XYZ色彩空间。
6.一种屏幕校准装置，其特征在于，所述装置包括：
第一获取模块，配置为在待校准屏幕在原生色域显示测试图像时，获取所述测试图像的像素值在预设色彩空间的第一坐标值；其中，所述测试图像的像素值与所述原生色域内节点的像素值相同；
第二获取模块，配置为获取目标色域中标准像素值在所述预设色彩空间的第二坐标值；
确定模块，配置为确定所述第一坐标值和所述第二坐标值之间的映射关系；
校准模块，配置为基于所述映射关系，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值，并基于所述校准后的像素值进行屏幕图像显示。
7.根据权利要求6所述的装置，其特征在于，
所述确定模块，配置为确定所述第二坐标值映射到所述第一坐标值的映射矩阵。
8.根据权利要求7所述的装置，其特征在于，
所述校准模块，配置为将所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值与第一预设转化矩阵相乘，获得第一矩阵；其中，所述第一预设转化矩阵为所述原生色域对应的节点所在色彩空间到所述预设色彩空间的转化矩阵；将预先确定的所述目标色域的标准像素值对应在所述原生色域的理想像素值与所述第一预设转化矩阵相乘，获得第二矩阵；基于所述映射矩阵，获得所述第一矩阵转化到所述第二矩阵的目标转化矩阵；其中，所述第二矩阵与所述映射矩阵的乘积等于所述第一矩阵；基于所述目标转化矩阵，获得所述待校准屏幕的所述原生色域内节点的像素值在所述目标色域中校准后的像素值。
9.根据权利要求8所述的装置，其特征在于，所述校准模块还用于通过以下方式获取所述目标色域的标准像素值对应在所述原生色域的理想像素值：
基于所述第一预设转化矩阵与第二预设转化矩阵，获得所述目标色域的标准像素值对应在所述原生色域的理想像素值；其中，所述第二预设转化矩阵为所述目标色域对应的所述预设色彩空间的坐标值到所述标准像素值所在色彩空间的转化矩阵。
10.根据权利要求6至9中任一项所述的装置，其特征在于，所述预设色彩空间为XYZ色彩空间。
11.一种电子设备，其特征在于，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行如权利要求1至5中任一项所述的屏幕校准方法。
12.一种非临时性计算机可读存储介质，当所述存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行如权利要求1至5中任一项所述的屏幕校准方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010763483.6A CN114067740B (zh) | 2020-07-31 | 2020-07-31 | 屏幕校准方法及装置、电子设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010763483.6A CN114067740B (zh) | 2020-07-31 | 2020-07-31 | 屏幕校准方法及装置、电子设备及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114067740A true CN114067740A (zh) | 2022-02-18 |
| CN114067740B CN114067740B (zh) | 2024-04-16 |
Family
ID=80227945
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010763483.6A Active CN114067740B (zh) | 2020-07-31 | 2020-07-31 | 屏幕校准方法及装置、电子设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114067740B (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116700646A (zh) * | 2022-12-19 | 2023-09-05 | 荣耀终端有限公司 | 图像色差处理方法和装置 |
| WO2024041443A1 (zh) * | 2022-08-24 | 2024-02-29 | 京东方科技集团股份有限公司 | 显示界面的测试方法及装置、存储介质、电子设备 |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20060119870A1 (en) * | 2004-12-07 | 2006-06-08 | I-Lin Ho | Color gamut mapping |
| CN102063888A (zh) * | 2009-11-13 | 2011-05-18 | 京东方科技集团股份有限公司 | 色彩管理方法及装置 |
| US20140140616A1 (en) * | 2012-11-20 | 2014-05-22 | Samsung Display Co., Ltd. | Device for converting color gamut and method thereof |
| CN106454300A (zh) * | 2016-09-19 | 2017-02-22 | 深圳Tcl数字技术有限公司 | 色域扩展系统和方法 |
| CN108184037A (zh) * | 2017-12-12 | 2018-06-19 | 维沃移动通信有限公司 | 一种图像显示方法及移动终端 |
| CN108986769A (zh) * | 2018-09-05 | 2018-12-11 | 成都索贝数码科技股份有限公司 | 一种低于Rec.2020色域显示设备最大化还原Rec.2020色域内容的方法 |
| CN109286802A (zh) * | 2018-10-22 | 2019-01-29 | 深圳Tcl新技术有限公司 | 色域匹配方法、装置、显示终端及可读存储介质 |
| CN110459176A (zh) * | 2019-08-16 | 2019-11-15 | 合肥工业大学 | 一种amoled显示器的色域转换方法 |
| CN110767198A (zh) * | 2019-09-29 | 2020-02-07 | 深圳吉迪思电子科技有限公司 | 色域校正方法和系统以及显示驱动集成电路 |
| CN111063292A (zh) * | 2019-12-30 | 2020-04-24 | 深圳Tcl数字技术有限公司 | 色域映射方法、色域映射组件、显示装置及存储介质 |
| CN111429827A (zh) * | 2020-03-19 | 2020-07-17 | 展讯通信（上海）有限公司 | 显示屏色彩校准方法、装置、电子设备及可读存储介质 |
-
2020
- 2020-07-31 CN CN202010763483.6A patent/CN114067740B/zh active Active
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20060119870A1 (en) * | 2004-12-07 | 2006-06-08 | I-Lin Ho | Color gamut mapping |
| CN102063888A (zh) * | 2009-11-13 | 2011-05-18 | 京东方科技集团股份有限公司 | 色彩管理方法及装置 |
| US20140140616A1 (en) * | 2012-11-20 | 2014-05-22 | Samsung Display Co., Ltd. | Device for converting color gamut and method thereof |
| CN106454300A (zh) * | 2016-09-19 | 2017-02-22 | 深圳Tcl数字技术有限公司 | 色域扩展系统和方法 |
| CN108184037A (zh) * | 2017-12-12 | 2018-06-19 | 维沃移动通信有限公司 | 一种图像显示方法及移动终端 |
| CN108986769A (zh) * | 2018-09-05 | 2018-12-11 | 成都索贝数码科技股份有限公司 | 一种低于Rec.2020色域显示设备最大化还原Rec.2020色域内容的方法 |
| CN109286802A (zh) * | 2018-10-22 | 2019-01-29 | 深圳Tcl新技术有限公司 | 色域匹配方法、装置、显示终端及可读存储介质 |
| CN110459176A (zh) * | 2019-08-16 | 2019-11-15 | 合肥工业大学 | 一种amoled显示器的色域转换方法 |
| CN110767198A (zh) * | 2019-09-29 | 2020-02-07 | 深圳吉迪思电子科技有限公司 | 色域校正方法和系统以及显示驱动集成电路 |
| CN111063292A (zh) * | 2019-12-30 | 2020-04-24 | 深圳Tcl数字技术有限公司 | 色域映射方法、色域映射组件、显示装置及存储介质 |
| CN111429827A (zh) * | 2020-03-19 | 2020-07-17 | 展讯通信（上海）有限公司 | 显示屏色彩校准方法、装置、电子设备及可读存储介质 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024041443A1 (zh) * | 2022-08-24 | 2024-02-29 | 京东方科技集团股份有限公司 | 显示界面的测试方法及装置、存储介质、电子设备 |
| CN116700646A (zh) * | 2022-12-19 | 2023-09-05 | 荣耀终端有限公司 | 图像色差处理方法和装置 |
| CN116700646B (zh) * | 2022-12-19 | 2024-05-28 | 荣耀终端有限公司 | 图像色差处理方法和装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN114067740B (zh) | 2024-04-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101831077B1 (ko) | 색역 모드 스위칭 방법 및 장치 | |
| US10269129B2 (en) | Color adjustment method and device | |
| CN109599069B (zh) | 一种图像显示的方法和装置 | |
| CN114067740B (zh) | 屏幕校准方法及装置、电子设备及存储介质 | |
| EP3916714A1 (en) | Method and device for calibrating color gamut of display screen, and electronic device | |
| CN114067741B (zh) | 屏幕校准方法及装置、电子设备及存储介质 | |
| CN112116888A (zh) | 屏幕校准方法、校准装置及存储介质 | |
| CN111696479B (zh) | 色域调节方法及装置 | |
| CN108184103B (zh) | 显示图像的方法和装置 | |
| CN105677352B (zh) | 应用图标颜色的设置方法和装置 | |
| CN114067003A (zh) | 色域转换方法及装置、电子设备及存储介质 | |
| CN108877701B (zh) | 一种显示图像的方法和装置 | |
| CN114067739B (zh) | 色域映射方法及装置、电子设备及存储介质 | |
| EP3975548B1 (en) | Photographing method and apparatus, terminal, and storage medium | |
| CN108877697B (zh) | 一种显示图像的方法和装置 | |
| CN106601165B (zh) | 屏幕显示方法及装置 | |
| CN111724324A (zh) | 一种色域转换方法、装置、电子设备及存储介质 | |
| CN106708460B (zh) | 一种对像素点进行显示的方法和装置 | |
| CN114339187B (zh) | 图像处理方法、图像处理装置及存储介质 | |
| CN116801112A (zh) | 颜色校准方法、装置、存储介质及显示设备 | |
| CN115810331A (zh) | 校准oled显示屏的方法、装置及存储介质 | |
| CN116364006A (zh) | 显示方法及装置 | |
| CN116795317A (zh) | 图像显示方法、装置及可读存储介质 | |
| CN108877702B (zh) | 一种显示图像的方法和装置 | |
| CN116453459A (zh) | 屏幕显示方法、装置、可读存储介质及电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |