CN111683192B - 图像处理方法及相关产品 - Google Patents

图像处理方法及相关产品 Download PDF

Info

Publication number
CN111683192B
CN111683192B CN202010529906.8A CN202010529906A CN111683192B CN 111683192 B CN111683192 B CN 111683192B CN 202010529906 A CN202010529906 A CN 202010529906A CN 111683192 B CN111683192 B CN 111683192B
Authority
CN
China
Prior art keywords
image
processing
contrast
frequency information
coordinate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010529906.8A
Other languages
English (en)
Other versions
CN111683192A (zh
Inventor
蒋彬
刘春婷
马维维
陈欢
彭晓峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Spreadtrum Communications Shanghai Co Ltd
Original Assignee
Spreadtrum Communications Shanghai Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Spreadtrum Communications Shanghai Co Ltd filed Critical Spreadtrum Communications Shanghai Co Ltd
Priority to CN202010529906.8A priority Critical patent/CN111683192B/zh
Publication of CN111683192A publication Critical patent/CN111683192A/zh
Application granted granted Critical
Publication of CN111683192B publication Critical patent/CN111683192B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/20Circuitry for controlling amplitude response
    • H04N5/205Circuitry for controlling amplitude response for correcting amplitude versus frequency characteristic
    • H04N5/208Circuitry for controlling amplitude response for correcting amplitude versus frequency characteristic for compensating for attenuation of high frequency components, e.g. crispening, aperture distortion correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)

Abstract

本申请实施例公开了一种图像处理方法及相关产品,其特征在于,应用于电子设备;所述方法包括:电子设备获取初始图像,接着对初始图像进行映射处理,得到第一图像,然后根据预设策略对第一图像进行处理,得到第二图像,所述预设策略用于调整所述第一图像的对比度以优化图像显示结果,最后对第二图像进行锐度增强处理,得到目标图像;通过预设策略对全局对比度和局部对比度进行调整,有利于将高动态范围场景更好的显示在低动态范围的设备上,进而有利于优化现有的图像处理方法,有利于提高图像处理的高效性和便捷性。

Description

图像处理方法及相关产品
技术领域
本申请涉及图像处理技术领域,具体涉及一种图像处理方法及相关产品。
背景技术
由于目前大多数显示设备以及主流的相机所用传感器精度限制,高动态场景拍摄成为目前大多数多媒体技术的瓶颈;传统显示设备所能显示的场景、视频和图像通常受限于硬件设备,通常只能表达出很小一部分的亮度范围,比如如常见的8比特图像显示0到255的整数范围,因此为了能够显示高动态范围的影响,需要实现从高动态范围图像到低动态范围图像的映射,并且不同显示设备的出现,需要实现高动态范围图像和低动态范围图像之间的相互转换;如何达到既能保持像素的整体变化,又能保存一部分细节特征,使得亮度效果能够达到人眼可以接受的接近现实场景的目的,现有技术仍然存在很多优化的空间。
发明内容
本申请实施例提供了一种图像处理方法及相关产品,以期提高图像处理的高效性和便捷性。
第一方面,本申请实施例提供一种图像处理方法,应用于电子设备;所述方法包括:
获取初始图像;
对所述初始图像进行映射处理,得到第一图像;
根据预设策略对所述第一图像进行处理,得到第二图像,所述预设策略用于调整所述第一图像的对比度以优化图像显示结果;
对所述第二图像进行锐度增强处理,得到第三图像;
将所述第三图像与所述初始图像进行加权平均处理,确定目标图像。
第二方面,本申请实施例提供一种图像处理装置,应用于电子设备;所述图像处理装置包括处理单元、通信单元和存储单元,其中,
所述处理单元,用于获取初始图像;以及用于对所述初始图像进行映射处理,得到第一图像;以及用于根据预设策略对所述第一图像进行处理,得到第二图像,所述预设策略用于调整所述第一图像的对比度以优化图像显示结果;以及用于对所述第二图像进行锐度增强处理,得到第三图像;以及用于将所述第三图像与所述初始图像进行加权平均处理,确定目标图像。
第三方面,本申请实施例提供一种电子设备,包括处理器、存储器、通信接口以及一个或多个程序,其中,上述一个或多个程序被存储在上述存储器中,并且被配置由上述处理器执行,上述程序包括用于执行本申请实施例第一方面任一方法中的步骤的指令。
第四方面,本申请实施例提供了一种计算机可读存储介质,其中,上述计算机可读存储介质存储用于电子数据交换的计算机程序,其中,上述计算机程序使得计算机执行如本申请实施例第二方面任一方法中所描述的部分或全部步骤。
第五方面,本申请实施例提供了一种计算机程序产品,其中,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如本申请实施例第二方面任一方法中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
可以看出,本申请实施例中,提供了一种图像处理方法及相关产品,其特征在于,应用于电子设备;所述方法包括:电子设备获取初始图像;对所述初始图像进行映射处理,得到第一图像;根据预设策略对所述第一图像进行处理,得到第二图像,所述预设策略用于调整所述第一图像的对比度以优化图像显示结果;对所述第二图像进行锐度增强处理,得到第三图像;将所述第三图像与所述初始图像进行加权平均处理,确定目标图像;通过预设策略对全局对比度和局部对比度进行调整,有利于将高动态范围场景更好的显示在低动态范围的设备上,进而有利于优化现有的图像处理方法,有利于提高图像处理的高效性和便捷性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1A是本申请实施例提供的一种图像处理方法的架构示意图;
图1B是本申请实施例提供的一种局部对比度调整的场景示意图;
图1C是本申请实施例提供的一种阈值处理的示意图;
图2是本申请实施例提供的另一种图像处理方法的流程示意图;
图3是本申请实施例提供的另一种图像处理方法的流程示意图;
图4是本申请实施例提供的一种电子设备的结构示意图;
图5是本申请实施例提供的一种图像处理装置的功能单元组成框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
下面对本申请实施例进行详细介绍。
请参阅图1A,图1A是本申请实施例提供了一种图像处理方法的流程示意图,应用于电子设备;所述方法包括:
S101,电子设备获取初始图像;
其中,所述初始图像包括高动态范围图像。
S102,所述电子设备对所述初始图像进行映射处理,得到第一图像;
其中,所述进行映射处理包括使用全局映射曲线对所述初始图像进行拉伸和压缩。
S103,所述电子设备根据预设策略对所述第一图像进行处理,得到第二图像;
其中,所述预设策略用于调整所述第一图像的对比度以优化图像显示结果。
S104,所述电子设备对所述第二图像进行锐度增强处理,得到第三图像;
S105,所述电子设备将所述第三图像与所述初始图像进行加权平均处理,确定目标图像。
其中,所述目标图像包括低动态范围图像。
其中,所述加权平均处理包括通过公式pix_out=alpha*pix_in+(1-alpha)pix_in_processed进行处理,用于调整所述第三图像的图像信息,以便充分利用所述初始图像中的图像信息。
可以看出,本申请实施例中,提供了一种图像处理方法及相关产品,其特征在于,应用于电子设备;所述方法包括:电子设备获取初始图像;对所述初始图像进行映射处理,得到第一图像;根据预设策略对所述第一图像进行处理,得到第二图像,所述预设策略用于调整所述第一图像的对比度以优化图像显示结果;对所述第二图像进行锐度增强处理,得到第三图像;将所述第三图像与所述初始图像进行加权平均处理,确定目标图像;通过预设策略对全局对比度和局部对比度进行调整,有利于将高动态范围场景更好的显示在低动态范围的设备上,进而有利于优化现有的图像处理方法,有利于提高图像处理的高效性和便捷性。
在一个可能的示例中,所述电子设备对所述初始图像进行映射处理,得到第一图像,包括:电子设备获取所述初始图像的高亮区域、中亮区域和低亮区域;所述电子设备代入预设函数公式,分别确定所述高亮区域、所述中亮区域和所述低亮区域的映射策略;所述电子设备根据所述映射策略分别对所述高亮区域、所述中亮区域和所述低亮区域进行对比度调整,得到第一图像。
其中,所述高亮区域、中亮区域和低亮区域包括根据所述初始图像的亮度信息,确定不同区域的亮度级别,根据亮度级别确定高亮区域、中亮区域和低亮区域。
其中,所述预设函数公式包括Y=1-thr_k*exp(-lambda*X)和Y=1/(1+exp(-k1*(X-k2)))。
具体实现中,电子设备获取所述初始图像的高亮区域、中亮区域和低亮区域,所述电子设备代入预设函数公式Y=1-thr_k*Exp(-lamb da*X),分别确定所述高亮区域、所述中亮区域和所述低亮区域的映射策略,所述电子设备根据所述映射策略分别对所述高亮区域、所述中亮区域和所述低亮区域进行对比度调整,得到第一图像。
可见,本示例中,所述电子设备获取所述初始图像的高亮区域、中亮区域和低亮区域;所述电子设备代入预设函数公式,分别确定所述高亮区域、所述中亮区域和所述低亮区域的映射策略;所述电子设备根据所述映射策略分别对所述高亮区域、所述中亮区域和所述低亮区域进行对比度调整,得到第一图像;该预设函数公式可以保持低亮处获得足够增强,同时抑制高亮处的过度增强,且满足中亮区域对比度适宜,有利于提高图像处理的准确性。
在一个可能的示例中,所述电子设备根据预设策略对所述第一图像进行处理,得到第二图像,包括:电子设备对所述第一图像进行全局对比度调整,确定对比图像;所述电子设备获取所述对比图像的图像效果;所述电子设备根据所述图像效果,对所述对比图像进行局部对比度调整,得到第二图像。
其中,所述进行全局对比度调整包括由于全局曲线的固有特点,造成原图像上对比度以及细节的损失,主要反映在曲线曲率小于1的处的像素值为图像内容被压缩还是拉伸的阈值,该阈值设为thr_1;进而确定所有像素值小于thr_1的图像区域的对比度将会被拉伸,而像素值大于thr_1的图像区域的对比度将会被压缩;因此经过全局对比度调整后得到的所述对比图像在整体视觉上会呈现出发蒙的特点。
其中,所述进行局部对比度调整包括选取所述对比图像中的至少五个像素点,采用线性回归算法加权进行计算,确定所述对比图像中各部分的局部对比度调整方法。
具体实现中,电子设备对所述第一图像H1进行全局对比度调整,确定对比图像H2;所述电子设备获取所述对比图像H2的图像效果,H2分成A1、A2、A3和A4四个部分,确定A1部分对比度较弱,所述电子设备根据所述图像效果,对所述对比图像进行局部对比度调整,得到第二图像。
可见,本示例中,电子设备对所述第一图像进行全局对比度调整,确定对比图像;所述电子设备获取所述对比图像的图像效果;所述电子设备根据所述图像效果,对所述对比图像进行局部对比度调整,得到第二图像;有利于优化图像显示效果,有利于提高图片处理的高效性和准确性。
在一个可能的示例中,所述电子设备对所述第一图像进行全局对比度调整,确定对比图像,包括:电子设备将所述第一图像的每一像素进行排序,确定所述每一像素的大小排列顺序和所述第一图像的总像素数量;所述电子设备根据所述大小排列顺序和所述总像素数量,设定所述第一图像的第一部分像素对应的第一像素值和所述第一图像的第二部分像素对应的第二像素值;所述电子设备将所述第一像素值和所述第二像素值分别代入第一预设线性拉伸公式,确定拉伸后的第一目标像素值;所述电子设备根据所述第一目标像素值对所述第一图像进行拉伸,得到对比图像。
其中,所述根据所述第一预设线性拉伸公式包括Pix_out–pix_out_start=(pix_in–pix_min)*(pix_out_end-pix_out_start)/(pix_max-pix_min);Pix_out为拉伸后的像素值;pix_in为拉伸前输入值;pix_min为拉伸前的最小像素值;pix_max为拉伸前最大像素值。
具体地,以8bit为例,pix_out_range可以为255也可以设为小于255的像素值;pix_out_start可以为0也可以设为大于0的某个像素值;通过上述方法有利于直方图的灵活拉伸。
具体实现中,所述电子设备将所述第一图像的每一像素进行排序,从而确定所述第一图像中所有像素的大小排序顺序,可以确定最大像素值以及最小像素值对应的像素位置;接着对所述第一图像设定像素数目总和底部百分比b%,以及顶部百分比t%并确认对应的像素值;同时,由于传统排序计算复杂度较高,该处可以利用直方图统计的方式,快速的进行像素值的排序处理。并对最小像素值和最大像素值附近的bin所对应的像素数目进行设定,选取b%和t%所对应的像素值;接着,所述电子设备将所述第一像素值和所述第二像素值分别代入第一预设线性拉伸公式,确定拉伸后的第一目标像素值;所述电子设备根据所述第一目标像素值对所述第一图像进行拉伸,得到对比图像。
可见,本示例中,电子设备将所述第一图像的每一像素进行排序,确定所述每一像素的大小排列顺序和所述第一图像的总像素数量;所述电子设备根据所述大小排列顺序和所述总像素数量,设定所述第一图像的第一部分像素对应的第一像素值和所述第一图像的第二部分像素对应的第二像素值;所述电子设备将所述第一像素值和所述第二像素值分别代入第一预设线性拉伸公式,确定拉伸后的第一目标像素值;所述电子设备根据所述第一目标像素值对所述第一图像进行拉伸,得到对比图像;有利于综合全面的调整对比度并得到对比图像,进而有利于提高图片处理的全面性和高效性。
在一个可能的示例中,所述电子设备根据所述图像效果,对所述对比图像进行局部对比度调整,得到第二图像,包括:电子设备对所述对比图像进行区块划分,确定多个图像分区;所述电子设备对所述多个图像分区中的每一图像分区进行邻近区域加权计算,确定第二目标像素值;所述电子设备根据所述第二目标像素值对所述对比图像进行拉伸,得到第二图像。
其中,所述电子设备根据所述图像效果,对所述对比图像进行局部对比度调整,得到第二图像,方法还包括:电子设备对所述对比图像进行区块划分,确定多个图像分区;对所述多个图像分区进行拉伸处理,计算出拉伸后的累计分布函数;根据所述累计分布函数得到第二图像。
具体地,所述进行邻近区域加权计算包括取某一像素周围临近四个图像分区的映射曲线进行计算所得四个输出值进行加权求和,权重大小可采用距离远近作为评判依据。
具体实现中,所述电子设备对所述对比图像进行区块划分,确定多个图像分区J1、J2和J3,所述电子设备对对每一所述图像分区进行邻近区域加权计算,确定第二目标像素值,所述电子设备根据所述第二目标像素值对所述对比图像进行拉伸,得到第二图像。
可见,本示例中,电子设备对所述对比图像进行区块划分,确定多个图像分区;接着对所述多个图像分区中的每一图像分区进行邻近区域加权计算,确定第二目标像素值;最后根据所述第二目标像素值对所述对比图像进行拉伸,得到第二图像;通过上述方法进一步通过局部对比度增强的方式改善局部区域的图像效果,有利于提高图像处理的准确性。
在一个可能的示例中,所述电子设备对所述多个图像分区中的每一图像分区进行邻近区域加权计算,确定第二目标像素值,包括:电子设备求出所述多个图像分区中的像素平均值;所述电子设备获取所述多个图像分区的亮度目标值,根据所述亮度目标值和所述像素平均值,确定第一坐标(xa,ya);所述电子设备确定第二坐标为(x0,y0)和第三坐标为(x1,y1);所述电子设备根据所述第二坐标和所述第三坐标,确定第四坐标(xb,yb)和第五坐标为(xc,yc);所述电子设备采用预设的线性回归策略对所述第一坐标、所述第二坐标、所述第三坐标、所述第四坐标和所述第五坐标进行拟合,确定映射曲线;所述电子设备根据所述映射曲线,确定所述映射曲线所映射出的像素值为第二目标像素值。
其中,所述x0<xb<xa<xc<x1
具体实现中,如图1B所示,电子设备求出所述多个图像分区中的像素平均值为xa;所述电子设备获取所述多个图像分区的亮度目标值为ya,根据所述亮度目标值和所述像素平均值,确定第一坐标P2(xa,ya);所述电子设备确定第二坐标为P4(x0,y0)和第三坐标为P0(x1,y1);所述电子设备根据所述P4和所述P0,确定至少一个第四坐标P1(xb,yb)和第五坐标P3为(xc,yc),再通过以上所确定的五个点采用线性回归会等同类似的效果进行拟合得出中的映射曲线,所述电子设备根据所述映射曲线,确定所述映射曲线所映射出的像素值为第二目标像素值F。
可见,本示例中,电子设备求出所述多个图像分区中的像素平均值;所述电子设备获取所述多个图像分区的亮度目标值,根据所述亮度目标值和所述像素平均值,确定第一坐标(xa,ya);所述电子设备确定第二坐标为(x0,y0)和第三坐标为(x1,y1);所述电子设备根据所述第二坐标和所述第三坐标,确定第四坐标(xb,yb)和第五坐标为(xc,yc);所述电子设备采用预设的线性回归策略对所述第一坐标、所述第二坐标、所述第三坐标、所述第四坐标和所述第五坐标进行拟合,确定映射曲线;所述电子设备根据所述映射曲线,确定所述映射曲线所映射出的像素值为第二目标像素值,有利于提高图像处理的准确性。
在一个可能的示例中,所述电子设备包括低通滤波器,所述对所述第二图像进行锐度增强处理,得到目标图像,包括:电子设备通过所述低通滤波器对所述第二图像进行卷积分离,确定所述第二图像的低频部分和高频部分;所述电子设备获取所述高频部分的第一高频信息,对所述第一高频信息进行阈值处理,消除数值小于第一阈值的高频信息,得到第二高频信息;所述电子设备根据所述第二高频信息调整所述第二图像,得到目标图像。
其中,如图1C所示,所述进行阈值处理包括获取标准阈值K,将所述第一高频信息带入预设阈值处理公式M=N+K,其中,M代表所述第二高频信息中的第二频率,N代表所述第一高频信息中的第一频率。
其中,所述调整所述第二图像,得到目标图像包括电子设备根据所述第二高频信息和下述公式Pix_out=pix_in+weight×pix_hig_fre_thr确定目标图像,其中,pix_in代表所述拉伸前输入值,pix_out代表第三频率信息,pix_hig_fre_thr表示所述第二高频信息,weight为可调参数控制锐化的强弱。
具体实现中,电子设备通过所述低通滤波器对所述第二图像进行卷积分离,确定所述第二图像的低频部分S1和高频部分S2;所述电子设备获取所述高频部分S2的第一高频信息,对所述第一高频信息进行阈值处理,消除数值小于第一阈值的高频信息,得到第二高频信息;所述电子设备根据所述第二高频信息调整所述第二图像,得到目标图像。
可见,本示例中,电子设备通过所述低通滤波器对所述第二图像进行卷积分离,确定所述第二图像的低频部分和高频部分;所述电子设备获取所述高频部分的第一高频信息,对所述第一高频信息进行阈值处理,消除数值小于第一阈值的高频信息,得到第二高频信息;所述电子设备根据所述第二高频信息调整所述第二图像,得到目标图像;有利于通过相对简单的组合处理实现较为复杂算法的处理效果,从图像对比度,锐化等人眼感知特点较好的复原高动态范围图像的呈现。
与上述图1A所示的实施例一致的,请参阅图2,图2是本申请实施例提供的另一种图像处理方法的流程示意图,应用于电子设备;如图所示,本图像处理方法包括:
S201,电子设备获取初始图像;
S202,所述电子设备获取所述初始图像的高亮区域、中亮区域和低亮区域;
S203,所述电子设备代入预设函数公式,分别确定所述高亮区域、所述中亮区域和所述低亮区域的映射策略;
S204,所述电子设备根据所述映射策略分别对所述高亮区域、所述中亮区域和所述低亮区域进行对比度调整,得到第一图像;
S205,所述电子设备根据预设策略对所述第一图像进行处理,得到第二图像;
S206,所述电子设备对所述第二图像进行锐度增强处理,得到第三图像;
S207,所述电子设备将所述第三图像与所述初始图像进行加权平均处理,确定目标图像。
可以看出,本申请实施例中,提供了一种图像处理方法及相关产品,其特征在于,应用于电子设备;所述方法包括:电子设备获取初始图像;对所述初始图像进行映射处理,得到第一图像;根据预设策略对所述第一图像进行处理,得到第二图像,所述预设策略用于调整所述第一图像的对比度以优化图像显示结果;对所述第二图像进行锐度增强处理,得到第三图像;将所述第三图像与所述初始图像进行加权平均处理,确定目标图像;通过预设策略对全局对比度和局部对比度进行调整,有利于将高动态范围场景更好的显示在低动态范围的设备上,进而有利于优化现有的图像处理方法,有利于提高图像处理的高效性和便捷性。
与上述图1A所示的实施例一致的,请参阅图3,图3是本申请实施例提供的另一种图像处理方法的流程示意图,应用于电子设备;如图所示,本图像处理方法包括:
S301,电子设备获取初始图像;
S302,所述电子设备获取所述初始图像的高亮区域、中亮区域和低亮区域;
S303,所述电子设备代入预设函数公式,分别确定所述高亮区域、所述中亮区域和所述低亮区域的映射策略;
S304,所述电子设备根据所述映射策略分别对所述高亮区域、所述中亮区域和所述低亮区域进行对比度调整,得到第一图像;
S305,所述电子设备对所述第一图像进行全局对比度调整,确定对比图像;
S306,所述电子设备获取所述对比图像的图像效果;
S307,所述电子设备根据所述图像效果,对所述对比图像进行局部对比度调整,得到第二图像;
S308,所述电子设备对所述第二图像进行锐度增强处理,得到第三图像;
S309,所述电子设备将所述第三图像与所述初始图像进行加权平均处理,确定目标图像。
可以看出,本申请实施例中,提供了一种图像处理方法及相关产品,其特征在于,应用于电子设备;所述方法包括:电子设备获取初始图像;对所述初始图像进行映射处理,得到第一图像;根据预设策略对所述第一图像进行处理,得到第二图像,所述预设策略用于调整所述第一图像的对比度以优化图像显示结果;对所述第二图像进行锐度增强处理,得到第三图像;将所述第三图像与所述初始图像进行加权平均处理,确定目标图像;通过预设策略对全局对比度和局部对比度进行调整,有利于将高动态范围场景更好的显示在低动态范围的设备上,进而有利于优化现有的图像处理方法,有利于提高图像处理的高效性和便捷性。
此外,电子设备对所述第一图像进行全局对比度调整,确定对比图像;所述电子设备获取所述对比图像的图像效果;所述电子设备根据所述图像效果,对所述对比图像进行局部对比度调整,得到第二图像;有利于优化图像显示效果,有利于提高图片处理的高效性和准确性。
与上述图1A、图2、图3所示的实施例一致的,请参阅图4,图4是本申请实施例提供的一种电子设备400的结构示意图,如图所示,所述电子设备400包括应用处理器410、存储器420、通信接口430以及一个或多个程序421,其中,所述一个或多个程序421被存储在上述存储器420中,并且被配置由上述应用处理器410执行,所述一个或多个程序421包括用于执行以下步骤的指令;
获取初始图像;
对所述初始图像进行映射处理,得到第一图像;
根据预设策略对所述第一图像进行处理,得到第二图像,所述预设策略用于调整所述第一图像的对比度以优化图像显示结果;
对所述第二图像进行锐度增强处理,得到第三图像;
将所述第三图像与所述初始图像进行加权平均处理,确定目标图像。
可以看出,本申请实施例中,提供了一种图像处理方法及相关产品,其特征在于,应用于电子设备;所述方法包括:电子设备获取初始图像;对所述初始图像进行映射处理,得到第一图像;根据预设策略对所述第一图像进行处理,得到第二图像,所述预设策略用于调整所述第一图像的对比度以优化图像显示结果;对所述第二图像进行锐度增强处理,得到第三图像;将所述第三图像与所述初始图像进行加权平均处理,确定目标图像;通过预设策略对全局对比度和局部对比度进行调整,有利于将高动态范围场景更好的显示在低动态范围的设备上,进而有利于优化现有的图像处理方法,有利于提高图像处理的高效性和便捷性。
在一个可能的示例中,所述对所述初始图像进行映射处理,得到第一图像,所述程序中的指令具体用于执行以下操作:获取所述初始图像的高亮区域、中亮区域和低亮区域;代入预设函数公式,分别确定所述高亮区域、所述中亮区域和所述低亮区域的映射策略;根据所述映射策略分别对所述高亮区域、所述中亮区域和所述低亮区域进行对比度调整,得到第一图像。
在一个可能的示例中,所述根据预设策略对所述第一图像进行处理,得到第二图像,所述程序中的指令具体用于执行以下操作:对所述第一图像进行全局对比度调整,确定对比图像;获取所述对比图像的图像效果;根据所述图像效果,对所述对比图像进行局部对比度调整,得到第二图像。
在一个可能的示例中,所述对所述第一图像进行全局对比度调整,确定对比图像,所述程序中的指令具体用于执行以下操作:将所述第一图像的每一像素进行排序,确定所述每一像素的大小排列顺序和所述第一图像的总像素数量;根据所述大小排列顺序和所述总像素数量,设定所述第一图像的第一部分像素对应的第一像素值和所述第一图像的第二部分像素对应的第二像素值;将所述第一像素值和所述第二像素值分别代入第一预设线性拉伸公式,确定拉伸后的第一目标像素值;根据所述第一目标像素值对所述第一图像进行拉伸,得到对比图像。
在一个可能的示例中,所述根据所述图像效果,对所述对比图像进行局部对比度调整,得到第二图像,所述程序中的指令具体用于执行以下操作:对所述对比图像进行区块划分,确定多个图像分区;对所述多个图像分区中的每一图像分区进行邻近区域加权计算,确定第二目标像素值;根据所述第二目标像素值对所述对比图像进行拉伸,得到第二图像。
在一个可能的示例中,所述对所述多个图像分区中的每一图像分区进行邻近区域加权计算,确定第二目标像素值,所述程序中的指令具体用于执行以下操作:求出所述多个图像分区中的像素平均值;获取所述多个图像分区的亮度目标值,根据所述亮度目标值和所述像素平均值,确定第一坐标(xa,ya);确定第二坐标为(x0,y0)和第三坐标为(x1,y1);根据所述第二坐标和所述第三坐标,确定第四坐标(xb,yb)和第五坐标为(xc,yc),其中,所述x0<xb<xa<xc<x1;采用预设的线性回归策略对所述第一坐标、所述第二坐标、所述第三坐标、所述第四坐标和所述第五坐标进行拟合,确定映射曲线;根据所述映射曲线,确定所述映射曲线所映射出的像素值为第二目标像素值。
在一个可能的示例中,所述电子设备包括低通滤波器,所述对所述第二图像进行锐度增强处理,得到第三图像,所述程序中的指令具体用于执行以下操作:通过所述低通滤波器对所述第二图像进行卷积分离,确定所述第二图像的低频部分和高频部分;获取所述高频部分的第一高频信息,对所述第一高频信息进行阈值处理,消除数值小于第一阈值的高频信息,得到第二高频信息;根据所述第二高频信息调整所述第二图像,得到第三图像。
上述主要从方法侧执行过程的角度对本申请实施例的方案进行了介绍。可以理解的是,电子设备为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所提供的实施例描述的各示例的单元及算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对电子设备进行功能单元的划分,例如,可以对应各个功能划分各个功能单元,也可以将两个或两个以上的功能集成在一个处理单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。需要说明的是,本申请实施例中对单元的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
图5是本申请实施例中所涉及的图像处理装置500的功能单元组成框图。该图像处理装置500应用于电子设备,所述图像处理装置包括处理单元501、通信单元502和存储单元503,其中,
所述处理单元501,用于获取初始图像;以及用于对所述初始图像进行映射处理,得到第一图像;以及用于根据预设策略对所述第一图像进行处理,得到第二图像,所述预设策略用于调整所述第一图像的对比度以优化图像显示结果;以及用于对所述第二图像进行锐度增强处理,得到目标图像。
可以看出,本申请实施例中,提供了一种图像处理方法及相关产品,其特征在于,应用于电子设备;所述方法包括:电子设备获取初始图像;对所述初始图像进行映射处理,得到第一图像;根据预设策略对所述第一图像进行处理,得到第二图像,所述预设策略用于调整所述第一图像的对比度以优化图像显示结果;对所述第二图像进行锐度增强处理,得到第三图像;将所述第三图像与所述初始图像进行加权平均处理,确定目标图像;通过预设策略对全局对比度和局部对比度进行调整,有利于将高动态范围场景更好的显示在低动态范围的设备上,进而有利于优化现有的图像处理方法,有利于提高图像处理的高效性和便捷性。
可以理解的是,由于方法实施例与装置实施例为相同技术构思的不同呈现形式,因此,本申请中方法实施例部分的内容应同步适配于装置实施例部分,此处不再赘述。
在一个可能的示例中,所述对所述初始图像进行映射处理,得到第一图像,所述处理单元501具体用于:获取所述初始图像的高亮区域、中亮区域和低亮区域;代入预设函数公式,分别确定所述高亮区域、所述中亮区域和所述低亮区域的映射策略;根据所述映射策略分别对所述高亮区域、所述中亮区域和所述低亮区域进行对比度调整,得到第一图像。
在一个可能的示例中,所述根据预设策略对所述第一图像进行处理,得到第二图像,所述处理单元501具体用于:对所述第一图像进行全局对比度调整,确定对比图像;获取所述对比图像的图像效果;根据所述图像效果,对所述对比图像进行局部对比度调整,得到第二图像。
在一个可能的示例中,所述对所述第一图像进行全局对比度调整,确定对比图像,所述处理单元501具体用于:将所述第一图像的每一像素进行排序,确定所述每一像素的大小排列顺序和所述第一图像的总像素数量;根据所述大小排列顺序和所述总像素数量,设定所述第一图像的第一部分像素对应的第一像素值和所述第一图像的第二部分像素对应的第二像素值;将所述第一像素值和所述第二像素值分别代入第一预设线性拉伸公式,确定拉伸后的第一目标像素值;根据所述第一目标像素值对所述第一图像进行拉伸,得到对比图像。
在一个可能的示例中,所述根据所述图像效果,对所述对比图像进行局部对比度调整,得到第二图像,所述处理单元501具体用于:对所述对比图像进行区块划分,确定多个图像分区;对所述多个图像分区中的每一图像分区进行邻近区域加权计算,确定第二目标像素值;根据所述第二目标像素值对所述对比图像进行拉伸,得到第二图像。
在一个可能的示例中,所述对所述多个图像分区中的每一图像分区进行邻近区域加权计算,确定第二目标像素值,所述处理单元501具体用于:求出所述多个图像分区中的像素平均值;获取所述多个图像分区的亮度目标值,根据所述亮度目标值和所述像素平均值,确定第一坐标(xa,ya);确定第二坐标为(x0,y0)和第三坐标为(x1,y1);根据所述第二坐标和所述第三坐标,确定第四坐标(xb,yb)和第五坐标为(xc,yc),其中,所述x0<xb<xa<xc<x1;采用预设的线性回归策略对所述第一坐标、所述第二坐标、所述第三坐标、所述第四坐标和所述第五坐标进行拟合,确定映射曲线;根据所述映射曲线,确定所述映射曲线所映射出的像素值为第二目标像素值。
在一个可能的示例中,所述电子设备包括低通滤波器,所述对所述第二图像进行锐度增强处理,得到第三图像,所述处理单元501具体用于:通过所述低通滤波器对所述第二图像进行卷积分离,确定所述第二图像的低频部分和高频部分;获取所述高频部分的第一高频信息,对所述第一高频信息进行阈值处理,消除数值小于第一阈值的高频信息,得到第二高频信息;根据所述第二高频信息调整所述第二图像,得到第三图像。
本申请实施例还提供一种计算机存储介质,其中,该计算机存储介质存储用于电子数据交换的计算机程序,该计算机程序使得计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤,上述计算机包括电子设备。
本申请实施例还提供一种计算机程序产品,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤。该计算机程序产品可以为一个软件安装包,上述计算机包括电子设备。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如上述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储器中,存储器可以包括:闪存盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取器(英文:Random Access Memory,简称:RAM)、磁盘或光盘等。
以上对本申请实施例进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种图像处理方法,其特征在于,应用于电子设备;所述方法包括:
获取初始图像;
对所述初始图像进行映射处理,得到第一图像;
根据预设策略对所述第一图像进行处理,得到第二图像,所述预设策略用于调整所述第一图像的对比度以优化图像显示结果;
对所述第二图像进行锐度增强处理,得到第三图像,其中,所述对所述第二图像进行锐度增强处理包括电子设备通过低通滤波器对所述第二图像进行卷积分离,确定所述第二图像的低频部分和高频部分,获取所述高频部分的第一高频信息,对所述第一高频信息进行阈值处理,消除数值小于第一阈值的高频信息,得到第二高频信息,根据第二高频信息和下述公式Pix_out=pix_in+weight×pix_hig_fre_thr确定目标图像,其中,pix_in代表拉伸前输入值,pix_out代表第三频率信息,pix_hig_fre_thr表示所述第二高频信息,weight为可调参数控制锐化的强弱;
将所述第三图像与所述初始图像进行加权平均处理,确定目标图像。
2.根据权利要求1所述的方法,其特征在于,所述对所述初始图像进行映射处理,得到第一图像,包括:
获取所述初始图像的高亮区域、中亮区域和低亮区域;
代入预设函数公式,分别确定所述高亮区域、所述中亮区域和所述低亮区域的映射策略;
根据所述映射策略分别对所述高亮区域、所述中亮区域和所述低亮区域进行对比度调整,得到第一图像。
3.根据权利要求2所述的方法,其特征在于,所述根据预设策略对所述第一图像进行处理,得到第二图像,包括:
对所述第一图像进行全局对比度调整,确定对比图像;
获取所述对比图像的图像效果;
根据所述图像效果,对所述对比图像进行局部对比度调整,得到第二图像。
4.根据权利要求3所述的方法,其特征在于,所述对所述第一图像进行全局对比度调整,确定对比图像,包括:
将所述第一图像的每一像素进行排序,确定所述每一像素的大小排列顺序和所述第一图像的总像素数量;
根据所述大小排列顺序和所述总像素数量,设定所述第一图像的第一部分像素对应的第一像素值和所述第一图像的第二部分像素对应的第二像素值;
将所述第一像素值和所述第二像素值分别代入第一预设线性拉伸公式,确定拉伸后的第一目标像素值;
根据所述第一目标像素值对所述第一图像进行拉伸,得到对比图像。
5.根据权利要求4所述的方法,其特征在于,所述根据所述图像效果,对所述对比图像进行局部对比度调整,得到第二图像,包括:
对所述对比图像进行区块划分,确定多个图像分区;
对所述多个图像分区中的每一图像分区进行邻近区域加权计算,确定第二目标像素值;
根据所述第二目标像素值对所述对比图像进行拉伸,得到第二图像。
6.根据权利要求5所述的方法,其特征在于,所述对所述多个图像分区中的每一图像分区进行邻近区域加权计算,确定第二目标像素值,包括:
求出所述多个图像分区中的像素平均值;
获取所述多个图像分区的亮度目标值,根据所述亮度目标值和所述像素平均值,确定第一坐标(xa,ya);
确定第二坐标为(x0,y0)和第三坐标为(x1,y1);
根据所述第二坐标和所述第三坐标,确定第四坐标(xb,yb)和第五坐标为(xc,yc),其中,所述x0<xb<xa<xc<x1
采用预设的线性回归策略对所述第一坐标、所述第二坐标、所述第三坐标、所述第四坐标和所述第五坐标进行拟合,确定映射曲线;
根据所述映射曲线,确定所述映射曲线所映射出的像素值为第二目标像素值。
7.根据权利要求1所述的方法,其特征在于,所述电子设备包括低通滤波器,所述对所述第二图像进行锐度增强处理,得到第三图像,包括:
通过所述低通滤波器对所述第二图像进行卷积分离,确定所述第二图像的低频部分和高频部分;
获取所述高频部分的第一高频信息,对所述第一高频信息进行阈值处理,消除数值小于第一阈值的高频信息,得到第二高频信息;
根据所述第二高频信息调整所述第二图像,得到第三图像。
8.一种图像处理装置,其特征在于,应用于电子设备;所述图像处理装置包括处理单元、通信单元和存储单元,其中,
所述处理单元,用于获取初始图像;以及用于对所述初始图像进行映射处理,得到第一图像;以及用于根据预设策略对所述第一图像进行处理,得到第二图像,所述预设策略用于调整所述第一图像的对比度以优化图像显示结果;以及用于对所述第二图像进行锐度增强处理,得到第三图像,其中,所述对所述第二图像进行锐度增强处理包括电子设备通过低通滤波器对所述第二图像进行卷积分离,确定所述第二图像的低频部分和高频部分,获取所述高频部分的第一高频信息,对所述第一高频信息进行阈值处理,消除数值小于第一阈值的高频信息,得到第二高频信息,根据第二高频信息和下述公式Pix_out=pix_in+weight×pix_hig_fre_thr确定目标图像,其中,pix_in代表拉伸前输入值,pix_out代表第三频率信息,pix_hig_fre_thr表示所述第二高频信息,weight为可调参数控制锐化的强弱;以及用于将所述第三图像与所述初始图像进行加权平均处理,确定目标图像。
9.一种电子设备,其特征在于,包括处理器、存储器、通信接口,以及一个或多个程序,所述一个或多个程序被存储在所述存储器中,并且被配置由所述处理器执行,所述程序包括用于执行如权利要求1-7任一项所述的方法中的步骤的指令。
10.一种计算机可读存储介质,其特征在于,存储用于电子数据交换的计算机程序,其中,所述计算机程序使得计算机执行如权利要求1-7任一项所述的方法。
CN202010529906.8A 2020-06-11 2020-06-11 图像处理方法及相关产品 Active CN111683192B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010529906.8A CN111683192B (zh) 2020-06-11 2020-06-11 图像处理方法及相关产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010529906.8A CN111683192B (zh) 2020-06-11 2020-06-11 图像处理方法及相关产品

Publications (2)

Publication Number Publication Date
CN111683192A CN111683192A (zh) 2020-09-18
CN111683192B true CN111683192B (zh) 2023-03-21

Family

ID=72454849

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010529906.8A Active CN111683192B (zh) 2020-06-11 2020-06-11 图像处理方法及相关产品

Country Status (1)

Country Link
CN (1) CN111683192B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112184581B (zh) * 2020-09-27 2023-09-05 腾讯科技(深圳)有限公司 图像处理方法、装置、计算机设备及介质
CN114827482B (zh) * 2021-01-28 2023-11-03 抖音视界有限公司 图像亮度的调整方法、装置、电子设备及介质
CN113436263B (zh) * 2021-08-25 2021-12-21 深圳市大道智创科技有限公司 一种基于图像处理的特征点提取方法及系统
CN116152094B (zh) * 2023-01-09 2024-02-09 辉羲智能科技(上海)有限公司 自动驾驶高动态场景图像优化方法、系统、终端及介质
CN116188314A (zh) * 2023-02-28 2023-05-30 抖音视界有限公司 一种图像处理方法、装置、电子设备及存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1744665A (zh) * 2005-09-14 2006-03-08 上海广电(集团)有限公司中央研究院 一种逐点提高视频图像清晰度的处理方法
US7639893B2 (en) * 2006-05-17 2009-12-29 Xerox Corporation Histogram adjustment for high dynamic range image mapping
CN103824250B (zh) * 2014-01-24 2016-09-07 浙江大学 基于gpu的图像色调映射方法
CN103916669B (zh) * 2014-04-11 2017-06-13 浙江宇视科技有限公司 高动态范围图像压缩方法及装置
CN108702514B (zh) * 2016-03-09 2020-07-07 华为技术有限公司 一种高动态范围图像处理方法及装置
CN106447677A (zh) * 2016-10-12 2017-02-22 广州视源电子科技股份有限公司 图像处理方法和装置
CN109191395B (zh) * 2018-08-21 2021-03-09 深圳创维-Rgb电子有限公司 图像对比度增强方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN111683192A (zh) 2020-09-18

Similar Documents

Publication Publication Date Title
CN111683192B (zh) 图像处理方法及相关产品
CN109191395B (zh) 图像对比度增强方法、装置、设备及存储介质
CN109801240B (zh) 一种图像增强方法以及图像增强装置
CN109934776B (zh) 模型生成方法、视频增强方法、装置及计算机可读存储介质
CN108665428B (zh) 图像增强方法、装置、设备及存储介质
US8532426B2 (en) Image processing apparatus and image processing method
CN105407296B (zh) 实时视频增强方法和装置
CN111292269B (zh) 图像色调映射方法、计算机装置及计算机可读存储介质
KR102317613B1 (ko) 로컬라이징된 콘트라스트 향상을 위한 시스템들 및 방법들
US20090317017A1 (en) Image characteristic oriented tone mapping for high dynamic range images
CN110706172B (zh) 基于自适应混沌粒子群优化的低照度彩色图像增强方法
CN105046658B (zh) 一种低照度图像处理方法和装置
US20090097775A1 (en) Visual processing device, visual processing method, program, display device, and integrated circuit
CN109817170B (zh) 像素补偿方法、装置和终端设备
CN108335272B (zh) 一种拍摄图片的方法及设备
CN107993189B (zh) 一种基于局部分块的图像色调动态调节方法和装置
CN109686342B (zh) 一种图像处理方法及装置
CN108009997B (zh) 一种调整图像对比度的方法及装置
CN111784609A (zh) 图像动态范围压缩方法、装置及计算机可读存储介质
US10609303B2 (en) Method and apparatus for rapid improvement of smog/low-light-level image using mapping table
CN108495054B (zh) 高动态范围信号的处理方法、装置及计算机存储介质
GB2552238A (en) Blending images
JP7265316B2 (ja) 画像処理装置及び画像処理方法
CN109685727B (zh) 图像处理方法
CN115471413A (zh) 图像处理方法及装置、计算机可读存储介质和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant