CN109348212A - 一种图像噪声确定方法及终端设备 - Google Patents

一种图像噪声确定方法及终端设备 Download PDF

Info

Publication number
CN109348212A
CN109348212A CN201811142655.7A CN201811142655A CN109348212A CN 109348212 A CN109348212 A CN 109348212A CN 201811142655 A CN201811142655 A CN 201811142655A CN 109348212 A CN109348212 A CN 109348212A
Authority
CN
China
Prior art keywords
target
image
corresponding relationship
value
brightness value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811142655.7A
Other languages
English (en)
Other versions
CN109348212B (zh
Inventor
郑国卿
王国刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Hangzhou Co Ltd
Original Assignee
Vivo Mobile Communication Hangzhou Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Hangzhou Co Ltd filed Critical Vivo Mobile Communication Hangzhou Co Ltd
Priority to CN201811142655.7A priority Critical patent/CN109348212B/zh
Publication of CN109348212A publication Critical patent/CN109348212A/zh
Application granted granted Critical
Publication of CN109348212B publication Critical patent/CN109348212B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

本发明实施例公开了一种图像噪声确定方法及终端设备,涉及通信技术领域,可以解决在对多个图像进行对齐、融合去噪的过程中,会耗费大量的实时资源的问题。方案为:获取目标感光度值和目标图像的目标亮度值,该目标感光度值为拍摄目标图像的目标设备的感光度值;根据目标感光度值和目标亮度值,查询对应关系表,得到目标图像的目标噪声数据;其中,对应关系表用于表征拍摄图像的终端的感光度值、图像的亮度值和图像的噪声数据之间的对应关系。本发明实施例应用于确定图像噪声的过程中。

Description

一种图像噪声确定方法及终端设备
技术领域
本发明实施例涉及通信技术领域,尤其涉及一种图像噪声确定方法及终端设备。
背景技术
通常,在进行多个图像对齐、融合去噪时,可以先计算每个图像的噪声方差值的大小,然后再根据每个图像的噪声方差的大小进行图像融合,从而使得融合后的图像可以具有较好的去噪效果。
例如,可以采用单图像噪声估计方法,计算一个图像的噪声方差值的大小。具体的,可以获取每个待融合图像的亮度值等参数,并根据这些参数实时计算每个待融合图像的噪声方差值,然后再根据得到的每个待融合图像的噪声方差值,进行图像的对齐与融合去噪,从而得到去噪效果较好的融合图像。
但是,上述方法中,由于在对多个图像进行对齐、融合去噪的过程中,需要实时地对每个待融合图像均进行噪声方差值的计算,因此会耗费大量的实时资源。
发明内容
本发明实施例提供一种图像噪声确定方法及终端设备,可以解决在对多个图像进行对齐、融合去噪的过程中,会耗费大量的实时资源的问题。
为了解决上述技术问题,本发明实施例采用如下技术方案:
本发明实施例的第一方面,提供一种图像噪声确定方法,该图像噪声确定方法包括:获取目标感光度(ISO)值和目标图像的目标亮度值,该目标感光度值为拍摄目标图像的目标设备的感光度值;根据目标感光度值和目标亮度值,查询对应关系表,得到目标图像的目标噪声数据;其中,对应关系表用于表征拍摄图像的终端的感光度值、图像的亮度值和图像的噪声数据之间的对应关系。
本发明实施例的第二方面,提供一种终端设备,该终端设备可以包括:获取单元和查询单元。其中,获取单元,用于获取目标感光度值和目标图像的目标亮度值,该目标感光度值为拍摄目标图像的目标设备的感光度值。查询单元,用于根据获取单元获取的目标感光度值和目标亮度值,查询对应关系表,得到目标图像的目标噪声数据。其中,对应关系表用于表征拍摄图像的终端的感光度值、图像的亮度值和图像的噪声数据之间的对应关系。
本发明实施例的第三方面,提供一种终端设备,该终端设备包括处理器、存储器及存储在存储器上并可在处理器上运行的计算机程序,该计算机程序被处理器执行时实现如第一方面所述的图像噪声确定方法的步骤。
本发明实施例的第四方面,提供一种计算机可读存储介质,该计算机可读存储介质上存储计算机程序,该计算机程序被处理器执行时实现如第一方面所述的图像噪声确定方法的步骤。
在本发明实施例中,终端设备可以获取目标感光度值(该目标感光度值为拍摄目标图像的目标设备的感光度值),并根据该目标感光度值和目标亮度值,查询对应关系表(该对应关系表用于表征拍摄图像的终端的感光度值、图像的亮度值和图像的噪声数据之间的对应关系),得到目标图像的目标噪声数据。由于终端设备可以直接根据获取的目标感光度值和目标亮度值,查询对应关系表,以得到目标图像的目标噪声数据,而无需实时地每次均对目标图像进行噪声数据的计算,因此可以节省计算噪声数据的实时资源。
附图说明
图1为本发明实施例提供的一种安卓操作系统的架构示意图;
图2为本发明实施例提供的一种图像噪声确定方法的示意图之一;
图3为本发明实施例提供的一种图像噪声确定方法的示意图之二;
图4为本发明实施例提供的一种图像噪声确定方法的示意图之三;
图5为一种图像的亮度值与噪声数据的分布结果的实例示意图;
图6为本发明实施例提供的一种P个第二对应关系的实例示意图;
图7为本发明实施例提供的一种终端设备的结构示意图之一;
图8为本发明实施例提供的一种终端设备的结构示意图之二;
图9为本发明实施例提供的一种终端设备的结构示意图之三;
图10为本发明实施例提供的一种终端设备的硬件示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例的说明书和权利要求书中的术语“第一”和“第二”等是用于区别不同的对象,而不是用于描述对象的特定顺序。例如,第一对应关系和第二对应关系等是用于区别不同的对应关系,而不是用于描述对应关系的特定顺序。在本发明实施例的描述中,除非另有说明,“多个”的含义是指两个或两个以上。
本文中术语“和/或”,是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。本文中符号“/”表示关联对象是或者的关系,例如A/B表示A或者B。
在本发明实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本发明实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
本发明实施例提供一种图像噪声确定方法及终端设备,终端设备可以获取目标感光度值(该目标感光度值为拍摄目标图像的目标设备的感光度值),并根据该目标感光度值和目标亮度值,查询对应关系表(该对应关系表用于表征拍摄图像的终端的感光度值、图像的亮度值和图像的噪声数据之间的对应关系),得到目标图像的目标噪声数据。由于终端设备可以直接根据获取的目标感光度值和目标亮度值,查询对应关系表,以得到目标图像的目标噪声数据,而无需实时地每次均对目标图像进行噪声数据的计算,因此可以节省计算噪声数据的实时资源。
本发明实施例提供的图像噪声确定方法及终端设备,可以应用于确定图像噪声的过程中。具体的,可以应用于终端设备根据目标感光度和M个第一图像的亮度值确定M个目标对应关系,以确定M个第一噪声数据的过程中。
本发明实施例中的终端设备可以为具有操作系统的终端设备。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本发明实施例不作具体限定。
下面以安卓操作系统为例,介绍一下本发明实施例提供的图像噪声确定方法所应用的软件环境。
如图1所示,为本发明实施例提供的一种可能的安卓操作系统的架构示意图。在图1中,安卓操作系统的架构包括4层,分别为:应用程序层、应用程序框架层、系统运行库层和内核层(具体可以为Linux内核层)。
其中,应用程序层包括安卓操作系统中的各个应用程序(包括系统应用程序和第三方应用程序)。
应用程序框架层是应用程序的框架,开发人员可以在遵守应用程序的框架的开发原则的情况下,基于应用程序框架层开发一些应用程序。
系统运行库层包括库(也称为系统库)和安卓操作系统运行环境。库主要为安卓操作系统提供其所需的各类资源。安卓操作系统运行环境用于为安卓操作系统提供软件环境。
内核层是安卓操作系统的操作系统层,属于安卓操作系统软件层次的最底层。内核层基于Linux内核为安卓操作系统提供核心系统服务和与硬件相关的驱动程序。
以安卓操作系统为例,本发明实施例中,开发人员可以基于上述如图1所示的安卓操作系统的系统架构,开发实现本发明实施例提供的图像噪声确定方法的软件程序,从而使得该图像噪声确定方法可以基于如图1所示的安卓操作系统运行。即处理器或者终端设备可以通过在安卓操作系统中运行该软件程序实现本发明实施例提供的图像噪声确定方法。
下面结合附图,通过具体的实施例及其应用场景对本发明实施例提供的一种图像噪声确定方法及终端设备进行详细地说明。
目前,现有技术中,由于在对多个图像进行对齐、融合去噪的过程中,需要实时地对每个待融合图像均进行噪声方差值的计算,因此会耗费大量的实时资源。
为了解决上述技术问题,本发明实施例提供的一种图像噪声确定方法,图2示出了本发明实施例提供的一种图像噪声确定方法的流程图,该方法可以应用于具有如图1所示的安卓操作系统的终端设备。如图2所示,本发明实施例提供的图像噪声确定方法可以包括下述的步骤201和步骤202。
步骤201、终端设备获取目标感光度值和目标图像的目标亮度值。
本发明实施例中,上述目标感光度值为拍摄目标图像的目标设备(例如摄像头)的感光度值。
可选的,本发明实施例中,终端设备可以在目标拍摄环境亮度值下拍摄目标图像,以获取目标图像的目标亮度值。
本发明实施例中,在通过一个目标设备采集目标图像时,终端设备可以获取该目标设备的感光度值。
需要说明的是,感光度值可以用于衡量设备对于光的灵敏程度,由敏感度测量学及测量数个数值来决定。
步骤202、终端设备根据目标感光度值和目标亮度值,查询对应关系表,得到目标图像的目标噪声数据。
本发明实施例中,上述对应关系表用于表征拍摄图像的终端的感光度值、图像的亮度值和图像的噪声数据之间的对应关系。
可选的,本发明实施例中,图像的噪声数据可以为图像的噪声方差值。
可选的,本发明实施例中,结合图2,如图3所示,上述步骤202具体可以通过下述的步骤202a和步骤202b实现。
步骤202a、终端设备根据目标感光度值,从终端设备中保存的对应关系表中确定N个第一对应关系。
本发明实施例中,上述N个第一对应关系中的每个第一对应关系为一个第一感光度值、一个第一亮度值以及一个第一噪声数据之间的对应关系,该每个第一对应关系中的第一感光度值均与目标感光度值相同,N为大于或等于1的整数。
本发明实施例中,终端设备在获取到目标感光度值之后,可以将该目标感光度值与终端设备中保存的多个对应关系(即下述实施中的P个第二对应关系)中的每个对应关系对应的感光度值对比,并将与目标感光度值相同的感光度值对应的N个对应关系确定为N个第一对应关系。
可选的,本发明实施例中,第一噪声数据可以为第一噪声方差值。
示例性的,如表1所示,其以表格的形式示出了本发明实施例提供的N个第一对应关系(以N=4为例进行说明)的实例,4个第一对应关系中的每个第一对应关系为一个第一感光度值、一个第一亮度值以及一个第一噪声数据之间的对应关系。
表1
上述表1中,对应关系1中的第一感光度值为a、第一亮度值为x1、第一噪声数据为y1;对应关系2中的第一感光度值为a、第一亮度值为x2、第一噪声数据为y2;对应关系3中的第一感光度值为a、第一亮度值为x3、第一噪声数据为y3;对应关系4中的第一感光度值为a、第一亮度值为x4、第一噪声数据为y4。结合表1,若终端设备获取的目标感光度值为a,则终端设备确定的N(以N=4为例)个第一对应关系分别为对应关系1、对应关系2、对应关系3和对应关系4。
步骤202b、终端设备根据目标亮度值,从N个第一对应关系中确定目标对应关系。
本发明实施例中,上述目标对应关系中的第一亮度值与目标亮度值相同,该目标对应关系中的第一噪声数据用于去除目标图像中的噪声。
可选的,在本发明实施例的一种可能的实现方式中,在终端设备采集M个目标图像的情况下,针对M个目标图像中的每个目标图像,终端设备可以从N个第一对应关系中查找与一个目标图像的亮度值相同的第一对应关系(即为一个目标对应关系),以得到M个目标对应关系,每个目标对应关系中的第一亮度值分别与一个第一图像的亮度值相同,一个目标对应关系中的第一噪声数据用于去除亮度值与一个目标对应关系中的第一亮度值相同的第一图像中的噪声。
示例性的,假设M=3,三个目标图像分别为图像1、图像2和图像3,且图像1的亮度值为x1,图像2的亮度值为x3,图像3的亮度值为x4。结合表1,终端设备可以根据图像1的亮度值x1,从对应关系1至对应关系4中查找与图像1的亮度值x1相同的第一亮度值(即第一亮度值为x1),并将第一亮度值x1对应的对应关系1确定为一个目标对应关系(例如目标对应关系1);终端设备可以根据图像2的亮度值x3,从对应关系1至对应关系4中查找与图像2的亮度值x3相同的第一亮度值(即第一亮度值为x3),并将第一亮度值x3对应的对应关系3确定为一个目标对应关系(例如目标对应关系2);终端设备可以根据图像3的亮度值x4,从对应关系1至对应关系4中查找与图像3的亮度值x4相同的第一亮度值(即第一亮度值为x4),并将第一亮度值x4对应的对应关系4确定为一个目标对应关系(例如目标对应关系3);如此,终端设备从4个第一对应关系中确定的3个目标对应关系分别为对应关系1、对应关系3以及对应关系4。
并且,上述目标对应关系1中的第一噪声数据y1用于去除亮度值为x1的图像1中的噪声;上述目标对应关系2中的第一噪声数据y3用于去除亮度值为x3的图像2中的噪声;上述目标对应关系3中的第一噪声数据y4用于去除亮度值为x4的图像3中的噪声。
可以理解,本发明实施例中,终端设备在对待融合的M个目标图像进行对齐、融合去噪时,可以采用确定的M个目标对应关系中每个目标对应关系中的第一噪声数据,分别对待融合的M个目标图像中的一个目标图像(一个目标图像的亮度值与一个目标对应关系中的第一亮度值相同)进行去噪处理。
需要说明的是,本发明实施例中,上述M个目标图像为同一个设备针对同一个第一待拍摄对象进行拍摄时采集的M个不同的图像。
本发明实施例中,由于终端设备可以根据目标感光度值,从终端设备中保存的对应关系表中确定N个第一对应关系(每个第一对应关系为一个第一感光度值、一个第一亮度值以及一个第一噪声数据之间的对应关系,每个第一对应关系中的第一感光度值均与目标感光度值相同),并根据目标亮度值,从N个第一对应关系中确定目标对应关系,以确定目标噪声数据,因此终端设备无需实时地每次均对目标图像进行噪声数据的计算,从而可以节省计算噪声数据的实时资源。
本发明实施例提供一种图像噪声确定方法,终端设备可以获取目标感光度值(该目标感光度值为拍摄目标图像的目标设备的感光度值),并根据该目标感光度值和目标亮度值,查询对应关系表(该对应关系表用于表征拍摄图像的终端的感光度值、图像的亮度值和图像的噪声数据之间的对应关系),得到目标图像的目标噪声数据。由于终端设备可以直接根据获取的目标感光度值和目标亮度值,查询对应关系表,以得到目标图像的目标噪声数据,而无需实时地每次均对目标图像进行噪声数据的计算,因此可以节省计算噪声数据的实时资源。
可选的,本发明实施例中,结合图2,如图4所示,在上述步骤201之前,本发明实施例提供的图像噪声确定方法还可以包括下述的步骤301至步骤303。
步骤301、终端设备通过第一设备在不同的第一亮度值下进行拍摄,得到多个第一图像。
需要说明的是,本发明实施例中,上述多个第一图像为通过同一个第一设备针对同一个第二待拍摄对象进行拍摄时采集的多个不同的图像;该第二待拍摄对象与第一待拍摄对象相同,或者,第二待拍摄对象与第一待拍摄对象不同。
可选的,本发明实施例中,上述第二待拍摄对象可以为标准色卡。
可选的,本发明实施例中,用户可以使用可调节光线的设备调整当前的环境亮度,或者通过距离光源的距离调整当前的环境亮度,并通过终端设备拍摄多次标准色卡,以采集多个第一图像,并获取采集该多个第一图像的设备(例如摄像头)的感光度值。
步骤302、终端设备获取第一感光度值和多个第一图像的第一噪声数据。
本发明实施例中,上述第一感光度值为第一设备的感光度值。
本发明实施例中,终端设备可以采集多个第一图像,并获取每个第一图像的第一亮度值和每个第一图像的第一噪声数据。
可选的,本发明实施例中,每个第一图像的第一亮度值和每个第一图像的第一噪声数据均由以下步骤S1至步骤S3获取。
步骤S1、终端设备获取一个第一图像中的K个子图像。
本发明实施例中,上述K个子图像中的每个子图像为通过一个色彩通道获取的,K为大于1的正整数。
可选的,本发明实施例中,K可以为4。
可选的,本发明实施例中,终端设备可以通过RGGB四个色彩通道分别获取一个子图像,以得到四个子图像。
可选的,本发明实施例中,终端设备可以获取N个第一图像中每个第一图像的RAW格式的图像数据,然后获取每个第一图像的RAW格式的图像数据中的K个子图像数据。
步骤S2、终端设备获取每个子图像的亮度值和每个子图像的噪声数据。
可选的,本发明实施例中,终端设备可以采用预设方式获取每个子图像的亮度值和每个子图像的噪声数据。
可选的,本发明实施例中,在执行上述步骤S1之后,本发明实施例提供的图像噪声确定方法还可以包括下述的步骤S4,并且上述步骤S2具体可以通过下述的步骤S2a实现。
步骤S4、终端设备将K个子图像中的每个子图像的图像数据分别与暗电平相减,以得到处理后的每个子图像。
可选的,本发明实施例中,一个子图像的图像数据为该一个子图像的RAW格式的图像数据。
可选的,本发明实施例中,上述暗电平为0.0588。
步骤S2a、终端设备获取处理后的每个子图像的亮度值和处理后的每个子图像的噪声数据。
步骤S3、终端设备将每个子图像的亮度值作为一个第一图像的第一亮度值,并将每个子图像的噪声数据作为一个第一图像的第一噪声数据。
可选的,本发明实施例中,终端设备可以将每个子图像分割为8×8的小块,每个小块之间在第一方向(例如X轴方向)与第二方向(例如Y轴方向)上都有四个像素的重叠;并对每个小块求方差值,将方差值小于或者等于预设阈值的小块,确定为符合弱纹理条件的小块;然后建立m×n的矩阵Q以存储数据,其中m为亮度值个数(即所有子图像包括的小块的个数)的三倍,n为一个固定常数(例如,m=768,n=100),并对每个小块作离散余弦变换(Discrete Cosine Transform,DCT),以及计算每个小块的平均亮度,将DCT变换后的最高频的三个系数存入矩阵Q的对应亮度中,同一亮度下如有多个小块,DCT变换后得到的高频系数依次往后排列储存;如果矩阵Q中任意亮度的参与计算的小块个数小于预设个数(例如预设个数为10个),则该亮度下存储的所有数据不参与计算,如果矩阵Q中任意亮度的参与计算的小块个数大于或者等于预设个数,则对于这些参与计算小块个数达到预设个数的亮度,分别求存储在该亮度下的三个高频的所有系数的方差值并取这三个方差的平均值,作为亮度所对应的噪声数据。
步骤303、终端设备根据多个第一图像的第一亮度值、第一感光度值和多个第一图像的第一噪声数据,建立N个第一对应关系。
可以理解,本发明实施例中,针对N个第一对应关系中的每个第一对象关系,终端设备可以根据第一感光度值、一个第一图像的第一亮度值以及该一个第一图像的第一噪声数据,建立一个第一对应关系,以得到N个第一对应关系。
可选的,本发明实施例中,上述N个第一对应关系由第一公式表示,该第一公式为:
其中,σ2(x)为每个第一对应关系中的一个第一噪声数据,α为N个第一对应关系,x为每个第一对应关系中的一个第一亮度值,T为预设亮度值,β为暗电平。
本发明实施例中,由于终端设备可以获取每个子图像的亮度值和每个子图像的噪声数据,并根据每个子图像的亮度值和每个子图像的噪声数据建立N个第一对应关系,并且一个子图像的图像数据为该一个子图像的RAW格式的图像数据(RAW格式的图像数据对应的噪声分布比较符合理想的噪声模型),因此可以提高噪声计算的准确性。
示例性的,如图5中的(A)所示,示出了采用现有技术的方法得到的图像的亮度值与噪声数据的分布结果示意图。在获取多个图像的亮度值L与噪声数据σ2之间的对应关系时,采用的是YUV格式的图像计算得到图像的噪声数据,因此YUV格式的图像的图像内容会影响图像的噪声数据的结果(即图像的每个小块的噪声数据分布无规律,即为非线性关系,且差距比较大)。
又示例性的,如图5中的(B)所示,示出了采用本发明实施例提供的采用图像噪声确定方法得到的图像的亮度值与噪声数据的分布结果示意图。当第一感光度值为50时,RAW格式的图像数据对应的图像的每个小块的噪声数据分布呈线性关系(图5中的(B)中以实线示意)。在图像的亮度值L在0至0.9范围时,图像的亮度值L与第一噪声数据σ2呈线性增长关系;在图像的亮度值L大于0.9,且小于1-β时,图像的亮度值L与噪声数据σ2呈线性下降关系;在图像的亮度值L大于1-β时,噪声数据σ2为0。
可选的,本发明实施例中,终端设备中包括P个第二对应关系,每个第二对应关系为一个感光度值和一个对应关系集合之间的对应关系,N个第一对应关系为一个对应关系集合中的对应关系,P个第二对应关系由第二公式表示,该第二公式为:σ2=(α×S+b)×L;其中,σ2为噪声数据,S为感光度值,αN个第一对应关系,b为固定常数,L为亮度值。
可以理解,本发明实施例中,终端设备中保存P个第二对应关系,终端设备获取目标感光度值之后,可以将该目标感光度值与P个第二对应关系中每个第二对应关系中的感光度值对比,在一个第二对应关系中的感光度值与目标感光度值相同时,将该一个第二对应关系中的对应关系集合中包括的对应关系确定为N个第一对应关系;然后终端设备再根据目标图像的目标亮度值从N个第一对应关系中确定目标对应关系。
示例性的,如表2所示,其以表格的形式示出了本发明实施例提供的P个第二对应关系(以P=3为例进行说明)的实例,3个第二对应关系中的每个第二对应关系为一个感光度值和一个对应关系集合之间的对应关系。
表2
上述表2中,三个第二对应关系分别为第二对应关系1、第二对应关系2和第二对应关系3。其中,第二对应关系1为感光度值为50的感光度值和对应关系集合1(该对应关系集合1中包括对应关系1至对应关系4)之间的对应关系;第二对应关系2为感光度值为100的感光度值和对应关系集合2(该对应关系集合2中包括对应关系5至对应关系8)之间的对应关系;第二对应关系3为感光度值为150的感光度值和对应关系集合3(该对应关系集合3中包括对应关系9至对应关系11)之间的对应关系。
结合表1和表2,假设终端设备获取的目标感光度值为50,则终端设备确定第二对应关系为第二对应关系1,并将第二对应关系1中的对应关系集合1中包括的对应关系(即对应关系1至对应关系4)确定为N(N=4)个第一对应关系;然后终端设备可以根据M个目标图像的亮度值(例如M=3,三个目标图像分别为图像1、图像2和图像3,且图像1的亮度值为x1,图像2的亮度值为x3,图像3的亮度值为x4),从该4个第一对应关系中确定三个目标对应关系分别为对应关系1、对应关系3以及对应关系4。
示例性的,如图6所示,示出了本发明实施例提供的P个第二对应关系的示意图。不同的感光度值对应不同的比值(噪声数据与亮度值的比值,即σ2L),感光度值与σ2L呈线性关系。
本发明实施例中,由于终端设备可以预先保存P个第二对应关系,每个第二对应关系为一个感光度值和一个对应关系集合之间的对应关系,N个第一对应关系为一个对应关系集合中的对应关系,以使得终端设备在获取目标感光度值之后,可以从P个第二对应关系中确定M个目标对应关系,以确定M个第一噪声数据,而无需实时地对每个待融合的目标图像均进行噪声数据的计算,从而可以节省计算噪声数据的实时资源。
图7示出了本发明实施例中涉及的终端设备的一种可能的结构示意图。如图7所示,终端设备70可以包括:获取单元71和查询单元72。
其中,获取单元71,用于获取单元,用于获取目标感光度值和目标图像的目标亮度值,该目标感光度值为拍摄目标图像的目标设备的感光度值。查询单元72,用于根据获取单元71获取的目标感光度值和目标亮度值,查询对应关系表,得到目标图像的目标噪声数据。其中,对应关系表用于表征拍摄图像的终端的感光度值、图像的亮度值和图像的噪声数据之间的对应关系。
在一种可能的实现方式中,查询单元72,具体用于根据获取单元71获取的目标感光度值,从终端设备中保存的对应关系表中确定N个第一对应关系,每个第一对应关系为一个第一感光度值、一个第一亮度值以及一个第一噪声数据之间的对应关系,每个第一对应关系中的第一感光度值均与目标感光度值相同,N为大于或等于1的整数;并根据获取单元71获取的目标亮度值,从N个第一对应关系中确定目标对应关系,该目标对应关系中的第一亮度值与目标亮度值相同,该目标对应关系中的第一噪声数据用于去除目标图像中的噪声。
在一种可能的实现方式中,结合图7,如图8所示,本发明实施例提供的终端设备70还可以包括:拍摄单元73和建立单元74。其中,拍摄单元73,用于在获取单元71获取目标感光度值和目标图像的目标亮度值之前,通过第一设备在不同的第一亮度值下进行拍摄,得到多个第一图像。获取单元71,还用于获取第一感光度值和多个第一图像的第一噪声数据,该第一感光度值为第一设备的感光度值。建立单元74,用于根据获取单元71获取的多个第一图像的第一亮度值、第一感光度值和多个第一图像的第一噪声数据,建立N个第一对应关系。
在一种可能的实现方式中,针对每个第一图像的第一亮度值和每个第一图像的第一噪声数据,获取单元71,具体用于获取一个第一图像中的K个子图像,每个子图像为通过一个色彩通道获取的,K为大于1的正整数;并获取每个子图像的亮度值和每个子图像的噪声数据;以及将每个子图像的亮度值作为一个第一图像的第一亮度值,并将每个子图像的噪声数据作为一个第一图像的第一噪声数据。
在一种可能的实现方式中,结合图7,如图9所示,本发明实施例提供的终端设备70还可以包括:处理单元75。其中,处理单元75,用于在获取单元71获取一个第一图像中的K个子图像之后,将获取单元71获取的K个子图像中的每个子图像的图像数据分别与暗电平相减,以得到处理后的每个子图像。获取单元71,具体用于获取处理单元75得到的处理后的每个子图像的亮度值和处理后的每个子图像的噪声数据。
在一种可能的实现方式中,N个第一对应关系由第一公式表示,该第一公式为:
其中,σ2(x)为每个第一对应关系中的一个第一噪声数据,α为N个第一对应关系,x为每个第一对应关系中的一个第一亮度值,T为预设亮度值,β为暗电平。
在一种可能的实现方式中,终端设备中包括P个第二对应关系,每个第二对应关系为一个感光度值和一个对应关系集合之间的对应关系,N个第一对应关系为一个对应关系集合中的对应关系,P个第二对应关系由第二公式表示,该第二公式为:σ2=(α×S+b)×L;其中,σ2为噪声数据,S为感光度值,αN个第一对应关系,b为固定常数,L为亮度值。
本发明实施例提供的终端设备能够实现上述方法实施例中终端设备实现的各个过程,为避免重复,详细描述这里不再赘述。
本发明实施例提供一种终端设备,终端设备可以获取目标感光度值(该目标感光度值为拍摄目标图像的目标设备的感光度值),并根据该目标感光度值和目标亮度值,查询对应关系表(该对应关系表用于表征拍摄图像的终端的感光度值、图像的亮度值和图像的噪声数据之间的对应关系),得到目标图像的目标噪声数据。由于终端设备可以直接根据获取的目标感光度值和目标亮度值,查询对应关系表,以得到目标图像的目标噪声数据,而无需实时地每次均对目标图像进行噪声数据的计算,因此可以节省计算噪声数据的实时资源。
图10为实现本发明各个实施例的一种终端设备的硬件示意图。如图10所示,该终端设备100包括但不限于:射频单元101、网络模块102、音频输出单元103、输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、处理器110、以及电源111等部件。
需要说明的是,本领域技术人员可以理解,图10中示出的终端设备结构并不构成对终端设备的限定,终端设备可以包括比图10所示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,终端设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中,处理器110,用于获取目标感光度值和目标图像的目标亮度值,该目标感光度值为拍摄目标图像的目标设备的感光度值;根据目标感光度值和目标亮度值,查询对应关系表,得到目标图像的目标噪声数据;其中,对应关系表用于表征拍摄图像的终端的感光度值、图像的亮度值和图像的噪声数据之间的对应关系。
本发明实施例提供一种终端设备,终端设备可以获取目标感光度值(该目标感光度值为拍摄目标图像的目标设备的感光度值),并根据该目标感光度值和目标亮度值,查询对应关系表(该对应关系表用于表征拍摄图像的终端的感光度值、图像的亮度值和图像的噪声数据之间的对应关系),得到目标图像的目标噪声数据。由于终端设备可以直接根据获取的目标感光度值和目标亮度值,查询对应关系表,以得到目标图像的目标噪声数据,而无需实时地每次均对目标图像进行噪声数据的计算,因此可以节省计算噪声数据的实时资源。
应理解的是,本发明实施例中,射频单元101可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器110处理;另外,将上行的数据发送给基站。通常,射频单元101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元101还可以通过无线通信系统与网络和其他设备通信。
终端设备通过网络模块102为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元103可以将射频单元101或网络模块102接收的或者在存储器109中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元103还可以提供与终端设备100执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元103包括扬声器、蜂鸣器以及受话器等。
输入单元104用于接收音频或视频信号。输入单元104可以包括图形处理器(Graphics Processing Unit,GPU)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或其它存储介质)中或者经由射频单元101或网络模块102进行发送。麦克风1042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元101发送到移动通信基站的格式输出。
终端设备100还包括至少一种传感器105,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板1061的亮度,接近传感器可在终端设备100移动到耳边时,关闭显示面板1061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别终端设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器105还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元106用于显示由用户输入的信息或提供给用户的信息。显示单元106可包括显示面板1061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板1061。
用户输入单元107可用于接收输入的数字或字符信息,以及产生与终端设备的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元107包括触控面板1071以及其他输入设备1072。触控面板1071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1071上或在触控面板1071附近的操作)。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器110,接收处理器110发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1071。除了触控面板1071,用户输入单元107还可以包括其他输入设备1072。具体地,其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板1071可覆盖在显示面板1061上,当触控面板1071检测到在其上或附近的触摸操作后,传送给处理器110以确定触摸事件的类型,随后处理器110根据触摸事件的类型在显示面板1061上提供相应的视觉输出。虽然在图10中,触控面板1071与显示面板1061是作为两个独立的部件来实现终端设备的输入和输出功能,但是在某些实施例中,可以将触控面板1071与显示面板1061集成而实现终端设备的输入和输出功能,具体此处不做限定。
接口单元108为外部装置与终端设备100连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元108可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到终端设备100内的一个或多个元件或者可以用于在终端设备100和外部装置之间传输数据。
存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器109可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器110是终端设备的控制中心,利用各种接口和线路连接整个终端设备的各个部分,通过运行或执行存储在存储器109内的软件程序和/或模块,以及调用存储在存储器109内的数据,执行终端设备的各种功能和处理数据,从而对终端设备进行整体监控。处理器110可包括一个或多个处理单元;优选的,处理器110可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
终端设备100还可以包括给各个部件供电的电源111(比如电池),优选的,电源111可以通过电源管理系统与处理器110逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,终端设备100包括一些未示出的功能模块,在此不再赘述。
优选的,本发明实施例还提供一种终端设备,包括如图10所示的处理器110,存储器109,存储在存储器109上并可在所述处理器110上运行的计算机程序,该计算机程序被处理器110执行时实现上述方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。

Claims (10)

1.一种图像噪声确定方法,其特征在于,所述方法包括:
获取目标感光度值和目标图像的目标亮度值,所述目标感光度值为拍摄所述目标图像的目标设备的感光度值;
根据所述目标感光度值和所述目标亮度值,查询对应关系表,得到所述目标图像的目标噪声数据;
其中,所述对应关系表用于表征拍摄图像的终端的感光度值、图像的亮度值和图像的噪声数据之间的对应关系。
2.根据权利要求1所述的方法,其特征在于,所述根据所述目标感光度值和所述目标亮度值,查询对应关系表,得到所述目标图像的目标噪声数据,包括:
根据所述目标感光度值,从终端设备中保存的所述对应关系表中确定N个第一对应关系,每个第一对应关系为一个第一感光度值、一个第一亮度值以及一个第一噪声数据之间的对应关系,所述每个第一对应关系中的第一感光度值均与所述目标感光度值相同,N为大于或等于1的整数;
根据所述目标亮度值,从所述N个第一对应关系中确定目标对应关系,所述目标对应关系中的第一亮度值与所述目标亮度值相同,所述目标对应关系中的第一噪声数据用于去除所述目标图像中的噪声。
3.根据权利要求2所述的方法,其特征在于,所述获取目标感光度值和目标图像的目标亮度值之前,所述方法还包括:
通过第一设备在不同的第一亮度值下进行拍摄,得到多个第一图像;
获取所述第一感光度值和所述多个第一图像的第一噪声数据,所述第一感光度值为所述第一设备的感光度值;
根据所述多个第一图像的第一亮度值、所述第一感光度值和所述多个第一图像的第一噪声数据,建立所述N个第一对应关系。
4.根据权利要求3所述的方法,其特征在于,每个第一图像的第一亮度值和所述每个第一图像的第一噪声数据均由以下方法获取:
获取一个第一图像中的K个子图像,每个子图像为通过一个色彩通道获取的,K为大于1的正整数;
获取每个子图像的亮度值和所述每个子图像的噪声数据;
将所述每个子图像的亮度值作为所述一个第一图像的第一亮度值,并将所述每个子图像的噪声数据作为所述一个第一图像的第一噪声数据。
5.根据权利要求4所述的方法,其特征在于,所述获取一个第一图像中的K个子图像之后,所述方法还包括:
将所述K个子图像中的每个子图像的图像数据分别与暗电平相减,以得到处理后的所述每个子图像;
所述获取每个子图像的亮度值和所述每个子图像的噪声数据,包括:
获取处理后的所述每个子图像的亮度值和处理后的所述每个子图像的噪声数据。
6.根据权利要求2至5中任一项所述的方法,其特征在于,所述N个第一对应关系由第一公式表示,所述第一公式为:
其中,σ2(x)为所述每个第一对应关系中的一个第一噪声数据,α为所述N个第一对应关系,x为所述每个第一对应关系中的一个第一亮度值,T为预设亮度值,β为暗电平。
7.根据权利要求2至5中任一项所述的方法,其特征在于,所述终端设备中包括P个第二对应关系,每个第二对应关系为一个感光度值和一个对应关系集合之间的对应关系,所述N个第一对应关系为一个对应关系集合中的对应关系,所述P个第二对应关系由第二公式表示,所述第二公式为:σ2=(α×S+b)×L;其中,σ2为噪声数据,S为感光度值,α为N个第一对应关系,b为固定常数,L为亮度值。
8.一种终端设备,其特征在于,所述终端设备包括:获取单元和查询单元;
所述获取单元,用于获取目标感光度值和目标图像的目标亮度值,所述目标感光度值为拍摄所述目标图像的目标设备的感光度值;
所述查询单元,用于根据所述获取单元获取的所述目标感光度值和所述目标亮度值,查询对应关系表,得到所述目标图像的目标噪声数据;
其中,所述对应关系表用于表征拍摄图像的终端的感光度值、图像的亮度值和图像的噪声数据之间的对应关系。
9.根据权利要求8所述的终端设备,其特征在于,所述查询单元,具体用于根据所述获取单元获取的所述目标感光度值,从终端设备中保存的所述对应关系表中确定N个第一对应关系,每个第一对应关系为一个第一感光度值、一个第一亮度值以及一个第一噪声数据之间的对应关系,所述每个第一对应关系中的第一感光度值均与所述目标感光度值相同,N为大于或等于1的整数;并根据所述获取单元获取的所述目标亮度值,从所述N个第一对应关系中确定目标对应关系,所述目标对应关系中的第一亮度值与所述目标亮度值相同,所述目标对应关系中的第一噪声数据用于去除所述目标图像中的噪声。
10.一种终端设备,其特征在于,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至7中任一项所述的图像噪声确定方法的步骤。
CN201811142655.7A 2018-09-28 2018-09-28 一种图像噪声确定方法及终端设备 Active CN109348212B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811142655.7A CN109348212B (zh) 2018-09-28 2018-09-28 一种图像噪声确定方法及终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811142655.7A CN109348212B (zh) 2018-09-28 2018-09-28 一种图像噪声确定方法及终端设备

Publications (2)

Publication Number Publication Date
CN109348212A true CN109348212A (zh) 2019-02-15
CN109348212B CN109348212B (zh) 2020-07-21

Family

ID=65307205

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811142655.7A Active CN109348212B (zh) 2018-09-28 2018-09-28 一种图像噪声确定方法及终端设备

Country Status (1)

Country Link
CN (1) CN109348212B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112669231A (zh) * 2020-12-23 2021-04-16 北京小米松果电子有限公司 图像处理方法、图像处理模型的训练方法、装置、介质
CN113286142A (zh) * 2021-05-20 2021-08-20 河南中全科技有限公司 一种基于人工智能的图像成像感光度预测方法及系统
CN113763487A (zh) * 2021-01-27 2021-12-07 北京沃东天骏信息技术有限公司 图像处理方法及装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104486618A (zh) * 2014-12-30 2015-04-01 浙江宇视科技有限公司 视频图像的噪声检测方法及装置
CN107635098A (zh) * 2017-10-30 2018-01-26 广东欧珀移动通信有限公司 高动态范围图像噪声去除方法、装置及设备

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104486618A (zh) * 2014-12-30 2015-04-01 浙江宇视科技有限公司 视频图像的噪声检测方法及装置
CN107635098A (zh) * 2017-10-30 2018-01-26 广东欧珀移动通信有限公司 高动态范围图像噪声去除方法、装置及设备

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112669231A (zh) * 2020-12-23 2021-04-16 北京小米松果电子有限公司 图像处理方法、图像处理模型的训练方法、装置、介质
CN112669231B (zh) * 2020-12-23 2024-03-05 北京小米松果电子有限公司 图像处理方法、图像处理模型的训练方法、装置、介质
CN113763487A (zh) * 2021-01-27 2021-12-07 北京沃东天骏信息技术有限公司 图像处理方法及装置
CN113286142A (zh) * 2021-05-20 2021-08-20 河南中全科技有限公司 一种基于人工智能的图像成像感光度预测方法及系统

Also Published As

Publication number Publication date
CN109348212B (zh) 2020-07-21

Similar Documents

Publication Publication Date Title
CN107580184B (zh) 一种拍摄方法及移动终端
CN109743498A (zh) 一种拍摄参数调整方法及终端设备
CN109688322A (zh) 一种生成高动态范围图像的方法、装置及移动终端
CN108989678A (zh) 一种图像处理方法、移动终端
CN107948498B (zh) 一种消除相机摩尔条纹方法及移动终端
CN107483836B (zh) 一种拍摄方法及移动终端
CN109743506A (zh) 一种图像拍摄方法及终端设备
CN110213485A (zh) 一种图像处理方法及终端
CN109005336A (zh) 一种图像拍摄方法及终端设备
CN109743503A (zh) 提示方法和终端
CN110069180A (zh) 一种功能控制方法及终端设备
CN109241832A (zh) 一种人脸活体检测的方法及终端设备
CN109819166A (zh) 一种图像处理方法和电子设备
CN109348212A (zh) 一种图像噪声确定方法及终端设备
CN109005314A (zh) 一种图像处理方法及终端
CN108174081B (zh) 一种拍摄方法及移动终端
CN109639887A (zh) 一种控制方法及终端设备
CN108833791A (zh) 一种拍摄方法和装置
CN108881723A (zh) 一种图像预览方法及终端
CN108898000A (zh) 一种解锁屏幕的方法及终端
CN109639981A (zh) 一种图像拍摄方法及移动终端
CN109327568A (zh) 一种切换摄像头的方法及移动终端
CN109547700A (zh) 拍照方法及终端
CN109443261A (zh) 折叠屏移动终端折叠角度的获取方法及移动终端
CN109274957A (zh) 一种深度图像拍摄方法及移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant