CN110572580B - 一种适于移动终端的拍照方法及移动终端 - Google Patents

一种适于移动终端的拍照方法及移动终端 Download PDF

Info

Publication number
CN110572580B
CN110572580B CN201910958743.2A CN201910958743A CN110572580B CN 110572580 B CN110572580 B CN 110572580B CN 201910958743 A CN201910958743 A CN 201910958743A CN 110572580 B CN110572580 B CN 110572580B
Authority
CN
China
Prior art keywords
exposure
mobile terminal
image frame
objects
photographing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910958743.2A
Other languages
English (en)
Other versions
CN110572580A (zh
Inventor
姜梦一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gree Electric Appliances Inc of Zhuhai
Original Assignee
Gree Electric Appliances Inc of Zhuhai
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gree Electric Appliances Inc of Zhuhai filed Critical Gree Electric Appliances Inc of Zhuhai
Priority to CN201910958743.2A priority Critical patent/CN110572580B/zh
Publication of CN110572580A publication Critical patent/CN110572580A/zh
Application granted granted Critical
Publication of CN110572580B publication Critical patent/CN110572580B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)

Abstract

本申请提供了一种于移动终端的拍照方法及移动终端,该拍照方法包括:在目标场景中进行图像取景以获得第一图像帧,所述第一图像帧中包括至少一个对象,所述至少一个对象包括目标对象;确定所述至少一个对象中每个对象的曝光权重;以及在所述目标场景中,根据所述每个对象的曝光权重进行曝光拍照。通过该拍照方法以及移动终端,使得移动终端能够根据多个对象的曝光权重进行区别性曝光,保证了曝光的准确度。

Description

一种适于移动终端的拍照方法及移动终端
技术领域
本发明涉及图像处理技术领域,并且更具体地,涉及一种于移动终端的拍照方法以及移动终端。
背景技术
随着移动终端的普及,越来越多的移动终端上配备了拍照功能,一般是在设备的后表面上配备一个单镜头照相机,或者同时在设备的前表面上配备另一个单镜头照相机。而随着拍摄对象的个数及运动形式也趋于多样化,当对场景中多个目标进行拍摄的时候,普通的拍摄方式通常无法兼顾多目标的曝光程度,从而导致其中一些目标曝光度不够,而一些目标则曝光过度,无法拍摄出理想的图像。
发明内容
针对上述现有技术中的问题,本申请提出了一种于移动终端的拍照方法及移动终端,其满足了多目标拍摄的要求,确保了所拍摄的图像能够兼顾到尽量多的目标并且曝光准确。
第一方面,本申请提供了一种于移动终端的拍照方法,包括:在目标场景中进行图像取景以获得第一图像帧,所述第一图像帧中包括至少一个对象,所述至少一个对象包括目标对象;确定所述至少一个对象中每个对象的曝光权重;以及在所述目标场景中,根据所述每个对象的曝光权重进行曝光拍照。通过该方面,使得移动终端能够根据多个对象的曝光权重进行区别性曝光,保证了曝光的准确定。
在第一方面的一个实施方式中,在目标场景中进行图像取景以获得第一图像帧之前,所述拍照方法还包括:确定多个对象的曝光等级,所述多个对象包括所述至少一个对象。
在第一方面的一个实施方式中,确定多个对象的曝光等级,包括:从当前视野中提取第二图像帧,所述第二图像帧包括所述多个对象;接收操作人员的等级输入指令,所述等级输入指令用于指示所述多个对象的曝光等级。
在第一方面的一个实施方式中,确定所述至少一个对象中每个对象的曝光权重,包括:计算所述每个对象在所述第一图像帧中的占比;根据所述每个对象的占比为所述每个对象分配相应的占比权重因子;以及针对所述每个对象,将所述占比权重因子与曝光权重因子的乘积确定为所述曝光权重,其中,所述曝光权重因子与所述曝光等级对应。通过该实施方式,使得依据目标权重因此及目标占比因子等因素自适应调整曝光权重,对多个目标进行正确曝光。
在第一方面的一个实施方式中,在确定多个对象的曝光等级之前,所述拍照方法还包括:对所述移动终端的拍照机构进行初始化。通过该实施方式,能够使得在需要调整目标对象时,可以对移动终端进行初始化,确保曝光结果的准确性。
第二方面,本申请提供了一种利用第一方面及其实施方式的拍照方法进行拍照的移动终端,该移动终端包括:至少一个第一摄像头,其用于在目标场景中进行图像取景以获得第一图像帧,所述第一图像帧中包括至少一个对象,所述至少一个对象包括目标对象;以及控制器,其用于确定所述至少一个对象中每个对象的曝光权重;所述至少一个第一摄像头还用于在所述目标场景中,根据所述每个对象的曝光权重进行曝光拍照。
在第二方面的一个实施方式中,移动终端还包括:至少一个第二摄像头,其用于确定多个对象的曝光等级,所述多个对象包括所述至少一个对象。
在第二方面的一个实施方式中,所述至少一个第二摄像头具体用于:从当前视野中提取第二图像帧,所述第二图像帧包括所述多个对象;接收操作人员的等级输入指令,所述等级输入指令用于指示所述多个对象的曝光等级。
在第二方面的一个实施方式中,控制器具体用于:计算所述每个对象在所述第一图像帧中的占比;根据所述每个对象的占比为所述每个对象分配相应的占比权重因子;以及针对所述每个对象,将所述占比权重因子与曝光权重因子的乘积确定为所述曝光权重,其中,所述曝光权重因子与所述曝光等级对应。
在第二方面的一个实施方式中,控制器还用于:在所述至少一个第二摄像头确定多个对象的曝光等级之前,对所述至少一个第一摄像头和所述至少一个第二摄像头进行初始化。
在第二方面的一个实施方式中,移动终端为单反相机、智能手机或者具有拍照功能的平板电脑。
第三方面,本申请还提供了一种利用第一方面及其实施方式的拍照方法进行拍照的移动终端,该移动终端包括:第一拍摄模块,其用于在目标场景中进行图像取景以获得第一图像帧,所述第一图像帧中包括至少一个对象,所述至少一个对象包括目标对象;以及控制模块,其用于确定所述至少一个对象中每个对象的曝光权重;所述第一拍摄模块还用于在所述目标场景中,根据所述每个对象的曝光权重进行曝光拍照。
在第三方面的一个实施方式中,移动终端还包括:第二拍摄模块,其用于确定多个对象的曝光等级,所述多个对象包括所述至少一个对象。
在第三方面的一个实施方式中,第二拍摄模块具体用于:从当前视野中提取第二图像帧,所述第二图像帧包括所述多个对象;接收操作人员的等级输入指令,所述等级输入指令用于指示所述多个对象的曝光等级。
在第三方面的一个实施方式中,控制模块具体包括:计算单元,其用于计算所述每个对象在所述第一图像帧中的占比;分配单元,其用于根据所述每个对象的占比为所述每个对象分配相应的占比权重因子;以及确定单元,其用于针对所述每个对象,将所述占比权重因子与曝光权重因子的乘积确定为所述曝光权重,其中,所述曝光权重因子与所述曝光等级对应。
在第三方面的一个实施方式中,控制模块还用于对所述第一拍摄模块和所述第二拍摄模块进行初始化。
在第三方面的一个实施方式中,移动终端为单反相机、智能手机以及具有拍照功能的平板电脑。
本申请提供的拍照方法以及移动终端,相对于现有技术,具有如下的有益效果:以确保拍摄场景中所选定的几个目标对象的视觉质量为出发点,选取视野中包含目标对象且子对象个数最多的场景进行取景,并依据不同曝光权重进行曝光,从而确保所摄场景中拍摄主体目标存在的情况下存在尽可能多的子目标,达到良好的多目标拍摄效果。
上述技术特征可以各种适合的方式组合或由等效的技术特征来替代,只要能够达到本发明的目的。
附图说明
在下文中将基于实施例并参考附图来对本发明进行更详细的描述。其中:
图1和图2显示了根据本发明实施例的适于移动终端的拍照方法的示意性流程图;
图3和图4显示了根据本发明实施例的移动终端的结构示意图。
在附图中,相同的部件使用相同的附图标记。附图并未按照实际的比例。
具体实施方式
下面将结合附图对本发明作进一步说明。
图1和图2为本发明的适于移动终端的拍照方法100的示意性流程图。如图1所示,该拍照方法100包括:
S110,在目标场景中进行图像取景以获得第一图像帧,所述第一图像帧中包括至少一个对象,所述至少一个对象包括目标对象;
S120,确定所述至少一个对象中每个对象的曝光权重;以及
S130,在所述目标场景中,根据所述每个对象的曝光权重进行曝光拍照。
在这里,移动终端可以为多种不同的形式,比如单反相机、智能手机或者具有拍照功能的平板电脑等。该移动终端200可以包括两种摄像头:第一摄像头(常规摄像头)210和第二摄像头(目标选取摄像头)220,以及控制器230,如图3所示。该第一摄像头210用于对目标场景进行图像取景并在该目标场景下进行曝光拍照,而第二摄像头220则用于对多个目标的曝光等级进行设定。
在本发明的一个具体实施例中,在S110之前,该方法100还包括:确定多个目标的曝光等级。
在这里,术语“曝光等级”指代的是对象曝光的优先程度,即曝光等级为1的对象最先曝光。“曝光权重”指代的为拍摄的照片中的各个对象的亮度对照片整体亮度的贡献值。
如图2所示,该移动终端200的拍照方法100如下:
拍摄准备阶段:打开移动终端设备,切换多目标拍摄模式,并下发初始化指令给至少一个第一摄像头210和至少一个第二摄像头220。所有的摄像头都初始化完成之后,会下发目标提取指令。
目标提取阶段:接收到目标提取指令之后,至少一个第一摄像头210会从当前视野中提取一帧图像,并允许用户在图像上拖动多个框图,从每个框图中提取一个对象,并允许用户编辑该对象的等级。不同等级曝光的优先级也不同,等级越高,曝光权重越高。等级为1的对象是曝光目标对象。当目标提取完成之后,会下发拍摄指令。
此外,在拍摄过程中如果想要更改当前的曝光目标或者目标的等级属性,可以通过点击指令来实现。
取景范围提取阶段:接收到拍摄指令之后,摄像头提取图像帧,从图像帧中检测是否存在目标对象,如果存在目标对象,则找到一个存在主目标情况下尽量包含更多其他目标的场景,对该场景进行取景。取景结束之后下发曝光权重自适应调整指令。
曝光权重自适应调整阶段:接收到曝光指令之后,计算各个目标在取景框中的占比,根据不同占比分配不同的占比权重因子。同时不同目标所设定的目标等级不同,也会分配一个目标权重因子。每个目标的曝光权重是占比权重因子和目标权重因子的乘积。
拍摄阶段:根据自适应计算出来的曝光权重对场景中的目标进行正确曝光。
如图4所示,本申请还提供了一种移动终端300,该移动终端300包括:
第一拍摄模块310,其用于在目标场景中进行图像取景以获得第一图像帧,所述第一图像帧中包括至少一个对象,所述至少一个对象包括目标对象;以及
控制模块330,其用于确定所述至少一个对象中每个对象的曝光权重;
所述第一拍摄模块310还用于在所述目标场景中,根据所述每个对象的曝光权重进行曝光拍照。
在一个实施例中,该移动终端300还包括:
第二拍摄模块320,其用于确定多个对象的曝光等级,所述多个对象包括所述至少一个对象。
由于该移动终端300的模块的功能及其所执行的步骤已经在上文中进行了较为详细的描述,在此将不再赘述。
本发明中,该多目标拍摄模式采用多摄像头,其中目标选取摄像头负责对目标组的选取,且可以随时点击更换拍摄目标并调整不同目标之间的权重等级;常规摄像头则依据已选取的多个拍摄目标为曝光主体进行图像取景,并依据目标的占比及设定的目标等级自适应调整曝光优先级从而使目标组得到正确的曝光。
在本发明的描述中,需要理解的是,术语“上”、“下”、“底”、“顶”、“前”、“后”、“内”、“外”、“左”、“右”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
虽然在本文中参照了特定的实施方式来描述本发明,但是应该理解的是,这些实施例仅仅是本发明的原理和应用的示例。因此应该理解的是,可以对示例性的实施例进行许多修改,并且可以设计出其他的布置,只要不偏离所附权利要求所限定的本发明的精神和范围。应该理解的是,可以通过不同于原始权利要求所描述的方式来结合不同的从属权利要求和本文中所述的特征。还可以理解的是,结合单独实施例所描述的特征可以使用在其他所述实施例中。

Claims (15)

1.一种适于移动终端的拍照方法,其特征在于,包括以下步骤:
在目标场景中进行图像取景以获得第一图像帧,所述第一图像帧中包括至少一个对象,所述至少一个对象包括目标对象;
确定所述至少一个对象中每个对象的曝光权重;以及
在所述目标场景中,根据所述每个对象的曝光权重进行曝光拍照;
在目标场景中进行图像取景以获得第一图像帧之前,所述拍照方法还包括:确定多个对象的曝光等级,所述多个对象包括所述至少一个对象;
确定所述至少一个对象中每个对象的曝光权重,包括:
计算所述每个对象在所述第一图像帧中的占比;
根据所述每个对象的占比为所述每个对象分配相应的占比权重因子;以及
针对所述每个对象,将所述占比权重因子与曝光权重因子的乘积确定为所述曝光权重,其中,所述曝光权重因子与所述曝光等级对应。
2.根据权利要求1所述的拍照方法,其特征在于,确定多个对象的曝光等级,包括:
从当前视野中提取第二图像帧,所述第二图像帧包括所述多个对象;
接收操作人员的等级输入指令,所述等级输入指令用于指示所述多个对象的曝光等级。
3.根据权利要求1或2所述的拍照方法,其特征在于,在确定多个对象的曝光等级之前,所述拍照方法还包括:
对所述移动终端的拍照机构进行初始化。
4.一种利用权利要求1至3中任一项所述的拍照方法进行拍照的移动终端,其特征在于,所述移动终端包括:
至少一个第一摄像头,其用于在目标场景中进行图像取景以获得第一图像帧,所述第一图像帧中包括至少一个对象,所述至少一个对象包括目标对象;以及
控制器,其用于确定所述至少一个对象中每个对象的曝光权重;
所述至少一个第一摄像头还用于在所述目标场景中,根据所述每个对象的曝光权重进行曝光拍照。
5.根据权利要求4所述的移动终端,其特征在于,所述移动终端还包括:
至少一个第二摄像头,其用于确定多个对象的曝光等级,所述多个对象包括所述至少一个对象。
6.根据权利要求5所述的移动终端,其特征在于,所述至少一个第二摄像头具体用于:
从当前视野中提取第二图像帧,所述第二图像帧包括所述多个对象;
接收操作人员的等级输入指令,所述等级输入指令用于指示所述多个对象的曝光等级。
7.根据权利要求4至6中任一项所述的移动终端,其特征在于,所述控制器具体用于:
计算所述每个对象在所述第一图像帧中的占比;
根据所述每个对象的占比为所述每个对象分配相应的占比权重因子;以及
针对所述每个对象,将所述占比权重因子与曝光权重因子的乘积确定为所述曝光权重,其中,所述曝光权重因子与所述曝光等级对应。
8.根据权利要求5或6所述的移动终端,其特征在于,所述控制器还用于:
在所述至少一个第二摄像头确定多个对象的曝光等级之前,对所述至少一个第一摄像头和所述至少一个第二摄像头进行初始化。
9.根据权利要求4至6中任一项所述的移动终端,其特征在于,所述移动终端为单反相机、智能手机或者具有拍照功能的平板电脑。
10.一种利用权利要求1至3中任一项所述的拍照方法进行拍照的移动终端,其特征在于,所述移动终端包括:
第一拍摄模块,其用于在目标场景中进行图像取景以获得第一图像帧,所述第一图像帧中包括至少一个对象,所述至少一个对象包括目标对象;以及
控制模块,其用于确定所述至少一个对象中每个对象的曝光权重;
所述第一拍摄模块还用于在所述目标场景中,根据所述每个对象的曝光权重进行曝光拍照。
11.根据权利要求10所述的移动终端,其特征在于,所述移动终端还包括:
第二拍摄模块,其用于确定多个对象的曝光等级,所述多个对象包括所述至少一个对象。
12.根据权利要求11所述的移动终端,其特征在于,所述第二拍摄模块具体用于:
从当前视野中提取第二图像帧,所述第二图像帧包括所述多个对象;
接收操作人员的等级输入指令,所述等级输入指令用于指示所述多个对象的曝光等级。
13.根据权利要求10至12中任一项所述的移动终端,其特征在于,所述控制模块具体包括:
计算单元,其用于计算所述每个对象在所述第一图像帧中的占比;
分配单元,其用于根据所述每个对象的占比为所述每个对象分配相应的占比权重因子;以及
确定单元,其用于针对所述每个对象,将所述占比权重因子与曝光权重因子的乘积确定为所述曝光权重,其中,所述曝光权重因子与所述曝光等级对应。
14.根据权利要求11或12所述的移动终端,其特征在于,所述控制模块还用于对所述第一拍摄模块和所述第二拍摄模块进行初始化。
15.根据权利要求10至12中任一项所述的移动终端,其特征在于,所述移动终端为单反相机、智能手机以及具有拍照功能的平板电脑。
CN201910958743.2A 2019-10-10 2019-10-10 一种适于移动终端的拍照方法及移动终端 Active CN110572580B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910958743.2A CN110572580B (zh) 2019-10-10 2019-10-10 一种适于移动终端的拍照方法及移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910958743.2A CN110572580B (zh) 2019-10-10 2019-10-10 一种适于移动终端的拍照方法及移动终端

Publications (2)

Publication Number Publication Date
CN110572580A CN110572580A (zh) 2019-12-13
CN110572580B true CN110572580B (zh) 2020-11-03

Family

ID=68784422

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910958743.2A Active CN110572580B (zh) 2019-10-10 2019-10-10 一种适于移动终端的拍照方法及移动终端

Country Status (1)

Country Link
CN (1) CN110572580B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101202841A (zh) * 2006-12-11 2008-06-18 株式会社理光 摄像装置以及用于摄像装置的曝光控制方法
CN102023456A (zh) * 2009-09-22 2011-04-20 广达电脑股份有限公司 测光权重调整方法及其装置
CN104333710A (zh) * 2014-11-28 2015-02-04 广东欧珀移动通信有限公司 相机曝光方法、装置及设备
CN106446873A (zh) * 2016-11-03 2017-02-22 北京旷视科技有限公司 人脸检测方法及装置
CN107071290A (zh) * 2016-12-28 2017-08-18 深圳天珑无线科技有限公司 拍照方法及其拍照装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5450200B2 (ja) * 2009-07-17 2014-03-26 富士フイルム株式会社 撮像装置、方法およびプログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101202841A (zh) * 2006-12-11 2008-06-18 株式会社理光 摄像装置以及用于摄像装置的曝光控制方法
CN102023456A (zh) * 2009-09-22 2011-04-20 广达电脑股份有限公司 测光权重调整方法及其装置
CN104333710A (zh) * 2014-11-28 2015-02-04 广东欧珀移动通信有限公司 相机曝光方法、装置及设备
CN106446873A (zh) * 2016-11-03 2017-02-22 北京旷视科技有限公司 人脸检测方法及装置
CN107071290A (zh) * 2016-12-28 2017-08-18 深圳天珑无线科技有限公司 拍照方法及其拍照装置

Also Published As

Publication number Publication date
CN110572580A (zh) 2019-12-13

Similar Documents

Publication Publication Date Title
CN108322646B (zh) 图像处理方法、装置、存储介质及电子设备
CN100553301C (zh) 亮度的修正方法
CN110677621B (zh) 摄像头调用方法、装置、存储介质及电子设备
CN106713887B (zh) 移动终端及白平衡调节方法
CN111028190A (zh) 图像处理方法、装置、存储介质及电子设备
CN113129241B (zh) 图像处理方法及装置、计算机可读介质、电子设备
CN104333710A (zh) 相机曝光方法、装置及设备
CN105872393A (zh) 高动态范围图像的生成方法和装置
CN108600638B (zh) 摄像机自动调焦系统及方法
CN109218609B (zh) 图像构图方法及装置
CN108234865A (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
CN106791451B (zh) 一种智能终端的拍照方法
CN109005367A (zh) 一种高动态范围图像的生成方法、移动终端及存储介质
CN105898152A (zh) 一种在图像上还原环境光亮度的方法及系统
CN109286758A (zh) 一种高动态范围图像的生成方法、移动终端及存储介质
CN110445986A (zh) 图像处理方法、装置、存储介质及电子设备
CN111694158A (zh) 近眼显示装置的校准方法、校准设备及校准系统
CN114363522A (zh) 拍照方法及相关装置
CN110572580B (zh) 一种适于移动终端的拍照方法及移动终端
CN110099207B (zh) 一种用于克服摄像头不稳定的有效图像计算方法
CN112312108B (zh) 一种白平衡的异常确定方法、装置、存储介质及电子设备
CN115037867B (zh) 拍摄方法、装置、计算机可读存储介质及电子设备
CN108683857A (zh) 拍照优化方法、装置、存储介质及终端设备
JP6818798B2 (ja) 画像処理装置および画像処理方法、ならびに撮像装置
CN114979498B (zh) 曝光处理方法、装置、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant