CN108462831B - 图像处理方法、装置、存储介质及电子设备 - Google Patents

图像处理方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN108462831B
CN108462831B CN201810222007.6A CN201810222007A CN108462831B CN 108462831 B CN108462831 B CN 108462831B CN 201810222007 A CN201810222007 A CN 201810222007A CN 108462831 B CN108462831 B CN 108462831B
Authority
CN
China
Prior art keywords
image
value
target
face
light intensity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810222007.6A
Other languages
English (en)
Other versions
CN108462831A (zh
Inventor
何新兰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201810222007.6A priority Critical patent/CN108462831B/zh
Publication of CN108462831A publication Critical patent/CN108462831A/zh
Application granted granted Critical
Publication of CN108462831B publication Critical patent/CN108462831B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/71Circuitry for evaluating the brightness variation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

本申请公开了一种图像处理方法、装置、存储介质及电子设备。该图像处理方法包括:当接收到图像采集指令时,获取当前的环境光强度信息、以及人脸动态信息;根据环境光强度信息和人脸动态信息生成环境参数;基于环境参数确定需要抓取的图像帧数,以得到目标帧数;获取数量为该目标帧数的图像。本申请方案中可基于自然环境因素和人为环境因素的影响,通过动态调节需要抓取的图像帧数,以在曝光时长上对图像进行质量补偿,从而提升图像拍摄质量。

Description

图像处理方法、装置、存储介质及电子设备
技术领域
本申请属于图像技术领域,尤其涉及一种图像处理方法、装置、存储介质及电子设备。
背景技术
拍照又称为摄影、照相,一般指通过物体所反射的光线使感光介质曝光的过程,通常使用机械照相机或者数码照相机。随着智能电子设备的普及、功能的多样化,使用智能电子设备拍照记录生活的点滴变得愈加流行。
然而,用户在使用智能电子设备的相机进行拍摄时,由于用户容易眨眼或闭眼,造成所抓取到的图像中用户是闭眼状态,使得最终的成像效果较差,影响图像的拍摄质量。
发明内容
本申请实施例提供一种图像处理方法、装置、存储介质及电子设备,可以提升图像拍摄质量。
本申请实施例提供一种图像处理方法,应用于电子设备,包括:
当接收到图像采集指令时,获取当前的环境光强度信息、以及人脸动态信息;
根据所述环境光强度信息和所述人脸动态信息生成环境参数;
基于所述环境参数确定需要抓取的图像帧数,以得到目标帧数;
获取数量为所述目标帧数的图像。
本申请实施例提供一种图像处理装置,应用于电子设备,包括:
信息获取模块,用于当接收到图像采集指令时,获取当前的环境光强度信息、以及人脸动态信息;
生成模块,用于根据所述环境光强度信息和所述人脸动态信息生成环境参数;
确定模块,用于基于所述环境参数确定需要抓取的图像帧数,以得到目标帧数;
图像获取模块,用于获取数量为所述目标帧数的图像。
本申请实施例提供一种存储介质,其上存储有计算机程序,当所述计算机程序在计算机上执行时,使得所述计算机执行本申请实施例提供的图像处理方法中的步骤。
本申请实施例还提供一种电子设备,包括存储器,处理器,所述处理器通过调用所述存储器中存储的计算机程序,用于执行本申请实施例提供的图像处理方法中的步骤。
本申请实施例中,当接收到图像采集指令时,获取当前的环境光强度信息、以及人脸动态信息;根据环境光强度信息和人脸动态信息生成环境参数;基于环境参数确定需要抓取的图像帧数,以得到目标帧数;获取数量为该目标帧数的图像。本申请方案中可基于自然环境因素和人为环境因素的影响,通过动态调节需要抓取的图像帧数,以在曝光时长上对图像进行质量补偿,从而提升图像拍摄质量。
附图说明
下面结合附图,通过对本发明的具体实施方式详细描述,将使本发明的技术方案及其有益效果显而易见。
图1是本申请实施例提供的图像处理方法的流程示意图。
图2是本申请实施例提供的图像处理方法的一应用实例示意图。
图3是本申请实施例提供的图像处理方法的另一流程示意图。
图4是本申请实施例提供的图像处理装置的结构示意图。
图5是本申请实施例提供的图像处理装置的另一结构示意图。
图6是本申请实施例提供的电子设备的结构示意图。
图7是本申请实施例提供的电子设备的图像处理电路的结构示意图。
具体实施方式
请参照图式,其中相同的组件符号代表相同的组件,本发明的原理是以实施在一适当的运算环境中来举例说明。以下的说明是基于所例示的本发明具体实施例,其不应被视为限制本发明未在此详述的其它具体实施例。
可以理解的是,本申请实施例的执行主体可以是诸如智能手机或平板电脑等的电子设备。
请参阅图1,图1是本申请实施例提供的图像处理方法的流程示意图,流程可以包括:
101、当接收到图像采集指令时,获取当前的环境光强度信息、以及人脸动态信息。
用户经常需要使用电子设备相机进行拍摄。在进入电子设备相机的拍摄预览界面后,电子设备可以通过其内置的图像传感器采集图像并显示在界面上供用户预览。然而在图像采集过程中,由于用户习惯,眼睛容易受到外界环境因素(如光照)影响,在光照过强的情况下容易眨眼或闭眼。尤其在多人合影时,由于站位的关系还需进行位置调整、移动等,容易因人脸晃动导致人脸图像不稳定,晃动越严重、晃动人数越多,将导致图像的稳定性越差。基于这些因素,导致图像最终的成像效果较差。因此,在本申请实施例中,可以基于以上影响因素,在采集图像过程中做相应的参数调整,以优化最终所获取到的图像。
具体的,可以在电子设备接收到图像采集指令时,获取对图像成像造成影响的因素的状态信息,即环境光强度信息、以及人脸动态信息。其中,环境光强度信息为表征光照强弱的特征信息,人脸动态信息可表征人脸晃动时的晃动特征信息。该图像采集指令可以是在开启电子设备摄像头后,用户通过按压电子设备上的物理快门键所触发的;另外,该图像采集指令还可以是在开启电子设备摄像头后,用户通过触摸电子设备上显示界面上的虚拟快门控件所触发的,对此不做具体限定。
在本申请实施例中,获取影响因素的状态信息的方式可以有多种。比如,可在电子设备内置传感器(环境光传感器),在获取环境光强度信息时,可以通过该传感器获取当前的环境光数据,并从中提取有用的信息。又比如,在获取人脸动态信息时,可以通过电子设备摄像头开启后所采集的多帧历史图像中人脸的姿态、表情、以及用户动作等信息,然后基于相关算法(如跟踪算法)来计算获取人脸动态信息。
102、根据环境光强度信息和人脸动态信息生成环境参数。
具体的,可基于所获取的环境光强度信息、及人脸动态信息,利用相关运算规则生成对其进行处理,从而将环境光强度信息、及人脸动态信息糅合生成相应的环境参数。
在一些实施例中,环境光强度信息包括:环境光强度值,人脸动态信息包括:人脸移动速率。
以人脸移动速率为例,在一些实施例中,电子设备可以获取已经采集到的三帧图像,再检测这三帧图像中的人脸图像是否发生位移。例如,在获取到这三帧图像后,电子设备可以生成一个坐标系,然后电子设备可以用相同的方式将每一帧图像放入该坐标系中。之后,电子设备可以获取每一帧图像中的人脸图像特征点在该坐标系中的坐标。在得到每一帧图像中的人脸图像的特征点在该坐标系中的坐标后,电子设备就可以比较不同图像中的同一人脸图像特征点的坐标位移。然后根据坐标位移、以及所获取不同图像之间的间隔时间计算人脸移动速率。
那么,步骤“根据环境光强度信息和人脸动态信息生成环境参数”,可以包括以下流程:
从多个预设强度区间中确定环境光强度值所在的目标强度区间,并获取目标强度区间所对应的第一梯度值;
从多个预设速率区间中确定人脸移动速率的目标速率区间,并获取目标速率区间所对应的第二梯度值;
根据第一梯度值和第二梯度值生成环境参数。
具体的,在接收图像获取指令之前,需要预先制定不同数据所对应影响程度的大小的规则。在本申请实施例中,梯度值越大,影响因素(如环境光强度值、人脸移动速率)对应的影响程度越大;反之,梯度值越小,影响因素(如环境光强度值、人脸移动速率)对应的影响程度越小。
实际应用中,环境光强度值越大,表示光线越强,容易造成用户闭眼或眨眼的概率越大;环境光强度值越小,表示光线越弱,光线不足的情况下,容易导致所获取的图像由于进光亮不足而不清晰。因此,权衡利弊,可将环境光强度值对应的梯度值设定成随着环境光强度值的增加,对应的第一梯度值先增后减(参考图2中左图a)。具体的数据可以根据产品生产商多次测试、调制后的结果来设定。
而对于人脸移动速率,移动速率越大则表示人脸晃动越厉害,造成所采集的图像越不稳定。因此,可将人脸移动速率的梯度值设定成随着移动速率的增加,对应的第二梯度值递减(参考图2中右图b)。具体的数据可以根据产品生产厂商多次测试、调制后的结果来设定。
在一些实施例中,步骤“根据第一梯度值和第二梯度值生成环境参数”,可以包括以下流程:
确定第一梯度值、及第二梯度值对应的权重信息;
根据权重信息对所述第一梯度值、及第二梯度值进行加权处理,得到加权处理后的第一加权值和第二加权值;
根据第一加权值和第二加权值生成环境参数。
具体的,由于不同因素的对图像成像的影响程度不相同,因此,可以为不同的影响因素设定不同的权重信息,以权衡各影响因素之间的主次关系。
其中,该权重信息可以百分比、分数、小数等形式表示。以百分比为例,若设定第一梯度值对应的权重为40%,则第二梯度值对应的权重为60%。在一些实施例中,环境参数值可以为第一加权值和第二加权值的叠加值;比如,依旧以上述权重信息为例,若第一梯度值为a,第二梯度值为b,则最终所计算得到的环境参数为(0.4a+0.6b)。
103、基于环境参数确定需要抓取的图像帧数,以得到目标帧数。
具体的,可以根据所生成的环境参数,进一步确定需要抓取图像的目标帧数。具体实施时,可结合实际的测试结果,预先为不同环境参数设定相应需抓取的合适图像帧数。也即,在一些实施例中,步骤“基于环境参数确定需要抓取的图像帧数”,可以包括以下流程:
从多个参数值区间中确定环境参数对应的目标参数值区间;
根据预设映射关系集合,获取在目标参数值区间下对应需抓取的图像帧数,该预设映射关系集合包括:参数值区间与图像帧数之间的映射关系。
本申请实施例中,根据实际应用中光线比较好,人脸晃动较为稳定的情况,可以设置抓取帧数较多的图像;若光线差,人脸晃动较为厉害,则可以设置抓取帧数较少的图像。因词,可以在预先构建预设映射关系集合时,参考该实际情况,环境参数越大则可对其设定对应越大的图像帧数,环境参数越小,则可对其设定越小的图像帧数。比如,环境参数值为2时,设置抓取的图像帧数为4~6;环境参数值为4时,设置抓取的图像帧数为8。
104、获取数量为该目标帧数的图像。
具体的,在确定了所要获取的图像帧数后,可基于图像帧数调节电子设备相机的拍摄参数(如快门参数),以获取数量为该目标帧数的图像。也即,步骤“获取数量为所述目标帧数的图像”,可以包括以下流程:
根据目标帧数调整电子设备中相机的快门参数;
通过调整快门参数后的相机获取数量为目标帧数的图像。
其中,快门是摄像器材中用来控制光线照射感光元件时间的装置,通过调整快门参数控制电子设备中感光元件的感光时间,从而实现在保证图像拍摄速度的前提下,精准、有效地获取目标帧数的较高质量图像。
由上可知,本申请实施例中所提供的图像处理方法,通过在接收到图像采集指令时,获取当前的环境光强度信息、以及人脸动态信息;根据环境光强度信息和人脸动态信息生成环境参数;基于环境参数确定需要抓取的图像帧数,以得到目标帧数;获取数量为该目标帧数的图像。本申请方案中可基于自然环境因素和人为环境因素的影响,通过动态调节需要抓取的图像帧数,以在曝光时长上对图像进行质量补偿,从而提升图像拍摄质量。
请参阅图3,图3为本申请实施例提供的图像处理方法的另一流程示意图,流程可以包括:
201、当接收到图像采集指令时,电子设备获取当前的环境光强度值、以及人脸移动速率。
具体的,可以在电子设备接收到图像采集指令时,获取对图像成像造成影响的因素的状态信息,如环境光强度信息、以及人脸动态信息等。实际应用中,该图像采集指令可以是在开启电子设备摄像头后,用户通过按压电子设备上的物理快门键所触发的,如音量键。
另外,由于按压电子设备的物理键时容易导致机体晃动,导致所采集的图像模糊。为了避免这种情况,该图像采集指令还可以是在开启电子设备摄像头后,用户通过触摸电子设备上显示界面上的虚拟快门控件所触发的,以便获取较清晰的图像。
在一些实施例中,可在电子设备内置环境光传感器,在获取环境光强度信息时,可以通过该传感器获取当前的环境光数据,并从中提取有用的信息,并基于所提取的信息中直接提取环境光强度值。另外,在获取人脸动态信息时,可以获取已经采集到的三帧图像,再检测这三帧图像中的人脸图像是否发生位移。例如,在获取到这三帧图像后,电子设备可以生成一个坐标系,然后电子设备可以用相同的方式将每一帧图像放入该坐标系中。之后,电子设备可以获取每一帧图像中的人脸图像特征点在该坐标系中的坐标。在得到每一帧图像中的人脸图像的特征点在该坐标系中的坐标后,电子设备就可以比较不同图像中的同一人脸图像特征点的坐标位移。然后根据坐标位移、以及所获取不同图像之间的间隔时间计算人脸移动速率。
202、电子设备确定环境光强度值对应的第一梯度值、以及确定人脸移动速率对应的第二梯度值。
实际应用中,环境光强度值越大,表示光线越强,容易造成用户闭眼或眨眼的概率越大;环境光强度值越小,表示光线越弱,光线不足的情况下,容易导致所获取的图像由于进光亮不足而不清晰。因此,权衡利弊,可将环境光强度值对应的梯度值设定成随着环境光强度值的增加,对应的第一梯度值先增后减。具体的数据可以根据产品生产商多次测试、调制后的结果来设定。
而对于人脸移动速率,移动速率越大则表示人脸晃动越厉害,造成所采集的图像越不稳定。因此,可将人脸移动速率的梯度值设定成随着移动速率的增加,对应的第二梯度值递减。具体的数据可以根据产品生产厂商多次测试、调制后的结果来设定。
其中,预设强度区间、及预设速率区间,可以根据本领域技术人员或产品生产厂商经多次测试后的结果来划分。在本申请实施例中,第一梯度值、第二梯度值可以为具体的数值。比如,环境光强度值为80Lux,其对应的所在的目标强度区间为(50Lux,500Lux),光线强度较弱,若预先设定该目标强度区间所对应的梯度值为3,则最终可确定环境光强度值为80Lux时,对应的第一梯度值为3。又比如,环境光强度值为800Lux,其对应的所在的目标强度区间为(500Lux,1500Lux),光线强度适中,若预先设定该目标强度区间所对应的梯度值为4,则最终可确定环境光强度值为800Lux时,对应的第一梯度值为4。又比如,环境光强度值为2000Lux,其对应的所在的目标强度区间为(1000Lux,5000Lux),光线强度较强,若预先设定该目标强度区间所对应的梯度值为3,则最终可确定环境光强度值为2000Lux时,对应的第一梯度值为3。
相应的,人脸移动速度可制定与该环境光强度值类似的规则。比如,当人脸移动速率为2m/s时,对应所在的目标速率区间为(1m/s,10m/s),速率较快,对应人脸晃动较严重,因此可设定该目标速率对应的第二梯度值为2;又比如,当人脸移动速率为0.02m/s时,对应所在的目标速率区间为(0.01m/s,0.1m/s),速率较慢,对应人脸晃动较为稳定,因此可设定该目标速率对应的第二梯度值为4。
203、电子设备确定第一梯度值、及第二梯度值对应的权重信息,并根据权重信息对第一梯度值、及第二梯度值进行加权处理。
具体的,由于不同因素的对图像成像的影响程度不相同,因此,可以为不同的影响因素设定不同的权重信息,以权衡各影响因素之间的主次关系。
其中,该权重信息可以百分比、分数、小数等形式表示。以百分比为例,若设定第一梯度值对应的权重为40%,则第二梯度值对应的权重为60%,若第一梯度值为2,第二梯度值为4,那么,对应第一加权值为0.8,第二加权值为2.4。
204、电子设备将第一加权值和第二加权值叠加得到环境参数。
在一些实施例中,环境参数值可以为第一加权值和第二加权值的叠加值;比如,依旧以上述权重信息为例,第一梯度值对应的权重为40%,第二梯度值对应的权重为60%,第一梯度值为2,第二梯度值为4,则最终所计算得到的环境参数为3.2。
205、电子设备基于环境参数确定需要抓取的图像帧数,以得到目标帧数。
具体的,可以根据所生成的环境参数,进一步确定需要抓取图像的目标帧数。具体实施时,可结合实际的测试结果,预先为不同环境参数设定相应需抓取的合适图像帧数。
本申请实施例中,根据实际应用中光线比较好,人脸晃动较为稳定的情况,可以设置抓取帧数较多的图像;若光线差,人脸晃动较为厉害,则可以设置抓取帧数较少的图像。因词,可以在预先构建预设映射关系集合时,参考该实际情况,环境参数越大则可对其设定对应越大的图像帧数,环境参数越小,则可对其设定越小的图像帧数。比如,环境参数值为2时,设置抓取的图像帧数为4;环境参数值为4时,设置抓取的图像帧数为8。或者可以设置参数值区间,如参数值区间为(2,3),表示外界因素影响较大,则对应设置抓取的图像帧数为4;参数值区间为(3,4),表示外界因素影响较小,画面较为稳定,则对应设置抓取的图像帧数为8。
206、电子设备根据目标帧数调整电子设备中相机的快门参数,并通过调整快门参数后的相机获取数量为该目标帧数的图像。
其中,快门是摄像器材中用来控制光线照射感光元件时间的装置,通过调整快门参数控制电子设备中感光元件的感光时间,从而实现在保证图像拍摄速度的前提下,精准、有效地获取目标帧数的较高质量图像。
207、电子设备将获取到图像确定为待处理图像,并从该待处理图像中确定出基础图像,该基础图像中至少包含一个符合预设条件的人脸图像。
比如,在获取到8帧图像后,电子设备可以将这8帧图像确定为待处理图像。然后,电子设备可以从这8帧图像中确定出一帧基础图像,其中该基础图像中至少包含一个符合预设条件的人脸图像。
在一些实施例中,所有待处理图像均为同一用户的单人图像,那么,预设条件则可以是基础图像中某一用户的眼睛比该用户在其它待处理图像中的眼睛都更大。
比如,待处理图像分别为A、B、C、D、E、F、G、H。其中,表示该用户在图像A、B、C、D、E、F、G、H中的眼睛大小的数值分别为83、83、84、88、86、85、84、84。那么,由于图像D的用户的眼睛睁得最大,因此电子设备可以将图像D确定为基础图像。
在一些实施例中,待处理图像可以为多人图像(即每帧待处理图像中至少包含两张人脸图像,并且各帧图像的人脸数量相等),则电子设备从待处理的多人图像中确定出基础图像,该基础图像中至少包含一个符合所述预设条件的人脸图像。那么,预设条件为图像中某一用户的眼睛比该用户在其他待处理图像中的眼睛都睁得更大。
例如,待处理图像为J、K、L、M、N、O。这6帧图像为丙、丁、戊三人的合照图像。电子设备可以对该6帧图像进行人脸和人眼识别,并获取图像中人脸部分的眼睛大小。例如,J、K、L、M、N、O图像中表示丙的眼睛大小的数值分别为81、83、84、86、86、85。J、K、L、M、N、O图像中表示丁的眼睛大小的数值分别为75、77、77、79、78、77。J、K、L、M、N、O图像中表示戊的眼睛大小的数值分别为84、85、86、86、88、86。
对于丙而言,其眼睛最大的人脸图像出现在图像M和N中。对于丁而言,其眼睛最大的人脸图像出现在图像M中。对于戊而言,其眼睛最大的图像出现在图像N中。由于图像N中出现了二个人的眼睛最大的人脸图像,因此电子设备可以将图像N确定为基础图像。
208、电子设备从基础图像中确定出不符合预设条件的待替换人脸图像,并从基础图像外的其它待处理图像中,确定出符合预设条件的目标人脸图像,其中,目标人脸图像与所述待替换人脸图像为相同用户的人脸图像。
在一种实施方式中,电子设备可以通过如下方式来检测图像中的眼睛大小。比如,电子设备可以先通过人脸和人眼识别技术,识别出图像中的眼部区域,再获取该眼部区域在整张图像中所占的面积比例。该面积比例大,则可以认为用户的眼睛睁得较大。该面积比例小,则可以认为用户的眼睛睁得较小。又如,电子设备可以计算图像中的人眼在竖直方向上所占的像素点的个数,该个数的大小可以用于表示人眼的大小。有基于此,可从中筛选出不符合预设条件的待替换人脸图像、以及符合预设条件的目标人脸图像。
209、电子设备在基础图像中,将待替换人脸图像替换为目标图像,得到经过图像替换处理的基础图像。
具体的,通过图像处理算法、以及边缘识别算法,对基础图像中的人脸图像进行切割、替换,将待替换人脸图像替换为目标图像。
210、电子设备对经过图像替换处理的基础图像进行图像降噪处理并输出。
具体的,在确定了基础图像后,电子设备可以对该基础图像进行预处理,以输出质量较高的图像,如进行图像的降噪预处理操作。
具体实施时,电子设备可以采用多帧降噪的方式对基础图像进行降噪处理。例如,图像D被确定为基础图像,那么电子设备可以根据包含图像D在内的连续采集的4帧图像,对图像D进行多帧降噪处理。例如,电子设备可以根据图像C、E、F对图像D进行多帧降噪。
在进行多帧降噪时,电子设备可以先将图像C、D、E、F对齐,并获取图像中每一组对齐像素的像素值。若同一组对齐像素的像素值相差不多,那么电子设备可以计算这组对齐像素的像素值均值,再用该像素值均值替换掉图像D的对应像素的像素值。若同一组对齐像素的像素值相差较多,那么可以不对图像D中的像素值进行调整。
例如,图像C中的像素P1、图像D中的像素P2、图像E中的像素P3以及图像F中的像素P4是一组相互对齐的像素,其中P1的像素值为101,P2的像素值为102,P3的像素值为103,P4的像素值为104,那么这组相互对齐的像素的像素值均值为102.5,那么电子设备就可以将图像D中的P2像素的像素值由102调整为102.5,从而对图像D中的P2像素进行降噪处理。若P1的像素值为80,P2的像素值为102,P3的像素值为83,P4的像素值为90,那么由于它们的像素值相差较多,此时电子设备可以不调整P2的像素值,即保持P2的像素值为102不变。
由上可知,本申请方案中可基于自然环境因素和人为环境因素的影响,通过动态调节需要抓取的图像帧数,以在曝光时长上对图像进行质量补偿,从而提升图像拍摄质量。
请参阅图4,图4为本申请实施例提供的图像处理装置的结构示意图。图像处理装置300可以包括:信息获取模块31,生成模块32,确定模块33,图像获取模块304。其中:
信息获取模块31,用于当接收到图像采集指令时,获取当前的环境光强度信息、以及人脸动态信息;
生成模块32,用于根据所述环境光强度信息和所述人脸动态信息生成环境参数;
确定模块33,用于基于所述环境参数确定需要抓取的图像帧数,以得到目标帧数;
图像获取模块34,用于获取数量为所述目标帧数的图像。
在一种实施方式中,环境光强度信息包括:环境光强度值,人脸动态信息包括:人脸移动速率;生成模块32可以用于:
从多个预设强度区间中确定所述环境光强度值所在的目标强度区间,并获取所述目标强度区间所对应的第一梯度值;
从多个预设速率区间中确定所述人脸移动速率所在的目标速率区间,并获取所述目标速率区间所对应的第二梯度值;
根据所述第一梯度值和所述第二梯度值生成环境参数。
在一种实施方式中,生成模块32可以进一步用于:
确定所述第一梯度值、及所述第二梯度值对应的权重信息;
根据所述权重信息对所述第一梯度值、及所述第二梯度值进行加权处理,得到加权处理后的第一加权值和第二加权值;
根据所述第一加权值和所述第二加权值生成环境参数。
在一种实施方式中,确定模块33可以用于:
从多个参数值区间中确定所述环境参数对应的目标参数值区间;
根据预设映射关系集合,获取在所述目标参数值区间下对应需抓取的图像帧数,所述预设映射关系集合包括:参数值区间与图像帧数之间的映射关系。
在一种实施方式中,图像获取模块34可以用于:
根据所述目标帧数调整所述电子设备中相机的快门参数;
通过调整快门参数后的相机获取数量为所述目标帧数的图像。
请一并参阅图5,图5为本申请实施例提供的图像处理装置的另一结构示意图。在一实施例中,图像处理装置300还可以包括:处理模块35。
处理模块35,用于将获取到图像确定为待处理图像;从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合预设条件的人脸图像;对所述基础图像进行预设处理并输出。
在一种实施方式中,处理模块35可以用于:
若各所述待处理图像为多人图像,则从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合所述预设条件的人脸图像。
那么,处理模块35执行所述对所述基础图像进行预设处理并输出的步骤时,可以进一步执行以下步骤:
从所述基础图像中确定出不符合所述预设条件的待替换人脸图像;
从所述基础图像外的其它待处理图像中,确定出符合所述预设条件的目标人脸图像,所述目标人脸图像与所述待替换人脸图像为相同用户的人脸图像;
在所述基础图像中,将所述待替换人脸图像替换为所述目标图像,得到经过图像替换处理的基础图像。
对所述经过图像替换处理的基础图像进行图像降噪处理并输出。
本申请实施例中所提供的图像处理装置,通过在接收到图像采集指令时,获取当前的环境光强度信息、以及人脸动态信息;根据环境光强度信息和人脸动态信息生成环境参数;基于环境参数确定需要抓取的图像帧数,以得到目标帧数;获取数量为该目标帧数的图像。本申请方案中可基于自然环境因素和人为环境因素的影响,通过动态调节需要抓取的图像帧数,以在曝光时长上对图像进行质量补偿,从而提升图像拍摄质量
本申请实施例提供一种计算机可读的存储介质,其上存储有计算机程序,当所述计算机程序在计算机上执行时,使得所述计算机执行如本实施例提供的图像处理方法中的步骤。
本申请实施例还提供一种电子设备,包括存储器,处理器,所述处理器通过调用所述存储器中存储的计算机程序,用于执行本实施例提供的图像处理方法中的步骤。
例如,上述电子设备可以是诸如平板电脑或者智能手机等电子设备。请参阅图6,图6为本申请实施例提供的电子设备的结构示意图。
该电子设备400可以包括传感器401、存储器402、处理器403等部件。本领域技术人员可以理解,图6中示出的电子设备结构并不构成对电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
传感器401可以包括陀螺仪传感器(例如三轴陀螺仪传感器)、加速度传感器等传感器。
存储器402可用于存储应用程序和数据。存储器402存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器403通过运行存储在存储器402的应用程序,从而执行各种功能应用以及数据处理。
处理器403是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器402内的应用程序,以及调用存储在存储器402内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。
在本实施例中,电子设备中的处理器403会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行代码加载到存储器402中,并由处理器403来运行存储在存储器402中的应用程序,从而实现步骤:
当采集包含人脸的图像时,根据采集到的至少两帧图像确定出目标帧数;当需要从缓存队列中获取图像时,获取电子设备采集所述缓存队列中的各帧图像时预设传感器的输出值;从所述缓存队列中确定出目标图像,所述电子设备采集所述目标图像时所述预设传感器的输出值处于预设范围;根据所述目标图像,获取数量为所述目标帧数的图像。
如图7所示,图像处理电路包括图像信号处理器540和控制逻辑器550。成像设备510捕捉的图像数据首先由图像信号处理器540处理,图像信号处理器540对图像数据进行分析以捕捉可用于确定和/或成像设备510的一个或多个控制参数的图像统计信息。成像设备510可包括具有一个或多个透镜511和图像传感器512的照相机。图像传感器512可包括色彩滤镜阵列(如Bayer滤镜),图像传感器512可获取用图像传感器512的每个成像像素捕捉的光强度和波长信息,并提供可由图像信号处理器540处理的一组原始图像数据。传感器520可基于传感器520接口类型把原始图像数据提供给图像信号处理器540。传感器520接口可以利用SMIA(Standard Mobile Imaging Architecture,标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
图像信号处理器540按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,图像信号处理器540可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
图像信号处理器540还可从图像存储器530接收像素数据。例如,从传感器520接口将原始像素数据发送给图像存储器530,图像存储器530中的原始像素数据再提供给图像信号处理器540以供处理。图像存储器530可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自传感器520接口或来自图像存储器530的原始图像数据时,图像信号处理器540可进行一个或多个图像处理操作,如时域滤波。处理后的图像数据可发送给图像存储器530,以便在被显示之前进行另外的处理。图像信号处理器540从图像存储器530接收处理数据,并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器570,以供用户观看和/或由图形引擎或GPU(GraphicsProcessing Unit,图形处理器)进一步处理。此外,图像信号处理器540的输出还可发送给图像存储器530,且显示器570可从图像存储器530读取图像数据。在一种实施方式中,图像存储器530可被配置为实现一个或多个帧缓冲器。此外,图像信号处理器540的输出可发送给编码器/解码器560,以便编码/解码图像数据。编码的图像数据可被保存,并在显示于显示器570设备上之前解压缩。编码器/解码器560可由CPU或GPU或协处理器实现。
图像信号处理器540确定的统计数据可发送给控制逻辑器550。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜511阴影校正等图像传感器512统计信息。控制逻辑器550可包括执行一个或多个例程(如固件)的处理器和/或微控制器,一个或多个例程可根据接收的统计数据,确定成像设备510的控制参数以及的控制参数。例如,控制参数可包括传感器520控制参数(例如增益、曝光控制的积分时间)、照相机闪光控制参数、透镜511控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵,以及透镜511阴影校正参数。
以下为运用图7中图像处理技术实现本实施例提供的图像的处理方法的步骤:
当接收到图像采集指令时,获取当前的环境光强度信息、以及人脸动态信息;
根据所述环境光强度信息和所述人脸动态信息生成环境参数;
基于所述环境参数确定需要抓取的图像帧数,以得到目标帧数;
获取数量为所述目标帧数的图像。
在一种实施方式中,环境光强度信息包括:环境光强度值,人脸动态信息包括:人脸移动速率;
则电子设备执行根据所述环境光强度信息和所述人脸动态信息生成环境参数的步骤时,具体可以执行:从多个预设强度区间中确定所述环境光强度值所在的目标强度区间,并获取所述目标强度区间所对应的第一梯度值;从多个预设速率区间中确定所述人脸移动速率所在的目标速率区间,并获取所述目标速率区间所对应的第二梯度值;根据所述第一梯度值和所述第二梯度值生成环境参数。
在一种实施方式中,电子设备执行根据所述第一梯度值和所述第二梯度值生成环境参数的步骤时,具体可以执行:确定所述第一梯度值、及所述第二梯度值对应的权重信息;根据所述权重信息对所述第一梯度值、及所述第二梯度值进行加权处理,得到加权处理后的第一加权值和第二加权值;根据所述第一加权值和所述第二加权值生成环境参数。
在一种实施方式中,电子设备执行基于所述环境参数确定需要抓取的图像帧数的步骤时,具体可以执行:从多个参数值区间中确定所述环境参数对应的目标参数值区间;根据预设映射关系集合,获取在所述目标参数值区间下对应需抓取的图像帧数,所述预设映射关系集合包括:参数值区间与图像帧数之间的映射关系。
在一种实施方式中,电子设备执行获取数量为所述目标帧数的图像的步骤时,具体可以执行:根据所述目标帧数调整所述电子设备中相机的快门参数;通过调整快门参数后的相机获取数量为所述目标帧数的图像。
在一种实施方式中,在所述获取数量为所述目标帧数的图像的步骤之后,电子设备还可以执行:将获取到图像确定为待处理图像;从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合预设条件的人脸图像;对所述基础图像进行预设处理并输出。
在一种实施方式中,电子设备执行所述从所述待处理图像中确定出基础图像的步骤时,可以执行:若各所述待处理图像为多人图像,则从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合所述预设条件的人脸图像。
那么,电子设备执行所述对所述基础图像进行预设处理并输出的步骤时,可以执行:从所述基础图像中确定出不符合所述预设条件的待替换人脸图像;从所述基础图像外的其它待处理图像中,确定出符合所述预设条件的目标人脸图像,所述目标人脸图像与所述待替换人脸图像为相同用户的人脸图像;在所述基础图像中,将所述待替换人脸图像替换为所述目标图像,得到经过图像替换处理的基础图像;对所述经过图像替换处理的基础图像进行图像降噪处理并输出。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见上文针对图像处理方法的详细描述,此处不再赘述。
本申请实施例提供的所述图像处理装置与上文实施例中的图像处理方法属于同一构思,在所述图像处理装置上可以运行所述图像处理方法实施例中提供的任一方法,其具体实现过程详见所述图像处理方法实施例,此处不再赘述。
需要说明的是,对本申请实施例所述图像处理方法而言,本领域普通技术人员可以理解实现本申请实施例所述图像处理方法的全部或部分流程,是可以通过计算机程序来控制相关的硬件来完成,所述计算机程序可存储于一计算机可读取存储介质中,如存储在存储器中,并被至少一个处理器执行,在执行过程中可包括如所述图像处理方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)等。
对本申请实施例的所述图像处理装置而言,其各功能模块可以集成在一个处理芯片中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中,所述存储介质譬如为只读存储器,磁盘或光盘等。
以上对本申请实施例所提供的一种图像处理方法、装置、存储介质以及电子设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (9)

1.一种图像处理方法,应用于电子设备,其特征在于,包括:
当接收到图像采集指令时,获取当前的环境光强度信息、以及人脸动态信息,其中,所述环境光强度信息包括:环境光强度值,所述人脸动态信息包括:人脸移动速率;
根据所述环境光强度值和所述人脸移动速率生成环境参数,其中当所述环境光强度值递增时,所述环境参数值先增后减,当所述人脸移动速率递增时,所述环境参数值递减;
从多个参数值区间中确定所述环境参数对应的目标参数值区间;
根据预设映射关系集合,获取在所述目标参数值区间下对应需抓取的图像帧数,以得到目标帧数,所述预设映射关系集合包括:参数值区间与图像帧数之间的映射关系,其中所述图像帧数与所述环境参数值成正比例关系;
获取数量为所述目标帧数的图像。
2.根据权利要求1所述的图像处理方法,其特征在于,
所述根据所述环境光强度值和所述人脸移动速率生成环境参数,包括:
从多个预设强度区间中确定所述环境光强度值所在的目标强度区间,并获取所述目标强度区间所对应的第一梯度值;
从多个预设速率区间中确定所述人脸移动速率所在的目标速率区间,并获取所述目标速率区间所对应的第二梯度值;
根据所述第一梯度值和所述第二梯度值生成环境参数。
3.根据权利要求2所述的图像处理方法,其特征在于,所述根据所述第一梯度值和所述第二梯度值生成环境参数,包括:
确定所述第一梯度值、及所述第二梯度值对应的权重信息;
根据所述权重信息对所述第一梯度值、及所述第二梯度值进行加权处理,得到加权处理后的第一加权值和第二加权值;
根据所述第一加权值和所述第二加权值生成环境参数。
4.根据权利要求1所述的图像处理方法,其特征在于,所述获取数量为所述目标帧数的图像,包括:
根据所述目标帧数调整所述电子设备中相机的快门参数;
通过调整快门参数后的相机获取数量为所述目标帧数的图像。
5.根据权利要求1-4任一项所述的图像处理方法,其特征在于,在获取数量为所述目标帧数的图像之后,还包括:
将获取到的图像确定为待处理图像;
从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合预设条件的人脸图像;
对所述基础图像进行预设处理并输出。
6.根据权利要求5所述的图像处理方法,其特征在于,所述从所述待处理图像中确定出基础图像的步骤,包括:
若各所述待处理图像为多人图像,则从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合所述预设条件的人脸图像;
所述对所述基础图像进行预设处理并输出的步骤,包括:
从所述基础图像中确定出不符合所述预设条件的待替换人脸图像;
从所述基础图像外的其它待处理图像中,确定出符合所述预设条件的目标人脸图像,所述目标人脸图像与所述待替换人脸图像为相同用户的人脸图像;
在所述基础图像中,将所述待替换人脸图像替换为所述目标图像,得到经过图像替换处理的基础图像;
对所述经过图像替换处理的基础图像进行图像降噪处理并输出。
7.一种图像处理装置,应用于电子设备,其特征在于,包括:
信息获取模块,用于当接收到图像采集指令时,获取当前的环境光强度信息、以及人脸动态信息,其中,所述环境光强度信息包括:环境光强度值,所述人脸动态信息包括:人脸移动速率;
生成模块,用于根据所述环境光强度值和所述人脸移动速率生成环境参数,其中当所述环境光强度值递增时,所述环境参数值先增后减,当所述人脸移动速率递增时,所述环境参数值递减;
确定模块,用于从多个参数值区间中确定所述环境参数对应的目标参数值区间;
根据预设映射关系集合,获取在所述目标参数值区间下对应需抓取的图像帧数,以得到目标帧数,所述预设映射关系集合包括:参数值区间与图像帧数之间的映射关系,其中所述图像帧数与所述环境参数值成正比例关系;
图像获取模块,用于获取数量为所述目标帧数的图像。
8.一种存储介质,其上存储有计算机程序,其特征在于,当所述计算机程序在计算机上执行时,使得所述计算机执行如权利要求1至6中任一项所述的方法。
9.一种电子设备,包括存储器,处理器,其特征在于,所述处理器通过调用所述存储器中存储的计算机程序,用于执行如权利要求1至6中任一项所述的方法。
CN201810222007.6A 2018-03-18 2018-03-18 图像处理方法、装置、存储介质及电子设备 Active CN108462831B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810222007.6A CN108462831B (zh) 2018-03-18 2018-03-18 图像处理方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810222007.6A CN108462831B (zh) 2018-03-18 2018-03-18 图像处理方法、装置、存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN108462831A CN108462831A (zh) 2018-08-28
CN108462831B true CN108462831B (zh) 2020-09-08

Family

ID=63236859

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810222007.6A Active CN108462831B (zh) 2018-03-18 2018-03-18 图像处理方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN108462831B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110096989B (zh) * 2019-04-24 2022-09-09 深圳爱莫科技有限公司 图像处理方法和装置
CN111860057A (zh) * 2019-04-29 2020-10-30 北京眼神智能科技有限公司 人脸图像模糊和活体检测方法、装置、存储介质及设备
CN116389898B (zh) * 2023-02-27 2024-03-19 荣耀终端有限公司 图像处理方法、设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001223943A (ja) * 2000-02-10 2001-08-17 Fuji Photo Film Co Ltd 撮像装置
US7129984B1 (en) * 1998-10-08 2006-10-31 Canon Kabushiki Kaisha Electronic device using operating system for overall apparatus control including mechanical operation
CN101369089A (zh) * 2007-08-15 2009-02-18 佛山普立华科技有限公司 图像连拍系统及方法
CN104243818A (zh) * 2014-08-29 2014-12-24 小米科技有限责任公司 图像处理方法、装置及设备
CN105072327A (zh) * 2015-07-15 2015-11-18 广东欧珀移动通信有限公司 一种防闭眼的人像拍摄处理的方法和装置
CN106355549A (zh) * 2016-09-30 2017-01-25 北京小米移动软件有限公司 拍照方法及设备
CN106657759A (zh) * 2016-09-27 2017-05-10 奇酷互联网络科技(深圳)有限公司 防闭眼的拍照方法及装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2642746B1 (en) * 2010-11-18 2015-06-10 Panasonic Intellectual Property Corporation of America Image capture device, image capture method
CN105303161A (zh) * 2015-09-21 2016-02-03 广东欧珀移动通信有限公司 一种多人拍照的方法及装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7129984B1 (en) * 1998-10-08 2006-10-31 Canon Kabushiki Kaisha Electronic device using operating system for overall apparatus control including mechanical operation
JP2001223943A (ja) * 2000-02-10 2001-08-17 Fuji Photo Film Co Ltd 撮像装置
CN101369089A (zh) * 2007-08-15 2009-02-18 佛山普立华科技有限公司 图像连拍系统及方法
CN104243818A (zh) * 2014-08-29 2014-12-24 小米科技有限责任公司 图像处理方法、装置及设备
CN105072327A (zh) * 2015-07-15 2015-11-18 广东欧珀移动通信有限公司 一种防闭眼的人像拍摄处理的方法和装置
CN106657759A (zh) * 2016-09-27 2017-05-10 奇酷互联网络科技(深圳)有限公司 防闭眼的拍照方法及装置
CN106355549A (zh) * 2016-09-30 2017-01-25 北京小米移动软件有限公司 拍照方法及设备

Also Published As

Publication number Publication date
CN108462831A (zh) 2018-08-28

Similar Documents

Publication Publication Date Title
CN110072051B (zh) 基于多帧图像的图像处理方法和装置
JP7371081B2 (ja) 夜景撮影方法、装置、電子機器および記憶媒体
CN109068067B (zh) 曝光控制方法、装置和电子设备
CN110062160B (zh) 图像处理方法和装置
CN108900782B (zh) 曝光控制方法、装置以及电子设备
CN110072052B (zh) 基于多帧图像的图像处理方法、装置、电子设备
EP3609177B1 (en) Control method, control apparatus, imaging device, and electronic device
CN109040609B (zh) 曝光控制方法、装置、电子设备和计算机可读存储介质
CN110166708B (zh) 夜景图像处理方法、装置、电子设备以及存储介质
CN110290289B (zh) 图像降噪方法、装置、电子设备以及存储介质
WO2020207261A1 (zh) 基于多帧图像的图像处理方法、装置、电子设备
CN109068058B (zh) 超级夜景模式下的拍摄控制方法、装置和电子设备
KR102266649B1 (ko) 이미지 처리 방법 및 장치
CN110166707B (zh) 图像处理方法、装置、电子设备以及存储介质
CN109348088B (zh) 图像降噪方法、装置、电子设备及计算机可读存储介质
CN108111749B (zh) 图像处理方法和装置
CN109672819B (zh) 图像处理方法、装置、电子设备及计算机可读存储介质
CN107509044B (zh) 图像合成方法、装置、计算机可读存储介质和计算机设备
CN110264420B (zh) 基于多帧图像的图像处理方法和装置
CN108259770B (zh) 图像处理方法、装置、存储介质及电子设备
CN110166706B (zh) 图像处理方法、装置、电子设备以及存储介质
CN109151333B (zh) 曝光控制方法、装置以及电子设备
CN108156369B (zh) 图像处理方法和装置
CN108401110B (zh) 图像的获取方法、装置、存储介质及电子设备
CN110166711B (zh) 图像处理方法、装置、电子设备以及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant after: OPPO Guangdong Mobile Communications Co., Ltd.

Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant before: Guangdong OPPO Mobile Communications Co., Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant