CN107180417B - 照片处理方法、装置、计算机可读存储介质及电子设备 - Google Patents

照片处理方法、装置、计算机可读存储介质及电子设备 Download PDF

Info

Publication number
CN107180417B
CN107180417B CN201710400970.4A CN201710400970A CN107180417B CN 107180417 B CN107180417 B CN 107180417B CN 201710400970 A CN201710400970 A CN 201710400970A CN 107180417 B CN107180417 B CN 107180417B
Authority
CN
China
Prior art keywords
photo
target
pictures
terminal
eyes
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710400970.4A
Other languages
English (en)
Other versions
CN107180417A (zh
Inventor
谭国辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201710400970.4A priority Critical patent/CN107180417B/zh
Publication of CN107180417A publication Critical patent/CN107180417A/zh
Priority to PCT/CN2018/089115 priority patent/WO2018219304A1/zh
Priority to EP18810707.2A priority patent/EP3617990B1/en
Priority to US16/693,961 priority patent/US11295416B2/en
Application granted granted Critical
Publication of CN107180417B publication Critical patent/CN107180417B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G06T5/70
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20182Noise reduction or smoothing in the temporal domain; Spatio-temporal filtering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Abstract

本发明实施例公开了一种照片处理方法、装置、计算机可读存储介质及电子设备。该方法包括:获取拍摄得到的多帧照片,该多帧照片包括人脸信息;从该多帧照片中选取至少两帧照片,并根据该至少两帧照片的人脸信息,获取相应照片中人脸预设部位的特征信息;若检测到该特征信息指示预设部位处于预设特征状态,则将相应的照片确定为目标照片;对该目标照片进行多帧降噪处理,得到输出照片。本发明实施例可以有效降低照片中脸部图像的噪声。

Description

照片处理方法、装置、计算机可读存储介质及电子设备
技术领域
本发明属于图片处理技术领域,尤其涉及一种照片处理方法、装置、计算机可读存储介质及电子设备。
背景技术
随着摄像头性能以及处理器计算能力的不断增长,同时借助于各类图像处理算法,终端已经可以拍摄出画质清晰度很高的照片。比如,终端可以快速拍摄多帧照片,然后通过多帧降噪处理,合成一帧噪声较小的照片。
然而,在进行多帧降噪处理时,如果作为输入的多帧照片中所包括的用户脸部特征不一致,那么在多帧合成后输出的照片中,用户脸部的图像反而会更加模糊,也即用户脸部的图像的噪声更大。
发明内容
本发明实施例提供一种照片处理方法、装置、计算机可读存储介质及电子设备,可以有效降低照片中脸部图像的噪声。
本发明实施例提供一种照片处理方法,包括:
获取拍摄得到的多帧照片,所述多帧照片包括人脸信息;
从所述多帧照片中选取至少两帧照片,并根据所述至少两帧照片的人脸信息,获取相应照片中人脸预设部位的特征信息;
若检测到所述特征信息指示所述预设部位处于预设特征状态,则将相应的照片确定为目标照片;
对所述目标照片进行多帧降噪处理,得到输出照片。
本发明实施例提供一种照片处理装置,包括:
第一获取模块,用于获取拍摄得到的多帧照片,所述多帧照片包括人脸信息;
第二获取模块,用于从所述多帧照片中选取至少两帧照片,并根据所述至少两帧照片的人脸信息,获取相应照片中人脸预设部位的特征信息;
检测模块,用于若检测到所述特征信息指示所述预设部位处于预设特征状态,则将相应的照片确定为目标照片;
输出模块,用于对所述目标照片进行多帧降噪处理,得到输出照片。
本发明实施例提供一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器加载并执行时实现本发明实施例提供的照片处理方法中的步骤。
本发明实施例提供一种电子设备,包括存储器,处理器,以及存储在所述存储器中并可在所述处理器中运行的计算机程序,所述处理器执行所述计算机程序时实现本发明实施例提供的照片处理方法中的步骤。
本发明实施例提供的照片处理方法、装置、计算机可读存储介质以及电子设备,终端可以先获取拍摄得到的多帧照片,该多帧照片包括人脸信息。然后,终端可以从该多帧照片中选取至少两帧照片,并根据该至少两帧照片的人脸信息,获取各相应照片中人脸预设部位的特征信息。之后,若终端检测到人脸预设部位的特征信息指示该预设部位处于预设特征状态,那么终端可以将相应的照片确定为目标照片。接着,终端可以对确定出来的目标照片进行多帧降噪处理,并得到输出照片。由于本发明实施例中确定出来的目标照片均为人脸预设部位处于预设特征状态的照片,即这些目标照片在人脸预设部位的特征状态一致,因此对这些目标照片进行多帧降噪处理后得到的输出照片中用户脸部的噪声更低。
附图说明
下面结合附图,通过对本发明的具体实施方式详细描述,将使本发明的技术方案及其有益效果显而易见。
图1是本发明实施例提供的照片处理方法的流程示意图。
图2是本发明实施例提供的照片处理方法的另一流程示意图。
图3A至图3C是本发明实施例提供的照片处理方法的场景示意图。
图4是本发明实施例提供的照片处理装置的结构示意图。
图5是本发明实施例提供的照片处理装置的另一结构示意图。
图6是本发明实施例提供的移动终端的结构示意图。
具体实施方式
请参照图式,其中相同的组件符号代表相同的组件,本发明的原理是以实施在一适当的运算环境中来举例说明。以下的说明是基于所例示的本发明具体实施例,其不应被视为限制本发明未在此详述的其它具体实施例。
以下将详细说明。
请参阅图1,图1是本发明实施例提供的照片处理方法的流程示意图,流程可以包括:
在步骤S101中,获取拍摄得到的多帧照片,该多帧照片包括人脸信息。
可以理解的是,本发明实施例的执行主体可是诸如智能手机、平板电脑等终端设备。
比如,相关技术中,在应用多帧降噪功能时,终端可以输入四帧照片,并对这四帧照片进行多帧合成,从而得到一帧噪声更小的照片。然后,如果作为输入的四帧照片所包括的用户脸部特征不一致,那么在多帧合成后输出的照片中,用户脸部的图像反而会更加模糊,也即用户脸部图像的噪声反而会更大。
在本发明实施例中,终端可以先获取拍摄得到的多帧照片,该多帧照片包括人脸信息。
比如,在暗光环境下,终端开启了多帧降噪功能。那么,在用户拍照时,对于同一个场景,终端会一次性拍摄多帧照片。例如,在用户进行自拍或者用户给好友拍照时,终端会一次性快速地拍摄8帧或10帧照片。可以理解的是,终端拍摄得到的这8帧或10帧照片包含人脸信息,并且具有相同的场景信息。
在步骤S102中,从该多帧照片中选取至少两帧照片,并根据该至少两帧照片的人脸信息,获取相应照片中人脸预设部位的特征信息。
在步骤S103中,若检测到该特征信息指示预设部位处于预设特征状态,则将相应的照片确定为目标照片。
比如,步骤S102和S103可以包括:
在获取到拍摄得到的包括人脸信息的8帧照片后,终端可以从这8帧照片中选取至少两帧照片。比如,终端可以先从这8帧照片中选取6帧照片。例如,这6帧照片分别为A、B、C、D、E、F。
然后,终端可以根据照片A、B、C、D、E、F的人脸信息,分别获取各相应照片中人脸预设部位的特征信息。例如,根据照片A的人脸信息,终端可以获取照片A中人脸预设部位的特征信息。
需要说明的是,在一种实施方式中,人脸预设部位可以是诸如人脸眼部或者嘴部等状态容易发生变化的部位。例如,在拍照过程中,人脸眼部可能会眨眼,导致部分照片中人脸眼部为闭眼状态,而部分照片中人脸眼部为未闭眼状态。
之后,终端可以根据获取到各帧照片中人脸预设部位的特征信息,分别检测各相应照片中人脸预设部位的特征信息是否指示该预设部位处于预设特征状态。
若检测到预设部位的特征信息指示该预设部位不处于预设特征状态,那么终端可以将相应的照片确定为不属于目标照片。例如,终端检测到照片C中人脸预设部位的特征信息指示该预设部位不处于预设特征状态,那么终端可以将照片C确定为不属于目标照片。也就是说,终端可以不采用照片C作为多帧降噪的输入照片。
若检测到预设部位的特征信息指示该预设部位处于预设特征状态,那么终端可以将相应的照片确定为目标照片。例如,终端检测到照片A中人脸预设部位的特征信息指示该预设部位处于预设特征状态,那么终端可以将照片A确定为目标照片。也就是说,终端可以采用照片A作为多帧降噪的输入照片。
在步骤S104中,对该目标照片进行多帧降噪处理,得到输出照片。
比如,照片A、B、C、D、E、F中的A、B、D、E被终端确定为目标照片,那么终端可以对照片A、B、D、E执行多帧降噪处理,并得到一张多帧合成后的照片,即输出照片。
可以理解的是,本发明实施例中,用于进行多帧降噪的目标照片,其人脸预设部位均处于预设特征状态,即人脸预设部位的特征一致,因此相比于人脸预设部位特征不一致的情况,本发明实施例对目标照片进行多帧降噪处理后得到的输出照片在人脸预设部位的图像噪声更小。
请参阅图2,图2为本发明实施例提供的照片处理方法的另一流程示意图,流程可以包括:
在步骤S201中,终端获取拍摄得到的多帧照片,该多帧照片包括人脸信息。
比如,在终端开启了多帧降噪功能的情况下,用户使用终端为好友拍摄半身照片,此时终端会一次性快速拍摄多帧照片,如8帧照片。
之后,终端可以获取该拍摄得到的8帧照片,这8帧照片中包括用户好友的人脸信息。
在步骤S202中,终端从该多帧照片中选取至少两帧照片,并根据该至少两帧照片的人脸信息,获取各相应照片中人脸眼部的特征信息。
比如,在获取到8帧照片后,终端可以从这8帧照片中选取至少两帧照片。例如,在本发明实施例中,终端可以将这8帧照片全部选中。
然后,终端可以根据这8帧照片的人脸信息,分别获取各相应照片中人脸眼部的特征信息。例如,这8帧照片分别为A、B、C、D、E、F、G、H。那么,终端可以根据照片A的人脸信息,获取照片A中人脸眼部的特征信息。终端根据照片B的人脸信息,获取照片B中人脸眼部的特征信息,等等。
在步骤S203中,对该至少两帧照片,终端按照拍摄时间先后的顺序,依次检测各帧照片中人脸眼部的特征信息是否指示该人脸眼部处于未闭合状态。
在步骤S204中,若检测到人脸眼部的特征信息指示该人脸眼部处于未闭合状态,则终端将相应的照片确定为目标照片。
比如,步骤S203和S204可以包括:
在获取到各帧照片中人脸眼部的特征信息之后,终端可以按照拍摄时间先后的顺序,依次检测各帧照片中人脸眼部的特征信息是否指示该人脸眼部处于未闭合状态(即未闭眼状态)。
例如,照片A、B、C、D、E、F、G、H的拍摄时间由先到后,那么终端可以首先检测照片A中人脸眼部的特征信息是否指示人脸眼部处于未闭合状态。
如果检测到照片A的人脸眼部的特征信息指示人脸眼部处于未闭合状态,那么终端可以将照片A确定为目标照片。
如果检测到照片A的人脸眼部的特征信息指示人脸眼部不处于未闭合状态,那么终端可以将照片A确定为不属于目标照片,即步骤S207。也就是说,此时终端可以不采用照片A作为多帧降噪的输入照片。
接着,终端可以检测照片B中人脸眼部的特征信息是否指示人脸眼部处于未闭合状态。如果检测到照片B的人脸眼部的特征信息指示人脸眼部处于未闭合状态,那么终端可以将照片B确定为目标照片。如果检测到照片B的人脸眼部的特征信息指示人脸眼部不处于未闭合状态,那么终端可以将照片B确定为不属于目标照片。
同理,终端可以接着对照片C、D、E、F、G、H进行检测。
可以理解的是,一般地,在拍照过程的前段时间内,用户的姿态保持的比较好,因此按照拍摄时间先后的顺序,依次检测各帧照片中人脸眼部的特征信息是否指示该人脸眼部处于未闭合状态,可以更快地获取到所需的目标照片。
在步骤S205中,当检测到确定出来的目标照片的数量达到预设数量时,终端停止查找目标照片。
比如,本发明实施例中,在依次检测各帧照片中人脸眼部是否处于未闭合状态的过程中,终端还可以检测其确定出来的目标照片的数量是否达到预设数量。
若检测到终端确定出来的目标照片的数量已经达到预设数量,那么终端可以停止查找目标照片。
若检测到终端确定出来的目标照片的数量尚未达到预设数量,那么终端可以继续查找目标照片。
例如,在一种实施方式中,预设数量可以为4帧。也就是说,在依次检测照片A、B、C、D、E、F、G、H中人脸眼部是否处于未闭合状态的过程中,如果终端检测到其确定出来的目标照片的数量已经达到4帧,那么终端可以停止查找目标照片。
例如,照片A被终端确定为目标照片,照片B被终端确定为目标照片,照片C被终端确定为不属于目标照片,照片D被终端确定为不属于目标照片,照片E被终端确定为目标照片,照片F被终端确定为目标照片。那么,当照片F被确定为目标照片时,终端可以检测到其确定出来的目标照片已经达到了4帧,那么终端可以停止查找目标照片。也就是说,终端可以停止检测照片G和照片H中人脸眼部是否处于未闭合状态。
如果终端检测到其确定出来的目标照片的数量尚未达到4帧,那么终端可以继续查找目标照片,直至最后一帧照片H。
在步骤S206中,终端对目标照片进行多帧降噪处理,得到输出照片。
比如,在得到预设数量的目标照片后,终端可以对目标照片进行多帧降噪处理,并得到输出照片。
例如,终端对目标照片A、B、E、F进行多帧降噪处理,得到输出照片I。
可以理解的是,本发明实施例中,由于终端确定出来的目标照片A、B、E、F中人脸眼部均处于未闭合状态,因此目标照片A、B、E、F在人脸眼部的特征一致。所以,相比于人脸特征不一致的情况(如对照片A、B、C、D进行多帧降噪处理,照片A和B中人脸眼部未闭合,而照片C和D中人脸眼部闭合),本发明实施例对目标照片A、B、E、F执行多帧降噪处理,得到的输出照片的人脸图像部分的噪声更小,画质更清晰。
在一种实施方式中,可以通过如下步骤来确定步骤S205中的预设数量:
终端获取拍摄照片时使用的感光度数值;
终端确定与该感光度数值对应的目标数量,该目标数量大于或等于两张;
终端将该目标数量确定为预设数量。
比如,在不同的暗光环境下,终端可以使用不同的感光度数值来拍摄照片。一般的,感光度数值越高,终端拍摄得到的照片的图像噪声越大,照片品质越差。
因此,针对拍摄时所使用的不同的感光度数值,终端在进行多帧降噪时可以使用不同帧数的照片作为输入照片。比如,终端可以预先设置一张对应关系表,在该对应关系表中记载了多个感光度数值区间,以及与各感光度数值区间对应的帧数。在一种实施方式中,可以是感光度数值越大的区间,其对应的帧数越大。例如,感光度数值区间[200,800),对应的帧数为4帧。感光度数值[800,1000],对应的帧数为5帧。感光度数值在1000以上,对应的帧数为6帧,等等。
基于此,当需要应用多帧降噪时,终端可以先获取拍摄照片时使用的感光度数值。然后,终端可以查询对应关系表,确定出与该感光度数值对应的目标数量,并将该目标数量确定为预设数量。该确定出来的预设数量就是终端在进行多帧降噪时需要获取的目标照片的数量。
例如,终端拍摄照片时使用的感光度数值为700,那么终端需要获取4帧目标照片用于进行多帧降噪处理。而当终端拍摄照片时使用的感光度数值为800,那么终端需要获取5帧目标照片用于进行多帧降噪处理。
可以理解的是,对于不同的感光度数值,获取不同的帧数的目标照片来进行多帧降噪处理,可以提高图像降噪的效果。
在一些实施方式中,有可能出现如下情况:终端确定出来的目标照片的数量低于预设数量。例如,在终端拍摄照片所使用的感光度数值为800的情况下,终端需要获取5帧目标照片用于进行多帧降噪。但是,终端最终只确定出4帧目标照片。在这种情况下,终端可以仅使用者4帧照片进行多帧降噪。也即,在目标照片的数量低于预设数量的情况下,只要该目标照片的数量不低于两张,那么终端仍然可以进行多帧降噪。
在一种实施方式中,本发明实施例还可以包括如下步骤:
在选取目标照片的过程中,若检测出选取到的目标照片的数量为一张,则终端将选取出来的目标照片确定为输出照片。
比如,在终端拍摄照片所使用的感光度数值为800的情况下,终端需要获取5帧目标照片用于进行多帧降噪。但是,终端最终只确定出1帧目标照片。例如,在终端所拍摄的8帧照片中,仅有一帧照片中用户人脸眼部处于未闭合状态。在这种情况下,由于目标照片的数量少于两张,因此终端可以直接将这1帧目标照片确定为输出照片。
当然,在另一种实施方式,如果终端确定出来的人脸眼部处于未闭合状态的目标照片的数量为1帧或0帧,那么也可以认为用户需要拍摄人脸眼部处于闭眼状态的照片。此时,终端可以选取人脸眼部处于闭眼状态的多帧照片进行多帧合成,并输出一张人脸眼部处于闭眼状态的照片。
请参阅图3A至图3C,图3A至图3C为本发明实施例提供的照片处理方法的场景示意图。
比如,用户在弱光环境下为好友拍摄半身像照片,终端上开启了多帧降噪功能。
例如,在用户按下拍摄按钮后,终端一次性为用户好友拍摄了8帧照片,按照拍摄时间的先后顺序,分别为照片A、B、C、D、E、F、G、H。另外,终端获取到拍照时使用的感光度数值为600,并据此确定出终端需要获取4帧用于进行多帧降噪的目标照片。
首先,终端可以获取上述8帧照片A、B、C、D、E、F、G、H。然后,终端可以将这8帧照片全部选中。接着,终端可以通过人脸识别技术,确定出各帧照片中用户好友的人脸区域,进而确定出人脸眼部的位置,并提取人脸眼部的特征信息。以其中一帧照片为例,如图3A所示。
之后,终端可以按照拍摄时间先后的顺序,依次检测各帧照片中人脸眼部的特征信息是否指示该人脸眼部处于未闭合状态。需要说明的是,人脸眼部处于闭合状态即为眼部处于闭眼状态,而人脸眼部处于未闭合状态即为眼部处于未闭眼状态。
若检测到照片中人脸眼部的特征信息指示该人脸眼部处于未闭合状态,那么终端可以将相应的照片确定为目标照片。若检测到照片中人脸眼部的特征信息指示该人脸眼部处于闭合状态,那么终端可以将相应的照片确定为不属于目标照片。
例如,对于照片A,终端根据获取到的照片A中人脸眼部的特征信息,检测到照片A中人脸眼部的特征信息指示眼部处于未闭合状态,如图3B所示,那么终端就可以将照片A确定为目标照片。
对于照片C,终端根据获取到的照片C中人脸眼部的特征信息,检测到照片C中人脸眼部的特征信息指示眼部处于闭合状态,如图3C所示,那么终端就可以将照片C弃之不用,也就是将照片C确定为不属于目标照片。
同时,在终端按照拍摄时间先后的顺序,对各帧照片进行检测的过程中,终端还可以对确定出来的目标照片的数量进行统计。如果检测到终端确定出来的目标照片的数量达到了4帧,那么终端可以停止查找目标照片。如果检测到终端确定出来的目标照片的数量尚未达到4帧,那么终端可以继续查找目标照片。
比如,在查找目标照片的过程中,终端将照片A确定为目标照片,将照片B确定为目标照片,将照片C确定为不属于目标照片,将照片D确定为不属于目标照片,将照片E确定为目标照片,将照片F确定为目标照片。那么,在将照片F确定为目标照片后,终端检测到目标照片的数量已经达到4帧,因此终端可以停止查找目标照片,也即不再检测剩余照片G和H是否为目标照片。
在确定出目标照片A、B、E、F,终端就可以将这四帧照片进行多帧降噪处理,并得到一帧输出照片。
请参阅图4,图4为本发明实施例提供的照片处理装置的结构示意图。照片处理装置300可以包括:第一获取模块301,第二获取模块302,检测模块303,以及输出模块304。
第一获取模块301,用于获取拍摄得到的多帧照片,所述多帧照片包括人脸信息。
比如,在终端开启了多帧降噪功能的情况下,用户使用终端为好友拍摄照片,此时终端会一次性快速拍摄多帧照片,如8帧照片。之后,终端的第一获取模块301可以获取该拍摄得到的8帧照片,这8帧照片中包括用户好友的人脸信息。
第二获取模块302,用于从所述多帧照片中选取至少两帧照片,并根据所述至少两帧照片的人脸信息,获取相应照片中人脸预设部位的特征信息。
检测模块303,用于若检测到所述特征信息指示所述预设部位处于预设特征状态,则将相应的照片确定为目标照片。
比如,在第一获取模块301获取到拍摄得到的包括人脸信息的8帧照片后,第二获取模块302可以从这8帧照片中选取至少两帧照片。比如,第二获取模块302可以先从这8帧照片中选取6帧照片。例如,这6帧照片分别为A、B、C、D、E、F。
然后,第二获取模块302可以根据照片A、B、C、D、E、F的人脸信息,分别获取各相应照片中人脸预设部位的特征信息。例如,根据照片A的人脸信息,第二获取模块302可以获取照片A中人脸预设部位的特征信息。
需要说明的是,在一种实施方式中,人脸预设部位可以是诸如人脸眼部或者嘴部等状态容易发生变化的部位。例如,在拍照过程中,人脸眼部可能会眨眼,导致部分照片中人脸眼部为闭眼状态,而部分照片中人脸眼部为未闭眼状态。
之后,检测模块303可以根据获取到各帧照片中人脸预设部位的特征信息,分别检测各相应照片中人脸预设部位的特征信息是否指示该预设部位处于预设特征状态。
若检测到预设部位的特征信息指示该预设部位不处于预设特征状态,那么终端可以将相应的照片确定为不属于目标照片。例如,检测模块303检测到照片C中人脸预设部位的特征信息指示该预设部位不处于预设特征状态,那么终端可以将照片C确定为不属于目标照片。也就是说,终端可以不采用照片C作为多帧降噪的输入照片。
若检测到预设部位的特征信息指示该预设部位处于预设特征状态,那么检测模块303可以将相应的照片确定为目标照片。例如,检测模块303检测到照片A中人脸预设部位的特征信息指示该预设部位处于预设特征状态,那么检测模块303可以将照片A确定为目标照片。也就是说,检测模块303可以采用照片A作为多帧降噪的输入照片。
输出模块304,用于对所述目标照片进行多帧降噪处理,得到输出照片。
比如,照片A、B、C、D、E、F中的A、B、D、E被检测模块303确定为目标照片,那么输出模块304可以对照片A、B、D、E执行多帧降噪处理,并得到一张多帧合成后的照片,即输出照片。
在一种实施方式中,第二获取模块302可以用于:根据所述至少两帧照片的人脸信息,获取相应照片中人脸眼部的特征信息。
基于此,检测模块303可以用于:若检测到所述特征信息指示人脸眼部处于未闭合状态,则将相应的照片确定为目标照片。
比如,在从多帧照片中选取至少两帧照片之后,第二获取模块302可以根据该至少两帧照片的人脸信息,获取各相应照片中人脸眼部的特征信息。之后,检测模块303可以检测各帧照片中人脸眼部的特征信息是否指示人脸眼部处于未闭合状态。
如果检测到人脸眼部的特征信息指示人脸眼部处于未闭合状态,那么检测模块303可以将相应的照片确定为目标照片。
如果检测到人脸眼部的特征信息指示人脸眼部不处于未闭合状态,那么检测模块303可以将相应的照片确定为不属于目标照片。也就是说,此时终端可以不采用相应的照片作为多帧降噪的输入照片。
在一种实施方式中,检测模块303可以用于:
对所述至少两帧照片,按照拍摄时间先后的顺序,依次检测各帧照片中人脸眼部的特征信息是否指示眼部处于未闭合状态;
若检测到照片中人脸眼部的特征信息指示眼部处于未闭合状态,则将相应的照片确定为目标照片。
比如,在第二获取模块302获取到至少两帧照片中人脸眼部的特征信息之后,检测模块303可以按照拍摄时间先后的顺序,依次检测各帧照片中人脸眼部的特征信息是否指示该人脸眼部处于未闭合状态。
例如,照片A、B、C、D、E、F、G、H的拍摄时间由先到后,那么检测模块303可以首先检测照片A中人脸眼部的特征信息是否指示人脸眼部处于未闭合状态。
如果检测到照片A的人脸眼部的特征信息指示人脸眼部处于未闭合状态,那么检测模块303可以将照片A确定为目标照片。
如果检测到照片A的人脸眼部的特征信息指示人脸眼部不处于未闭合状态,那么检测模块303可以将照片A确定为不属于目标照片。也就是说,此时终端可以不采用照片A作为多帧降噪的输入照片。
同理,终端可以接着对照片B、C、D、E、F、G、H进行检测。
请一并参阅图5,图5为本发明实施例提供的照片处理装置的另一结构示意图。在一实施例中,照片处理装置300还可以包括:停止查找模块305、第一确定模块306,以及第二确定模块307。
停止查找模块305,用于当检测到确定出来的目标照片的数量达到预设数量时,停止查找目标照片。
比如,在依次检测各帧照片中人脸眼部是否处于未闭合状态的过程中,停止查找模块305还可以检测其确定出来的目标照片的数量是否达到预设数量。
若检测到终端确定出来的目标照片的数量已经达到预设数量,那么停止查找模块305可以控制终端停止查找目标照片。
若检测到终端确定出来的目标照片的数量尚未达到预设数量,那么终端可以继续查找目标照片。
例如,在一种实施方式中,预设数量可以为4帧。也就是说,在依次检测照片A、B、C、D、E、F、G、H中人脸眼部是否处于未闭合状态的过程中,如果停止查找模块305检测到终端确定出来的目标照片的数量已经达到4帧,那么停止查找模块305可以控制终端停止查找目标照片。
第一确定模块306,用于获取拍摄照片时使用的感光度数值;确定与所述感光度数值对应的目标数量,所述目标数量大于或等于两张;将所述目标数量确定为预设数量。
比如,在不同的暗光环境下,终端可以使用不同的感光度数值来拍摄照片。一般的,感光度数值越高,终端拍摄得到的照片的图像噪声越大,照片品质越差。
因此,针对拍摄时所使用的不同的感光度数值,终端在进行多帧降噪时可以使用不同帧数的照片作为输入照片。比如,终端可以预先设置一张对应关系表,在该对应关系表中记载了多个感光度数值区间,以及与各感光度数值区间对应的帧数。在一种实施方式中,可以是感光度数值越大的区间,其对应的帧数越大。例如,感光度数值区间[200,800),对应的帧数为4帧。感光度数值[800,1000],对应的帧数为5帧。感光度数值在1000以上,对应的帧数为6帧,等等。
基于此,当需要应用多帧降噪时,第一确定模块306可以先获取拍摄照片时使用的感光度数值。然后,第一确定模块306可以查询对应关系表,确定出与该感光度数值对应的目标数量,并将该目标数量确定为预设数量。该确定出来的预设数量就是终端在进行多帧降噪时需要获取的目标照片的数量。
例如,终端拍摄照片时使用的感光度数值为700,那么终端需要获取4帧目标照片用于进行多帧降噪处理。而当终端拍摄照片时使用的感光度数值为800,那么终端需要获取5帧目标照片用于进行多帧降噪处理。
第二确定模块307,用于在选取目标照片的过程中,若检测出选取到的目标照片的数量为一张,则将选取出来的目标照片确定为输出照片。
比如,在终端拍摄照片所使用的感光度数值为800的情况下,终端需要获取5帧目标照片用于进行多帧降噪。但是,检测模块303最终只确定出1帧目标照片。例如,在终端所拍摄的8帧照片中,仅有一帧照片中用户人脸眼部处于未闭合状态。在这种情况下,由于目标照片的数量少于两张,因此第二确定模块307可以直接将这1帧目标照片确定为输出照片。
本发明实施例还提供一种计算机可读存储介质,其中存储有计算机程序,所述计算机程序被处理器加载并执行时可以实现本发明实施例提供的照片处理方法中的步骤。
本发明实施例还提供一种电子设备,包括存储器,处理器,以及存储在所述存储器中并可在所述处理器中运行的计算机程序,所述处理器执行所述计算机程序时实现本发明实施例提供的照片处理方法中的步骤。
例如,上述电子设备可以是如平板电脑、手机等的移动终端。请参阅图6,图6为本发明实施例提供的移动终端结构示意图。该移动终端500可以包括有一个或一个以上计算机可读存储介质的存储器501、输入单元502、显示单元503、摄像单元504、包括有一个或者一个以上处理核心的处理器505、以及电源506等部件。本领域技术人员可以理解,图6中示出的移动终端结构并不构成对移动终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
存储器501可用于存储应用程序和数据。存储器501存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器505通过运行存储在存储器501的应用程序,从而执行各种功能应用以及数据处理。
输入单元502可用于接收输入的数字、字符信息或用户特征信息(比如指纹),以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。在一实施例中,输入单元502可包括触敏表面以及其他输入设备。
显示单元503可用于显示由用户输入的信息或提供给用户的信息以及移动终端的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元503可包括显示面板。
摄像单元504具有静态图像捕捉和视频摄像等功能。摄像单元504可以利用摄像头采集图像,并由摄像头内的感光组件电路和控制组件对图像进行处理并转换为电子设备能够识别的数字信号。
处理器505是移动终端的控制中心,利用各种接口和线路连接整个移动终端的各个部分,通过运行或执行存储在存储器501内的应用程序,以及调用存储在存储器501内的数据,执行移动终端的各种功能和处理数据,从而对移动终端进行整体监控。
移动终端还包括给各个部件供电的电源506(比如电池)。电源506可以通过电源管理系统与处理器505逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
尽管图6中未示出,移动终端还可以包括无线保真模块、蓝牙模块等,在此不再赘述。
具体在本实施例中,移动终端中的处理器505会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行代码加载到存储器501中,并由处理器505来运行存储在存储器501中的应用程序,从而实现步骤:
获取拍摄得到的多帧照片,所述多帧照片包括人脸信息;从所述多帧照片中选取至少两帧照片,并根据所述至少两帧照片的人脸信息,获取相应照片中人脸预设部位的特征信息;若检测到所述特征信息指示所述预设部位处于预设特征状态,则将相应的照片确定为目标照片;对所述目标照片进行多帧降噪处理,得到输出照片。
在一种实施方式中,处理器505在执行所述根据所述至少两帧照片的人脸信息,获取相应照片中人脸预设部位的特征信息时,可以包括:根据所述至少两帧照片的人脸信息,获取相应照片中人脸眼部的特征信息。
基于此,处理器505在执行所述若检测到所述特征信息指示所述预设部位处于预设特征状态,则将相应的照片确定为目标照片时,可以包括:若检测到所述特征信息指示人脸眼部处于未闭合状态,则将相应的照片确定为目标照片。
在一种实施方式中,处理器505在执行所述若检测到所述特征信息指示人脸眼部处于未闭合状态,则将相应的照片确定为目标照片时,可以包括:对所述至少两帧照片,按照拍摄时间先后的顺序,依次检测各帧照片中人脸眼部的特征信息是否指示眼部处于未闭合状态;若检测到照片中人脸眼部的特征信息指示眼部处于未闭合状态,则将相应的照片确定为目标照片。
在一些实施方式中,处理器505还可以执行如下步骤:当检测到确定出来的目标照片的数量达到预设数量时,停止查找目标照片。
在一些实施方式中,处理器505还可以执行如下步骤:获取拍摄照片时使用的感光度数值;确定与所述感光度数值对应的目标数量,所述目标数量大于或等于两张;将所述目标数量确定为预设数量。
在一些实施方式中,处理器505还可以执行如下步骤:在选取目标照片的过程中,若检测出选取到的目标照片的数量为一张,则将选取出来的目标照片确定为输出照片。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见上文针对照片处理方法的详细描述,此处不再赘述。
本发明实施例提供的所述照片处理装置与上文实施例中的照片处理方法属于同一构思,在所述照片处理装置上可以运行所述照片处理方法实施例中提供的任一方法,其具体实现过程详见所述照片处理方法实施例,此处不再赘述。
需要说明的是,对本发明实施例所述照片处理方法而言,本领域普通测试人员可以理解实现本发明实施例所述照片处理方法的全部或部分流程,是可以通过计算机程序来控制相关的硬件来完成,所述计算机程序可存储于一计算机可读取存储介质中,如存储在存储器中,并被至少一个处理器执行,在执行过程中可包括如所述照片处理方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)等。
对本发明实施例的所述照片处理装置而言,其各功能模块可以集成在一个处理芯片中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中,所述存储介质譬如为只读存储器,磁盘或光盘等。
以上对本发明实施例所提供的一种照片处理方法、装置、计算机可读存储介质以及电子设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (7)

1.一种照片处理方法,其特征在于,所述方法包括:
当检测到降噪功能被开启时,获取拍摄得到的相同场景的多帧照片,所述多帧照片包括人脸信息;
从所述多帧照片中选取至少两帧照片,并根据所述至少两帧照片的人脸信息,获取相应照片中人脸预设部位的特征信息;
若检测到所述特征信息指示所述预设部位处于预设特征状态,则将相应的照片确定为目标照片;
当检测到确定出来的目标照片的数量达到预设数量时,停止查找目标照片,所述预设数量通过拍摄时获取的感光度数值确定;
对确定出来的多张所述目标照片进行多帧降噪处理,得到一张多帧合成后的照片。
2.根据权利要求1所述的照片处理方法,其特征在于,所述根据所述至少两帧照片的人脸信息,获取相应照片中人脸预设部位的特征信息,包括:
根据所述至少两帧照片的人脸信息,获取相应照片中人脸眼部的特征信息;
所述若检测到所述特征信息指示所述预设部位处于预设特征状态,则将相应的照片确定为目标照片,包括:若检测到所述特征信息指示人脸眼部处于未闭合状态,则将相应的照片确定为目标照片。
3.根据权利要求2所述的照片处理方法,其特征在于,所述若检测到所述特征信息指示人脸眼部处于未闭合状态,则将相应的照片确定为目标照片,包括:
对所述至少两帧照片,按照拍摄时间先后的顺序,依次检测各帧照片中人脸眼部的特征信息是否指示眼部处于未闭合状态;
若检测到照片中人脸眼部的特征信息指示眼部处于未闭合状态,则将相应的照片确定为目标照片。
4.根据权利要求1所述的照片处理方法,其特征在于,所述方法还包括:
获取拍摄照片时使用的感光度数值;
确定与所述感光度数值对应的目标数量,所述目标数量大于或等于两张;
将所述目标数量确定为预设数量。
5.根据权利要求1所述的照片处理方法,其特征在于,所述方法还包括:
在选取目标照片的过程中,若检测出选取到的目标照片的数量为一张,则将选取出来的目标照片确定为输出照片。
6.一种计算机可读存储介质,存储有计算机程序,其特征在于,所述计算机程序被处理器加载并执行时实现权利要求1至5中任意一项所述的照片处理方法中的步骤。
7.一种电子设备,包括存储器,处理器,以及存储在所述存储器中并可在所述处理器中运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至5中任意一项所述的照片处理方法中的步骤。
CN201710400970.4A 2017-05-31 2017-05-31 照片处理方法、装置、计算机可读存储介质及电子设备 Active CN107180417B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201710400970.4A CN107180417B (zh) 2017-05-31 2017-05-31 照片处理方法、装置、计算机可读存储介质及电子设备
PCT/CN2018/089115 WO2018219304A1 (zh) 2017-05-31 2018-05-31 照片处理方法、装置、计算机可读存储介质及电子设备
EP18810707.2A EP3617990B1 (en) 2017-05-31 2018-05-31 Picture processing method and apparatus, computer readable storage medium, and electronic device
US16/693,961 US11295416B2 (en) 2017-05-31 2019-11-25 Method for picture processing, computer-readable storage medium, and electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710400970.4A CN107180417B (zh) 2017-05-31 2017-05-31 照片处理方法、装置、计算机可读存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN107180417A CN107180417A (zh) 2017-09-19
CN107180417B true CN107180417B (zh) 2020-04-10

Family

ID=59835038

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710400970.4A Active CN107180417B (zh) 2017-05-31 2017-05-31 照片处理方法、装置、计算机可读存储介质及电子设备

Country Status (4)

Country Link
US (1) US11295416B2 (zh)
EP (1) EP3617990B1 (zh)
CN (1) CN107180417B (zh)
WO (1) WO2018219304A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107180417B (zh) 2017-05-31 2020-04-10 Oppo广东移动通信有限公司 照片处理方法、装置、计算机可读存储介质及电子设备
CN108335278B (zh) * 2018-03-18 2020-07-07 Oppo广东移动通信有限公司 图像的处理方法、装置、存储介质及电子设备
CN113808066A (zh) * 2020-05-29 2021-12-17 Oppo广东移动通信有限公司 图像选取方法、装置、存储介质及电子设备

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106250426A (zh) * 2016-07-25 2016-12-21 深圳天珑无线科技有限公司 一种照片处理方法和终端

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8031970B2 (en) * 2007-08-27 2011-10-04 Arcsoft, Inc. Method of restoring closed-eye portrait photo
US8315474B2 (en) * 2008-01-18 2012-11-20 Sanyo Electric Co., Ltd. Image processing device and method, and image sensing apparatus
US9542390B2 (en) * 2014-04-30 2017-01-10 Adobe Systems Incorporated Method and apparatus for mitigating face aging errors when performing facial recognition
CN106127698A (zh) 2016-06-15 2016-11-16 深圳市万普拉斯科技有限公司 图像降噪处理方法和装置
CN107180417B (zh) * 2017-05-31 2020-04-10 Oppo广东移动通信有限公司 照片处理方法、装置、计算机可读存储介质及电子设备

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106250426A (zh) * 2016-07-25 2016-12-21 深圳天珑无线科技有限公司 一种照片处理方法和终端

Also Published As

Publication number Publication date
WO2018219304A1 (zh) 2018-12-06
US11295416B2 (en) 2022-04-05
EP3617990B1 (en) 2022-05-04
EP3617990A4 (en) 2020-04-01
US20200090310A1 (en) 2020-03-19
EP3617990A1 (en) 2020-03-04
CN107180417A (zh) 2017-09-19

Similar Documents

Publication Publication Date Title
CN109671106B (zh) 一种图像处理方法、装置与设备
WO2017096866A1 (zh) 高动态范围图像的生成方法和装置
EP3854069B1 (en) Automated camera mode selection
CN108513069B (zh) 图像处理方法、装置、存储介质及电子设备
CN107147851B (zh) 照片处理方法、装置、计算机可读存储介质及电子设备
CN107180417B (zh) 照片处理方法、装置、计算机可读存储介质及电子设备
CN106254807B (zh) 提取静止图像的电子设备和方法
CN108574803B (zh) 图像的选取方法、装置、存储介质及电子设备
CN112422798A (zh) 拍照方法、装置、电子设备和存储介质
JP2023545536A (ja) 撮影方法、撮影装置、電子機器及び可読記憶媒体
US20220329729A1 (en) Photographing method, storage medium and electronic device
CN110677580B (zh) 拍摄方法、装置、存储介质及终端
CN105556957B (zh) 一种图像处理方法、计算机存储介质、装置及终端
US10009545B2 (en) Image processing apparatus and method of operating the same
CN111835982A (zh) 图像获取方法、图像获取装置、电子设备及存储介质
CN108259767B (zh) 图像处理方法、装置、存储介质及电子设备
CN108495038B (zh) 图像处理方法、装置、存储介质及电子设备
WO2023071933A1 (zh) 相机拍摄参数调整方法、装置及电子设备
CN112653841B (zh) 拍摄方法、装置和电子设备
WO2017071560A1 (zh) 图片处理方法及装置
CN110121030B (zh) 一种保存拍摄图像的方法以及电子设备
CN113808066A (zh) 图像选取方法、装置、存储介质及电子设备
CN112367470B (zh) 图像处理方法、装置及电子设备
CN114143448B (zh) 拍摄方法、装置、电子设备及可读存储介质
CN108431867A (zh) 一种数据处理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS CORP., Ltd.

Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS CORP., Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant