CN108259768B - 图像的选取方法、装置、存储介质及电子设备 - Google Patents
图像的选取方法、装置、存储介质及电子设备 Download PDFInfo
- Publication number
- CN108259768B CN108259768B CN201810277024.XA CN201810277024A CN108259768B CN 108259768 B CN108259768 B CN 108259768B CN 201810277024 A CN201810277024 A CN 201810277024A CN 108259768 B CN108259768 B CN 108259768B
- Authority
- CN
- China
- Prior art keywords
- image
- images
- target
- face
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000010187 selection method Methods 0.000 title claims description 11
- 238000000034 method Methods 0.000 claims abstract description 50
- 238000012545 processing Methods 0.000 claims description 61
- 238000004590 computer program Methods 0.000 claims description 11
- 238000003384 imaging method Methods 0.000 abstract description 13
- 230000000694 effects Effects 0.000 abstract description 9
- 210000000887 face Anatomy 0.000 description 22
- 239000000872 buffer Substances 0.000 description 13
- 238000006073 displacement reaction Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000000153 supplemental effect Effects 0.000 description 4
- 238000003705 background correction Methods 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 206010052804 Drug tolerance Diseases 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000026781 habituation Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000011946 reduction process Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/19—Sensors therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/193—Preprocessing; Feature extraction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Ophthalmology & Optometry (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
Abstract
本申请公开了一种图像的选取方法、装置、存储介质及电子设备。该方法包括:获取多帧包含人脸的目标图像,并在所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形时,继续获取多帧增补图像,其中,所述增补图像的帧数小于所述目标图像的帧数,再将所述目标图像以及所述增补图像选取为待处理图像。本申请实施例在拍照过程中,在拿到拍照的预设帧数对应的目标图像后,若判断目标图像中某人的眼睛大小持续变大时,则再获取多帧增补图像,以捕捉到此人眼睛大小更大或最大的图像,来增大获取到人脸图像中睁眼状态最佳的图像的概率,来增大获取到人脸图像中睁眼状态最佳的图像的概率,可以提高电子设备获取图像的灵活性,以及提升电子设备拍摄的照片的成像效果。
Description
技术领域
本申请属于图像技术领域,尤其涉及一种图像的选取方法、装置、存储介质及电子设备。
背景技术
随着电子技术的发展,使用具备拍照功能的移动设备进行拍照已经成为人们日程生活中的一种习惯。拍照的时候,由于拍照对象的习惯性或受光照的影响,容易眨眼或闭眼,造成拍摄的照片是闭眼状态的照片,用户很难一次性拍到所有人的状态很理想的照片,拍照效果较差。
发明内容
本申请实施例提供一种图像的选取方法、装置、存储介质及电子设备,可可以提高电子设备获取图像的灵活性,以及提升拍照效果。
本申请实施例提供一种图像的选取方法,包括:
获取多帧包含人脸的目标图像;
判断所述目标图像中相同用户的人脸图像的眼睛大小是否存在持续变大的情形;
若所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形,则获取多帧增补图像,其中,所述增补图像的帧数小于所述目标图像的帧数;
将所述目标图像以及所述增补图像选取为待处理图像。
本申请实施例提供一种图像的选取装置,包括:
第一获取模块,用于获取多帧包含人脸的目标图像;
判断模块,用于判断所述目标图像中相同用户的人脸图像的眼睛大小是否存在持续变大的情形;
第二获取模块,用于若所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形,则获取多帧增补图像,其中,所述增补图像的帧数小于所述目标图像的帧数;
选取模块,用于将所述目标图像以及所述增补图像选取为待处理图像。
本申请实施例提供一种存储介质,其上存储有计算机程序,当所述计算机程序在计算机上执行时,使得所述计算机执行本申请实施例提供的图像的选取方法中的步骤。
本申请实施例还提供一种电子设备,包括存储器,处理器,所述处理器通过调用所述存储器中存储的计算机程序,用于执行本申请实施例提供的图像的选取方法中的步骤。
本申请实施例通过获取多帧包含人脸的目标图像,并在所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形时,继续获取多帧增补图像,其中,所述增补图像的帧数小于所述目标图像的帧数,再将所述目标图像以及所述增补图像选取为待处理图像。本申请实施例在拍照过程中,在拿到拍照的预设帧数对应的目标图像后,若判断目标图像中某人的眼睛大小持续变大时,则再获取多帧增补图像,以捕捉到此人眼睛大小更大或最大的图像,来增大获取到人脸图像中睁眼状态最佳的图像的概率,可以提高电子设备获取图像的灵活性,以及提升电子设备拍摄的照片的成像效果。
附图说明
下面结合附图,通过对本发明的具体实施方式详细描述,将使本发明的技术方案及其有益效果显而易见。
图1为本申请实施例提供的图像的选取方法的流程示意图。
图2为本申请实施例提供的图像的选取方法的另一流程示意图。
图3为本申请实施例提供的图像的选取方法的又一流程示意图。
图4为本申请实施例提供的图像的选取方法的再一流程示意图。
图5为本申请实施例提供的图像的选取装置的结构示意图。
图6为本申请实施例提供的图像的选取装置的另一结构示意图。
图7为本申请实施例提供的电子设备的结构示意图。
图8为本申请实施例提供的电子设备的另一结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。可以理解的是,此处所描述的具体实施例仅用于解释本申请,而非对本申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本申请相关的部分而非全部结构。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例提供的一种拍照方法的执行主体,可以为本申请实施例提供的一种拍照装置,或者集成了所述拍照装置的电子设备(譬如掌上电脑、平板电脑、智能手机、照相机等),所述拍照装置可以采用硬件或者软件的方式实现。
请参阅图1及图2,图1为本申请实施例提供的图像的选取方法的流程示意图,图2为本申请实施例提供的图像的选取方法的另一流程示意图。所述方法可以包括:
步骤101,获取多帧包含人脸的目标图像。
拍照是电子设备的一项基本功能。随着摄像模组等硬件和图像处理算法的不断进步,电子设备的拍摄功能越来越强大。用户也越来越频繁地使用电子设备进行拍照,比如用户经常会使用电子设备拍摄人物照等等。然而,相关技术中,电子设备采集到的图像的成像效果较差。
比如,电子设备可以先获取多帧包含人脸的目标图像。例如,电子设备获取到A、B、C、D、E、F这6帧目标图像。
在一些实施例中,电子设备的相机采集到的图像可以被保存到预设长度的缓存队列中,那么当需要获取图像时,电子设备就可以从该缓存队列中获取。
比如,用户使用电子设备相机拍摄人物图像,那么将电子设备最近采集到的图像都可以被保存到缓存队列中,当用户按下拍照按钮后,电子设备可以从该缓存队列中获取多帧包含人脸的图像,这些图像即是目标图像。
例如,电子设备获取到A、B、C、D、E、F这6帧目标图像。这6帧目标图像都是关于甲、乙、丙、丁四人的合影图像。
步骤102,判断所述目标图像中相同用户的人脸图像的眼睛大小是否存在持续变大的情形。若所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形,则执行步骤103;若所述目标图像中相同用户的人脸图像的眼睛大小不存在持续变大的情形,则将所述目标图像选取为待处理图像。
其中,电子设备在获取到拍照的预设帧数对应的目标图像后,若通过图像识别得出目标图像中某人的眼睛大小在持续变大时,比如,甲用户的眼睛大小在目标图像中持续变大,则说明当前获取到的目标图像中甲用户的眼睛大小可能不是最大睁眼状态,则需要在现有基础上多获取几张图像,需进一步执行步骤103。若所述目标图像中相同用户的人脸图像的眼睛大小不存在持续变大的情形,则说明目前获取到的目标图像中已经包含了人脸图像的最大睁眼状态,则直接将所述目标图像选取为待处理图像。
在一些实施例中,步骤102可以通过如下流程实现,具体为:
按照所述目标图像的缓存时间顺序,识别所述目标图像的首帧至尾帧中的每一用户的人脸图像;
若所述目标图像的首帧至尾帧中的相同用户的人脸图像的眼睛大小呈持续变大趋势,则判定所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形。
例如,缓存队列中缓存的图像包括A、B、C、D、E、F这6帧缓存图像,预设的目标帧数为4帧,则按照缓存时间的先后顺序获取最近缓存的4帧包含人脸的目标图像为C、D、E、F,则图像C可以定义为目标图像的首帧,图像F可以定义为目标图像的尾帧,依次识别所述目标图像的首帧C至尾帧F中的每一用户的人脸图像,若所述目标图像的首帧C至尾帧F中的甲用户的人脸图像的眼睛大小呈持续变大趋势,则判定所述目标图像中的人脸图像的眼睛大小存在持续变大的情形。
其中,电子设备可以通过人脸识别技术识别出预览视频图像中的人脸图像,然后再通过如下方式来检测人脸图像中的眼睛大小。比如,电子设备可以先通过人脸和人眼识别技术,识别出人脸图像中的眼部区域,再获取该眼部区域在整张图像中所占的面积比例。该面积比例大,则可以认为用户的眼睛睁得较大。该面积比例小,则可以认为用户的眼睛睁得较小。又如,电子设备可以计算人脸图像中的人眼在竖直方向上所占的像素点的个数,该个数的大小可以用于表示人眼的大小。
步骤103,若所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形,则获取多帧增补图像,其中,所述增补图像的帧数小于所述目标图像的帧数。
其中,若所述目标图像的首帧至尾帧中的相同用户的人脸图像的眼睛大小呈持续变大趋势,则获取多帧包含人脸的增补图像,其中,所述增补图像中的相同用户的人脸图像的眼睛大小不小于所述目标图像的尾帧中的相同用户的人脸图像的眼睛大小。
其中,为了避免影响拍照体验,增补图像的帧数不宜过大,例如可以设置小于4帧,且所述增补图像的帧数需小于所述目标图像的帧数,以此提升电子设备处理图像的运行速度。
在一些实施例中,如图2所示,步骤103可以通过步骤1031至步骤1033来实现,具体为:
步骤1031,获取缓存队列中所述目标图像的尾帧之后采集到的多帧图像;
步骤1032,识别所述多帧图像中的人脸图像的眼睛状态;
步骤1033,根据所述多帧图像中的人脸图像的眼睛状态,获取多帧包含人脸的增补图像,其中,将所述多帧图像中与所述目标图像的尾帧相邻的图像确定为所述增补图像的首帧,将所述多帧图像中相同用户的人脸图像的眼睛状态为截止变大的图像确定为所述增补图像的尾帧。
例如,可以从缓存队列中获取到目标图像之后,当目标图像中的人脸图像存在眼睛大小持续变大的情形时,在用户按下拍照键之后现场继续采集多帧图像,然后将现场采集的多帧图像暂时存储到目标图像的尾帧位置之后的缓存队列中,然后再依据采集时间先后顺序对采集到的多帧图像中的人脸图像的眼睛状态依次进行识别,直到识别出多帧图像中的某一帧图像之后的人脸图像的眼睛大小不再变大或者开始变小时,可以将该帧的图像确定为增补图像的获取临界点,即将所述多帧图像中相同用户的人脸图像的眼睛状态为截止变大的图像确定为所述增补图像的尾帧,且将所述多帧图像中与所述目标图像的尾帧相邻的图像确定为所述增补图像的首帧。
例如,可以从缓存队列中获取到目标图像之后,当目标图像中的人脸图像存在眼睛大小持续变大的情形时,当目标图像的尾帧位置之后的缓存队列中还还缓存有多帧图像时,可以对目标图像的尾帧位置之后缓存的多帧图像中的人脸图像的眼睛状态依次进行识别,直到识别出多帧图像中的某一帧图像之后的人脸图像的眼睛大小不再变大或者开始变小时,可以将该帧的图像确定为增补图像的获取临界点,即将所述多帧图像中相同用户的人脸图像的眼睛状态为截止变大的图像确定为所述增补图像的尾帧,且将所述多帧图像中与所述目标图像的尾帧相邻的图像确定为所述增补图像的首帧。
步骤104,将所述目标图像以及所述增补图像选取为待处理图像。
例如,电子设备获取到的目标图像包括A、B、C、D、E、F这6帧图像,增补图像包括H、I、J这三帧图像,则电子设备最终获取到的待处理图像包括A、B、C、D、E、F、H、I、J这9帧图像。这9帧待处理图像都是关于甲、乙、丙、丁四人的合影图像。
在一些实施例中,在所述将所述目标图像以及所述增补图像选取为待处理图像之后,还包括:
从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合预设条件的人脸图像;
对所述基础图像进行预设处理并输出。
在一些实施例中,所述从所述待处理图像中确定出基础图像,包括:
若各所述待处理图像为多人图像,则从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合所述预设条件的人脸图像;
所述对所述基础图像进行预设处理并输出,包括:
从所述基础图像中确定出不符合所述预设条件的待替换人脸图像;
从所述基础图像外的其它待处理图像中,确定出符合所述预设条件的目标人脸图像,所述目标人脸图像与所述待替换人脸图像为相同用户的人脸图像;
在所述基础图像中,将所述待替换人脸图像替换为所述目标人脸图像,得到经过图像替换处理的基础图像;
对所述经过图像替换处理的基础图像进行图像降噪处理并输出。
在一些实施例中,在所述获取多帧包含人脸的目标图像之前,还包括:
当采集包含人脸的图像时,根据采集到的至少两帧图像确定出目标帧数;
所述获取多帧包含人脸的目标图像的步骤,包括:从采集到的多帧图像中,获取数量为所述目标帧数的目标图像。
上述所有可选技术方案,可以采用任意结合形成本发明的可选实施例,在此不再一一赘述。
本申请实施例通过获取多帧包含人脸的目标图像,并在所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形时,继续获取多帧增补图像,其中,所述增补图像的帧数小于所述目标图像的帧数,再将所述目标图像以及所述增补图像选取为待处理图像。本申请实施例在拍照过程中,在拿到拍照的预设帧数对应的目标图像后,若判断目标图像中某人的眼睛大小持续变大时,则再获取多帧增补图像,以捕捉到此人眼睛大小更大或最大的图像,来增大获取到人脸图像中睁眼状态最佳的图像的概率,可以提高电子设备获取图像的灵活性,以及提升电子设备拍摄的照片的成像效果。
请参阅图3及图4,图3为本申请实施例提供的图像的选取方法的又一流程示意图,图4为本申请实施例提供的图像的选取方法的再一流程示意图。所述方法可以包括:
步骤201,当采集包含人脸的图像时,根据采集到的至少两帧图像确定出目标帧数。
比如,在进入相机预览界面后,如果检测到电子设备在采集包含人脸的图像,那么电子设备可以根据采集到的至少两帧包含人脸的图像,确定出一个目标帧数。例如,该目标帧数可以大于或等于2。例如,当电子设备采集到4帧包含人脸的图像时,电子设备可以检测这4帧图像中的人脸所在的位置是否发生位移。若未发生位移或者位移很小,则可以认为图像中的人脸图像比较稳定,即用户没有大范围的摇动或转动头部。若发生位移,则可以认为人脸图像不稳定,即用户摇动或转动了头部,并且幅度较大。
在一些实施例中,可以通过如下方式来检测图像中的人脸是否发生位移:在获取到采集的4帧图像后,电子设备可以生成一个坐标系,然后电子设备可以用相同的方式将每一帧图像放入该坐标系中。之后,电子设备可以获取每一帧图像中的人脸图像特征点在该坐标系中的坐标。在得到每一帧图像中的人脸图像的特征点在该坐标系中的坐标后,电子设备就可以比较不同图像中的同一人脸图像特征点的坐标是否相同。若相同,则可以认为图像中的人脸图像未发生位移。若不同,则可以认为图像中的人脸图像发生位移。若检测到人脸图像发生位移,那么电子设备可以获取具体的位移数值。若该具体的位移数值处于预设数值范围内,则可以认为图像中的人脸图像位移较小。若该具体的位移数值处于预设数值范围外,那么可以认为图像中的人脸图像位移较大。
例如,若人脸图像发生位移,则可以将目标帧数确定为4帧。若人脸图像未发生位移,则可以将目标帧数确定为6帧或8帧。
在一些实施例中,在进入相机的预览界面后,如果检测到电子设备在采集人脸图像,电子设备可以根据当前的环境参数,每隔30毫秒至60毫秒采集一帧图像,并将采集到的图像保存到缓存队列,并根据采集到的至少两帧人脸图像,确定出一个目标帧数。该环境参数可以是环境光亮度。
若电子设备根据采集到在至少两帧人脸图像,确定出图像中的人脸未发生位移(或者位移很小),并且当前处于亮光环境,那么电子设备可以将目标帧数确定为8帧。若电子设备根据采集到在至少两帧人脸图像,确定出图像中的人脸未发生位移(或者位移很小),并且当前处于暗光环境,那么电子设备可以将目标帧数确定为6帧。若电子设备根据采集到在至少两帧人脸图像,确定出图像中的人脸发生位移,那么电子设备可以将目标帧数确定为4帧。
电子设备可以将采集到的图像保存到缓存队列。该缓存队列可以为定长队列,例如该缓存队列可以保存电子设备最新采集到的10帧图像。
步骤202,从采集到的多帧图像中,获取数量为所述目标帧数的目标图像。
其中,在用户按下拍照按钮后,电子设备可以从最近采集到的图像中,获取数量为目标帧数的目标图像。
步骤203,判断所述目标图像中相同用户的人脸图像的眼睛大小是否存在持续变大的情形。若所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形,则执行步骤204;若所述目标图像中相同用户的人脸图像的眼睛大小不存在持续变大的情形,则将所述目标图像选取为待处理图像。
其中,电子设备在获取到数量为目标帧数的目标图像后,若通过图像识别得出目标图像中某人的眼睛大小在持续变大时,比如,甲用户的眼睛大小在目标图像中持续变大,则说明当前获取到的目标图像中甲用户的眼睛大小可能不是最大睁眼状态,则需要在现有基础上多获取几张图像,需进一步执行步骤204。若所述目标图像中相同用户的人脸图像的眼睛大小不存在持续变大的情形,则说明目前获取到的目标图像中已经包含了人脸图像的最大睁眼状态,则直接将所述目标图像选取为待处理图像。
在一些实施例中,可以按照所述目标图像的缓存时间顺序,识别所述目标图像的首帧至尾帧中的每一用户的人脸图像;若所述目标图像的首帧至尾帧中的相同用户的人脸图像的眼睛大小呈持续变大趋势,则判定所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形。
步骤204,若所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形,则获取多帧增补图像。其中,所述增补图像的帧数小于所述目标图像的帧数。
其中,若所述目标图像的首帧至尾帧中的相同用户的人脸图像的眼睛大小呈持续变大趋势,则获取多帧包含人脸的增补图像,其中,所述增补图像中的相同用户的人脸图像的眼睛大小不小于所述目标图像的尾帧中的相同用户的人脸图像的眼睛大小。
其中,为了避免影响拍照体验,增补图像的帧数不宜过大,例如可以设置小于4帧,且所述增补图像的帧数需小于所述目标图像的帧数,以此提升电子设备处理图像的运行速度。
在一些实施例中,所述获取多帧包含人脸的增补图像的步骤,可以包括:
获取缓存队列中所述目标图像的尾帧之后采集到的多帧图像;
识别所述多帧图像中的人脸图像的眼睛状态;
根据所述多帧图像中的人脸图像的眼睛状态,获取多帧包含人脸的增补图像,其中,将所述多帧图像中与所述目标图像的尾帧相邻的图像确定为所述增补图像的首帧,将所述多帧图像中相同用户的人脸图像的眼睛状态为截止变大的图像确定为所述增补图像的尾帧。
步骤205,将所述目标图像以及所述增补图像选取为待处理图像。
例如,电子设备获取到的目标图像包括A、B、C、D、E、F这6帧图像,增补图像包括H、I、J、K这4帧图像,则电子设备最终获取到的待处理图像包括A、B、C、D、E、F、H、I、J、K这10帧图像。这10帧待处理图像都是关于甲、乙、丙、丁四人的合影图像。
步骤206,从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合预设条件的人脸图像。
在一些实施例中,若各所述待处理图像为多人图像,则从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合所述预设条件的人脸图像。
比如,在获取到8帧图像后,电子设备可以将这8帧图像确定为待处理图像。然后,电子设备可以从这8帧图像中确定出一帧基础图像,其中该基础图像中至少包含一个符合预设条件的人脸图像。之后,电子设备可以对该基础图像进行预设处理并输出。
例如,预设条件可以是基础图像中某一用户的眼睛比该用户在其它待处理图像中的眼睛都更大。
例如,所有待处理图像均为同一用户的单人图像,待处理图像分别为A、B、C、D、E、F、G、H。其中,表示该用户在图像A、B、C、D、E、F、G、H中的眼睛大小的数值分别为83、83、84、88、86、85、84、84。那么,由于图像D的用户的眼睛睁得最大,因此电子设备可以将图像D确定为基础图像。
步骤207,对所述基础图像进行预设处理并输出。
在一些实施例中,预设处理可以是图像降噪处理。比如,电子设备可以采用多帧降噪的方式对基础图像进行降噪处理。例如,图像D被确定为基础图像,那么电子设备可以根据包含图像D在内的连续采集的6帧待处理图像,对图像D进行多帧降噪处理,其中,该6帧待处理图像包括4帧目标图像以及2帧增补图像。例如,电子设备可以根据图像A、B、C、D、E、F对图像D进行多帧降噪。
在进行多帧降噪时,电子设备可以先将图像A、B、C、D、E、F对齐,并获取图像中每一组对齐像素的像素值。若同一组对齐像素的像素值相差不多,那么电子设备可以计算这组对齐像素的像素值均值,再用该像素值均值替换掉图像D的对应像素的像素值。若同一组对齐像素的像素值相差较多,那么可以不对图像D中的像素值进行调整。
例如,图像A中的像素P1、图像B中的像素P2、图像C中的像素P3、图像D中的像素P4、图像E中的像素P5以及图像F中的像素P6是一组相互对齐的像素,其中P1的像素值为100,P2的像素值为105,P3的像素值为101,P4的像素值为102,P5的像素值为103,P6的像素值为104,那么这组相互对齐的像素的像素值均值为102.5,那么电子设备就可以将图像D中的P4像素的像素值由102调整为102.5,从而对图像D中的P4像素进行降噪处理。若P1的像素值为85,P2的像素值为95,P3的像素值为80,P4的像素值为102,P5的像素值为83,P6的像素值为90,那么由于它们的像素值相差较多,此时电子设备可以不调整P2的像素值,即P2的像素值保持102不变。
在一些实施例中,如图4所示,步骤207可以通过步骤2071至步骤2074来实现,具体为:
步骤2071,从所述基础图像中确定出不符合所述预设条件的待替换人脸图像;
步骤2072,从所述基础图像外的其它待处理图像中,确定出符合所述预设条件的目标人脸图像,所述目标人脸图像与所述待替换人脸图像为相同用户的人脸图像;
步骤2073,在所述基础图像中,将所述待替换人脸图像替换为所述目标人脸图像,得到经过图像替换处理的基础图像;
步骤2074,对所述经过图像替换处理的基础图像进行图像降噪处理并输出。
比如,电子设备检测到其获取的待处理图像均为多人图像(即每帧待处理图像中至少包含两张人脸图像,并且各帧图像的人脸数量相等),那么电子设备可以从所有待处理图像中确定出基础图像,该基础图像中至少包含一个符合预设条件的人脸图像。例如,预设条件为图像中某一用户的眼睛比该用户在其他待处理图像中的眼睛都睁得更大。
例如,待处理图像为J、K、L、M、N、O。这6帧图像为丙、丁、戊三人的合照图像。电子设备可以对该6帧图像进行人脸和人眼识别,并获取图像中人脸部分的眼睛大小。例如,J、K、L、M、N、O图像中表示丙的眼睛大小的数值分别为81、83、84、86、86、85。J、K、L、M、N、O图像中表示丁的眼睛大小的数值分别为75、77、77、79、78、77。J、K、L、M、N、O图像中表示戊的眼睛大小的数值分别为84、85、86、86、88、86。
对于丙而言,其眼睛最大的人脸图像出现在图像M和N中。对于丁而言,其眼睛最大的人脸图像出现在图像M中。对于戊而言,其眼睛最大的图像出现在图像N中。由于图像N中出现了二个人的眼睛最大的人脸图像,因此电子设备可以将图像N确定为基础图像。
在将图像N确定为基础图像后,电子设备可以将图像N中用户丁的人脸图像确定为待替换人脸图像,然后电子设备可以将图像M中丁的人脸图像(眼睛最大)确定为目标人脸图像。之后,在图像N中,电子设备可以使用图像M中丁的人脸图像(即目标人脸图像)替换掉图像N中丁的人脸图像,从而得到经过图像替换处理的图像N。
在得到经过图像替换处理的图像N后,电子设备可以对该图像N进行图像降噪处理并输出。
本申请实施例通过当采集包含人脸的图像时,根据采集到的至少两帧图像确定出目标帧数,然后从采集到的多帧图像中,获取数量为所述目标帧数的目标图像,并在所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形时,继续获取多帧增补图像,其中,所述增补图像的帧数小于所述目标图像的帧数,再将所述目标图像以及所述增补图像选取为待处理图像,并从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合预设条件的人脸图像,且对所述基础图像进行预设处理并输出。本申请实施例在拍照过程中,在拿到拍照的预设帧数对应的目标图像后,若判断目标图像中某人的眼睛大小持续变大时,则再获取多帧增补图像,以捕捉到此人眼睛大小更大或最大的图像,来增大获取到人脸图像中睁眼状态最佳的图像的概率,并对由目标图像及增补图像组成的待处理图像进行图像处理,以得到拍摄图像,可以提高电子设备获取图像的灵活性,以及提升电子设备拍摄的照片的成像效果。
请参阅图5,图5为本申请实施例提供的图像的选取装置的结构示意图。图像的选取装置30可以包括:第一获取模块32,判断模块33,第二获取模块34,以及选取模块35。
其中,所述第一获取模块32,用于获取多帧包含人脸的目标图像。
所述判断模块33,用于判断所述目标图像中相同用户的人脸图像的眼睛大小是否存在持续变大的情形。
在一些实施例中,所述判断模块33,用于:
按照所述目标图像的缓存时间顺序,识别所述目标图像的首帧至尾帧中的每一用户的人脸图像;
若所述目标图像的首帧至尾帧中的相同用户的人脸图像的眼睛大小呈持续变大趋势,则判定所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形。
所述第二获取模块34,用于若所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形,则获取多帧增补图像,其中,所述增补图像的帧数小于所述目标图像的帧数。
在一些实施例中,所述第二获取模块34,用于获取多帧包含人脸的增补图像,其中,所述增补图像中的相同用户的人脸图像的眼睛大小不小于所述目标图像的尾帧中的相同用户的人脸图像的眼睛大小。
在一些实施例中,所述第二获取模块34,用于:
获取缓存队列中所述目标图像的尾帧之后采集到的多帧图像;
识别所述多帧图像中的人脸图像的眼睛状态;
根据所述多帧图像中的人脸图像的眼睛状态,获取多帧包含人脸的增补图像,其中,将所述多帧图像中与所述目标图像的尾帧相邻的图像确定为所述增补图像的首帧,将所述多帧图像中相同用户的人脸图像的眼睛状态为截止变大的图像确定为所述增补图像的尾帧。
所述选取模块35,用于将所述目标图像以及所述增补图像选取为待处理图像。
本申请实施例通过第一获取模块32获取多帧包含人脸的目标图像,并在判断模块33判定所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形时,通过第二获取模块33继续获取多帧增补图像,其中,所述增补图像的帧数小于所述目标图像的帧数,选取模块34再将所述目标图像以及所述增补图像选取为待处理图像。本申请实施例提供的图像的选取装置30在拍照过程中,在拿到拍照的预设帧数对应的目标图像后,若判断目标图像中某人的眼睛大小持续变大时,则再获取多帧增补图像,以捕捉到此人眼睛大小更大或最大的图像,来增大获取到人脸图像中睁眼状态最佳的图像的概率,可以提高电子设备获取图像的灵活性,以及提升电子设备拍摄的照片的成像效果。
请一并参阅图6,图6为本申请实施例提供的图像的选取装置的另一结构示意图。图像的选取装置30还可以包括:采集模块31和处理模块36。
其中,所述采集模块31,用于当采集包含人脸的图像时,根据采集到的至少两帧图像确定出目标帧数。
所述第一获取模块32,可以用于从采集到的多帧图像中,获取数量为所述目标帧数的目标图像。
所述处理模块36,用于从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合预设条件的人脸图像;对所述基础图像进行预设处理并输出。
在一些实施例中,所述处理模块36,还用于:
若各所述待处理图像为多人图像,则从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合所述预设条件的人脸图像;
从所述基础图像中确定出不符合所述预设条件的待替换人脸图像;
从所述基础图像外的其它待处理图像中,确定出符合所述预设条件的目标人脸图像,所述目标人脸图像与所述待替换人脸图像为相同用户的人脸图像;
在所述基础图像中,将所述待替换人脸图像替换为所述目标人脸图像,得到经过图像替换处理的基础图像;
对所述经过图像替换处理的基础图像进行图像降噪处理并输出。
本申请实施例通过当采集包含人脸的图像时,采集模块31根据采集到的至少两帧图像确定出目标帧数,然后第一获取模块32从采集到的多帧图像中,获取数量为所述目标帧数的目标图像,并在判断模块33判定所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形时,第二获取模块34继续获取多帧增补图像,其中,所述增补图像的帧数小于所述目标图像的帧数,选取模块35再将所述目标图像以及所述增补图像选取为待处理图像,处理模块36从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合预设条件的人脸图像,且对所述基础图像进行预设处理并输出。本申请实施例提供的图像的选取装置30在拍照过程中,在拿到拍照的预设帧数对应的目标图像后,若判断目标图像中某人的眼睛大小持续变大时,则再获取多帧增补图像,以捕捉到此人眼睛大小更大或最大的图像,来增大获取到人脸图像中睁眼状态最佳的图像的概率,并对由目标图像及增补图像组成的待处理图像进行图像处理,以得到拍摄图像,可以提高电子设备获取图像的灵活性,以及提升电子设备拍摄的照片的成像效果。
本申请实施例还提供一种电子设备,包括存储器,处理器,所述处理器通过调用所述存储器中存储的计算机程序,用于执行本实施例提供的图像的选取方法中的步骤。
例如,上述电子设备可以是诸如平板电脑或者智能手机等电子设备。请参阅图7,图7为本申请实施例提供的电子设备的结构示意图。
该电子设备400可以包括摄像模组401、存储器402、处理器403等部件。本领域技术人员可以理解,图7中示出的电子设备结构并不构成对电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
摄像模组401可以包括单摄像模组和双摄像模组。
存储器402可用于存储应用程序和数据。存储器402存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器403通过运行存储在存储器402的应用程序,从而执行各种功能应用以及数据处理。
处理器403是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器402内的应用程序,以及调用存储在存储器402内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。
在本实施例中,电子设备中的处理器403会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行代码加载到存储器402中,并由处理器403来运行存储在存储器402中的应用程序,从而实现以下步骤:
获取多帧包含人脸的目标图像;
判断所述目标图像中相同用户的人脸图像的眼睛大小是否存在持续变大的情形;
若所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形,则获取多帧增补图像,其中,所述增补图像的帧数小于所述目标图像的帧数;
将所述目标图像以及所述增补图像选取为待处理图像。
本发明实施例还提供一种电子设备。上述电子设备中包括图像处理电路,图像处理电路可以利用硬件和/或软件组件实现,可包括定义ISP(Image Signal Processing,图像信号处理)管线的各种处理单元。图8为一个实施例中图像处理电路的结构示意图。如图8所示,为便于说明,仅示出与本发明实施例相关的图像处理技术的各个方面。
如图8所示,图像处理电路包括图像信号处理器540和控制逻辑器550。成像设备510捕捉的图像数据首先由图像信号处理器540处理,图像信号处理器540对图像数据进行分析以捕捉可用于确定和/或成像设备510的一个或多个控制参数的图像统计信息。成像设备510可包括具有一个或多个透镜511和图像传感器512的照相机。图像传感器512可包括色彩滤镜阵列(如Bayer滤镜),图像传感器512可获取用图像传感器512的每个成像像素捕捉的光强度和波长信息,并提供可由图像信号处理器540处理的一组原始图像数据。传感器520可基于传感器520接口类型把原始图像数据提供给图像信号处理器540。传感器520接口可以利用SMIA(Standard Mobile Imaging Architecture,标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
图像信号处理器540按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,图像信号处理器540可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
图像信号处理器540还可从图像存储器530接收像素数据。例如,从传感器520接口将原始像素数据发送给图像存储器530,图像存储器530中的原始像素数据再提供给图像信号处理器540以供处理。图像存储器530可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自传感器520接口或来自图像存储器530的原始图像数据时,图像信号处理器540可进行一个或多个图像处理操作,如时域滤波。处理后的图像数据可发送给图像存储器530,以便在被显示之前进行另外的处理。图像信号处理器540从图像存储器530接收处理数据,并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器570,以供用户观看和/或由图形引擎或GPU(GraphicsProcessing Unit,图形处理器)进一步处理。此外,图像信号处理器540的输出还可发送给图像存储器530,且显示器570可从图像存储器530读取图像数据。在一些实施例中,图像存储器530可被配置为实现一个或多个帧缓冲器。此外,图像信号处理器540的输出可发送给编码器/解码器560,以便编码/解码图像数据。编码的图像数据可被保存,并在显示于显示器570设备上之前解压缩。编码器/解码器560可由CPU或GPU或协处理器实现。
图像信号处理器540确定的统计数据可发送给控制逻辑器550。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜511阴影校正等图像传感器512统计信息。控制逻辑器550可包括执行一个或多个例程(如固件)的处理器和/或微控制器,一个或多个例程可根据接收的统计数据,确定成像设备510的控制参数以及的控制参数。例如,控制参数可包括传感器520控制参数(例如增益、曝光控制的积分时间)、照相机闪光控制参数、透镜511控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵,以及透镜511阴影校正参数。
以下为运用图8中图像处理技术实现本实施例提供的图像的选取方法的步骤:
获取多帧包含人脸的目标图像;
判断所述目标图像中相同用户的人脸图像的眼睛大小是否存在持续变大的情形;
若所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形,则获取多帧增补图像,其中,所述增补图像的帧数小于所述目标图像的帧数;
将所述目标图像以及所述增补图像选取为待处理图像。
在一些实施例中,电子设备执行所述判断所述目标图像中相同用户的人脸图像的眼睛大小是否存在持续变大的情形的步骤时,可以执行:按照所述目标图像的缓存时间顺序,识别所述目标图像的首帧至尾帧中的每一用户的人脸图像;
若所述目标图像的首帧至尾帧中的相同用户的人脸图像的眼睛大小呈持续变大趋势,则判定所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形。
在一些实施例中,电子设备执行所述若所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形,则获取多帧增补图像的步骤时,可以执行:获取多帧包含人脸的增补图像,其中,所述增补图像中的相同用户的人脸图像的眼睛大小不小于所述目标图像的尾帧中的相同用户的人脸图像的眼睛大小。
在一些实施例中,电子设备执行所述获取多帧包含人脸的增补图像的步骤时,可以执行:
获取缓存队列中所述目标图像的尾帧之后采集到的多帧图像;
识别所述多帧图像中的人脸图像的眼睛状态;
根据所述多帧图像中的人脸图像的眼睛状态,获取多帧包含人脸的增补图像,其中,将所述多帧图像中与所述目标图像的尾帧相邻的图像确定为所述增补图像的首帧,将所述多帧图像中相同用户的人脸图像的眼睛状态为截止变大的图像确定为所述增补图像的尾帧。
在一些实施例中,在所述将所述目标图像以及所述增补图像选取为待处理图像的步骤之后,电子设备还可以执行:从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合预设条件的人脸图像;
对所述基础图像进行预设处理并输出。
在一些实施例中,电子设备执行所述从所述待处理图像中确定出基础图像的步骤时,还可以执行:若各所述待处理图像为多人图像,则从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合所述预设条件的人脸图像;
电子设备执行所述对所述基础图像进行预设处理并输出的步骤时,包括:
从所述基础图像中确定出不符合所述预设条件的待替换人脸图像;
从所述基础图像外的其它待处理图像中,确定出符合所述预设条件的目标人脸图像,所述目标人脸图像与所述待替换人脸图像为相同用户的人脸图像;
在所述基础图像中,将所述待替换人脸图像替换为所述目标人脸图像,得到经过图像替换处理的基础图像;
对所述经过图像替换处理的基础图像进行图像降噪处理并输出。
在一些实施例中,在在所述获取多帧包含人脸的目标图像的步骤之前,电子设备还可以执行:
当采集包含人脸的图像时,根据采集到的至少两帧图像确定出目标帧数;
电子设备执行所述获取多帧包含人脸的目标图像的步骤时,包括:从采集到的多帧图像中,获取数量为所述目标帧数的目标图像。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见上文针对图像的选取方法的详细描述,此处不再赘述。
本申请实施例提供的所述图像的选取装置与上文实施例中的图像的选取方法属于同一构思,在所述图像的选取装置上可以运行所述图像的选取方法实施例中提供的任一方法,其具体实现过程详见所述图像的选取方法实施例,此处不再赘述。
本申请实施例提供一种计算机可读的存储介质,其上存储有计算机程序,当所述计算机程序在计算机上执行时,使得所述计算机执行如本实施例提供的图像的选取方法中的步骤。
需要说明的是,对本申请实施例所述图像的选取方法而言,本领域普通技术人员可以理解实现本申请实施例所述图像的选取方法的全部或部分流程,是可以通过计算机程序来控制相关的硬件来完成,所述计算机程序可存储于一计算机可读取存储介质中,如存储在存储器中,并被至少一个处理器执行,在执行过程中可包括如所述图像的选取方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储器(ROM,Read OnlyMemory)、随机存取记忆体(RAM,Random Access Memory)等。
对本申请实施例的所述图像的选取装置而言,其各功能模块可以集成在一个处理芯片中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中,所述存储介质譬如为只读存储器,磁盘或光盘等。
以上对本申请实施例所提供的一种图像的选取方法、装置、存储介质以及电子设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (11)
1.一种图像的选取方法,其特征在于,包括:
获取多帧包含人脸的目标图像;
判断所述目标图像中相同用户的人脸图像的眼睛大小是否存在持续变大的情形;
若所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形,则获取多帧增补图像,具体包括:获取缓存队列中所述目标图像的尾帧之后采集到的多帧图像;基于采集时间顺序识别所述多帧图像中的人脸图像的眼睛状态;当识别到所述人脸图像的眼睛状态为截止变大时,获取多帧包含人脸的增补图像,其中,将所述多帧图像中与所述目标图像的尾帧相邻的图像确定为所述增补图像的首帧,将所述多帧图像中相同用户的人脸图像的眼睛状态为截止变大的图像确定为所述增补图像的尾帧,所述增补图像中的相同用户的人脸图像的眼睛大小不小于所述目标图像的尾帧中的相同用户的人脸图像的眼睛大小,所述增补图像的帧数小于所述目标图像的帧数;
将所述目标图像以及所述增补图像选取为待处理图像。
2.根据权利要求1所述的图像的选取方法,其特征在于,所述判断所述目标图像中相同用户的人脸图像的眼睛大小是否存在持续变大的情形,包括:
按照所述目标图像的缓存时间顺序,识别所述目标图像的首帧至尾帧中的每一用户的人脸图像;
若所述目标图像的首帧至尾帧中的相同用户的人脸图像的眼睛大小呈持续变大趋势,则判定所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形。
3.根据权利要求1所述的图像的选取方法,其特征在于,在所述将所述目标图像以及所述增补图像选取为待处理图像之后,还包括:
从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合预设条件的人脸图像;
对所述基础图像进行预设处理并输出。
4.根据权利要求3所述的图像的选取方法,其特征在于,所述从所述待处理图像中确定出基础图像,包括:
若各所述待处理图像为多人图像,则从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合所述预设条件的人脸图像;
所述对所述基础图像进行预设处理并输出,包括:
从所述基础图像中确定出不符合所述预设条件的待替换人脸图像;
从所述基础图像外的其它待处理图像中,确定出符合所述预设条件的目标人脸图像,所述目标人脸图像与所述待替换人脸图像为相同用户的人脸图像;
在所述基础图像中,将所述待替换人脸图像替换为所述目标人脸图像,得到经过图像替换处理的基础图像;
对所述经过图像替换处理的基础图像进行图像降噪处理并输出。
5.根据权利要求1所述的图像的选取方法,其特征在于,在所述获取多帧包含人脸的目标图像之前,还包括:
当采集包含人脸的图像时,根据采集到的至少两帧图像确定出目标帧数;
所述获取多帧包含人脸的目标图像的步骤,包括:从采集到的多帧图像中,获取数量为所述目标帧数的目标图像。
6.一种图像的选取装置,其特征在于,包括:
第一获取模块,用于获取多帧包含人脸的目标图像;
判断模块,用于判断所述目标图像中相同用户的人脸图像的眼睛大小是否存在持续变大的情形;
第二获取模块,用于若所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形,则获取多帧增补图像,具体用于:获取缓存队列中所述目标图像的尾帧之后采集到的多帧图像;基于采集时间顺序识别所述多帧图像中的人脸图像的眼睛状态;当识别到所述人脸图像的眼睛状态为截止变大时,获取多帧包含人脸的增补图像,其中,将所述多帧图像中与所述目标图像的尾帧相邻的图像确定为所述增补图像的首帧,将所述多帧图像中相同用户的人脸图像的眼睛状态为截止变大的图像确定为所述增补图像的尾帧,所述增补图像中的相同用户的人脸图像的眼睛大小不小于所述目标图像的尾帧中的相同用户的人脸图像的眼睛大小,所述增补图像的帧数小于所述目标图像的帧数;
选取模块,用于将所述目标图像以及所述增补图像选取为待处理图像。
7.根据权利要求6所述的图像的选取装置,其特征在于,所述判断模块,用于:
按照所述目标图像的缓存时间顺序,识别所述目标图像的首帧至尾帧中的每一用户的人脸图像;
若所述目标图像的首帧至尾帧中的相同用户的人脸图像的眼睛大小呈持续变大趋势,则判定所述目标图像中相同用户的人脸图像的眼睛大小存在持续变大的情形。
8.根据权利要求6所述的图像的选取装置,其特征在于,所述装置还包括:
处理模块,用于从所述待处理图像中确定出基础图像,所述基础图像中至少包含一个符合预设条件的人脸图像;对所述基础图像进行预设处理并输出。
9.根据权利要求6所述的图像的选取装置,其特征在于,所述装置还包括:
采集模块,用于当采集包含人脸的图像时,根据采集到的至少两帧图像确定出目标帧数;
所述第一获取模块,用于从采集到的多帧图像中,获取数量为所述目标帧数的目标图像。
10.一种存储介质,其上存储有计算机程序,其特征在于,当所述计算机程序在计算机上执行时,使得所述计算机执行如权利要求1至5中任一项所述的图像的选取方法。
11.一种电子设备,包括存储器,处理器,其特征在于,所述处理器通过调用所述存储器中存储的计算机程序,用于执行如权利要求1至5中任一项所述的图像的选取方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810277024.XA CN108259768B (zh) | 2018-03-30 | 2018-03-30 | 图像的选取方法、装置、存储介质及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810277024.XA CN108259768B (zh) | 2018-03-30 | 2018-03-30 | 图像的选取方法、装置、存储介质及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108259768A CN108259768A (zh) | 2018-07-06 |
CN108259768B true CN108259768B (zh) | 2020-08-04 |
Family
ID=62747681
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810277024.XA Expired - Fee Related CN108259768B (zh) | 2018-03-30 | 2018-03-30 | 图像的选取方法、装置、存储介质及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108259768B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112085688A (zh) * | 2020-09-16 | 2020-12-15 | 蒋芳 | 一种拍照时去除行人遮挡的方法和系统 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004343315A (ja) * | 2003-05-14 | 2004-12-02 | Sony Corp | 撮像装置 |
JP2006072652A (ja) * | 2004-09-01 | 2006-03-16 | Science Univ Of Tokyo | 個人認証装置及び個人認証方法 |
JP4898532B2 (ja) * | 2007-04-13 | 2012-03-14 | 富士フイルム株式会社 | 画像処理装置および撮影システム並びに瞬き状態検出方法、瞬き状態検出プログラムおよびそのプログラムが記録された記録媒体 |
CN102393796A (zh) * | 2011-07-25 | 2012-03-28 | 金宇 | 基于眨眼特征提取的控制方法及基于该方法的拍摄眼镜 |
CN104978566A (zh) * | 2015-06-05 | 2015-10-14 | 深圳市金立通信设备有限公司 | 一种图片处理方法及终端 |
CN105975935A (zh) * | 2016-05-04 | 2016-09-28 | 腾讯科技(深圳)有限公司 | 一种人脸图像处理方法和装置 |
CN106355135A (zh) * | 2015-07-14 | 2017-01-25 | 原相科技股份有限公司 | 眼睛状态侦测方法以及眼睛状态侦测系统 |
CN106557723A (zh) * | 2015-09-25 | 2017-04-05 | 北京市商汤科技开发有限公司 | 一种带交互式活体检测的人脸身份认证系统及其方法 |
CN107734253A (zh) * | 2017-10-13 | 2018-02-23 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、移动终端和计算机可读存储介质 |
CN107833197A (zh) * | 2017-10-31 | 2018-03-23 | 广东欧珀移动通信有限公司 | 图像处理的方法、装置、计算机可读存储介质和电子设备 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160140390A1 (en) * | 2014-11-13 | 2016-05-19 | Intel Corporation | Liveness detection using progressive eyelid tracking |
-
2018
- 2018-03-30 CN CN201810277024.XA patent/CN108259768B/zh not_active Expired - Fee Related
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004343315A (ja) * | 2003-05-14 | 2004-12-02 | Sony Corp | 撮像装置 |
JP2006072652A (ja) * | 2004-09-01 | 2006-03-16 | Science Univ Of Tokyo | 個人認証装置及び個人認証方法 |
JP4898532B2 (ja) * | 2007-04-13 | 2012-03-14 | 富士フイルム株式会社 | 画像処理装置および撮影システム並びに瞬き状態検出方法、瞬き状態検出プログラムおよびそのプログラムが記録された記録媒体 |
CN102393796A (zh) * | 2011-07-25 | 2012-03-28 | 金宇 | 基于眨眼特征提取的控制方法及基于该方法的拍摄眼镜 |
CN104978566A (zh) * | 2015-06-05 | 2015-10-14 | 深圳市金立通信设备有限公司 | 一种图片处理方法及终端 |
CN106355135A (zh) * | 2015-07-14 | 2017-01-25 | 原相科技股份有限公司 | 眼睛状态侦测方法以及眼睛状态侦测系统 |
CN106557723A (zh) * | 2015-09-25 | 2017-04-05 | 北京市商汤科技开发有限公司 | 一种带交互式活体检测的人脸身份认证系统及其方法 |
CN105975935A (zh) * | 2016-05-04 | 2016-09-28 | 腾讯科技(深圳)有限公司 | 一种人脸图像处理方法和装置 |
CN107734253A (zh) * | 2017-10-13 | 2018-02-23 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、移动终端和计算机可读存储介质 |
CN107833197A (zh) * | 2017-10-31 | 2018-03-23 | 广东欧珀移动通信有限公司 | 图像处理的方法、装置、计算机可读存储介质和电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN108259768A (zh) | 2018-07-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107948519B (zh) | 图像处理方法、装置及设备 | |
CN109068067B (zh) | 曝光控制方法、装置和电子设备 | |
CN109068058B (zh) | 超级夜景模式下的拍摄控制方法、装置和电子设备 | |
CN109040609B (zh) | 曝光控制方法、装置、电子设备和计算机可读存储介质 | |
CN108900782B (zh) | 曝光控制方法、装置以及电子设备 | |
CN108055452B (zh) | 图像处理方法、装置及设备 | |
CN108683862B (zh) | 成像控制方法、装置、电子设备及计算机可读存储介质 | |
CN110072052B (zh) | 基于多帧图像的图像处理方法、装置、电子设备 | |
CN110290289B (zh) | 图像降噪方法、装置、电子设备以及存储介质 | |
CN108259770B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN110166708B (zh) | 夜景图像处理方法、装置、电子设备以及存储介质 | |
CN109672819B (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
CN110191291B (zh) | 基于多帧图像的图像处理方法和装置 | |
CN110248106B (zh) | 图像降噪方法、装置、电子设备以及存储介质 | |
CN108111749B (zh) | 图像处理方法和装置 | |
CN110166707B (zh) | 图像处理方法、装置、电子设备以及存储介质 | |
CN107509044B (zh) | 图像合成方法、装置、计算机可读存储介质和计算机设备 | |
CN108024054B (zh) | 图像处理方法、装置、设备及存储介质 | |
CN108093158B (zh) | 图像虚化处理方法、装置、移动设备和计算机可读介质 | |
CN108401110B (zh) | 图像的获取方法、装置、存储介质及电子设备 | |
CN109993722B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN110166706B (zh) | 图像处理方法、装置、电子设备以及存储介质 | |
CN108156369B (zh) | 图像处理方法和装置 | |
CN108574803B (zh) | 图像的选取方法、装置、存储介质及电子设备 | |
CN110264420B (zh) | 基于多帧图像的图像处理方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18 Applicant after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd. Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18 Applicant before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd. |
|
CB02 | Change of applicant information | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20200804 |
|
CF01 | Termination of patent right due to non-payment of annual fee |