CN109167922A - 图像处理方法、装置及电子设备 - Google Patents

图像处理方法、装置及电子设备 Download PDF

Info

Publication number
CN109167922A
CN109167922A CN201811235036.2A CN201811235036A CN109167922A CN 109167922 A CN109167922 A CN 109167922A CN 201811235036 A CN201811235036 A CN 201811235036A CN 109167922 A CN109167922 A CN 109167922A
Authority
CN
China
Prior art keywords
image
frame
brightness values
picture frame
image brightness
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811235036.2A
Other languages
English (en)
Other versions
CN109167922B (zh
Inventor
任彦斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Megvii Technology Co Ltd
Original Assignee
Beijing Megvii Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Megvii Technology Co Ltd filed Critical Beijing Megvii Technology Co Ltd
Priority to CN201811235036.2A priority Critical patent/CN109167922B/zh
Publication of CN109167922A publication Critical patent/CN109167922A/zh
Application granted granted Critical
Publication of CN109167922B publication Critical patent/CN109167922B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/74Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

本发明提供了一种图像处理方法、装置及电子设备,涉及图像的采集及处理技术领域。其中,图像处理方法包括:获取图像采集装置采集的多个图像帧;从多个图像帧中选择图像亮度值满足设定条件的图像帧;所述设定条件包括以下之一:所述图像帧的图像亮度值大于设定阈值;或所述图像帧的图像亮度值在所述多个图像帧中最大;输出所述被选择的图像帧。本发明提供的一种图像处理方法、装置及电子设备,在补光灯闪烁的过程中,从图像采集装置拍摄的多个图像帧中选择图像亮度值满足设定条件的图像帧,进行后续图像检测及识别操作,可以提高在暗光环境下图像检测及识别操作的准确率,进而提高用户体验。

Description

图像处理方法、装置及电子设备
技术领域
本发明涉及图像采集和处理技术领域,尤其是涉及一种图像处理方法、装置及电子设备。
背景技术
当在暗光环境下采集图像时,可能因为图像亮度值过低而无法使用。例如,在暗光环境下进行人脸解锁操作,人脸解锁是通过人脸识别或人脸验证技术进行权限管理的一种手段,电子设备可以利用人脸这一生物特征作为权限保护的密码。当在暗光环境下进行人脸解锁时,为了改善光照环境,电子设备通常启动补光灯进行补光,提高成像亮度。
在补光灯的闪烁过程中,补光灯发出的光呈现由暗至亮,再由亮至暗的变化过程,且在亮度最大时持续的时间很短,电子设备很难捕获到补光灯亮度最大时的图像。当补光灯开启时,电子设备捕获到的图像虽能检测到人脸,但仍可能因亮度值过低而无法进行识别,解锁操作不能成功,因而需要再次甚至多次启动补光灯,使解锁操作持续过长时间,降低了用户体验。
发明内容
有鉴于此,本发明的目的在于提供一种图像处理方法、装置及电子设备,可以提高暗光环境下图像检测及识别操作的准确率,提高用户体验。
为了实现上述目的,本发明实施例采用的技术方案如下:
第一方面,本发明实施例提供了一种图像处理方法,包括:
获取图像采集装置采集的多个图像帧;
从多个图像帧中选择图像亮度值满足设定条件的图像帧;所述设定条件包括以下之一:所述图像帧的图像亮度值大于设定阈值;或所述图像帧的图像亮度值在所述多个图像帧中最大;
输出所述被选择的图像帧。
结合第一方面,本发明实施例提供了第一方面的第二种可能的实施方式,其中,从多个图像帧中选择图像亮度值满足设定条件的图像帧,所述设定条件为所述图像帧的图像亮度值在所述多个图像帧中最大;包括:
获取当前图像帧的图像亮度值;
判断所述当前图像帧的图像亮度值是否小于已存图像亮度值;所述已存图像亮度值为在当前图像帧之前接收到的图像帧中图像亮度值的最大值;
如果否,将所述当前图像帧的图像亮度值作为所述已存图像亮度值,并保存当前图像帧;
如果是,将已存图像亮度值对应的图像帧作为被选择的图像帧。
结合第一方面的第一种可能的实施方式,本发明实施例提供了第一方面的第二种可能的实施方式,其中,所述获取当前图像帧的图像亮度值的步骤之前,所述方法还包括:
判断所述当前图像帧的亮度是否大于预设的基本亮度值;
如果是,执行计算接收到的当前图像帧的图像亮度值的步骤。
结合第一方面的第二种可能的实施方式,本发明实施例提供了第一方面的第三种可能的实施方式,其中,判断所述当前图像帧的亮度是否大于预设的基本亮度值的步骤,包括:
将所述当前图像帧划分为多个光格;
如果任一个光格的亮度大于预设的基本亮度值,则判定所述当前图像帧的亮度大于预设的基本亮度值。
结合第一方面的第一种可能的实施方式,本发明实施例提供了第一方面的第四种可能的实施方式,其中,所述获取当前图像帧的图像亮度值的步骤,包括:
确定所述当前图像帧的各个像素点的亮度值;
将各个像素点的亮度值的平均值,作为所述当前图像帧的图像亮度值。
结合第一方面的第一种或第二种可能的实施方式,本发明实施例提供了第一方面的第五种可能的实施方式,其中,所述获取当前图像帧的图像亮度值的步骤之前,所述方法还包括:
判断所述当前图像帧是否包含待处理对象;
如果是,执行所述获取当前图像帧的图像亮度值的步骤。
结合第一方面的第五种可能的实施方式,本发明实施例提供了第一方面的第六种可能的实施方式,其中,所述获取当前图像帧的图像亮度值的步骤,包括:
确定所述当前图像帧中的目标对象区域的各个像素点的亮度值;
将所述目标对象区域的各个像素点的亮度值的平均值,作为所述当前图像帧的图像亮度值。
结合第一方面的第一种可能的实施方式,本发明实施例提供了第一方面的第七种可能的实施方式,其中,所述将已存图像亮度值对应的图像帧作为被选择的图像帧的步骤之前,所述方法还包括:
判断当前图像帧的图像亮度值小于已存图像亮度值的次数是否达到设定次数;
如果是,执行将已存图像亮度值对应的图像帧作为被选择的图像帧的步骤。
结合第一方面,本发明实施例提供了第一方面的第八种可能的实施方式,其中,输出所述被选择的图像帧的步骤之后,所述方法还包括:
应用被选择的图像帧进行人脸识别和/或活体检测。
第二方面,本发明实施例还提供一种图像处理装置,包括:
接收模块,用于获取图像采集装置采集的多个图像帧;
选择模块,用于从多个图像帧中选择图像亮度值满足设定条件的图像帧;所述设定条件包括以下之一:所述图像帧的图像亮度值大于设定阈值;或所述图像帧的图像亮度值在所述多个图像帧中最大;
输出模块,用于输出所述被选择的图像帧。
第三方面,本发明实施例提供了一种电子设备,包括:图像采集装置、处理器和存储装置;
所述图像采集装置,用于采集图像;
所述存储装置上存储有计算机程序,所述计算机程序在被所述处理器运行时执行如第一方面中任一项所述的方法。
第四方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器运行时执行上述第一方面任一项所述的方法的步骤。
本发明实施例提供了一种图像处理方法、装置及电子设备,在补光灯闪烁的过程中,通过图像采集装置拍摄多个图像帧,从多个图像帧中选择图像亮度值满足设定条件的图像帧,进行后续图像检测及识别操作,可以提高在暗光环境下图像检测及识别操作的准确率,进而提高用户体验。
本公开的其他特征和优点将在随后的说明书中阐述,或者,部分特征和优点可以从说明书推知或毫无疑义地确定,或者通过实施本公开的上述技术即可得知。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了本发明实施例所提供的一种电子设备的结构示意图;
图2示出了电子设备的补光灯在闪烁过程中亮度随时间的变化曲线图;
图3示出了本发明实施例所提供的一种图像处理方法的流程图;
图4示出了本发明实施例所提供的另一种图像处理方法的流程图;
图5示出了本发明实施例所提供的一种图像处理装置的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合附图对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
当电子设备在暗光环境下采集图像时,可能会因为图像亮度值过低而无法使用。以电子设备在暗光环境采集图像进行人脸解锁操作为例进行说明,当在暗光环境下进行人脸解锁时,为了改善光照环境,电子设备通常启动补光灯进行补光,提高成像亮度。在补光灯的闪烁过程中,补光灯的亮度变化曲线如图2所示,补光灯发出的光呈现由暗至亮,再由亮至暗的变化过程,补光灯达到亮度最大需要一定的时间,且在亮度最大时持续的时间很短,电子设备的图像采集装置很难捕获到补光灯亮度最大期间的图像。当补光灯开启时,图像采集装置捕获到的图像帧虽能检测到人脸,但仍可能因亮度值过低而无法进行识别,人脸解锁操作的失败率仍然较高。
由于人脸解锁过程中的人脸识别和活体检测等算法都耗时较长,待上述算法完成,返回解锁失败消息,需要采集下一图像帧再次进行人脸解锁操作时,已经错过补光灯最亮的时间段,只能等待再次启动补光灯或补光灯的下一个闪烁周期,再获取较亮的图像帧,因而使人脸解锁操作持续较长的时间,降低了用户体验。
为了加快暗光环境下操作执行的速度,提高用户体验,本发明实施例提供了一种图像处理方法、装置及电子设备,可以应用于任何图像检测或图像识别的操作过程中。
实施例一:
首先,参照图1来描述用于实现本发明实施例的图像处理方法、装置及电子设备的示例电子设备100。
如图1所示,电子设备100包括一个或多个处理器102、一个或多个存储装置104、输入装置106、输出装置108以及图像采集装置110,这些组件通过总线系统112和/或其它形式的连接机构(未示出)互连。应当注意,图1所示的电子设备100的组件和结构只是示例性的,而非限制性的,根据需要,所述电子设备也可以具有其他组件和结构。
所述处理器102可以是中央处理单元(CPU)、图形处理单元(Graphics ProcessingUnit,GPU)或者具有数据处理能力和/或指令执行能力的其它形式的处理单元,并且可以控制所述电子设备100中的其它组件以执行期望的功能。
所述存储装置104可以包括一个或多个计算机程序产品,所述计算机程序产品可以包括各种形式的计算机可读存储介质,例如易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(ROM)、硬盘、闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机程序指令,处理器102可以运行所述程序指令,以实现下文所述的本发明实施例中(由处理器实现)的客户端功能以及/或者其它期望的功能。在所述计算机可读存储介质中还可以存储各种应用程序和各种数据,例如所述应用程序使用和/或产生的各种数据等。
所述输入装置106可以是用户用来输入指令的装置,并且可以包括键盘、鼠标、麦克风和触摸屏等中的一个或多个。
所述输出装置108可以向外部(例如,用户)输出各种信息(例如,图像或声音),并且可以包括显示器、扬声器等中的一个或多个。
所述图像采集装置110可以拍摄用户期望的图像(例如照片、视频等),并且将所拍摄的图像存储在所述存储装置104中以供其它组件使用。
电子设备100上还设置有一个或多个补光灯,补光灯对应于图像采集装置设置,用于当环境光线不足,影响图像采集装置的图像采集效果时,为所述图像采集装置进行补光。补光灯可以采用红外补光灯,如近红外LED灯、激光红外灯等。红外补光灯发出不可见红外光,在暗光环境中为图像采集装置进行补光。
示例性地,用于实现根据本发明实施例的图像处理方法、装置的示例电子设备可以被实现在电子相机上,也可以被实现在诸如智能手机、平板电脑等移动终端上。
实施例二:
针对现有的电子设备在补光灯闪烁期间,不容易捕获到亮度符合要求的图像帧,延长了操作执行时间的问题,本实施例提供了一种图像处理方法,需要说明的是,附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。以下对本实施例进行详细介绍。
图3示出了本发明实施例所提供的一种图像处理方法的流程图,如图3所示,该方法包括如下步骤:
步骤S302,获取图像采集装置采集的多个图像帧。
电子设备在进行图像检测或图像识别等操作时,需要通过图像采集装置拍摄图像。如果环境光线较暗,电子设备将启动补光灯进行补光。补光灯的闪烁将经历一定时长,在补光灯闪烁过程中,图像采集装置可拍摄多个图像帧。
步骤S304,从多个图像帧中选择图像亮度值满足设定条件的图像帧。
在一种可选的实施例中,设定条件可以是:所述图像帧的图像亮度值大于设定阈值。预先设定满足操作需求的图像帧所需的最低亮度值,即设定阈值。从多个图像帧中选择图像亮度值大于设定阈值的图像帧,作为被选择的图像帧。如果不止一个图像帧的图像亮度值满足设定条件,且上述操作需要多个图像帧,可以将图像亮度值满足设定条件的图像帧均作为图像亮度值满足设定条件的图像帧,或者从图像亮度值满足设定条件的图像帧中选取所需数量的图像帧,作为被选择的图像帧。如果不止一个图像帧的图像亮度值满足设定条件,但上述操作仅需要一个图像帧,可以从图像亮度值满足设定条件的图像帧中任意选取一个图像帧,作为被选择的图像帧。
在另一种可选的实施例中,设定条件可以是:图像帧的图像亮度值在所述多个图像帧中最大。以人脸解锁操作为例进行说明,图像亮度值最大的图像帧可以认为是图像采集装置在补光灯最亮的时间段内拍摄的图像帧,相对于其它图像帧而言,该图像帧能够成功进行人脸识别的概率最大。因此,可以选择所述多个图像帧中图像亮度值最大的图像帧作为被选择的图像帧。
具体地,可以采用如下方法确定所述多个图像帧中图像亮度值最大的图像帧:在存储装置中指定存储空间用于存储已存图像亮度值和对应的图像帧,初始化已存图像亮度值为0。当接收到图像采集装置拍摄的第一个图像帧时,将第一个图像帧的图像亮度值作为已存图像亮度值进行保存,并对应保存第一个图像帧。此后再接收到图像采集装置拍摄的图像帧,计算接收到的当前图像帧的图像亮度值;判断当前图像帧的图像亮度值是否小于已存图像亮度值;如果否,将当前图像帧的图像亮度值作为已存图像亮度值,并保存当前图像帧;如果是,将已存图像亮度值对应的图像帧作为被选择的图像帧。
步骤S306,输出被选择的图像帧。
输出被选择的图像帧,以使电子设备应用被选择的图像帧进行图像检测或图像识别操作。例如,在进行人脸解锁、虹膜解锁或刷脸付款等应用时,电子设备可以应用被选择的图像进行人脸识别和/或活体检测。在一种可选的实施例中,电子设备可以应用被选择的图像帧进行人脸识别,判断图像帧中包含的人脸特征与预存的人脸特征是否匹配,进而进行身份验证,如果验证通过,则执行解锁操作。在另一种可选的实施例中,电子设备可以应用被选择的图像帧进行活体检测,由于活体图像中人脸不同部位的光线的明暗变化与照片图像中光线的明暗变化不同,因此,可以通过被选择的图像帧中的光线的明暗变化进行活体检测。在第三种可选的实施例中,电子设备可以应用被选择的图像帧进行人脸识别和活体检测,如果图像帧中包含的人脸特征与预存的人脸特征匹配,并且活体检测通过,则执行解锁操作。
本实施例提供的图像处理方法,在补光灯闪烁的过程中,通过图像采集装置拍摄多个图像帧,从多个图像帧中选择图像亮度值满足设定条件的图像帧,进行后续图像检测及识别操作,可以提高在暗光环境下图像检测及识别操作的准确率,进而提高用户体验。
实施例三:
本实施例在上述实施例二的基础上,提供了另一种图像处理方法,该方法可以选取出图像采集装置在补光灯最亮的时间段拍摄的图像帧,基于最亮的图像帧进行后续图像检测或图像识别操作。为了方便理解,在本实施例的描述中,多处采用人脸识别为例进行说明,但本实施例并不仅限于基于图像进行人脸识别操作。如图4所示,本实施例提供的图像处理方法包括如下步骤:
步骤S402,接收图像采集装置采集的图像帧。
电子设备启动补光灯,在补光灯闪烁过程中,图像采集装置可连续拍摄多个图像帧。处理器接收图像采集装置拍摄的图像帧。
步骤S404,判断当前图像帧的亮度是否大于预设的基本亮度值;如果是,执行步骤S406;如果否,返回执行步骤S402。
其中,预设的基本亮度值小于前述的设定阈值。图像帧的亮度大于基本亮度值时,才可以检测到人的面部。如果图像帧的亮度小于基本亮度值,则无法检测到人的面部,更无法进行人脸识别,这样的图像帧可以舍弃,返回步骤S402接收下一图像帧。
在判断当前图像帧的亮度是否大于预设的基本亮度值时,可以将当前图像帧划分为多个光格;确定各个光格的亮度,如果任一个光格的亮度大于预设的基本亮度值,则判定当前图像帧的亮度大于预设的基本亮度值,执行步骤S406。如果所有光格的亮度均小于或等于预设的基本亮度值,则认为当前图像帧的亮度不大于预设的基本亮度值,返回执行步骤S402。
步骤S406,判断当前图像帧是否包含待处理对象;如果是,执行步骤S408;如果否,返回执行步骤S402。
如果后续操作为人脸解锁操作,则目标对象为人的面部。可以采用现有的人脸检测算法,如CART(分类回归树)算法等,对当前图像帧进行人脸检测。如果检测到当前图像帧中存在人脸,可以采用矩形框标示出人脸位置的坐标,继续执行步骤S408。如果检测到当前图像帧中不存在人脸,则该图像帧无法用于后续的人脸识别,则返回执行步骤S402,接收下一图像帧。由于人脸检测算法的执行时间远远小于进行人脸识别或活体检测所需要的时间,因此,如果当前图像帧中未检测到人脸,再接收下一图像帧,不会错过补光灯最亮的时间段。
本发明实施例中的目标对象不限于人的面部,对于不同的后续操作,可以有不同的目标对象,如人的眼部、人的手部、动物、植物或物品等。例如,如果后续操作为虹膜解锁操作,则目标对象为人的眼部。
需要说明的是,本发明实施例对步骤S406和步骤S404的顺序不作限定,且在某些实施例中,可以不设置步骤S406或步骤S404,仍可以实现本发明实施例的发明目的。
步骤S408,获取当前图像帧的图像亮度值。
在一种可选的实施例中,可以确定当前图像帧的各个像素点的亮度值;计算各个像素点的亮度值的平均值,将各个像素点的亮度值的平均值,作为当前图像帧的图像亮度值。
在另一种可选的实施例中,如果当前图像帧包含目标对象,如果目标对象区域的亮度值足够,就可以进行后续的人脸识别,其它区域的亮度值可以不考虑。因此,可以仅确定当前图像帧中的目标对象区域的各个像素点的亮度值;计算目标对象区域的各个像素点的亮度值的平均值,将目标对象区域的各个像素点的亮度值的平均值,作为当前图像帧的图像亮度值。该算法仅计算目标对象区域的像素点的亮度值,可以减少计算量,提高计算速度。
步骤S410,判断当前图像帧的图像亮度值是否小于已存图像亮度值;如果否,执行步骤S412后返回执行步骤S402;如果是,执行步骤S414。
由于处理器在接收图像采集装置拍摄的第一个图像帧之前,将用于存储已存图像亮度值的位置初始化为0。当接收到图像采集装置拍摄的第一个图像帧时,将第一个图像帧的图像亮度值保存为已存图像亮度值。如果之后的图像帧的图像亮度值大于已存第一个图像帧的图像亮度值,则采用较大的图像亮度值替换已存图像亮度值。因此,已存图像亮度值为在当前图像帧之前接收到的图像帧中图像亮度值的最大值。
步骤S412,将当前图像帧的图像亮度值作为已存图像亮度值,并保存当前图像帧。
步骤S414,将已存图像亮度值对应的图像帧作为被选择的图像帧。
由于补光灯的亮度遵循由暗至亮,再由亮至暗的规律,所以可以认为,图像采集装置拍摄的图像帧的图像亮度值也遵循逐渐增大,到达顶峰后再逐渐减小的规律。因此,如果当前图像帧的图像亮度值大于已存图像亮度值,则说明该图像帧是在补光灯由暗至亮时拍摄的,补光灯可能未达到最亮,此时,可以按照步骤S412将当前图像帧的图像亮度值作为已存图像亮度值,再接收下一图像帧。如果当前图像帧的图像亮度值小于已存图像亮度值,说明拍摄该图像帧时,补光灯已进入由亮至暗的阶段,则可以认为已存图像亮度值对应的图像帧是在补光灯最亮的时间段拍摄的,将已存图像亮度值对应的图像帧作为选择的图像帧。
可选地,考虑到如果某一个图像帧的图像亮度值计算错误或存在其它误差,导致本来在补光灯由暗至亮的阶段拍摄的图像帧的图像亮度值小于已存图像亮度值,而可能选择错误的图像帧。为了保证选择的图像帧是在补光灯最亮的时间段拍摄的,可以预先设定当前图像帧的图像亮度值小于已存图像亮度值的次数,比如设定为两次或三次。判断当前图像帧的图像亮度值小于已存图像亮度值的次数是否达到设定次数;如果是,执行将已存图像亮度值对应的图像帧作为被选择的图像帧的步骤;如果否,则直接返回执行步骤S402,接收下一图像帧。
同理,为了避免错误地将图像亮度值小的图像帧作为较亮的图像帧进行存储,在将当前图像帧的图像亮度值作为已存图像亮度值之前,也可以先判断当前图像帧的图像亮度值大于已存图像亮度值的次数是否达到设定次数;如果是,执行将当前图像帧的图像亮度值作为已存图像亮度值的步骤;如果否,则返回执行步骤S402,接收下一图像帧。
步骤S416,输出被选择的图像帧。
在本实施例中,被选择的图像帧为图像亮度值最大的图像帧,该图像帧是图像采集装置在补光灯最亮的时间段内拍摄的图像帧,相对于其它图像帧而言,该图像帧能够提高后续的人脸识别或活体检测的准确率。应用被选择的图像帧进行人脸解锁时,可以使人脸解锁的成功率更大。
本实施例提供的图像处理方法,选取图像采集装置在补光灯最亮的时间段拍摄的图像帧进行后续的图像检测及识别操作,可以提高在暗光环境下图像检测及识别操作的准确率,提高用户体验。
实施例四:
对应于前述方法实施例,本实施例提供了一种图像处理装置,参见图5所示的一种图像处理装置的结构示意图,该装置包括:
接收模块51,用于获取图像采集装置采集的多个图像帧;
选择模块52,用于从多个图像帧中选择图像亮度值满足设定条件的图像帧;所述设定条件包括以下之一:所述图像帧的图像亮度值大于设定阈值;或所述图像帧的图像亮度值在所述多个图像帧中最大;
输出模块53,用于输出所述被选择的图像帧。
其中,选择模块52还可以用于:获取当前图像帧的图像亮度值;判断当前图像帧的图像亮度值是否小于已存图像亮度值;所述已存图像亮度值为在当前图像帧之前接收到的图像帧中图像亮度值的最大值;如果否,将所述当前图像帧的图像亮度值作为已存图像亮度值,并保存当前图像帧;如果是,将已存图像亮度值对应的图像帧作为被选择的图像帧。
选择模块52还可以用于:判断所述当前图像帧的亮度是否大于预设的基本亮度值;如果是,执行计算接收到的当前图像帧的图像亮度值的步骤;以及用于:判断所述当前图像帧是否包含待处理对象;如果是,执行计算接收到的当前图像帧的图像亮度值的步骤。
选择模块52还可以用于:将所述当前图像帧划分为多个光格;如果任一个光格的亮度大于预设的基本亮度值,则判定所述当前图像帧的亮度大于预设的基本亮度值。
选择模块52还可以用于:确定所述当前图像帧的各个像素点的亮度值;将各个像素点的亮度值的平均值,作为所述当前图像帧的图像亮度值;或者用于:确定所述当前图像帧中的目标对象区域的各个像素点的亮度值;将所述目标对象区域的各个像素点的亮度值的平均值,作为所述当前图像帧的图像亮度值。
选择模块52还可以用于:判断当前图像帧的图像亮度值小于已存图像亮度值的次数是否达到设定次数;如果是,执行将已存图像亮度值对应的图像帧作为图像亮度值满足设定条件的图像帧的步骤。
应用模块53还可以用于:应用被选择的图像帧进行人脸识别和/或活体检测。
本发明实施例提供了一种图像处理装置,在补光灯闪烁的过程中,通过图像采集装置拍摄多个图像帧,从多个图像帧中选择图像亮度值满足设定条件的图像帧,进行后续操作,可以提高操作的成功率,减少操作失败的次数,进而加快暗光环境下操作执行的速度,提高用户体验。
本实施例所提供的装置,其实现原理及产生的技术效果和前述实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。
此外,本发明实施例提供了一种电子设备,图像采集装置、处理器和存储装置;所述图像采集装置用于在补光灯闪烁过程中拍摄图像;所述存储装置上存储有计算机程序,所述处理器执行计算机程序时实现前述方法实施例提供的方法的步骤,获取图像采集装置采集的多个图像帧;从多个图像帧中选择图像亮度值满足设定条件的图像帧;所述设定条件包括以下之一:所述图像帧的图像亮度值大于设定阈值;或所述图像帧的图像亮度值在所述多个图像帧中最大;输出被选择的图像帧。应用被选择的图像帧进行后续图像检测及识别操作,可以提高在暗光环境下图像检测及识别操作的准确率,进而提高用户体验。
进一步,本实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器运行时执行上述前述方法实施例所提供的方法的步骤。
本发明实施例所提供的一种图像处理方法及装置的计算机程序产品,包括存储了程序代码的计算机可读存储介质,所述程序代码包括的指令可用于执行前面方法实施例中所述的方法,具体实现可参见方法实施例,在此不再赘述。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本发明的具体实施方式,用以说明本发明的技术方案,而非对其限制,本发明的保护范围并不局限于此,尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (12)

1.一种图像处理方法,其特征在于,包括:
获取图像采集装置采集的多个图像帧;
从多个图像帧中选择图像亮度值满足设定条件的图像帧;所述设定条件包括以下之一:所述图像帧的图像亮度值大于设定阈值;或所述图像帧的图像亮度值在所述多个图像帧中最大;
输出所述被选择的图像帧。
2.根据权利要求1所述的方法,其特征在于,从多个图像帧中选择图像亮度值满足设定条件的图像帧,所述设定条件为所述图像帧的图像亮度值在所述多个图像帧中最大;包括:
获取当前图像帧的图像亮度值;
判断所述当前图像帧的图像亮度值是否小于已存图像亮度值;所述已存图像亮度值为在当前图像帧之前接收到的图像帧中图像亮度值的最大值;
如果否,将所述当前图像帧的图像亮度值作为所述已存图像亮度值,并保存当前图像帧;
如果是,将已存图像亮度值对应的图像帧作为被选择的图像帧。
3.根据权利要求2所述的方法,其特征在于,所述获取当前图像帧的图像亮度值的步骤之前,所述方法还包括:
判断所述当前图像帧的亮度是否大于预设的基本亮度值;
如果是,执行计算接收到的当前图像帧的图像亮度值的步骤。
4.根据权利要求3所述的方法,其特征在于,判断所述当前图像帧的亮度是否大于预设的基本亮度值的步骤,包括:
将所述当前图像帧划分为多个光格;
如果任一个光格的亮度大于预设的基本亮度值,则判定所述当前图像帧的亮度大于预设的基本亮度值。
5.根据权利要求2所述的方法,其特征在于,所述获取当前图像帧的图像亮度值的步骤,包括:
确定所述当前图像帧的各个像素点的亮度值;
将各个像素点的亮度值的平均值,作为所述当前图像帧的图像亮度值。
6.根据权利要求2或3所述的方法,其特征在于,所述获取当前图像帧的图像亮度值的步骤之前,所述方法还包括:
判断所述当前图像帧是否包含待处理对象;
如果是,执行所述获取当前图像帧的图像亮度值的步骤。
7.根据权利要求6所述的方法,其特征在于,所述获取当前图像帧的图像亮度值的步骤,包括:
确定所述当前图像帧中的目标对象区域的各个像素点的亮度值;
将所述目标对象区域的各个像素点的亮度值的平均值,作为所述当前图像帧的图像亮度值。
8.根据权利要求2所述的方法,其特征在于,所述将已存图像亮度值对应的图像帧作为被选择的图像帧的步骤之前,所述方法还包括:
判断当前图像帧的图像亮度值小于已存图像亮度值的次数是否达到设定次数;
如果是,执行将已存图像亮度值对应的图像帧作为被选择的图像帧的步骤。
9.根据权利要求1所述的方法,其特征在于,输出所述被选择的图像帧的步骤之后,所述方法还包括:
应用被选择的图像帧进行人脸识别和/或活体检测。
10.一种图像处理装置,其特征在于,包括:
接收模块,用于获取图像采集装置采集的多个图像帧;
选择模块,用于从多个图像帧中选择图像亮度值满足设定条件的图像帧;所述设定条件包括以下之一:所述图像帧的图像亮度值大于设定阈值;或所述图像帧的图像亮度值在所述多个图像帧中最大;
输出模块,用于输出所述被选择的图像帧。
11.一种电子设备,其特征在于,包括:图像采集装置、处理器和存储装置;
所述图像采集装置,用于采集图像;
所述存储装置上存储有计算机程序,所述计算机程序在被所述处理器运行时执行如权利要求1至9中任一项所述的方法。
12.一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,其特征在于,所述计算机程序被处理器运行时执行上述权利要求1至9中任一项所述的方法的步骤。
CN201811235036.2A 2018-10-22 2018-10-22 图像处理方法、装置及电子设备 Active CN109167922B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811235036.2A CN109167922B (zh) 2018-10-22 2018-10-22 图像处理方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811235036.2A CN109167922B (zh) 2018-10-22 2018-10-22 图像处理方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN109167922A true CN109167922A (zh) 2019-01-08
CN109167922B CN109167922B (zh) 2021-05-04

Family

ID=64879039

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811235036.2A Active CN109167922B (zh) 2018-10-22 2018-10-22 图像处理方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN109167922B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109803093A (zh) * 2019-01-28 2019-05-24 深圳市云之梦科技有限公司 虚拟试衣的成像方法和虚拟试衣设备
CN110046488A (zh) * 2019-04-19 2019-07-23 努比亚技术有限公司 解锁方法、移动终端及计算机可读存储介质
CN112052726A (zh) * 2020-07-28 2020-12-08 北京极豪科技有限公司 图像处理方法及装置
CN112861839A (zh) * 2021-02-25 2021-05-28 佛山市顺德区美的洗涤电器制造有限公司 用于洗碗机的方法、装置以及洗碗机
CN113674241A (zh) * 2021-08-17 2021-11-19 Oppo广东移动通信有限公司 选帧方法、装置、计算机设备和存储介质
CN116977332A (zh) * 2023-09-21 2023-10-31 合肥联宝信息技术有限公司 摄像头补光灯性能测试方法、装置、电子设备及存储介质

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101690243A (zh) * 2008-05-14 2010-03-31 松下电器产业株式会社 摄像装置以及摄像方法
US20120098438A1 (en) * 2010-10-20 2012-04-26 Hon Hai Precision Industry Co., Ltd. Illumination adjustment circuit
CN103516993A (zh) * 2012-06-29 2014-01-15 联想(北京)有限公司 一种亮度调节方法
US20150062345A1 (en) * 2013-08-30 2015-03-05 Masato KUSANAGI Image generation apparatus, vehicle, control method of image generation apparatus and storage medium
CN104780308A (zh) * 2014-01-09 2015-07-15 联想(北京)有限公司 一种信息处理方法及电子设备
CN105049728A (zh) * 2015-08-17 2015-11-11 广东欧珀移动通信有限公司 一种拍摄图像的获取方法和装置
CN105049731A (zh) * 2015-08-26 2015-11-11 北京奇虎科技有限公司 智能摄像装置及其摄录模式切换方法
CN106357985A (zh) * 2016-08-22 2017-01-25 广东欧珀移动通信有限公司 一种屏幕补光拍照方法、装置及移动终端
CN106534712A (zh) * 2016-10-24 2017-03-22 北京旷视科技有限公司 控制方法、图像处理单元、补光单元和摄像装置
CN106778699A (zh) * 2017-01-20 2017-05-31 贵州财经大学 人脸识别系统和应用人脸识别系统的门
CN107679473A (zh) * 2017-09-22 2018-02-09 广东欧珀移动通信有限公司 解锁控制方法及相关产品
CN108038444A (zh) * 2017-12-11 2018-05-15 北京小米移动软件有限公司 图像识别方法及装置

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101690243A (zh) * 2008-05-14 2010-03-31 松下电器产业株式会社 摄像装置以及摄像方法
US20120098438A1 (en) * 2010-10-20 2012-04-26 Hon Hai Precision Industry Co., Ltd. Illumination adjustment circuit
CN103516993A (zh) * 2012-06-29 2014-01-15 联想(北京)有限公司 一种亮度调节方法
US20150062345A1 (en) * 2013-08-30 2015-03-05 Masato KUSANAGI Image generation apparatus, vehicle, control method of image generation apparatus and storage medium
CN104780308A (zh) * 2014-01-09 2015-07-15 联想(北京)有限公司 一种信息处理方法及电子设备
CN105049728A (zh) * 2015-08-17 2015-11-11 广东欧珀移动通信有限公司 一种拍摄图像的获取方法和装置
CN105049731A (zh) * 2015-08-26 2015-11-11 北京奇虎科技有限公司 智能摄像装置及其摄录模式切换方法
CN106357985A (zh) * 2016-08-22 2017-01-25 广东欧珀移动通信有限公司 一种屏幕补光拍照方法、装置及移动终端
CN106534712A (zh) * 2016-10-24 2017-03-22 北京旷视科技有限公司 控制方法、图像处理单元、补光单元和摄像装置
CN106778699A (zh) * 2017-01-20 2017-05-31 贵州财经大学 人脸识别系统和应用人脸识别系统的门
CN107679473A (zh) * 2017-09-22 2018-02-09 广东欧珀移动通信有限公司 解锁控制方法及相关产品
CN108038444A (zh) * 2017-12-11 2018-05-15 北京小米移动软件有限公司 图像识别方法及装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109803093A (zh) * 2019-01-28 2019-05-24 深圳市云之梦科技有限公司 虚拟试衣的成像方法和虚拟试衣设备
CN109803093B (zh) * 2019-01-28 2021-02-26 深圳市云之梦科技有限公司 虚拟试衣的成像方法和虚拟试衣设备
CN110046488A (zh) * 2019-04-19 2019-07-23 努比亚技术有限公司 解锁方法、移动终端及计算机可读存储介质
CN110046488B (zh) * 2019-04-19 2024-04-26 努比亚技术有限公司 解锁方法、移动终端及计算机可读存储介质
CN112052726A (zh) * 2020-07-28 2020-12-08 北京极豪科技有限公司 图像处理方法及装置
CN112861839A (zh) * 2021-02-25 2021-05-28 佛山市顺德区美的洗涤电器制造有限公司 用于洗碗机的方法、装置以及洗碗机
CN113674241A (zh) * 2021-08-17 2021-11-19 Oppo广东移动通信有限公司 选帧方法、装置、计算机设备和存储介质
CN116977332A (zh) * 2023-09-21 2023-10-31 合肥联宝信息技术有限公司 摄像头补光灯性能测试方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN109167922B (zh) 2021-05-04

Similar Documents

Publication Publication Date Title
CN109167922A (zh) 图像处理方法、装置及电子设备
CN107609383B (zh) 3d人脸身份认证方法与装置
CN102193962B (zh) 对照装置、数字图像处理系统、以及对照装置的控制方法
CN111274928B (zh) 一种活体检测方法、装置、电子设备和存储介质
CN109376592B (zh) 活体检测方法、装置和计算机可读存储介质
CN107992794A (zh) 一种活体检测方法、装置和存储介质
CN109951595A (zh) 智能调节屏幕亮度的方法、装置、存储介质及移动终端
CN109684951A (zh) 人脸识别方法、底库录入方法、装置及电子设备
CN102096805B (zh) 注册用于脸部识别的多个脸部图像的装置和方法
CN108629260A (zh) 活体验证方法和装置及存储介质
CN104123485A (zh) 实名制信息绑定的方法和装置
CN108875468B (zh) 活体检测方法、活体检测系统以及存储介质
US9501719B1 (en) System and method for verification of three-dimensional (3D) object
CN108737728A (zh) 一种图像拍摄方法、终端及计算机存储介质
CN109325460B (zh) 一种人脸识别方法、光心标定方法和终端
CN108875338A (zh) 解锁方法、装置和系统及存储介质
CN107690804A (zh) 一种图像处理方法及用户终端
CN108875331A (zh) 人脸解锁方法、装置和系统及存储介质
CN108921178A (zh) 获取图像模糊程度分类的方法、装置、电子设备
CN113596344A (zh) 拍摄处理方法、装置、电子设备和可读存储介质
CN113591517A (zh) 一种活体检测方法及相关设备
CN107729833B (zh) 人脸检测方法及相关产品
JP2020505705A (ja) 特徴画像を習得するための方法およびデバイスならびにユーザー認証方法
CN107577973B (zh) 一种图像显示方法、图像识别方法及设备
CN108875334A (zh) 人脸解锁方法、人脸解锁终端以及非易失性存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant