CN112351214B - 辅助人脸图像采集的方法、装置、可读存储介质及车辆 - Google Patents

辅助人脸图像采集的方法、装置、可读存储介质及车辆 Download PDF

Info

Publication number
CN112351214B
CN112351214B CN202011003592.4A CN202011003592A CN112351214B CN 112351214 B CN112351214 B CN 112351214B CN 202011003592 A CN202011003592 A CN 202011003592A CN 112351214 B CN112351214 B CN 112351214B
Authority
CN
China
Prior art keywords
face
region
image acquisition
exposure
face image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011003592.4A
Other languages
English (en)
Other versions
CN112351214A (zh
Inventor
王红涛
张顺军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhibo Automotive Technology Shanghai Co ltd
Original Assignee
Zhibo Automotive Technology Shanghai Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhibo Automotive Technology Shanghai Co ltd filed Critical Zhibo Automotive Technology Shanghai Co ltd
Priority to CN202011003592.4A priority Critical patent/CN112351214B/zh
Publication of CN112351214A publication Critical patent/CN112351214A/zh
Application granted granted Critical
Publication of CN112351214B publication Critical patent/CN112351214B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/06—Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)

Abstract

本公开涉及一种辅助人脸图像采集的方法、装置、可读存储介质及车辆，该方法包括：获取图像采集装置采集到的人脸图像；确定所述人脸图像的平均亮度；在所述平均亮度不在预设的亮度范围内的情况下，确定曝光参数，其中，所述曝光参数包括曝光时间；根据所述曝光参数，控制补光灯的开启时长，其中，所述补光灯用于在所述图像采集装置进行图像采集时进行补光；根据所述曝光参数，控制所述图像采集装置进行图像采集操作。该方法将补光灯和人脸曝光统一起来考虑，能够根据图像质量和环境来调整补光灯的开启时长，在降低补光灯功耗、延长补光灯寿命、避免资源浪费的同时得到满足后续处理的曝光图像。

Description

辅助人脸图像采集的方法、装置、可读存储介质及车辆
技术领域
本公开涉及驾驶安全领域，具体地，涉及一种辅助人脸图像采集的方法、装置、可读存储介质及车辆。
背景技术
疲劳驾驶是道路交通事故的主要诱因之一，因此，研究用于驾驶人疲劳状态的事故预警系统，对减少交通事故、保障驾驶人的人身安全有重大意义。
现有的疲劳监测预警系统都是采用近红外LED和红外摄像头采集人脸的信息。由于车载环境复杂以及太阳光照条件的变化，车内外的光线明暗对比强烈，摄像头曝光时容易造成过曝或曝光不足的现象。
在现有的技术方案中，有的技术方案只考虑人脸如何进行曝光处理，有的技术方案只考虑如何控制补光灯。这样处理很容易造成补光灯寿命的缩短和功耗过度，导致资源的浪费，且无法采集到满足后续处理的人脸图像。
发明内容
本公开的目的是提供一种辅助人脸图像采集的方法、装置、可读存储介质及车辆，以解决相关技术存在的问题。
为了实现上述目的，第一方面，本公开提供一种辅助人脸图像采集的方法，包括：
获取图像采集装置采集到的人脸图像；
确定所述人脸图像的平均亮度；
在所述平均亮度不在预设的亮度范围内的情况下，确定曝光参数，其中，所述曝光参数包括曝光时间；
根据所述曝光参数，控制补光灯的开启时长，其中，所述补光灯用于在所述图像采集装置进行图像采集时进行补光；
根据所述曝光参数，控制所述图像采集装置进行图像采集操作。
可选地，所述确定人脸图像的平均亮度，包括：
对所述人脸图像进行人脸检测，以确定所述人脸图像中的人脸区域；
根据所述人脸区域，对所述人脸图像进行区域划分，以得到多个区域，其中，划分出的每一区域各自具有相应的权重；
确定划分出的每一区域的亮度；
根据划分出的每一区域的亮度和权重，计算所述人脸图像的平均亮度。
可选地，所述人脸区域被划分成一独立区域，且所述人脸区域的权重大于其他区域的权重。
可选地，所述根据所述人脸区域，对所述人脸图像进行区域划分，以得到多个区域，包括：
根据所述人脸区域在所述人脸图像中的位置，从所述人脸图像中划分出所述人脸区域、以及位于所述人脸区域上方的上方区域、位于所述人脸区域下方的下方区域、位于所述人脸区域左侧的左侧区域和位于所述人脸区域右侧的右侧区域；
将所述人脸区域作为重点区域，将所述上方区域作为非重点区域，以及将所述左侧区域、所述右侧区域及所述下方区域确定为次重点区域，其中，所述重点区域的权重、所述次重点区域的权重及所述非重点区域的权重依次减小。
可选地，所述曝光参数还包括增益值；
所述确定曝光参数，包括：
根据方程Av+Tv＝Ev，计算所述曝光时间；
根据方程Bv+Sv＝Ev，计算所述增益值；
其中，Av表示光圈大小，Tv表示所述曝光时间，Ev表示曝光量，Sv表示所述增益值，Bv表示所述人脸图像的平均亮度。
可选地，所述根据所述曝光参数，控制补光灯的开启时长，包括：
根据所述曝光时间与预设延时之和，确定所述补光灯的所述开启时长；
根据所述开启时长，控制所述补光灯的开启。
可选地，所述根据所述曝光参数，控制所述图像采集装置进行图像采集操作，包括：
在所述补光灯开启之后，根据所述曝光参数，控制所述图像采集装置进行图像采集操作。
第二方面，本公开提供一种辅助人脸图像采集的装置，所述装置包括：
获取模块，用于获取图像采集装置采集到的人脸图像；
第一确定模块，用于确定所述人脸图像的平均亮度；
第二确定模块，用于在所述平均亮度不在预设的亮度范围内的情况下，确定曝光参数，其中，所述曝光参数包括曝光时间；
补光控制模块，用于根据所述曝光参数，控制补光灯的开启时长，其中，所述补光灯用于在所述图像采集装置进行图像采集时进行补光；
图像采集控制模块，用于根据所述曝光参数，控制所述图像采集装置进行图像采集操作。
可选地，所述第一确定模块包括：
人脸检测子模块，用于对所述人脸图像进行人脸检测，以确定所述人脸图像中的人脸区域；
区域划分子模块，用于根据所述人脸区域，对所述人脸图像进行区域划分，以得到多个区域，其中，划分出的每一区域各自具有相应的权重；
亮度确定子模块，用于确定划分出的每一区域的亮度；
亮度计算子模块，用于根据划分出的每一区域的亮度和权重，计算所述人脸图像的平均亮度。
可选地，所述人脸区域被划分成一独立区域，且所述人脸区域的权重大于其他区域的权重。
可选地，所述区域划分子模块用于：
根据所述人脸区域在所述人脸图像中的位置，从所述人脸图像中划分出所述人脸区域、以及位于所述人脸区域上方的上方区域、位于所述人脸区域下方的下方区域、位于所述人脸区域左侧的左侧区域和位于所述人脸区域右侧的右侧区域；
将所述人脸区域作为重点区域，将所述上方区域作为非重点区域，以及将所述左侧区域、所述右侧区域及所述下方区域确定为次重点区域，其中，所述重点区域的权重、所述次重点区域的权重及所述非重点区域的权重依次减小。
可选地，所述曝光参数还包括增益值；
所述第二确定模块包括：
曝光时间确定子模块，用于根据方程Av+Tv＝Ev，计算所述曝光时间；
增益值确定子模块，用于根据方程Bv+Sv＝Ev，计算所述增益值；
其中，Av表示光圈大小，Tv表示所述曝光时间，Ev表示曝光量，Sv表示所述增益值，Bv表示所述人脸图像的平均亮度。
可选地，所述补光控制模块包括：
时长确定子模块，用于根据所述曝光时间与预设延时之和，确定所述补光灯的所述开启时长；
补光灯控制子模块，用于根据所述开启时长，控制所述补光灯的开启。
可选地，所述图像采集控制模块用于在所述补光灯开启之后，根据所述曝光参数，控制所述图像采集装置进行图像采集操作。
第三方面，本公开提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现本公开第一方面提供的所述方法的步骤。
第四方面，本公开提供一种车辆，包括：
存储器，其上存储有计算机程序；
处理器，用于执行所述存储器中的所述计算机程序，以实现本公开第一方面提供的所述方法的步骤。
本公开包括以下有益效果：首先获取图像采集装置采集到人脸图像，之后确定所述人脸图像的平均亮度，接下来在所述平均亮度不在预设的亮度范围内的情况下，确定曝光参数，其中，所述曝光参数包括曝光时间，然后根据所述曝光参数，控制补光灯的开启时长，其中，所述补光灯用于在所述图像采集装置进行图像采集时进行补光，以及，根据所述曝光参数，控制所述图像采集装置进行图像采集操作。在本公开中，发明人经过研究，发现补光灯和人脸曝光的相关度非常强，并且两者是相互促进的，因此，将补光灯和人脸曝光统一起来考虑，能够根据图像质量和环境来调整补光灯的开启时长，进而采集到满足后续处理的人脸图像。根据确定出的曝光时间来得到补光灯的开启时长，而不是如现有技术中持续的开启补光灯，因此，可以在一定程度上延长补光灯的寿命，降低补光灯的功耗，避免资源的浪费。本公开提供的辅助人脸图像采集的方法可以对各类图像采集装置起到有效的辅助作用，具有较高的实用性。此外，该方法可以大大提高车载疲劳监测系统的工作效率，降低疲劳驾驶的风险。
本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
附图是用来提供对本公开的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本公开，但并不构成对本公开的限制。在附图中：
图1是根据一示例性实施例示出的一种辅助人脸图像采集的方法的流程图。
图2是根据另一示例性实施例示出的一种辅助人脸图像采集的方法的流程图。
图3是根据人脸位置将图像划分后的区域示意图。
图4是另一根据人脸位置将图像划分后的区域示意图。
图5是根据人脸位置将图像划分后的区域重点示意图。
图6是根据另一示例性实施例示出的一种辅助人脸图像采集的方法的流程图。
图7是根据一示例性实施例示出的一种辅助人脸图像采集的装置的框图。
具体实施方式
以下结合附图对本公开的具体实施方式进行详细说明。应当理解的是，此处所描述的具体实施方式仅用于说明和解释本公开，并不用于限制本公开。
现有的疲劳监测流程是：使用补光灯对准驾驶员的面部，通过红外摄像头获取人脸图像信息，然后使用一系列算法获取图像中人脸的特征点，并将这些特征点结合疲劳驾驶模型，分析驾驶员的疲劳状态和行为状态，最后根据分析结果发出预警，提醒驾驶员，达到辅助汽车安全驾驶的目的。
由于采集图像使用的是近红外摄像头，所以补光灯有着非常重要的作用，关系到红外摄像头是否能采集到图像，因此，如何控制补光灯就显得非常关键。同时作为监控系统的眼睛，采集到的人脸图像是否满足要求，对后续一系列的处理以及最终结果起着非常重要的作用。
鉴于此，本公开提供了一种辅助人脸图像采集的方法，将补光灯和人脸曝光相结合，以辅助人脸图像采集操作。
图1是根据一示例性实施例示出的一种辅助人脸图像采集的方法的流程图。该方法可以例如应用于车载疲劳监测系统中，或者应用于其他电子设备中，例如车载控制器等。如图1所示，该方法可以包括S101至S105。
在S101中，获取图像采集装置采集到的人脸图像。
在本实施例中，该图像采集装置可以是任意形式的具有图像采集能力的装置，例如，该图像采集装置可以为摄像头，例如红外摄像头。示例地，在本公开中，为了更好地监控驾驶员疲劳状况，该图像采集装置可以安装在汽车左侧A柱内并对准驾驶位。
示例地，在图像采集装置采集到一幅图像后，可以使用人脸检测技术，对整幅图像进行人脸检测。该人脸检测技术可以为预先训练好的卷积神经网络(Convolution NeuralNetwork，CNN)人脸检测器、标准OpenCV人脸检测模型或者其他的人脸检测技术，对此本公开不做限定。如果检测到人脸存在，则图像采集装置当前采集到的图像即为人脸图像。
在S102中，确定所述人脸图像的平均亮度。
在一种可能的实现方式中，对采集到的人脸图像，计算其全部像素点的亮度的平均值，以得到所述人脸图像的平均亮度。
在S103中，在所述平均亮度不在预设的亮度范围内的情况下，确定曝光参数，其中，所述曝光参数包括曝光时间。
示例地，在该步骤中，如果在S102中获得的人脸图像的平均亮度在预设的亮度范围内，则不对图像进行后续操作，该图像采集装置采集的人脸图像为满足曝光要求的人脸图像。
如果在S102中获得的人脸图像的平均亮度不在预设的亮度范围内，则说明该图像采集装置采集的人脸图像为不满足曝光要求的人脸图像，需要确定新的曝光参数，以调整曝光。在本公开中，可以例如通过曝光方程来计算曝光参数，其中，曝光参数包括曝光时间。
在S104中，根据所述曝光参数，控制补光灯的开启时长，其中，所述补光灯用于在所述图像采集装置进行图像采集时进行补光。
在该步骤中，根据在S103中确定出的曝光参数，也就是所述曝光参数中的曝光时间，来确定补光灯的开启时长，在该开启时长内利用补光灯在图像采集装置进行图像采集时进行补光。该补光灯可以例如为近红外LED。
在S105中，根据所述曝光参数，控制所述图像采集装置进行图像采集操作。
在一种可能的实现方式中，根据在S103中获得的曝光参数，对图像采集装置进行曝光调整，以采集满足后续处理的人脸图像。
通过上述技术方案，首先获取图像采集装置采集到人脸图像，之后确定所述人脸图像的平均亮度，接下来在所述平均亮度不在预设的亮度范围内的情况下，确定曝光参数，其中，所述曝光参数包括曝光时间，然后根据所述曝光参数，控制补光灯的开启时长，其中，所述补光灯用于在所述图像采集装置进行图像采集时进行补光，最后根据所述曝光参数，控制所述图像采集装置进行图像采集操作。在本公开中，发明人经过研究，发现补光灯和人脸曝光的相关度非常强，并且两者是相互促进的，因此，将补光灯和人脸曝光统一起来考虑，能够根据图像质量和环境来调整补光灯的开启时长，进而采集到满足后续处理的人脸图像。根据确定出的曝光时间来得到补光灯的开启时长，而不是如现有技术中持续的开启补光灯，因此，可以在一定程度上延长补光灯的寿命，降低补光灯的功耗，避免资源的浪费。本公开提供的辅助人脸图像采集的方法可以对各类图像采集装置起到有效的辅助作用，具有较高的实用性。此外，该方法可以大大提高车载疲劳监测系统的工作效率，降低疲劳驾驶的风险。
图2是根据另一示例性实施例示出的一种辅助人脸图像采集的方法的流程图。如图2所示，在本公开的另一种可能的实现方式中，S102可以进一步包括：
在S201中，对所述人脸图像进行人脸检测，以确定所述人脸图像中的人脸区域；
在S202中，根据所述人脸区域，对所述人脸图像进行区域划分，以得到多个区域，其中，划分出的每一区域各自具有相应的权重；
在S203中，确定划分出的每一区域的亮度；
在S204中，根据划分出的每一区域的亮度和权重，计算所述人脸图像的平均亮度。
图3是根据人脸位置将图像划分后的区域示意图。
示例地，在图像采集装置采集到一幅人脸图像后，使用卷积神经网络人脸检测器，对整幅图像进行人脸检测，找到这幅人脸图像中的人脸部分。如图3所示，将该人脸部分用一个矩形框框出来，记为人脸区域，然后将该人脸区域周围的上下左右区域同样用矩形框框出，分别记为上方区域、下方区域、左侧区域、右侧区域，并赋予各区域相应的权重，分别记为w1、w2、w3、w4、w5，其中，w1+w2+w3+w4+w5＝1。接着确定矩形框框出的每一个区域的亮度，例如，可以为该区域内所有像素点的平均亮度值，分别记为I1、I2、I3、I4、I5。最后根据每一区域的亮度值和其对应的权重，计算出人脸图像的平均亮度。该计算公式如下：
Figure BDA0002695148990000091
其中，Lavg表示该人脸图像的平均亮度。
值得说明的是，图3所示的区域划分结果仅仅作为一种示例，其他根据人脸区域对人脸图像进行区域划分的方式同样适用于本公开，例如，如图4所示的划分方式。
根据上述技术方案，通过对不同区域分配不同的权重来计算图像的平均亮度，可以体现出不同区域的亮度在整幅图像中的重要程度，使得该计算结果更为准确，为后续确定曝光参数提供准确依据。
其中，在S202中，所述人脸区域被划分成一独立区域，且所述人脸区域的权重大于其他区域的权重。
示例地，将图像中人脸部分用矩形框框出一个独立的区域，并赋予其最高权重。这种方式可以突出人脸部分在整幅图像中的重要程度，使得曝光调整更切合人脸图像需求。
示例地，S202可以进一步包括：
根据所述人脸区域在所述人脸图像中的位置，从所述人脸图像中划分出所述人脸区域、以及位于所述人脸区域上方的上方区域、位于所述人脸区域下方的下方区域、位于所述人脸区域左侧的左侧区域和位于所述人脸区域右侧的右侧区域；
将所述人脸区域作为重点区域，将所述上方区域作为非重点区域，以及将所述左侧区域、所述右侧区域及所述下方区域确定为次重点区域，其中，所述重点区域的权重、所述次重点区域的权重及所述非重点区域的权重依次减小。即，重点区域的权重最高，次重点区域的权重次之，非重点区域的权重最低。
根据上述技术方案，本公开可以应用于疲劳监测系统中，该系统主要强调是对人脸的监测，所以人脸区域是重点关注的部分，因此将其定义为重点区域。由于人脸区域的左边区域、右边区域、下边区域对人脸有一定的影响，所以将左边区域、右边区域、下边区域定义为次重点区域。由于位于人脸区域上方的上方区域对人脸的影响较小，所以将上方区域定义为非重点区域。通过这样的方式可以突出重点部分的关注度，减少不重要部分的关注度，使得曝光更贴合人脸图像的需求，同时可以提高人脸监测的效率。
图5是根据人脸位置将图像划分后的区域重点示意图。
示例地，参照图3根据人脸区域在所述人脸图像中的位置，从所述人脸图像中划分出所述人脸区域、位于所述人脸区域上方的上方区域、位于所述人脸区域下方的下方区域、位于所述人脸区域左侧的左侧区域、位于所述人脸区域右侧的右侧区域。
如图5所示，将所述人脸区域作为重点区域，记为T1，将所述上方区域作为非重点区域，记为T2，以及将所述左侧区域、所述右侧区域及所述下方区域确定为次重点区域分别记为T3、T4、T5，其中，所述重点区域的权重，记为M1所述非重点区域的权重，记为M2，所述次重点区域的权重，记为M3。所述权重根据重要程度依次减小，即，M1＞M2＞M3。权重满足如下条件：
M1+M2+M3＝1
根据上述技术方案，通过划分区域然后加权的这种方法可以区分不同区域的关注度，突出重点部分的重要程度。示例地，本公开可以应用于疲劳监测系统中，该系统主要强调的是对人脸的监测，通过区域加权的方法可以突出人脸部分的重要程度，减少不重要区域的关注度，从而提高人脸检测效果。
S103可以进一步包括：
根据所述曝光参数计算增益值。
根据方程Av+Tv＝Ev，计算所述曝光时间；
根据方程Bv+Sv＝Ev，计算所述增益值；
其中，Av表示光圈大小，Tv表示所述曝光时间，Ev表示曝光量，Sv表示所述增益值，Bv表示所述人脸图像的平均亮度。
示例地，在本公开中，首先要根据曝光方程，制作曝光表，以此控制曝光时间和增益值。该曝光表由曝光参数Av、Tv、Ev、Sv、Bv组成。
在本实施例中，首先将在S102得到的人脸图像的平均亮度Lavg与预先设定好的目标亮度Ltarget进行比较，判断Lavg是否达到目标亮度值。然后根据人脸图像的平均亮度和目标亮度的差值ΔL设定调节步长，该差值表达式为：
ΔL＝|Lavg-Ltarget|
根据差值的大小，设定4种步长，如果差值比较大，为了较快收敛达到目标亮度，取较大的步长，否则，取较小的步长。为了防止震荡，当图像亮度达到目标亮度的一定范围内时，不再调节步长，该范围由实际图像采集设备确定。
根据选定的调节步长，利用查表法，在曝光表中，查找与所述选定的调节步长相对应的增益值。接下来，根据方程Bv+Sv＝Ev，通过增益值Sv和人脸图像的平均亮度Bv确定需要采集的图像的曝光量Ev，然后由于光圈大小Av是一个固定的值，所以根据方程Av+Tv＝Ev，可以确定曝光时间Tv。
根据上述技术方案，通过查表法得出的曝光参数，可以减少大量的运算和实验，以简单的查表方式就可以获得在图像采集过程中需要调整的参数。通过查表法得到的曝光参数可以使图像正确的曝光，以采集到高品质、优良的图像，还可以降低图像处理过程中的难度，提高图像采集的效率。
图6是根据另一示例性实施例示出的一种辅助人脸图像采集的方法的流程图。如图6所示，在本公开的另一种可能的实现方式中，S104可以进一步包括：
在S401中，根据所述曝光时间与预设延时之和，确定所述补光灯的所述开启时长；
在S402中，根据所述开启时长，控制所述补光灯的开启。
示例地，由于在实际情况下补光灯的驱动有一定的延时，为了避免因为驱动延时导致的补光时间不足，所以最终的曝光时间表达式为：
Tv最终＝Tv+T延时
其中，T延时由实际补光灯的驱动设备确定。
根据上述技术方案，补光灯最终的开启时长为实际补光灯的驱动延时与S103中获得的曝光时间之和，在最终曝光时间内，对每一帧的图像进行曝光，然后控制图像采集装置采集图像。通过这种方法可以减少由于驱动延时导致的补光时间不足，从而没有采集到满足后续操作图像的情况。根据确定出的曝光时间来得到补光灯的开启时长，而不是如现有技术中持续的开启补光灯，因此，可以在一定程度上延长补光灯的寿命，降低补光灯的功耗，避免资源的浪费。并且可以大大提高图像采集的效率。
S105可以进一步包括：
在所述补光灯开启之后，根据所述曝光参数，控制所述图像采集装置进行图像采集操作。
示例地，首先根据在S401中得到的曝光时间，确定开启时长，然后按照该开启时长控制补光灯，补光灯开启之后，再根据通过曝光方程得到的曝光时间和增益值，控制图像采集装置进行采集图像。
根据上述技术方案，将补光灯和人脸曝光统一起来考虑，能够根据图像质量和环境来调整补光灯的开启时长，进而采集到满足后续处理的人脸图像。根据确定出的曝光时间来得到补光灯的开启时长，而不是如现有技术中持续的开启补光灯，因此，可以在一定程度上延长补光灯的寿命，降低补光灯的功耗，避免资源的浪费。本公开提供的辅助人脸图像采集的方法可以对各类图像采集装置起到有效的辅助作用，具有较高的实用性。此外，该方法可以大大提高车载疲劳监测系统的工作效率，降低疲劳驾驶的风险。
图7是根据一示例性实施例示出的一种辅助人脸图像采集的装置的框图。如图7所示，该装置可以包括获取模块601、第一确定模块602、第二确定模块603、补光控制模块604、图像采集控制模块605。
该获取模块601用于获取图像采集装置采集到的人脸图像。
该第一确定模块602用于确定所述人脸图像的平均亮度。
该第二确定模块603用于在所述平均亮度不在预设的亮度范围内的情况下，确定曝光参数，其中，所述曝光参数包括曝光时间。
该补光控制模块604用于根据所述曝光参数，控制补光灯的开启时长，其中，所述补光灯用于在所述图像采集装置进行图像采集时进行补光。
该图像采集控制模块605用于根据所述曝光参数，控制所述图像采集装置进行图像采集操作。
本公开包括以下有益效果：首先获取图像采集装置采集到人脸图像，之后确定所述人脸图像的平均亮度，接下来在所述平均亮度不在预设的亮度范围内的情况下，确定曝光参数，其中，所述曝光参数包括曝光时间，然后根据所述曝光参数，控制补光灯的开启时长，其中，所述补光灯用于在所述图像采集装置进行图像采集时进行补光，以及，根据所述曝光参数，控制所述图像采集装置进行图像采集操作。在本公开中，发明人经过研究，发现补光灯和人脸曝光的相关度非常强，并且两者是相互促进的，因此，将补光灯和人脸曝光统一起来考虑，能够根据图像质量和环境来调整补光灯的开启时长，进而采集到满足后续处理的人脸图像。根据确定出的曝光时间来得到补光灯的开启时长，而不是如现有技术中持续的开启补光灯，因此，可以在一定程度上延长补光灯的寿命，降低补光灯的功耗，避免资源的浪费。本公开提供的辅助人脸图像采集的方法可以对各类图像采集装置起到有效的辅助作用，具有较高的实用性。此外，该方法可以大大提高车载疲劳监测系统的工作效率，降低疲劳驾驶的风险。
可选地，所述第一确定模块602包括：人脸检测子模块，用于对所述人脸图像进行人脸检测，以确定所述人脸图像中的人脸区域；区域划分子模块，用于根据所述人脸区域，对所述人脸图像进行区域划分，以得到多个区域，其中，划分出的每一区域各自具有相应的权重；亮度确定子模块，用于确定划分出的每一区域的亮度；亮度计算子模块，用于根据划分出的每一区域的亮度和权重，计算所述人脸图像的平均亮度。
可选地，所述人脸区域被划分成一独立区域，且所述人脸区域的权重大于其他区域的权重。
可选地，所述区域划分子模块用于根据所述人脸区域在所述人脸图像中的位置，从所述人脸图像中划分出所述人脸区域、以及位于所述人脸区域上方的上方区域、位于所述人脸区域下方的下方区域、位于所述人脸区域左侧的左侧区域和位于所述人脸区域右侧的右侧区域；将所述人脸区域作为重点区域，将所述上方区域作为非重点区域，以及将所述左侧区域、所述右侧区域及所述下方区域确定为次重点区域，其中，所述重点区域的权重、所述次重点区域的权重及所述非重点区域的权重依次减小。
可选地，所述曝光参数还包括增益值，所述第二确定模块603包括：曝光时间确定子模块，用于根据方程Av+Tv＝Ev，计算所述曝光时间；增益值确定子模块，用于根据方程Bv+Sv＝Ev，计算所述增益值；其中，Av表示光圈大小，Tv表示所述曝光时间，Ev表示曝光量，Sv表示所述增益值，Bv表示所述人脸图像的平均亮度。
可选地，所述补光控制模块604包括：时长确定子模块，用于根据所述曝光时间与预设延时之和，确定所述补光灯的所述开启时长；补光控制子模块，用于根据所述开启时长，控制所述补光灯的开启。
可选地，所述图像采集控制模块605用于在所述补光灯开启之后，根据所述曝光参数，控制所述图像采集装置进行图像采集操作。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
本公开还提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现本公开提供的辅助人脸图像采集的方法的步骤。
本公开还提供一种车辆，包括：存储器，其上存储有计算机程序；处理器，用于执行所述存储器中的所述计算机程序，以实现本公开提供的辅助人脸图像采集的方法的步骤。
以上结合附图详细描述了本公开的优选实施方式，但是，本公开并不限于上述实施方式中的具体细节，在本公开的技术构思范围内，可以对本公开的技术方案进行多种简单变型，这些简单变型均属于本公开的保护范围。
另外需要说明的是，在上述具体实施方式中所描述的各个具体技术特征，在不矛盾的情况下，可以通过任何合适的方式进行组合，为了避免不必要的重复，本公开对各种可能的组合方式不再另行说明。
此外，本公开的各种不同的实施方式之间也可以进行任意组合，只要其不违背本公开的思想，其同样应当视为本公开所公开的内容。

Claims (9)

1.一种辅助人脸图像采集的方法，其特征在于，包括：
获取图像采集装置采集到的人脸图像；
确定所述人脸图像的平均亮度；
在所述平均亮度不在预设的亮度范围内的情况下，确定曝光参数，其中，所述曝光参数包括曝光时间和增益值；
根据所述曝光时间，控制补光灯的开启时长，其中，所述补光灯用于在所述图像采集装置进行图像采集时进行补光；
根据所述曝光时间和所述增益值，控制所述图像采集装置进行图像采集操作；
其中，所述确定曝光参数，包括：
根据方程Av+Tv＝Ev，计算所述曝光时间；
根据方程Bv+Sv＝Ev，计算所述增益值；
其中，Av表示光圈大小，Tv表示所述曝光时间，Ev表示曝光量，Sv表示所述增益值，Bv表示所述人脸图像的平均亮度。
2.根据权利要求1所述的方法，其特征在于，所述确定所述人脸图像的平均亮度，包括：
对所述人脸图像进行人脸检测，以确定所述人脸图像中的人脸区域；
根据所述人脸区域，对所述人脸图像进行区域划分，以得到多个区域，其中，划分出的每一区域各自具有相应的权重；
确定划分出的每一区域的亮度；
根据划分出的每一区域的亮度和权重，计算所述人脸图像的平均亮度。
3.根据权利要求2所述的方法，其特征在于，所述人脸区域被划分成一独立区域，且所述人脸区域的权重大于其他区域的权重。
4.根据权利要求2所述的方法，其特征在于，所述根据所述人脸区域，对所述人脸图像进行区域划分，以得到多个区域，包括：
根据所述人脸区域在所述人脸图像中的位置，从所述人脸图像中划分出所述人脸区域、以及位于所述人脸区域上方的上方区域、位于所述人脸区域下方的下方区域、位于所述人脸区域左侧的左侧区域和位于所述人脸区域右侧的右侧区域；
将所述人脸区域作为重点区域，将所述上方区域作为非重点区域，以及将所述左侧区域、所述右侧区域及所述下方区域确定为次重点区域，其中，所述重点区域的权重、所述次重点区域的权重及所述非重点区域的权重依次减小。
5.根据权利要求1所述的方法，其特征在于，所述根据所述曝光时间，控制补光灯的开启时长，包括：
根据所述曝光时间与预设延时之和，确定所述补光灯的所述开启时长；
根据所述开启时长，控制所述补光灯的开启。
6.根据权利要求1所述的方法，其特征在于，所述根据所述曝光时间和所述增益值，控制所述图像采集装置进行图像采集操作，包括：
在所述补光灯开启之后，根据所述曝光时间和所述增益值，控制所述图像采集装置进行图像采集操作。
7.一种辅助人脸图像采集的装置，其特征在于，包括：
获取模块，用于获取图像采集装置采集到的人脸图像；
第一确定模块，用于确定所述人脸图像的平均亮度；
第二确定模块，用于在所述平均亮度不在预设的亮度范围内的情况下，确定曝光参数，其中，所述曝光参数包括曝光时间和增益值；
补光控制模块，用于根据所述曝光时间，控制补光灯的开启时长，其中，所述补光灯用于在所述图像采集装置进行图像采集时进行补光；
图像采集控制模块，用于根据所述曝光时间和所述增益值，控制所述图像采集装置进行图像采集操作；
其中，所述第二确定模块包括：
曝光时间确定子模块，用于根据方程Av+Tv＝Ev，计算所述曝光时间；
增益值确定子模块，用于根据方程Bv+Sv＝Ev，计算所述增益值；
其中，Av表示光圈大小，Tv表示所述曝光时间，Ev表示曝光量，Sv表示所述增益值，Bv表示所述人脸图像的平均亮度。
8.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现权利要求1-6中任一项所述方法的步骤。
9.一种车辆，其特征在于，包括：
存储器，其上存储有计算机程序；
处理器，用于执行所述存储器中的所述计算机程序，以实现权利要求1-6中任一项所述方法的步骤。
CN202011003592.4A 2020-09-22 2020-09-22 辅助人脸图像采集的方法、装置、可读存储介质及车辆 Active CN112351214B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011003592.4A CN112351214B (zh) 2020-09-22 2020-09-22 辅助人脸图像采集的方法、装置、可读存储介质及车辆

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011003592.4A CN112351214B (zh) 2020-09-22 2020-09-22 辅助人脸图像采集的方法、装置、可读存储介质及车辆

Publications (2)

Publication Number Publication Date
CN112351214A CN112351214A (zh) 2021-02-09
CN112351214B true CN112351214B (zh) 2022-05-06

Family

ID=74358092

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011003592.4A Active CN112351214B (zh) 2020-09-22 2020-09-22 辅助人脸图像采集的方法、装置、可读存储介质及车辆

Country Status (1)

Country Link
CN (1) CN112351214B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115022552B (zh) * 2021-02-18 2024-04-16 北京石头创新科技有限公司 自行走设备的摄像曝光方法和自行走设备
CN114554105B (zh) * 2022-04-27 2022-08-02 深圳比特微电子科技有限公司 一种控制补光灯的方法、装置、摄像机和存储介质
CN117294929B (zh) * 2023-10-11 2024-04-16 润芯微科技(江苏)有限公司 一种基于车内多模态识别技术的智能拍照方法及系统

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102573239A (zh) * 2012-01-16 2012-07-11 迅驰（北京）视讯科技有限公司 用于摄像机的补光灯亮度智能控制方法及装置
CN105554408A (zh) * 2015-12-16 2016-05-04 天津天地伟业数码科技有限公司 一种机芯光圈的自适应方法
CN106534712A (zh) * 2016-10-24 2017-03-22 北京旷视科技有限公司 控制方法、图像处理单元、补光单元和摄像装置
CN107205126A (zh) * 2017-06-30 2017-09-26 联想(北京)有限公司 一种控制方法及处理装置
CN107257428A (zh) * 2017-07-19 2017-10-17 上海浩创亘永科技有限公司 一种摄像头补光方法
CN109165548A (zh) * 2018-07-06 2019-01-08 深圳虹识技术有限公司 一种补光的方法和设备
CN109314751A (zh) * 2018-08-30 2019-02-05 深圳市锐明技术股份有限公司 一种补光方法、补光装置及电子设备
CN109740393A (zh) * 2018-12-06 2019-05-10 无锡盈达聚力科技有限公司 条码扫描系统及方法
CN110099222A (zh) * 2019-05-17 2019-08-06 睿魔智能科技（深圳）有限公司 一种拍摄设备的曝光调整方法、装置、存储介质及设备
CN110324538A (zh) * 2019-07-25 2019-10-11 浙江沃得尔科技股份有限公司 一种车载红外摄像头系统
CN110418067A (zh) * 2019-06-18 2019-11-05 浙江大华技术股份有限公司 补光灯控制方法、装置、摄像设备和存储介质
CN110855900A (zh) * 2019-11-20 2020-02-28 何建军 一种基于外置闪光光源的拍照控制方法、系统和存储介质
CN111447374A (zh) * 2020-05-13 2020-07-24 重庆紫光华山智安科技有限公司 补光调节方法、装置、电子设备及存储介质

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW495642B (en) * 2001-10-17 2002-07-21 Sunplus Technology Co Ltd Automatic flash light device of digital camera and method of the same
CN100361020C (zh) * 2003-12-05 2008-01-09 北京中星微电子有限公司 一种数字亮度增益与曝光时间协同工作的自动曝光方法
JP5188453B2 (ja) * 2009-05-25 2013-04-24 パナソニック株式会社 カメラ装置および露光制御方法
JP5533059B2 (ja) * 2010-03-12 2014-06-25 三菱電機株式会社 撮像装置
KR20130021701A (ko) * 2011-08-23 2013-03-06 주식회사 케이티 휴대 단말에서 카메라 구동 방법 및 이를 위한 장치
JP6034740B2 (ja) * 2013-04-18 2016-11-30 オリンパス株式会社 撮像装置および撮像方法
CN104754238B (zh) * 2013-12-31 2018-03-23 展讯通信（上海）有限公司 一种成像控制方法及装置、成像控制系统
CN104917976B (zh) * 2015-06-05 2018-08-21 北京大恒图像视觉有限公司 一种相机自动曝光和自动增益调节方法
CN108012133B (zh) * 2017-12-12 2019-09-17 Oppo广东移动通信有限公司 图像处理方法、装置、计算机可读存储介质和计算机设备
CN108429892A (zh) * 2018-05-10 2018-08-21 杭州雄迈集成电路技术有限公司 一种基于rgb传感器日夜模式自动切换方法

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102573239A (zh) * 2012-01-16 2012-07-11 迅驰（北京）视讯科技有限公司 用于摄像机的补光灯亮度智能控制方法及装置
CN105554408A (zh) * 2015-12-16 2016-05-04 天津天地伟业数码科技有限公司 一种机芯光圈的自适应方法
CN106534712A (zh) * 2016-10-24 2017-03-22 北京旷视科技有限公司 控制方法、图像处理单元、补光单元和摄像装置
CN107205126A (zh) * 2017-06-30 2017-09-26 联想(北京)有限公司 一种控制方法及处理装置
CN107257428A (zh) * 2017-07-19 2017-10-17 上海浩创亘永科技有限公司 一种摄像头补光方法
CN109165548A (zh) * 2018-07-06 2019-01-08 深圳虹识技术有限公司 一种补光的方法和设备
CN109314751A (zh) * 2018-08-30 2019-02-05 深圳市锐明技术股份有限公司 一种补光方法、补光装置及电子设备
CN109740393A (zh) * 2018-12-06 2019-05-10 无锡盈达聚力科技有限公司 条码扫描系统及方法
CN110099222A (zh) * 2019-05-17 2019-08-06 睿魔智能科技（深圳）有限公司 一种拍摄设备的曝光调整方法、装置、存储介质及设备
CN110418067A (zh) * 2019-06-18 2019-11-05 浙江大华技术股份有限公司 补光灯控制方法、装置、摄像设备和存储介质
CN110324538A (zh) * 2019-07-25 2019-10-11 浙江沃得尔科技股份有限公司 一种车载红外摄像头系统
CN110855900A (zh) * 2019-11-20 2020-02-28 何建军 一种基于外置闪光光源的拍照控制方法、系统和存储介质
CN111447374A (zh) * 2020-05-13 2020-07-24 重庆紫光华山智安科技有限公司 补光调节方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN112351214A (zh) 2021-02-09

Similar Documents

Publication Publication Date Title
CN112351214B (zh) 辅助人脸图像采集的方法、装置、可读存储介质及车辆
CN109194873B (zh) 一种图像处理方法及装置
JP5435307B2 (ja) 車載カメラ装置
CN106791475A (zh) 曝光调整方法及所适用的车载摄像装置
CN109309792B (zh) 车载摄像头的图像处理方法、装置及车辆
CN106707674A (zh) 投影设备的自动对焦方法及投影设备
CN102428700B (zh) 监视装置
US10230900B2 (en) Apparatus for controlling exposure of multi-view camera, system including the same, and method for controlling exposure of multi-view camera
JP2013005234A5 (zh)
US11962909B2 (en) Camera, method, apparatus and device for switching between daytime and nighttime modes, and medium
US9977986B2 (en) Method and apparatus for switching a region of interest
CN105827993B (zh) 调整图像曝光度的方法及系统
JP2017016568A (ja) 運転者異常検出装置
JP2009116742A (ja) 車載用画像処理装置、画像処理方法、および、プログラム
JP2008135856A (ja) 物体認識装置
US20120121129A1 (en) Image processing apparatus
JP4980939B2 (ja) 撮像手段の調整装置および物体検出装置
CN110636271B (zh) 半导体器件和消息图像输出方法
US10129458B2 (en) Method and system for dynamically adjusting parameters of camera settings for image enhancement
US20130215269A1 (en) Bird view system and compensating method thereof
CN113691776A (zh) 一种车内摄像系统及补光方法
JP2006311108A (ja) 画像処理装置、画像処理方法、画像処理プログラムおよびカメラ
CN105592258A (zh) 自动聚焦方法及装置
US20220368860A1 (en) Transmission method, transmission system, and system control device
KR102494530B1 (ko) 차량에 설치되어 졸음운전 및 부주의 운전 인식 서비스를 제공할 수 있는 카메라 장치 및 그 서비스 제공방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant