CN111489340A - 闪光灯故障的确定方法及装置、存储介质、电子装置 - Google Patents

闪光灯故障的确定方法及装置、存储介质、电子装置 Download PDF

Info

Publication number
CN111489340A
CN111489340A CN202010270474.3A CN202010270474A CN111489340A CN 111489340 A CN111489340 A CN 111489340A CN 202010270474 A CN202010270474 A CN 202010270474A CN 111489340 A CN111489340 A CN 111489340A
Authority
CN
China
Prior art keywords
flash
frame
deviation
avg
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010270474.3A
Other languages
English (en)
Other versions
CN111489340B (zh
Inventor
易荣刚
李俊英
郑磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN202010270474.3A priority Critical patent/CN111489340B/zh
Publication of CN111489340A publication Critical patent/CN111489340A/zh
Application granted granted Critical
Publication of CN111489340B publication Critical patent/CN111489340B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
    • Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
    • Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Color Television Image Signal Generators (AREA)
  • Studio Devices (AREA)

Abstract

本发明提供了一种闪光灯故障的确定方法及装置、存储介质、电子装置，该方法，包括：在确定获取的图像帧是闪光帧的情况下，确定闪光帧的颜色分量和颜色通道的矫正参数，其中，闪光帧是利用闪光灯获取的图像帧；确定颜色分量与预设颜色分量之间的第一偏差，以及矫正参数与预设矫正参数之间的第二偏差；基于第一偏差和第二偏差确定闪光灯是否出现故障。通过本发明，解决了对闪光灯故障的检测不准确的问题。

Description

闪光灯故障的确定方法及装置、存储介质、电子装置
技术领域
本发明涉及计算机领域，具体而言，涉及一种闪光灯故障的确定方法及装置、存储介质、电子装置。
背景技术
在智能交通领域，在卡口场景下对车窗内人脸效果有较高要求，交通摄像机通常会搭配一个闪光灯，用于对抓拍帧进行补光；但目标大多数闪光灯均属于外置设备且没有故障上报功能，一旦发生故障，交通摄像机抓取的图片因为亮度低、效果差而不能作为处罚依据；如果纯靠维护人员进行排查问题，会浪费很多时间，且会存在漏检的问题。
根据现有计算带闪光灯抓拍帧白平衡算法均是使用上帧抓拍帧的统计信息去预估下帧抓拍帧白平衡参数；卡口多车道场景下，会使用多个闪光灯，如果某一个闪光灯故障后，则其他闪光灯正常的车道抓拍的图片，也会出现严重偏色问题，从而导致图像效果甚至车身颜色等算法指标的大幅度下降，且该图片无法作为处罚依据。
现有技术中，虽然能够通过抓拍帧图像亮度的变化来检测闪光灯故障，但是闪光灯色温衰减的故障是无法检测出来的，特别是相机配套多个闪光灯时，问题尤其明显。
针对上述技术问题，相关技术中尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种闪光灯故障的确定方法及装置、存储介质、电子装置，以至少解决相关技术中对闪光灯故障的检测不准确的问题。
根据本发明的一个实施例，提供了一种闪光灯故障的确定方法，包括：在确定获取的图像帧是闪光帧的情况下，确定上述闪光帧的颜色分量和颜色通道的矫正参数，其中，上述闪光帧是利用闪光灯获取的图像帧；确定上述颜色分量与预设颜色分量之间的第一偏差，以及上述矫正参数与上述预设矫正参数之间的第二偏差；基于上述第一偏差和上述第二偏差确定上述闪光灯是否出现故障。
根据本发明的另一个实施例，提供了一种闪光灯故障的确定装置，包括：
第一确定模块，用于在确定获取的图像帧是闪光帧的情况下，确定上述闪光帧的颜色分量和颜色通道的矫正参数，其中，上述闪光帧是利用闪光灯获取的图像帧；
第二确定模块，用于确定上述颜色分量与预设颜色分量之间的第一偏差，以及上述矫正参数与上述预设矫正参数之间的第二偏差；
第三确定模块，用于基于上述第一偏差和上述第二偏差确定上述闪光灯是否出现故障。
可选地，上述装置还包括：
第一获取模块，用于在确定获取的图像帧是闪光帧的情况下，确定上述闪光帧的颜色分量和颜色通道的矫正参数之前，获取上述图像帧的帧标记；
第四确定模块，用于基于上述帧标记确定上述图像帧是闪光帧。
可选地，上述第一确定模块，包括：
第一计算单元，用于利用白平衡AWB算法计算上述闪光帧的G通道的颜色分量和上述闪光帧的R通道的矫正参数Rgain和B通道的矫正参数Bgain。
可选地，上述第三确定模块，包括：第一确定单元，用于在上述颜色分量中的G通道的颜色分量与第一AVG_G之间的第一偏差大于或等于上述第一阈值，或者，上述矫正参数中的Rgain与第一AVG_Rgain之间的第三偏差大于或等于上述第二预设阈值，或者，上述矫正参数中的Bgain与第一AVG_Bgain之间的第四偏差大于或等于上述第二预设阈值的情况下，确定上述闪光帧是异常帧，其中，上述第三偏差和上述第四偏差包括在上述第二偏差中，第一AVG用于表示所述G通道的颜色分量的平均值，第一AVG_Rgain用于表示N帧闪光帧的Rgain的平均值，第一AVG_Bgain用于表示N帧闪光帧的Bgain的平均值，N是大于1的自然数；
第二确定单元，用于在上述异常帧的帧数与上述闪光帧的帧数的比值大于第三预设阈值，且上述闪光帧的帧数大于第四预设阈值的情况下，确定上述闪光灯出现故障。
可选地，上述第三确定模块，包括：
第三确定单元，用于在上述颜色分量中的G通道的颜色分量与第一AVG_G之间的第一偏差小于上述第一预设阈值、上述矫正参数中的Rgain与第一AVG_Rgain之间的第三偏差小于上述第二预设阈值、且上述矫正参数中的Bgain与第一AVG_Bgain之间的第四偏差小于上述第二预设阈值的情况下，将上述G通道的颜色分量、上述Rgain以及上述Bgain进行滤波，得到第一目标AVG_G、第一目标AVG_Rgain以及第一目标AVG_Bgain，其中，上述第三偏差和上述第四偏差包括在上述第二偏差中，第一AVG用于表示所述G通道的颜色分量的平均值，第一AVG_Rgain用于表示N帧闪光帧的Rgain的平均值，第一AVG_Bgain用于表示N帧闪光帧的Bgain的平均值，N是大于1的自然数；
第四确定单元，用于确定上述目标第一AVG_G与第二AVG_G之间的第五偏差、上述第一目标AVG_Rgain与第二AVG_Rgain之间的第六偏差、以及上述第一目标AVG_Bgain与第二AVG_Bgain之间的第七偏差，其中，第二AVG_G、第二AVG_Rgain以及第二AVG_Bgain均是基于非闪光帧确定的；
第五确定单元，用于基于上述第五偏差、第六偏差以及第七偏差确定上述闪光灯是否出现故障。
可选地，上述第五确定单元，包括：
第一确定子单元，用于在第五偏差小于或等于第五预设阈值，或者，上述第六偏差小于或等于第六预设阈值，或者，上述第七偏差小于或等于上述第六预设阈值的情况下，确定上述闪光帧是异常帧；
第二确定子单元，用于在上述异常帧的帧数与上述闪光帧的帧数的比值大于第七预设阈值，且上述闪光帧的帧数大于第八预设阈值的情况下，确定上述闪光灯出现故障。
可选地，上述第五确定单元，包括：
第三确定子单元，用于在上述第五偏差大于第五预设阈值、上述第六偏差大于第六预设阈值、以及上述第七偏差大于上述第六预设阈值的情况下，确定上述闪光灯未出现故障。
可选地，上述装置还包括：
第一判断模块，用于在确定获取的图像帧是闪光帧的情况下，确定上述闪光帧的颜色分量和颜色通道的矫正参数之前，在确定上述图像帧所处的环境是夜晚环境的情况下，对上述闪光灯是否出现故障进行判断。
可选地，上述装置还包括：
第二计算模块，用于在确定获取的图像帧是非闪光帧的情况下，利用白平衡AWB算法计算上述非闪光帧的G通道的颜色分量和上述非闪光帧的R通道的矫正参数Rgain和B通道的矫正参数Bgain；
第五确定模块，用于将上述G通道的颜色分量、上述Rgain以及上述Bgain进行滤波，得到第二目标AVG_G、第二目标AVG_Rgain以及第二目标AVG_Bgain，以确定上述闪光灯未出现故障。
可选地，上述装置还包括：
设置模块，用于在确定获取的图像帧是闪光帧的情况下，确定上述闪光帧的颜色分量和颜色通道的矫正参数之前，在确定上述闪光帧是夜晚环境下的第一帧闪光帧的情况下，将上述闪光灯的参数设置为初始状态。
根据本发明的又一个实施例，还提供了一种存储介质，所述存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
根据本发明的又一个实施例，还提供了一种电子装置，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。
通过本发明，由于在确定获取的图像帧是闪光帧的情况下，确定闪光帧的颜色分量和颜色通道的矫正参数，其中，闪光帧是利用闪光灯获取的图像帧；确定颜色分量与预设颜色分量之间的第一偏差，以及矫正参数与预设矫正参数之间的第二偏差；基于第一偏差和第二偏差确定闪光灯是否出现故障。可以实现通过闪光帧的颜色分量和矫正参数确定出闪光灯是否出现故障。因此，可以解决相关技术中对闪光灯故障的检测不准确的问题问题，达到准确确定闪光灯故障的效果。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是本发明实施例的一种闪光灯故障的确定方法的移动终端的硬件结构框图；
图2是根据本发明实施例的闪光灯故障的确定方法的流程图；
图3是根据本发明实施例的整体流程图；
图4是根据本发明实施例的闪光灯故障的确定装置的结构框图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。
本申请实施例一所提供的方法实施例可以在移动终端、计算机终端或者类似的运算装置中执行。以运行在移动终端上为例，图1是本发明实施例的一种闪光灯故障的确定方法的移动终端的硬件结构框图。如图1所示，移动终端10可以包括一个或多个(图1中仅示出一个)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)和用于存储数据的存储器104，可选地，上述移动终端还可以包括用于通信功能的传输设备106以及输入输出设备108。本领域普通技术人员可以理解，图1所示的结构仅为示意，其并不对上述移动终端的结构造成限定。例如，移动终端10还可包括比图1中所示更多或者更少的组件，或者具有与图1所示不同的配置。
存储器104可用于存储计算机程序，例如，应用软件的软件程序以及模块，如本发明实施例中的闪光灯故障的确定方法对应的计算机程序，处理器102通过运行存储在存储器104内的计算机程序，从而执行各种功能应用以及数据处理，即实现上述的方法。存储器104可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器104可进一步包括相对于处理器102远程设置的存储器，这些远程存储器可以通过网络连接至移动终端10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输装置106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括移动终端10的通信供应商提供的无线网络。在一个实例中，传输装置106包括一个网络适配器(Network Interface Controller，简称为NIC)，其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中，传输装置106可以为射频(Radio Frequency，简称为RF)模块，其用于通过无线方式与互联网进行通讯。
在本实施例中提供了一种闪光灯故障的确定方法，图2是根据本发明实施例的闪光灯故障的确定方法的流程图，如图2所示，该流程包括如下步骤：
步骤S202，在确定获取的图像帧是闪光帧的情况下，确定所述闪光帧的颜色分量和颜色通道的矫正参数，其中，所述闪光帧是利用闪光灯获取的图像帧；
可选地，本实施例包括但不限于应用于交通管制场景中，例如，用于拍摄车辆信息的场景。在夜晚场景下，需要利用闪光灯对摄像设备的拍摄进行补光。
步骤S204，确定所述颜色分量与预设颜色分量之间的第一偏差，以及所述矫正参数与所述预设矫正参数之间的第二偏差；
步骤S206，基于所述第一偏差和所述第二偏差确定所述闪光灯是否出现故障。
可选地，上述步骤的执行主体可以为终端等，但不限于此。
通过上述步骤，由于在确定获取的图像帧是闪光帧的情况下，确定闪光帧的颜色分量和颜色通道的矫正参数，其中，闪光帧是利用闪光灯获取的图像帧；确定颜色分量与预设颜色分量之间的第一偏差，以及矫正参数与预设矫正参数之间的第二偏差；基于第一偏差和第二偏差确定闪光灯是否出现故障。可以实现通过闪光帧的颜色分量和矫正参数确定出闪光灯是否出现故障。因此，可以解决相关技术中对闪光灯故障的检测不准确的问题问题，达到准确确定闪光灯故障的效果。
在一个可选的实施例中，在确定获取的图像帧是闪光帧的情况下，确定闪光帧的颜色分量和颜色通道的矫正参数之前，方法还包括：
S1，获取图像帧的帧标记；
S2，基于帧标记确定图像帧是闪光帧。
可选地，在本实施例中，帧标记用于标识图像帧是否是闪光帧，闪光帧的帧标记可以是1，非闪光帧的帧标记可以是0。
在一个可选的实施例中，在确定获取的图像帧是闪光帧的情况下，确定闪光帧的颜色分量和颜色通道的矫正参数，包括：
S1，利用白平衡AWB算法计算闪光帧的G通道的颜色分量和闪光帧的R通道的矫正参数Rgain和B通道的矫正参数Bgain。
可选地，在本实施例中，将闪光帧的图像信息输入至AWB系统中进行计算，则可以得到闪光帧的G分量、Rgain和Bgain。
在一个可选的实施例中，基于第一偏差和第二偏差确定闪光灯是否出现故障，包括：
S1，在颜色分量中的G通道的颜色分量与第一AVG_G之间的第一偏差大于或等于第一预设阈值，或者，矫正参数中的Rgain与第一AVG_Rgain之间的第三偏差大于或等于第二预设阈值，或者，矫正参数中的Bgain与第一AVG_Bgain之间的第四偏差大于或等于第二预设阈值的情况下，确定闪光帧是异常帧，其中，第三偏差和第四偏差包括在第二偏差中，第一AVG用于表示所述G通道的颜色分量的平均值，第一AVG_Rgain用于表示N帧闪光帧的Rgain的平均值，第一AVG_Bgain用于表示N帧闪光帧的Bgain的平均值，N是大于1的自然数；
S2，在异常帧的帧数与闪光帧的帧数的比值大于第三预设阈值，且闪光帧的帧数大于第四预设阈值的情况下，确定闪光灯出现故障。
可选地，在本实施例中，通过偏差值以及异常帧与闪光帧的帧数比值的判断，可以准确的确定出闪光灯是否出现故障。
在一个可选的实施例中，基于第一偏差和第二偏差确定闪光灯是否出现故障，包括：
S1，在颜色分量中的G通道的颜色分量与第一AVG_G之间的第一偏差小于第一预设阈值、矫正参数中的Rgain与第一AVG_Rgain之间的第三偏差小于第二预设阈值、且矫正参数中的Bgain与第一AVG_Bgain之间的第四偏差小于第二预设阈值的情况下，将G通道的颜色分量、Rgain以及Bgain进行滤波，得到第一目标AVG_G、第一目标AVG_Rgain以及第一目标AVG_Bgain，其中，第三偏差和第四偏差包括在第二偏差中，第一AVG用于表示所述G通道的颜色分量的平均值，第一AVG_Rgain用于表示N帧闪光帧的Rgain的平均值，第一AVG_Bgain用于表示N帧闪光帧的Bgain的平均值，N是大于1的自然数；
S2，确定第一AVG_G与第二AVG_G之间的第五偏差、第一AVG_Rgain与第二AVG_Rgain之间的第六偏差、以及第一目标AVG_Bgain与第二AVG_Bgain之间的第七偏差，其中，第二AVG_G、第二AVG_Rgain以及第二AVG_Bgain均是基于非闪光帧确定的；
S3，基于第五偏差、第六偏差以及第七偏差确定闪光灯是否出现故障。
可选地，第二AVG_G、第二AVG_Rgain、第二AVG_Bgain可以是通过非闪光帧确定的。
在一个可选的实施例中，基于第五偏差、第六偏差以及第七偏差确定闪光灯是否出现故障，包括：
S1，在第五偏差小于或等于第五预设阈值，或者，第六偏差小于或等于第六预设阈值，或者，第七偏差小于或等于第六预设阈值的情况下，确定闪光帧是异常帧；
S2，在异常帧的帧数与闪光帧的帧数的比值大于第七预设阈值，且闪光帧的帧数大于第八预设阈值的情况下，确定闪光灯出现故障。
可选地，在本实施例中，通过偏差值的判断以及异常帧的判断，可以准确的确定出故障灯是否出现故障。
在一个可选的实施例中，基于第五偏差、第六偏差以及第七偏差确定闪光灯是否出现故障，包括：
S1，在第五偏差大于第五预设阈值、第六偏差大于第六预设阈值、以及第七偏差大于第六预设阈值的情况下，确定闪光灯未出现故障。
在一个可选的实施例中，在确定获取的图像帧是闪光帧的情况下，确定闪光帧的颜色分量和颜色通道的矫正参数之前，方法还包括：
S1，在确定图像帧所处的环境是夜晚环境的情况下，对闪光灯是否出现故障进行判断。
可选地，在本实施例中，在夜晚场景下需要闪光灯辅助拍摄。
在一个可选的实施例中，方法还包括：
S1，在确定获取的图像帧是非闪光帧的情况下，利用白平衡AWB算法计算非闪光帧的G通道的颜色分量和非闪光帧的R通道的矫正参数Rgain和B通道的矫正参数Bgain；
S2，将G通道的颜色分量、Rgain以及Bgain进行滤波，得到第二目标AVG_G、第二目标AVG_Rgain以及第二目标AVG_Bgain，以确定闪光灯未出现故障。
在一个可选的实施例中，在确定获取的图像帧是闪光帧的情况下，确定闪光帧的颜色分量和颜色通道的矫正参数之前，方法还包括：
S1，在确定闪光帧是夜晚环境下的第一帧闪光帧的情况下，将闪光灯的参数设置为初始状态。
可选地，在本实施例中，闪光帧是夜晚环境下的第一帧闪光帧的情况下，将AWB、AWB2运算参数、各个计数器和闪光灯返回状态均初始化。
下面结合具体实施例对本发明进行详细说明：
本实施例提出一种闪光灯故障检测方法以及对应的白平衡调整方法，在相机配套多个闪光灯时，能够检测出某个闪光灯色温衰减和亮度降低的故障，更能保证其他闪光灯未故障对应车道的效果和车身颜色等算法指标。
如图3所示，包括以下步骤：
S301：获取当前帧的统计信息和帧标记，可选地，当前帧可以划分n*m分块，统计信息包括这些分块区域的G、R、B、Y的均值，帧标记包括0和1，0表示非闪光帧，1表示闪光帧；
S302：判断当前是否夜晚模式，若是，则进入S303；否，则结束；
S303：根据获取的帧标记，判断当前帧是否为闪光帧(帧标记为1，即为闪光帧)，若是，然后进入S304；否，则送入AWB2计算(S323)，将当前帧G分量(RAW上统计信息包括R G BY分量，这里指采用G分量)和计算出的Rgain(Rgain是白平衡计算结果，Rgain可以是G/R)和Bgain(Bgain白平衡计算结果，Bgain可以是G/B)送入滑动滤波器2(该滤波器用于求平均值)(只有非闪光帧送入)，得到AVG_G_2、AVG_Rgain_2、AVG_Bgain_2(时域的N帧非闪光帧的G分量、Rgain和Bgain的均值)(S324)，然后结束；
S305：判断当前帧是否进入夜晚模式第一帧闪光帧，若是(S315)，则AWB、AWB2运算参数、各个计数器和闪光灯返回状态均初始化(中间暂存参数全部清0)(S316)，跳到S317；否，则不处理直接进入S306；
S304：闪光帧帧数m1加1；
S306：将当前闪光帧统计信息送入AWB计算，得到当前帧的G分量、Rgain和Bgain，进入S307；
S307：判断当前帧的G和AVG_G(AVG_G是S310里面计算出的结果)的偏差是否小于阈值T1；
S308：Rgain和AVG_Rgain(Rgain是S306里面计算出的结果，AVG_Rgain是S310里面计算出的结果)的偏差是否小于T2；
S309：Bgain和AVG_Bgain(Bgain是S306里面计算出的结果，AVG_Bgain是S310里面计算出的结果)的偏差是否小于T2；若均为是，则进入S310；若至少一个为否，则异常帧帧数m2+1(S320)，判断m2/m1是否大于阈值T3，且m1大于阈值T4(S321)，若均为是，则返回状态：闪光灯故障，结束(S322)；若至少一个为否，直接结束；
S310：将当前帧G分量和计算出的Rgain和Bgain送入滑动滤波器1(滤波的作用是求平均值，即N帧闪光帧的G、Rgian、Bgain的平均值)(只有闪光帧送入)，得到AVG_G、AVG_Rgain、AVG_Bgain，将滑动滤波后的AVG_Rgain和AVG_Bgain配置到isp(Image SignalProcessor，图像处理，作用是对前端图像传感器输出的信号做后期处理)，进入S311；
S312：判断AVG_G和AVG_G_2(S324计算得到)的偏差是否大于阈值T5；
S313：AVG_Rgain和AVG_Rgain_2(S324计算得到)的偏差是否大于T6；
S314：AVG_Bgain和AVG_Bgain_2(S324计算得到)的偏差是否大于T6，若均为是，则结束；
S322：若至少一个为否，则异常帧帧数m3+1(S318)，判断m3m1是否大于阈值T7，且m1大于阈值T8(S319)，若均为是，则返回状态：闪光灯故障，结束；若至少一个为否，直接结束。
综上所述，闪光帧与闪光帧之间时域上的参考对比，用于检测多个闪光灯之间的差异导致的故障；闪光灯下白平衡调整特殊策略--检测到当前闪光帧为故障异常帧后，丢弃当前帧统计信息，防止其对于正常闪光帧AWB计算结果的干扰；闪光帧与非闪光帧调用同一个AWB算法，但中间变量和结构使用不同内存，防止其互相干扰；闪光帧与非闪光帧最终结果，用于第二层故障检测，检测闪光帧与非闪光帧之间的差异；通过白平衡增益的维度，来判断闪光灯是否故障，且该维度可用于检测闪光灯色温的衰减，特别是检测多个闪光灯之间色温的差异。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
在本实施例中还提供了一种闪光灯故障的确定装置，该装置用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
图4是根据本发明实施例的闪光灯故障的确定装置的结构框图，如图4所示，该装置包括：
第一确定模块42，用于在确定获取的图像帧是闪光帧的情况下，确定上述闪光帧的颜色分量和颜色通道的矫正参数，其中，上述闪光帧是利用闪光灯获取的图像帧；
第二确定模块44，用于确定上述颜色分量与预设颜色分量之间的第一偏差，以及上述矫正参数与上述预设矫正参数之间的第二偏差；
第三确定模块46，用于基于上述第一偏差和上述第二偏差确定上述闪光灯是否出现故障。
可选地，上述装置还包括：
第一获取模块，用于在确定获取的图像帧是闪光帧的情况下，确定上述闪光帧的颜色分量和颜色通道的矫正参数之前，获取上述图像帧的帧标记；
第四确定模块，用于基于上述帧标记确定上述图像帧是闪光帧。
可选地，上述第一确定模块，包括：
第一计算单元，用于利用白平衡AWB算法计算上述闪光帧的G通道的颜色分量和上述闪光帧的R通道的矫正参数Rgain和B通道的矫正参数Bgain。
可选地，上述第三确定模块，包括：
第一确定单元，用于在上述颜色分量中的G通道的颜色分量与第一AVG_G之间的第一偏差大于或等于上述第一预设阈值，或者，上述矫正参数中的Rgain与第一AVG_Rgain之间的第三偏差大于或等于上述第二预设阈值，或者，上述矫正参数中的Bgain与第一AVG_Bgain之间的第四偏差大于或等于上述第二预设阈值的情况下，确定上述闪光帧是异常帧，其中，上述第三偏差和上述第四偏差包括在上述第二偏差中，第一AVG用于表示所述G通道的颜色分量的平均值，第一AVG_Rgain用于表示N帧闪光帧的Rgain的平均值，第一AVG_Bgain用于表示N帧闪光帧的Bgain的平均值，N是大于1的自然数；
第二确定单元，用于在上述异常帧的帧数与上述闪光帧的帧数的比值大于第三预设阈值，且上述闪光帧的帧数大于第四预设阈值的情况下，确定上述闪光灯出现故障。
可选地，上述第三确定模块，包括：
第三确定单元，用于在上述颜色分量中的G通道的颜色分量与第一AVG_G之间的第一偏差小于上述第一预设阈值、上述矫正参数中的Rgain与第一AVG_Rgain之间的第三偏差小于上述第二预设阈值、且上述矫正参数中的Bgain与第一AVG_Bgain之间的第四偏差小于上述第二预设阈值的情况下，将上述G通道的颜色分量、上述Rgain以及上述Bgain进行滤波，得到第一目标AVG_G、第一目标AVG_Rgain以及第一目标AVG_Bgain，其中，上述第三偏差和上述第四偏差包括在上述第二偏差中，第一AVG用于表示所述G通道的颜色分量的平均值，第一AVG_Rgain用于表示N帧闪光帧的Rgain的平均值，第一AVG_Bgain用于表示N帧闪光帧的Bgain的平均值，N是大于1的自然数；
第四确定单元，用于确定上述第一目标AVG_G与第二AVG_G之间的第五偏差、上述第一目标AVG_Rgain与第二AVG_Rgain之间的第六偏差、以及上述第一目标AVG_Bgain与第二AVG_Bgain之间的第七偏差，其中，第二AVG_G、第二AVG_Rgain以及第二AVG_Bgain均是基于非闪光帧确定的；
第五确定单元，用于基于上述第五偏差、第六偏差以及第七偏差确定上述闪光灯是否出现故障。
可选地，上述第五确定单元，包括：
第一确定子单元，用于在第五偏差小于或等于第五预设阈值，或者，上述第六偏差小于或等于第六预设阈值，或者，上述第七偏差小于或等于上述第六预设阈值的情况下，确定上述闪光帧是异常帧；
第二确定子单元，用于在上述异常帧的帧数与上述闪光帧的帧数的比值大于第七预设阈值，且上述闪光帧的帧数大于第八预设阈值的情况下，确定上述闪光灯出现故障。
可选地，上述第五确定单元，包括：
第三确定子单元，用于在上述第五偏差大于第五预设阈值、上述第六偏差大于第六预设阈值、以及上述第七偏差大于上述第六预设阈值的情况下，确定上述闪光灯未出现故障。
可选地，上述装置还包括：
第一判断模块，用于在确定获取的图像帧是闪光帧的情况下，确定上述闪光帧的颜色分量和颜色通道的矫正参数之前，在确定上述图像帧所处的环境是夜晚环境的情况下，对上述闪光灯是否出现故障进行判断。
可选地，上述装置还包括：
第二计算模块，用于在确定获取的图像帧是非闪光帧的情况下，利用白平衡AWB算法计算上述非闪光帧的G通道的颜色分量和上述非闪光帧的R通道的矫正参数Rgain和B通道的矫正参数Bgain；
第五确定模块，用于将上述G通道的颜色分量、上述Rgain以及上述Bgain进行滤波，得到第二目标AVG_G、第二目标AVG_Rgain以及第二目标AVG_Bgain，以确定上述闪光灯未出现故障。
可选地，上述装置还包括：
设置模块，用于在确定获取的图像帧是闪光帧的情况下，确定上述闪光帧的颜色分量和颜色通道的矫正参数之前，在确定上述闪光帧是夜晚环境下的第一帧闪光帧的情况下，将上述闪光灯的参数设置为初始状态。
需要说明的是，上述各个模块是可以通过软件或硬件来实现的，对于后者，可以通过以下方式实现，但不限于此：上述模块均位于同一处理器中；或者，上述各个模块以任意组合的形式分别位于不同的处理器中。
本发明的实施例还提供了一种存储介质，该存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
可选地，在本实施例中，上述存储介质可以被设置为存储用于执行以下步骤的计算机程序：
S1，在确定获取的图像帧是闪光帧的情况下，确定所述闪光帧的颜色分量和颜色通道的矫正参数，其中，所述闪光帧是利用闪光灯获取的图像帧；
S2，确定所述颜色分量与预设颜色分量之间的第一偏差，以及所述矫正参数与所述预设矫正参数之间的第二偏差；
S3，基于所述第一偏差和所述第二偏差确定所述闪光灯是否出现故障。
可选地，在本实施例中，上述存储介质可以包括但不限于：U盘、只读存储器(Read-Only Memory，简称为ROM)、随机存取存储器(Random Access Memory，简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。
本发明的实施例还提供了一种电子装置，包括存储器和处理器，该存储器中存储有计算机程序，该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
可选地，上述电子装置还可以包括传输设备以及输入输出设备，其中，该传输设备和上述处理器连接，该输入输出设备和上述处理器连接。
可选地，在本实施例中，上述处理器可以被设置为通过计算机程序执行以下步骤：
S1，在确定获取的图像帧是闪光帧的情况下，确定所述闪光帧的颜色分量和颜色通道的矫正参数，其中，所述闪光帧是利用闪光灯获取的图像帧；
S2，确定所述颜色分量与预设颜色分量之间的第一偏差，以及所述矫正参数与所述预设矫正参数之间的第二偏差；
S3，基于所述第一偏差和所述第二偏差确定所述闪光灯是否出现故障。
可选地，本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例，本实施例在此不再赘述。
显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (13)

1.一种闪光灯故障的确定方法，其特征在于，包括：
在确定获取的图像帧是闪光帧的情况下，确定所述闪光帧的颜色分量和颜色通道的矫正参数，其中，所述闪光帧是利用闪光灯获取的图像帧；
确定所述颜色分量与预设颜色分量之间的第一偏差，以及所述矫正参数与所述预设矫正参数之间的第二偏差；
基于所述第一偏差和所述第二偏差确定所述闪光灯是否出现故障。
2.根据权利要求1所述的方法，其特征在于，在确定获取的图像帧是闪光帧的情况下，确定所述闪光帧的颜色分量和颜色通道的矫正参数之前，所述方法还包括：
获取所述图像帧的帧标记；
基于所述帧标记确定所述图像帧是闪光帧。
3.根据权利要求1所述的方法，其特征在于，在确定获取的图像帧是闪光帧的情况下，确定所述闪光帧的颜色分量和颜色通道的矫正参数，包括：
利用白平衡AWB算法计算所述闪光帧的G通道的颜色分量和所述闪光帧的R通道的矫正参数Rgain和B通道的矫正参数Bgain。
4.根据权利要求1所述的方法，其特征在于，基于所述第一偏差和所述第二偏差确定所述闪光灯是否出现故障，包括：
在所述颜色分量中的G通道的颜色分量与第一AVG_G之间的第一偏差大于或等于所述第一预设阈值，或者，所述矫正参数中的Rgain与第一AVG_Rgain之间的第三偏差大于或等于所述第二预设阈值，或者，所述矫正参数中的Bgain与第一AVG_Bgain之间的第四偏差大于或等于所述第二预设阈值的情况下，确定所述闪光帧是异常帧，其中，所述第三偏差和所述第四偏差包括在所述第二偏差中，所述第一AVG用于表示所述G通道的颜色分量的平均值，所述第一AVG_Rgain用于表示N帧闪光帧的Rgain的平均值，所述第一AVG_Bgain用于表示N帧闪光帧的Bgain的平均值，所述N是大于1的自然数；
在所述异常帧的帧数与所述闪光帧的帧数的比值大于第三预设阈值，且所述闪光帧的帧数大于第四预设阈值的情况下，确定所述闪光灯出现故障。
5.根据权利要求1所述的方法，其特征在于，基于所述第一偏差和所述第二偏差确定所述闪光灯是否出现故障，包括：
在所述颜色分量中的G通道的颜色分量与第一AVG_G之间的第一偏差小于所述第一预设阈值、所述矫正参数中的Rgain与第一AVG_Rgain之间的第三偏差小于所述第二预设阈值、且所述矫正参数中的Bgain与第一AVG_Bgain之间的第四偏差小于所述第二预设阈值的情况下，将所述G通道的颜色分量、所述Rgain以及所述Bgain进行滤波，得到第一目标AVG_G、第一目标AVG_Rgain以及第一目标AVG_Bgain，其中，所述第三偏差和所述第四偏差包括在所述第二偏差中，所述第一AVG用于表示所述G通道的颜色分量的平均值，所述第一AVG_Rgain用于表示N帧闪光帧的Rgain的平均值，所述第一AVG_Bgain用于表示N帧闪光帧的Bgain的平均值，所述N是大于1的自然数；
确定所述第一目标AVG_G与第二AVG_G之间的第五偏差、所述第一目标AVG_Rgain与第二AVG_Rgain之间的第六偏差、以及所述第一目标AVG_Bgain与第二AVG_Bgain之间的第七偏差，其中，所述第二AVG_G、所述第二AVG_Rgain以及所述第二AVG_Bgain均是基于非闪光帧确定的；
基于所述第五偏差、第六偏差以及第七偏差确定所述闪光灯是否出现故障。
6.根据权利要求5所述的方法，其特征在于，基于所述第五偏差、第六偏差以及第七偏差确定所述闪光灯是否出现故障，包括：
在第五偏差小于或等于第五预设阈值，或者，所述第六偏差小于或等于第六预设阈值，或者，所述第七偏差小于或等于所述第六预设阈值的情况下，确定所述闪光帧是异常帧；
在所述异常帧的帧数与所述闪光帧的帧数的比值大于第七预设阈值，且所述闪光帧的帧数大于第八预设阈值的情况下，确定所述闪光灯出现故障。
7.根据权利要求5所述的方法，其特征在于，基于所述第五偏差、第六偏差以及第七偏差确定所述闪光灯是否出现故障，包括：
在所述第五偏差大于第五预设阈值、所述第六偏差大于第六预设阈值、以及所述第七偏差大于所述第六预设阈值的情况下，确定所述闪光灯未出现故障。
8.根据权利要求1所述的方法，其特征在于，在确定获取的图像帧是闪光帧的情况下，确定所述闪光帧的颜色分量和颜色通道的矫正参数之前，所述方法还包括：
在确定所述图像帧所处的环境是夜晚环境的情况下，对所述闪光灯是否出现故障进行判断。
9.根据权利要求1所述的方法，其特征在于，所述方法还包括：
在确定获取的图像帧是非闪光帧的情况下，利用白平衡AWB算法计算所述非闪光帧的G通道的颜色分量和所述非闪光帧的R通道的矫正参数Rgain和B通道的矫正参数Bgain；
将所述G通道的颜色分量、所述Rgain以及所述Bgain进行滤波，得到第二目标AVG_G、第二目标AVG_Rgain以及第二目标AVG_Bgain，以确定所述闪光灯未出现故障。
10.根据权利要求1所述的方法，其特征在于，在确定获取的图像帧是闪光帧的情况下，确定所述闪光帧的颜色分量和颜色通道的矫正参数之前，所述方法还包括：
在确定所述闪光帧是夜晚环境下的第一帧闪光帧的情况下，将所述闪光灯的参数设置为初始状态。
11.一种闪光灯故障的确定装置，其特征在于，包括：
第一确定模块，用于在确定获取的图像帧是闪光帧的情况下，确定所述闪光帧的颜色分量和颜色通道的矫正参数，其中，所述闪光帧是利用闪光灯获取的图像帧；
第二确定模块，用于确定所述颜色分量与预设颜色分量之间的第一偏差，以及所述矫正参数与所述预设矫正参数之间的第二偏差；
第三确定模块，用于基于所述第一偏差和所述第二偏差确定所述闪光灯是否出现故障。
12.一种存储介质，其特征在于，所述存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行所述权利要求1至10任一项中所述的方法。
13.一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行所述权利要求1至10任一项中所述的方法。
CN202010270474.3A 2020-04-08 2020-04-08 闪光灯故障的确定方法及装置、存储介质、电子装置 Active CN111489340B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010270474.3A CN111489340B (zh) 2020-04-08 2020-04-08 闪光灯故障的确定方法及装置、存储介质、电子装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010270474.3A CN111489340B (zh) 2020-04-08 2020-04-08 闪光灯故障的确定方法及装置、存储介质、电子装置

Publications (2)

Publication Number Publication Date
CN111489340A true CN111489340A (zh) 2020-08-04
CN111489340B CN111489340B (zh) 2023-06-13

Family

ID=71810915

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010270474.3A Active CN111489340B (zh) 2020-04-08 2020-04-08 闪光灯故障的确定方法及装置、存储介质、电子装置

Country Status (1)

Country Link
CN (1) CN111489340B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112101586A (zh) * 2020-08-19 2020-12-18 江苏中州科技有限公司 交通监控摄像头补光灯运维管理系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009260565A (ja) * 2008-04-15 2009-11-05 Canon Inc 撮像装置及びその制御方法、並びに、プログラム
US20100284612A1 (en) * 2008-01-17 2010-11-11 Koninklijke Philips Electronics N.V. Flash detection
CN104582209A (zh) * 2013-10-29 2015-04-29 杭州海康威视数字技术股份有限公司 补光灯故障检测方法及其装置
CN105828059A (zh) * 2016-05-12 2016-08-03 浙江宇视科技有限公司 一种抓拍帧的白平衡参数估计方法及装置
CN107743203A (zh) * 2017-10-25 2018-02-27 深圳市金立通信设备有限公司 一种参数调整方法、终端及计算机可读存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100284612A1 (en) * 2008-01-17 2010-11-11 Koninklijke Philips Electronics N.V. Flash detection
JP2009260565A (ja) * 2008-04-15 2009-11-05 Canon Inc 撮像装置及びその制御方法、並びに、プログラム
CN104582209A (zh) * 2013-10-29 2015-04-29 杭州海康威视数字技术股份有限公司 补光灯故障检测方法及其装置
CN105828059A (zh) * 2016-05-12 2016-08-03 浙江宇视科技有限公司 一种抓拍帧的白平衡参数估计方法及装置
CN107743203A (zh) * 2017-10-25 2018-02-27 深圳市金立通信设备有限公司 一种参数调整方法、终端及计算机可读存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112101586A (zh) * 2020-08-19 2020-12-18 江苏中州科技有限公司 交通监控摄像头补光灯运维管理系统

Also Published As

Publication number Publication date
CN111489340B (zh) 2023-06-13

Similar Documents

Publication Publication Date Title
CN110537187B (zh) 一种拓扑处理方法和装置以及系统
CN110225257B (zh) 日夜模式切换方法及装置、摄像装置和存储介质
CN113038084B (zh) 状态识别方法、装置及系统
CN111770285A (zh) 一种曝光亮度控制方法、装置、电子设备和存储介质
CN111310727B (zh) 对象检测方法及装置、存储介质、电子装置
CN111489340B (zh) 闪光灯故障的确定方法及装置、存储介质、电子装置
CN112995515B (zh) 数据处理方法及装置、存储介质、电子装置
CN110751607A (zh) 一种肤色的校正方法、装置、存储介质以及电子装置
CN111340016A (zh) 图像曝光方法和装置、存储介质及电子装置
CN111263078B (zh) 摄像模式的确定方法、装置、存储介质及电子装置
CN110855947B (zh) 一种图像抓拍处理方法及装置
CN111833341A (zh) 确定图像中条纹噪声的方法及装置
CN114245010B (zh) 图像的调整方法、装置、存储介质及电子装置
CN111899187A (zh) 场景信息的处理方法、装置、存储介质及电子装置
CN111698766B (zh) 智能组网方法、装置和可读存储介质
CN111510636B (zh) 光亮度评价值的获取方法、装置及计算机存储介质
CN112906791A (zh) 事件的匹配方法、装置、存储介质以及电子装置
CN113596426B (zh) 图像的白平衡值的确定方法及装置、存储介质、电子装置
CN112235925A (zh) 目视助航设备状态预警方法及相关装置
CN105828059A (zh) 一种抓拍帧的白平衡参数估计方法及装置
CN112817108B (zh) 一种滤光片间切换检测方法、装置、存储介质及电子装置
CN111432136B (zh) 透镜灯板的电流值调节方法及装置
CN112633137A (zh) 信号灯状态修正方法、装置及计算机可读存储介质
CN115333616B (zh) 光纤错连的检测方法、装置、存储介质及电子装置
CN115311217B (zh) 相机镜头遮挡的监测方法、装置、系统及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant