CN111741290B - 图像频闪检测方法及装置、存储介质、终端 - Google Patents
图像频闪检测方法及装置、存储介质、终端 Download PDFInfo
- Publication number
- CN111741290B CN111741290B CN202010337093.2A CN202010337093A CN111741290B CN 111741290 B CN111741290 B CN 111741290B CN 202010337093 A CN202010337093 A CN 202010337093A CN 111741290 B CN111741290 B CN 111741290B
- Authority
- CN
- China
- Prior art keywords
- image
- value
- strobe
- luminance
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 50
- 239000013598 vector Substances 0.000 claims abstract description 200
- 240000007320 Pinus strobus Species 0.000 claims abstract description 169
- 241000023320 Luma <angiosperm> Species 0.000 claims description 47
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 claims description 47
- 239000011159 matrix material Substances 0.000 claims description 43
- 230000007704 transition Effects 0.000 claims description 24
- 238000013139 quantization Methods 0.000 claims description 19
- 238000001914 filtration Methods 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 12
- 230000006870 function Effects 0.000 claims description 6
- 238000005070 sampling Methods 0.000 claims description 4
- 238000000605 extraction Methods 0.000 claims description 2
- 230000003068 static effect Effects 0.000 abstract description 15
- 238000000034 method Methods 0.000 abstract description 6
- 238000010586 diagram Methods 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 229910044991 metal oxide Inorganic materials 0.000 description 2
- 150000004706 metal oxides Chemical class 0.000 description 2
- 238000005096 rolling process Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 239000003086 colorant Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000016776 visual perception Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
一种图像频闪检测方法及装置、存储介质、终端，所述方法包括：提供待检测的图像；提取所述图像的亮度列向量，所述亮度列向量中的每个亮度向量用于指示图像中每行最小单元的亮度值；基于所述图像的亮度列向量，确定频闪统计值，所述频闪统计值用于指示每个所述亮度向量的频闪次数；根据所述频闪统计值，确定所述图像是否存在频闪；其中，如果所述图像存在频闪，则满足图像频闪为静止频闪。本发明可以针对静止频闪情形进行有效检测，填补现有技术中的空白。
Description
技术领域
本发明涉及图像检测技术领域，尤其涉及一种图像频闪检测方法及装置、存储介质、终端。
背景技术
由于交流电源的能量随着时间产生周期性变化，当光源工作在此类电源下时，若拍摄设备的曝光信息与光源频率不匹配，则拍摄图像时存在因为曝光过程中的光强差异产生的明暗变化。并且因互补金属氧化物半导体(Complementary Metal OxideSemiconductor，CMOS)元件的曝光策略为逐行曝光且行与行之间存在时间差导致明暗变化发生滚动现象，这是拍摄图像中出现频闪的根本成因。
当前常用的图像频闪检测方法的处理对象为拍摄过程中相邻两帧的差值图像，这样可以在有效去除图像背景信息的基础上较好地保留图像中的频闪特征。
然而，上述图像频闪检测方法并不适用于静止频闪情形。
亟需一种图像频闪检测方法，针对静止频闪情形进行有效检测，填补现有技术中的空白。
发明内容
本发明解决的技术问题是提供一种图像频闪检测方法及装置、存储介质、终端，可以针对静止频闪情形进行有效检测，填补现有技术中的空白。
为解决上述技术问题，本发明实施例提供一种图像频闪检测方法，包括以下步骤：提供待检测的图像；提取所述图像的亮度列向量，所述亮度列向量中的每个亮度向量用于指示图像中每行最小单元的亮度值；基于所述图像的亮度列向量，确定频闪统计值，所述频闪统计值用于指示每个所述亮度向量的频闪次数；根据所述频闪统计值，确定所述图像是否存在频闪；其中，如果所述图像存在频闪，则满足图像频闪为静止频闪。
可选的，所述图像为拜耳阵列图像；提取所述图像的亮度列向量包括：提取所述图像中每个最小单元的R值、Gr值、Gb值以及B值；根据所述R值、Gr值、Gb值以及B值确定所述图像的亮度向量矩阵；基于所述亮度向量矩阵，确定所述图像的亮度列向量。
可选的，采用下述公式，根据所述R值、Gr值、Gb值以及B值确定所述图像的亮度向量矩阵：
Y＝(77×R+75×(Gr+Gb)+29×B)＞＞10
其中，Y用于表示亮度向量矩阵，R用于表示R值矩阵，Gr用于表示Gr值矩阵，Gb用于表示Gb值矩阵，B用于表示B值矩阵。
可选的，基于所述亮度向量矩阵，确定所述图像的亮度列向量包括：对所述图像进行下采样，以得到预设尺寸的采样后图像，所述预设尺寸包含预设行数以及预设列数；对所述采样后图像的每行亮度向量进行求和运算，以生成所述预设列数的亮度列向量。
可选的，采用下述公式，对所述采样后图像的每行亮度向量进行求和运算：
其中，Y(p，q)用于表示所述采样后图像的第p行第q列亮度向量，Y_acc(p)用于表示采样后图像的第p行亮度向量，width用于表示采样后图像中每行最小单元中最小单元的个数。
可选的，基于所述图像的亮度列向量，确定频闪统计值包括：基于所述图像的亮度列向量，确定帧内差分亮度列向量diff_frozen；根据所述帧内差分亮度列向量diff_frozen，确定标志位信息；根据所述标志位信息，确定所述频闪统计值。
可选的，采用下述公式，基于所述图像的亮度列向量，确定帧内差分亮度列向量diff_frozen：
其中，diff_frozen(i)用于表示所述帧内差分亮度列向量的第i个亮度向量，frame_data(i)用于表示所述图像的亮度列向量中第i个亮度向量，frame_data(i+1)用于表示所述图像的亮度列向量中第i+1个亮度向量。
可选的，根据所述帧内差分亮度列向量diff_frozen，确定标志位信息包括：根据所述帧内差分亮度列向量diff_frozen，确定滤波差分亮度列向量diff_frozen_ft以及载波；根据所述滤波差分亮度列向量diff_frozen_ft以及载波，确定所述标志位信息。
可选的，根据所述帧内差分亮度列向量diff_frozen，确定滤波差分亮度列向量diff_frozen_ft以及载波包括：
其中，j为正整数，Diff_frozen_ft(j)用于表示第j个滤波差分亮度列向量，carrier用于表示所述载波，filt_len用于表示滤波的窗口长度，Diff_frozen(i+j)用于表示所述帧内差分亮度列向量的第i+j个亮度向量，i用于表示第i个亮度向量，n用于表示滤波差分亮度列向量的数量。
可选的，根据所述滤波差分亮度列向量diff_frozen_ft以及载波，确定所述标志位信息包括：
其中，diff_frozen_sign(i)用于表示第i个亮度向量的标志位信息，diff_frozen_ft(i)用于表示所述滤波差分亮度列向量的第i个亮度向量。
可选的，根据所述标志位信息，确定所述频闪统计值包括：根据所述标志位信息，确定跃变点的坐标集合diff_2nd_frozen(i)，所述跃变点包括所述标志位信息从1跃变至0的点，以及从0跃变至1的点；依次以每个跃变点为原点，采用预设搜索窗口组中的每个预设搜索窗口，在标志位信息列向量diff_frozen_sign的各个亮度向量中分别向第一方向和第二方向搜索取值为0以及取值为1的次数，分别记为第一方向取0次数、第二方向取0次数、第一方向取1次数以及第二方向取0次数；根据自每个跃变点以及每个预设搜索窗口得到的所述第一方向取0次数、第二方向取0次数、第一方向取1次数以及第二方向取0次数，确定所述频闪统计值；其中，所述第一方向和第二方向不同，且所述第一方向和第二方向选自所述亮度列向量中的亮度向量的序号增加或减少的方向。
可选的，根据自每个跃变点以及每个预设搜索窗口得到的所述第一方向取0次数、第二方向取0次数、第一方向取1次数以及第二方向取0次数，确定所述频闪统计值包括：针对每个滤波跃变点的每个预设搜索窗口，如果|pos_l-peak_dist|和|neg_r-peak_dist|同时≤peak_dist/x或者|neg_l-peak_dist|和|pos_r-peak_dist|同时≤peak_dist/x，确定频闪统计值flicker_frozen_val的计数增加预设的频闪权重值；遍历各个滤波跃变点的各个预设搜索窗口，直到遍历结束或者统计后的频闪统计值flicker_frozen_val达到预设上限值；其中，pos_l用于表示第一方向取1次数，pos_r用于表示第二方向取1次数，neg_l用于表示第一方向取0次数，neg_r用于表示第二方向取0次数，peak_dist用于表示每个预设搜索窗口的窗口长度，x用于表示预设整数值。
可选的，所述频闪统计值的初始值为0，所述预设的频闪权重值为1。
可选的，根据所述频闪统计值，确定所述图像是否存在频闪包括：根据所述频闪统计值以及所述频闪统计值的权重值，采用下述公式，确定频闪特征量化值Flk_frozen_val：
Flk_frozen_val
＝flicker_frozen_val
×WEIGHT_INV(max(max_zero，max_one)，thrd_f)/4
其中，
至少根据所述频闪特征量化值Flk_frozen_val，确定所述图像是否存在频闪；其中，Flk_frozen_val用于表示频闪特征量化值，thrd_f用于表示预设的频闪阈值，WEIGHT_INV(x，y)函数用于指示所述频闪统计值的权重值，x、y用于表示所述WEIGHT_INV(x，y)函数的输入变量，max_one用于表示所述标志位信息中最大连续为1的个数；所述频闪特征量化值越大，所述图像存在频闪的概率越大。
可选的，至少根据所述频闪特征量化值Flk_frozen_val，确定所述图像是否存在频闪包括：根据所述频闪特征量化值Flk_frozen_val，采用下述公式，确定长序列频闪特征值Flk_frozen_v_val：
根据所述长序列频闪特征值Flk_frozen_v_val大于预设长序列频闪特征阈值，确定所述图像存在频闪；其中，Flk_frozen_v_val用于指示长序列频闪特征值，thrd_f_v用于表示预设频闪阈值。
为解决上述技术问题，本发明实施例提供一种图像频闪检测装置，包括：提供模块，用于提供待检测的图像；提取模块，用于提取所述图像的亮度列向量，所述亮度列向量中的每个亮度向量用于指示图像中每行最小单元的亮度值；频闪统计值确定模块，用于基于所述图像的亮度列向量，确定频闪统计值，所述频闪统计值用于指示每个所述亮度向量的频闪次数；频闪确定模块，用于根据所述频闪统计值，确定所述图像是否存在频闪；其中，如果所述图像存在频闪，则满足图像频闪为静止频闪。
为解决上述技术问题，本发明实施例提供一种存储介质，其上存储有计算机程序，所述计算机程序被处理器运行时执行上述图像频闪检测方法的步骤。
为解决上述技术问题，本发明实施例提供一种终端，包括存储器和处理器，所述存储器上存储有能够在所述处理器上运行的计算机程序，所述处理器运行所述计算机程序时执行上述图像频闪检测方法的步骤
与现有技术相比，本发明实施例的技术方案具有以下有益效果：
在本发明实施例中，通过设置提取图像的亮度列向量，基于所述图像的亮度列向量，确定频闪统计值，并根据所述频闪统计值，确定所述图像是否存在频闪，可以针对静止频闪情形进行有效检测，填补现有技术中的空白。
进一步，在本发明实施例中，根据R值矩阵、Gr值矩阵、Gb值矩阵以及B值矩阵确定亮度向量矩阵，进而确定所述图像的亮度列向量，可以提高确定所述图像的亮度列向量的准确性。
进一步，基于所述图像的亮度列向量，确定帧内差分亮度列向量diff_frozen，然后根据所述帧内差分亮度列向量diff_frozen，确定标志位信息，由于静止频闪情况无论采用多大的采样步长输入的两帧信息做差后，有效信号都会所剩无几，采用本发明实施例的方案，可以在单帧统计信息内进行处理，从而提高确定频闪检测的有效性和准确性。
进一步，通过设置确定滤波差分亮度列向量diff_frozen_ft以及载波，可以通过滤波，消除波形噪声，从而进一步提高确定频闪检测的准确性。
进一步，通过确定频闪统计值flicker_val的计数增加预设的频闪权重值；遍历各个滤波跃变点的各个预设搜索窗口，直到遍历结束或者统计后的频闪统计值flicker_val达到预设上限值，可以在预设条件成立时才增加预设值，以有效控制权重值达到上限，从而进一步提高确定频闪检测的准确性。
进一步，确定长序列频闪特征值Flk_frozen_v_val，进而基于长序列频闪特征值Flk_frozen_v_val大于预设长序列频闪特征阈值，确定存在频闪，可以进一步采用长度更长的亮度列向量对频闪进行检测，进一步有效地提高检测的准确性。
附图说明
图1是本发明实施例中一种图像频闪检测方法的流程图；
图2是本发明实施例中一种拜耳阵列图像的示意图；
图3是图1中步骤S13的一种具体实施方式的流程图；
图4是图3中步骤S33的一种具体实施方式的流程图；
图5是本发明实施例中一种图像频闪检测装置的结构示意图。
具体实施方式
随着消费电子和工业电子设备的迅速迭代，摄像头成为了很多嵌入式设备标准配置。当前主流嵌入式摄像设备的成像元件是互补金属氧化物半导体(CMOS)和卷帘式快门的组合，此类元件工作在交流电源照明装置的条件下很容易受到频闪的影响，导致预览图像质量急剧降低。
如前所述，拍摄图像中会出现频闪，当前常用的图像频闪检测方法的处理对象为拍摄过程中相邻两帧的差值图像，这样可以在有效去除图像背景信息的基础上较好地保留图像中的频闪特征。然而，上述图像频闪检测方法并不适用于静止频闪情形。
本发明的发明人经过研究发现，现有技术中常用的图像频闪检测方法仅对理想的频闪现象才能保证较为理想的检测正确率，这里对理想频闪的定义是指预览图像中明暗区间清晰可见、条数介于3～5条且明暗条纹在以适宜的速率滚动。但是由于成像sensor的性质差异(是否binning输出/分辨率尺寸等)，不同型号的摄像设备出现的频闪现象千差万别，尤其是会出现静止的频闪现象。在视觉感知中已经没有“闪烁”的迹象，而是纯粹的图像背景信息和明暗条纹的叠加。遇到此类频闪现象常用的图像频闪检测方法的表现将会不再符合预期。
具体地，对于静止频闪情形，由于相邻两帧统计信息间的差异过小，直接将相邻两帧统计信息相减的处理方法将不再适用。其中，静止频闪情形可以理解为满足图像频闪的滚动速度小于预设速度的频闪现象。
在本发明实施例中，通过设置提取图像的亮度列向量，基于所述图像的亮度列向量，确定频闪统计值，并根据所述频闪统计值，确定所述图像是否存在频闪，可以针对静止频闪情形进行有效检测，填补现有技术中的空白。
为使本发明的上述目的、特征和有益效果能够更为明显易懂，下面结合附图对本发明的具体实施例做详细的说明。
参照图1，图1是本发明实施例中一种图像频闪检测方法的流程图。所述图像频闪检测方法可以包括步骤S11至步骤S14：
步骤S11：提供待检测的图像；
步骤S12：提取所述图像的亮度列向量，所述亮度列向量中的每个亮度向量用于指示图像中每行最小单元的亮度值；
步骤S13：基于所述图像的亮度列向量，确定频闪统计值，所述频闪统计值用于指示每个所述亮度向量的频闪次数；
步骤S14：根据所述频闪统计值，确定所述图像是否存在频闪。
其中，如果所述图像存在频闪，则满足图像频闪为静止频闪。
在步骤S11的具体实施中，提供待检测的图像。
进一步地，所述图像可以为拜耳阵列图像。
参照图2，图2是本发明实施例中一种拜耳阵列图像的示意图。所述拜耳阵列图像可以包括多个最小单元(Cell)，例如为图2中圆圈所圈的区域。
其中，每个Cell可以包括蓝色像素(B)、绿蓝像素(Gb)、绿红像素(Gr)以及红色像素(R)，则每个Cell可以具有R值、Gr值、Gb值以及B值。
在步骤S12的具体实施中，可以提取所述图像的亮度列向量，所述亮度列向量中的每个亮度向量用于指示图像中每行最小单元的亮度值。
进一步地，提取所述图像的亮度列向量的步骤可以包括：提取所述图像中每个最小单元的R值、Gr值、Gb值以及B值；根据所述R值、Gr值、Gb值以及B值确定所述图像的亮度向量矩阵；基于所述亮度向量矩阵，确定所述图像的亮度列向量。
更进一步地，可以采用下述公式，根据所述R值、Gr值、Gb值以及B值确定每帧图像的亮度向量矩阵：
Y＝(77×R+75×(Gr+Gb)+29×B)＞＞10
其中，Y用于表示亮度向量矩阵，R用于表示R值矩阵，Gr用于表示Gr值矩阵，Gb用于表示Gb值矩阵，B用于表示B值矩阵。也即，通过R值矩阵、Gr值矩阵、Gb值矩阵和B值矩阵进行运算后再整体右移10位，可以得到亮度向量矩阵Y。
需要指出的是，通过设置右移10位(＞＞10)，可以有控制地减少亮度值的比特位数，从而降低不同的色彩对亮度值的影响，进而在后续运算中提高频闪检测的准确率。
在本发明实施例中，根据R值矩阵、Gr值矩阵、Gb值矩阵以及B值矩阵确定亮度向量矩阵，进而确定每帧图像的亮度列向量，可以提高确定每帧图像的亮度列向量的准确性。
需要指出的是，本发明的处理图像格式不局限于拜耳(Bayer)阵列图像，在各类能够统计亮度信息的数字图像域均可以应用，其中，所述数字图像域包括但不限于原始图像(RAW)域、YCrCb颜色编码(YUV)域、全彩色(RGB)域。
更进一步地，基于所述亮度向量矩阵，确定每帧图像的亮度列向量包括：对每帧图像进行下采样，以得到预设尺寸的采样后图像，所述预设尺寸包含预设行数以及预设列数；对所述采样后图像的每行亮度向量进行求和运算，以生成所述预设列数的亮度列向量。
更进一步地，可以采用下述公式，对所述采样后图像的每行亮度向量进行求和运算：
其中，Y(p，q)用于表示所述采样后图像的第p行第q列亮度向量，Y_acc(p)用于表示采样后图像的第p行亮度向量，width用于表示采样后图像中每行最小单元中最小单元的个数。
在本发明实施例的一种具体实施方式中，可以根据输入图像尺寸和预设分辨率的之比，计算得到相应的采样系数并将当前图像下采样至预设尺寸，以所述预设尺寸为640(像素)×480(像素)为例，此时将采样后图像在行方向上逐个相加，可以生成高度为480的列向量。也即在上述公式中，q的最大值为480。
在步骤S13的具体实施中，可以基于所述图像的亮度列向量，确定频闪统计值。
参照图3，图3是图1中步骤S13的一种具体实施方式的流程图。基于所述图像的亮度列向量，确定频闪统计值的步骤可以包括步骤S31至步骤S33，以下对各个步骤进行说明。
在步骤S31中，基于所述图像的亮度列向量，确定帧内差分亮度列向量diff_frozen。
进一步地，可以采用下述公式，基于所述图像的亮度列向量，确定帧内差分亮度列向量diff_frozen：
其中，diff_frozen(i)用于表示所述帧内差分亮度列向量的第i个亮度向量，frame_data(i)用于表示所述图像的亮度列向量中第i个亮度向量，frame_data(i+1)用于表示所述图像的亮度列向量中第i+1个亮度向量。
在步骤S32中，根据所述帧内差分亮度列向量diff_frozen，确定标志位信息。
进一步地，根据所述帧内差分亮度列向量diff_frozen，确定标志位信息的步骤可以包括：根据所述帧内差分亮度列向量diff_frozen，确定滤波差分亮度列向量diff_frozen_ft以及载波；根据所述滤波差分亮度列向量diff_frozen_ft以及载波，确定所述标志位信息。
更进一步地，根据所述帧内差分亮度列向量diff_frozen，确定滤波差分亮度列向量diff_frozen_ft以及载波包括：
其中，j为正整数，Diff_frozen_ft(j)用于表示第j个滤波差分亮度列向量，carrier用于表示所述载波，filt_len用于表示滤波的窗口长度，Diff_frozen(i+j)用于表示所述帧内差分亮度列向量的第i+j个亮度向量，i用于表示第i个亮度向量，n用于表示滤波差分亮度列向量的数量。
在本发明实施例中，通过设置确定滤波差分亮度列向量diff_frozen_ft以及载波，可以通过滤波，消除波形噪声，从而进一步提高确定频闪检测的准确性。
更进一步地，根据所述滤波差分亮度列向量diff_frozen_ft以及载波，确定所述标志位信息的步骤可以包括：
其中，diff_frozen_sign(i)用于表示第i个亮度向量的标志位信息，diff_frozen_ft(i)用于表示所述滤波差分亮度列向量的第i个亮度向量。
在本发明实施例中，可以基于所述图像的亮度列向量，确定帧内差分亮度列向量diff_frozen，然后根据所述帧内差分亮度列向量diff_frozen，确定标志位信息，由于静止频闪情况无论采用多大的采样步长输入的两帧信息做差后，有效信号都会所剩无几，采用本发明实施例的方案，可以在单帧统计信息内进行处理，从而提高确定频闪检测的有效性和准确性。
在步骤S33中，根据所述标志位信息，确定所述频闪统计值。
参照图4，图4是图3中步骤S33的一种具体实施方式的流程图。根据所述标志位信息，确定所述频闪统计值的步骤可以包括步骤S41至步骤S43，以下对各个步骤进行说明。
在步骤S41中，根据所述标志位信息，确定跃变点的坐标集合，所述跃变点包括所述标志位信息从1跃变至0的点，以及从0跃变至1的点。其中，所述跃变点的坐标集合用diff_2nd_frozen(i)表示。
在步骤S42中，依次以每个跃变点为原点，采用预设搜索窗口组中的每个预设搜索窗口，在标志位信息列向量的各个亮度向量中分别向第一方向和第二方向搜索取值为0以及取值为1的次数，分别记为第一方向取0次数、第二方向取0次数、第一方向取1次数以及第二方向取0次数。其中，所述标志位信息列向量用diff_frozen_sign表示。
在步骤S43中，根据自每个跃变点以及每个预设搜索窗口得到的所述第一方向取0次数、第二方向取0次数、第一方向取1次数以及第二方向取0次数，确定所述频闪统计值。
其中，所述第一方向和第二方向不同，且所述第一方向和第二方向选自所述亮度列向量中的亮度向量的序号增加或减少的方向。
具体地，通过设置仅以每个跃变点为原点，可以有效地减少计算的次数，有效地降低计算复杂度。
更进一步地，可以根据自每个跃变点以及每个预设搜索窗口得到的所述第一方向取0次数、第二方向取0次数、第一方向取1次数以及第二方向取0次数，确定所述频闪统计值包括：
针对每个滤波跃变点的每个预设搜索窗口，如果|pos_l-peak_dist|和|neg_r-peak_dist|同时≤peak_dist/x或者|neg_l-peak_dist|和|pos_r-peak_dist|同时≤peak_dist/x，确定频闪统计值flicker_frozen_val的计数增加预设的频闪权重值；遍历各个滤波跃变点的各个预设搜索窗口，直到遍历结束或者统计后的频闪统计值flicker_frozen_val达到预设上限值；其中，pos_l用于表示第一方向取1次数，pos_r用于表示第二方向取1次数，neg_l用于表示第一方向取0次数，neg_r用于表示第二方向取0次数，peak_dist用于表示每个预设搜索窗口的窗口长度，x用于表示预设整数值。
在具体实施中，每当|pos_l-peak_dist|和|neg_r-peak_dist|同时≤peak_dist/x成立，或者|neg_l-peak_dist|和|pos_r-peak_dist|同时≤peak_dist/x成立时，均在频闪统计值flicker_val的计数上加预设的频闪权重值。
作为一个非限制性的例子，可以设置x为8～12，例如x为10。还可以设置1/x为5％～15％，例如1/x为10％。
进一步地，所述频闪统计值的初始值可以为0，所述预设的频闪权重值可以为1。
在本发明实施例中，可以仅在上述条件成立时加1，从而有效地降低运算量。
在本发明实施例中，可以通过确定频闪统计值flicker_val的计数增加预设的频闪权重值；遍历各个滤波跃变点的各个预设搜索窗口，直到遍历结束或者统计后的频闪统计值flicker_val达到预设上限值，可以在预设条件成立时才增加预设值，以有效控制权重值达到上限，从而进一步提高确定频闪检测的准确性。
继续参照图1，在步骤S14的具体实施中，可以确定图像是否存在频闪。
进一步地，根据所述频闪统计值，确定所述图像是否存在频闪的步骤可以包括：根据所述频闪统计值以及所述频闪统计值的权重值，采用下述公式，确定频闪特征量化值Flk_frozen_val：
Flk_frozen_val
＝flicker_frozen_val
×WEIGHT_INV(max(max_zero，max_one)，thrd_f)/4
其中，
其中，Flk_frozen_val用于表示频闪特征量化值，thrd_f用于表示预设的频闪阈值，WEIGHT_INV(x，y)函数用于指示所述频闪统计值的权重值，x、y用于表示所述WEIGHT_INV(x，y)函数的输入变量，max_zero用于表示所述标志位信息中最大连续为0的个数，max_one用于表示所述标志位信息中最大连续为1的个数。
至少根据所述频闪特征量化值Flk_frozen_val，确定所述图像是否存在频闪；所述频闪特征量化值越大，所述图像存在频闪的概率越大。
进一步地，至少根据所述频闪特征量化值Flk_frozen_val，确定所述图像是否存在频闪的步骤可以包括：根据所述频闪特征量化值Flk_frozen_val，采用下述公式，确定长序列频闪特征值Flk_frozen_v_val：
根据所述长序列频闪特征值Flk_frozen_v_val大于预设长序列频闪特征阈值，确定所述图像存在频闪；
其中，Flk_frozen_v_val用于指示长序列频闪特征值，thrd_f_v用于表示预设频闪阈值。
在本发明实施例中，确定长序列频闪特征值Flk_frozen_v_val，进而基于长序列频闪特征值Flk_frozen_v_val大于预设长序列频闪特征阈值，确定存在频闪，可以进一步采用长度更长的亮度列向量对频闪进行检测，进一步有效地提高检测的准确性。
在本发明实施例中，通过设置提取图像的亮度列向量，基于所述图像的亮度列向量，确定频闪统计值，并根据所述频闪统计值，确定所述图像是否存在频闪，可以针对静止频闪情形进行有效检测，填补现有技术中的空白。
参照图5，图5是本发明实施例中一种图像频闪检测装置的结构示意图。所述图像频闪检测装置可以包括：
提供模块51，用于提供待检测的图像；
提取模块52，用于提取所述图像的亮度列向量，所述亮度列向量中的每个亮度向量用于指示图像中每行最小单元的亮度值；
频闪统计值确定模块53，用于基于所述图像的亮度列向量，确定频闪统计值，所述频闪统计值用于指示每个所述亮度向量的频闪次数；
频闪确定模块54，用于根据所述频闪统计值，确定所述图像是否存在频闪。其中，如果所述图像存在频闪，则满足图像频闪为静止频闪。
关于该图像频闪检测装置的原理、具体实现和有益效果请参照前文及图1至图4示出的关于图像频闪检测方法的相关描述，此处不再赘述。
本发明实施例还提供了一种存储介质，其上存储有计算机程序，所述计算机程序被处理器运行时执行上述方法的步骤。所述存储介质可以是计算机可读存储介质，例如可以包括非挥发性存储器(non-volatile)或者非瞬态(non-transitory)存储器，还可以包括光盘、机械硬盘、固态硬盘等。
本发明实施例还提供了一种终端，包括存储器和处理器，所述存储器上存储有能够在所述处理器上运行的计算机程序，所述处理器运行所述计算机程序时执行上述方法的步骤。所述终端包括但不限于手机、计算机、平板电脑等终端设备。
虽然本发明披露如上，但本发明并非限定于此。任何本领域技术人员，在不脱离本发明的精神和范围内，均可作各种更动与修改，因此本发明的保护范围应当以权利要求所限定的范围为准。
Claims (17)
1.一种图像频闪检测方法，其特征在于，包括以下步骤：
提供待检测的图像；
提取所述图像的亮度列向量，所述亮度列向量中的每个亮度向量用于指示图像中每行最小单元的亮度值；
基于所述图像的亮度列向量，确定频闪统计值，所述频闪统计值用于指示每个所述亮度向量的频闪次数；
根据所述频闪统计值，确定所述图像是否存在频闪；
其中，如果所述图像存在频闪，则满足图像频闪为静止频闪；
其中，基于所述图像的亮度列向量，确定频闪统计值包括：
基于所述图像的亮度列向量，确定帧内差分亮度列向量diff_frozen；
根据所述帧内差分亮度列向量diff_frozen，确定标志位信息；
根据所述标志位信息，确定所述频闪统计值；
其中，根据所述频闪统计值，确定所述图像是否存在频闪包括：
根据所述频闪统计值以及所述频闪统计值的权重值，确定频闪特征量化值Flk_frozen_val；
至少根据所述频闪特征量化值Flk_frozen_val，确定所述图像是否存在频闪。
2.根据权利要求1所述的图像频闪检测方法，其特征在于，所述图像为拜耳阵列图像；
提取所述图像的亮度列向量包括：
提取所述图像中每个最小单元的R值、Gr值、Gb值以及B值；
根据所述R值、Gr值、Gb值以及B值确定所述图像的亮度向量矩阵；
基于所述亮度向量矩阵，确定所述图像的亮度列向量。
3.根据权利要求2所述的图像频闪检测方法，其特征在于，采用下述公式，根据所述R值、Gr值、Gb值以及B值确定所述图像的亮度向量矩阵：
Y＝(77×R+75×(Gr+Gb)+29×B)＞＞10
其中，Y用于表示亮度向量矩阵，R用于表示R值矩阵，Gr用于表示Gr值矩阵，Gb用于表示Gb值矩阵，B用于表示B值矩阵。
4.根据权利要求2所述的图像频闪检测方法，其特征在于，基于所述亮度向量矩阵，确定所述图像的亮度列向量包括：
对所述图像进行下采样，以得到预设尺寸的采样后图像，所述预设尺寸包含预设行数以及预设列数；
对所述采样后图像的每行亮度向量进行求和运算，以生成所述预设列数的亮度列向量。
5.根据权利要求4所述的图像频闪检测方法，其特征在于，采用下述公式，对所述采样后图像的每行亮度向量进行求和运算：
其中，Y(p，q)用于表示所述采样后图像的第p行第q列亮度向量，Y_acc(p)用于表示采样后图像的第p行亮度向量，width用于表示采样后图像中每行最小单元中最小单元的个数。
6.根据权利要求1所述的图像频闪检测方法，其特征在于，采用下述公式，基于所述图像的亮度列向量，确定帧内差分亮度列向量diff_frozen：
其中，diff_frozen(i)用于表示所述帧内差分亮度列向量的第i个亮度向量，frame_data(i)用于表示所述图像的亮度列向量中第i个亮度向量，frame_data(i+1)用于表示所述图像的亮度列向量中第i+1个亮度向量；n用于表示滤波差分亮度列向量的数量。
7.根据权利要求1所述的图像频闪检测方法，其特征在于，根据所述帧内差分亮度列向量diff_frozen，确定标志位信息包括：
根据所述帧内差分亮度列向量diff_frozen，确定滤波差分亮度列向量diff_frozen_ft以及载波；
根据所述滤波差分亮度列向量diff_frozen_ft以及载波，确定所述标志位信息。
8.根据权利要求7所述的图像频闪检测方法，其特征在于，根据所述帧内差分亮度列向量diff_frozen，确定滤波差分亮度列向量diff_frozen_ft以及载波包括：
其中，j为正整数，Diff_frozen_ft(j)用于表示第j个滤波差分亮度列向量，carrier用于表示所述载波，filt_len用于表示滤波的窗口长度，Diff_frozen(i+j)用于表示所述帧内差分亮度列向量的第i+j个亮度向量，i用于表示第i个亮度向量，n用于表示滤波差分亮度列向量的数量。
9.根据权利要求7所述的图像频闪检测方法，其特征在于，根据所述滤波差分亮度列向量diff_frozen_ft以及载波，确定所述标志位信息包括：
其中，diff_frozen_sign(i)用于表示第i个亮度向量的标志位信息，diff_frozen_ft(i)用于表示所述滤波差分亮度列向量的第i个亮度向量。
10.根据权利要求1所述的图像频闪检测方法，其特征在于，根据所述标志位信息，确定所述频闪统计值包括：
根据所述标志位信息，确定跃变点的坐标集合diff_2nd_frozen(i)，所述跃变点包括所述标志位信息从1跃变至0的点，以及从0跃变至1的点；
依次以每个跃变点为原点，采用预设搜索窗口组中的每个预设搜索窗口，在标志位信息列向量diff_frozen_sign的各个亮度向量中分别向第一方向和第二方向搜索取值为0以及取值为1的次数，分别记为第一方向取0次数、第二方向取0次数、第一方向取1次数以及第二方向取0次数；
根据自每个跃变点以及每个预设搜索窗口得到的所述第一方向取0次数、第二方向取0次数、第一方向取1次数以及第二方向取0次数，确定所述频闪统计值；
其中，所述第一方向和第二方向不同，且所述第一方向和第二方向选自所述亮度列向量中的亮度向量的序号增加或减少的方向。
11.根据权利要求10所述的图像频闪检测方法，其特征在于，根据自每个跃变点以及每个预设搜索窗口得到的所述第一方向取0次数、第二方向取0次数、第一方向取1次数以及第二方向取0次数，确定所述频闪统计值包括：
针对每个滤波跃变点的每个预设搜索窗口，如果|pos_l-peak_dist|和|neg_r-peak_dist|同时≤peak_dist/x或者|neg_l-peak_dist|和|pos_r-peak_dist|同时≤peak_dist/x，确定频闪统计值flicker_frozen_val的计数增加预设的频闪权重值；
遍历各个滤波跃变点的各个预设搜索窗口，直到遍历结束或者统计后的频闪统计值flicker_frozen_val达到预设上限值；
其中，pos_l用于表示第一方向取1次数，pos_r用于表示第二方向取1次数，neg_l用于表示第一方向取0次数，neg_r用于表示第二方向取0次数，peak_dist用于表示每个预设搜索窗口的窗口长度，x用于表示预设整数值。
12.根据权利要求11所述的图像频闪检测方法，其特征在于，所述频闪统计值的初始值为0，所述预设的频闪权重值为1。
13.根据权利要求1所述的图像频闪检测方法，其特征在于，
根据所述频闪统计值以及所述频闪统计值的权重值，采用下述公式，确定频闪特征量化值Flk_frozen_val：
其中，
其中，Flk_frozen_val用于表示频闪特征量化值，thrd_f用于表示预设的频闪阈值，WEIGHT_INV(x，y)函数用于指示所述频闪统计值的权重值，x、y用于表示所述WEIGHT_INV(x，y)函数的输入变量，max_zero用于表示所述标志位信息中最大连续为0的个数，max_one用于表示所述标志位信息中最大连续为1的个数；
所述频闪特征量化值越大，所述图像存在频闪的概率越大。
14.根据权利要求13所述的图像频闪检测方法，其特征在于，
至少根据所述频闪特征量化值Flk_frozen_val，确定所述图像是否存在频闪包括：
根据所述频闪特征量化值Flk_frozen_val，采用下述公式，确定长序列频闪特征值Flk_frozen_v_val：
根据所述长序列频闪特征值Flk_frozen_v_val大于预设长序列频闪特征阈值，确定所述图像存在频闪；
其中，Flk_frozen_v_val用于指示长序列频闪特征值，thrd_f_v用于表示预设频闪阈值。
15.一种图像频闪检测装置，其特征在于，包括：
提供模块，用于提供待检测的图像；
提取模块，用于提取所述图像的亮度列向量，所述亮度列向量中的每个亮度向量用于指示图像中每行最小单元的亮度值；
频闪统计值确定模块，用于基于所述图像的亮度列向量，确定频闪统计值，所述频闪统计值用于指示每个所述亮度向量的频闪次数；
频闪确定模块，用于根据所述频闪统计值，确定所述图像是否存在频闪；
其中，如果所述图像存在频闪，则满足图像频闪为静止频闪；
其中，所述频闪统计值确定模块包括：
帧内差分亮度列向量确定子模块，用于基于所述图像的亮度列向量，确定帧内差分亮度列向量diff_frozen；
标志位信息确定子模块，用于根据所述帧内差分亮度列向量diff_frozen，确定标志位信息；
频闪统计值确定子模块，用于根据所述标志位信息，确定所述频闪统计值；
其中，所述频闪确定模块包括：
频闪特征量化值子模块，用于根据所述频闪统计值以及所述频闪统计值的权重值，确定频闪特征量化值Flk_frozen_val；
频闪确定子模块，用于至少根据所述频闪特征量化值Flk_frozen_val，确定所述图像是否存在频闪。
16.一种存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器运行时执行权利要求1至14任一项所述图像频闪检测方法的步骤。
17.一种终端，包括存储器和处理器，所述存储器上存储有能够在所述处理器上运行的计算机程序，其特征在于，所述处理器运行所述计算机程序时执行权利要求1至14任一项所述图像频闪检测方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010337093.2A CN111741290B (zh) | 2020-04-24 | 2020-04-24 | 图像频闪检测方法及装置、存储介质、终端 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010337093.2A CN111741290B (zh) | 2020-04-24 | 2020-04-24 | 图像频闪检测方法及装置、存储介质、终端 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111741290A CN111741290A (zh) | 2020-10-02 |
| CN111741290B true CN111741290B (zh) | 2022-03-29 |
Family
ID=72646876
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010337093.2A Active CN111741290B (zh) | 2020-04-24 | 2020-04-24 | 图像频闪检测方法及装置、存储介质、终端 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111741290B (zh) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114630054B (zh) * | 2020-12-14 | 2024-10-29 | 瑞昱半导体股份有限公司 | 具有图像闪烁检测机制的图像获取装置及其图像闪烁检测方法 |
| CN112714308B (zh) * | 2020-12-22 | 2022-05-06 | 武汉微创光电股份有限公司 | 一种检测视频滚动条纹的方法及装置 |
| CN113688820B (zh) * | 2021-08-25 | 2024-07-16 | 维沃移动通信有限公司 | 频闪条带信息识别方法、装置和电子设备 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104104882A (zh) * | 2013-04-09 | 2014-10-15 | 展讯通信（上海）有限公司 | 图像闪烁检测方法及装置、图像捕获设备 |
| CN109274984A (zh) * | 2018-10-16 | 2019-01-25 | 深圳开阳电子股份有限公司 | 检测视频序列中光源闪烁的方法、装置及图像处理设备 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4814380B2 (ja) * | 2008-02-04 | 2011-11-16 | パナソニック株式会社 | 撮像装置、集積回路及び撮像方法 |
| CN104301617B (zh) * | 2013-07-19 | 2017-09-22 | 富士通株式会社 | 闪烁检测方法和闪烁检测设备 |
| TWI670686B (zh) * | 2018-03-02 | 2019-09-01 | 群光電子股份有限公司 | 影像擷取系統及其擷取流程調整之方法 |
-
2020
- 2020-04-24 CN CN202010337093.2A patent/CN111741290B/zh active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104104882A (zh) * | 2013-04-09 | 2014-10-15 | 展讯通信（上海）有限公司 | 图像闪烁检测方法及装置、图像捕获设备 |
| CN109274984A (zh) * | 2018-10-16 | 2019-01-25 | 深圳开阳电子股份有限公司 | 检测视频序列中光源闪烁的方法、装置及图像处理设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111741290A (zh) | 2020-10-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111741290B (zh) | 图像频闪检测方法及装置、存储介质、终端 | |
| CN110602467B (zh) | 图像降噪方法、装置、存储介质及电子设备 | |
| US20100119148A1 (en) | Modifying color and panchromatic channel cfa image | |
| CN107395991B (zh) | 图像合成方法、装置、计算机可读存储介质和计算机设备 | |
| US11481873B2 (en) | Method and apparatus for image processing | |
| JP5352859B2 (ja) | 複数のガウス分布モデルを利用して映像の背景を維持する方法と装置 | |
| CN111510709B (zh) | 图像频闪检测方法及装置、存储介质、终端 | |
| CN114202519A (zh) | 视频闪烁确定方法、装置、设备及存储介质 | |
| CN111510708B (zh) | 图像频闪检测方法及装置、存储介质、终端 | |
| US9147257B2 (en) | Consecutive thin edge detection system and method for enhancing a color filter array image | |
| US9832395B2 (en) | Information processing method applied to an electronic device and electronic device having at least two image capturing units that have the same image capturing direction | |
| EP3363193B1 (en) | Device and method for reducing the set of exposure times for high dynamic range video imaging | |
| JP2013232880A (ja) | イメージ処理装置及びイメージ処理方法 | |
| CN111160340B (zh) | 一种运动目标检测方法、装置、存储介质及终端设备 | |
| CN113129389B (zh) | 判断摩尔纹的方法、抑制摩尔纹的方法与电路系统 | |
| CN101461228A (zh) | 图像处理电路、半导体装置和图像处理设备 | |
| US11997384B2 (en) | Focus setting determination | |
| US11153467B2 (en) | Image processing | |
| KR101946946B1 (ko) | 이미지 처리 장치 및 이의 이미지 처리 방법 | |
| CN114511469B (zh) | 一种图像智能降噪先验检测方法 | |
| CN115514955B (zh) | 一种摄像头画面质量异常检测与识别方法 | |
| CN111147693A (zh) | 一种全尺寸拍照图像的降噪方法及装置 | |
| JP2017021467A (ja) | 画像処理装置、その制御方法、および制御プログラム | |
| CN114187204A (zh) | 黑边优化的图像处理方法及其装置、设备和存储介质 | |
| CN118233756A (zh) | 一种图像检测方法、装置和可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |