CN111741290A - 图像频闪检测方法及装置、存储介质、终端 - Google Patents
图像频闪检测方法及装置、存储介质、终端 Download PDFInfo
- Publication number
- CN111741290A CN111741290A CN202010337093.2A CN202010337093A CN111741290A CN 111741290 A CN111741290 A CN 111741290A CN 202010337093 A CN202010337093 A CN 202010337093A CN 111741290 A CN111741290 A CN 111741290A
- Authority
- CN
- China
- Prior art keywords
- image
- value
- strobe
- luminance
- vector
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
一种图像频闪检测方法及装置、存储介质、终端，所述方法包括：提供待检测的图像；提取所述图像的亮度列向量，所述亮度列向量中的每个亮度向量用于指示图像中每行最小单元的亮度值；基于所述图像的亮度列向量，确定频闪统计值，所述频闪统计值用于指示每个所述亮度向量的频闪次数；根据所述频闪统计值，确定所述图像是否存在频闪；其中，如果所述图像存在频闪，则满足图像频闪为静止频闪。本发明可以针对静止频闪情形进行有效检测，填补现有技术中的空白。
Description
技术领域
本发明涉及图像检测技术领域，尤其涉及一种图像频闪检测方法及装置、 存储介质、终端。
背景技术
由于交流电源的能量随着时间产生周期性变化，当光源工作在此类电源 下时，若拍摄设备的曝光信息与光源频率不匹配，则拍摄图像时存在因为曝 光过程中的光强差异产生的明暗变化。并且因互补金属氧化物半导体 (Complementary Metal OxideSemiconductor，CMOS)元件的曝光策略为逐行 曝光且行与行之间存在时间差导致明暗变化发生滚动现象，这是拍摄图像中 出现频闪的根本成因。
当前常用的图像频闪检测方法的处理对象为拍摄过程中相邻两帧的差值 图像，这样可以在有效去除图像背景信息的基础上较好地保留图像中的频闪 特征。
然而，上述图像频闪检测方法并不适用于静止频闪情形。
亟需一种图像频闪检测方法，针对静止频闪情形进行有效检测，填补现 有技术中的空白。
发明内容
本发明解决的技术问题是提供一种图像频闪检测方法及装置、存储介质、 终端，可以针对静止频闪情形进行有效检测，填补现有技术中的空白。
为解决上述技术问题，本发明实施例提供一种图像频闪检测方法，包括 以下步骤：提供待检测的图像；提取所述图像的亮度列向量，所述亮度列向 量中的每个亮度向量用于指示图像中每行最小单元的亮度值；基于所述图像 的亮度列向量，确定频闪统计值，所述频闪统计值用于指示每个所述亮度向 量的频闪次数；根据所述频闪统计值，确定所述图像是否存在频闪；其中， 如果所述图像存在频闪，则满足图像频闪为静止频闪。
可选的，所述图像为拜耳阵列图像；提取所述图像的亮度列向量包括： 提取所述图像中每个最小单元的R值、Gr值、Gb值以及B值；根据所述R 值、Gr值、Gb值以及B值确定所述图像的亮度向量矩阵；基于所述亮度向 量矩阵，确定所述图像的亮度列向量。
可选的，采用下述公式，根据所述R值、Gr值、Gb值以及B值确定所 述图像的亮度向量矩阵：
Y＝(77×R+75×(Gr+Gb)+29×B)＞＞10
其中，Y用于表示亮度向量矩阵，R用于表示R值矩阵，Gr用于表示Gr 值矩阵，Gb用于表示Gb值矩阵，B用于表示B值矩阵。
可选的，基于所述亮度向量矩阵，确定所述图像的亮度列向量包括：对 所述图像进行下采样，以得到预设尺寸的采样后图像，所述预设尺寸包含预 设行数以及预设列数；对所述采样后图像的每行亮度向量进行求和运算，以 生成所述预设列数的亮度列向量。
可选的，采用下述公式，对所述采样后图像的每行亮度向量进行求和运 算：
其中，Y(p，q)用于表示所述采样后图像的第p行第q列亮度向量，Y_acc(p) 用于表示采样后图像的第p行亮度向量，width用于表示采样后图像中每行最 小单元中最小单元的个数。
可选的，基于所述图像的亮度列向量，确定频闪统计值包括：基于所述 图像的亮度列向量，确定帧内差分亮度列向量diff_frozen；根据所述帧内差 分亮度列向量diff_frozen，确定标志位信息；根据所述标志位信息，确定所 述频闪统计值。
可选的，采用下述公式，基于所述图像的亮度列向量，确定帧内差分亮 度列向量diff_frozen：
其中，diff_frozen(i)用于表示所述帧内差分亮度列向量的第i个亮度向量，frame_data(i)用于表示所述图像的亮度列向量中第i个亮度向量， frame_data(i+1)用于表示所述图像的亮度列向量中第i+1个亮度向量。
可选的，根据所述帧内差分亮度列向量diff_frozen，确定标志位信息包 括：根据所述帧内差分亮度列向量diff_frozen，确定滤波差分亮度列向量 diff_frozen_ft以及载波；根据所述滤波差分亮度列向量diff_frozen_ft以及 载波，确定所述标志位信息。
可选的，根据所述帧内差分亮度列向量diff_frozen，确定滤波差分亮度 列向量diff_frozen_ft以及载波包括：
其中，j为正整数，Diff_frozen_ft(j)用于表示第j个滤波差分亮度列向 量，carrier用于表示所述载波，filt_len用于表示滤波的窗口长度， Diff_frozen(i+j)用于表示所述帧内差分亮度列向量的第i+j个亮度向量，i用 于表示第i个亮度向量，n用于表示滤波差分亮度列向量的数量。
可选的，根据所述滤波差分亮度列向量diff_frozen_ft以及载波，确定所 述标志位信息包括：
其中，diff_frozen_sign(i)用于表示第i个亮度向量的标志位信息， diff_frozen_ft(i)用于表示所述滤波差分亮度列向量的第i个亮度向量。
可选的，根据所述标志位信息，确定所述频闪统计值包括：根据所述标 志位信息，确定跃变点的坐标集合diff_2nd_frozen(i)，所述跃变点包括所述 标志位信息从1跃变至0的点，以及从0跃变至1的点；依次以每个跃变点 为原点，采用预设搜索窗口组中的每个预设搜索窗口，在标志位信息列向量 diff_frozen_sign的各个亮度向量中分别向第一方向和第二方向搜索取值为 0以及取值为1的次数，分别记为第一方向取0次数、第二方向取0次数、第 一方向取1次数以及第二方向取0次数；根据自每个跃变点以及每个预设搜 索窗口得到的所述第一方向取0次数、第二方向取0次数、第一方向取1次 数以及第二方向取0次数，确定所述频闪统计值；其中，所述第一方向和第 二方向不同，且所述第一方向和第二方向选自所述亮度列向量中的亮度向量 的序号增加或减少的方向。
可选的，根据自每个跃变点以及每个预设搜索窗口得到的所述第一方向 取0次数、第二方向取0次数、第一方向取1次数以及第二方向取0次数， 确定所述频闪统计值包括：针对每个滤波跃变点的每个预设搜索窗口，如果 |pos_l-peak_dist|和|neg_r-peak_dist|同时≤peak_dist/x或者|neg_l- peak_dist|和|pos_r-peak_dist|同时≤peak_dist/x，确定频闪统计值 flicker_frozen_val的计数增加预设的频闪权重值；遍历各个滤波跃变点的各 个预设搜索窗口，直到遍历结束或者统计后的频闪统计值flicker_frozen_val 达到预设上限值；其中，pos_l用于表示第一方向取1次数，pos_r用于表示第 二方向取1次数，neg_l用于表示第一方向取0次数，neg_r用于表示第二方 向取0次数，peak_dist用于表示每个预设搜索窗口的窗口长度，x用于表示预 设整数值。
可选的，所述频闪统计值的初始值为0，所述预设的频闪权重值为1。
可选的，根据所述频闪统计值，确定所述图像是否存在频闪包括：根据 所述频闪统计值以及所述频闪统计值的权重值，采用下述公式，确定频闪特 征量化值Flk_frozen_val：
Flk_frozen_val＝flicker_frozen_val×WEIGHT_INV(max(max_zero，max_one)，thrd_f)/4
其中，
至少根据所述频闪特征量化值Flk_frozen_val，确定所述图像是否存在频 闪；其中，Flk_frozen_val用于表示频闪特征量化值，thrd_f用于表示预设的 频闪阈值，WEIGHT_INV(x，y)函数用于指示所述频闪统计值的权重值，x、y用 于表示所述WEIGHT_INV(x，y)函数的输入变量，max_one用于表示所述标志 位信息中最大连续为1的个数；所述频闪特征量化值越大，所述图像存在频 闪的概率越大。
可选的，至少根据所述频闪特征量化值Flk_frozen_val，确定所述图像是 否存在频闪包括：根据所述频闪特征量化值Flk_frozen_val，采用下述公式， 确定长序列频闪特征值Flk_frozen_v_val：
根据所述长序列频闪特征值Flk_frozen_v_val大于预设长序列频闪特征 阈值，确定所述图像存在频闪；其中，Flk_frozen_v_val用于指示长序列频闪 特征值，thrd_f_v用于表示预设频闪阈值。
为解决上述技术问题，本发明实施例提供一种图像频闪检测装置，包括： 提供模块，用于提供待检测的图像；提取模块，用于提取所述图像的亮度列 向量，所述亮度列向量中的每个亮度向量用于指示图像中每行最小单元的亮 度值；频闪统计值确定模块，用于基于所述图像的亮度列向量，确定频闪统 计值，所述频闪统计值用于指示每个所述亮度向量的频闪次数；频闪确定模 块，用于根据所述频闪统计值，确定所述图像是否存在频闪；其中，如果所 述图像存在频闪，则满足图像频闪为静止频闪。
为解决上述技术问题，本发明实施例提供一种存储介质，其上存储有计 算机程序，所述计算机程序被处理器运行时执行上述图像频闪检测方法的步 骤。
为解决上述技术问题，本发明实施例提供一种终端，包括存储器和处理 器，所述存储器上存储有能够在所述处理器上运行的计算机程序，所述处理 器运行所述计算机程序时执行上述图像频闪检测方法的步骤
与现有技术相比，本发明实施例的技术方案具有以下有益效果：
在本发明实施例中，通过设置提取图像的亮度列向量，基于所述图像的 亮度列向量，确定频闪统计值，并根据所述频闪统计值，确定所述图像是否 存在频闪，可以针对静止频闪情形进行有效检测，填补现有技术中的空白。
进一步，在本发明实施例中，根据R值矩阵、Gr值矩阵、Gb值矩阵以 及B值矩阵确定亮度向量矩阵，进而确定所述图像的亮度列向量，可以提高 确定所述图像的亮度列向量的准确性。
进一步，基于所述图像的亮度列向量，确定帧内差分亮度列向量 diff_frozen，然后根据所述帧内差分亮度列向量diff_frozen，确定标志位 信息，由于静止频闪情况无论采用多大的采样步长输入的两帧信息做差后， 有效信号都会所剩无几，采用本发明实施例的方案，可以在单帧统计信息内 进行处理，从而提高确定频闪检测的有效性和准确性。
进一步，通过设置确定滤波差分亮度列向量diff_frozen_ft以及载波，可 以通过滤波，消除波形噪声，从而进一步提高确定频闪检测的准确性。
进一步，通过确定频闪统计值flicker_val的计数增加预设的频闪权重值； 遍历各个滤波跃变点的各个预设搜索窗口，直到遍历结束或者统计后的频闪 统计值flicker_val达到预设上限值，可以在预设条件成立时才增加预设值，以 有效控制权重值达到上限，从而进一步提高确定频闪检测的准确性。
进一步，确定长序列频闪特征值Flk_frozen_v_val，进而基于长序列频闪 特征值Flk_frozen_v_val大于预设长序列频闪特征阈值，确定存在频闪，可以 进一步采用长度更长的亮度列向量对频闪进行检测，进一步有效地提高检测 的准确性。
附图说明
图1是本发明实施例中一种图像频闪检测方法的流程图；
图2是本发明实施例中一种拜耳阵列图像的示意图；
图3是图1中步骤S13的一种具体实施方式的流程图；
图4是图3中步骤S33的一种具体实施方式的流程图；
图5是本发明实施例中一种图像频闪检测装置的结构示意图。
具体实施方式
随着消费电子和工业电子设备的迅速迭代，摄像头成为了很多嵌入式设 备标准配置。当前主流嵌入式摄像设备的成像元件是互补金属氧化物半导体(CMOS)和卷帘式快门的组合，此类元件工作在交流电源照明装置的条件下很 容易受到频闪的影响，导致预览图像质量急剧降低。
如前所述，拍摄图像中会出现频闪，当前常用的图像频闪检测方法的处 理对象为拍摄过程中相邻两帧的差值图像，这样可以在有效去除图像背景信 息的基础上较好地保留图像中的频闪特征。然而，上述图像频闪检测方法并 不适用于静止频闪情形。
本发明的发明人经过研究发现，现有技术中常用的图像频闪检测方法仅 对理想的频闪现象才能保证较为理想的检测正确率，这里对理想频闪的定义 是指预览图像中明暗区间清晰可见、条数介于3～5条且明暗条纹在以适宜的 速率滚动。但是由于成像sensor的性质差异(是否binning输出/分辨率尺寸等)， 不同型号的摄像设备出现的频闪现象千差万别，尤其是会出现静止的频闪现 象。在视觉感知中已经没有“闪烁”的迹象，而是纯粹的图像背景信息和明 暗条纹的叠加。遇到此类频闪现象常用的图像频闪检测方法的表现将会不再 符合预期。
具体地，对于静止频闪情形，由于相邻两帧统计信息间的差异过小，直 接将相邻两帧统计信息相减的处理方法将不再适用。其中，静止频闪情形可 以理解为满足图像频闪的滚动速度小于预设速度的频闪现象。
在本发明实施例中，通过设置提取图像的亮度列向量，基于所述图像的 亮度列向量，确定频闪统计值，并根据所述频闪统计值，确定所述图像是否 存在频闪，可以针对静止频闪情形进行有效检测，填补现有技术中的空白。
为使本发明的上述目的、特征和有益效果能够更为明显易懂，下面结合 附图对本发明的具体实施例做详细的说明。
参照图1，图1是本发明实施例中一种图像频闪检测方法的流程图。所述 图像频闪检测方法可以包括步骤S11至步骤S14：
步骤S11：提供待检测的图像；
步骤S12：提取所述图像的亮度列向量，所述亮度列向量中的每个亮度向 量用于指示图像中每行最小单元的亮度值；
步骤S13：基于所述图像的亮度列向量，确定频闪统计值，所述频闪统计 值用于指示每个所述亮度向量的频闪次数；
步骤S14：根据所述频闪统计值，确定所述图像是否存在频闪。
其中，如果所述图像存在频闪，则满足图像频闪为静止频闪。
在步骤S11的具体实施中，提供待检测的图像。
进一步地，所述图像可以为拜耳阵列图像。
参照图2，图2是本发明实施例中一种拜耳阵列图像的示意图。所述拜耳 阵列图像可以包括多个最小单元(Cell)，例如为图2中圆圈所圈的区域。
其中，每个Cell可以包括蓝色像素(B)、绿蓝像素(Gb)、绿红像素(Gr) 以及红色像素(R)，则每个Cell可以具有R值、Gr值、Gb值以及B值。
在步骤S12的具体实施中，可以提取所述图像的亮度列向量，所述亮度 列向量中的每个亮度向量用于指示图像中每行最小单元的亮度值。
进一步地，提取所述图像的亮度列向量的步骤可以包括：提取所述图像 中每个最小单元的R值、Gr值、Gb值以及B值；根据所述R值、Gr值、Gb 值以及B值确定所述图像的亮度向量矩阵；基于所述亮度向量矩阵，确定所 述图像的亮度列向量。
更进一步地，可以采用下述公式，根据所述R值、Gr值、Gb值以及B 值确定每帧图像的亮度向量矩阵：
Y＝(77×R+75×(Gr+Gb)+29×B)＞＞10
其中，Y用于表示亮度向量矩阵，R用于表示R值矩阵，Gr用于表示Gr 值矩阵，Gb用于表示Gb值矩阵，B用于表示B值矩阵。也即，通过R值矩 阵、Gr值矩阵、Gb值矩阵和B值矩阵进行运算后再整体右移10位，可以得 到亮度向量矩阵Y。
需要指出的是，通过设置右移10位(＞＞10)，可以有控制地减少亮度值 的比特位数，从而降低不同的色彩对亮度值的影响，进而在后续运算中提高 频闪检测的准确率。
在本发明实施例中，根据R值矩阵、Gr值矩阵、Gb值矩阵以及B值矩 阵确定亮度向量矩阵，进而确定每帧图像的亮度列向量，可以提高确定每帧 图像的亮度列向量的准确性。
需要指出的是，本发明的处理图像格式不局限于拜耳(Bayer)阵列图像， 在各类能够统计亮度信息的数字图像域均可以应用，其中，所述数字图像域 包括但不限于原始图像(RAW)域、YCrCb颜色编码(YUV)域、全彩色(RGB) 域。
更进一步地，基于所述亮度向量矩阵，确定每帧图像的亮度列向量包括： 对每帧图像进行下采样，以得到预设尺寸的采样后图像，所述预设尺寸包含 预设行数以及预设列数；对所述采样后图像的每行亮度向量进行求和运算， 以生成所述预设列数的亮度列向量。
更进一步地，可以采用下述公式，对所述采样后图像的每行亮度向量进 行求和运算：
其中，Y(p，q)用于表示所述采样后图像的第p行第q列亮度向量，Y_acc(p) 用于表示采样后图像的第p行亮度向量，width用于表示采样后图像中每行最 小单元中最小单元的个数。
在本发明实施例的一种具体实施方式中，可以根据输入图像尺寸和预设 分辨率的之比，计算得到相应的采样系数并将当前图像下采样至预设尺寸， 以所述预设尺寸为640(像素)×480(像素)为例，此时将采样后图像在行方 向上逐个相加，可以生成高度为480的列向量。也即在上述公式中，q的最 大值为480。
在步骤S13的具体实施中，可以基于所述图像的亮度列向量，确定频闪 统计值。
参照图3，图3是图1中步骤S13的一种具体实施方式的流程图。基于所 述图像的亮度列向量，确定频闪统计值的步骤可以包括步骤S31至步骤S33， 以下对各个步骤进行说明。
在步骤S31中，基于所述图像的亮度列向量，确定帧内差分亮度列向量 diff_frozen。
进一步地，可以采用下述公式，基于所述图像的亮度列向量，确定帧内 差分亮度列向量diff_frozen：
其中，diff_frozen(i)用于表示所述帧内差分亮度列向量的第i个亮度向量，frame_data(i)用于表示所述图像的亮度列向量中第i个亮度向量， frame_data(i+1)用于表示所述图像的亮度列向量中第i+1个亮度向量。
在步骤S32中，根据所述帧内差分亮度列向量diff_frozen，确定标志位 信息。
进一步地，根据所述帧内差分亮度列向量diff_frozen，确定标志位信息 的步骤可以包括：根据所述帧内差分亮度列向量diff_frozen，确定滤波差分 亮度列向量diff_frozen_ft以及载波；根据所述滤波差分亮度列向量 diff_frozen_ft以及载波，确定所述标志位信息。
更进一步地，根据所述帧内差分亮度列向量diff_frozen，确定滤波差分 亮度列向量diff_frozen_ft以及载波包括：
其中，j为正整数，Diff_frozen_ft(j)用于表示第j个滤波差分亮度列向 量，carrier用于表示所述载波，filt_len用于表示滤波的窗口长度， Diff_frozen(i+j)用于表示所述帧内差分亮度列向量的第i+j个亮度向量，i用 于表示第i个亮度向量，n用于表示滤波差分亮度列向量的数量。
在本发明实施例中，通过设置确定滤波差分亮度列向量diff_frozen_ft以 及载波，可以通过滤波，消除波形噪声，从而进一步提高确定频闪检测的准 确性。
更进一步地，根据所述滤波差分亮度列向量diff_frozen_ft以及载波，确 定所述标志位信息的步骤可以包括：
其中，diff_frozen_sign(i)用于表示第i个亮度向量的标志位信息， diff_frozen_ft(i)用于表示所述滤波差分亮度列向量的第i个亮度向量。
在本发明实施例中，可以基于所述图像的亮度列向量，确定帧内差分亮 度列向量diff_frozen，然后根据所述帧内差分亮度列向量diff_frozen，确 定标志位信息，由于静止频闪情况无论采用多大的采样步长输入的两帧信息 做差后，有效信号都会所剩无几，采用本发明实施例的方案，可以在单帧统 计信息内进行处理，从而提高确定频闪检测的有效性和准确性。
在步骤S33中，根据所述标志位信息，确定所述频闪统计值。
参照图4，图4是图3中步骤S33的一种具体实施方式的流程图。根据所 述标志位信息，确定所述频闪统计值的步骤可以包括步骤S41至步骤S43，以 下对各个步骤进行说明。
在步骤S41中，根据所述标志位信息，确定跃变点的坐标集合，所述跃 变点包括所述标志位信息从1跃变至0的点，以及从0跃变至1的点。其中， 所述跃变点的坐标集合用diff_2nd_frozen(f)表示。
在步骤S42中，依次以每个跃变点为原点，采用预设搜索窗口组中的每 个预设搜索窗口，在标志位信息列向量的各个亮度向量中分别向第一方向和 第二方向搜索取值为0以及取值为1的次数，分别记为第一方向取0次数、 第二方向取0次数、第一方向取1次数以及第二方向取0次数。其中，所述 标志位信息列向量用diff_frozen_sign表示。
在步骤S43中，根据自每个跃变点以及每个预设搜索窗口得到的所述第 一方向取0次数、第二方向取0次数、第一方向取1次数以及第二方向取0 次数，确定所述频闪统计值。
其中，所述第一方向和第二方向不同，且所述第一方向和第二方向选自 所述亮度列向量中的亮度向量的序号增加或减少的方向。
具体地，通过设置仅以每个跃变点为原点，可以有效地减少计算的次数， 有效地降低计算复杂度。
更进一步地，可以根据自每个跃变点以及每个预设搜索窗口得到的所述 第一方向取0次数、第二方向取0次数、第一方向取1次数以及第二方向取0 次数，确定所述频闪统计值包括：
针对每个滤波跃变点的每个预设搜索窗口，如果|pos_l-peak_dist|和 |neg_r-peak_dist|同时≤peak_dist/x或者|neg_l-peak_dist|和 |pos_r-peak_dist|同时≤peak_dist/x，确定频闪统计值flicker_frozen_val 的计数增加预设的频闪权重值；遍历各个滤波跃变点的各个预设搜索窗口， 直到遍历结束或者统计后的频闪统计值flicker_frozen_val达到预设上限值； 其中，pos_l用于表示第一方向取1次数，pos_r用于表示第二方向取1次数， neg_l用于表示第一方向取0次数，neg_r用于表示第二方向取0次数， peak_dist用于表示每个预设搜索窗口的窗口长度，x用于表示预设整数值。
在具体实施中，每当|pos_l-peak_dist|和|neg_r-peak_dist|同时 ≤peak_dist/x成立，或者|neg_l-peak_dist|和|pos_r-peak_dist|同时 ≤peak_dist/x成立时，均在频闪统计值flicker_val的计数上加预设的频闪权 重值。
作为一个非限制性的例子，可以设置x为8～12，例如x为10。还可以设置 1/x为5％～15％，例如1/x为10％。
进一步地，所述频闪统计值的初始值可以为0，所述预设的频闪权重值可 以为1。
在本发明实施例中，可以仅在上述条件成立时加1，从而有效地降低运算 量。
在本发明实施例中，可以通过确定频闪统计值flicker_val的计数增加预 设的频闪权重值；遍历各个滤波跃变点的各个预设搜索窗口，直到遍历结束 或者统计后的频闪统计值flicker_val达到预设上限值，可以在预设条件成立时 才增加预设值，以有效控制权重值达到上限，从而进一步提高确定频闪检测 的准确性。
继续参照图1，在步骤S14的具体实施中，可以确定图像是否存在频闪。
进一步地，根据所述频闪统计值，确定所述图像是否存在频闪的步骤可 以包括：根据所述频闪统计值以及所述频闪统计值的权重值，采用下述公式， 确定频闪特征量化值Flk_frozen_val：
Flk_frozen_val＝flicker_frozen_val×WEIGHT_INV(max(max_zero，max_one)，thrd_f)/4
其中，
其中，Flk_frozen_val用于表示频闪特征量化值，thrd_f用于表示预设的 频闪阈值，WEIGHT_INV(x，y)函数用于指示所述频闪统计值的权重值，x、y用 于表示所述WEIGHT_INV(x，y)函数的输入变量，matx_zero用于表示所述标志 位信息中最大连续为0的个数，max_one用于表示所述标志位信息中最大连 续为1的个数。
至少根据所述频闪特征量化值Flk_frozen_val，确定所述图像是否存在频 闪；所述频闪特征量化值越大，所述图像存在频闪的概率越大。
进一步地，至少根据所述频闪特征量化值Flk_frozen_val，确定所述图像 是否存在频闪的步骤可以包括：根据所述频闪特征量化值Flk_frozen_val，采 用下述公式，确定长序列频闪特征值Flk_frozen_v_val：
根据所述长序列频闪特征值Flk_frozen_v_val大于预设长序列频闪特征 阈值，确定所述图像存在频闪；
其中，Flk_frozen_v_val用于指示长序列频闪特征值，thrd_f_v用于表示 预设频闪阈值。
在本发明实施例中，确定长序列频闪特征值Flk_frozen_v_val，进而基于 长序列频闪特征值Flk_frozen_v_val大于预设长序列频闪特征阈值，确定存在 频闪，可以进一步采用长度更长的亮度列向量对频闪进行检测，进一步有效 地提高检测的准确性。
在本发明实施例中，通过设置提取图像的亮度列向量，基于所述图像的 亮度列向量，确定频闪统计值，并根据所述频闪统计值，确定所述图像是否 存在频闪，可以针对静止频闪情形进行有效检测，填补现有技术中的空白。
参照图5，图5是本发明实施例中一种图像频闪检测装置的结构示意图。 所述图像频闪检测装置可以包括：
提供模块51，用于提供待检测的图像；
提取模块52，用于提取所述图像的亮度列向量，所述亮度列向量中的每 个亮度向量用于指示图像中每行最小单元的亮度值；
频闪统计值确定模块53，用于基于所述图像的亮度列向量，确定频闪统 计值，所述频闪统计值用于指示每个所述亮度向量的频闪次数；
频闪确定模块54，用于根据所述频闪统计值，确定所述图像是否存在频 闪。其中，如果所述图像存在频闪，则满足图像频闪为静止频闪。
关于该图像频闪检测装置的原理、具体实现和有益效果请参照前文及图1 至图4示出的关于图像频闪检测方法的相关描述，此处不再赘述。
本发明实施例还提供了一种存储介质，其上存储有计算机程序，所述计 算机程序被处理器运行时执行上述方法的步骤。所述存储介质可以是计算机 可读存储介质，例如可以包括非挥发性存储器(non-volatile)或者非瞬态 (non-transitory)存储器，还可以包括光盘、机械硬盘、固态硬盘等。
本发明实施例还提供了一种终端，包括存储器和处理器，所述存储器上 存储有能够在所述处理器上运行的计算机程序，所述处理器运行所述计算机 程序时执行上述方法的步骤。所述终端包括但不限于手机、计算机、平板电 脑等终端设备。
虽然本发明披露如上，但本发明并非限定于此。任何本领域技术人员， 在不脱离本发明的精神和范围内，均可作各种更动与修改，因此本发明的保 护范围应当以权利要求所限定的范围为准。
Claims (18)
1.一种图像频闪检测方法，其特征在于，包括以下步骤：
提供待检测的图像；
提取所述图像的亮度列向量，所述亮度列向量中的每个亮度向量用于指示图像中每行最小单元的亮度值；
基于所述图像的亮度列向量，确定频闪统计值，所述频闪统计值用于指示每个所述亮度向量的频闪次数；
根据所述频闪统计值，确定所述图像是否存在频闪；
其中，如果所述图像存在频闪，则满足图像频闪为静止频闪。
2.根据权利要求1所述的图像频闪检测方法，其特征在于，所述图像为拜耳阵列图像；
提取所述图像的亮度列向量包括：
提取所述图像中每个最小单元的R值、Gr值、Gb值以及B值；
根据所述R值、Gr值、Gb值以及B值确定所述图像的亮度向量矩阵；
基于所述亮度向量矩阵，确定所述图像的亮度列向量。
3.根据权利要求2所述的图像频闪检测方法，其特征在于，采用下述公式，根据所述R值、Gr值、Gb值以及B值确定所述图像的亮度向量矩阵：
Y＝(77×R+75×(Gr+Gb)+29×B)＞＞10
其中，Y用于表示亮度向量矩阵，R用于表示R值矩阵，Gr用于表示Gr值矩阵，Gb用于表示Gb值矩阵，B用于表示B值矩阵。
4.根据权利要求2所述的图像频闪检测方法，其特征在于，基于所述亮度向量矩阵，确定所述图像的亮度列向量包括：
对所述图像进行下采样，以得到预设尺寸的采样后图像，所述预设尺寸包含预设行数以及预设列数；
对所述采样后图像的每行亮度向量进行求和运算，以生成所述预设列数的亮度列向量。
5.根据权利要求4所述的图像频闪检测方法，其特征在于，采用下述公式，对所述采样后图像的每行亮度向量进行求和运算：
其中，Y(p，q)用于表示所述采样后图像的第p行第q列亮度向量，Y_acc(p)用于表示采样后图像的第p行亮度向量，width用于表示采样后图像中每行最小单元中最小单元的个数。
6.根据权利要求1所述的图像频闪检测方法，其特征在于，基于所述图像的亮度列向量，确定频闪统计值包括：
基于所述图像的亮度列向量，确定帧内差分亮度列向量diff_frozen；
根据所述帧内差分亮度列向量diff_frozen，确定标志位信息；
根据所述标志位信息，确定所述频闪统计值。
7.根据权利要求6所述的图像频闪检测方法，其特征在于，采用下述公式，基于所述图像的亮度列向量，确定帧内差分亮度列向量diff_frozen：
其中，diff_frozen(i)用于表示所述帧内差分亮度列向量的第i个亮度向量，frame_data(i)用于表示所述图像的亮度列向量中第i个亮度向量，frame_data(i+1)用于表示所述图像的亮度列向量中第i+1个亮度向量。
8.根据权利要求6所述的图像频闪检测方法，其特征在于，根据所述帧内差分亮度列向量diff_frozen，确定标志位信息包括：
根据所述帧内差分亮度列向量diff_frozen，确定滤波差分亮度列向量diff_frozen_ft以及载波；
根据所述滤波差分亮度列向量diff_frozen_ft以及载波，确定所述标志位信息。
9.根据权利要求8所述的图像频闪检测方法，其特征在于，根据所述帧内差分亮度列向量diff_frozen，确定滤波差分亮度列向量diff_frozen_ft以及载波包括：
其中，j为正整数，Diff_frozen_ft(j)用于表示第j个滤波差分亮度列向量，carrier用于表示所述载波，filt_len用于表示滤波的窗口长度，Diff_frozen(i+j)用于表示所述帧内差分亮度列向量的第i+j个亮度向量，i用于表示第i个亮度向量，n用于表示滤波差分亮度列向量的数量。
10.根据权利要求8所述的图像频闪检测方法，其特征在于，根据所述滤波差分亮度列向量diff_frozen_ft以及载波，确定所述标志位信息包括：
其中，diff_frozen_sign(i)用于表示第i个亮度向量的标志位信息，diff_frozen_ff(i)用于表示所述滤波差分亮度列向量的第i个亮度向量。
11.根据权利要求6所述的图像频闪检测方法，其特征在于，根据所述标志位信息，确定所述频闪统计值包括：
根据所述标志位信息，确定跃变点的坐标集合diff_2nd_frozen(i)，所述跃变点包括所述标志位信息从1跃变至0的点，以及从0跃变至1的点；
依次以每个跃变点为原点，采用预设搜索窗口组中的每个预设搜索窗口，在标志位信息列向量diff_frozen_sign的各个亮度向量中分别向第一方向和第二方向搜索取值为0以及取值为1的次数，分别记为第一方向取0次数、第二方向取0次数、第一方向取1次数以及第二方向取0次数；
根据自每个跃变点以及每个预设搜索窗口得到的所述第一方向取0次数、第二方向取0次数、第一方向取1次数以及第二方向取0次数，确定所述频闪统计值；
其中，所述第一方向和第二方向不同，且所述第一方向和第二方向选自所述亮度列向量中的亮度向量的序号增加或减少的方向。
12.根据权利要求11所述的图像频闪检测方法，其特征在于，根据自每个跃变点以及每个预设搜索窗口得到的所述第一方向取0次数、第二方向取0次数、第一方向取1次数以及第二方向取0次数，确定所述频闪统计值包括：
针对每个滤波跃变点的每个预设搜索窗口，如果|pos_l-peak_dist|和|neg_r-peak_dist|同时≤peak_dist/x或者|neg_l-peak_dist|和|pos_r-peak_dist|同时≤peak_dist/x，确定频闪统计值flicker_frozen_val的计数增加预设的频闪权重值；
遍历各个滤波跃变点的各个预设搜索窗口，直到遍历结束或者统计后的频闪统计值flicker_frozen_val达到预设上限值；
其中，pos_l用于表示第一方向取1次数，pos_r用于表示第二方向取1次数，neg_l用于表示第一方向取0次数，neg_r用于表示第二方向取0次数，peak_dist用于表示每个预设搜索窗口的窗口长度，x用于表示预设整数值。
13.根据权利要求12所述的图像频闪检测方法，其特征在于，所述频闪统计值的初始值为0，所述预设的频闪权重值为1。
14.根据权利要求6所述的图像频闪检测方法，其特征在于，根据所述频闪统计值，确定所述图像是否存在频闪包括：
根据所述频闪统计值以及所述频闪统计值的权重值，采用下述公式，确定频闪特征量化值Flk_frozen_val：
Flk_frozen_val＝flicker_frozen_val×WEIGHT_INV(max(max_zero，max_one)，thrd_f)/4
其中，
至少根据所述频闪特征量化值Flk_frozen_val，确定所述图像是否存在频闪；
其中，Flk_frozen_val用于表示频闪特征量化值，thrd_f用于表示预设的频闪阈值，WEIGHT_INV(x，y)函数用于指示所述频闪统计值的权重值，x、y用于表示所述WEIGHT_INV(x，y)函数的输入变量，max_zero用于表示所述标志位信息中最大连续为0的个数，max_one用于表示所述标志位信息中最大连续为1的个数。
所述频闪特征量化值越大，所述图像存在频闪的概率越大。
15.根据权利要求14所述的图像频闪检测方法，其特征在于，
至少根据所述频闪特征量化值Flk_frozen_val，确定所述图像是否存在频闪包括：
根据所述频闪特征量化值Flk_frozen_val，采用下述公式，确定长序列频闪特征值Flk_frozen_v_val：
根据所述长序列频闪特征值Flk_frozen_v_val大于预设长序列频闪特征阈值，确定所述图像存在频闪；
其中，Flk_frozen_v_val用于指示长序列频闪特征值，thrd_f_v用于表示预设频闪阈值。
16.一种图像频闪检测装置，其特征在于，包括：
提供模块，用于提供待检测的图像；
提取模块，用于提取所述图像的亮度列向量，所述亮度列向量中的每个亮度向量用于指示图像中每行最小单元的亮度值；
频闪统计值确定模块，用于基于所述图像的亮度列向量，确定频闪统计值，所述频闪统计值用于指示每个所述亮度向量的频闪次数；
频闪确定模块，用于根据所述频闪统计值，确定所述图像是否存在频闪；
其中，如果所述图像存在频闪，则满足图像频闪为静止频闪。
17.一种存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器运行时执行权利要求1至15任一项所述图像频闪检测方法的步骤。
18.一种终端，包括存储器和处理器，所述存储器上存储有能够在所述处理器上运行的计算机程序，其特征在于，所述处理器运行所述计算机程序时执行权利要求1至15任一项所述图像频闪检测方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010337093.2A CN111741290B (zh) | 2020-04-24 | 2020-04-24 | 图像频闪检测方法及装置、存储介质、终端 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010337093.2A CN111741290B (zh) | 2020-04-24 | 2020-04-24 | 图像频闪检测方法及装置、存储介质、终端 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111741290A true CN111741290A (zh) | 2020-10-02 |
| CN111741290B CN111741290B (zh) | 2022-03-29 |
Family
ID=72646876
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010337093.2A Active CN111741290B (zh) | 2020-04-24 | 2020-04-24 | 图像频闪检测方法及装置、存储介质、终端 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111741290B (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112714308A (zh) * | 2020-12-22 | 2021-04-27 | 武汉微创光电股份有限公司 | 一种检测视频滚动条纹的方法及装置 |
| CN114630054A (zh) * | 2020-12-14 | 2022-06-14 | 瑞昱半导体股份有限公司 | 具有图像闪烁检测机制的图像获取装置及其图像闪烁检测方法 |
| WO2023025010A1 (zh) * | 2021-08-25 | 2023-03-02 | 维沃移动通信有限公司 | 频闪条带信息识别方法、装置和电子设备 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20100157093A1 (en) * | 2008-02-04 | 2010-06-24 | Ryuji Fuchikami | Imaging device, integrated circuit, and imaging method |
| CN104104882A (zh) * | 2013-04-09 | 2014-10-15 | 展讯通信（上海）有限公司 | 图像闪烁检测方法及装置、图像捕获设备 |
| CN104301617A (zh) * | 2013-07-19 | 2015-01-21 | 富士通株式会社 | 闪烁检测方法和闪烁检测设备 |
| CN109274984A (zh) * | 2018-10-16 | 2019-01-25 | 深圳开阳电子股份有限公司 | 检测视频序列中光源闪烁的方法、装置及图像处理设备 |
| US20190273859A1 (en) * | 2018-03-02 | 2019-09-05 | Chicony Electronics Co., Ltd. | Image capture system and capture process adjusting method thereof |
-
2020
- 2020-04-24 CN CN202010337093.2A patent/CN111741290B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20100157093A1 (en) * | 2008-02-04 | 2010-06-24 | Ryuji Fuchikami | Imaging device, integrated circuit, and imaging method |
| CN104104882A (zh) * | 2013-04-09 | 2014-10-15 | 展讯通信（上海）有限公司 | 图像闪烁检测方法及装置、图像捕获设备 |
| CN104301617A (zh) * | 2013-07-19 | 2015-01-21 | 富士通株式会社 | 闪烁检测方法和闪烁检测设备 |
| US20190273859A1 (en) * | 2018-03-02 | 2019-09-05 | Chicony Electronics Co., Ltd. | Image capture system and capture process adjusting method thereof |
| CN109274984A (zh) * | 2018-10-16 | 2019-01-25 | 深圳开阳电子股份有限公司 | 检测视频序列中光源闪烁的方法、装置及图像处理设备 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114630054A (zh) * | 2020-12-14 | 2022-06-14 | 瑞昱半导体股份有限公司 | 具有图像闪烁检测机制的图像获取装置及其图像闪烁检测方法 |
| TWI798624B (zh) * | 2020-12-14 | 2023-04-11 | 瑞昱半導體股份有限公司 | 具有影像閃爍偵測機制的影像擷取裝置及其影像閃爍偵測方法 |
| US11653102B2 (en) | 2020-12-14 | 2023-05-16 | Realtek Semiconductor Corporation | Image retrieving apparatus having image flicker detection mechanism and image flicker detection method of the same |
| CN112714308A (zh) * | 2020-12-22 | 2021-04-27 | 武汉微创光电股份有限公司 | 一种检测视频滚动条纹的方法及装置 |
| WO2023025010A1 (zh) * | 2021-08-25 | 2023-03-02 | 维沃移动通信有限公司 | 频闪条带信息识别方法、装置和电子设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111741290B (zh) | 2022-03-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111741290B (zh) | 图像频闪检测方法及装置、存储介质、终端 | |
| CN110602467B (zh) | 图像降噪方法、装置、存储介质及电子设备 | |
| US8823808B2 (en) | Method for improved digital video image quality | |
| CN101605209B (zh) | 摄像装置及图像再生装置 | |
| US7940311B2 (en) | Multi-exposure pattern for enhancing dynamic range of images | |
| CN107395991B (zh) | 图像合成方法、装置、计算机可读存储介质和计算机设备 | |
| US11481873B2 (en) | Method and apparatus for image processing | |
| CN111510709B (zh) | 图像频闪检测方法及装置、存储介质、终端 | |
| CN111510708B (zh) | 图像频闪检测方法及装置、存储介质、终端 | |
| US9832395B2 (en) | Information processing method applied to an electronic device and electronic device having at least two image capturing units that have the same image capturing direction | |
| EP3363193B1 (en) | Device and method for reducing the set of exposure times for high dynamic range video imaging | |
| JP6185249B2 (ja) | イメージ処理装置及びイメージ処理方法 | |
| CN111160340B (zh) | 一种运动目标检测方法、装置、存储介质及终端设备 | |
| US11861814B2 (en) | Apparatus and method for sensing image based on event | |
| CN115035013A (zh) | 图像处理方法、图像处理装置、终端及可读存储介质 | |
| CN111147693B (zh) | 一种全尺寸拍照图像的降噪方法及装置 | |
| KR101946946B1 (ko) | 이미지 처리 장치 및 이의 이미지 처리 방법 | |
| Chen et al. | Source camera identification based on camera gain histogram | |
| US11153467B2 (en) | Image processing | |
| CN103841384A (zh) | 一种图像质量的优化方法及装置 | |
| CN113794816B (zh) | 暗光环境下的图像增强方法、装置、设备及存储介质 | |
| CN114511469B (zh) | 一种图像智能降噪先验检测方法 | |
| CN115514955B (zh) | 一种摄像头画面质量异常检测与识别方法 | |
| CN114187204A (zh) | 黑边优化的图像处理方法及其装置、设备和存储介质 | |
| JP2017021467A (ja) | 画像処理装置、その制御方法、および制御プログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |