CN104346793B - 一种视频闪烁检测方法及装置 - Google Patents
一种视频闪烁检测方法及装置 Download PDFInfo
- Publication number
- CN104346793B CN104346793B CN201310319280.8A CN201310319280A CN104346793B CN 104346793 B CN104346793 B CN 104346793B CN 201310319280 A CN201310319280 A CN 201310319280A CN 104346793 B CN104346793 B CN 104346793B
- Authority
- CN
- China
- Prior art keywords
- video
- detected
- image
- connected region
- frame difference
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/254—Analysis of motion involving subtraction of images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20224—Image subtraction
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种视频闪烁检测方法及装置,包括:从待检测视频中获取待检测视频图像;对所述待检测视频图像与其前一帧视频图像之间的帧差图像进行二值化处理,得到二值化帧差图像;采用扫描线算法,从所述二值化帧差图像中排除不满足预设大小条件的区域,得到扫描处理后图像;当所述扫描处理后图像中各连通区域的面积均小于预设面积阈值时,确定所述待检测视频不是闪烁视频。采用本发明提供的方法及装置,相比现有技术,提高了视频闪烁检测的可靠性、准确度和检测效率。
Description
技术领域
本发明涉及视频分析及视频监控领域,尤其涉及一种视频闪烁检测方法及装置。
背景技术
在视频监控系统中,由于摄像机受曝光时间、拍摄视角及设备自身故障的干扰以及光照条件等外部环境的干扰,使得视频图像的前后帧图像总体或局部出现亮度变化异常剧烈的情况,从而导致视频出现闪烁的现象,严重影响了视频图像的视觉效果、图像质量和稳定性,同时视频闪烁会增加更多的比特信息来描述图像,造成编码比特率的增大,不利于后续的图像传输、存储、分析和处理,因此要对视频图像中的视频闪烁进行检测,确定视频闪烁的强度。
目前,现有的视频闪烁检测方法主要采用人工值守的方式,通过值守人员对视频进行观察,由人眼来判断视频是否存在闪烁情况,发现视频闪烁后,由值守人员发出报警信息并进行处理。
上述现有的人工值守检测视频闪烁的方法,需要值守人员在连续时间内对视频进行观察,由于人的注意力有限,不能长时间将注意力集中在观看视频上,同时对于多路视频图像监控,不能兼顾每一路视频图像,容易造成漏检。因为整个检测过程加入了人为主观因素的影响,人为对视频闪烁强度的判断也各不相同,降低了视频闪烁检测的可靠性、准确度和检测效率。
发明内容
本发明实施例提供一种视频闪烁检测方法及装置,用以解决现有技术中存在的进行视频闪烁检测的可靠性、准确度和检测效率较低的问题。
本发明实施例提供一种视频闪烁检测方法,包括:
从待检测视频中获取待检测视频图像;
对所述待检测视频图像与其前一帧视频图像之间的帧差图像进行二值化处理,得到二值化帧差图像;
采用扫描线算法,从所述二值化帧差图像中排除不满足预设大小条件的区域,得到扫描处理后图像;
当所述扫描处理后图像中各连通区域的面积均小于预设面积阈值时,确定所述待检测视频不是闪烁视频。
采用本发明实施例提供的上述方法,由于采用扫描线法从二值化帧差图像中排除不满足预设大小条件的区域,从而排除了运动目标对闪烁检测带来的干扰,并且将扫描处理后图像进行区域连通,使得有效的闪烁区域保留下来,从而降低了漏检率,并且整个检测过程是自动检测,不需要人工参与检测,即相比现有技术提高了进行视频闪烁检测的可靠性、准确率和检测效率。
进一步的,采用扫描线算法,从所述二值化帧差图像中排除不满足预设大小条件的区域,得到扫描处理后图像,具体包括:
通过对所述二值化帧差图像进行逐行扫描,将所述二值化帧差图像每行中数量小于预设行数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到行扫描处理后图像,作为扫描处理后图像;或者
通过对所述二值化帧差图像进行逐列扫描,将所述二值化帧差图像每列中数量小于预设列数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到列扫描处理后图像,作为扫描处理后图像;或者
通过对所述二值化帧差图像进行逐行扫描,将所述二值化帧差图像每行中数量小于预设行数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到行扫描处理后图像;并通过对所述二值化帧差图像进行逐列扫描,将所述二值化帧差图像每列中数量小于预设列数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到列扫描处理后图像;将所述行扫描处理后图像与所述列扫描处理后图像中相同位置的像素点的亮度值进行逻辑与运算,得到与运算处理后图像,作为扫描处理后图像。
这样,采用扫描线算法从二值化帧差图像中排除不满足预设大小条件的区域,从而排除了运动目标对闪烁检测带来的干扰。
进一步的,在判断所述扫描处理后图像中各连通区域的面积与预设面积阈值的关系是,上述方法还可以包括:
当所述扫描处理后图像中各连通区域的面积不均小于预设面积阈值时,确定所述待检测视频是闪烁视频;或者
当所述扫描处理后图像中各连通区域的面积不均小于预设面积阈值时,将所述扫描处理后图像中面积不小于预设面积阈值的各连通区域,确定为各待检测连通区域;分别确定所述各待检测连通区域的区域密度,所述区域密度表征各待检测连通区域中有效像素点所占比重;当所述各待检测连通区域的区域密度均小于预设密度阈值时,确定所述待检测视频不是闪烁视频,否则,确定所述待检测视频是闪烁视频。
这样,将扫描处理后图像进行区域连通,使得有效的闪烁区域保留下来,从而降低了漏检率,当确定所述待检测视频不是闪烁视频时,可以更加准确的确定所述待检测视频是闪烁视频。
进一步的,分别确定所述各待检测连通区域的区域密度,具体包括:
通过对每个待检测连通区域进行逐行扫描,将该待检测连通区域中像素点数量大于预设长度阈值的各行的像素点,确定为该待检测连通区域的有效像素点;将该待检测连通区域的有效像素点的数量与该待检测连通区域的像素点总数的比值,确定为该待检测连通区域的区域密度。
这样,采用基于连通区域内的有效像素点确定区域密度,并将该区域密度与预设密度阈值相比较,能够排除由大的运动目标引起的误判,从而可以更准确地确定待检测视频是闪烁视频。
进一步的,在确定所述待检测视频是闪烁视频之后,还包括:
采用如下公式确定所述待检测视频的闪烁强度:
I=100%*SumRect/SumAll;
其中,I表示待检测视频的闪烁强度,SumRect为待检测视频图像中所有的待检测连通区域包括的有效像素点的总数量,SumAll为该待检测视频图像包括的像素点数量。
这样,通过确定的待检测视频的闪烁强度,可以得到各待检测视频闪烁强弱的程度。
进一步的,在对所述待检测视频图像与其前一帧视频图像之间的帧差图像进行二值化处理,得到二值化帧差图像之前,上述方法还可以包括:
确定所述待检测视频图像与其前一帧视频图像之间的帧差图像的平均亮度值;
确定所述平均亮度值不小于预设亮度阈值。
进一步的,当所述平均亮度值小于所述预设亮度阈值时,上述方法还包括:
确定所述待检测视频不是闪烁视频。
本发明实施例还提供一种视频闪烁检测装置,包括:
获取单元,用于从待检测视频中获取待检测视频图像;
二值化处理单元,用于对所述待检测视频图像与其前一帧视频图像之间的帧差图像进行二值化处理,得到二值化帧差图像;
扫描单元,用于从所述二值化帧差图像中排除不满足预设大小条件的区域,得到扫描处理后图像;
第一闪烁确定单元,用于当所述扫描处理后图像中各连通区域的面积均小于预设面积阈值时,确定所述待检测视频不是闪烁视频。
采用本发明实施例提供的上述装置,由于采用扫描线法从二值化帧差图像中排除不满足预设大小条件的区域,从而排除了运动目标对闪烁检测带来的干扰,并且将扫描处理后图像进行区域连通,使得有效的闪烁区域保留下来,从而降低了漏检率,并且整个检测过程是自动检测,不需要人工参与检测,即相比现有技术提高了进行视频闪烁检测的可靠性、准确率和检测效率。
进一步的,所述扫描单元,具体用于通过对所述二值化帧差图像进行逐行扫描,将所述二值化帧差图像每行中数量小于预设行数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到行扫描处理后图像,作为扫描处理后图像;或者
通过对所述二值化帧差图像进行逐列扫描,将所述二值化帧差图像每列中数量小于预设列数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到列扫描处理后图像,作为扫描处理后图像;或者
通过对所述二值化帧差图像进行逐行扫描,将所述二值化帧差图像每行中数量小于预设行数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到行扫描处理后图像;并通过对所述二值化帧差图像进行逐列扫描,将所述二值化帧差图像每列中数量小于预设列数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到列扫描处理后图像;将所述行扫描处理后图像与所述列扫描处理后图像中相同位置的像素点的亮度值进行逻辑与运算,得到与运算处理后图像,作为扫描处理后图像。
这样,采用扫描线算法从二值化帧差图像中排除不满足预设大小条件的区域,从而排除了运动目标对闪烁检测带来的干扰。
进一步的,所述第一闪烁确定单元,还用于当所述扫描处理后图像中各连通区域的面积不均小于预设面积阈值时,确定所述待检测视频是闪烁视频;或者
上述装置还可以包括:
连通区域确定单元,用于当所述扫描处理后图像中各连通区域的面积不均小于预设面积阈值时,将所述扫描处理后图像中面积不小于预设面积阈值的各连通区域,确定为各待检测连通区域;
区域密度确定单元,用于分别确定所述各待检测连通区域的区域密度,所述区域密度表征各待检测连通区域中有效像素点所占比重;
第二闪烁确定单元,用于当所述各待检测连通区域的区域密度均小于预设密度阈值时,确定所述待检测视频不是闪烁视频,否则,确定所述待检测视频是闪烁视频。
这样,将扫描处理后图像进行区域连通,使得有效的闪烁区域保留下来,从而降低了漏检率,当确定所述待检测视频不是闪烁视频时,可以更加准确的确定所述待检测视频是闪烁视频。
所述区域密度确定单元,具体用于通过对每个待检测连通区域进行逐行扫描,将该待检测连通区域中像素点数量大于预设长度阈值的各行的像素点,确定为该待检测连通区域的有效像素点;将该待检测连通区域的有效像素点的数量与该待检测连通区域的像素点总数的比值,确定为该待检测连通区域的区域密度。
这样,采用基于连通区域内的有效像素点确定区域密度,并将该区域密度与预设密度阈值相比较,能够排除由大的运动目标引起的误判,从而可以更准确地确定待检测视频是闪烁视频。
进一步的,所述第二闪烁确定单元,还用于在确定所述待检测视频是闪烁视频之后,采用如下公式确定所述待检测视频的闪烁强度:
I=100%*SumRect/SumAll;
其中,I表示待检测视频的闪烁强度,SumRect为待检测视频图像中所有的待检测连通区域包括的有效像素点的总数量,SumAll为该待检测视频图像包括的像素点数量。
这样,通过确定的待检测视频的闪烁强度,可以得到各待检测视频闪烁强弱的程度。
进一步的,上述装置还可以包括:
亮度值确定单元,用于在所述二值化处理单元对所述待检测视频图像与其前一帧视频图像之间的帧差图像进行二值化处理,得到二值化帧差图像之前,确定所述待检测视频图像与其前一帧视频图像之间的帧差图像的平均亮度值;
第三闪烁确定单元,用于确定所述平均亮度值不小于预设亮度阈值。
进一步的,所述第三闪烁确定单元,还用于当所述平均亮度值小于所述预设亮度阈值时,确定所述待检测视频不是闪烁视频。
本申请的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本申请而了解。本申请的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明实施例提供的视频闪烁检测方法的流程图;
图2为本发明实施例1提供的视频闪烁检测方法的流程图;
图3为本发明实施例2提供的视频闪烁检测方法的流程图;
图4为本发明实施例3提供的视频闪烁检测方法的流程图;
图5为本发明实施例4提供的视频闪烁检测装置的结构示意图。
具体实施方式
为了给出提高视频闪烁检测的可靠性、准确度和检测效率的实现方案,本发明实施例提供了一种视频闪烁检测方法及装置,以下结合说明书附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。并且在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
本发明实施例提供一种视频闪烁检测方法,如图1所示,包括:
步骤101、从待检测视频中获取待检测视频图像。
步骤102、对该待检测视频图像与其前一帧视频图像之间的帧差图像进行二值化处理,得到二值化帧差图像。
步骤103、采用扫描线算法,从该二值化帧差图像中排除不满足预设大小条件的区域,得到扫描处理后图像。
步骤104、当该扫描处理后图像中各连通区域的面积均小于预设面积阈值时,确定该待检测视频不是闪烁视频。
进一步的,当该扫描处理后图像中各连通区域的面积不均小于预设面积阈值时,确定该待检测视频是闪烁视频,或者,也可以采用其他检测方案,对该待检测视频是否为闪烁视频进行进一步的检测。
上述方法中,进行视频闪烁检测的待检测视频图像可以是从待检测视频的第二帧视频图像开始后的每一帧视频图像,从而可以在检测时,基于待检测视频图像与其前一帧视频图像之间的帧差图像进行二值化处理,得到二值化帧差图像。
本发明实施例中,在得到二值化帧差图像后,采用扫描线算法,从该二值化帧差图像中排除不满足预设大小条件的区域,得到扫描处理后图像,可以通过以下几种方式实现:
第一种方式:
通过对二值化帧差图像进行逐行扫描,将该二值化帧差图像每行中数量小于预设行数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到行扫描处理后图像,作为扫描处理后图像。
本方式中,对二值化帧差图像进行逐行扫描,统计每行中每一组亮度值为1的多个连续的像素点的数量Sum1(p),p表示第p组,当Sum1(p)小于预设行数量阈值M时,将该组包括的多个连续的像素点的亮度值1变更为0,当Sum1(p)不小于预设行数量阈值M时,该组包括的多个连续的像素点的亮度值1保持不变,对该二值化帧差图像的所有行进行上述处理,得到行扫描处理后图像,作为扫描处理后图像。
第二种方式:
通过对二值化帧差图像进行逐列扫描,将该二值化帧差图像每列中数量小于预设列数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到列扫描处理后图像,作为扫描处理后图像。
本方式中,对二值化帧差图像进行逐列扫描,统计每列中每一组亮度值为1的多个连续的像素点的数量Sum2(q),q表示第q组,当Sum2(q)小于预设列数量阈值N时,将该组包括的多个连续的像素点的亮度值1变更为0,当Sum2(q)不小于预设列数量阈值N时,该组包括的多个连续的像素点的亮度值1保持不变,对该二值化帧差图像的所有列进行上述处理,得到列扫描处理后图像,作为扫描处理后图像。
第三种方式:
通过对二值化帧差图像进行逐行扫描,将所述二值化帧差图像每行中数量小于预设行数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到行扫描处理后图像;并通过对该二值化帧差图像进行逐列扫描,将该二值化帧差图像每列中数量小于预设列数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到列扫描处理后图像;将该行扫描处理后图像与该列扫描处理后图像中相同位置的像素点的亮度值进行逻辑与运算,得到与运算处理后图像,作为扫描处理后图像。
本方式中,对二值化帧差图像进行逐行扫描,统计每行中每一组亮度值为1的多个连续的像素点的数量Sum1(p),p表示第p组,当Sum1(p)小于预设行数量阈值M时,将该组包括的多个连续的像素点的亮度值1变更为0,当Sum1(p)不小于预设行数量阈值M时,该组包括的多个连续的像素点的亮度值1保持不变,对该二值化帧差图像的所有行进行上述处理,得到行扫描处理后图像。再对二值化帧差图像进行逐列扫描,统计每列中每一组亮度值为1的多个连续的像素点的数量Sum2(q),q表示第q组,当Sum2(q)小于预设列数量阈值N时,将该组包括的多个连续的像素点的亮度值1变更为0,当Sum2(q)不小于预设列数量阈值N时,该组包括的多个连续的像素点的亮度值1保持不变,对该二值化帧差图像的所有列进行上述处理,得到列扫描处理后图像。将该行扫描处理后图像与该列扫描处理后图像中相同位置的像素点的亮度值进行逻辑与运算,当该行扫描处理后图像与该列扫描处理后图像中相同位置的像素点的亮度值不同时,该逻辑与运算的结果为0,当该行扫描处理后图像与该列扫描处理后图像中相同位置的像素点的亮度值相同为0时,该逻辑与运算的结果为0,当该行扫描处理后图像与该列扫描处理后图像中相同位置的像素点的亮度值相同为1时,该逻辑与运算的结果为1,得到与运算处理后图像,作为扫描处理后图像。
本发明实施例中,确定扫描处理后图像中的各连通区域的具体处理方法可以采用现有技术中的各种方式,例如:对扫描处理后图像中的每个亮度值为1的像素点进行四邻域扫描,即扫描该像素点上、下、左、右位置的像素点的亮度值,当扫描到该像素点的四邻域内有亮度值为1的像素点时,将该像素点与四邻域内的亮度值为1的像素点连通,对该扫描处理后图像中每一个亮度值为1的像素点进行上述处理后,得到多个连通区域。还可以对扫描处理后图像中的每个亮度值为1的像素点进行八邻域扫描,具体处理步骤与上述进行四邻域扫描的处理步骤相同,在此不再进行详细描述。
下面结合附图,用具体实施例对本发明提供的方法及装置进行详细描述。
实施例1:
图2为本发明实施例1提供的一种视频闪烁检测方法的流程图,具体包括如下处理步骤:
步骤201、从待检测视频中获取待检测视频图像。
步骤202、利用背景帧差法,确定该待检测视频图像与其前一帧视频图像之间的帧差图像,具体可以如下:
将待检测视频图像中每一个像素点的亮度值与其前一帧视频图像中与该像素点位置相同的像素点的亮度值的差值,确定为帧差图像中与该待检测视频图像的该像素点位置相同的像素点的亮度值,从而得到帧差图像。
步骤203、对该帧差图像进行二值化处理,得到二值化帧差图像。
步骤204、采用扫描线算法,从该二值化帧差图像中排除不满足预设大小条件的区域,得到扫描处理后图像。
步骤205、确定该扫描处理后图像中各连通区域的面积是否均小于预设面积阈值,如果是,进入步骤206,如果否,进入步骤207。
其中,该扫描处理后图像中的各连通区域的面积可以为该连通区域包括的像素点的个数A(i),i表示第i个连通区域。
步骤206、当该扫描处理后图像中各连通区域的面积均小于预设面积阈值时,确定该待检测视频不是闪烁视频。
本步骤中,当每一个连通区域的A(i)均小于预设面积阈值A时,确定该待检测视频不是闪烁视频。
步骤207、当该扫描处理后图像中各连通区域的面积不均小于预设面积阈值时,将该扫描处理后图像中面积不小于预设面积阈值的各连通区域,确定为各待检测连通区域。
本步骤中,该扫描处理后图像中的每个连通区域的面积即该连通区域包括的像素点的个数A(i),i表示第i个连通区域,当存在一个连通区域或多个连通区域的A(i)不小于预设面积阈值A时,将A(i)不小于A的连通区域,确定为各待检测连通区域。
步骤208、分别确定各待检测连通区域的区域密度,该区域密度表征各待检测连通区域中有效像素点所占比重。
本步骤中,对每一个待检测连通区域,可以采用如下方式确定区域密度:
对该待检测连通区域进行逐行扫描,统计每一行的像素点数量len(j),j表示第j行,将该待检测连通区域中len(j)大于预设长度阈值L的各行的像素点的总和,确定为该待检测连通区域的有效像素点的数量B(k),k表示第k个待检测连通区域,将该待检测连通区域的有效像素点的数量B(k)与该待检测连通区域的像素点总数C(k)的比值R(k),确定为该待检测连通区域的区域密度。
步骤209、确定各待检测连通区域的区域密度是否均小于预设密度阈值,如果是,进入步骤210,如果否,进入步骤211。
步骤210、当各待检测连通区域的区域密度均小于预设密度阈值时,确定该待检测视频不是闪烁视频。
本步骤中,当各待检测连通区域的区域密度R(k)均小于预设密度阈值R时,确定该待检测视频不是闪烁视频。
步骤211、当各待检测连通区域的区域密度不均小于预设密度阈值时,确定该待检测视频是闪烁视频。
本步骤中,当各待检测连通区域中存在一个连通区域或多个连通区域的区域密度R(k)不小于预设密度阈值R时,确定该待检测视频是闪烁视频。
进一步的,当确定该待检测视频是闪烁视频时,还可以采用如下公式确定所述待检测视频的闪烁强度:
I=100%*SumRect/SumAll;
其中,I表示待检测视频的闪烁强度,SumRect为待检测视频图像中所有的待检测连通区域包括的有效像素点的总数量,SumAll为该待检测视频图像包括的像素点数量。
实施例2:
图3为本发明实施例2提供的一种视频闪烁检测方法的流程图,具体包括如下处理步骤:
步骤301、从待检测视频中获取待检测视频图像。
步骤302、利用背景帧差法,确定该待检测视频图像与其前一帧视频图像之间的帧差图像,具体可以如下:
将待检测视频图像中每一个像素点的亮度值与其前一帧视频图像中与该像素点位置相同的像素点的亮度值的差值,确定为帧差图像中与该待检测视频图像的该像素点位置相同的像素点的亮度值,从而得到帧差图像。
步骤303、确定该帧差图像的平均亮度值。
本步骤中,将帧差图像中每一个像素点的亮度值求和并做平均,得到该帧差图像的平均亮度值G1。
步骤304、确定该平均亮度值G1是否不小于预设亮度阈值Y,如果小于,进入步骤305,如果不小于,进入步骤306。
步骤305、当G1小于Y时,确定该待检测视频不是闪烁视频。
步骤306、对该帧差图像进行二值化处理,得到二值化帧差图像。
步骤307、采用扫描线算法,从该二值化帧差图像中排除不满足预设大小条件的区域,得到扫描处理后图像。
步骤308、确定该扫描处理后图像中各连通区域的面积是否均小于预设面积阈值,如果是,进入步骤309,如果否,进入步骤310。
其中,该扫描处理后图像中的各连通区域的面积可以为该连通区域包括的像素点的个数A(i),i表示第i个连通区域。
步骤309、当该扫描处理后图像中各连通区域的面积均小于预设面积阈值时,确定该待检测视频不是闪烁视频。
本步骤中,当每一个连通区域的A(i)均小于预设面积阈值A时,确定该待检测视频不是闪烁视频。
步骤310、当该扫描处理后图像中各连通区域的面积不均小于预设面积阈值,确定该待检测视频是闪烁视频。
本步骤中,当存在一个连通区域或多个连通区域的A(i)不小于预设面积阈值A时,确定该待检测视频是闪烁视频。
进一步的,当确定该待检测视频是闪烁视频时,还可以确定出该待检测视频的闪烁强度。例如,可以采用与上述实施例1步骤211后确定闪烁强度相同的方法,在此不再进行详细描述。
实施例3:
图4为本发明实施例3提供的一种视频闪烁检测方法的流程图,具体包括如下处理步骤:
步骤401、从待检测视频中获取待检测视频图像。
步骤402、利用背景帧差法,确定该待检测视频图像与其前一帧视频图像之间的帧差图像,具体可以如下:
将待检测视频图像中每一个像素点的亮度值与其前一帧视频图像中与该像素点位置相同的像素点的亮度值的差值,确定为帧差图像中与该待检测视频图像的该像素点位置相同的像素点的亮度值,从而得到帧差图像。
步骤403、确定该帧差图像的平均亮度值。
本步骤中,将帧差图像中每一个像素点的亮度值求和并做平均,得到该帧差图像的平均亮度值G1。
步骤404、确定该平均亮度值G1是否不小于预设亮度阈值Y,如果小于,进入步骤405,如果不小于,进入步骤406。
步骤405、当G1小于Y时,确定该待检测视频不是闪烁视频。
步骤406、对该帧差图像进行二值化处理,得到二值化帧差图像。
步骤407、采用扫描线算法,从该二值化帧差图像中排除不满足预设大小条件的区域,得到扫描处理后图像。
步骤408、确定该扫描处理后图像中各连通区域的面积是否均小于预设面积阈值,如果是,进入步骤409,如果否,进入步骤410。
其中,该扫描处理后图像中的各连通区域的面积可以为该连通区域包括的像素点的个数A(i),i表示第i个连通区域。
步骤409、当该扫描处理后图像中各连通区域的面积均小于预设面积阈值,确定该待检测视频不是闪烁视频。
本步骤中,当每一个连通区域的A(i)均小于预设面积阈值A时,确定该待检测视频不是闪烁视频。
步骤410、当该扫描处理后图像中各连通区域的面积不均小于预设面积阈值,将该扫描处理后图像中面积不小于预设面积阈值的各连通区域,确定为各待检测连通区域。
本步骤中,该扫描处理后图像中的每个连通区域的面积即该连通区域包括的像素点的个数A(i),i表示第i个连通区域,当存在一个连通区域或多个连通区域的A(i)不小于预设面积阈值A时,将A(i)不小于A的连通区域,确定为各待检测连通区域。
步骤411、分别确定各待检测连通区域的区域密度,该区域密度表征各待检测连通区域中有效像素点所占比重。
本步骤中,对每一个待检测连通区域,可以采用如下方式确定区域密度:
对该待检测连通区域进行逐行扫描,统计每一行的像素点数量len(j),j表示第j行,将该待检测连通区域中len(j)大于预设长度阈值L的各行的像素点的总和,确定为该待检测连通区域的有效像素点的数量B(k),k表示第k个待检测连通区域,将该待检测连通区域的有效像素点的数量B(k)与该待检测连通区域的像素点总数C(k)的比值R(k),确定为该待检测连通区域的区域密度。
步骤412、确定各待检测连通区域的区域密度是否均小于预设密度阈值,如果是,进入步骤413,如果否,进入步骤414。
步骤413、当各待检测连通区域的区域密度均小于预设密度阈值时,确定该待检测视频不是闪烁视频。
本步骤中,当各待检测连通区域的区域密度R(k)均小于预设密度阈值R时,确定该待检测视频不是闪烁视频。
步骤414、当各待检测连通区域的区域密度不均小于预设密度阈值时,确定该待检测视频是闪烁视频。
本步骤中,当各待检测连通区域中存在一个连通区域或多个连通区域的区域密度R(k)不小于预设密度阈值R时,确定该待检测视频是闪烁视频。
进一步的,当确定该待检测视频是闪烁视频时,还可以确定出该待检测视频的闪烁强度。例如,可以采用与上述实施例1步骤211后确定闪烁强度相同的方法,在此不再进行详细描述。
通过本发明上述实施例1-3提供的方法,由于采用扫描线法从二值化帧差图像中排除不满足预设大小条件的区域,从而排除了运动目标对闪烁检测带来的干扰,并且将扫描处理后图像进行区域连通,使得有效的闪烁区域保留下来,从而降低了漏检率,并且整个检测过程是自动检测,不需要人工参与检测,即相比现有技术提高了进行视频闪烁检测的可靠性、准确率和检测效率。
实施例4:
基于同一发明构思,根据本发明上述实施例提供的视频闪烁检测方法,相应地,本发明实施例4还提供了一种视频闪烁检测装置,其结构示意图如图5所示,具体包括:
获取单元501、用于从待检测视频中获取待检测视频图像;
二值化处理单元502,用于对所述待检测视频图像与其前一帧视频图像之间的帧差图像进行二值化处理,得到二值化帧差图像;
扫描单元503,用于从所述二值化帧差图像中排除不满足预设大小条件的区域,得到扫描处理后图像;
第一闪烁确定单元504,用于当所述扫描处理后图像中各连通区域的面积均小于预设面积阈值时,确定所述待检测视频不是闪烁视频。
进一步的,扫描单元503,具体用于通过对所述二值化帧差图像进行逐行扫描,将所述二值化帧差图像每行中数量小于预设行数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到行扫描处理后图像,作为扫描处理后图像;或者
通过对所述二值化帧差图像进行逐列扫描,将所述二值化帧差图像每列中数量小于预设列数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到列扫描处理后图像,作为扫描处理后图像;或者
通过对所述二值化帧差图像进行逐行扫描,将所述二值化帧差图像每行中数量小于预设行数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到行扫描处理后图像;并通过对所述二值化帧差图像进行逐列扫描,将所述二值化帧差图像每列中数量小于预设列数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到列扫描处理后图像;将所述行扫描处理后图像与所述列扫描处理后图像中相同位置的像素点的亮度值进行逻辑与运算,得到与运算处理后图像,作为扫描处理后图像。
进一步的,第一闪烁确定单元504,还用于当所述扫描处理后图像中各连通区域的面积不均小于预设面积阈值时,确定所述待检测视频是闪烁视频。
进一步的,上述装置,还包括:
连通区域确定单元505,用于当所述扫描处理后图像中各连通区域的面积不均小于预设面积阈值时,将所述扫描处理后图像中面积不小于预设面积阈值的各连通区域,确定为各待检测连通区域;
区域密度确定单元506,用于分别确定所述各待检测连通区域的区域密度,所述区域密度表征各待检测连通区域中有效像素点所占比重;
第二闪烁确定单元507,用于当所述各待检测连通区域的区域密度均小于预设密度阈值时,确定所述待检测视频不是闪烁视频,否则,确定所述待检测视频是闪烁视频。
进一步的,区域密度确定单元506,具体用于通过对每个待检测连通区域进行逐行扫描,将该待检测连通区域中像素点数量大于预设长度阈值的各行的像素点,确定为该待检测连通区域的有效像素点;将该待检测连通区域的有效像素点的数量与该待检测连通区域的像素点总数的比值,确定为该待检测连通区域的区域密度。
进一步的,第二闪烁确定单元507,还用于在确定所述待检测视频是闪烁视频之后,采用如下公式确定所述待检测视频的闪烁强度:
I=100%*SumRect/SumAll;
其中,I表示待检测视频的闪烁强度,SumRect为待检测视频图像中所有的待检测连通区域包括的有效像素点的总数量,SumAll为该待检测视频图像包括的像素点数量。
进一步的,上述装置,还包括:
亮度值确定单元508,用于在所述二值化处理单元对所述待检测视频图像与其前一帧视频图像之间的帧差图像进行二值化处理,得到二值化帧差图像之前,确定所述待检测视频图像与其前一帧视频图像之间的帧差图像的平均亮度值;
第三闪烁确定单元509,用于确定所述平均亮度值不小于预设亮度阈值。
进一步的,第三闪烁确定单元509,还用于当所述平均亮度值小于所述预设亮度阈值时,确定所述待检测视频不是闪烁视频。
上述各单元的功能可对应于图2-图4所示流程中的相应处理步骤,在此不再赘述。
综上所述,本发明实施例提供的方案,包括:从待检测视频中获取待检测视频图像,对该待检测视频图像与其前一帧视频图像之间的帧差图像进行二值化处理,得到二值化帧差图像,并采用扫描线算法,从该二值化帧差图像中排除不满足预设大小条件的区域,得到扫描处理后图像,当该扫描处理后图像中各连通区域的面积均小于预设面积阈值,确定该待检测视频不是闪烁视频。采用本发明实施例提供的方案,提高了进行视频闪烁检测的可靠性、准确率和检测效率。
本申请的实施例所提供的视频闪烁检测装置可通过计算机程序实现。本领域技术人员应该能够理解,上述的模块划分方式仅是众多模块划分方式中的一种,如果划分为其他模块或不划分模块,只要视频闪烁检测装置具有上述功能,都应该在本申请的保护范围之内。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (12)
1.一种视频闪烁检测方法,其特征在于,包括:
从待检测视频中获取待检测视频图像;
对所述待检测视频图像与其前一帧视频图像之间的帧差图像进行二值化处理,得到二值化帧差图像;
采用扫描线算法,从所述二值化帧差图像中排除不满足预设大小条件的区域,得到扫描处理后图像;
当所述扫描处理后图像中各连通区域的面积均小于预设面积阈值时,确定所述待检测视频不是闪烁视频;
其中,当所述扫描处理后图像中各连通区域的面积不均小于预设面积阈值时,将所述扫描处理后图像中面积不小于预设面积阈值的各连通区域,确定为各待检测连通区域;分别确定所述各待检测连通区域的区域密度,所述区域密度表征各待检测连通区域中有效像素点所占比重;当所述各待检测连通区域的区域密度均小于预设密度阈值时,确定所述待检测视频不是闪烁视频,否则,确定所述待检测视频是闪烁视频。
2.如权利要求1所述的方法,其特征在于,采用扫描线算法,从所述二值化帧差图像中排除不满足预设大小条件的区域,得到扫描处理后图像,具体包括:
通过对所述二值化帧差图像进行逐行扫描,将所述二值化帧差图像每行中数量小于预设行数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到行扫描处理后图像,作为扫描处理后图像;或者
通过对所述二值化帧差图像进行逐列扫描,将所述二值化帧差图像每列中数量小于预设列数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到列扫描处理后图像,作为扫描处理后图像;或者
通过对所述二值化帧差图像进行逐行扫描,将所述二值化帧差图像每行中数量小于预设行数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到行扫描处理后图像;并通过对所述二值化帧差图像进行逐列扫描,将所述二值化帧差图像每列中数量小于预设列数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到列扫描处理后图像;将所述行扫描处理后图像与所述列扫描处理后图像中相同位置的像素点的亮度值进行逻辑与运算,得到与运算处理后图像,作为扫描处理后图像。
3.如权利要求1所述的方法,其特征在于,分别确定所述各待检测连通区域的区域密度,具体包括:
通过对每个待检测连通区域进行逐行扫描,将该待检测连通区域中像素点数量大于预设长度阈值的各行的像素点,确定为该待检测连通区域的有效像素点;将该待检测连通区域的有效像素点的数量与该待检测连通区域的像素点总数的比值,确定为该待检测连通区域的区域密度。
4.如权利要求1所述的方法,其特征在于,在确定所述待检测视频是闪烁视频之后,还包括:
采用如下公式确定所述待检测视频的闪烁强度:
I=100%*SumRect/SumAll;
其中,I表示待检测视频的闪烁强度,SumRect为待检测视频图像中所有的待检测连通区域包括的有效像素点的总数量,SumAll为该待检测视频图像包括的像素点数量。
5.如权利要求1-4任一所述的方法,其特征在于,在对所述待检测视频图像与其前一帧视频图像之间的帧差图像进行二值化处理,得到二值化帧差图像之前,还包括:
确定所述待检测视频图像与其前一帧视频图像之间的帧差图像的平均亮度值;
确定所述平均亮度值不小于预设亮度阈值。
6.如权利要求5所述的方法,其特征在于,还包括:
当所述平均亮度值小于所述预设亮度阈值时,确定所述待检测视频不是闪烁视频。
7.一种视频闪烁检测装置,其特征在于,包括:
获取单元,用于从待检测视频中获取待检测视频图像;
二值化处理单元,用于对所述待检测视频图像与其前一帧视频图像之间的帧差图像进行二值化处理,得到二值化帧差图像;
扫描单元,用于从所述二值化帧差图像中排除不满足预设大小条件的区域,得到扫描处理后图像;
第一闪烁确定单元,用于当所述扫描处理后图像中各连通区域的面积均小于预设面积阈值时,确定所述待检测视频不是闪烁视频;
连通区域确定单元,用于当所述扫描处理后图像中各连通区域的面积不均小于预设面积阈值时,将所述扫描处理后图像中面积不小于预设面积阈值的各连通区域,确定为各待检测连通区域;
区域密度确定单元,用于分别确定所述各待检测连通区域的区域密度,所述区域密度表征各待检测连通区域中有效像素点所占比重;
第二闪烁确定单元,用于当所述各待检测连通区域的区域密度均小于预设密度阈值时,确定所述待检测视频不是闪烁视频,否则,确定所述待检测视频是闪烁视频。
8.如权利要求7所述的装置,其特征在于,所述扫描单元,具体用于通过对所述二值化帧差图像进行逐行扫描,将所述二值化帧差图像每行中数量小于预设行数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到行扫描处理后图像,作为扫描处理后图像;或者
通过对所述二值化帧差图像进行逐列扫描,将所述二值化帧差图像每列中数量小于预设列数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到列扫描处理后图像,作为扫描处理后图像;或者
通过对所述二值化帧差图像进行逐行扫描,将所述二值化帧差图像每行中数量小于预设行数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到行扫描处理后图像;并通过对所述二值化帧差图像进行逐列扫描,将所述二值化帧差图像每列中数量小于预设列数量阈值的亮度值为1的多个连续的像素点的亮度值变更为0,得到列扫描处理后图像;将所述行扫描处理后图像与所述列扫描处理后图像中相同位置的像素点的亮度值进行逻辑与运算,得到与运算处理后图像,作为扫描处理后图像。
9.如权利要求7所述的装置,其特征在于,所述区域密度确定单元,具体用于通过对每个待检测连通区域进行逐行扫描,将该待检测连通区域中像素点数量大于预设长度阈值的各行的像素点,确定为该待检测连通区域的有效像素点;将该待检测连通区域的有效像素点的数量与该待检测连通区域的像素点总数的比值,确定为该待检测连通区域的区域密度。
10.如权利要求7所述的装置,其特征在于,所述第二闪烁确定单元,还用于在确定所述待检测视频是闪烁视频之后,采用如下公式确定所述待检测视频的闪烁强度:
I=100%*SumRect/SumAll;
其中,I表示待检测视频的闪烁强度,SumRect为待检测视频图像中所有的待检测连通区域包括的有效像素点的总数量,SumAll为该待检测视频图像包括的像素点数量。
11.如权利要求7-10任一所述的装置,其特征在于,还包括:
亮度值确定单元,用于在所述二值化处理单元对所述待检测视频图像与其前一帧视频图像之间的帧差图像进行二值化处理,得到二值化帧差图像之前,确定所述待检测视频图像与其前一帧视频图像之间的帧差图像的平均亮度值;
第三闪烁确定单元,用于确定所述平均亮度值不小于预设亮度阈值。
12.如权利要求11所述的装置,其特征在于,所述第三闪烁确定单元,还用于当所述平均亮度值小于所述预设亮度阈值时,确定所述待检测视频不是闪烁视频。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310319280.8A CN104346793B (zh) | 2013-07-25 | 2013-07-25 | 一种视频闪烁检测方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310319280.8A CN104346793B (zh) | 2013-07-25 | 2013-07-25 | 一种视频闪烁检测方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104346793A CN104346793A (zh) | 2015-02-11 |
CN104346793B true CN104346793B (zh) | 2017-11-21 |
Family
ID=52502336
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310319280.8A Active CN104346793B (zh) | 2013-07-25 | 2013-07-25 | 一种视频闪烁检测方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104346793B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104730074B (zh) * | 2015-03-05 | 2017-05-31 | 广州视源电子科技股份有限公司 | 一种金针类元件的引脚检测方法及装置 |
CN110580741B (zh) * | 2019-09-05 | 2023-04-07 | 深圳市赛为智能股份有限公司 | 婴幼儿吐奶行为检测方法、装置、计算机设备及存储介质 |
CN111510709B (zh) * | 2020-04-24 | 2022-02-01 | 展讯通信(上海)有限公司 | 图像频闪检测方法及装置、存储介质、终端 |
CN111510708B (zh) * | 2020-04-24 | 2022-02-01 | 展讯通信(上海)有限公司 | 图像频闪检测方法及装置、存储介质、终端 |
CN113935360B (zh) * | 2020-06-29 | 2024-07-19 | 腾讯科技(深圳)有限公司 | 视频中辅助线的识别方法、装置、设备及可读存储介质 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101170708A (zh) * | 2006-10-25 | 2008-04-30 | 三星电子株式会社 | 改进图像闪烁的显示装置和方法 |
CN102175206A (zh) * | 2011-02-21 | 2011-09-07 | 合肥工业大学 | 一种基于三维表面形貌仪的谷的连通性测量方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008114658A1 (ja) * | 2007-03-16 | 2008-09-25 | Sony Corporation | 画像処理装置、画像表示装置および画像処理方法 |
-
2013
- 2013-07-25 CN CN201310319280.8A patent/CN104346793B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101170708A (zh) * | 2006-10-25 | 2008-04-30 | 三星电子株式会社 | 改进图像闪烁的显示装置和方法 |
CN102175206A (zh) * | 2011-02-21 | 2011-09-07 | 合肥工业大学 | 一种基于三维表面形貌仪的谷的连通性测量方法 |
Non-Patent Citations (4)
Title |
---|
ON THE VISIBILITY OF FLICKER DISTORTIONS IN NATURALISTIC VIDEOS;Lark Kwon Choi 等;《Quality of Multimedia Experience》;20130705;第164-169页 * |
Temporal Flicker Reduction and Denoising in Video using Sparse Directional Transforms;Sandeep Kanumuri 等;《Applications of Digital Image Processing》;20080810;第1-11页 * |
基于特征显著性的目标识别方法及其应用研究;陈振学;《中国博士学位论文全文数据库 信息科技辑》;20090515;正文第55页第3段 * |
旧电影图像质量评价方法研究;王景艳;《中国优秀硕士学位论文全文数据库 信息科技辑》;20121015;正文第7页第1段、2.1节第1段、第15页2.4.1节第1-2段、第17页4段 * |
Also Published As
Publication number | Publication date |
---|---|
CN104346793A (zh) | 2015-02-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104346793B (zh) | 一种视频闪烁检测方法及装置 | |
CN104424632B (zh) | 一种视频对比度异常检测方法及装置 | |
CN104486618A (zh) | 视频图像的噪声检测方法及装置 | |
CN109801322B (zh) | 一种漏光检测方法及装置 | |
CN103810696B (zh) | 一种目标对象图像检测方法及装置 | |
CN106599783A (zh) | 一种视频遮挡检测方法及装置 | |
CN110827269B (zh) | 农作物生长变化状况检测方法、装置、设备及介质 | |
US8781158B1 (en) | UVB-visible channel apparatus and method for viewing a scene comprising terrestrial corona radiation | |
CN107146252A (zh) | 一种大数据图像处理装置 | |
CN108133488A (zh) | 一种红外图像前景检测方法及设备 | |
CN103778609A (zh) | 基于像素连续性判断的二值化图像和灰度图像的高效去噪声法 | |
CN104657997B (zh) | 一种镜头移位检测方法及装置 | |
CN116385758A (zh) | 基于YOLOv5网络对传送带表面损伤的检测方法 | |
CN105719252B (zh) | 一种铁路巡检图像实时高动态范围绘制方法和装置 | |
CN106254723B (zh) | 一种实时监测视频噪声干扰的方法 | |
CN104427210B (zh) | 一种随机异常闪烁点检测方法及装置 | |
CN117934355B (zh) | 一种水下机器人视觉定位方法 | |
CN113191270B (zh) | 抛洒事件检测方法、装置、电子设备及存储介质 | |
CN107944424A (zh) | 分布前端人像采集及多角度人像比对方法 | |
CN115601712B (zh) | 适用于现场安全措施的图像数据处理方法及系统 | |
DE102014222972A1 (de) | Verfahren zur Bildverarbeitung, Präsenzdetektor und Beleuchtungssystem | |
CN104112266B (zh) | 一种图像边缘虚化的检测方法和装置 | |
WO2016087202A1 (de) | Bildverarbeitung mittels kreuzkorrelation | |
CN109361854A (zh) | 一种基于mtf的摄像机调焦方法、装置及系统 | |
CN112945897B (zh) | 一种连续太赫兹图像非均匀性校正方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |