CN112672009A - 一种视频处理方法、装置、设备及存储介质 - Google Patents
一种视频处理方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN112672009A CN112672009A CN202011475940.8A CN202011475940A CN112672009A CN 112672009 A CN112672009 A CN 112672009A CN 202011475940 A CN202011475940 A CN 202011475940A CN 112672009 A CN112672009 A CN 112672009A
- Authority
- CN
- China
- Prior art keywords
- time
- video frame
- warning
- video
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 13
- 238000012545 processing Methods 0.000 claims abstract description 54
- 238000000034 method Methods 0.000 claims abstract description 51
- 230000001960 triggered effect Effects 0.000 claims abstract description 27
- 230000015654 memory Effects 0.000 claims description 29
- 230000001360 synchronised effect Effects 0.000 claims description 15
- 230000008569 process Effects 0.000 abstract description 21
- 238000012544 monitoring process Methods 0.000 abstract description 18
- 238000010586 diagram Methods 0.000 description 16
- 230000006870 function Effects 0.000 description 9
- 238000004590 computer program Methods 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 230000004397 blinking Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000005286 illumination Methods 0.000 description 3
- 230000000630 rising effect Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000000047 product Substances 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000005096 rolling process Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Images
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B20/00—Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
- Y02B20/40—Control techniques providing energy savings, e.g. smart controller or presence detection
Landscapes
- Studio Devices (AREA)
Abstract
本申请提供一种视频处理方法、装置、设备及存储介质,涉及图像技术领域,用于处理警戒摄像机在警戒灯闪烁过程中导致的监控画面闪烁的问题。该方法包括:在确定设定的警戒事件触发时,根据图像传感器的曝光参数确定最大亮灯时间;其中,所述警戒摄像机包括的警戒灯在警戒事件触发时闪烁,在每一次闪烁周期内所述警戒灯按照设定的亮灯节拍被点亮多次,所述最大亮灯时间为所述警戒灯每一次被点亮的最大时间;根据所述最大亮灯时间以及所述亮灯节拍,确定图像数据信号中每一次所述闪烁周期内所述警戒灯被点亮时的视频帧序列;针对所述视频帧序列中的每一视频帧,将所述每一视频帧位置替换为所述每一视频帧的相邻视频帧。
Description
技术领域
本申请涉及图像技术领域,提供一种视频处理方法、装置、设备及存储介质。
背景技术
警戒摄像机由摄像机和警戒装置组成,警戒装置可以为警戒灯,当警戒摄像机被警戒事件触发后可使用警戒灯发出闪烁的警戒光来进行警戒。
当警戒摄像机在白天进行使用时,室外环境亮度较大,警戒灯的亮、灭对整体监控画面亮度影响较小;但是,当警戒摄像机在夜晚进行使用时,室外环境亮度较低,当警戒灯被点亮,整个监控画面会产生过曝光,因而警戒灯闪烁时,监控图像也会相应的出现闪烁,对监控画面质量影响较大,无法满足对监控视频画面质量的需求。
因此,如何解决警戒摄像机在警戒灯闪烁过程中导致的监控画面闪烁的问题是目前亟待解决的问题。
发明内容
本申请实施例提供一种视频处理方法、装置、设备及存储介质,用于处理警戒摄像机在警戒灯闪烁过程中导致的监控画面闪烁的问题。
一方面,提供一种视频处理方法,所述方法包括:
在确定设定的警戒事件触发时,根据图像传感器的曝光参数确定最大亮灯时间;其中,所述警戒摄像机包括的警戒灯在警戒事件触发时闪烁,在每一次闪烁周期内所述警戒灯按照设定的亮灯节拍被点亮多次,所述最大亮灯时间为所述警戒灯每一次被点亮的最大时间;
根据所述最大亮灯时间以及所述亮灯节拍,确定图像数据信号中每一次所述闪烁周期内所述警戒灯被点亮时的视频帧序列;
针对所述视频帧序列中的每一视频帧,将所述每一视频帧位置替换为所述每一视频帧的相邻视频帧。
一方面,提供一种视频处理装置,所述装置包括:
确定单元,用于在确定设定的警戒事件触发时,根据图像传感器的曝光参数确定最大亮灯时间;其中,所述警戒摄像机包括的警戒灯在警戒事件触发时闪烁,在每一次闪烁周期内所述警戒灯按照设定的亮灯节拍被点亮多次,所述最大亮灯时间为所述警戒灯每一次被点亮的最大时间;根据所述最大亮灯时间以及所述亮灯节拍,确定图像数据信号中每一次所述闪烁周期内所述警戒灯被点亮时的视频帧序列;
帧替换单元,用于针对所述视频帧序列中的每一视频帧,将所述每一视频帧位置替换为所述每一视频帧的相邻视频帧。
可选的,所述确定单元,还用于:
在确定所述设定的警戒事件触发时,获取所述图像传感器的曝光参数;
根据所述曝光参数将所述图像传感器的曝光参数设置为固定值;
根据所述曝光参数的固定值确定所述最大亮灯时间。
可选的,所述确定单元,还用于:
根据所述图像传感器的曝光参数确定上一帧最后一行有效像素行曝光结束的第一时刻以及下一帧第一行有效像素行曝光开始的第二时刻;
根据所述第一时刻以及所述第二时刻确定所述最大亮灯时间。
可选的,所述确定单元,还用于在根据所述最大亮灯时间以及所述亮灯节拍,确定图像数据信号中每一次所述闪烁周期内所述警戒灯被点亮时的视频帧序列之后,根据所述视频帧序列生成控制所述警戒灯点亮的控制信号,其中,所述警戒灯每一次点亮时间与所述视频帧序列所在的时间位置一一对应。
可选的,所述确定单元,还用于所述警戒灯每一次被点亮时的实际亮灯时间小于或者等于所述最大亮灯时间。
可选的,所述确定单元,还用于:
根据所述图像传感器输出的帧同步信号,对所述图像传感器输出的图像数据信号进行同步;
根据所述最大亮灯时间以及所述亮灯节拍,确定图像数据信号中每一次所述闪烁周期内所述警戒灯被点亮时的视频帧序列,包括:
根据帧同步信号对所述图像数据信号与所述帧同步信号进行同步处理;
根据所述最大亮灯时间以及所述亮灯节拍,确定同步后的所述图像数据信号中每一次所述闪烁周期内所述警戒灯被点亮时的视频帧序列。
可选的,所述确定单元,还用于:
在根据帧同步信号对所述图像数据信号与所述帧同步信号进行同步处理之前,在所述图像传感器的工作模式为主模式时,所述图像传感器主动曝光,并输出帧同步信号;或者,
在所述图像传感器的工作模式为从模式时,所述图像传感器接收外部输入的帧同步信号,并根据帧同步信号进行曝光。
可选的,所述帧替换单元,还用于:
将所述视频流中所述每一视频帧位置替换为所述每一视频帧的前一视频帧;或者,
将所述视频流中所述每一视频帧位置替换为所述每一视频帧的后一视频帧。
一方面,提供一种视频处理的设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述任一种方法的步骤。
一方面,提供一种计算机存储介质,其上存储有计算机程序指令,该计算机程序指令被处理器执行时实现上述任一种方法的步骤。
本申请实施例中,在确定设定的警戒事件触发时,根据图像传感器的曝光参数计算最大亮灯时间,最大亮灯时间为警戒事件触发后警戒灯的每一次闪烁周期内每一次被点亮的最大时间,并根据最大亮灯时间以及每一次闪烁周期的亮灯节拍,确定图像数据信号中每一次闪烁周期内警戒灯被点亮时的视频帧序列,针对视频帧序列中的每一视频帧,将每一视频帧位置替换为每一视频帧的相邻视频帧。因此,本申请实施例可以通过计算得出的最大亮灯时间以及每一次闪烁周期的亮灯节拍,确定周期内警戒灯被点亮时的视频帧序列,并将视频帧序列中的每一视频帧位置替换为每一视频帧的相邻视频帧,进而在满足警戒灯于警戒过程中正常警戒的同时,又能保证在警戒灯闪烁的过程中对监控图像画面质量的正常需求,对警戒灯闪烁带来的画面闪烁的问题进行抑制,提高监控画面质量。
附图说明
为了更清楚地说明本申请实施例或相关技术中的技术方案,下面将对实施例或相关技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请实施例提供的警戒摄像机的一种应用场景示意图;
图2为本申请实施例提供的视频处理方法的一种流程示意图;
图3a为本申请实施例提供的白天曝光时序图的示意图;
图3b为本申请实施例提供的夜晚曝光时序图的示意图;
图4为本申请实施例提供的帧同步的一种示意图;
图5为本申请实施例提供的警戒灯控制信号的一种示意图;
图6为本申请实施例提供的确定视频帧序列的一种示意图;
图7为本申请实施例提供的视频处理结果的一种示意图;
图8为本申请实施例提供的视频处理装置的一种示意图;
图9为本申请实施例提供的视频处理设备的一种示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚明白,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互任意组合。并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
目前,当警戒摄像机在白天进行使用时,室外环境亮度较大,警戒摄像机的警戒灯的亮、灭对整体监控画面亮度影响较小;而当警戒摄像机在夜晚进行使用时,室外环境亮度较低,当警戒摄像机的警戒灯被点亮,整个监控画面会产生过曝光,无法起到正常监控的功能,此时,在警戒灯闪烁的过程中,警戒光极大地影响了正常监控图像,无法满足在警戒灯闪烁的过程中对监控视频画面质量的正常需求。
考虑到目前摄像机的图像传感器(sensor)通常分为电荷耦合元件(ChargeCoupled Device,CCD)和互补金属氧化物半导体(Complementary Metal OxideSemiconductor,CMOS)两大类,CCD是应用在摄影摄像方面的高端技术元件,CMOS则应用于较低影像品质的产品中,且CMOS较CDD具有价格低、功耗低等优势,因而在视频监控传输领域中,常使用的图像传感器为CMOS,而安防行业常使用的警戒摄像机的图像传感器即为CMOS。其中,CMOS曝光方式为卷帘曝光,即每帧捕获的图像是不同时刻的,从曝光到图像捕获存在一定的时长,在该时长内不受到警戒灯影响则该帧画面为正常画面,因而只需要针对警戒灯每一次点亮时有影响的帧进行处理即可降低警戒灯带来的影响。
基于此,本申请实施例提供一种视频处理方法,在该方法中,在确定设定的警戒事件触发时,根据图像传感器的曝光参数计算最大亮灯时间,最大亮灯时间为警戒事件触发后警戒灯的每一次闪烁周期内每一次被点亮的最大时间,并根据最大亮灯时间以及每一次闪烁周期的亮灯节拍,确定图像数据信号中每一次闪烁周期内警戒灯被点亮时的视频帧序列,针对视频帧序列中的每一视频帧,将每一视频帧位置替换为每一视频帧的相邻视频帧。因此,本申请实施例可以通过计算得出的最大亮灯时间以及每一次闪烁周期的亮灯节拍,确定周期内警戒灯被点亮时的视频帧序列,并将视频帧序列中的每一视频帧位置替换为每一视频帧的相邻视频帧,进而在满足警戒灯于警戒过程中正常警戒的同时,又能保证在警戒灯闪烁的过程中对监控视频画面质量的正常需求。
在介绍完本申请实施例的设计思想之后,下面对本申请实施例的技术方案能够适用的应用场景做一些简单介绍,需要说明的是,以下介绍的应用场景仅用于说明本申请实施例而非限定。在具体实施过程中,可以根据实际需要灵活地应用本申请实施例提供的技术方案。
如图1所示,为本申请实施例提供的一种应用场景示意图。该应用场景中可以包括警戒摄像机10,该警戒摄像机10可以包括摄像装置101、警戒装置102和视频处理装置103。
其中,警戒摄像机10可以用于对摄像范围内的事物进行监控摄像,并在警戒事件触发后,以声、光的形式发出警戒信号。其中,摄像装置101用于采集视频图像信号,例如为摄像机或者摄像头等元器件,警戒装置102用于监测警戒事件,以及声、光的形式发出警戒信号,例如可以包括感应器和警戒灯等元器件,视频处理装置103用于实现数据处理,对摄像装置101和警戒装置102进行控制,例如可以为控制主板等,可包括一个或者多个中央处理器(Central Processing Unit,CPU)或者图形处理器(Graphics Processing Unit,GPU)等元器件。
视频处理装置103可以包含一个或多个处理器1031、存储器1032、I/O接口1033以及数据库1034,存储器1032中可以存储本申请实施例提供的视频处理方法的程序指令,这些程序指令被处理器1031执行时能够用以实现本申请实施例提供的视频处理方法的步骤,以解决因警戒摄像机的警戒灯闪烁而引起的监控画面闪烁的问题。数据库1034可以用于存储本申请实施例提供的方案中涉及到的视频处理数据、图像数据以及视频处理结果等数据。
本申请实施例中,警戒事件可以为人或车辆进入警戒区域。当人或者车辆进入警戒装置102警戒区域时,触发警戒装置102的警戒功能,摄像装置101采集的视频图像数据信号传送给视频处理装置103,视频处理装置103通过本申请实施例提供的视频处理方法,对过曝光的视频帧进行替换处理,解决了警戒灯闪烁的过程中视频画面质量差的问题,同时,在入侵人员或车辆进入警戒区域时,警戒灯闪烁进行示警。
具体的,当警戒事件触发后,摄像装置101将监控视频经I/O接口1033传输至视频处理装置103的存储器1032,视频处理装置103的处理器1031对存储器1032的监控视频按照本申请实施例提供的视频处理方法的程序指令进行视频处理,并将视频处理数据、图像数据以及视频处理结果等数据存储于数据库1034中。
当然,本申请实施例提供的方法并不限用于图1所示的应用场景中,还可以用于其他可能的应用场景,本申请实施例并不进行限制。对于图1所示的应用场景的各个设备所能实现的功能将在后续的方法实施例中一并进行描述,在此先不过多赘述。下面,将结合附图对本申请实施例的方法进行介绍。
如图2所示,为本申请实施例提供的视频处理方法的一种流程示意图,该方法可以通过图1中的警戒摄像机10来执行,该方法的流程介绍如下。
步骤201:监测是否存在设定的警戒事件。
在本申请实施例中,设定的警戒事件例如可以为人或车辆等进入警戒摄像机的警戒范围,当然,也可以包括其它可能的警戒事件。在警戒摄像机工作过程中,则会对警戒事件进行监测,以确定是否有警戒事件触发。
步骤202:步骤201的确定结果为是时,获取图像传感器的曝光参数,并将曝光参数设置为固定值,根据固定的曝光参数值确定最大亮灯时间。
在具体实施过程中,警戒事件的监测可以通过警戒摄像机的警戒装置来实现,当警戒装置监测到警戒事件时,则可以通知视频处理装置,从而使得视频处理装置知晓有警戒事件触发。例如当人或车辆等进入警戒摄像机的警戒范围后,则警戒装置则可以监测到设定的警戒事件触发,相应的,视频处理装置也可以获知设定的警戒事件触发。
当设定的警戒事件触发时,视频处理装置可以获取摄像装置的图像传感器的当前的曝光参数。通常而言,摄像机的曝光参数是随着实际场景发生变化的,相应的,依据曝光参数计算的最大亮灯时间可能不同,而警戒灯的闪烁周期以及频率通常是固定的,因此,为了在警戒功能持续时间内,后续的最大亮灯时间保持一致,以使得便于定位被警戒灯点亮时影响曝光的视频帧,可以将摄像机的曝光参数设置为固定值,例如可以设置为当前获取的曝光参数。
进而,视频处理装置可以根据当前的曝光参数,即上述进行固定曝光参数之后的固定值来计算警戒灯的最大亮灯时间,最大亮灯时间为警戒事件触发后警戒灯的每一次闪烁周期内每一次被点亮的最大时间。
具体的,为了降低对摄像装置的曝光过程的影响,警戒灯被点亮的最大时间可以是上一帧最后一行有效像素行曝光结束的第一时刻到下一帧第一行有效像素行曝光开始的第二时刻,这样,被警戒灯影响曝光的仅为一帧。其中,视频处理装置可以根据曝光参数计算出上一帧最后一行有效像素行曝光结束的第一时刻,以及下一帧第一行有效像素行曝光开始的第二时刻,第二时刻与第一时刻之间的时间差即为警戒灯能够被点亮的最大时间。
本申请实施例中,图像传感器型号或者配置不同时,视频帧的行(row)之间的像素读出时间间隔会不相同,以使得最大亮灯时间不同。此外,光照强度不同时,最大亮灯时间也不一样,如图3a和图3b所示,为本申请实施例提供的曝光时序图的示意图,其中,图3a为白天场景下的曝光时序图,图3b为夜晚场景下的曝光时序图。如图3a所示,在白天时,警戒摄像机所处的环境亮度较大,使得达到警戒摄像机设定的照度值的曝光时间相对较短。如图3b所示,在夜晚时,警戒摄像机所处的环境亮度较低,要达到警戒摄像机设定的照度值,那么曝光时间相应的更长,所以,不同光线条件下所得到的最大亮灯时间可能不同。参见图3a和图3b,视频处理设备根据曝光参数可确定出上一帧最后一行有效像素行曝光结束的第一时刻T1,以及确定出下一帧第一行有效像素行曝光开始的第二时刻T2,从而得到第一时刻T1和第二时刻T2之间的时间差△T,即为最大亮灯时间。
在具体实施过程中,最大亮灯时间为警戒摄像机的警戒灯被点亮一次能达到的最大时间长度,而在实际应用时,警戒灯被点亮一次实际的亮灯时间可根据实际需求进行设置,满足小于或等于最大亮灯时间的要求即可。
步骤203:根据帧同步信号对图像数据信号与帧同步信号进行同步处理。
在本申请实施例中,图像传感器提供的信号为模拟信号,在进行视频图像处理时,一般是针对数字信号进行的,因此,视频处理装置可以根据帧同步信号对图像数据信号进行同步。
本申请实施例中,摄像机的图像传感器可工作于多种工作模式,当图像传感器工作于不同的工作模式时,帧同步信号的来源不同。通常而言,摄像机可以在出厂时就已经确定好了摄像机中图像传感器的工作模式,也可以后期进行设定。
具体的,工作模式可以包括两种,即主模式与从模式,当图像传感器的工作模式为主模式时,摄像机中图像传感器会主动进行曝光,并输出帧同步信号;或者,当图像传感器的工作模式为从模式时,摄像机中图像传感器则会接收外部输入的帧同步信号,然后根据输入的帧同步信号进行曝光。
具体的,对图像数据信号进行同步的过程实质上为对为模拟信号的图像数据信号进行采样读取数据,得到为图像数据的过程。其中,视频处理装置可以以图像传感器输出的帧同步信号为基准,从图像数据信号逐步读出图像数据,并存入图像数据存储器。
如图4所示,为本申请实施例提供的帧同步的一种示意图,帧同步信号的上升沿指示每一帧图像数据信号的开始时间点,因此,在进行帧同步时,可以以帧同步信号的上升沿或者下降沿为基准,一个上升沿到下一个上升沿之间读取得到的图像数据即为一帧,或者一个下降沿到下一个下降沿之间读取得到的图像数据即为一帧,这可以根据需求进行配置。
步骤204:根据最大亮灯时间以及预设的亮灯节拍,确定图像数据信号中每一次闪烁周期内警戒灯被点亮时的视频帧序列。
本申请实施例中,可以预先设置警戒灯的闪烁周期和亮灯节拍,亮灯节拍可理解为警戒灯亮灯的频率。如图5所示,为本申请实施例提供的警戒灯控制信号的一种示意图,其中,包括多个闪烁周期,每一个闪烁周期为警戒灯闪烁一次的时长,每一个闪烁周期内警戒灯可被点亮多次,脉冲信号为警戒灯的亮灯节拍,一个高电平的时长可以对应警戒灯被点亮一次的时长。
为了降低警戒灯闪烁对摄像装置曝光的影响,可以将警戒灯每一次点亮的时长控制在一帧图像对应的时长之内,即控制在上述最大亮灯时间范围内,那么警戒灯只会在少量的视频帧对应时长内被点亮,为了对警戒灯进行控制,则需要知道警戒灯在哪些视频帧被点亮,基于此,视频处理装置可以根据最大亮灯时间以及警戒灯的每一次闪烁周期的亮灯节拍,确定同步后的图像数据信号中每一次闪烁周期内警戒灯被点亮时的视频帧序列。
具体的,当警戒灯的闪烁周期为N帧时,在每一个闪烁周期内警戒灯被点亮M次,M≤N,例如可以设置亮灯节拍为在一个闪烁周期内警戒灯在前一段时长为亮灯闪烁时间,即被点亮M次,后一段时长为空闲时间,即警戒灯不点亮。当然,实际亮灯节拍可以根据需求自行进行设置。那么警戒事件触发时,可以将当前帧或者下一个视频帧作为一个闪烁周期的起点,并以警戒灯的亮灯节拍对应设定的步长循环累加计数,直至完成一个闪烁周期的计数,即可找到一个闪烁周期内警戒灯被点亮时对应的视频帧序列,后续的闪烁周期也依此进行,直至警戒灯闪烁持续时长完全结束。
如图6所示,为本申请实施例提供的确定视频帧序列的示意图,其中,以图像传感器的帧率为30帧/每秒,警戒摄像机每次警戒事件触发后警戒功能持续时间为10s,闪烁周期为1s,且每一个闪烁周期内点亮7次后等待下一次闪烁周期到达。如图6所示,以一个闪烁周期为例,相应的一个闪烁周期的循环计数值为30,图6中具体以当前帧为第一个闪烁周期的起点,且下一视频帧时警戒灯第一次被点亮为例,那么在当前帧开始计数,且计数为1,第2帧时警戒灯第一次被点亮,计数为2,第3帧时警戒灯空闲,计数为3,第4帧时警戒灯第二次被点亮,计数为4,依次类推,第14帧时警戒灯第七次被点亮,计数为14,而后第15~30帧警戒灯为空闲状态,不点亮。而计数到达30之后,则重置计数,从下一帧开始,进入下一个闪烁周期。因此可以得到在每一闪烁周期内,在第2、4、6、8、10、12、14帧位置处警戒灯将被点亮,即视频帧序列为{2,4,6,8,10,12,14}。
或者,还可以在当前帧为第一个闪烁周期的起点,且当前帧时警戒灯第一次被点亮,那么在当前帧开始计数,警戒灯第一次被点亮,且计数为1;第2帧时警戒灯空闲,计数为2,第3帧时警戒灯第二次被点亮,计数为3,计数为3,第4帧时警戒灯空闲,计数为4,依次类推,第13帧时警戒灯第七次被点亮,计数为13,而后第14~30帧警戒灯为空闲状态,不点亮。而计数到达30之后,则重置计数,从下一帧开始,进入下一个闪烁周期。因此可以得到在每一闪烁周期内,在第1、3、5、7、9、11、13帧位置处警戒灯将被点亮,即视频帧序列为{1,3,5,7,9,11,13}。
或者,示例性的,若图像传感器的帧率为60帧/每秒,警戒摄像机每次警戒事件触发后警戒功能持续时间为10s,闪烁周期为1s,且每一个闪烁周期内点亮8次后等待下一次闪烁周期到达。以一个闪烁周期为例,相应的一个闪烁周期的循环计数值为60,以当前帧为第一个闪烁周期的起点,且当前帧时警戒灯第一次被点亮,那么在当前帧开始计数,警戒灯第一次被点亮,且计数为1;第2帧时警戒灯空闲,计数为2,第3帧时警戒灯第二次被点亮,计数为3,计数为3,第4帧时警戒灯空闲,计数为4,依次类推,第15帧时警戒灯第八次被点亮,计数为15,而后第16~60帧警戒灯为空闲状态,不点亮。而计数到达60之后,则重置计数,从下一帧开始,进入下一个闪烁周期。因此可以得到在每一闪烁周期内,在第1、3、5、7、9、11、13、15帧位置处警戒灯将被点亮,即视频帧序列为{1,3,5,7,9,11,13,15}。
当然,上述的一个闪烁周期的循环计数值也可以设置为其他值,例如帧率的倍数,本申请实施例对此不做限制。
步骤205:根据视频帧序列生成控制警戒灯点亮的控制信号。
本申请实施例中,警戒灯每一次点亮时间与视频帧序列所在的时间位置一一对应。如图6所示,为本申请实施例提供的警戒灯控制信号的一种示意图,该控制信号可以根据警戒灯被点亮时的视频帧序列生成,如图6所示,警戒功能持续时间为10s,警戒灯的闪烁周期为1s,共有10个闪烁周期,每一次闪烁周期内警戒灯被点亮7次,每一次高电平持续时长可以为一次警戒灯被点亮的最大时长,即上述的最大亮灯时间,而在实际应用时,警戒灯的实际亮灯时间可以小于或等于最大亮灯时间。
步骤206:针对视频帧序列中的每一视频帧,将每一视频帧位置替换为每一视频帧的相邻视频帧。
在本申请实施例中,视频处理装置可以将视频帧序列中的每一视频帧位置替换为该帧的前一视频帧的图像数据;或者,还可以置替换为该帧的后一视频帧的图像数据。
在实际使用时,如图7所示,为本申请实施例提供的视频处理结果的一种示意图,以通过前一视频帧的图像数据替换视频帧序列中的每一视频帧为例,且图像数据信号中每一次闪烁周期内警戒灯被点亮时的视频帧序列为{2,4,6,8,10,12,14},所以将图像数据信号中每一次闪烁周期内位于2、4、6、8、10、12、14帧位置处的视频帧内容替换为1、3、5、7、9、11、13,由于替换之后的帧是不受警戒灯亮灯影响的,因而可以消除警戒灯亮灯对于视频画面的影响,提升视频画面质量,抑制视频画面闪烁问题。
需要声明的是,步骤205和步骤206的过程并没有实质上的先后顺序,在具体实施过程中,步骤205和步骤206的过程可以同时进行,也可以先后依次进行,例如步骤205的过程或者步骤206的过程先执行。
综上所述,本申请实施例可以通过计算得出的最大亮灯时间以及每一次闪烁周期的亮灯节拍,确定周期内警戒灯被点亮时的视频帧序列,并将视频帧序列中的每一视频帧位置替换为每一视频帧的相邻视频帧,进而在满足警戒灯于警戒过程中正常警戒的同时,又能保证在警戒灯闪烁的过程中对监控视频画面质量的正常需求,对警戒灯闪烁带来的画面闪烁的问题进行抑制,提高监控画面质量。
在夜晚场景下,图像传感器的row曝光时间很长,几乎没有row空闲时间。根据塔尔波律(Talbot-Plateau)效应,人眼感光融合亮度为al/(a+b),其中,a为亮灯时间,l为白光强度,b为灭灯时间。当Row空闲时间极短,现有的空闲时间补光方案中需要大幅增加光强l,并且需要满足亮灯频率大于闪光融合临界频率(Critical Flicker Frequency,CFF),需要大幅增加硬件实施成本,而本申请无需增加任何硬件,相应的本申请实施例的方案具有硬件实施成本更低的优点。
基于同一发明构思,本申请实施例提供一种视频处理装置80,如图8所示,该装置包括:
确定单元801,用于在确定设定的警戒事件触发时,根据图像传感器的曝光参数确定最大亮灯时间;其中,警戒摄像机包括的警戒灯在警戒事件触发时闪烁,在每一次闪烁周期内警戒灯按照设定的亮灯节拍被点亮多次,最大亮灯时间为警戒灯每一次被点亮的最大时间;根据最大亮灯时间以及亮灯节拍,确定图像数据信号中每一次闪烁周期内警戒灯被点亮时的视频帧序列;
帧替换单元802,用于针对视频帧序列中的每一视频帧,将每一视频帧位置替换为每一视频帧的相邻视频帧。
可选的,确定单元801,还用于:
在确定设定的警戒事件触发时,获取图像传感器的曝光参数;
根据曝光参数将图像传感器的曝光参数设置为固定值;
根据曝光参数的固定值确定最大亮灯时间。
可选的,确定单元801,还用于:
根据图像传感器的曝光参数确定上一帧最后一行有效像素行曝光结束的第一时刻以及下一帧第一行有效像素行曝光开始的第二时刻;
根据第一时刻以及第二时刻确定最大亮灯时间。
可选的,确定单元801,还用于在根据最大亮灯时间以及亮灯节拍,确定图像数据信号中每一次闪烁周期内警戒灯被点亮时的视频帧序列之后,根据视频帧序列生成控制警戒灯点亮的控制信号,其中,警戒灯每一次点亮时间与视频帧序列所在的时间位置一一对应。
可选的,确定单元801,还用于警戒灯每一次被点亮时的实际亮灯时间小于或者等于最大亮灯时间。
可选的,确定单元801,还用于:
根据图像传感器输出的帧同步信号,对图像传感器输出的图像数据信号进行同步;
根据最大亮灯时间以及亮灯节拍,确定图像数据信号中每一次闪烁周期内警戒灯被点亮时的视频帧序列,包括:
根据帧同步信号对图像数据信号与帧同步信号进行同步处理;
根据最大亮灯时间以及亮灯节拍,确定同步后的图像数据信号中每一次闪烁周期内警戒灯被点亮时的视频帧序列。
可选的,确定单元801,还用于:
在根据帧同步信号对图像数据信号与帧同步信号进行同步处理之前,在图像传感器的工作模式为主模式时,图像传感器主动曝光,并输出帧同步信号;或者,
在图像传感器的工作模式为从模式时,图像传感器接收外部输入的帧同步信号,并根据帧同步信号进行曝光。
可选的,帧替换单元802,还用于:
将视频流中每一视频帧位置替换为每一视频帧的前一视频帧;或者,
将视频流中每一视频帧位置替换为每一视频帧的后一视频帧。
该装置可以用于执行图2~图7所示的实施例中视频处理装置所执行的方法,因此,对于该装置的各功能模块所能够实现的功能等可参考图2~图7所示的实施例的描述,不多赘述。
请参见图9,基于同一技术构思,本申请实施例还提供了一种视频处理设备90,可以包括存储器901和处理器902。
所述存储器901,用于存储处理器902执行的计算机程序。存储器901可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序等;存储数据区可存储根据计算机设备的使用所创建的数据等。处理器902,可以是一个中央处理单元(central processing unit,CPU),或者为数字处理单元等等。本申请实施例中不限定上述存储器901和处理器902之间的具体连接介质。本申请实施例在图9中以存储器901和处理器902之间通过总线903连接,总线903在图9中以粗线表示,其它部件之间的连接方式,仅是进行示意性说明,并不引以为限。所述总线903可以分为地址总线、数据总线、控制总线等。为便于表示,图9中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
存储器901可以是易失性存储器(volatile memory),例如随机存取存储器(random-access memory,RAM);存储器901也可以是非易失性存储器(non-volatilememory),例如只读存储器,快闪存储器(flash memory),硬盘(hard disk drive,HDD)或固态硬盘(solid-state drive,SSD)、或者存储器901是能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。存储器901可以是上述存储器的组合。
处理器902,用于调用所述存储器901中存储的计算机程序时执行如图2~图7所示的实施例中视频处理装置所执行的方法。
在一些可能的实施方式中,本申请提供的方法的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当所述程序产品在计算机设备上运行时,所述程序代码用于使所述计算机设备执行本说明书上述描述的根据本申请各种示例性实施方式的方法中的步骤,例如,所述计算机设备可以执行如图2~图7所示的实施例中视频处理装置所执行的方法。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。或者,本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
尽管已描述了本申请的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。
Claims (11)
1.一种视频处理方法,其特征在于,应用于警戒摄像机中,所述方法包括:
在确定设定的警戒事件触发时,根据图像传感器的曝光参数确定最大亮灯时间;其中,所述警戒摄像机包括的警戒灯在警戒事件触发时闪烁,在每一次闪烁周期内所述警戒灯按照设定的亮灯节拍被点亮多次,所述最大亮灯时间为所述警戒灯每一次被点亮的最大时间;
根据所述最大亮灯时间以及所述亮灯节拍,确定图像数据信号中每一次所述闪烁周期内所述警戒灯被点亮时的视频帧序列;
针对所述视频帧序列中的每一视频帧,将所述每一视频帧位置替换为所述每一视频帧的相邻视频帧。
2.如权利要求1所述的方法,其特征在于,所述在确定设定的警戒事件触发时,根据图像传感器的曝光参数确定最大亮灯时间,包括:
在确定所述设定的警戒事件触发时,获取所述图像传感器的曝光参数;
根据所述曝光参数将所述图像传感器的曝光参数设置为固定值;
根据所述曝光参数的固定值确定所述最大亮灯时间。
3.如权利要求1或2所述的方法,其特征在于,确定设定的警戒事件触发时,根据图像传感器的曝光参数确定最大亮灯时间,包括:
根据所述图像传感器的曝光参数确定上一帧最后一行有效像素行曝光结束的第一时刻以及下一帧第一行有效像素行曝光开始的第二时刻;
根据所述第一时刻以及所述第二时刻确定所述最大亮灯时间。
4.如权利要求1所述的方法,其特征在于,在根据所述最大亮灯时间以及所述亮灯节拍,确定图像数据信号中每一次所述闪烁周期内所述警戒灯被点亮时的视频帧序列之后,所述方法还包括:
根据所述视频帧序列生成控制所述警戒灯点亮的控制信号,其中,所述警戒灯每一次点亮时间与所述视频帧序列所在的时间位置一一对应。
5.如权利要求2所述的方法,其特征在于,所述警戒灯每一次被点亮时的实际亮灯时间小于或者等于所述最大亮灯时间。
6.如权利要求1所述的方法,其特征在于,根据所述最大亮灯时间以及所述亮灯节拍,确定图像数据信号中每一次所述闪烁周期内所述警戒灯被点亮时的视频帧序列,包括:
根据帧同步信号对所述图像数据信号与所述帧同步信号进行同步处理;
根据所述最大亮灯时间以及所述亮灯节拍,确定同步后的所述图像数据信号中每一次所述闪烁周期内所述警戒灯被点亮时的视频帧序列。
7.如权利要求6所述的方法,其特征在于,在根据帧同步信号对所述图像数据信号与所述帧同步信号进行同步处理之前,包括:
在所述图像传感器的工作模式为主模式时,所述图像传感器主动曝光,并输出帧同步信号;或者,
在所述图像传感器的工作模式为从模式时,所述图像传感器接收外部输入的帧同步信号,并根据帧同步信号进行曝光。
8.如权利要求1所述的方法,其特征在于,所述针对所述视频帧序列中的每一视频帧,将所述视频流中所述每一视频帧位置替换为相邻视频帧,所述方法还包括:
将所述视频流中所述每一视频帧位置替换为所述每一视频帧的前一视频帧;或者,
将所述视频流中所述每一视频帧位置替换为所述每一视频帧的后一视频帧。
9.一种视频处理装置,其特征在于,所述装置包括:
确定单元,用于在确定设定的警戒事件触发时,根据图像传感器的曝光参数确定最大亮灯时间;其中,所述警戒摄像机包括的警戒灯在警戒事件触发时闪烁,在每一次闪烁周期内所述警戒灯按照设定的亮灯节拍被点亮多次,所述最大亮灯时间为所述警戒灯每一次被点亮的最大时间;根据所述最大亮灯时间以及所述亮灯节拍,确定图像数据信号中每一次所述闪烁周期内所述警戒灯被点亮时的视频帧序列;
帧替换单元,用于针对所述视频帧序列中的每一视频帧,将所述每一视频帧位置替换为所述每一视频帧的相邻视频帧。
10.一种视频处理设备,其特征在于,所述设备包括:
存储器,用于存储程序指令,以及警戒摄像机的视频帧数据;
处理器,用于调用所述存储器中存储的程序指令,按照获得的程序指令执行权利要求1-8中任一所述的方法包括的步骤。
11.一种存储介质,其特征在于,所述存储介质存储有计算机可执行指令,所述计算机可执行指令用于使计算机执行权利要求1-8中任一所述的方法包括的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011475940.8A CN112672009B (zh) | 2020-12-14 | 2020-12-14 | 一种视频处理方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011475940.8A CN112672009B (zh) | 2020-12-14 | 2020-12-14 | 一种视频处理方法、装置、设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112672009A true CN112672009A (zh) | 2021-04-16 |
CN112672009B CN112672009B (zh) | 2022-09-02 |
Family
ID=75406027
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011475940.8A Active CN112672009B (zh) | 2020-12-14 | 2020-12-14 | 一种视频处理方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112672009B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113345191A (zh) * | 2021-04-23 | 2021-09-03 | 浙江大华技术股份有限公司 | 一种摄像机监测方法、电子设备和计算机存储介质 |
CN113438393A (zh) * | 2021-05-31 | 2021-09-24 | 浙江大华技术股份有限公司 | 监控设备的控制方法、监控设备、计算机设备和存储介质 |
CN114245042A (zh) * | 2021-12-16 | 2022-03-25 | 重庆紫光华山智安科技有限公司 | 补光方法、成像装置、电子设备及可读存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002152604A (ja) * | 2000-11-10 | 2002-05-24 | Toshiba Corp | フリッカ除去装置 |
US20140300817A1 (en) * | 2013-03-15 | 2014-10-09 | Google Inc. | Avoiding Flash-Exposed Frames During Video Recording |
US20160330359A1 (en) * | 2015-05-08 | 2016-11-10 | Canon Kabushiki Kaisha | Image pickup apparatus that reduces unevenness of exposure caused by artificial light source, method of detecting change in amount of light, and storage medium |
US20170094148A1 (en) * | 2015-09-24 | 2017-03-30 | Casio Computer Co., Ltd. | Imaging apparatus with a flicker detection function |
JP2018189807A (ja) * | 2017-05-08 | 2018-11-29 | キヤノン株式会社 | 電子ビューファインダ(evf)を備えた撮像装置 |
CN111818271A (zh) * | 2020-06-30 | 2020-10-23 | 浙江大华技术股份有限公司 | 消除图像闪烁的方法、电子设备及存储介质 |
CN111818272A (zh) * | 2020-06-30 | 2020-10-23 | 浙江大华技术股份有限公司 | 消除图像闪烁的方法、电子设备及存储介质 |
CN112019817A (zh) * | 2020-09-03 | 2020-12-01 | 浙江大华技术股份有限公司 | 监控设备控制方法及系统、存储介质、电子装置 |
-
2020
- 2020-12-14 CN CN202011475940.8A patent/CN112672009B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002152604A (ja) * | 2000-11-10 | 2002-05-24 | Toshiba Corp | フリッカ除去装置 |
US20140300817A1 (en) * | 2013-03-15 | 2014-10-09 | Google Inc. | Avoiding Flash-Exposed Frames During Video Recording |
US20160330359A1 (en) * | 2015-05-08 | 2016-11-10 | Canon Kabushiki Kaisha | Image pickup apparatus that reduces unevenness of exposure caused by artificial light source, method of detecting change in amount of light, and storage medium |
US20170094148A1 (en) * | 2015-09-24 | 2017-03-30 | Casio Computer Co., Ltd. | Imaging apparatus with a flicker detection function |
JP2018189807A (ja) * | 2017-05-08 | 2018-11-29 | キヤノン株式会社 | 電子ビューファインダ(evf)を備えた撮像装置 |
CN111818271A (zh) * | 2020-06-30 | 2020-10-23 | 浙江大华技术股份有限公司 | 消除图像闪烁的方法、电子设备及存储介质 |
CN111818272A (zh) * | 2020-06-30 | 2020-10-23 | 浙江大华技术股份有限公司 | 消除图像闪烁的方法、电子设备及存储介质 |
CN112019817A (zh) * | 2020-09-03 | 2020-12-01 | 浙江大华技术股份有限公司 | 监控设备控制方法及系统、存储介质、电子装置 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113345191A (zh) * | 2021-04-23 | 2021-09-03 | 浙江大华技术股份有限公司 | 一种摄像机监测方法、电子设备和计算机存储介质 |
WO2022222319A1 (en) * | 2021-04-23 | 2022-10-27 | Zhejiang Dahua Technology Co., Ltd. | Systems and methods for video surveillance |
EP4309158A4 (en) * | 2021-04-23 | 2024-08-21 | Zhejiang Dahua Technology Co | VIDEO SURVEILLANCE SYSTEMS AND METHODS |
CN113438393A (zh) * | 2021-05-31 | 2021-09-24 | 浙江大华技术股份有限公司 | 监控设备的控制方法、监控设备、计算机设备和存储介质 |
CN113438393B (zh) * | 2021-05-31 | 2023-02-24 | 浙江大华技术股份有限公司 | 监控设备的控制方法、监控设备、计算机设备和存储介质 |
CN114245042A (zh) * | 2021-12-16 | 2022-03-25 | 重庆紫光华山智安科技有限公司 | 补光方法、成像装置、电子设备及可读存储介质 |
CN114245042B (zh) * | 2021-12-16 | 2023-12-26 | 重庆紫光华山智安科技有限公司 | 补光方法、成像装置、电子设备及可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN112672009B (zh) | 2022-09-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112672009B (zh) | 一种视频处理方法、装置、设备及存储介质 | |
CN111818272B (zh) | 消除图像闪烁的方法、电子设备及存储介质 | |
CN111107247B (zh) | 一种曝光方法、一种图像系统及图像系统协同工作的方法 | |
US20110255786A1 (en) | Method and apparatus for determining flicker in the illumination of a subject | |
CN111818271B (zh) | 消除图像闪烁的方法、电子设备及存储介质 | |
JP6300118B2 (ja) | 撮像装置、フリッカ検出方法及びプログラム | |
CN112019817B (zh) | 监控设备控制方法及系统、存储介质、电子装置 | |
CN102196184A (zh) | 摄像装置 | |
WO2019084806A1 (zh) | 用于闪光灯亮度补偿的方法、无人机及存储介质 | |
JP7263626B2 (ja) | 画像における複数の光源のフリッカ現象の低減 | |
CN110933337A (zh) | 具有led闪烁减轻和减少运动模糊的hdr图像传感器 | |
CN110557576B (zh) | 一种基于视频的频闪灯同步控制方法 | |
CN117676323A (zh) | 基于ae控制日夜模式切换的方法 | |
CN116546317A (zh) | 摄像设备的控制方法、计算机设备及存储介质 | |
JP2017225073A (ja) | 撮像装置とその制御方法、プログラム及び撮像システム | |
KR20150057041A (ko) | 카메라의 led 조명제어 방법 및 그 장치 | |
CN111182229A (zh) | 调整相机曝光延时的方法、相机、计算机设备和存储介质 | |
JP2006254470A (ja) | テレビジョンカメラ | |
KR101656601B1 (ko) | 촬상 장치 | |
CN112565618B (zh) | 曝光控制装置 | |
JP2006295591A (ja) | 撮像素子を使用する監視カメラを用いる監視システム | |
US9706130B2 (en) | Camera having HDR during pre-flash | |
CN113132617A (zh) | 图像抖动判断方法及装置、图像识别触发方法及装置 | |
CN113345191B (zh) | 一种摄像机监测方法、电子设备和计算机存储介质 | |
JPH09134488A (ja) | 監視カメラシステム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |