CN108124126A - 一种视频流处理方法、设备及视频监控系统 - Google Patents
一种视频流处理方法、设备及视频监控系统 Download PDFInfo
- Publication number
- CN108124126A CN108124126A CN201611081593.4A CN201611081593A CN108124126A CN 108124126 A CN108124126 A CN 108124126A CN 201611081593 A CN201611081593 A CN 201611081593A CN 108124126 A CN108124126 A CN 108124126A
- Authority
- CN
- China
- Prior art keywords
- video
- video stream
- stream data
- frame
- frames
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 108
- 238000003672 processing method Methods 0.000 title claims abstract description 15
- 238000000034 method Methods 0.000 claims description 26
- 230000006798 recombination Effects 0.000 claims description 23
- 238000005215 recombination Methods 0.000 claims description 23
- 239000000284 extract Substances 0.000 claims description 5
- 230000005856 abnormality Effects 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 28
- 238000003860 storage Methods 0.000 description 11
- 230000002159 abnormal effect Effects 0.000 description 10
- 238000004590 computer program Methods 0.000 description 9
- 230000002349 favourable effect Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 3
- 238000009826 distribution Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000008521 reorganization Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
本申请公开了一种视频流处理方法、设备及视频监控系统,包括:通过获取不同视频采集设备采集的至少两路第一视频流数据;按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据;并将重组后的所述第二视频流数据显示在视频监控显示设备中,进而实现在视频监控显示设备中显示一路视频流数据,使得整个视频监控系统生成的视频流数据连续变化,有助于快速从视频监控显示设备中获取有效地视频信息,提升视频监控系统的监控能力,有效改善应对突发异常事件的处理及时性。
Description
技术领域
本申请涉及图像处理技术领域,尤其涉及一种视频流处理方法、设备及视频监控系统。
背景技术
视频监控系统作为各个行业重点部门或者重要场所实现实时监控的物理基础。当突发性异常事件发生时,可以通过采集突发性异常事件的数据(这里的数据可以包含图像数据和/或声音数据),并将采集到的数据实时传输至视频监控显示设备中,能够使监控管理者及时发现该突发性异常事件,并及时地对该突发性异常事件进行处理。
目前视频监视系统中包含视频采集设备、数据传输设备、监控显示设备等。即在监控区域中部署多个视频采集设备,每一个视频采集设备对该监控区域中的一个子区域进行数据采集,并将采集到的数据通过数据传输设备发送至监控显示设备,由监控显示设备对接收到数据进行显示。
在实际应用中,每一个视频采集设备所采集的数据形成一路视频流,不同视频采集设备所采集的数据形成不同路视频流,这些不同路的视频流可以传输给同一个监控显示设备,那么在该监控显示设备的显示屏中同时显示这些视频流(例如:视频显示矩阵);这些不同路的视频流也可以传输给不同的监控显示设备,那么在每一个监控显示设备的显示屏中显示其中一路视频流。
然而,对于监控管理者来说,一个时刻只能关注一路视频流,当监控显示设备中显示的视频流数量过多时,使得视频监控系统的监控能力降低,导致应对突发事件的处理能力不及时的问题。
发明内容
有鉴于此,本申请实施例提供了一种视频流处理方法、设备及视频监控系统,用于解决现有技术中视频监控系统的监控能力降低,导致的应对突发事件的处理能力不及时的问题。
本申请实施例提供一种视频流处理方法,包括:
获取不同视频采集设备采集的至少两路第一视频流数据;
按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据;并
将重组后的所述第二视频流数据显示在视频监控显示设备中。
本申请实施例还提供一种视频流处理设备,包括:
获取单元,用于获取不同视频采集设备采集的至少两路第一视频流数据;
重组单元,用于按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据;
处理单元,用于将重组后的所述第二视频流数据显示在视频监控显示设备中。
本申请实施例还提供一种视频监控系统,所述视频监控系统包含至少两个视频采集设备、视频流处理服务器和视频监控显示设备,其中:
所述至少两个视频采集设备,用于采集所覆盖区域的视频数据,不同视频采集设备所采集的所述视频数据形成不同路视频流数据,并将所述视频流数据发送给所述视频流处理服务器;
所述视频流处理服务器,用于获取至少两个视频采集设备采集的至少两路第一视频流数据;按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据;
所述视频监控显示设备,用于显示接收到的所述第二视频流数据。
本申请实施例采用的上述至少一个技术方案能够达到以下有益效果:
通过获取不同视频采集设备采集的至少两路第一视频流数据;按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据;并将重组后的所述第二视频流数据显示在视频监控显示设备中,进而实现在视频监控显示设备中显示一路视频流数据,使得整个视频监控系统生成的视频流数据连续变化,有助于快速从视频监控显示设备中获取有效地视频信息,提升视频监控系统的监控能力,有效改善应对突发异常事件的处理及时性。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1为本申请实施例提供的一种视频流处理方法的流程示意图;
图2为本申请实施例提供的一种视频流采集设备的分布示意图;
图3为本申请实施例提供的N路第一视频流数据的示意图;
图4(a1)为按照第一种视频选择策略从N路第一视频流数据中选择得到的视频帧序列的示意图;
图4(a2)为按照第二种视频选择策略从N路第一视频流数据中选择得到的视频帧序列的示意图;
图4(a3)为按照第二种视频选择策略从N路第一视频流数据中选择得到的视频帧序列的示意图;
图4(b1)为针对图4(a1)得到的第二视频流数据的示意图;
图4(b2)为针对图4(a2)得到的第二视频流数据的示意图;
图4(b3)为针对图4(a3)得到的第二视频流数据的示意图;
图5为本申请实施例提供的一种视频流处理设备的结构示意图;
图6为本申请实施例提供的一种视频监控系统的结构示意图。
具体实施方式
视频巡逻作为视频监控系统的一种监控方式,在实际生活中应用相对广泛。所述视频巡逻是指利用视频监控系统对目标区域进行远程实时视频监控,能够弥补地面巡逻方式存在的一些弊端,例如:能够监控到地面巡逻方式无法监控到的内容,有助于及时对突发异常事件进行处理等等。
但是,视频巡逻方式一般把视频采集设备分成多个组,每组采集到的视频流数据采用分屏方式显示在视频监控显示设备中。当设定显示时间到达时,切换显示下一组采集到的视频流数据,由此可见,视频巡逻依然存在:对于监控管理者来说,一个时刻只能关注一路视频流,当监控显示设备中显示的视频流数量过多时,使得视频监控系统的监控能力降低,导致应对突发事件的处理能力不及时的问题。
为了实现本申请的目的,本申请实施例提供了一种视频流处理方法、设备及视频监控系统,通过获取不同视频采集设备采集的至少两路第一视频流数据;按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据;并将重组后的所述第二视频流数据显示在视频监控显示设备中,进而实现在视频监控显示设备中显示一路视频流数据,使得整个视频监控系统生成的视频流数据连续变化,有助于快速从视频监控显示设备中获取有效地视频信息,提升视频监控系统的监控能力,有效改善应对突发异常事件的处理及时性。
下面结合本申请具体实施例及相应的附图对本申请技术方案进行清楚、完整地描述。显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
以下结合附图,详细说明本申请各实施例提供的技术方案。
实施例1
图1为本申请实施例提供的一种视频流处理方法的流程示意图。所述方法可以如下所示。
步骤101:获取不同视频采集设备采集的至少两路第一视频流数据。
在本申请实施例中,由于在目标监控区域中,可以部署多个视频采集设备,由这些视频采集设备实现对目标监控区域的全覆盖。那么在部署这些视频采集设备时,可以使不同视频采集设备所监控区域存在重叠,也可以使不同视频采集设备所监控区域不存在重叠但连续,还可以是不同视频采集设备所监控区域不连续,这一般根据目标监控区域的安保等级(这里的安保等级可以是指安全保障等级,通常分为高、中和低三级)进行确定,这里不做具体限定。
本申请实施例中所记载的视频采集设备可以是指实时数字视频采集设备,也可以是实时模拟视频采集设备,还可以是录像设备,这里不做具体限定。
那么不同视频采集设备所采集的视频数据所形成的视频流数据不同,通常同一个视频采集设备所采集的视频数据形成一路视频流数据,那么不同视频采集设备所采集的视频数据形成不同路的视频流数据。
在步骤101中获取到的至少两路第一视频流数据是指至少两个视频采集设备分别发送的不同路的第一视频流数据,即获取目标监控区域中的多个视频采集设备分别采集的不同路的第一视频流数据。
这里的“第一视频流数据”和步骤102中提到的“第二视频流数据”中的“第一”和“第二”没有特殊含义,仅仅用来表示不同的视频流数据。
可选地,在本申请的另一个实施例中,在获取到至少两路第一视频流数据之后,所述方法还包括:
针对获取到的至少两路第一视频流数据,分别执行以下操作:
对每一个所述第一视频流数据进行解码,得到每路所述第一视频流数据中包含的多个视频帧。
具体地,针对获取到的至少两路第一视频流数据中的每路第一视频流数据,可以通过解码服务器对每路第一视频流数据进行解码,得到该路第一视频流数据中包含的多个视频帧。
需要说明的是,可以按照第一视频流数据的产生时间,得到该路第一视频流数据中单位时间内包含的多个视频帧,以单位时间为1秒计算,每秒可以解析得到24帧视频帧,即每一个视频帧的时间为采集时间的1/24。
例如:接收到录像设备发送的录像视频,解码服务器在接收到该录像视频时,对该录像视频进行解码,以得到该录像视频中包含的多个视频帧。
需要说明的是,本申请实施例中所记载的第一视频流数据中包含多个视频帧,多个视频帧又可以称之为一个视频帧序列。
例如:一个视频采集设备采集到一路视频流数据,该路视频流数据中包含多个视频帧序列,每一个视频帧序列中包含N个视频帧,即视频帧1~视频帧N。
步骤102:按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据。
在本申请实施例中,设定的视频流重组策略包含视频帧选择策略和视频帧重组策略。
具体地,分别从所述至少两路第一视频流数据的每路第一视频流数据中抽取设定数量的视频帧;
按照所述视频帧产生的时间顺序和/或采集到所述第一视频流数据的视频采集设备的位置关系,将抽取到的所述视频帧重组成第二视频流数据。
需要说明的是,在本申请实施例中所记载的产生时间可以理解为视频帧被视频采集设备采集到的时间,也可以理解为视频采集设备将采集到的视频帧发送至视频数据处理设备的时间,还可以理解为视频帧产生的时间,这里不做具体限定。
本申请实施例中所记载的视频帧选择策略包括但不限于以下几种:
第一种视频帧选择策略:
针对所述至少两路第一视频流数据的每路第一视频流数据,分别执行以下操作:
确定该路所述第一视频流数据中视频帧的产生时间;
根据视频帧的产生时间,从该路所述第一视频流数据中抽取相同时刻产生的设定数量的视频帧,得到视频帧序列。
需要说明的是,在本申请实施例中所记载的相同时刻的时间单位不限,例如,可以为同一秒,即某时某分某秒;也可以为同一分,即某时某分,这里不做限定。
假设目标监控区域中部署的视频流采集设备按照图2中所示的方式排布,图2为本申请实施例提供的一种视频流采集设备的分布示意图。
从图2中可以看出,沿着目标监控区域的监控路径,依次部署N个视频流采集设备,每一个视频流采集设备对应一个监控子区域,位置相邻的两个视频流采集设备对应的监控子区域可以连续,也可以不连续,还可以重叠,在本申请实施例中不做具体限定。
需要说明的是,视频流采集设备的排布可以是直线型的,也可以是曲线型的,还可以是环形的,这里不做限定。
以图2中所示的方式为例,那么步骤101中将获取到N路第一视频流数据,每路第一视频流数据如图3所示,为本申请实施例提供的N路第一视频流数据的示意图。
从图3中可以看出,每路第一视频流数据对应多个视频帧序列,每个视频帧序列中包含M个视频帧。这里以一路视频流数据中包含一个视频帧序列为例进行说明。那么第一路第一视频流数据中包含的视频帧可以表示为【11、12、13、......、1M】;第二路第一视频流数据中包含的视频帧可以表示为【21、22、23、......、2M】;第三路第一视频流数据中包含的视频帧可以表示为【31、32、33、......、3M】;......;第N路第一视频流数据中包含的视频帧可以表示为【N1、N2、N3、......、NM】,N和M均为自然数。
按照上述记载的第一种视频帧选择策略,首先,确定每路第一视频流数据中视频帧产生的时间。
例如:对于第一路第一视频流数据,确定每一视频帧产生的时间,假设:视频帧11的产生时间为T1,视频帧12的产生时间为T2,视频帧13的产生时间为T3,......,视频帧1M的产生时间为Tm;
对于第二路第一视频流数据,确定每一视频帧产生的时间,假设:视频帧21的产生时间为T1,视频帧22的产生时间为T2,视频帧23的产生时间为T3,......,视频帧2M的产生时间为Tm;
对于第三路第一视频流数据,确定每一视频帧产生的时间,假设:视频帧31的产生时间为T1,视频帧32的产生时间为T2,视频帧33的产生时间为T3,......,视频帧3M的产生时间为Tm;......;
对于第N路第一视频流数据,确定每一视频帧产生的时间,假设:视频帧N1的产生时间为T1,视频帧N2的产生时间为T2,视频帧N3的产生时间为T3,......,视频帧NM的产生时间为Tm。
其次,依次从所述至少两路第一视频流数据的每路第一视频流数据中抽取相同时刻产生的设定数量的视频帧。
在本申请实施例中,假设设定数量为1,那么依次抽取T1时刻产生的视频帧,即视频帧11、视频帧21、视频帧31、......、视频帧N1。
这里需要说明的是,由于通常1秒可以产生24帧视频帧,那么在本申请实施例中,每个视频帧的产生时刻可以按照视频流产生时刻的二十四分之一确定。
那么在本申请实施例中相同时刻可以理解为以秒为单位的时刻,也可以理解为以二十四分之秒为单位的时刻,这里不做限定。
若是以秒为单位的时刻,那么依次从所述至少两路第一视频流数据的每路第一视频流数据中抽取相同时刻产生的设定数量的视频帧,假设设定数量为5,即从1个视频帧中抽取5个子帧。
假设将24个子帧进行编号,得到的编号为1~24,那么依次抽取T1时刻产生的视频帧时,可以从视频帧11中抽取编号为1~5的子帧,组成T1时刻视频帧11对应的视频帧序列(该视频帧序列中包含子帧1、子帧2、子帧3、子帧4和子帧5);从视频帧21中抽取编号为1~5的子帧,组成T1时刻视频帧21对应的视频帧序列(该视频帧序列中包含子帧1、子帧2、子帧3、子帧4和子帧5);从视频帧31中抽取编号为1~5的子帧,组成T1时刻视频帧31对应的视频帧序列(该视频帧序列中包含子帧1、子帧2、子帧3、子帧4和子帧5);......;从视频帧NM中抽取编号为1~5的子帧,组成T1时刻视频帧NM对应的视频帧序列(该视频帧序列中包含子帧1、子帧2、子帧3、子帧4和子帧5)。
即针对不同路的视频流数据,可以抽取相同时刻产生的相同数量的、子帧号相同的视频子帧。
例如:依次抽取T1时刻产生的视频帧时,可以从视频帧11中抽取编号为1~5的子帧,组成T1时刻视频帧11对应的视频帧序列(该视频帧序列中包含子帧1、子帧2、子帧3、子帧4和子帧5);从视频帧21中抽取编号为2~6的子帧,组成T1时刻视频帧21对应的视频帧序列(该视频帧序列中包含子帧2、子帧3、子帧4、子帧5和子帧6);从视频帧31中抽取编号为3~7的子帧,组成T1时刻视频帧31对应的视频帧序列(该视频帧序列中包含子帧3、子帧4、子帧5、子帧6和子帧7);......;从视频帧NM中抽取编号为20~24的子帧,组成T1时刻视频帧NM对应的视频帧序列(该视频帧序列中包含子帧20、子帧21、子帧22、子帧23和子帧24)。
即针对不同路的视频流数据,可以抽取相同时刻产生的相同数量的、子帧号不相同的视频子帧。
具体地,针对不同路的视频流数据,可以抽取相同时刻产生的相同数量的、子帧号之间间隔设定数值的视频子帧。
此外,在按照第一种视频帧选择策略依次从接收到的第一视频流数据中抽取视频帧之后,变更执行抽取操作的视频流数据的产生时间,按照上述方式再从接收到的第一视频流数据中再次抽取视频帧,依次类推,进而实现视频巡逻的目的。
通常相邻两轮视频巡逻之间所抽取的视频帧可以按照同一种选择策略进行抽取,也可以间隔设定数量的视频帧,按照同一种选择策略进行抽取,这里不做具体限定,至于间隔数量的取值是多少,根据实际需要确定,在本申请实施例中不做具体限定。
例如:按照第一种视频帧选择策略依次从N路第一视频流数据中抽取T1时刻产生的视频帧;再次按照第一种视频帧选择策略依次从N路第一视频流数据中抽取T2时刻产生的视频帧;......;依次往下进行视频帧选择。
即针对第一次视频巡逻抽取到的视频帧可以为【视频帧11、视频帧21、视频帧31、......、视频帧N1】;针对第二次视频帧巡逻抽取到的视频帧可以为【视频帧12、视频帧22、视频帧32、......、视频帧N2】;......;针对第M次视频帧巡逻抽取到的视频帧可以为【视频帧1M、视频帧2M、视频帧3M、......、视频帧NM】。
如图4(a1)所示,为按照第一种视频选择策略从N路第一视频流数据中选择得到的视频帧序列的示意图。
第二种视频帧选择策略:
针对所述至少两路第一视频流数据的每路第一视频流数据,分别执行以下操作:
确定采集到该路所述第一视频流数据的视频采集设备的位置;
根据所述视频采集设备的位置,确定所述视频采集设备与采集到所述至少两路第一视频流数据中其他路第一视频流数据的视频采集设备之间的位置关系,从该路所述第一视频流数据中抽取设定时间范围内产生的视频帧,得到视频帧序列,所述设定时间范围由所述设定数量确定。
为了保证视频监控的安全等级需要,在接收到不同视频采集设备发送的视频流数据时,可以根据视频采集设备的标识信息和视频采集设备的位置之间的预设关系,确定接收到的每一个第一视频流数据对应的视频采集设备的位置,这样可以判断出接收到的第一视频流数据的位置关系。
仍以图2中所示的视频采集设备分布为例,可以确定不同的第一视频流数据对应的视频采集设备的位置关系,按照视频巡逻的要求,监控管理者需要在监控到第一视频采集设备采集的第一路视频流数据之后随机监控第二视频采集设备采集到第二路视频流数据,依次往下,完成一次视频巡逻。
那么在进行视频帧选择时,可以按照不同视频采集设备之间的位置关系,依次从所述至少两路第一视频流数据的每路第一视频流数据中抽取设定时间范围内产生的视频帧,得到视频帧序列,设定时间范围由设定数量确定。
在本申请的另一个实施例中,针对不同路的所述第一视频流数据,所述设定时间范围通过以下方式确定:
位置关系相邻的前一个视频采集设备采集到的第一视频流数据对应的设定时间范围与位置关系相邻的后一个视频采集设备采集到到的第一视频流数据对应的设定时间范围满足时间连续或者时间部分重叠。
例如:仍以图3中所示的N路第一视频流数据为例进行说明。对于采集到的多路第一视频流数据,从第一路第一视频流数据中抽取出T1时刻产生的视频帧11;对于第二路第一视频流数据,从第二路第一视频流数据中抽取出T2时刻产生的视频帧22;对于第三路第一视频流数据,从第三路第一视频流数据中抽取出T3时刻产生的视频帧33;......;对于第N路第一视频流数据,从第N路第一视频流数据中抽取出Tn时刻产生的视频帧NN。
这里需要说明的是,通常1秒可以产生24帧视频帧。那么在本申请实施例中假设Tn时刻为计时器的第n秒,那么对于视频帧NM来说,在本申请实施例中可以理解为第24秒采集到的视频流数据,即包含24个子帧。
例如:从第一路第一视频流数据中抽取出第1秒产生的视频帧11中的编号为1~5的子帧;对于第二路第一视频流数据,从第二路第一视频流数据中抽取出第2秒产生的视频帧22中的编号为2~6的子帧;对于第三路第一视频流数据,从第三路第一视频流数据中抽取出第3秒产生的视频帧33中编号为3~7的子帧;......;对于第N路第一视频流数据,从第N路第一视频流数据中抽取出第n秒产生的视频帧NN中编号为20~24的子帧。
即针对不同路的视频流数据,可以抽取不同时刻产生的相同数量的、子帧号相同的视频子帧。
此外,针对不同路的视频流数据,可以抽取不同时刻产生的相同数量的、子帧号不相同的视频子帧。
具体地,针对不同路的视频流数据,可以抽取不同时刻产生的相同数量的、子帧号之间间隔设定数值的视频子帧。
那么针对第一次视频巡逻抽取到的视频帧可以为【视频帧11、视频帧22、视频帧33、......、视频帧NN】;针对第二次视频帧巡逻抽取到的视频帧可以为【视频帧12、视频帧23、视频帧34、......、视频帧N(N+1)】;......;针对第M次视频帧巡逻抽取到的视频帧可以为【视频帧1M、视频帧2(M+1)、视频帧3(M+2)、......、视频帧N(M+N-1)】。
如图4(a2)所示,为按照第二种视频选择策略从N路第一视频流数据中选择得到的视频帧序列的示意图。
可选地,在执行抽取操作之前可以确定本轮视频巡逻抽取视频帧的时间周期,将该时间周期进行均分,进而确定出抽取每路视频流数据的时间。也就是说,T1~Tn可以属于一个时间周期的,在本申请实施例中T1~Tn也可以不属于一个时间周期的,这里不做具体限定。
需要说明的是,从不同路视频流数据中抽取到的视频帧数量可以相同也可以不同,这里不做具体限定。本申请实施例中所记载的不同时刻可以包含只要存在一路视频流数据的产生时间与其他路视频流数据的产生时间不同的情形,即可以存在几路视频流数据的产生时间相同的情形。
再例如:仍以图3中所示的N路第一视频流数据为例进行说明。对于第一路第一视频流数据,从第一路第一视频流数据中抽取出T1时刻产生的视频帧11中帧编号为1~4的视频帧;对于第二路第一视频流数据,从第二路第一视频流数据中抽取出T2时刻产生的视频帧22帧编号为5~8的视频帧;对于第三路第一视频流数据,从第三路第一视频流数据中抽取出T3时刻产生的视频帧33中帧编号为9~12的视频帧;......;对于第N路第一视频流数据,从第N路第一视频流数据中抽取出Tn时刻产生的视频帧NN中帧编号为任意的设定数量的视频帧。其中,T1、T2、T3、......、Tn在时间概念上连续。
需要说明的是,在从所述至少两路第一视频流数据的每路第一视频流数据中抽取设定数量的视频帧可以包含不同路视频流数据之间的重叠视频帧。
这里的重叠视频帧可以是指内容重叠的视频帧,也可以是指帧号重复的视频帧,这里不做具体限定。
如图4(a3)所示,为按照第二种视频选择策略从N路第一视频流数据中选择得到的视频帧序列的示意图。
需要说明的是,在从不同路的视频流中抽取视频帧时,可以满足:针对不同路的所述第一视频流数据对应的视频帧序列,相同序号的视频帧所对应的帧号相同;
或者,相邻两路的所述第一视频流数据对应的视频帧序列中前一个视频帧序列的最后一个视频帧的帧号与后一个视频帧序列的第一个视频帧的帧号连续;或者,
相邻两路的所述第一视频流数据对应的视频帧序列中前一个视频帧序列与后一个视频帧序列的部分视频帧的帧号重叠。
本申请实施例中所记载的视频帧选择策略可以是指从接收到的不同路的视频流数据中如何抽取视频帧的策略,在不同的场景下,选择策略可以不同。
在完成视频帧选择之后,需要按照视频帧重组策略对抽取出的视频帧进行重组。本申请实施例中所记载的视频帧重组策略包括但不限于以下几种:
第一种:
当所述视频帧产生的时间相同时,按照采集到所述第一视频流数据的视频采集设备的位置关系,将抽取到的所述视频帧进行重组,并对重组后的视频帧序列进行编码,得到第二视频流数据。
这里以图4(a1)中所示的内容为例说明。即针对第一次视频巡逻抽取到的视频帧可以为【视频帧11、视频帧21、视频帧31、......、视频帧N1】,将视频帧11、视频帧21、视频帧31、......、视频帧N1进行重组,即将视频帧11、视频帧21、视频帧31、......、视频帧N1进行整合编码,得到第二视频流数据1(这里得到的第二视频流数据可以称之为一次视频巡逻的视频流数据)。
针对第二次视频帧巡逻抽取到的视频帧可以为【视频帧12、视频帧22、视频帧32、......、视频帧N2】,将视频帧12、视频帧22、视频帧32、......、视频帧N2进行重组,即将视频帧12、视频帧22、视频帧32、......、视频帧N2进行整合编码,得到第二视频流数据2(这里得到的第二视频流数据可以称之为一次视频巡逻的视频流数据)。
......
针对第M次视频帧巡逻抽取到的视频帧可以为【视频帧1M、视频帧2M、视频帧3M、......、视频帧NM】,将视频帧1M、视频帧2M、视频帧3M、......、视频帧NM进行重组,即将视频帧1M、视频帧2M、视频帧3M、......、视频帧NM进行整合编码,得到第二视频流数据M(这里得到的第二视频流数据可以称之为一次视频巡逻的视频流数据)。
如图4(b1)所示,为针对图4(a1)得到的第二视频流数据的示意图。
第二种:
当所述视频帧产生的时间不同时,按照所述视频帧产生的时间顺序,将抽取到的所述视频帧进行重组,并对重组后的视频帧序列进行编码,得到第二视频流数据。
这里以图4(a2)中所示的内容为例说明。即针对第一次视频巡逻抽取到的视频帧可以为【视频帧11、视频帧22、视频帧33、......、视频帧NN】,将视频帧11、视频帧22、视频帧33、......、视频帧NN进行重组,即将视频帧11、视频帧22、视频帧33、......、视频帧NN进行整合编码,得到第二视频流数据1(这里得到的第二视频流数据可以称之为一次视频巡逻的视频流数据)。
针对第二次视频帧巡逻抽取到的视频帧可以为【视频帧12、视频帧23、视频帧34、......、视频帧N(N+1)】,将视频帧12、视频帧23、视频帧34、......、视频帧N(N+1)进行重组,即将视频帧12、视频帧23、视频帧34、......、视频帧N(N+1)进行整合编码,得到第二视频流数据2(这里得到的第二视频流数据可以称之为一次视频巡逻的视频流数据);
......
针对第M次视频帧巡逻抽取到的视频帧可以为【视频帧1M、视频帧2(M+1)、视频帧3(M+2)、......、视频帧N(M+N-1)】,将视频帧1M、视频帧2(M+1)、视频帧3(M+2)、......、视频帧N(M+N-1)进行重组,即将视频帧1M、视频帧2(M+1)、视频帧3(M+2)、......、视频帧N(M+N-1)进行整合编码,得到第二视频流数据M(这里得到的第二视频流数据可以称之为一次视频巡逻的视频流数据)。
如图4(b2)所示,为针对图4(a2)得到的第二视频流数据的示意图。
在本申请的另一个实施例中,将抽取到的所述视频帧重组成第二视频流数据,包括:
针对不同路的所述第一视频流数据对应的视频帧序列,判断位置关系相邻的不同视频采集设备采集到的所述第一视频流数据对应的视频帧序列中是否存在内容相同的视频帧;
当判断结果为存在内容相同的视频帧时,删除位置关系相邻的不同视频采集设备采集到的所述第一视频流数据对应的其中一个视频帧序列中确定的内容相同的视频帧;
将位置关系相邻的不同视频采集设备采集到的所述第一视频流数据对应的另一个视频帧序列与删除后剩余的视频帧序列进行重组;
对重组后的视频帧序列进行编码,得到第二视频流数据。
这里以图4(a3)中所示的内容为例进行说明。从图4(a3)中可以看出,抽取得到的视频帧11与视频帧21、视频帧21与视频帧31、......、视频帧N-1与视频帧N之间存在重叠视频帧,那么对出现的重叠视频帧进行处理,消除视频帧11与视频帧21、视频帧21与视频帧31、......、视频帧N-1与视频帧N之间存在的重叠视频帧,进而对处理后的视频帧进行重组;并对重组后的视频帧序列进行编码,得到第二视频流数据。
如图4(b3)所示,为针对图4(a3)得到的第二视频流数据的示意图。
在步骤102中,当按照设定的视频流重组策略将所述至少两路第一视频流数据重组成一路第二视频流数据时,可以将视频帧选择策略与视频帧重组策略进行组合,按照组合方式将所述至少两路第一视频流数据重组成一路第二视频流数据。
需要说明的是,本申请实施例中所记载的设定数量可以根据实际需要确定,也可以根据试验数据确定,这里不做具体限定。
在本申请的另一个实施例中,在得到重组后的第二视频流数据后,所述方法还包括:
确定完成第n轮视频巡逻,并启动第n+1轮视频巡逻,触发执行按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据的操作,对于同一路视频流数据,在第n轮视频巡逻重组的视频帧中的最后一帧的帧号与在第n+1轮视频巡逻重组的视频帧中的第一帧的帧号之间间隔设定数值,n为大于等于1的正整数。
若以图4(a1)中所示的内容为例说明。即针对第一次视频巡逻抽取到的视频帧可以为【视频帧11、视频帧21、视频帧31、......、视频帧N1】,将视频帧11、视频帧21、视频帧31、......、视频帧N1进行重组,即将视频帧11、视频帧21、视频帧31、......、视频帧N1进行整合编码,得到第二视频流数据1(这里得到的第二视频流数据可以称之为一次视频巡逻的视频流数据)。
针对第二次视频帧巡逻抽取到的视频帧可以为【视频帧12、视频帧22、视频帧32、......、视频帧N2】,将视频帧12、视频帧22、视频帧32、......、视频帧N2进行重组,即将视频帧12、视频帧22、视频帧32、......、视频帧N2进行整合编码,得到第二视频流数据2(这里得到的第二视频流数据可以称之为一次视频巡逻的视频流数据)。
......
针对第M次视频帧巡逻抽取到的视频帧可以为【视频帧1M、视频帧2M、视频帧3M、......、视频帧NM】,将视频帧1M、视频帧2M、视频帧3M、......、视频帧NM进行重组,即将视频帧1M、视频帧2M、视频帧3M、......、视频帧NM进行整合编码,得到第二视频流数据M(这里得到的第二视频流数据可以称之为一次视频巡逻的视频流数据)。
步骤103:将重组后的所述第二视频流数据显示在视频监控显示设备中。
在步骤103中,按照视频巡逻的要求,依次将得到的第二视频流数据发送给视频监控显示设备,例如:将第二视频流数据1发送给视频监控显示设备,再将第二视频流数据2发送给视频监控显示设备,......;将第二视频流数据M发送给视频监控显示设备。
通过本申请实施例中所记载的方案,获取不同视频采集设备采集的至少两路第一视频流数据;按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据;并将重组后的所述第二视频流数据显示在视频监控显示设备中,进而实现在视频监控显示设备中显示一路视频流数据,使得整个视频监控系统生成的视频流数据连续变化,有助于快速从视频监控显示设备中获取有效地视频信息,提升视频监控系统的监控能力,有效改善应对突发异常事件的处理及时性。
实施例2
基于同一发明构思,图5为本申请实施例提供的一种视频流处理设备的结构示意图。所述视频流处理设备包括:获取单元51、重组单元52和处理单元53,其中:
获取单元51,用于获取不同视频采集设备采集的至少两路第一视频流数据;
重组单元52,用于按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据;
处理单元53,用于将重组后的所述第二视频流数据显示在视频监控显示设备中。
在本申请的另一个实施例中,所述重组单元52按照设定的视频流重组策略,分别将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据,包括:
分别从所述至少两路第一视频流数据的每路第一视频流数据中抽取设定数量的视频帧;
按照所述视频帧产生的时间顺序和/或采集到所述第一视频流数据的视频采集设备的位置关系,将抽取到的所述视频帧重组成第二视频流数据。
在本申请的另一个实施例中,所述重组单元52分别从所述至少两路第一视频流数据的每路第一视频流数据中抽取设定数量的视频帧,包括:
针对所述至少两路第一视频流数据的每路第一视频流数据,分别执行以下操作:
确定该路所述第一视频流数据中视频帧的产生时间;
根据视频帧的产生时间,从该路所述第一视频流数据中抽取相同时刻产生的设定数量的视频帧,得到视频帧序列。
在本申请的另一个实施例中,所述重组单元52按照采集到所述第一视频流数据的视频采集设备的位置关系,将抽取到的所述视频帧重组成第二视频流数据,包括:
在所述视频帧产生的时间相同时,按照采集到所述第一视频流数据的不同的视频采集设备的位置关系,将抽取到的所述视频帧进行重组,并对重组后的视频帧序列进行编码,得到第二视频流数据。
在本申请的另一个实施例中,所述重组单元52分别从所述至少两路第一视频流数据的每路第一视频流数据中抽取设定数量的视频帧,包括:
针对所述至少两路第一视频流数据的每路第一视频流数据,分别执行以下操作:
确定采集到该路所述第一视频流数据的视频采集设备的位置;
根据所述视频采集设备的位置,确定所述视频采集设备与采集到所述至少两路第一视频流数据中其他路第一视频流数据的视频采集设备之间的位置关系,从该路所述第一视频流数据中抽取设定时间范围内产生的视频帧,得到视频帧序列,所述设定时间范围由所述设定数量确定。
在本申请的另一个实施例中,针对不同路的所述第一视频流数据,所述设定时间范围通过以下方式确定:
位置关系相邻的前一个视频采集设备采集到的第一视频流数据对应的设定时间范围与位置关系相邻的后一个视频采集设备采集到到的第一视频流数据对应的设定时间范围满足时间连续或者时间部分重叠。
在本申请的另一个实施例中,所述重组单元52按照所述视频帧产生的时间顺序,将抽取到的所述视频帧重组成第二视频流数据,包括:
在所述视频帧产生的时间不同时,按照所述视频帧产生的时间顺序,将抽取到的所述视频帧进行重组,并对重组后的视频帧序列进行编码,得到第二视频流数据。
在本申请的另一个实施例中,针对不同路的所述第一视频流数据对应的视频帧序列,相同序号的视频帧所对应的帧号相同;
或者,相邻两路的所述第一视频流数据对应的视频帧序列中前一个视频帧序列的最后一个视频帧的帧号与后一个视频帧序列的第一个视频帧的帧号连续;或者,
相邻两路的所述第一视频流数据对应的视频帧序列中前一个视频帧序列与后一个视频帧序列的部分视频帧的帧号重叠。
在本申请的另一个实施例中,所述重组单元52将抽取到的所述视频帧重组成第二视频流数据,包括:
针对不同路的所述第一视频流数据对应的视频帧序列,判断位置关系相邻的不同视频采集设备采集到的所述第一视频流数据对应的视频帧序列中是否存在内容相同的视频帧;
当判断结果为存在内容相同的视频帧时,删除位置关系相邻的不同视频采集设备采集到的所述第一视频流数据对应的其中一个视频帧序列中确定的内容相同的视频帧;
将位置关系相邻的不同视频采集设备采集到的所述第一视频流数据对应的另一个视频帧序列与删除后剩余的视频帧序列进行重组;
对重组后的视频帧序列进行编码,得到第二视频流数据。
在本申请的另一个实施例中,所述视频流处理设备还包括:视频巡逻单元54,其中:
所述视频巡逻单元54,用于在得到重组后的第二视频流数据后,确定完成第n轮视频巡逻,并启动第n+1轮视频巡逻,触发执行按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据的操作,对于同一路视频流数据,在第n轮视频巡逻重组的视频帧中的最后一帧的帧号与在第n+1轮视频巡逻重组的视频帧中的第一帧的帧号之间间隔设定数值,n为大于等于1的正整数。
需要说明的是,本申请实施例中所记载的视频流处理设备的功能可以通过软件方式实现,也可以通过硬件方式实现,这里不做限定。该视频流处理设备通过获取不同视频采集设备采集的至少两路第一视频流数据;按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据;并将重组后的所述第二视频流数据显示在视频监控显示设备中,进而实现在视频监控显示设备中显示一路视频流数据,使得整个视频监控系统生成的视频流数据连续变化,有助于快速从视频监控显示设备中获取有效地视频信息,提升视频监控系统的监控能力,有效改善应对突发异常事件的处理及时性。
实施例3
基于同一发明构思,图6为本申请实施例提供的一种视频监控系统的结构示意图。所述视频监控系统包含至少两个视频采集设备611~61N、视频流处理服务器62和视频监控显示设备63,其中:
所述至少两个视频采集设备611~61N,用于采集所覆盖区域的视频数据,不同视频采集设备所采集的所述视频数据形成不同路视频流数据,并将所述视频流数据发送给所述视频流处理服务器;
所述视频流处理服务器62,用于获取至少两个视频采集设备采集的至少两路第一视频流数据;按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据;
所述视频监控显示设备63,用于显示接收到的所述第二视频流数据。
在本申请的另一个实施例中,所述视频流处理服务器62包括:视频流解码设备621、视频流选取设备622和视频流重组设备623,其中:
所述视频流解码设备621,用于针对获取到的至少两路第一视频流数据,分别对所述第一视频流数据进行解码,得到所述第一视频流数据中包含的多个视频帧;
所述视频流选取设备622,用于分别从所述至少两路第一视频流数据的每个所述第一视频流数据中抽取设定数量的视频帧;
所述视频流重组设备623,用于按照所述视频帧产生的时间顺序和/或采集到所述第一视频流数据的视频采集设备的位置关系,将抽取到的所述视频帧重组成第二视频流数据。
在本申请的另一个实施例中,所述视频流选取设备622分别从所述至少两路第一视频流数据的每路第一视频流数据中抽取设定数量的视频帧,包括:
针对所述至少两路第一视频流数据的每路第一视频流数据,分别执行以下操作:
确定该路所述第一视频流数据中视频帧的产生时间;
根据视频帧的产生时间,从该路所述第一视频流数据中抽取相同时刻产生的设定数量的视频帧,得到视频帧序列。
在本申请的另一个实施例中,所述视频流重组设备623按照采集到所述第一视频流数据的视频采集设备的位置关系,将抽取到的所述视频帧重组成第二视频流数据,包括:
在所述视频帧产生的时间相同时,按照采集到所述第一视频流数据的不同的视频采集设备的位置关系,将抽取到的所述视频帧进行重组,并对重组后的视频帧序列进行编码,得到第二视频流数据。
在本申请的另一个实施例中,所述所述视频流选取设备622分别从所述至少两路第一视频流数据的每路第一视频流数据中抽取设定数量的视频帧,包括:
针对所述至少两路第一视频流数据的每路第一视频流数据,分别执行以下操作:
确定采集到该路所述第一视频流数据的视频采集设备的位置;
根据所述视频采集设备的位置,确定所述视频采集设备与采集到所述至少两路第一视频流数据中其他路第一视频流数据的视频采集设备之间的位置关系,从该路所述第一视频流数据中抽取设定时间范围内产生的视频帧,得到视频帧序列,所述设定时间范围由所述设定数量确定。
在本申请的另一个实施例中,针对不同路的所述第一视频流数据,所述设定时间范围通过以下方式确定:
位置关系相邻的前一个视频采集设备采集到的第一视频流数据对应的设定时间范围与位置关系相邻的后一个视频采集设备采集到到的第一视频流数据对应的设定时间范围满足时间连续或者时间部分重叠。
在本申请的另一个实施例中,所述视频流重组设备623按照所述视频帧产生的时间顺序,将抽取到的所述视频帧重组成第二视频流数据,包括:
在所述视频帧产生的时间不同时,按照所述视频帧产生的时间顺序,将抽取到的所述视频帧进行重组,并对重组后的视频帧序列进行编码,得到第二视频流数据。
在本申请的另一个实施例中,所述视频流重组设备623将抽取到的所述视频帧重组成第二视频流数据,包括:
针对不同路的所述第一视频流数据对应的视频帧序列,判断位置关系相邻的不同视频采集设备采集到的所述第一视频流数据对应的视频帧序列中是否存在内容相同的视频帧;
当判断结果为存在内容相同的视频帧时,删除位置关系相邻的不同视频采集设备采集到的所述第一视频流数据对应的其中一个视频帧序列中确定的内容相同的视频帧;
将位置关系相邻的不同视频采集设备采集到的所述第一视频流数据对应的另一个视频帧序列与删除后剩余的视频帧序列进行重组;
对重组后的视频帧序列进行编码,得到第二视频流数据。
通过本申请实施例中所记载的视频监控系统,获取不同视频采集设备采集的至少两路第一视频流数据;按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据;并将重组后的所述第二视频流数据显示在视频监控显示设备中,进而实现在视频监控显示设备中显示一路视频流数据,使得整个视频监控系统生成的视频流数据连续变化,有助于快速从视频监控显示设备中获取有效地视频信息,提升视频监控系统的监控能力,有效改善应对突发异常事件的处理及时性。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白,本申请的实施例可提供为方法、系统或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
以上所述仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。
Claims (22)
1.一种视频流处理方法,其特征在于,包括:
获取不同视频采集设备采集的至少两路第一视频流数据;
按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据;并
将重组后的所述第二视频流数据显示在视频监控显示设备中。
2.如权利要求1所述的视频流处理方法,其特征在于,按照设定的视频流重组策略,分别将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据,包括:
分别从所述至少两路第一视频流数据的每路第一视频流数据中抽取设定数量的视频帧;
按照所述视频帧产生的时间顺序和/或采集到所述第一视频流数据的视频采集设备的位置关系,将抽取到的所述视频帧重组成第二视频流数据。
3.如权利要求2所述的视频流处理方法,其特征在于,分别从所述至少两路第一视频流数据的每路第一视频流数据中抽取设定数量的视频帧,包括:
针对所述至少两路第一视频流数据的每路第一视频流数据,分别执行以下操作:
确定该路所述第一视频流数据中视频帧的产生时间;
根据视频帧的产生时间,从该路所述第一视频流数据中抽取相同时刻产生的设定数量的视频帧,得到视频帧序列。
4.如权利要求2或3所述的视频流处理方法,其特征在于,按照采集到所述第一视频流数据的视频采集设备的位置关系,将抽取到的所述视频帧重组成第二视频流数据,包括:
在所述视频帧产生的时间相同时,按照采集到所述第一视频流数据的不同的视频采集设备的位置关系,将抽取到的所述视频帧进行重组,并对重组后的视频帧序列进行编码,得到第二视频流数据。
5.如权利要求2所述的视频流处理方法,其特征在于,分别从所述至少两路第一视频流数据的每路第一视频流数据中抽取设定数量的视频帧,包括:
针对所述至少两路第一视频流数据的每路第一视频流数据,分别执行以下操作:
确定采集到该路所述第一视频流数据的视频采集设备的位置;
根据所述视频采集设备的位置,确定所述视频采集设备与采集到所述至少两路第一视频流数据中其他路第一视频流数据的视频采集设备之间的位置关系,从该路所述第一视频流数据中抽取设定时间范围内产生的视频帧,得到视频帧序列,所述设定时间范围由所述设定数量确定。
6.如权利要求5所述的视频流处理方法,其特征在于,针对不同路的所述第一视频流数据,所述设定时间范围通过以下方式确定:
位置关系相邻的前一个视频采集设备采集到的第一视频流数据对应的设定时间范围与位置关系相邻的后一个视频采集设备采集到的第一视频流数据对应的设定时间范围满足时间连续或者时间部分重叠。
7.如权利要求5或6所述的视频流处理方法,其特征在于,按照所述视频帧产生的时间顺序,将抽取到的所述视频帧重组成第二视频流数据,包括:
在所述视频帧产生的时间不同时,按照所述视频帧产生的时间顺序,将抽取到的所述视频帧进行重组,并对重组后的视频帧序列进行编码,得到第二视频流数据。
8.如权利要求3或5所述的视频流处理方法,其特征在于,
针对不同路的所述第一视频流数据对应的视频帧序列,相同序号的视频帧所对应的帧号相同;
或者,相邻两路的所述第一视频流数据对应的视频帧序列中前一个视频帧序列的最后一个视频帧的帧号与后一个视频帧序列的第一个视频帧的帧号连续;或者,
相邻两路的所述第一视频流数据对应的视频帧序列中前一个视频帧序列与后一个视频帧序列的部分视频帧的帧号重叠。
9.如权利要求2所述的视频流处理方法,其特征在于,将抽取到的所述视频帧重组成第二视频流数据,包括:
针对不同路的所述第一视频流数据对应的视频帧序列,判断位置关系相邻的不同视频采集设备采集到的所述第一视频流数据对应的视频帧序列中是否存在内容相同的视频帧;
当判断结果为存在内容相同的视频帧时,删除位置关系相邻的不同视频采集设备采集到的所述第一视频流数据对应的其中一个视频帧序列中确定的内容相同的视频帧;
将位置关系相邻的不同视频采集设备采集到的所述第一视频流数据对应的另一个视频帧序列与删除后剩余的视频帧序列进行重组;
对重组后的视频帧序列进行编码,得到第二视频流数据。
10.如权利要求1所述的视频流处理方法,其特征在于,在得到重组后的第二视频流数据后,所述方法还包括:
确定完成第n轮视频巡逻,并启动第n+1轮视频巡逻,触发执行按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据的操作,对于同一路视频流数据,在第n轮视频巡逻重组的视频帧中的最后一帧的帧号与在第n+1轮视频巡逻重组的视频帧中的第一帧的帧号之间间隔设定数值,n为大于等于1的正整数。
11.一种视频流处理设备,其特征在于,包括:
获取单元,用于获取不同视频采集设备采集的至少两路第一视频流数据;
重组单元,用于按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据;
处理单元,用于将重组后的所述第二视频流数据显示在视频监控显示设备中。
12.如权利要求11所述的视频流处理设备,其特征在于,所述重组单元按照设定的视频流重组策略,分别将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据,包括:
分别从所述至少两路第一视频流数据的每路第一视频流数据中抽取设定数量的视频帧;
按照所述视频帧产生的时间顺序和/或采集到所述第一视频流数据的视频采集设备的位置关系,将抽取到的所述视频帧重组成第二视频流数据。
13.如权利要求12所述的视频流处理设备,其特征在于,所述重组单元分别从所述至少两路第一视频流数据的每路第一视频流数据中抽取设定数量的视频帧,包括:
针对所述至少两路第一视频流数据的每路第一视频流数据,分别执行以下操作:
确定该路所述第一视频流数据中视频帧的产生时间;
根据视频帧的产生时间,从该路所述第一视频流数据中抽取相同时刻产生的设定数量的视频帧,得到视频帧序列。
14.如权利要求12或13所述的视频流处理设备,其特征在于,所述重组单元按照采集到所述第一视频流数据的视频采集设备的位置关系,将抽取到的所述视频帧重组成第二视频流数据,包括:
在所述视频帧产生的时间相同时,按照采集到所述第一视频流数据的不同的视频采集设备的位置关系,将抽取到的所述视频帧进行重组,并对重组后的视频帧序列进行编码,得到第二视频流数据。
15.如权利要求12所述的视频流处理设备,其特征在于,所述重组单元分别从所述至少两路第一视频流数据的每路第一视频流数据中抽取设定数量的视频帧,包括:
针对所述至少两路第一视频流数据的每路第一视频流数据,分别执行以下操作:
确定采集到该路所述第一视频流数据的视频采集设备的位置;
根据所述视频采集设备的位置,确定所述视频采集设备与采集到所述至少两路第一视频流数据中其他路第一视频流数据的视频采集设备之间的位置关系,从该路所述第一视频流数据中抽取设定时间范围内产生的视频帧,得到视频帧序列,所述设定时间范围由所述设定数量确定。
16.如权利要求15所述的视频流处理设备,其特征在于,针对不同路的所述第一视频流数据,所述设定时间范围通过以下方式确定:
位置关系相邻的前一个视频采集设备采集到的第一视频流数据对应的设定时间范围与位置关系相邻的后一个视频采集设备采集到到的第一视频流数据对应的设定时间范围满足时间连续或者时间部分重叠。
17.如权利要求15或16所述的视频流处理设备,其特征在于,所述重组单元按照所述视频帧产生的时间顺序,将抽取到的所述视频帧重组成第二视频流数据,包括:
在所述视频帧产生的时间不同时,按照所述视频帧产生的时间顺序,将抽取到的所述视频帧进行重组,并对重组后的视频帧序列进行编码,得到第二视频流数据。
18.如权利要求13或15所述的视频流处理设备,其特征在于,
针对不同路的所述第一视频流数据对应的视频帧序列,相同序号的视频帧所对应的帧号相同;
或者,相邻两路的所述第一视频流数据对应的视频帧序列中前一个视频帧序列的最后一个视频帧的帧号与后一个视频帧序列的第一个视频帧的帧号连续;或者,
相邻两路的所述第一视频流数据对应的视频帧序列中前一个视频帧序列与后一个视频帧序列的部分视频帧的帧号重叠。
19.如权利要求12所述的视频流处理设备,其特征在于,所述重组单元将抽取到的所述视频帧重组成第二视频流数据,包括:
针对不同路的所述第一视频流数据对应的视频帧序列,判断位置关系相邻的不同视频采集设备采集到的所述第一视频流数据对应的视频帧序列中是否存在内容相同的视频帧;
当判断结果为存在内容相同的视频帧时,删除位置关系相邻的不同视频采集设备采集到的所述第一视频流数据对应的其中一个视频帧序列中确定的内容相同的视频帧;
将位置关系相邻的不同视频采集设备采集到的所述第一视频流数据对应的另一个视频帧序列与删除后剩余的视频帧序列进行重组;
对重组后的视频帧序列进行编码,得到第二视频流数据。
20.如权利要求12所述的视频流处理设备,其特征在于,所述视频流处理设备还包括:视频巡逻单元,其中:
所述视频巡逻单元,用于在得到重组后的第二视频流数据后,确定完成第n轮视频巡逻,并启动第n+1轮视频巡逻,触发执行按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据的操作,对于同一路视频流数据,在第n轮视频巡逻重组的视频帧中的最后一帧的帧号与在第n+1轮视频巡逻重组的视频帧中的第一帧的帧号之间间隔设定数值,n为大于等于1的正整数。
21.一种视频监控系统,其特征在于,所述视频监控系统包含至少两个视频采集设备、视频流处理服务器和视频监控显示设备,其中:
所述至少两个视频采集设备,用于采集所覆盖区域的视频数据,不同视频采集设备所采集的所述视频数据形成不同路视频流数据,并将所述视频流数据发送给所述视频流处理服务器;
所述视频流处理服务器,用于获取至少两个视频采集设备采集的至少两路第一视频流数据;按照设定的视频流重组策略,将所述至少两路第一视频流数据中包含的部分视频帧重组成一路第二视频流数据;
所述视频监控显示设备,用于显示接收到的所述第二视频流数据。
22.如权利要求21所述的视频监控系统,其特征在于,所述视频流处理服务器包括:视频流解码设备、视频流选取设备和视频流重组设备,其中:
所述视频流解码设备,用于针对获取到的至少两路第一视频流数据,分别对所述第一视频流数据进行解码,得到所述第一视频流数据中包含的多个视频帧;
所述视频流选取设备,用于分别从所述至少两路第一视频流数据的每个所述第一视频流数据中抽取设定数量的视频帧;
所述视频流重组设备,用于按照所述视频帧产生的时间顺序和/或采集到所述第一视频流数据的视频采集设备的位置关系,将抽取到的所述视频帧重组成第二视频流数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611081593.4A CN108124126B (zh) | 2016-11-30 | 2016-11-30 | 一种视频流处理方法、设备及视频监控系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611081593.4A CN108124126B (zh) | 2016-11-30 | 2016-11-30 | 一种视频流处理方法、设备及视频监控系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108124126A true CN108124126A (zh) | 2018-06-05 |
CN108124126B CN108124126B (zh) | 2020-06-02 |
Family
ID=62226173
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611081593.4A Active CN108124126B (zh) | 2016-11-30 | 2016-11-30 | 一种视频流处理方法、设备及视频监控系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108124126B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111711791A (zh) * | 2020-06-12 | 2020-09-25 | 西安万像电子科技有限公司 | 数据处理方法及装置 |
CN112333502A (zh) * | 2020-07-30 | 2021-02-05 | 深圳Tcl新技术有限公司 | 智能电视显示方法、智能电视及计算机可读存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030011676A1 (en) * | 2001-07-04 | 2003-01-16 | Hunter Andrew Arthur | Environmental imaging apparatus and method |
CN105100688A (zh) * | 2014-05-12 | 2015-11-25 | 索尼公司 | 图像处理方法、图像处理装置和监视系统 |
KR20160088129A (ko) * | 2015-01-15 | 2016-07-25 | 한화테크윈 주식회사 | 다중 비디오써머리제공방법 및 장치 |
-
2016
- 2016-11-30 CN CN201611081593.4A patent/CN108124126B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030011676A1 (en) * | 2001-07-04 | 2003-01-16 | Hunter Andrew Arthur | Environmental imaging apparatus and method |
CN105100688A (zh) * | 2014-05-12 | 2015-11-25 | 索尼公司 | 图像处理方法、图像处理装置和监视系统 |
KR20160088129A (ko) * | 2015-01-15 | 2016-07-25 | 한화테크윈 주식회사 | 다중 비디오써머리제공방법 및 장치 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111711791A (zh) * | 2020-06-12 | 2020-09-25 | 西安万像电子科技有限公司 | 数据处理方法及装置 |
CN112333502A (zh) * | 2020-07-30 | 2021-02-05 | 深圳Tcl新技术有限公司 | 智能电视显示方法、智能电视及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN108124126B (zh) | 2020-06-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101674444B (zh) | 视频数据的存储方法、系统和编码器 | |
CN103685914B (zh) | 图像管理装置及管理方法 | |
CN110661659A (zh) | 一种告警方法、装置、系统及电子设备 | |
CN104836992A (zh) | 一种监控视频录制方法及装置 | |
CN108124126B (zh) | 一种视频流处理方法、设备及视频监控系统 | |
US10192119B2 (en) | Generating a summary video sequence from a source video sequence | |
CN108322350B (zh) | 业务监控方法及装置和电子设备 | |
CN105898554A (zh) | 实时转码的监控方法和实时转码系统 | |
CN103167265A (zh) | 基于智能图像识别的视频处理方法及系统 | |
CN111836102A (zh) | 视频帧的分析方法和装置 | |
CN102376146A (zh) | 基于图像分析报警信号的报警事件信息保存方法 | |
CN106991314A (zh) | 一种数据存储方法及装置 | |
CN104767964B (zh) | 视频存储控制和优化的方法及其装置、视频监控系统 | |
CN114500574A (zh) | 一种基于区块链的提高粮库安全的监控方法、设备及介质 | |
CN106713940B (zh) | 视频流的存储方法、读取方法及装置 | |
CN107920224A (zh) | 一种异常告警方法、设备及视频监控系统 | |
CN103905789B (zh) | 动态分析数据的保存、搜索和事后分析的方法及其装置 | |
CN113938673B (zh) | 一种智慧城市监控管理方法 | |
CN109598911B (zh) | 预警方法、装置及计算机可读存储介质 | |
CN113497963A (zh) | 视频处理方法、装置及设备 | |
CN113989746B (zh) | 一种场景中复杂事件的检测方法、系统、设备及存储介质 | |
CN115310139A (zh) | 文件监控预警系统、方法、计算设备及计算机存储介质 | |
CN104581002A (zh) | 一种智能视频定位方法 | |
CN110851305A (zh) | 科技项目文件备份存储方法和装置 | |
CN111639133A (zh) | 基于区块链的直播监控方法和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |