CN110248152A - 一种处理监控数据的方法、云台摄像机及监控系统 - Google Patents
一种处理监控数据的方法、云台摄像机及监控系统 Download PDFInfo
- Publication number
- CN110248152A CN110248152A CN201811381535.2A CN201811381535A CN110248152A CN 110248152 A CN110248152 A CN 110248152A CN 201811381535 A CN201811381535 A CN 201811381535A CN 110248152 A CN110248152 A CN 110248152A
- Authority
- CN
- China
- Prior art keywords
- video
- audio
- data
- monitoring
- video monitoring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 389
- 238000000034 method Methods 0.000 title claims abstract description 40
- 238000012545 processing Methods 0.000 claims description 86
- 230000015572 biosynthetic process Effects 0.000 claims description 52
- 238000003786 synthesis reaction Methods 0.000 claims description 52
- 230000004927 fusion Effects 0.000 claims description 13
- 230000008569 process Effects 0.000 claims description 5
- 238000013500 data storage Methods 0.000 claims description 2
- 230000000694 effects Effects 0.000 abstract description 14
- 230000002194 synthesizing effect Effects 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 19
- 238000004590 computer program Methods 0.000 description 6
- 238000011946 reduction process Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000002708 enhancing effect Effects 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000012805 post-processing Methods 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- VIKNJXKGJWUCNN-XGXHKTLJSA-N norethisterone Chemical compound O=C1CC[C@@H]2[C@H]3CC[C@](C)([C@](CC4)(O)C#C)[C@@H]4[C@@H]3CCC2=C1 VIKNJXKGJWUCNN-XGXHKTLJSA-N 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Alarm Systems (AREA)
Abstract
本发明公开了一种处理监控数据的方法、云台摄像机及监控系统,用以解决云台摄像机只能采集周围或某一特定方向的音频数据,对于比较远的监控区域,则音频采集效果会比较差的问题。本发明实施例云台摄像机的监控范围内包含多个视频监控区域,每个视频监控区域内包含至少一个音频采集装置,云台摄像机可以在不同视频监控区域之间切换,即使切换到很远的视频监控区域,依然可以通过该视频监控区域内的音频采集装置对该区域进行收音,且降低了音频采集装置受云台摄像机转动方向的影响,提高了云台摄像机在任意视频监控区域的音频采集效果,进一步的,提高了对视频数据和相应音频数据进行合成后的画面效果。
Description
技术领域
本发明涉及摄像监控领域,特别涉及一种处理监控数据的方法、云台摄像机及监控系统。
背景技术
在安保、安防,采访等领域,各类视频监控或视频采集系统已经得到广泛应用。依托各类视频监控或视频采集系统,可以对远距离视频中相关场景进行准确拍摄。
云台摄像机因具有运动灵活、监控范围广等优点,成为监控系统中的常见设备。一般每个云台摄像机都有一路视频和一路音频采集或定向二路音频采集,采集结果可以接入监控系统。一套监控系统有时需要监控多个点位或区域,每个区域都需要采集对应的视频及音频。
目前,云台摄像机能够通过转动、变倍、聚焦,采集多区域视频,但音频采集只能采集云台摄像机安装位置附近的音频,或者在球形云台摄像机内部背向设置两个音频采集装置以定向采集音频,但定向采集音频仅仅是某个方向音频略大,不能把周围音频全过滤到,当云台摄像机附近有较大声音或者云台摄像机变倍时,监控的场景变远了,超出音频采集装置的收音范围时,远处监控区域内的声音会被淹没,会导致采集到音频的仅是某个方向上的声音略大甚至无法采集到音频,音频采集装置收音效果差,音频采集装置并不能根据云台摄像机变倍后的情况采集远处监控区域的声音。
综上所述,目前云台摄像机只能采集周围或某一特定方向的音频数据,对于比较远的监控区域,则音频采集效果会比较差。
发明内容
本发明提供一种处理监控数据的方法、云台摄像机及监控系统,用以解决现有云台摄像机只能采集周围或某一特定方向的音频数据,对于比较远的监控区域,则音频采集效果会比较差的问题。
第一方面,本发明实施例提供的一种处理监控数据的方法包括:获取位于云台摄像机的监控范围内的多个音频采集装置采集的音频数据以及所述云台摄像机采集的视频数据,其中所述监控范围包括多个视频监控区域,所述视频监控区域中包括至少一个音频采集装置;
针对任意一个视频监控区域,将获取的所述视频监控区域对应的视频数据与所述视频监控区域对应的音频数据进行合成处理。
上述方法,云台摄像机的监控范围内包含多个视频监控区域,每个视频监控区域内包含至少一个音频采集装置,云台摄像机可以在不同视频监控区域之间切换,即使切换到很远的视频监控区域,依然可以通过该视频监控区域内的音频采集装置对该区域进行收音,且降低了音频采集装置受云台摄像机转动方向的影响,提高了云台摄像机在任意视频监控区域的音频采集效果,进一步的,提高了对视频数据和相应音频数据进行合成后的画面效果。
在一种可能的实现方式中,通过下列方式确定所述视频监控区域对应的视频数据:根据云台摄像机的云台角度与视频监控区域的第一对应关系,确定所述云台摄像机在当前的云台角度采集的视频数据对应的视频监控区域。
上述方法,对于不同的云台摄像机,能够根据设备性能允许的云台角度划分视频监控区域,且云台摄像机在运行时具有唯一角度,能够根据云台摄像机的云台角度与视频监控区域的第一对应关系准确判断出在上一次转动后采集的视频数据对应的视频监控区域。
在一种可能的实现方式中,通过下列方式确定所述视频监控区域对应的音频数据:根据所述视频监控区域和音频采集装置的第二对应关系,确定视频监控区域对应的音频采集装置采集的音频数据。
上述方法,对于不同的云台摄像机,每个视频监控区域内都具有音频采集装置,并根据视频监控区域和音频采集装置的第二对应关系,确定视频监控区域对应的音频采集装置采集的音频数据,提高了音频数据的质量和匹配的准确性。
在一种可能的实现方式中,确定视频数据对应的视频监控区域对应的音频数据之后,将获取的所述视频监控区域对应的视频数据与所述视频监控区域对应的音频数据进行合成处理之前,还包括:
若所述第一对应关系中视频监控区域对应的音频采集装置有多个,则按照所述第二对应关系中各音频采集装置的权重进行音频融合,得到用于与视频数据进行合成处理的音频数据;
若所述第一对应关系中的视频监控区域对应的音频采集装置有一个,则将所述音频采集装置采集的音频数据作为用于与视频数据进行合成处理的音频数据。
第二方面,本发明实施例提供的一种处理监控数据的设备,该设备包括:至少一个处理单元及至少一个存储单元,其中,所述存储单元存储有程序代码,当所述存储单元存储的一个或多个计算机程序被所述处理单元执行时,使得所述设备执行下列过程:
获取位于云台摄像机的监控范围内的多个音频采集装置采集的音频数据以及所述云台摄像机采集的视频数据,其中所述监控范围包括多个视频监控区域,所述视频监控区域中包括至少一个音频采集装置;
针对任意一个视频监控区域,将获取的所述视频监控区域对应的视频数据与所述视频监控区域对应的音频数据进行合成处理。
上述方法,当一个云台摄像机有多个视频监控区域时,可以在不同视频监控区域之间进行切换,如果只有一个音频采集装置或采用定向两个音频采集装置,音频采集装置的收音效果差或者导致某个方向音频略大,当云台摄像机附近有较大声音时,远处监控区域内的声音会被淹没,在音视频合成后画面效果较差,通过增加音频采集装置的数量,并在每个视频监控区域中放置至少一个音频采集装置,可以将云台摄像机的不同监控区域的视频数据与对应的音频数据进行合成,提高了音视频合成后的画面效果。
在一种可能的实现方式中,所述处理单元还用于,通过下列方式确定所述视频监控区域对应的视频数据:
根据云台摄像机的云台角度与视频监控区域的第一对应关系,确定所述视频在当前云台角度采集的视频数据对应的视频监控区域。
上述方法,对于不同的云台摄像机,能够根据设备性能允许的云台角度划分视频监控区域,且云台摄像机在运行时具有唯一角度,能够根据云台摄像机的云台角度与视频监控区域的第一对应关系准确判断出上一次转动后采集的视频数据对应的视频监控区域。
在一种可能的实现方式中,所述处理单元还用于,通过下列方式确定所述视频监控区域对应的音频数据:根据所述视频监控区域和音频采集装置的第二对应关系,确定视频监控区域对应的音频采集装置采集的音频数据。
上述方法,对于不同的云台摄像机,每个视频监控区域内都具有音频采集装置,并根据视频监控区域和音频采集装置的第二对应关系,确定视频监控区域对应的音频采集装置采集的音频数据,提高了音频数据的质量和匹配的准确性。
在一种可能的实现方式中,所述处理单元具体用于:
若所述第一对应关系中视频监控区域对应的音频数据有多个,则按照所述第二对应关系中设置的权重进行音频融合后,输出一路音频数据给合成单元;
若所述第一对应关系中的视频监控区域对应的音频数据有一个,并输出确定的一路音频数据给合成单元。
上述方法,通过上述处理方式能够提高音频数据的质量以及音频和对应的视频的匹配度。
第三方面,本发明实施例提供的一种云台摄像机,包括:
视频采集单元,用于采集当前的视频监控区域的视频数据;
处理单元,用于将当前的视频监控区域对应的音频采集装置通知音频处理单元;
音频处理单元,用于通过多路音频接入单元获取位于云台摄像机的监控范围内的多个音频采集装置中,当前的视频监控区域对应的音频采集装置采集的音频数据,并对所述音频接入单元获取的音频数据进行处理后输出给合成单元;其中所述监控范围包括多个视频监控区域,所述视频监控区域中包括至少一个音频采集装置;
合成单元,用于将所述视频采集单元采集的视频数据和来自所述音频处理单元的音频数据进行合成处理。
在一种可能的实现方式中,所述处理单元还用于,通过下列方式确定所述视频监控区域对应的视频数据:
根据云台摄像机的云台角度与视频监控区域的第一对应关系,确定所述视频在当前云台角度采集的视频数据对应的视频监控区域。
在一种可能的实现方式中,所述处理单元还用于,通过下列方式确定所述视频监控区域对应的音频数据:根据所述视频监控区域和音频采集装置的第二对应关系,确定视频监控区域对应的音频采集装置采集的音频数据。
在一种可能的实现方式中,所述处理单元具体用于:
若所述第一对应关系中视频监控区域对应的音频数据有多个,则按照所述第二对应关系中设置的权重进行音频融合后,输出一路音频数据给合成单元;
若所述第一对应关系中的视频监控区域对应的音频数据有一个,并输出确定的一路音频数据给合成单元。
可选的,所述处理单元还用于:
设置和/或接收外部设置的包含云台摄像机的云台角度与视频监控区域的第一对应关系和视频监控区域和音频采集装置的第二对应关系的监控场景信息;
可选的,所述处理单元还用于:
根据监控场景信息中云台摄像机的云台角度和/或视频采集模块的变倍信息与视频监控区域的第一对应关系,确定云台摄像机当前云台角度和/或视频采集模块的变倍信息对应的视频监控区域。
可选的,所述处理单元还用于:
根据监控场景信息中的视频监控区域与对应的音频采集装置的第二对应关系,确定当前视频监控区域对应的音频采集装置。
可选的,所述处理单元还用于通过下列方式确定与所述视频监控区域匹配的音频数据:
若所述音频采集装置有多个,通过对音频接入单元获取的音频数据进行音频选择后,按照所述第二对应关系中各音频采集装置的权重对所述音频选择后的音频数据进行音频融合,确定与当前视频监控区域匹配的一路音频数据;
若所述音频采集装置有一个,通过对音频接入单元获取的音频数据进行音频选择后,确定与当前视频监控区域匹配的一路音频数据;
将确定的所述一路音频数据输出给合成单元。
可选的,所述处理单元还用于:
将通过合成单元合成处理后的音、视频数据发送给后台监控存储设备。
第四方面,本发明实施例还提供一种处理监控数据的设备,该设备包括:获取模块和处理模块,该设备具有实现上述第一方面的各实施例的功能。
第五方面,本发明实施例提供的一种处理监控数据的系统包括:云台摄像机、至少两个音频采集装置;
其中,所述云台摄像机的监控范围包括多个视频监控区域,所述视频监控区域中包括至少一个音频采集装置;
所述云台摄像机,用于采集视频数据,并获取位于云台摄像机的监控范围内的多个音频采集装置采集的音频数据;
针对任意一个视频监控区域,将获取的所述视频监控区域对应的视频数据与所述视频监控区域对应的音频数据进行合成处理。
在一种可能的实现方式中,所述处理监控数据的系统还包括后台监控存储设备;所述云台摄像机还用于,将合成处理后的音视频数据存储到所述后台监控存储设备中。
第六方面,本发明实施例还提供一种计算机存储介质,其上存储有计算机程序,该程序被处理单元执行时实现第一方面所述方法的步骤。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种处理监控数据的方法的示意图;
图2为本发明实施例提供的一种视频监控区域设置的方法的示意图;
图3为本发明实施例提供的一种处理监控数据的设备的结构示意图;
图4为本发明实施例提供的另一种处理监控数据的设备的结构示意图;
图5为本发明实施例提供的一种云台摄像机的组成结构示意图;
图6为本发明实施例提供的一种云台摄像机的实体设备的结构示意图;
图7为本发明实施例提供的另一种云台摄像机的实体设备的结构示意图;
图8为本发明实施例提供的一种云台摄像机处理监控数据的方法的完整流程示意图;
图9为本发明实施例提供的一种处理监控数据的系统的结构示意图;
图10为本发明实施例提供的另一种处理监控数据的系统的结构示意图;
图11为本发明实施例一种处理监控数据的方法的完整流程图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,显然,所描述的实施例仅仅是本发明一部份实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
下面对文中出现的一些词语进行解释:
(1)本申请实施例中术语“多个”是指两个或两个以上,其它量词与之类似。
(2)“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
(3)本发明实施例中术语“云台摄像机”是云台摄像机就是带有云台的摄像机。它带有承载摄像机进行水平和垂直两个方向转动的装置,把摄像机装云台上能使摄像机从多个角度进行摄像。
(4)本发明实施例中术语“监控区域”是指云台摄像机可以对不同的固定目标区域进行实时监控和信息记录,这些不同的固定目标区域即监控区域。
下面结合说明书附图对本发明实施例做进一步详细描述。
如图1所示,本发明实施例的一种处理监控数据的方法,具体包括以下步骤:
步骤100:获取位于云台摄像机的监控范围内的多个音频采集装置采集的音频数据以及所述云台摄像机采集的视频数据,其中所述监控范围包括多个视频监控区域,所述视频监控区域中包括至少一个音频采集装置;
步骤101:针对任意一个视频监控区域,将获取的所述视频监控区域对应的视频数据与所述视频监控区域对应的音频数据进行合成处理。
通过上述方案,云台摄像机的监控范围内包含多个视频监控区域,每个视频监控区域内包含至少一个音频采集装置,云台摄像机可以在不同视频监控区域之间切换,即使切换到很远的视频监控区域,依然可以通过该视频监控区域内的音频采集装置对该区域进行收音,且降低了音频采集装置受云台摄像机转动方向的影响,提高了云台摄像机在任意视频监控区域的音频采集效果,进一步的,提高了对视频数据和相应音频数据进行合成后的画面效果。
本发明实施例,云台摄像机可以是模拟摄像机、数字摄像机或网络摄像机。所述云台摄像机包括垂直和水平转动模块(云台)、视频采集模块,其中,云台可以带动云台摄像机实现垂直及水平转动,以使云台摄像机通过水平和/或垂直转动切换到不同的视频监控区域中,并通过视频采集模块采集所述视频监控区域的视频画面。
视频监控区域内包括至少一个音频采集装置,为提高收音效果,所述音频采集装置可以位于视频监控区域的中心位置,并通过有线或无线的方式连接到云台摄像机上,以减少音频传输距离,保证音频质量。
比如,云台摄像机的监视范围包括视频监控区域1、视频监控区域2、视频监控区域3,所述云台摄像机的巡视路线为视频监控区域1,视频监控区域3,视频监视区域2,则云台摄像机按照此巡视路线切换到相应视频监控区域。
在实施中,当所述云台摄像机切换到其他视频监控区域后,确定云台摄像机当前的监控区域中的视频监控区域的方式有很多种,下面列举几种:
确定方式一,根据用户的选择确定。
确定用户选择的视频监控区域,并将确定的所述视频监控区域作为当前的监控区域中的视频监控区域。
如图2所示,某一超市中安装的一个云台摄像机包括的4个视频监控区域,其中,所述视频监控区域为由用户选取的超市中的4个位置确定的,视频监控区域1对应的监控区域为超市入口,视频监控区域2对应的监控区域为收银台,视频监控区域3对应的监控区域为货架1,视频监控区域4对应的监控区域为货架2。在用户选择调用视频监控区域3后,球机会自动转到之前设置好的对应点,即货架1处,则视频监控区域3即当前的监控区域中的视频监控区域。
确定方式二,根据云台摄像机的云台角度确定。
根据云台摄像机的云台角度与视频监控区域之间的第一对应关系,确定所述云台摄像机当前的云台角度对应的视频监控区域,并将确定的所述视频监控区域作为当前的监控区域中的视频监控区域。
其中,所述云台角度包括水平角度和垂直角度。云台摄像机的云台角度与监控区域的对应关系可以是水平角度或垂直角度,也可以是两者的组合。
在实施中,根据云台摄像机的云台角度与视频监控区域的第一对应关系(可参见表1),确定所述视频在当前云台角度采集的视频数据对应的视频监控区域。
视频监控区域 | 云台摄像机的云台角度 |
视频监控区域1 | 云台水平角0~30度,云台垂直角0~10度 |
视频监控区域2 | 云台水平角45~75度,云台垂直角0~10度 |
…… | …… |
视频监控区域N | 云台水平角90度,云台垂直角-5度 |
表1
假如,当云台摄像机的云台角度为云台水平角45~75度,云台垂直角0~10度,根据云台摄像机的云台角度与视频监控区域的第一对应关系,确定当前云台摄像机在当前云台角度采集的视频数据对应的视频监控区域为区域2。
需要说明的是,本发明实施例中所列举的确定云台摄像机当前的监控区域中的视频监控区域的方式只是举例说明,在配置云台摄像机的云台角度与对应视频监控区域的第一对应关系时可以根据云台摄像机的性能及具有应用场景设置具体的云台角度,其中,所述云台角度可以为一个具体的范围也可以是一个具体的角度,任何设置云台摄像机的监控范围内的视频监控区域与云台角度的第一对应关系的方式都适用于本发明。
其中,对于云台摄像机的云台角度与对应视频监控区域的配置方式有多种,下面通过图2所示的云台摄像机进行举例说明:
配置方式一:由云台摄像机进行配置。
由云台摄像机配置监控场景信息(可参见表3),其中,所述监控场景包括视频监控区域与云台转动角度和/或视频采集模块的变倍信息的第一对应关系和视频监控区域与音频采集装置的第二对应关系。
云台摄像机在当前视频监控区域时的云台角度,所述云台角度可以是一个固定的角度也可以是角度范围。将监控范围内的所有视频监控区域与对应云台角度的第一对应关系存储于云台摄像机中。
其中,通过云台摄像机配置视频监控区域与云台角度的第一对应关系时,除云台角度外,进一步还可以辅助配置镜头变倍倍率,通过云台角度和镜头变倍倍率确定视频监控区域。
需要说的是,在设置云台摄像机的云台角度和视频监控区域的第一对应关系时,还可以结合镜头变倍倍率与云台角度设置对应的视频监控区域的第一对应关系(可以参见表2)。
表2
云台摄像机可以根据云台角度和/或视频采集模块的变倍信息,计算出当前的拍摄的监控区域所属的视频监控区域。
比如,当前云台摄像机的云台水平角度为60度,云台垂直角度5度,镜头变倍为2倍,则云台摄像机确定当前拍摄的监控区域属于视频监控区域2。
配置方式二:通过后台监控存储设备进行配置。
由后台监控存储设备对监控场景进行配置,具体配置方法可参见云台摄像机的具体操作,此处不再赘述。当不通过云台摄像机对监控场景进行配置时,云台摄像机还可以接收外部设置的监控场景信息,根据监控场景信息确定视频监控区域和与视频监控区域匹配的音频数据。
其中,在通过后台监控存储设备进行配置时,确定的云台角度与云台摄像机的第一对应关系可以保存在云台摄像机内也可以保存在后台监控存储设备中。
在实施中,通过获取到所述云台摄像机或后台监控存储设备内保存的第一对应关系,确定云台摄像机当前视频数据所属的视频监控区域。
本发明实施例,根据所述视频监控区域和音频采集装置的第二对应关系(可参见表3),确定视频监控区域对应的音频采集装置采集的音频数据。
视频监控区域 | 音频采集装置 |
视频监控区域1 | 音频采集装置1 |
视频监控区域2 | 音频采集装置1+音频采集装置2 |
…… | …… |
视频监控区域N | 音频采集装置3(50%)+音频采集装置4(100%) |
表3
相应的,云台摄像机设置的或接收到外部设置的包含云台摄像机的云台角度与视频监控区域的第一对应关系和视频监控区域和音频采集装置的第二对应关系的监控场景信息,可以参见如下表4。
表4
如上述表3或表4所示,当云台摄像机的云台角度为云台水平角90度,云台垂直角-5度,根据云台摄像机的云台角度与视频监控区域的第一对应关系,确定当前云台摄像机在当前云台角度采集的视频数据对应的视频监控区域为区域3。
当前的视频监控区域为区域3,根据所述视频监控区域和音频采集装置的第二对应关系,确定视频监控区域对应的音频采集装置采集的音频数据为音频3(50%)与音频4(100%)。
若视频监控区域中对应多个音频采集装置,则需要对多路音频数据进行合成处理,把多路音频转换成一路音频。处理方法有音频选择和音频融合两种方式。
通过音频选择从至少两路音频数据中选择所述视频监控区域对应的音频采集装置的音频数据;
通过音频融合将所述视频监控区域对应的音频采集装置的多路音频数据按照各自的权重进行语音混音融合,形成一路与当前视频监控区域匹配的音频数据,输出至用于将音频和视频进行合成的合成单元。
若视频监控区域中对应1个音频采集装置,通过音频选择从至少两路音频数据中选择所述视频监控区域对应的音频采集装置的音频数据,输出一路与当前视频监控区域匹配的音频数据至所述合成单元。
其中,音频采集装置与视频监控区域的第二对应关系的配置方式可以参见云台摄像机的云台角度与视频监控区域的第一对应关系的配置方式,此处不再赘述。
所述云台摄像机在巡视各视频监控区域时,通过上述方式获取所述视频监控区域对应的视频数据并由云台摄像机生成一路视频数据,并将所述一路视频数据与所述视频监控区域对应的处理后的一路音频数据进行合成处理,其中,处理方式根据云台摄像机的种类而具有不同的处理方式,下面进行介绍:
若云台摄像机是模拟摄像机或数字摄像机,则处理方式主要是视频预处理,进行信号增强和降噪处理;对音频进行降噪处理等;
由于模拟摄像机和数字摄像机没有生成时间戳的处理过程,则后期处理还需要由DVR设备对所述音频数据和所述视频数据生成相同的时间戳,以保证在后期播放时,音频与视频画图的同步。
若云台摄像机是网络摄像机,网络摄像机可以把视频数据和同时通过连接在网络摄像机上的音频采集装置采集的音频数据生成相同的时间戳,则后期处理时不需要再由DVR设备生成时间戳,具体处理方式除上述的视频预处理,进行信号增强和降噪处理;对音频进行降噪处理外还包括进行视频编码及音频编码。
需要说明的是,上述处理方式仅为举例,具体处理方式根据实际应用与系统性能的要求进行处理,任何能够将视频数据和音频数据进行合成处理的方式都适用于本发明。
本发明实施例中通过合成出来后的音、视频数据还可以发送给后台监控存储设备进行保存。
基于相同的构思,基于相同的发明构思,本发明实施例中还提供了一种处理监控数据的设备,如图3所示,该设备包括:至少一个处理单元300及至少一个存储单元301,其中,所述存储单元301存储有程序代码,当所述程序代码被所述处理单元300执行时,使得所述处理单元300执行下列过程:
获取位于云台摄像机的监控范围内的多个音频采集装置采集的音频数据以及所述云台摄像机采集的视频数据,其中所述监控范围包括多个视频监控区域,所述视频监控区域中包括至少一个音频采集装置;
针对任意一个视频监控区域,将获取的所述视频监控区域对应的视频数据与所述视频监控区域对应的音频数据进行合成处理。
可选的,所述处理单元300还用于通过下列方式确定所述视频监控区域对应的视频数据:
根据云台摄像机的云台角度与视频监控区域的第一对应关系,确定所述视频在当前云台角度采集的视频数据对应的视频监控区域。
可选的,所述处理单元300还用于通过下列方式确定所述视频监控区域对应的音频数据:
根据所述视频监控区域和音频采集装置的第二对应关系,确定视频监控区域对应的音频采集装置采集的音频数据。
可选的,所述处理单元300具体用于:
若所述第一对应关系中视频监控区域对应的音频数据有多个,则按照所述第二对应关系中设置的权重进行音频融合后,输出一路音频数据给所述合成单元;
若所述第一对应关系中的视频监控区域对应的音频数据有一个,并输出确定的一路音频数据给所述合成单元。
基于相同的构思,如图4所示为本发明实施例还出给另一种处理监控数据的实体设备的结构示意图,所述设备包括:
获取模块400:获取位于云台摄像机的监控范围内的多个音频采集装置采集的音频数据以及所述云台摄像机采集的视频数据,其中所述监控范围包括多个视频监控区域,所述视频监控区域中包括至少一个音频采集装置;
处理模块401:针对任意一个视频监控区域,将获取的所述视频监控区域对应的视频数据与所述视频监控区域对应的音频数据进行合成处理。
可选的,处理模块401还用于通过下列方式确定所述视频监控区域对应的视频数据:
根据云台摄像机的云台角度与视频监控区域的第一对应关系,确定所述视频在当前云台角度采集的视频数据对应的视频监控区域。
可选的,处理模块401还用于通过下列方式确定所述视频监控区域对应的音频数据:
根据所述视频监控区域和音频采集装置的第二对应关系,确定视频监控区域对应的音频采集装置采集的音频数据。
可选的,处理模块401具体用于:
若所述第一对应关系中视频监控区域对应的音频数据有多个,则按照所述第二对应关系中设置的权重进行音频融合后,输出一路音频数据给所述合成单元;
若所述第一对应关系中的视频监控区域对应的音频数据有一个,并输出确定的一路音频数据给所述合成单元。
基于相同的构思,如图5所示为本发明实施例还出给一种云台摄像机的实体设备的结构示意图,所述云台摄像机500包括:
视频采集单元540,用于采集当前的视频监控区域的视频数据;
处理单元530,用于将当前的视频监控区域对应的音频采集装置通知音频处理单元;
音频处理单元560,用于通过多路音频接入单元550获取位于云台摄像机300的监控范围内的多个音频采集装置中,当前的视频监控区域对应的音频采集装置采集的音频数据,并对所述多路音频接入单元550获取的音频数据进行处理后输出给合成单元570;其中所述监控范围包括多个视频监控区域,所述视频监控区域中包括至少一个音频采集装置;
合成单元570,用于将所述视频采集单元540采集的视频数据和来自所述音频处理单元560的音频数据进行合成处理。
其中,视频采集单元540通过处理单元530对云台510的控制实现水平和垂直转动,以切换到不同的视频监控区域;
在实施中,处理单元530,大多为CPU;
视频采集单元540可以通过摄像头和图像传感器组成,以实现对视频监控区域的视频数据的采集;
多路音频接入单元550一般为音频接口电路,音频接入通道;音频处理单元560,根据云台摄像机500的类型有不同的类型,下面举例说明:
若云台摄像机500为模拟摄像机,则音频处理单元560可以为模拟信号矩阵;若云台摄像机500为数字摄像机,则音频处理单元560可以为音频处理芯片。
合成单元570,为DSP数字信号处理器。
其中,云台摄像机可以是模拟摄像机或网络摄像机,若所述云台摄像机为模拟摄像机,如图6本发明实施例还提供了一种模拟摄像机的实体设备的结构示意图,所述模拟摄像机600包括:
云台610,球机的处理单元为控制器630,视频采集单元为机芯(含镜头)640,多路音频采集接口650,音频切换模块660,音频模数转换器661,音视频预处理670,数模转换器模块及输出接口680。
其中,控制器630,用于将当前的视频监控区域对应的音频采集装置通知音频处理单元;
音频切换模块660,用于从多路音频中选择一路输出至音频模数转换器661,经音频模数转换器661处理后再送入音视频预处理670;
音视频预处理670,用于将同时接收到的音频数据和视频数据进行合成处理,该音频及视频信息经过处理后可以通过数模转换器模块及输出接口680,经传输介质传输到后端的视频监控存储设备。
若所述云台摄像机为网络摄像机,如图7本发明实施例还提供了一种网络摄像机的实体设备的结构示意图,所述网络摄像机700包括:
云台710,球机的处理单元为控制器730,视频采集单元为机芯(含镜头)740,多路音频采集接口750,音频融合处理器760,音频模数转换器761,音视频预处理770,网络模块及输出接口780。
其中,控制器730,用于将当前的视频监控区域对应的音频采集装置通知音频处理单元;
音频融合处理器760,用于把通过音频模数转换器761处理后的多路音频按照预设权重融合成一路输出,再送入音视频预处理770。
音视频预处理770,用于将同时接收到的音频数据和视频数据进行合成处理,该音频及视频信息经过处理后可以通过数模转换器模块及输出接口780,经传输介质传输到后端的视频监控存储设备。
请结合图5,本发明实施例提供的一种云台摄像机进行处理的完整方法的流程进行示意图,如图8所示具体包括以下步骤:
步骤801,视频采集单元采集当前监控区域的视频数据,并输出一路视频数据给合成单元;
步骤802,处理单元通过云台摄像机的云台角度与视频监控区域的第一对应关系,确定当前的云台角度对应的视频监控区域;
步骤803,处理单元确定当前的视频监控区域以及所述监控区域对应的音频采集装置,并通知给音频处理单元;
步骤804,音频处理单元通过多路音频接入单元获取视频监控区域对应的音频采集装置的音频数据,并进行融合处理输出一路音频数据给合成单元。
步骤805,合成单元对视频采单元的视频数据和音频处理单元的音频数据进行合成处理。
需要说明的是,在视频监控行业,音频处理单元对音频数据进行处理的时间在毫秒级别,合成单元对同时采集到的音频和视频默认就是同步的,因此,本发明实施例,合成单元对接收到的云台摄像机输出的视频数据和音频处理单元输出的音频数据进行合成处理时,默认同时接收到的所述视频数据和所述音频数据是同步的。
在实施中,多台云台摄像机和多个音频采集装置还可以组成一套处理监控数据的系统,如图9所示,本发明实施例还出给一种处理监控数据的系统,包括:云台摄像机901和至少两个音频采集装置902;
其中,所述云台摄像机901的监控范围包括多个视频监控区域,所述视频监控区域中包括至少一个音频采集装置902;
所述云台摄像机901,用于采集视频数据,并获取位于云台摄像机的监控范围内的多个音频采集装置902采集的音频数据;
针对任意一个视频监控区域,将获取的所述视频监控区域对应的视频数据与所述视频监控区域对应的音频数据进行合成处理。
可选的,所述处理监控数据的系统还包括后台监控存储设备900;
所述云台摄像机901还用于,将合成处理后的音视频数据存储到所述后台监控存储设备900中。
后台监控存储设备900可以为所述云台摄像机901预定巡视路线,用户可以通过后台监控存储设备设置云台摄像机的云台角度与视频监控区域的第一对应关系以及视频监控区域与音频采集装置的第二对应关系。
在实施中,多套处理监控数据的系统还可以组成为一个系统,如图10所示,本发明实施例提供的另一种处理监控数据的系统。
将两套处理监控数据的系统组合为一个系统,其中包括两台云台摄像机,云台摄像机1的监控范围包括4个视频监控区域,分别为监控区域1、监控区域2、监控区域3、监控区域4;云台摄像机3的监控范围包括2个视频监控区域,分别为监控区域5、监控区域6、每个视频监控区域中包括一个音频采集装置。
其中,监控区域1和监控区域2的音频采集装置通过有线的方式连接到所述云台摄像机1上,监控区域3和监控区域4的音频采集装置通过无线的方式连接到所述云台摄像机1上;监控区域5和监控区域6的音频采集装置通过有线的方式连接到所述云台摄像机2上。
组合后的处理监控数据的系统中的每台云台摄像机、音频采集装置、后台监控存储设备的工作方式可以参见上述一种处理监控数据的方法以及上述处理监控数据的系统介绍的具体操作,此处不再赘述。
如图11所示,本发明实施例提供的一种处理监控数据的完整方法的流程示意图,具体包括以下步骤:
步骤1100,获取位于云台摄像机的监控范围内的多个音频采集装置采集的音频数据以及所述云台摄像机采集的视频数据;
步骤1101,根据云台摄像机的云台角度与视频监控区域的第一对应关系,确定所述视频在当前云台角度采集的视频数据对应的视频监控区域;
步骤1102,根据所述视频监控区域和音频采集装置的第二对应关系,确定视频监控区域对应的音频采集装置采集的音频数据;
步骤1103,针对任意一个视频监控区域,将获取的所述视频监控区域对应的视频数据与所述视频监控区域对应的音频数据进行合成处理。
以上参照示出根据本申请实施例的方法、装置(系统)和/或计算机程序产品的框图和/或流程图描述本申请。应理解,可以通过计算机程序指令来实现框图和/或流程图示图的一个块以及框图和/或流程图示图的块的组合。可以将这些计算机程序指令提供给通用计算机、专用计算机的处理器和/或其它可编程数据处理装置,以产生机器,使得经由计算机处理器和/或其它可编程数据处理装置执行的指令创建用于实现框图和/或流程图块中所指定的功能/动作的方法。
相应地,还可以用硬件和/或软件(包括固件、驻留软件、微码等)来实施本申请。更进一步地,本申请可以采取计算机可使用或计算机可读存储介质上的计算机程序产品的形式,其具有在介质中实现的计算机可使用或计算机可读程序代码,以由指令执行系统来使用或结合指令执行系统而使用。在本申请上下文中,计算机可使用或计算机可读介质可以是任意介质,其可以包含、存储、通信、传输、或传送程序,以由指令执行系统、装置或设备使用,或结合指令执行系统、装置或设备使用。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种处理监控数据的方法,其特征在于,该方法包括:
获取位于云台摄像机的监控范围内的多个音频采集装置采集的音频数据以及所述云台摄像机采集的视频数据,其中所述监控范围包括多个视频监控区域,所述视频监控区域中包括至少一个音频采集装置;
针对任意一个视频监控区域,将获取的所述视频监控区域对应的视频数据与所述视频监控区域对应的音频数据进行合成处理。
2.如权利要求1所述的方法,其特征在于,通过下列方式确定所述视频监控区域对应的视频数据:
根据云台摄像机的云台角度与视频监控区域的第一对应关系,确定所述云台摄像机在当前的云台角度采集的视频数据对应的视频监控区域。
3.如权利要求2所述的方法,其特征在于,通过下列方式确定所述视频监控区域对应的音频数据:
根据视频监控区域和音频采集装置的第二对应关系,确定视频监控区域对应的音频采集装置采集的音频数据。
4.如权利要求3所述的方法,其特征在于,所述方法还包括:
若所述第一对应关系中视频监控区域对应的音频采集装置有多个,则按照所述第二对应关系中各音频采集装置的权重进行音频融合,得到用于与视频数据进行合成处理的音频数据;
若所述第一对应关系中的视频监控区域对应的音频采集装置有一个,则将所述音频采集装置采集的音频数据作为用于与视频数据进行合成处理的音频数据。
5.一种处理监控数据的设备,其特征在于,该设备包括:至少一个处理单元及至少一个存储单元,其中,所述存储单元存储有程序代码,当所述存储单元存储的一个或多个计算机程序被所述处理单元执行时,使得所述设备执行下列过程:
获取位于云台摄像机的监控范围内的多个音频采集装置采集的音频数据以及所述云台摄像机采集的视频数据,其中所述监控范围包括多个视频监控区域,所述视频监控区域中包括至少一个音频采集装置;
针对任意一个视频监控区域,将获取的所述视频监控区域对应的视频数据与所述视频监控区域对应的音频数据进行合成处理。
6.如权利要求5所述的设备,其特征在于,所述处理单元还用于,通过下列方式确定所述视频监控区域对应的视频数据:
根据云台摄像机的云台角度与视频监控区域的第一对应关系,确定所述视频在当前云台角度采集的视频数据对应的视频监控区域。
7.如权利要求6所述的设备,其特征在于,所述处理单元还用于,通过下列方式确定所述视频监控区域对应的音频数据:
根据所述视频监控区域和音频采集装置的第二对应关系,确定视频监控区域对应的音频采集装置采集的音频数据。
8.如权利要求5所述的设备,其特征在于,所述处理单元具体用于:
若所述第一对应关系中视频监控区域对应的音频数据有多个,则按照所述第二对应关系中设置的权重进行音频融合后,输出一路音频数据给所述合成单元;
若所述第一对应关系中的视频监控区域对应的音频数据有一个,并输出确定的一路音频数据给所述合成单元。
9.一种处理监控数据的系统,其特征在于,该系统包括:云台摄像机和至少两个音频采集装置;
其中,所述云台摄像机的监控范围包括多个视频监控区域,所述视频监控区域中包括至少一个音频采集装置;
所述云台摄像机,用于采集视频数据,并获取位于云台摄像机的监控范围内的多个音频采集装置采集的音频数据;
针对任意一个视频监控区域,将获取的所述视频监控区域对应的视频数据与所述视频监控区域对应的音频数据进行合成处理。
10.如权利要求9所述的系统,其特征在于,所述处理监控数据的系统还包括后台监控存储设备;
所述云台摄像机还用于,将合成处理后的音视频数据存储到所述后台监控存储设备中。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811381535.2A CN110248152A (zh) | 2018-11-20 | 2018-11-20 | 一种处理监控数据的方法、云台摄像机及监控系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811381535.2A CN110248152A (zh) | 2018-11-20 | 2018-11-20 | 一种处理监控数据的方法、云台摄像机及监控系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110248152A true CN110248152A (zh) | 2019-09-17 |
Family
ID=67882438
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811381535.2A Pending CN110248152A (zh) | 2018-11-20 | 2018-11-20 | 一种处理监控数据的方法、云台摄像机及监控系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110248152A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116405781A (zh) * | 2023-05-29 | 2023-07-07 | 深圳市保凌影像科技有限公司 | 一种基于多路复用通信的智能高清球型摄像机系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201528402U (zh) * | 2009-11-02 | 2010-07-14 | 北京声迅电子有限公司 | 一种用于实时监听的监控系统 |
US20120169873A1 (en) * | 2010-12-29 | 2012-07-05 | Hon Hai Precision Industry Co., Ltd. | Audio/video monitoring system and method for simultaneously playing audio/video |
CN104079870A (zh) * | 2013-03-29 | 2014-10-01 | 杭州海康威视数字技术股份有限公司 | 单路视频多路音频的视频监控方法及系统 |
CN106888362A (zh) * | 2015-12-15 | 2017-06-23 | 西安正通电子科技有限公司 | 一种新型的视频安防监控报警系统 |
CN107193528A (zh) * | 2017-07-05 | 2017-09-22 | 北京聚安慧视科技有限公司 | 一种基于gis系统的音频信号的调取方法 |
CN207369203U (zh) * | 2017-10-19 | 2018-05-15 | 西安工业大学 | 一种音频、视频数据监控系统 |
-
2018
- 2018-11-20 CN CN201811381535.2A patent/CN110248152A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201528402U (zh) * | 2009-11-02 | 2010-07-14 | 北京声迅电子有限公司 | 一种用于实时监听的监控系统 |
US20120169873A1 (en) * | 2010-12-29 | 2012-07-05 | Hon Hai Precision Industry Co., Ltd. | Audio/video monitoring system and method for simultaneously playing audio/video |
CN104079870A (zh) * | 2013-03-29 | 2014-10-01 | 杭州海康威视数字技术股份有限公司 | 单路视频多路音频的视频监控方法及系统 |
CN106888362A (zh) * | 2015-12-15 | 2017-06-23 | 西安正通电子科技有限公司 | 一种新型的视频安防监控报警系统 |
CN107193528A (zh) * | 2017-07-05 | 2017-09-22 | 北京聚安慧视科技有限公司 | 一种基于gis系统的音频信号的调取方法 |
CN207369203U (zh) * | 2017-10-19 | 2018-05-15 | 西安工业大学 | 一种音频、视频数据监控系统 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116405781A (zh) * | 2023-05-29 | 2023-07-07 | 深圳市保凌影像科技有限公司 | 一种基于多路复用通信的智能高清球型摄像机系统 |
CN116405781B (zh) * | 2023-05-29 | 2023-09-19 | 深圳市保凌影像科技有限公司 | 一种基于多路复用通信的智能高清球型摄像机系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105100748B (zh) | 一种视频监控系统及方法 | |
CN107408303A (zh) | 用于对象跟踪的系统和方法 | |
CN106303398B (zh) | 监控方法、服务器、系统及图像采集装置 | |
CN109241933A (zh) | 视频联动监控方法、监控服务器、视频联动监控系统 | |
JP2009533924A (ja) | フレーム選択を用いるパノラマ画像の構成 | |
CN106228218A (zh) | 一种基于移动的目标对象的智能监控方法及系统 | |
CN109190648A (zh) | 模拟环境生成方法、装置、移动终端及计算机可读取存储介质 | |
CN107820008A (zh) | 一种机房监控系统及方法 | |
CN104349038A (zh) | 启用全景拍摄的方法和电子设备 | |
CN106375668A (zh) | 一种智能终端相机的自动对焦装置和方法 | |
CN110248152A (zh) | 一种处理监控数据的方法、云台摄像机及监控系统 | |
CN109388238A (zh) | 一种电子设备的控制方法及装置 | |
CN110059653A (zh) | 一种数据收集方法及装置、电子设备、存储介质 | |
CN104857691A (zh) | 在可穿戴设备中估计高尔夫球落点的方法和设备 | |
CN112839165B (zh) | 人脸跟踪摄像的实现方法、装置、计算机设备和存储介质 | |
CN109858319A (zh) | 图像处理设备及控制方法和非暂时性计算机可读存储介质 | |
CN108881119B (zh) | 一种视频浓缩的方法、装置和系统 | |
CN109348193A (zh) | 一种适用于定点监控的摄像机 | |
CN107920229A (zh) | 机房监控记录生成系统及方法 | |
CN108230312A (zh) | 一种图像分析方法、设备和计算机可读存储介质 | |
CN109460077B (zh) | 一种自动跟踪方法、自动跟踪设备及自动跟踪系统 | |
CN107545212A (zh) | 双通道云数据管理平台 | |
WO2019061020A1 (zh) | 图像生成方法、图像生成装置和机器可读存储介质 | |
CN110418059B (zh) | 应用于电子设备的图像处理方法、装置、电子设备、介质 | |
JP5929774B2 (ja) | 画像取得方法、装置、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190917 |