CN103986914A - 无线视频监控系统中基于客户端数量的码率自适应方法 - Google Patents
无线视频监控系统中基于客户端数量的码率自适应方法 Download PDFInfo
- Publication number
- CN103986914A CN103986914A CN201410229632.5A CN201410229632A CN103986914A CN 103986914 A CN103986914 A CN 103986914A CN 201410229632 A CN201410229632 A CN 201410229632A CN 103986914 A CN103986914 A CN 103986914A
- Authority
- CN
- China
- Prior art keywords
- code check
- network
- client
- monitoring system
- bandwidth
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
本发明公开了一种无线视频监控系统中基于客户端数量的码率自适应方法,所述无线视频监控系统包括服务端和客户端两部分,所述服务端和客户端之间通过网络连接;对该无线视频监控系统做出如下设置:1.监控系统选用单播传输;2.网络带宽在多个客户端时不能满足性能要求;3.网络实际带宽为固定值;4.视频源码率可调节;其特征在于:服务端根据网络的带宽和视频分辨率选定初始码率,在有客户端接入或退出网络时根据客户端数量实时调整视频源编码码率。利用基于客户端数量的码率自适应方法,在客户端申请连接或退出时,服务端根据客户端数量调整码率,不仅提高了带宽利用率也增强了用户体验。
Description
技术领域
本发明涉及一种基于客户端数量的码率自适应方法,在客户端数量变化时实时调整码率,增大网络带宽利用率,提高用户体验;适用于无线视频监控系统,特别是在用于家庭安防的小型嵌入式视频监控系统中效果明显。
背景技术
随着计算机、网络通信、图像处理等相关技术的迅速发展和进步,视频监控技术不断创新,同时由于人们对安防问题的日益关注,视频监控市场的需求在全球范围内都已经显著增长。随着无线接入技术的日益发展和不断成熟,基于无线网络的新型嵌入式视频监控系统正在兴起,并在家庭安防等应用中占据重要地位,也是视频监控的发展方向。用于家庭安防的小型嵌入式监控系统对系统的成本和体积有更高的要求,因此一般采用两端模式,即服务端和客户端。这种设计模式与传统监控系统相比大幅度降低了成本,减小了产品体积,同时节省了采集端上传数据到服务器的网络开销,在家庭安防应用中具有很大的优势。
无线网络视频监控系统通过无线网络把监控端的音视频数据传输到客户端,而无线网络的带宽是有限的,庞大的音视频数据量对网络的负载能力是一大挑战。经过测试,在宽阔无障碍的室内,WLAN的网络带宽下载速度可以达到10Mbps;在房间分割较多的家庭环境中,无线信号变差,WLAN的网络带宽下载速度仅有3Mbps,而且与无线网络设备的性能有很大关系;3G移动互联网的下载速度大约在3Mbps;而且网络的上行速度更慢。由此看出,无线网络能提供的带宽是有限的。
网络通信有三种方式单播、组播、广播。广播具有盲目性,不适用于网络视频监控系统。组播是这几年比较热门的通信技术,已经在视频点播、IPTV系统中逐渐得到应用。下面对组播技术和单播技术进行了比较:
1、组播是指将请求相同数据流的客户端加入一个组播组中,这些客户端共享同一数据流,节省了服务器的负载,在网络带宽受限的系统中节省了带宽。单播是针对每个客户端的点对点通信模式,随着客户端数量的增加,数据传输占用的网络带宽加倍,在网络带宽受限的系统具有一定的劣势。
2、组播与单播协议相比没有流量控制和检错纠错机制,虽然可以通过一定的容错机制和QoS加以弥补,但这些只是在理论上的解决方案,在现行网络中还没有应用起来。
3、组播的安全性较低,存在安全隐患。组播理论上是允许组播成员随时加入或离开组播组的,在这个网段的所有设备都可以随时申请加入组播组,这就引入了不安全因素,多播的安全性一直是比较棘手的问题。基于有线网络的组播安全性问题有一些研究,提出了很多种方案,但还没有方案能高效地解决组播的安全问题,并且目前处于理论研究阶段,还没有真正应用到应用系统中。无线网络多播和一般因特网多播有一定的差异,安全问题更为棘手。差异性主要在于无线网络设备的处理能力较差、连接的动态性以及可移动性,这些特性对相应的安全处理算法有较大的影响。目前利用组播方案的系统,大都是用在交通、治安、IPTV(网络电视系统)或是公共场所,在家庭安防应用中保护用户隐私安全更为重要,对安全性要求更高。而与组播相比,单播是点对点的可靠通信,不存在此安全问题。
4、组播网络的搭建要求网路中有支持组播协议IGMP的三级交换机或支持组播路由协议的路由器设备,并且所有二层或三层交换机和路由器都支持组播协议IGMP或者IGMP Snooping协议,而并不是所有设备都支持组播。
基于以上分析很多系统依旧选用单播通信方式。
发明内容
发明目的:为了克服现有技术中存在的不足,本发明提供一种无线视频监控系统中基于客户端数量的码率自适应方法,以提高无线视频监控系统中网络带宽利用率,增强用户体验。
技术方案:为实现上述目的,本发明采用的技术方案为:
无线视频监控系统中基于客户端数量的码率自适应方法,所述无线视频监控系统包括服务端和客户端两部分,所述服务端和客户端之间通过网络(一般为无线网络)连接;服务端负责与客户端交互,完成视频数据的采集和编码,并把视频数据转发给请求的客户端;客户端与服务端建立连接后,接收监控视频数据并解码显示;对该无线视频监控系统做出如下设置:
1、受硬件条件限制或基于传输安全性考虑,监控系统选用单播传输;
2、网络带宽无波动或波动很小可忽略,即设网络实际带宽为固定值;利用单播传输时由于客户端增加引起的网络带宽占用量远大于带宽波动,故不考虑无线网络的波动,即认为网络是稳定的,带宽是固定的
3、视频源码率可调节;
服务端根据网络的带宽和视频分辨率选定初始码率,在有客户端接入或退出网络时根据客户端数量实时调整视频源编码码率。
服务端根据网络的带宽和视频分辨率选定初始码率:网络的带宽是有限的,设网络的带宽为a Mbps,当前视频分辨率的最大性能码率为b Mbps:若a>b,则设置初始码率为b Mbps;否则,则设置初始码率为a Mbps。在特定分辨率下,视频的码率越大,视频效果越好,但码率增大到一定程度后,视频效果变化不明显,称此时码率为当前分辨率的最大性能码率。
当有客户端接入或退出网络时,服务端根据客户端数量实时调整视频源编码码率,码率计算算法如下:
设调整前码率为c Mbps,客户端数目为num;
当有新客户端接入时,若c*(num+1)>a,则调整码率为a/(num+1),否则码率维持不变;
当有客户端退出时,若c*(num-1)≤b,则调整码率为a/(num-1),否则码率维持不变。
有益效果:本发明提供的无线视频监控系统中基于客户端数量的码率自适应方法,首先对初始码率进行了选择,使得系统初始用户体验最佳;然后在有客户端加入或退出时,采用基于客户端数目的码率自适应,使得在有限的带宽下,带宽利用率最高,用户体验最好;这就相当于一个供水管道给多个用水阀门供水一样,管道单位时间的可供水量是一定的(相当于网络带宽一定),只有一个用水阀门打开时,水量会很大;当打开多个用水阀门同时打开时,水量变小,多个用水阀门平均分配管道的供水量;如果在多客户端监控系统中不采用基于客户端数量的码率自适应方案,就相当于把每个用水阀门的水量调到最低,不管在此供水管道中有几个用水阀门打开,每个用水阀门水量都保持最低状态,很明显这不是用户期望的。
附图说明
图1为本发明基于的无线网络视频监控系统的基本框架;
图2为无线网络视频监控系统服务端的软件架构;
图3为采用了基于客户端数量的码率自适应方案后的服务端软件架构;
图4为码率自适应调整的过程。
具体实施方式
下面结合附图对本发明作更进一步的说明。
随着无线接入技术的日益发展和不断成熟,基于无线网络的新型嵌入式视频监控系统正在兴起,并在家庭安防等应用中占据重要地位。无线网络的带宽相对有线网络是有限的,在视频监控系统中庞大的音视频数据量对网络的负载能力是一大挑战。虽然对于多播技术的研究越来越多,但其在安全性和普适性方面还有很大不足,限制了其在家庭安防的视频监控系统中的应用。受硬件条件限制或对安全性的要求在很多家庭安防的视频监控系统中依旧采用单播的网络传输方式。利用单播传输占用的网络带宽会随着客户端数量的增加而成倍增加。为保证客户端数量最多时监控视频的流畅性和完整性,码率应该设置为在连接客户端数量最多时能够正常观看监控视频的码率。若系统不会出现或很少达到客户端最大数量,而码率设置为最低码率,不仅降低了带宽利用率,而且降低了用户体验。
图1为本发明基于的无线网络视频监控系统的基本框架,用于家庭安防的小型嵌入式实时监控系统对成本和体积有很高的要求,一般采用视频采集端和视频服务器集成在一起的模式,也即两端监控系统。这种设计模式大幅度降低了产品成本和体积,同时节省了采集端上传数据到服务器的网络开销。服务端负责与客户端交互,完成视频数据的采集和编码,并把视频数据转发给请求的客户端;客户端与服务端建立连接后,接收监控视频数据并解码显示。
图2为无线网络视频监控系统服务端的软件架构,按任务分工不同可以划分为三部分:用户管理、任务调度、命令处理以及相应的处理操作。用户管理包含用户认证和用户相关信息的保存。命令处理以及相应的处理操作是指服务器根据不同请求,执行不同处理程序。若为监控视频请求,建立流媒体会话,启动数据传输流程;若为其他请求,调度执行相应的处理程序。任务调度贯穿整个过程,包含对用户请求管理、数据传输、控制处理等多项任务的调度和维护,是整个系统的中枢神经。
在监控系统中利用单播通信方式传输视频数据,客户端数量增加时,网络传输数据量会成倍增加。在一定网络带宽下,根据式(1)可知,客户端数目增加到一定数量时,需要的网络带宽可能超过实际网络带宽,造成监控数据在传输过程中丢包,直观的后果是客户端监控视频出现卡顿和花屏现象,甚至无法观看,系统延时也会增加。
server_flow=client_flow*client_num (1)
其中sevrer_flow表示服务端数据流量,client_flow表示单个客户端数据流量,client_num表示客户端数目。系统延时是指从摄像头采集视频数据到客户端显示的时间,是衡量监控系统性能的一个重要指标。
在一定网络带宽下,设在单路视频传输时可以使监控系统视频数据可靠传输的最大码率为b kbps,在n个客户端接入时支持的视频源码率最大为a kbps。为保证在1~n个客户端接入时监控系统视频数据的可靠传输,视频源的码率设置为a kbps。如果此监控系统应用场景中,客户端数目在大多数情况下小于n,此时支持的视频源码率要大于akbps,而视频源的码率固定为最低的a kbps,这样会造成带宽的浪费,用户体验的持续低下。
为较好的解决这个问题,提出了基于客户端数量的码率自适应方案,为提高此方案的广适性,对无线网络视频监控系统作如下设置:
1、受硬件条件限制或基于传输安全性考虑,监控系统选用单播传输;
2、网络带宽受限,网络带宽在多个客户端时不能满足性能要求;
3、网络带宽无波动或波动很小可忽略,即设网络实际带宽为固定值;利用单播传输时由于客户端增加引起的网络带宽占用量远大于带宽波动,故不考虑无线网络的波动,即认为网络是稳定的,带宽是固定的
4、视频源码率可调节。
图3为采用了基于客户端数量的码率自适应方案后的服务端软件架构。服务端接收到客户端的接入或退出命令时,调用码率调整模块调整码率,配置完成后摄像头按照调整后的码率重新开始采集视频数据。
服务端启动后,首先根据无线网络的带宽和视频分辨率选定初始码率。初始码率选择的具体方案如下:无线网络的带宽是有限的,设测得无线网络的带宽为a Mbps,当前视频分辨率的最大性能码率为b Mbps。若a>b则设置初始码率为b Mbps,否则设置初始码率为a Mbps。
初始码率设定后,服务端等待客户端的接入请求。当接收到客户端接入或退出请求时,根据此时客户端数量自适应调整码率。如图4所示,当有客户端接入或退出时,服务器修改系统的用户信息,更新客户端数目。当信号量释放,即前次自适应结束时,调用码率自适应算法计算对应此时客户端数目的码率,保存计算结果。比较调整码率和当前码率,如果相等则直接释放信号量,等待下次自适应调整;如果不相等,则调用摄像头驱动程序调整码率,调整完成后释放信号量,一次自适应过程结束。
基于客户端数量的码率自适应方法码率调整算法:设调整前码率为c Mbps,客户端数目为num。当有新客户端接入时,若c*(num+1)>a,则调整后码率为:a/(num+1),否则码率维持不变。当有客户端退出时,若c*(num-1)≤b,则调整码率为a(num-1),否则码率维持不变。
以上所述仅是本发明的优选实施方式,应当指出:对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (3)
1.无线视频监控系统中基于客户端数量的码率自适应方法,所述无线视频监控系统包括服务端和客户端两部分,所述服务端和客户端之间通过网络连接;对该无线视频监控系统做出如下设置:1、监控系统选用单播传输;2、网络实际带宽为固定值;3、视频源码率可调节;其特征在于:服务端根据网络的带宽和视频分辨率选定初始码率,在有客户端接入或退出网络时根据客户端数量实时调整视频源编码码率。
2.根据权利要求1所述的无线视频监控系统中基于客户端数量的码率自适应方法,其特征在于:设网络的带宽为a Mbps,当前视频分辨率的最大性能码率为b Mbps:若a>b,则设置初始码率为b Mbps;否则,则设置初始码率为a Mbps。
3.根据权利要求2所述的无线视频监控系统中基于客户端数量的码率自适应方法,其特征在于:当有客户端接入或退出网络时,服务端根据客户端数量实时调整视频源编码码率,码率计算算法如下:
设调整前码率为c Mbps,客户端数目为num;
当有新客户端接入时,若c*(num+1)>a,则调整码率为a/(num+1),否则码率维持不变;
当有客户端退出时,若c*(num-1)≤b,则调整码率为a/(num-1),否则码率维持不变。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410229632.5A CN103986914B (zh) | 2014-05-27 | 2014-05-27 | 无线视频监控系统中基于客户端数量的码率自适应方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410229632.5A CN103986914B (zh) | 2014-05-27 | 2014-05-27 | 无线视频监控系统中基于客户端数量的码率自适应方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103986914A true CN103986914A (zh) | 2014-08-13 |
CN103986914B CN103986914B (zh) | 2017-02-01 |
Family
ID=51278728
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410229632.5A Expired - Fee Related CN103986914B (zh) | 2014-05-27 | 2014-05-27 | 无线视频监控系统中基于客户端数量的码率自适应方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103986914B (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104967880A (zh) * | 2015-05-29 | 2015-10-07 | 董遂武 | 一种在无线网络中均匀分发视频的方法和设备 |
CN105933726A (zh) * | 2016-05-13 | 2016-09-07 | 乐视控股(北京)有限公司 | 虚拟现实终端及其视频分辨率的适应方法及装置 |
CN107205159A (zh) * | 2017-05-25 | 2017-09-26 | 武汉斗鱼网络科技有限公司 | 一种网络直播中流媒体的比特率调整方法和装置 |
WO2017181508A1 (zh) * | 2016-04-21 | 2017-10-26 | 邦彦技术股份有限公司 | 多媒体会议控制方法及服务器 |
CN108259948A (zh) * | 2018-03-30 | 2018-07-06 | 武汉斗鱼网络科技有限公司 | 一种直播音视频的播放方法、装置、计算机及存储介质 |
CN110012324A (zh) * | 2019-03-28 | 2019-07-12 | 武汉大学 | 一种嵌入式无线视频传输的码率自适应方法及系统 |
CN110121071A (zh) * | 2018-02-05 | 2019-08-13 | 广东欧珀移动通信有限公司 | 视频编码方法及相关产品 |
US10637790B2 (en) | 2016-01-25 | 2020-04-28 | Huawei Technologies Co., Ltd. | Control method and apparatus, and network controller |
CN112423046A (zh) * | 2020-10-22 | 2021-02-26 | 深圳Tcl新技术有限公司 | 视频数据传输的方法、装置、设备及可读存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20070038912A (ko) * | 2005-10-06 | 2007-04-11 | 엑터나 | 인터넷 프로토콜을 통해 전달된 비디오를 평가하기 위한조합 미터 |
EP2034667A1 (en) * | 2007-07-20 | 2009-03-11 | Broadcom Corporation | Method and system for managing information among personalized and shared resources with a personalized portable device |
CN101695129A (zh) * | 2009-10-09 | 2010-04-14 | 中兴通讯股份有限公司 | 一种支持多种制式的移动终端实现视频监控的方法和系统 |
CN101720136A (zh) * | 2009-11-27 | 2010-06-02 | 成都市华为赛门铁克科技有限公司 | 客户端邻居节点数目控制方法和装置、缓存系统 |
CN103532945A (zh) * | 2013-09-30 | 2014-01-22 | 华为技术有限公司 | 分享控制方法和相关设备及通信系统 |
CN103607562A (zh) * | 2013-11-08 | 2014-02-26 | 江苏万联新兆信息科技有限公司(外商合资) | 基于即时通讯系统的智能手机视频监控方法 |
-
2014
- 2014-05-27 CN CN201410229632.5A patent/CN103986914B/zh not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20070038912A (ko) * | 2005-10-06 | 2007-04-11 | 엑터나 | 인터넷 프로토콜을 통해 전달된 비디오를 평가하기 위한조합 미터 |
EP2034667A1 (en) * | 2007-07-20 | 2009-03-11 | Broadcom Corporation | Method and system for managing information among personalized and shared resources with a personalized portable device |
CN101695129A (zh) * | 2009-10-09 | 2010-04-14 | 中兴通讯股份有限公司 | 一种支持多种制式的移动终端实现视频监控的方法和系统 |
CN101720136A (zh) * | 2009-11-27 | 2010-06-02 | 成都市华为赛门铁克科技有限公司 | 客户端邻居节点数目控制方法和装置、缓存系统 |
CN103532945A (zh) * | 2013-09-30 | 2014-01-22 | 华为技术有限公司 | 分享控制方法和相关设备及通信系统 |
CN103607562A (zh) * | 2013-11-08 | 2014-02-26 | 江苏万联新兆信息科技有限公司(外商合资) | 基于即时通讯系统的智能手机视频监控方法 |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104967880A (zh) * | 2015-05-29 | 2015-10-07 | 董遂武 | 一种在无线网络中均匀分发视频的方法和设备 |
CN104967880B (zh) * | 2015-05-29 | 2019-04-30 | 董遂武 | 一种在无线网络中均匀分发视频的方法和设备 |
US10637790B2 (en) | 2016-01-25 | 2020-04-28 | Huawei Technologies Co., Ltd. | Control method and apparatus, and network controller |
WO2017181508A1 (zh) * | 2016-04-21 | 2017-10-26 | 邦彦技术股份有限公司 | 多媒体会议控制方法及服务器 |
CN105933726A (zh) * | 2016-05-13 | 2016-09-07 | 乐视控股(北京)有限公司 | 虚拟现实终端及其视频分辨率的适应方法及装置 |
CN107205159A (zh) * | 2017-05-25 | 2017-09-26 | 武汉斗鱼网络科技有限公司 | 一种网络直播中流媒体的比特率调整方法和装置 |
CN107205159B (zh) * | 2017-05-25 | 2020-08-04 | 武汉斗鱼网络科技有限公司 | 网络直播中流媒体的比特率调整方法、装置和存储介质 |
CN110121071A (zh) * | 2018-02-05 | 2019-08-13 | 广东欧珀移动通信有限公司 | 视频编码方法及相关产品 |
CN108259948A (zh) * | 2018-03-30 | 2018-07-06 | 武汉斗鱼网络科技有限公司 | 一种直播音视频的播放方法、装置、计算机及存储介质 |
CN108259948B (zh) * | 2018-03-30 | 2020-12-15 | 武汉斗鱼网络科技有限公司 | 一种直播音视频的播放方法、装置、计算机及存储介质 |
CN110012324A (zh) * | 2019-03-28 | 2019-07-12 | 武汉大学 | 一种嵌入式无线视频传输的码率自适应方法及系统 |
CN112423046A (zh) * | 2020-10-22 | 2021-02-26 | 深圳Tcl新技术有限公司 | 视频数据传输的方法、装置、设备及可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN103986914B (zh) | 2017-02-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103986914A (zh) | 无线视频监控系统中基于客户端数量的码率自适应方法 | |
CN105025249B (zh) | 视频监控数据传输控制方法、装置及视频监控系统 | |
CN105472477A (zh) | 一种数据传输方法、装置及设备 | |
CN102547243B (zh) | 基于3g网络的音视频远程监控方法及系统 | |
KR20170131466A (ko) | 데이터 스트림의 애플리케이션, 네트워크 및 디바이스 자원 활용을 개선하기 위한 협력 기법들 | |
US20150012929A1 (en) | Network controlled streaming | |
CN105516262B (zh) | 应用程序远程操控方法及系统 | |
CN105245321A (zh) | 一种自适应带宽的多通道实时数据传输方法 | |
CN104349158A (zh) | 一种通信视频质量调节方法和相关设备及系统 | |
CN202488573U (zh) | 一种分布式网络全高清视频矩阵系统 | |
CN104253967A (zh) | 一种实时视频通信传输控制方法 | |
CN105282478A (zh) | 音量调节方法及装置、多点控制单元 | |
CN108322773B (zh) | 一种基于多卡绑定的自适应网络带宽实时数据流传输方法 | |
CN201717893U (zh) | 一种自适应三种3g通信协议的无线远程数据传输设备 | |
CN102082947B (zh) | 一种视频监控的方法、系统和设备 | |
CN109618240A (zh) | 用于实时音视频传输的无线多信道自适应均衡方法 | |
CN109194921A (zh) | 基于动态功率和速率调整的无线视频监控数据传输方法和无线视频监控设备 | |
Cui et al. | Dash+: Download multiple video segments with stream multiplexing of quic | |
CN105376595A (zh) | 一种视频混合编码系统和方法 | |
CN108259944A (zh) | 一种基于链路代价的视频多路并行传输分流方法及其系统 | |
CN101945251B (zh) | 一种实现交互式网络电视业务控制的方法及系统及机顶盒 | |
WO2012103829A2 (zh) | 一种同轴网络内数据传输方法、设备及系统 | |
CN113949417B (zh) | 一种基于混合通信的电网数据传输方法及装置 | |
CN102201887A (zh) | 控制套接字传输速率的方法和装置 | |
CN105635687A (zh) | 一种基于智能终端信息传输系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20170201 Termination date: 20200527 |