CN102946570A - 一种自适应网络带宽的多流流媒体传输系统与传输方法 - Google Patents

一种自适应网络带宽的多流流媒体传输系统与传输方法 Download PDF

Info

Publication number
CN102946570A
CN102946570A CN2012103563235A CN201210356323A CN102946570A CN 102946570 A CN102946570 A CN 102946570A CN 2012103563235 A CN2012103563235 A CN 2012103563235A CN 201210356323 A CN201210356323 A CN 201210356323A CN 102946570 A CN102946570 A CN 102946570A
Authority
CN
China
Prior art keywords
media
network bandwidth
service module
stream
multithread
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012103563235A
Other languages
English (en)
Other versions
CN102946570B (zh
Inventor
徐礼爽
王加俊
陈刚
申瑞民
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jiaotong University
Original Assignee
Shanghai Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jiaotong University filed Critical Shanghai Jiaotong University
Priority to CN201210356323.5A priority Critical patent/CN102946570B/zh
Publication of CN102946570A publication Critical patent/CN102946570A/zh
Application granted granted Critical
Publication of CN102946570B publication Critical patent/CN102946570B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明涉及一种自适应网络带宽的多流流媒体传输系统与传输方法,所述的系统包括:根据发布端自适应网络带宽策略选择媒体流进行发布的发布端模块、用于支持多流流媒体传输的传输服务模块、用于频道信息管理的管理服务模块及根据客户端自适应网络带宽策略接收媒体流观看直播的客户端模块;所述的方法为:发布端模块根据发布端自适应网络带宽策略将采集的多流流媒体经预处理、压缩编码后形成的数据流通过网络提供给传输服务模块,客户端模块根据客户端自适应网络带宽策略获取传输服务模块中对应频道的多流流媒体数据经解码同步后进行播放。与现有技术相比,本发明具有可支持多种设备、多种带宽条件下、多种网络环境下的多流流媒体直播应用等优点。

Description

一种自适应网络带宽的多流流媒体传输系统与传输方法
技术领域
本发明涉及一种网络信息传输技术领域的系统与方法,具体是一种自适应网络带宽的多流流媒体传输系统与传输方法。 
背景技术
随着网络基础设施的不断升级,有线、无线网络带宽比以前已经有了显著的提高,实时音频、视频等流媒体在网络上的传输已经逐渐普及,成为热门的应用。但网络资源是动态改变和不可预测的,当前的网络一般只能提供尽力而为(best-effort)的服务,无法提供任何环境和场景下都能安全访问的保证。在进行流媒体数据传输时,用户对流媒体传输中实时性要求远大于可靠性,随机的突发的丢包和过大的时延,不可避免的带来拥塞,甚至整个网络的崩溃。因此系统在充分利用网络带宽的情况下,要保证流媒体传输的最佳服务质量,就必须使用自适应拥塞控制技术,采用自适应网络带宽的方式来保证流媒体数据的实时传输。 
实际的诸多应用场景下,仅支持语音和视频的二路流应用已经不能满足应用的需要。如在实时的教学场景下,除了支持直播老师的语音,视频信息外,还需要支持老师所讲解的内容,即老师授课的桌面图像;在诸多的学术会议或其他相关的会议、论坛中,也有诸多类似的支持三个流以上的多媒体应用。 
因此基于多流流媒体的直播应用是很多应用场景的实际应用需求,相对于传统的二路流流媒体,多流流媒体的传输带宽会更大;同时,为了支持随时随地便捷的观看直播,支持用户通过手持设备进行观看会带来很多方便,但网络环境的不稳定性是无线网络环境的重要特性之一,在信号弱的地方,网络环境和相关需要高带宽的应用就会受到限制。因此,基于多流的流媒体传输服务最好能在不同的网络环境下都能访问。保证此类应用能够较为稳定运行的重要功能之一是该类应用应满足在不同带宽下成功运行,即支持网络带宽的自适应功能。 
检索发现,中国专利申请号200710145373.8,记载了“一种手机直播的方法”, 该方法仅针对一个源,即手机视频流,且通过定时传送压缩图像的方式进行,该方法支持手机在通用网络下实时直播传输视频流的场景,且传播的视频会存在不流畅的情况。 
进一步检索发现,中国专利申请号201010510111.9,记载了一种“基于HTTP协议的多流流媒体传输系统及其传输方法”。该方法提出了用HTTP协议进行多流流媒体传输的优点。但该方法并没有提出具体的针对发布端和客户端的自适应网络带宽策略。 
发明内容
本发明针对现有技术存在的上述不足,提出了一种支持多种设备、多种带宽条件下、多种网络环境下的多流流媒体直播应用的自适应网络带宽的多流流媒体传输系统与传输方法。 
本发明的目的可以通过以下技术方案来实现: 
一种自适应网络带宽的多流流媒体传输系统,包括: 
根据发布端自适应网络带宽策略选择多个媒体流进行发布的发布端模块; 
用于支持多流流媒体传输的传输服务模块; 
用于频道信息管理的管理服务模块; 
根据客户端自适应网络带宽策略接收多个媒体流观看直播的客户端模块; 
所述的发布端模块、传输服务模块和客户端模块依次连接,所述的管理服务模块分别连接发布端模块和客户端模块; 
其中,发布端模块登录管理服务模块获取频道信息,根据发布端自适应网络带宽策略选择多个媒体通道及其编码规格参数编码后形成多个媒体流发送到传输服务模块,客户端模块连接管理服务模块获取对应频道后,根据客户端自适应网络带宽策略从传输服务模块接收多个媒体流并解码同步后进行播放。 
所述的发布端模块的载体可以是具有有线网络功能的PC电脑、苹果机或具有WIFI或3G带宽以上的手持设备。 
所述的多个媒体流是指包含两个及以上的媒体通道的数据流,且每一个流是经过特定媒体通道上的编码器按发布端自适应网络带宽策略选择的编码规格参数进行编码后形成的媒体数据流。 
所述的发布端自适应网络带宽策略是指将所有的媒体通道进行优先级排序,并 对每个媒体数据流设置两个或以上编码码率规格参数,并根据当前的实时网络带宽选择媒体数据流及其编码规格参数进行编码发送。 
所述的客户端自适应网络带宽策略是指客户端模块根据当前的实时网络带宽和媒体通道优先级获取传输服务模块中的多流流媒体数据进行解码同步后播放,并根据多流流媒体数据的尺寸大小对播放的界面进行自适应布局。 
一种自适应网络带宽的多流流媒体传输方法,包括如下步骤: 
第一步、发布端模块登录管理服务模块获取频道信息后连接到传输服务模块,根据发布端自适应网络带宽策略选择采集多个媒体通道信息并按策略选择合适的编码规格参数进行编码后形成多个流流媒体数据,并辅以相关时间信息后发送到传输服务模块; 
第二步、传输服务模块接收发布端模块发送的多流流媒体数据,同时负责监听客户端模块的观看请求; 
第三步、客户端模块连接管理服务模块获取对应频道后向传输服务模块发送观看请求,传输服务模块监听并接受请求后,客户端模块根据客户端自适应网络带宽策略获取传输服务模块的多流流媒体数据进行解码同步后播放。 
所述的发布端模块根据发布端自适应网络带宽策略采集多个媒体通道信息具体包括如下步骤: 
11)发布端模块启动并初始化,初始化的过程包括设定每个媒体通道的优先级,并为每个媒体通道设置多个压缩编码规格参数,并设定每个媒体通道的低码率压缩编码规格参数为默认规格,初始化后通过网络连接到传输服务模块,以初始化的状态采集每个媒体通道并压缩编码后形成多流流媒体数据进行发送,同时开始以固定的时间周期统计延时和丢包率,以判断网络状态; 
12)判断是否存在网络延时小于设定的延时阈值,且丢包率小于设定的丢包率阈值,若是,则网络处于稳定状态,进入步骤13),若否,则网络处于非稳定状态,进入步骤14); 
13)判断是否所有媒体通道都已经采集,如果是,则将当前优先级的媒体通道的编码码率规格提高一档,并将优先级低一级的媒体通道设为当前媒体通道;否则,将下一个未采集的媒体通道纳入采集通道,并设置以低规格码率进行压缩编码,进入步骤15); 
14)如果当前媒体通道的编码的规格已经最低,则不采集该媒体通道数据,否 则将当前优先级的媒体通道的编码码率规格降低一档,并将优先级大一级的通道设为当前媒体通道,进入步骤15); 
15)对采用的媒体通道逐一进行编码,码率高于基本码率的,对高码率的部分进行差分编码,编码好的多流流媒体数据通过网络发送至传输服务模块,每个通道以设定的采样间隔重复此步骤,当下一个统计网络状态的时间周期来临时,转至步骤12)执行。 
所述的每个媒体通道设置有多于一个的压缩编码规格参数,发布端模块默认选择每个媒体通道的低码率编码规格参数,若所有媒体通道的码率之和大于发布端的带宽上限,则停止发送优先级别低的媒体通道。 
所述的差分编码是指当前的压缩编码规格参数高于基本码率,则以高编码规格参数进行编码后形成的数据流进行解码还原后形成的数据和低编码规格参数进行编码后形成的数据流解码还原后形成的数据进行差分计算,对差分的结果进行无损压缩,形成的数据流作为该媒体通道的高规格码率对应的补充流。 
所述的客户端模块根据客户端自适应网络带宽策略获取传输服务模块的多流流媒体数据具体包括如下步骤: 
31)客户端模块启动并初始化,初始化的过程包括设定每个媒体通道的优先级,并为每个媒体通道设置多个压缩编码规格参数,设定每个媒体通道的低码率压缩编码规格参数为默认规格,初始化后连接到传输服务模块,同时以固定周期开始统计延时和丢包率,用来判断系统的网络状态; 
32)判断是否存在网络延时小于设定的延时阈值,且丢包率小于设定的丢包率阈值,若是,则网络处于稳定状态,进入步骤33),若否,则网络处于非稳定状态,进入步骤34); 
33)判断是否有当前优先级的媒体通道的编码码率规格高一档的数据,如果有则获取,否则保持不变,如果存在某个或某些媒体通道没有获取,将下一个优先级未获取的媒体通道纳入接收通道,通过传输服务模块检查是否有该通道低规格码率数据,如果有则获取,否则不变,转至步骤35)执行; 
34)如果当前媒体通道的编码规格已经最低,则不获取该媒体通道数据,否则将当前优先级的媒体通道的编码码率规格降低一档,并将优先级大一级的通道设为当前媒体通道,进入步骤35); 
35)对采用的媒体通道逐一获取码流数据,对高码率的部分获取差分编码的数 据,解码后同步播放,固定间隔重复此步骤,当下一个统计网络状态的时间周期来临时,转至步骤32)执行。 
所述的客户端模块根据客户端模块连接到传输服务模块的传输带宽情况,保证优先级高的通道优先获取,客户端默认选择每个通道的低码率编码规格参数,如所有通道的码率之和大于接收端的带宽上限,则停止接收优先级别低的媒体通道。 
与现有技术相比,本发明具有以下优点: 
1)本发明采用自适应网络带宽策略进行数据流的采集和接收,能够支持多种带宽条件下、多种网络环境下的多流流媒体直播应用; 
2)本发明既可以支持传统的音视频二路流的直播,支持多尺寸智能移动终端设备,同时,本发明的方法可以广泛应用于三个以上的多流直播中,满足了很多场景下二路流应用所不能满足的需求,如实时课堂、实时会议、实时论坛中。 
附图说明
图1是本发明的结构示意图; 
图2是本发明发布端模块自适应网络带宽策略流程图; 
图3是本发明客户端模块自适应网络带宽策略流程图; 
图4是实施例中传输服务模块多流buffer结构示意图。 
图4中,Stream:流;Key:密钥;Chanel:通道;buffer:缓冲区。 
具体实施方式
下面结合附图和具体实施例对本发明进行详细说明。 
实施例 
如图1所示,本实施例自适应网络带宽的多流流媒体传输系统,包括发布端模块1、传输服务模块3、管理服务模块4及客户端模块2,所述的发布端模块1、传输服务模块3和客户端模块2依次连接,所述的管理服务模块4分别连接发布端模块1和客户端模块2;其中,发布端模块1根据发布端自适应网络带宽策略选择多个媒体流进行发布,传输服务模块3用于支持多流流媒体传输,管理服务模块4用于频道信息管理,客户端模块2根据客户端自适应网络带宽策略接收多个媒体流观看直播;发布端模块1登录管理服务模块4获取频道信息,根据发布端自适应网络带宽策略选择多个媒体通道及其编码规格参数编码后形成多个媒体流发送到传输服务模块3,客户端模块2连接管理服务模块4获取对应频道后,根据客户端自 适应网络带宽策略从传输服务模块3接收多个媒体流并解码同步后进行播放。 
所述的发布端模块1的载体可以是具有有线网络功能的PC电脑、苹果机或具有WIFI或3G带宽以上的手持设备。 
所述的多个媒体流是指包含两个及以上的媒体通道的数据流,且每一个流是经过特定媒体通道上的编码器按发布端自适应网络带宽策略选择的编码规格参数进行编码后形成的媒体数据流,一个媒体通道可以用两个编码规格参数进行编码形成两路流,如320*240大小的视频媒体通道,即可以保持原始大小进行压缩编码,也可以进行预处理,缩小到176*144大小再次进行压缩编码。所述的发布端模块,分别采集三个流:屏幕流、视频流、音频流。根据发布端自适应模块,将选择发布的流数据按其低规格码率的编码流和补充流发送到传输服务模块。 
所述的发布端自适应网络带宽策略是指将所有的媒体通道进行优先级排序,并对每个媒体数据流设置两个或以上编码码率规格参数,并根据当前的实时网络带宽选择媒体数据流及其编码规格参数进行编码发送。 
所述的客户端自适应网络带宽策略是指客户端模块根据当前的实时网络带宽和媒体通道优先级获取传输服务模块中的多流流媒体数据进行解码同步后播放,并根据多流流媒体数据的尺寸大小对播放的界面进行自适应布局。 
如图1所示,本实施例自适应网络带宽的多流流媒体传输方法,包括如下步骤: 
第一步、发布端模块1登录管理服务模块4获取频道信息后连接到传输服务模块3,根据发布端自适应网络带宽策略选择采集多个媒体通道信息并按策略选择合适的编码规格参数进行编码后形成多个流流媒体数据,并辅以相关时间信息后发送到传输服务模块3; 
第二步、传输服务模块3接收发布端模块1发送的多流流媒体数据,同时负责监听客户端模块2的观看请求; 
第三步、客户端模块2连接管理服务模块4获取对应频道后向传输服务模块3发送观看请求,传输服务模块3监听并接受请求后,客户端模块2根据客户端自适应网络带宽策略获取传输服务模块3的多流流媒体数据进行解码同步后播放。 
如图2所示,发布端模块1根据发布端的带宽,将采集的多个媒体通道进行优先级排序,保证优先级高的通道优先发送,并且对每个通道,有多于一个的压缩编码规格参数,对应不同的压缩清晰等级。发布端默认选择每个通道的低码率编码规格参数,如所有通道的码率之和大于发布的带宽上限,则停止发送优先级别低的媒 体通道,发布端模块根据发布端自适应网络带宽策略采集多个媒体通道信息具体包括如下步骤: 
11)发布端模块启动并初始化,初始化的过程包括设定每个媒体通道的优先级,并为每个媒体通道设置多个压缩编码规格参数,并设定每个媒体通道的低码率压缩编码规格参数为默认规格,初始化后通过网络连接到传输服务模块,以初始化的状态采集每个媒体通道并压缩编码后形成多流流媒体数据进行发送,同时开始以固定的时间周期统计延时和丢包率,以判断网络状态; 
12)判断是否存在网络延时小于设定的延时阈值,且丢包率小于设定的丢包率阈值,若是,则网络处于稳定状态,进入步骤13),若否,则网络处于非稳定状态,进入步骤14); 
13)判断是否所有媒体通道都已经采集,如果是,则将当前优先级的媒体通道的编码码率规格提高一档,并将优先级低一级的媒体通道设为当前媒体通道;否则,将下一个未采集的媒体通道纳入采集通道,并设置以低规格码率进行压缩编码,进入步骤15); 
14)如果当前媒体通道的编码的规格已经最低,则不采集该媒体通道数据,否则将当前优先级的媒体通道的编码码率规格降低一档,并将优先级大一级的通道设为当前媒体通道,进入步骤15); 
15)对采用的媒体通道逐一进行编码,码率高于基本码率的,对高码率的部分进行差分编码,编码好的多流流媒体数据通过网络发送至传输服务模块,每个通道以设定的采样间隔重复此步骤,当下一个统计网络状态的时间周期来临时,转至步骤12)执行。 
所述的每个媒体通道设置有多于一个的压缩编码规格参数,发布端模块默认选择每个媒体通道的低码率编码规格参数,若所有媒体通道的码率之和大于发布端的带宽上限,则停止发送优先级别低的媒体通道。 
所述的差分编码是指当前的压缩编码规格参数高于基本码率,则以高编码规格参数进行编码后形成的数据流进行解码还原后形成的数据和低编码规格参数进行编码后形成的数据流解码还原后形成的数据进行差分计算,对差分的结果进行无损压缩,形成的数据流作为该媒体通道的高规格码率对应的补充流。 
传输服务模块3接收发布端发送过来的多流数据按照媒体通道和码率规格按时间先后循序推送到对应的buffer(缓冲区)中。多个媒体通道的buffer如图4所 示。传输服务模块为每个媒体通道的每一个编码规格参数建立一个buffer,buffer里存放最近由发布端模块推送过来的数据流。 
如图3所示,客户端模块2根据连接到传输服务模块的传输带宽情况,保证优先级高的通道优先获取,客户端默认选择每个通道的低码率编码规格参数,如所有通道的码率之和大于接收端的带宽上限,则停止接收优先级别低的媒体通道。客户端模块根据客户端自适应网络带宽策略获取传输服务模块的多流流媒体数据具体包括如下步骤: 
31)客户端模块启动并初始化,初始化的过程包括设定每个媒体通道的优先级,并为每个媒体通道设置多个压缩编码规格参数,设定每个媒体通道的低码率压缩编码规格参数为默认规格,初始化后连接到传输服务模块,同时以固定周期开始统计延时和丢包率,用来判断系统的网络状态; 
32)判断是否存在网络延时小于设定的延时阈值,且丢包率小于设定的丢包率阈值,若是,则网络处于稳定状态,进入步骤33),若否,则网络处于非稳定状态,进入步骤34); 
33)判断是否有当前优先级的媒体通道的编码码率规格高一档的数据,如果有则获取,否则保持不变,如果存在某个或某些媒体通道没有获取,将下一个优先级未获取的媒体通道纳入接收通道,通过传输服务模块检查是否有该通道低规格码率数据,如果有则获取,否则不变,转至步骤35)执行; 
34)如果当前媒体通道的编码规格已经最低,则不获取该媒体通道数据,否则将当前优先级的媒体通道的编码码率规格降低一档,并将优先级大一级的通道设为当前媒体通道,进入步骤35); 
35)对采用的媒体通道逐一获取码流数据,对高码率的部分获取差分编码的数据,解码后同步播放,固定间隔重复此步骤,当下一个统计网络状态的时间周期来临时,转至步骤32)执行。 
所述的客户端模块根据客户端模块连接到传输服务模块的传输带宽情况,保证优先级高的通道优先获取,客户端默认选择每个通道的低码率编码规格参数,如所有通道的码率之和大于接收端的带宽上限,则停止接收优先级别低的媒体通道。 
本发明采用自适应网络带宽策略进行数据流的采集和接收,能够支持多种带宽条件下、多种网络环境下的多流流媒体直播应用。 

Claims (10)

1.一种自适应网络带宽的多流流媒体传输系统,其特征在于,包括:
根据发布端自适应网络带宽策略选择多个媒体流进行发布的发布端模块;
用于支持多流流媒体传输的传输服务模块;
用于频道信息管理的管理服务模块;
根据客户端自适应网络带宽策略接收多个媒体流观看直播的客户端模块;
所述的发布端模块、传输服务模块和客户端模块依次连接,所述的管理服务模块分别连接发布端模块和客户端模块;
其中,发布端模块登录管理服务模块获取频道信息,根据发布端自适应网络带宽策略选择多个媒体通道及其编码规格参数编码后形成多个媒体流发送到传输服务模块,客户端模块连接管理服务模块获取对应频道后,根据客户端自适应网络带宽策略从传输服务模块接收多个媒体流并解码同步后进行播放。
2.根据权利要求1所述的一种自适应网络带宽的多流流媒体传输系统,其特征在于,所述的多个媒体流是指包含两个及以上的媒体通道的数据流,且每一个流是经过特定媒体通道上的编码器按发布端自适应网络带宽策略选择的编码规格参数进行编码后形成的媒体数据流。
3.根据权利要求1所述的一种自适应网络带宽的多流流媒体传输系统,其特征在于,所述的发布端自适应网络带宽策略是指将所有的媒体通道进行优先级排序,并对每个媒体数据流设置两个或以上编码码率规格参数,并根据当前的实时网络带宽选择媒体数据流及其编码规格参数进行编码发送。
4.根据权利要求3所述的一种自适应网络带宽的多流流媒体传输系统,其特征在于,所述的客户端自适应网络带宽策略是指客户端模块根据当前的实时网络带宽和媒体通道优先级获取传输服务模块中的多流流媒体数据进行解码同步后播放,并根据多流流媒体数据的尺寸大小对播放的界面进行自适应布局。
5.一种根据上述任一权利要求所述的自适应网络带宽的多流流媒体传输方法,其特征在于,包括如下步骤:
第一步、发布端模块登录管理服务模块获取频道信息后连接到传输服务模块,根据发布端自适应网络带宽策略选择采集多个媒体通道信息并按策略选择合适的编码规格参数进行编码后形成多个流流媒体数据,并辅以相关时间信息后发送到传输服务模块;
第二步、传输服务模块接收发布端模块发送的多流流媒体数据,同时负责监听客户端模块的观看请求;
第三步、客户端模块连接管理服务模块获取对应频道后向传输服务模块发送观看请求,传输服务模块监听并接受请求后,客户端模块根据客户端自适应网络带宽策略获取传输服务模块的多流流媒体数据进行解码同步后播放。
6.根据权利要求5所述的一种自适应网络带宽的多流流媒体传输方法,其特征在于,所述的发布端模块根据发布端自适应网络带宽策略采集多个媒体通道信息具体包括如下步骤:
11)发布端模块启动并初始化,初始化的过程包括设定每个媒体通道的优先级,并为每个媒体通道设置多个压缩编码规格参数,并设定每个媒体通道的低码率压缩编码规格参数为默认规格,初始化后通过网络连接到传输服务模块,以初始化的状态采集每个媒体通道并压缩编码后形成多流流媒体数据进行发送,同时开始以固定的时间周期统计延时和丢包率,以判断网络状态;
12)判断是否存在网络延时小于设定的延时阈值,且丢包率小于设定的丢包率阈值,若是,则网络处于稳定状态,进入步骤13),若否,则网络处于非稳定状态,进入步骤14);
13)判断是否所有媒体通道都已经采集,如果是,则将当前优先级的媒体通道的编码码率规格提高一档,并将优先级低一级的媒体通道设为当前媒体通道;否则,将下一个未采集的媒体通道纳入采集通道,并设置以低规格码率进行压缩编码,进入步骤15);
14)如果当前媒体通道的编码的规格已经最低,则不采集该媒体通道数据,否则将当前优先级的媒体通道的编码码率规格降低一档,并将优先级大一级的通道设为当前媒体通道,进入步骤15);
15)对采用的媒体通道逐一进行编码,码率高于基本码率的,对高码率的部分进行差分编码,编码好的多流流媒体数据通过网络发送至传输服务模块,每个通道以设定的采样间隔重复此步骤,当下一个统计网络状态的时间周期来临时,转至步骤12)执行。
7.根据权利要求6所述的一种自适应网络带宽的多流流媒体传输方法,其特征在于,所述的每个媒体通道设置有多于一个的压缩编码规格参数,发布端模块默认选择每个媒体通道的低码率编码规格参数,若所有媒体通道的码率之和大于发布端的带宽上限,则停止发送优先级别低的媒体通道。
8.根据权利要求6所述的一种自适应网络带宽的多流流媒体传输方法,其特征在于,所述的差分编码是指当前的压缩编码规格参数高于基本码率,则以高编码规格参数进行编码后形成的数据流进行解码还原后形成的数据和低编码规格参数进行编码后形成的数据流解码还原后形成的数据进行差分计算,对差分的结果进行无损压缩,形成的数据流作为该媒体通道的高规格码率对应的补充流。
9.根据权利要求5所述的一种自适应网络带宽的多流流媒体传输方法,其特征在于,所述的客户端模块根据客户端自适应网络带宽策略获取传输服务模块的多流流媒体数据具体包括如下步骤:
31)客户端模块启动并初始化,初始化的过程包括设定每个媒体通道的优先级,并为每个媒体通道设置多个压缩编码规格参数,设定每个媒体通道的低码率压缩编码规格参数为默认规格,初始化后连接到传输服务模块,同时以固定周期开始统计延时和丢包率,用来判断系统的网络状态;
32)判断是否存在网络延时小于设定的延时阈值,且丢包率小于设定的丢包率阈值,若是,则网络处于稳定状态,进入步骤33),若否,则网络处于非稳定状态,进入步骤34);
33)判断是否有当前优先级的媒体通道的编码码率规格高一档的数据,如果有则获取,否则保持不变,如果存在某个或某些媒体通道没有获取,将下一个优先级未获取的媒体通道纳入接收通道,通过传输服务模块检查是否有该通道低规格码率数据,如果有则获取,否则不变,转至步骤35)执行;
34)如果当前媒体通道的编码规格已经最低,则不获取该媒体通道数据,否则将当前优先级的媒体通道的编码码率规格降低一档,并将优先级大一级的通道设为当前媒体通道,进入步骤35);
35)对采用的媒体通道逐一获取码流数据,对高码率的部分获取差分编码的数据,解码后同步播放,固定间隔重复此步骤,当下一个统计网络状态的时间周期来临时,转至步骤32)执行。
10.根据权利要求9所述的一种自适应网络带宽的多流流媒体传输方法,其特征在于,所述的客户端模块根据客户端模块连接到传输服务模块的传输带宽情况,保证优先级高的通道优先获取,客户端默认选择每个通道的低码率编码规格参数,如所有通道的码率之和大于接收端的带宽上限,则停止接收优先级别低的媒体通道。
CN201210356323.5A 2012-09-21 2012-09-21 一种自适应网络带宽的多流流媒体传输系统与传输方法 Expired - Fee Related CN102946570B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210356323.5A CN102946570B (zh) 2012-09-21 2012-09-21 一种自适应网络带宽的多流流媒体传输系统与传输方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210356323.5A CN102946570B (zh) 2012-09-21 2012-09-21 一种自适应网络带宽的多流流媒体传输系统与传输方法

Publications (2)

Publication Number Publication Date
CN102946570A true CN102946570A (zh) 2013-02-27
CN102946570B CN102946570B (zh) 2015-03-04

Family

ID=47729470

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210356323.5A Expired - Fee Related CN102946570B (zh) 2012-09-21 2012-09-21 一种自适应网络带宽的多流流媒体传输系统与传输方法

Country Status (1)

Country Link
CN (1) CN102946570B (zh)

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103593437A (zh) * 2013-11-14 2014-02-19 浪潮电子信息产业股份有限公司 一种基于dma的数据压缩芯片结构及其实现方法
CN104065665A (zh) * 2014-07-02 2014-09-24 深圳深讯和科技有限公司 流媒体数据的处理方法和系统
CN104216914A (zh) * 2013-06-04 2014-12-17 Sap欧洲公司 大容量数据传输
CN104219229A (zh) * 2014-08-18 2014-12-17 国家电网公司 虚拟桌面数据的传输方法和装置
CN104333767A (zh) * 2014-10-10 2015-02-04 厦门雅迅网络股份有限公司 一种车载视频监控系统多通道优先级控制方法及系统
CN104521167A (zh) * 2013-06-28 2015-04-15 华为技术有限公司 一种数据传输方法、装置、基站及用户设备
CN105556979A (zh) * 2013-09-17 2016-05-04 谷歌公司 流式传输媒体
CN105933241A (zh) * 2016-04-19 2016-09-07 武汉顶翔智控科技有限公司 一种多媒体流传输系统中网络拥塞自适应装置及方法
CN106060605A (zh) * 2016-05-25 2016-10-26 清华大学深圳研究生院 一种基于cdn的直播流自适应方法和系统
CN106209880A (zh) * 2016-07-21 2016-12-07 深圳羚羊极速科技有限公司 一种多线路传输流媒体数据的方法
CN103873812B (zh) * 2014-04-03 2017-02-15 哈尔滨工业大学 宽带多媒体集群系统调度台的自适应分辨率h.264视频编码方法
CN106790249A (zh) * 2017-01-22 2017-05-31 阔地教育科技有限公司 一种服务器资源调度方法及装置
CN106846940A (zh) * 2016-12-29 2017-06-13 珠海思课技术有限公司 一种在线直播课堂教育的实现方法
CN107181928A (zh) * 2017-07-21 2017-09-19 苏睿 会议系统及数据传输方法
CN107659601A (zh) * 2016-07-26 2018-02-02 中国科学院声学研究所 一种基于http自适应流的码率自适应方法
CN108028830A (zh) * 2015-09-18 2018-05-11 索尼移动通讯有限公司 用于通过无线电网络控制流传输的方法和装置
CN108271071A (zh) * 2016-12-30 2018-07-10 广州华多网络科技有限公司 一种提高视频清晰度的方法及装置
CN108616378A (zh) * 2016-12-13 2018-10-02 北京唱吧科技股份有限公司 一种带宽自适应的聊天优化方法及服务器
CN108737861A (zh) * 2018-05-11 2018-11-02 浙江大学 一种拥塞环境下基于解码优先级的带宽资源优化配置方法
CN108966008A (zh) * 2018-08-02 2018-12-07 腾讯科技(深圳)有限公司 直播视频回放方法及装置
CN109874031A (zh) * 2017-12-04 2019-06-11 华平信息技术股份有限公司 基于网络带宽预测的多优先级动态码率调整方法及系统
CN110036604A (zh) * 2016-09-23 2019-07-19 联发科技股份有限公司 在处理来自于多个媒体源的媒体内容中指定、发信和使用独立编解码的码点的方法及装置
CN110730328A (zh) * 2019-09-11 2020-01-24 浙江浙大中控信息技术有限公司 将多路视频展示到浏览器单页面中的方法
CN111447464A (zh) * 2020-05-15 2020-07-24 耿超玮 一种基于流媒体的多网融合系统及其实现方法
CN111586350A (zh) * 2020-04-19 2020-08-25 国网辽宁省电力有限公司电力科学研究院 基于带宽、优先级和无操作时间等参数调节码率的方法
CN111787290A (zh) * 2020-07-29 2020-10-16 上海船舶研究设计院(中国船舶工业集团公司第六0四研究院) 船舶数据传输方法、装置及控制终端
CN111970268A (zh) * 2020-08-12 2020-11-20 腾讯科技(深圳)有限公司 一种观战数据展示方法、设备及计算机可读存储介质
CN112738646A (zh) * 2019-10-28 2021-04-30 阿里巴巴集团控股有限公司 数据处理方法、设备、系统、可读存储介质及服务器

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101365125A (zh) * 2008-09-27 2009-02-11 腾讯科技(深圳)有限公司 多路视频通信方法与系统
CN101404759A (zh) * 2008-10-30 2009-04-08 中山大学 一种用于数字视频监控系统的网络自适应系统
CN101499918A (zh) * 2009-02-10 2009-08-05 宇龙计算机通信科技(深圳)有限公司 一种自适应流媒体播放方法、装置、系统及移动终端
CN101505202A (zh) * 2009-03-16 2009-08-12 华中科技大学 一种流媒体传输自适应纠错方法
CN101742223A (zh) * 2010-01-19 2010-06-16 上海华平信息技术股份有限公司 视频流带宽智能调节方法
CN101854531A (zh) * 2010-05-24 2010-10-06 镇江唐桥微电子有限公司 一种多通道视频联合码率控制方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101365125A (zh) * 2008-09-27 2009-02-11 腾讯科技(深圳)有限公司 多路视频通信方法与系统
CN101404759A (zh) * 2008-10-30 2009-04-08 中山大学 一种用于数字视频监控系统的网络自适应系统
CN101499918A (zh) * 2009-02-10 2009-08-05 宇龙计算机通信科技(深圳)有限公司 一种自适应流媒体播放方法、装置、系统及移动终端
CN101505202A (zh) * 2009-03-16 2009-08-12 华中科技大学 一种流媒体传输自适应纠错方法
CN101742223A (zh) * 2010-01-19 2010-06-16 上海华平信息技术股份有限公司 视频流带宽智能调节方法
CN101854531A (zh) * 2010-05-24 2010-10-06 镇江唐桥微电子有限公司 一种多通道视频联合码率控制方法

Cited By (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104216914A (zh) * 2013-06-04 2014-12-17 Sap欧洲公司 大容量数据传输
CN104216914B (zh) * 2013-06-04 2017-09-15 Sap欧洲公司 大容量数据传输
US9900802B2 (en) 2013-06-28 2018-02-20 Huawei Technologies Co., Ltd. Data transmission method and apparatus, base station, and user equipment
CN104521167A (zh) * 2013-06-28 2015-04-15 华为技术有限公司 一种数据传输方法、装置、基站及用户设备
CN105556979B (zh) * 2013-09-17 2019-02-22 谷歌有限责任公司 流式传输媒体
CN105556979A (zh) * 2013-09-17 2016-05-04 谷歌公司 流式传输媒体
CN103593437A (zh) * 2013-11-14 2014-02-19 浪潮电子信息产业股份有限公司 一种基于dma的数据压缩芯片结构及其实现方法
CN103873812B (zh) * 2014-04-03 2017-02-15 哈尔滨工业大学 宽带多媒体集群系统调度台的自适应分辨率h.264视频编码方法
CN104065665B (zh) * 2014-07-02 2018-04-03 深圳深讯和科技有限公司 流媒体数据的处理方法和系统
CN104065665A (zh) * 2014-07-02 2014-09-24 深圳深讯和科技有限公司 流媒体数据的处理方法和系统
CN104219229A (zh) * 2014-08-18 2014-12-17 国家电网公司 虚拟桌面数据的传输方法和装置
CN104219229B (zh) * 2014-08-18 2018-01-12 国家电网公司 虚拟桌面数据的传输方法和装置
CN104333767A (zh) * 2014-10-10 2015-02-04 厦门雅迅网络股份有限公司 一种车载视频监控系统多通道优先级控制方法及系统
CN104333767B (zh) * 2014-10-10 2019-07-02 厦门雅迅网络股份有限公司 一种车载视频监控系统多通道优先级控制方法及系统
CN108028830A (zh) * 2015-09-18 2018-05-11 索尼移动通讯有限公司 用于通过无线电网络控制流传输的方法和装置
CN108028830B (zh) * 2015-09-18 2021-06-08 索尼移动通讯有限公司 无线电终端以及流传输调度装置中执行的方法和终端
CN105933241A (zh) * 2016-04-19 2016-09-07 武汉顶翔智控科技有限公司 一种多媒体流传输系统中网络拥塞自适应装置及方法
CN106060605A (zh) * 2016-05-25 2016-10-26 清华大学深圳研究生院 一种基于cdn的直播流自适应方法和系统
CN106060605B (zh) * 2016-05-25 2019-03-26 清华大学深圳研究生院 一种基于cdn的直播流自适应方法和系统
CN106209880A (zh) * 2016-07-21 2016-12-07 深圳羚羊极速科技有限公司 一种多线路传输流媒体数据的方法
CN107659601A (zh) * 2016-07-26 2018-02-02 中国科学院声学研究所 一种基于http自适应流的码率自适应方法
CN107659601B (zh) * 2016-07-26 2019-12-17 中国科学院声学研究所 一种基于http自适应流的码率自适应方法
CN110036604B (zh) * 2016-09-23 2022-04-01 联发科技股份有限公司 在处理来自于多个媒体源的媒体内容中指定、发信和使用独立编解码的码点的方法及装置
CN110036604A (zh) * 2016-09-23 2019-07-19 联发科技股份有限公司 在处理来自于多个媒体源的媒体内容中指定、发信和使用独立编解码的码点的方法及装置
CN108616378A (zh) * 2016-12-13 2018-10-02 北京唱吧科技股份有限公司 一种带宽自适应的聊天优化方法及服务器
CN106846940A (zh) * 2016-12-29 2017-06-13 珠海思课技术有限公司 一种在线直播课堂教育的实现方法
CN108271071A (zh) * 2016-12-30 2018-07-10 广州华多网络科技有限公司 一种提高视频清晰度的方法及装置
CN108271071B (zh) * 2016-12-30 2021-03-19 广州方硅信息技术有限公司 一种提高视频清晰度的方法及装置
CN106790249A (zh) * 2017-01-22 2017-05-31 阔地教育科技有限公司 一种服务器资源调度方法及装置
CN107181928A (zh) * 2017-07-21 2017-09-19 苏睿 会议系统及数据传输方法
CN109874031A (zh) * 2017-12-04 2019-06-11 华平信息技术股份有限公司 基于网络带宽预测的多优先级动态码率调整方法及系统
CN108737861A (zh) * 2018-05-11 2018-11-02 浙江大学 一种拥塞环境下基于解码优先级的带宽资源优化配置方法
CN108737861B (zh) * 2018-05-11 2020-06-16 浙江大学 一种拥塞环境下基于解码优先级的带宽资源优化配置方法
CN108966008A (zh) * 2018-08-02 2018-12-07 腾讯科技(深圳)有限公司 直播视频回放方法及装置
CN108966008B (zh) * 2018-08-02 2020-08-11 腾讯科技(深圳)有限公司 直播视频回放方法及装置
CN110730328A (zh) * 2019-09-11 2020-01-24 浙江浙大中控信息技术有限公司 将多路视频展示到浏览器单页面中的方法
CN112738646A (zh) * 2019-10-28 2021-04-30 阿里巴巴集团控股有限公司 数据处理方法、设备、系统、可读存储介质及服务器
CN111586350A (zh) * 2020-04-19 2020-08-25 国网辽宁省电力有限公司电力科学研究院 基于带宽、优先级和无操作时间等参数调节码率的方法
CN111586350B (zh) * 2020-04-19 2021-11-09 国网辽宁省电力有限公司电力科学研究院 基于带宽、优先级和无操作时间调节码率的方法
CN111447464A (zh) * 2020-05-15 2020-07-24 耿超玮 一种基于流媒体的多网融合系统及其实现方法
CN111787290A (zh) * 2020-07-29 2020-10-16 上海船舶研究设计院(中国船舶工业集团公司第六0四研究院) 船舶数据传输方法、装置及控制终端
CN111970268A (zh) * 2020-08-12 2020-11-20 腾讯科技(深圳)有限公司 一种观战数据展示方法、设备及计算机可读存储介质

Also Published As

Publication number Publication date
CN102946570B (zh) 2015-03-04

Similar Documents

Publication Publication Date Title
CN102946570B (zh) 一种自适应网络带宽的多流流媒体传输系统与传输方法
CN101917389B (zh) 一种网络电视直播系统
CN105472477B (zh) 一种数据传输方法、装置及设备
CN101917613B (zh) 一种流媒体采集编码服务系统
CN100568966C (zh) 一种音/视频数据的网络传输方法
CN102202210B (zh) 手机播放实时监控视频的方法及播放实时监控视频的手机
CN104735470A (zh) 一种流媒体数据传输方法及装置
CN106375790B (zh) 一种QoE驱动的多频道HAS码率自适应调度方法
US9313553B2 (en) Apparatus and method for simulcast over a variable bandwidth channel
JP4702397B2 (ja) コンテンツサーバ、情報処理装置、ネットワーク機器、コンテンツ配信方法、情報処理方法およびコンテンツ配信システム
CN102811368A (zh) 一种移动视频直播系统
CN102130886B (zh) 网络视频流媒体系统及传输处理方法、发送端
CN102065339A (zh) 音视频媒体流的播放方法与系统
CN105072506B (zh) 教学直播视频的传输方法及系统
CN101883097A (zh) 服务器设备共享客户端设备屏幕的实现方法及装置
CN101499918A (zh) 一种自适应流媒体播放方法、装置、系统及移动终端
CN101917612A (zh) 一种流媒体视频编码方法及装置
CN105791735B (zh) 用于视频通话码流动态调整的方法和系统
CN101848205A (zh) 一种基于rtsp的移动终端播放流媒体的方法及系统
CN105392029A (zh) 一种hls点播和直播的实现方法及系统
CN104320716A (zh) 一种基于多终端协同的视频上行链路传输方法
JP5428734B2 (ja) ネットワーク機器、情報処理装置、ストリーム切替方法、情報処理方法、プログラムおよびコンテンツ配信システム
CN105376595A (zh) 一种视频混合编码系统和方法
CN203387627U (zh) 移动流媒体直播点播系统
CN101692711A (zh) 视频编解码方法、系统及一种视频监控系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150304

Termination date: 20170921