CN104113766A - 一种媒体流的传输带宽的调整方法及相关装置 - Google Patents
一种媒体流的传输带宽的调整方法及相关装置 Download PDFInfo
- Publication number
- CN104113766A CN104113766A CN201310131471.1A CN201310131471A CN104113766A CN 104113766 A CN104113766 A CN 104113766A CN 201310131471 A CN201310131471 A CN 201310131471A CN 104113766 A CN104113766 A CN 104113766A
- Authority
- CN
- China
- Prior art keywords
- media stream
- scoring
- media
- sign
- receiving terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/11—Identifying congestion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/752—Media network packet handling adapting media to network capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/24—Traffic characterised by specific attributes, e.g. priority or QoS
- H04L47/2416—Real-time traffic
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2385—Channel allocation; Bandwidth allocation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
- H04N21/2402—Monitoring of the downstream path of the transmission network, e.g. bandwidth available
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/637—Control signals issued by the client directed to the server or network components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
- H04N21/6437—Real-time Transport Protocol [RTP]
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明公开了一种媒体流的传输带宽的调整方法及相关装置。媒体流发送端通过获取媒体流接收端根据多个媒体流的标识对各媒体流做出的评分,其中,多个媒体流在同一传输端口传输,这些标识是基于各个媒体流内容进行描述的;当检测到拥塞发生或拥塞解除时,媒体流发送端根据这些评分对相应的媒体流进行传输带宽的调整,从而使得可以对在同一传输端口传输的多个媒体流基于媒体流内容进行媒体流的传输带宽的调整。
Description
技术领域
本发明涉及媒体通信技术领域,尤其涉及一种媒体流的传输带宽的调整方法及相关装置。
背景技术
随着媒体通信技术的发展,多路媒体流的应用需求越来越旺盛,仅仅一个视频流加一个音频流的应用已经无法满足人们对多屏幕多画面的追求。一个典型的例子,远程呈现会场提供多个显示器,在不同的显示器上可以同时显示多个与会者的图像与演示材料,以提供更逼真的临场感。
然而,在媒体流传输的过程中,通常会从一个网络环境传输至另一个网络环境,因此涉及到网络地址转换(Network Address Translation,NAT)/防火墙(Firewall,FW)穿越等问题,其解决的思路是对端口进行映射,即端口之间进行一一映射。但是,当媒体流数量增加时,需要映射的端口也增多,导致NAT/FW穿越操作复杂、系统开销大,所以多流对整个网络的冲击较大。现有的解决方法是在发送端和接收端之间,将多个媒体流在同一个端口下发送和接收,即复用端口进行多个媒体流的传输。然而,在传输过程中,存在如何在拥塞发生或者拥塞解除时,对在同一传输端口传输的多个媒体流进行媒体流的传输带宽的调整的问题。
现有技术中的一种解决方案如申请号为CN201080020341.5、公开日为2012年4月18日的专利申请公开了一种通信装置,在拥塞程度超过所述评估值的情况下,该通信装置至少中断并行传输的多个流中具有比其他流低的优先级的流的传输,每个流的优先级由存储单元中的优先级信息来描述。该通信装置是通过流控制传输协议(Stream Control Transmission Protocol,SCTP)中的拥塞窗口来评估通信中的拥塞程度,然而,目前SCTP的应用并不广泛,它是基于连接的传输,实际中,对于实时音视频流,都是采用用户数据包协议(User Datagram Protocol,UDP),是基于无连接的传输;SCTP中的并行传输,也并非端口复用,UDP端口复用只用一个IP地址一个端口,而SCTP的并行传输需要多个IP地址多个端口;另外,其优先级的信息在本端保存,当拥塞产生时,会出现“接收端的观看者感兴趣的流因为发送者认为不重要而中断”的问题。
综上所述,如何在拥塞发生或者拥塞解除时,对在同一传输端口传输的多个媒体流进行媒体流的传输带宽的调整已成为业界迫切需要解决的问题。
发明内容
有鉴于此,本发明实施例提供了一种媒体流的传输带宽的调整方法及相关装置,用于解决现有技术存在着的无法对在同一传输端口传输的多个媒体流进行媒体流的传输带宽的调整的问题。
第一方面,提供了一种媒体流的传输带宽的调整方法,包括:
媒体流发送端将至少两个媒体流的标识发送给媒体流接收端,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识;
所述媒体流发送端获取所述媒体流接收端对各媒体流的评分,所述各媒体流的评分是由所述媒体流接收端根据所述各媒体流的标识做出;
当检测到拥塞发生或者拥塞解除时,根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整。
在第一种可能的实现方式中,所述基于媒体流内容的标识包括各媒体流如下至少一种特征:媒体捕获内容(Media Capture Content)、图像合成(Composed)、捕获内容的切换和/或规则、动态内容采集(Dynamic)、画面视角(Scene View)、角色(Role)、画面优先级(Scene Priority)、共享(Presentation)和语言(Language)。
结合第一方面或第一方面的第一种可能的实现方式,在第二种可能的实现方式中,通过如下方式进行所述至少两个媒体流的标识,以及所述对各媒体流的评分的发送:
在实时传输协议RTP消息或实时传输控制协议RTCP消息的包头中增加字段,携带所述各媒体流的标识或所述对各媒体流的评分;或
通过会话描述协议SDP消息、网真多流控制协议CLUE消息或多媒体通信控制协议H.245消息,向所述媒体流接收端发送所述各媒体流的标识或从所述媒体流接收端接收所述对各媒体流的评分。
结合第一方面或第一方面的第一种可能的实现方式或第一方面的第二种可能的实现方式,在第三种可能的实现方式中,所述当检测到拥塞发生或者拥塞解除时,根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整,包括:
当检测到拥塞发生或者拥塞解除时,按照所述至少一个媒体流的评分占总评分的比例,调节所述至少一个媒体流的传输带宽,其中,所述总评分是所述至少两个媒体流的评分之和;或
当检测到所述拥塞发生时,对于评分高于第一设定阈值的媒体流,维持所述媒体流的传输带宽;或
当检测到所述拥塞发生时,对于评分低于第二设定阈值的媒体流,切断所述媒体流的传输;或
当检测到所述拥塞解除时,对于评分高于第三设定阈值的媒体流,等比例提高所述媒体流的传输带宽,维持所述至少两个媒体流中其余的媒体流的传输带宽;或
当检测到所述拥塞解除时,恢复所述至少一个媒体流的传输带宽到拥塞发生之前所述至少一个媒体流的传输带宽初始值。
结合第一方面或第一方面的第一种可能的实现方式或第一方面的第二种可能的实现方式或第一方面的第三种可能的实现方式,在第四种可能的实现方式中,所述方法还包括:
所述媒体流发送端获取所述媒体流接收端对所述至少两个媒体流的评分的更新,当检测到所述至少两个媒体流发生拥塞或者拥塞解除时,依据更新后的评分对所述至少一个媒体流进行传输带宽的调整。
第二方面,提供了一种媒体流的传输带宽的调整方法,包括:
媒体流接收端接收媒体流发送端发送的至少两个媒体流的标识,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识;
所述媒体流接收端根据所述各媒体流的标识对所述各媒体流做出评分;
所述媒体流接收端将所述各媒体流的评分发送给所述媒体流发送端,使得当检测到拥塞发生或者拥塞解除时,所述媒体流发送端根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整。
在第一种可能的实现方式中,所述媒体流接收端根据所述各媒体流的标识对所述各媒体流做出评分,包括:
所述媒体流接收端选取所述各媒体流的全部或部分标识,对所述选取的标识进行赋值,或将所述媒体流发送端对所述选取的标识的初始赋值作为对所述选取的标识的赋值;
所述媒体流接收端针对所述每个媒体流,将对所述选取的标识的所述赋值的和作为对所述各媒体流的评分。
结合第二方面的第一种可能的实现方式,在第二种可能的实现方式中,所述对所述选取的标识进行赋值之后,所述方法进一步包括:
为所述选取的标识分配相应的加权值;
根据所述选取的标识的加权值对相应标识的赋值进行加权,将加权后的值作为所述选取的标识的加权赋值;
所述媒体流接收端针对所述每个媒体流,将对所述选取的标识的所述赋值的和作为对所述各媒体流的评分,具体为:
所述媒体流接收端针对所述每个媒体流,将对所述选取的标识的加权赋值的和作为对所述各媒体流的评分。
第三方面,提供了一种媒体流发送端,包括:
第一发送单元,用于将至少两个媒体流的标识发送给媒体流接收端,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识;
第一接收单元,用于获取所述媒体流接收端对各媒体流的评分,所述各媒体流的评分是由所述媒体流接收端根据所述各媒体流的标识做出;
调整单元,用于当检测到拥塞发生或者拥塞解除时,根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整。
在第一种可能的实现方式中,所述基于媒体流内容的标识包括各媒体流如下至少一种特征:媒体捕获内容(Media Capture Content)、图像合成(Composed)、捕获内容的切换和/或规则、动态内容采集(Dynamic)、画面视角(Scene View)、角色(Role)、画面优先级(Scene Priority)、共享(Presentation)和语言(Language)。
结合第三方面或第三方面的第一种可能的实现方式,在第二种可能的实现方式中,通过如下方式进行所述至少两个媒体流的标识,以及所述对各媒体流的评分的发送:
在实时传输协议RTP消息或实时传输控制协议RTCP消息的包头中增加字段,携带所述各媒体流的标识或所述对各媒体流的评分;或
通过会话描述协议SDP消息、网真多流控制协议CLUE消息或多媒体通信控制协议H.245消息,向所述媒体流接收端发送所述各媒体流的标识或从所述媒体流接收端接收所述对各媒体流的评分。
结合第三方面或第三方面的第一种可能的实现方式或第三方面的第二种可能的实现方式,在第三种可能的实现方式中,所述调整单元包括:
第一调节单元,用于当检测到拥塞发生或者拥塞解除时,按照所述至少一个媒体流的评分占总评分的比例,调节所述至少一个媒体流的传输带宽,其中,所述总评分是所述至少两个媒体流的评分之和;或
维持单元,用于当检测到所述拥塞发生时,对于评分高于第一设定阈值的媒体流,维持所述媒体流的传输带宽;或
切断单元,用于当检测到所述拥塞发生时,对于评分低于第二设定阈值的媒体流,切断所述媒体流的传输;或
第二调节单元,用于当检测到所述拥塞解除时,对于评分高于第三设定阈值的媒体流,等比例提高所述媒体流的传输带宽,维持所述至少两个媒体流中其余的媒体流的传输带宽;或
恢复单元,用于当检测到所述拥塞解除时,恢复所述至少一个媒体流的传输带宽到拥塞发生之前所述至少一个媒体流的传输带宽初始值。
结合第三方面或第三方面的第一种可能的实现方式或第三方面的第二种可能的实现方式或第三方面的第三种可能的实现方式,在第四种可能的实现方式中,所述媒体流发送端还包括:
更新单元,用于获取所述媒体流接收端对所述至少两个媒体流的评分的更新;
所述调整单元还用于当检测到所述至少两个媒体流发生拥塞或者拥塞解除时,依据更新后的评分对所述至少一个媒体流进行传输带宽的调整。
第四方面,提供了一种媒体流接收端,包括:
第二接收单元,用于接收媒体流发送端发送的至少两个媒体流的标识,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识;
评分单元,用于根据所述各媒体流的标识对所述各媒体流做出评分;
第二发送单元,用于将所述各媒体流的评分发送给所述媒体流发送端,使得当检测到拥塞发生或者拥塞解除时,所述媒体流发送端根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整。
在第一种可能的实现方式中,所述评分单元包括:
赋值单元,用于选取所述各媒体流的全部或部分标识,对所述选取的标识进行赋值,或将所述媒体流发送端对所述选取的标识的初始赋值作为对所述选取的标识的赋值;
评分获取单元,用于针对所述每个媒体流,将对所述选取的标识的所述赋值的和作为对所述各媒体流的评分。
结合第四方面的第一种可能的实现方式,在第二种可能的实现方式中,所述评分单元还包括:
分配单元,用于为所述选取的标识分配相应的加权值;
加权单元,用于根据所述选取的标识的加权值对相应的标识的赋值进行加权,将加权后的值作为所述选取的标识的加权赋值;
所述评分获取单元还用于针对所述每个媒体流,将对所述选取的标识的加权赋值的和作为对所述各媒体流的评分。
第五方面,提供了一种媒体流收发系统,包括第三方面或第三方面的第一种可能的实现方式或第三方面的第二种可能的实现方式或第三方面的第三种可能的实现方式或第三方面的第四种可能的实现方式所述的媒体流发送端、第四方面或第四方面的第一种可能的实现方式或第四方面的第二种可能的实现方式所述的媒体流接收端和传输网络,所述媒体流发送端和所述媒体流接收端通过所述传输网络交互信息。
采用本发明提供的一种媒体流的传输带宽的调整方法及相关装置的技术方案,媒体流发送端通过获取媒体流接收端根据多个媒体流的标识对各媒体流做出的评分,其中,多个媒体流在同一传输端口传输,这些标识是基于各个媒体流内容进行描述的;当检测到拥塞发生或拥塞解除时,媒体流发送端根据这些评分对相应的媒体流进行传输带宽的调整,从而使得可以对在同一传输端口传输的多个媒体流基于媒体流内容进行媒体流的传输带宽的调整。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一种媒体流的传输带宽的调整方法的一个实施例的方法流程图;
图2为本发明一种媒体流的传输带宽的调整方法的另一个实施例的应用场景图;
图3为对图1所示的本发明一种媒体流的传输带宽的调整方法的一个实施例的进一步细化的方法流程图;
图4为本发明一种媒体流的传输带宽的调整方法的又一个实施例的应用场景图;
图5为本发明一种媒体流的传输带宽的调整方法的再一个实施例的方法流程图;
图6为对图5所示的本发明一种媒体流的传输带宽的调整方法的再一个实施例的进一步细化的方法流程图;
图7为本发明一种媒体流发送端的一个实施例的结构示意图;
图8A-图8E为对图7所示的本发明一种媒体流发送端的一个实施例的进一步细化的结构示意图;
图9为本发明一种媒体流接收端的一个实施例的结构示意图;
图10为对图9所示的本发明一种媒体流接收端的一个实施例的进一步细化的结构示意图;
图11为本发明一种媒体流收发系统的实施例的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1为本发明一种媒体流的传输带宽的调整方法的一个实施例的方法流程图。如图1所示,该方法包括以下步骤:
步骤S101,媒体流发送端将至少两个媒体流的标识发送给媒体流接收端,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识。
本发明实施例中,媒体流发送端通过同一个传输端口例如UDP端口,向媒体流接收端发送多个媒体流,该媒体流发送端和媒体流接收端可以是会议终端、多点控制单元(Multipoint Control Unit,MCU)和浏览器等媒体通信中的各个端口。
采用标识对各个媒体流的内容进行描述,每个媒体流采用一个或多个基于该媒体流内容的标识进行描述。该基于媒体流内容的标识包括各媒体流的以下一个或多个特征:媒体捕获内容(Media Capture Content)、图像合成(Composed)、捕获内容的切换和/或规则、动态内容采集(Dynamic)、画面视角(Scene View)、角色(Role)、画面优先级(Scene Priority)、共享(Presentation)和语言(Language)。这些特征的含义具体如下表1所示。
表1基于媒体流内容的标识的各个特征的含义
媒体流发送端向媒体流接收端发送该标识,其发送方式包括:通过在实时传输协议(Real-time Transport Protocol,RTP)消息或者实时传输控制协议(RTPControl Protocol,RTCP)消息的包头中增加字段,携带该标识;或者,通过SDP消息、网真多流控制协议(Controlling Multiple Streams for Telepresence,CLUE)消息或多媒体通信控制协议H.245发送该标识。
步骤S102,所述媒体流发送端获取所述媒体流接收端对各媒体流的评分,所述各媒体流的评分是由所述媒体流接收端根据所述各媒体流的标识做出。
在本步骤中,媒体流发送端获取媒体流接收端对各媒体流的评分,各媒体流的评分是媒体流接收端根据接收到的各媒体流的标识做出的,而该标识是基于媒体流内容进行描述的,因此,该评分可以体现媒体流接收端对各媒体流内容的偏重、关注程度和策略等。
对于发送评分的时机可以有多种选择,媒体流接收端可以在收到媒体流发送端发送的标识后,立即进行评分,并将评分发送给媒体流发送端;也可以在检测到有拥塞或拥塞解除时,才发送评分。
媒体流发送端获取媒体流接收端发送的对各媒体流的评分,其发送方式包括:通过在实时传输协议(Real-time Transport Protocol,RTP)消息或者实时传输控制协议(RTP Control Protocol,RTCP)消息的包头中增加字段,携带该评分;或者,通过SDP消息、网真多流控制协议(Controlling Multiple Streams forTelepresence,CLUE)消息或多媒体通信控制协议H.245发送该评分。
步骤S103,当检测到拥塞发生或者拥塞解除时,根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整。
当检测到拥塞发生或拥塞解除时,根据一个或多个媒体流的评分对相应的一个或多个媒体流的传输带宽进行调整,例如将传输带宽减小或增加,由于各个媒体流可能具有不同的评分,因此,对相应的媒体流的传输带宽的调整会不同。
作为一个实施方式,当检测到拥塞发生或者拥塞解除时,按照所述至少一个媒体流的评分占总评分的比例,调节所述至少一个媒体流的传输带宽,其中,所述总评分是所述至少两个媒体流的评分之和。
作为另一个实施方式,当检测到拥塞发生时,对于评分高于设定阈值的媒体流,维持媒体流的传输带宽,从而保证媒体流接收端重视的媒体流可以传输通畅。其它媒体流则减小媒体流的传输带宽。
作为又一个实施方式,当检测到拥塞发生时,对于评分低于设定阈值的媒体流,切断媒体流的传输。这样,在拥塞发生时,根据媒体流接收端的基于媒体内容的选择,切断了一些关注度较低的媒体流,保证了其它媒体流的传输。
作为再一个实施方式,当检测到拥塞解除时,对于评分高于第三设定阈值的媒体流,等比例提高媒体流的传输带宽,维持其余的媒体流的传输带宽。这样,保证评分高的媒体流优先得到传输带宽资源。
作为再又一个实施方式,当检测到拥塞解除时,恢复媒体流的传输带宽到拥塞发生之前媒体流的传输带宽初始值。这种传输带宽调整方式简单,易操作。
根据本发明实施例提供的一种媒体流的传输带宽的调整方法,媒体流发送端通过获取媒体流接收端根据多个媒体流的标识对各媒体流做出的评分,其中,多个媒体流在同一传输端口传输,这些标识是基于各个媒体流内容进行描述的;当检测到拥塞发生或拥塞解除时,媒体流发送端根据这些评分对相应的媒体流进行传输带宽的调整,从而使得可以对在同一传输端口传输的多个媒体流基于媒体流内容进行媒体流的传输带宽的调整。
为便于更好地理解本发明以上实施例提供的技术方案,下面通过一个具体场景下的实施方式为例进行介绍。
请参见图2,为本发明一种媒体流的传输带宽的调整方法的另一个实施例的应用场景图。图2中,A、B分别代表媒体流发送端和媒体流接收端的UDP端口,其中,端口A向端口B发送多个媒体流。
作为一种实现方式,在媒体流发送之前,端口A基于每个媒体流的内容,为媒体流分配一个或多个标识,端口A可以在SDP消息中,携带这些标识发送给端口B。端口B根据一定的策略,利用这些标识的信息,对每个媒体流进行评分,然后,端口B仍然通过SDP消息将评分发送给端口A。当检测到拥塞发生或拥塞解除时,媒体流发送端可以根据评分对媒体流的传输带宽进行相应的调整。
举例说明,端口A在SDP消息中,将以下这些标识提供给端口B:
m=video 52886 RTP/AVP 31(会议室整体画面定义)
a=rtpmap:31 H261/9000(编解码格式)
a=view:2(room)(画面视角为整个会场)
a=priority:3(画面优先级)
a=dynamic:0(动态内容采集)
m=video 52886 RTP/AVP 32(会议室左1/3座位及与会者画面定义)
a=rtpmap:32 H261/9000
a=view:1(table)(画面视角为座位)
a=priority:4(画面优先级)
a=dynamic:0(动态内容采集)
m=video 52886RTP/AVP 33(会议室中间1/3座位及与会者画面定义)
a=rtpmap:33 H261/9000
a=view:1(table)(画面视角为座位)
a=priority:4(画面优先级)
a=dynamic:no0(动态内容采集)
m=video 52886 RTP/AVP 34(会议室右1/3座位及与会者画面定义)
a=rtpmap:34H261/9000
a=view:1(table)(画面视角为座位)
a=priority:4(画面优先级)
a=dynamic:0(动态内容采集)
m=video 52886 RTP/AVP 35(会议室演讲人动态画面定义)
a=rtpmap:35H261/9000
a=view:1(table)(画面视角为整个会场)
a=priority:2(画面优先级)
a=dynamic:1(动态内容采集)
m=video 53334 RTP/AVP 31(会议室共享内容1定义)
a=rtpmap:31 H261/9000
a=presentation:data(辅流视频通道1的画面视角定义)
a=priority:1(画面优先级)
m=video 53334 RTP/AVP 32(会议室共享内容2定义)
a=rtpmap:32H261/9000
a=presentation:video(辅流视频通道2的画面视角定义)
a=priority:5(画面优先级)
端口B收到SDP消息后,根据标识对相应媒体流进行评分。
例如,为每个标识的不同取值分配相应的数值(整数),该媒体流的评分则为所有数值之和。注意,这些整数可能为正数或者0。
或者,选取某些特定的标识,而并非所有标识。
例如,对于下述媒体流通过SDP描述:
m=video 52886 RTP/AVP 31(会议室整体画面定义)
a=rtpmap:31 H261/9000(编解码格式)
a=view:2(room)(画面视角为整个会场)
a=priority:3(画面优先级)
a=dynamic:0(动态内容采集)
m=video 52886 RTP/AVP 32(会议室左1/3座位及与会者画面定义)
a=rtpmap:32 H261/9000
a=view:1(table)(画面视角为座位)
a=priority:4(画面优先级)
a=dynamic:0(动态内容采集)
第一个媒体流其取值为:2+3+0=5
第二个媒体流其取值为:1+4+0=5
端口B将取值结果通过SDP消息中携带该评分,将评分发送给端口A。
下面举例说明,端口B在SDP中的媒体消息描述。其通过扩展参数a=ranking:N来携带评分信息,其中N为评分结果。
m=video 52886 RTP/AVP 31(会议室整体画面定义)
a=rtpmap:31 H261/9000(编解码格式)
a=view:2(room)(画面视角为整个会场)
a=priority:3(画面优先级)
a=dynamic:0(动态内容采集)
a=ranking:5(扩展的评分参数)
m=video 52886 RTP/AVP 32(会议室左1/3座位及与会者画面定义)
a=rtpmap:32 H261/9000
a=view:1(table)(画面视角为座位)
a=priority:4(画面优先级)
a=dynamic:0(动态内容采集)
a=ranking:5(扩展的评分参数)
m=video 52886 RTP/AVP 33(会议室中间1/3座位及与会者画面定义)
a=rtpmap:33 H261/9000
a=view:1(table)(画面视角为座位)
a=priority:4(画面优先级)
a=dynamic:0(动态内容采集)
a=ranking:5(扩展的评分参数)
m=video 52886 RTP/AVP 34(会议室右1/3座位及与会者画面定义)
a=rtpmap:34 H261/9000
a=view:1(table)(画面视角为座位)
a=priority:4(画面优先级)
a=dynamic:0(动态内容采集)
a=ranking:5(扩展的评分参数)
m=video 52886 RTP/AVP 35(会议室演讲人动态画面定义)
a=rtpmap:35 H261/9000
a=view:1(table)(画面视角为整个会场)
a=priority:2(画面优先级)
a=dynamic:1(动态内容采集)
a=ranking:4(扩展的评分参数)
m=video 53334 RTP/AVP 31(会议室共享内容1定义)
a=rtpmap:31 H261/9000
a=presentation:3(辅流视频通道1)
a=priority:1(画面优先级)
a=ranking:4(扩展的评分参数)
m=video 53334 RTP/AVP 32(会议室共享内容2定义)
a=rtpmap:32 H261/9000
a=presentation:3(辅流视频通道2)
a=priority:5(画面优先级)
a=ranking:8(扩展的评分参数)
也可以直接将媒体流接收端对各个标识的赋值在SDP应答消息中发送给媒体流发送端,媒体流发送端再采用对各个媒体流的各个标识的赋值之和作为对该媒体流的评分。
当发生拥塞或者拥塞解除时,媒体流发送端可以根据评分对媒体流传输带宽进行调整。
假设整个端口需要降低带宽2M,根据上面的例子:
1/5+1/5+1/5+1/5+1/4+1/4+1/8=1.425
则前四个媒体流(评分5)分别降速1/5/1.425*2=0.28M
后两个媒体流(评分4)分别降速1/4/1.425*2=0.35M
最后一个媒体流(评分8)降速1/8/1.425*2=0.18M
作为另一种实现方式,在媒体流已经开始传输之前或者之后,也可以通过CLUE消息携带上述标识。媒体流发送端在CLUE中的媒体消息描述为:
Advertisement:
Capture Scene 1:
Capture Scene Entry 1:VC1
Capture Scene Entry 2:VC2,VC3,VC4
Capture Scene Entry 3:VC5
Capture Scene 2:
Capture Scene Entry 4:VC6
Capture Scene Entry 5:VC7
VC1:priority=3(画面优先级),lang=ENG(语言),scene view=room(画面视角),Dynamic=1(动态内容采集),composed=0(图像合成),encodinggroup=1;
VC2:priority=4,lang=0,scene view=1(table),Dynamic=0,composed=0,encodinggroup=1;
VC3:priority=4,lang=0,scene view=1(table),Dynamic=0,composed=0,encodinggroup=1;
VC4:priority=4,lang=0,scene view=1(table),Dynamic=0,composed=0,encodinggroup=1;
VC5:priority=2,lang=0,scene view=1(table),Dynamic=1,composed=0,encodinggroup=1;
VC6:priority=1,lang=0,scene view=3(presentation),Dynamic=0,composed=0,encodinggroup=2;
VC7:priority=5,lang=0,scene view=3(presentation),Dynamic=0,composed=0,encodinggroup=2;
STS:{VC1,VC2,VC4,VC5,CS2;VC3,VC2,VC4,VC5,CS2}
注意:Capture Scene、encodinggroup、STS部分为CLUE消息的其他消息体,其它部分为标识内容。
端口B收到CLUE消息后,根据标识对相应媒体流进行评分。
例如,为每个标识的不同取值分配相应的数值(整数),该媒体流的评分则为所有数值之和。注意,这些整数可能为正数或者0。
或者,选取某些特定的标识,而并非所有标识。
例如:
对于下述媒体流描述:
VC1:priority=3,lang=0,scene view=room,Dynamic=1,composed=0,encodinggroup=1;
VC2:priority=4,lang=0,scene view=table,Dynamic=0,composed=0,encodinggroup=1;
可以保留其原有的取值,并将未赋值的标识值取相应的值,例如ENG取值为0,room取值为2,table取值为1,则VC1=3+0+2+1+0=6,VC2=4+0+1+0+0=5。
端口B将取值结果通过CLUE消息中携带评分,将评分发送给A。
假设端口B选择接收VC1,VC2,VC4,VC6和VC7,其评分值分别在每个媒体流编号后面携带。端口B在CLUE中的协商消息描述为:
Configure:
VC1=6(扩展的评分参数):Encode1
VC2=5(扩展的评分参数):Encode2
VC4=5(扩展的评分参数):Encode3
VC6=4(扩展的评分参数):Encode4;
VC7=8(扩展的评分参数):Encode5;
其中VC1的评分为6,VC2的评分为5,VC4的评分为5,VC6的评分为4,VC7的评分为8。
当发生拥塞或者拥塞解除时,媒体流发送端可以根据评分对媒体流的传输带宽进行调整。例如,整个端口需要降低带宽2M,根据上面的例子:
VC1+VC2+VC4+VC6+VC7=8/6+8/5+8/5+8/4+8/8=7.53
则VC1降速8/6/7.53*2=0.35M
VC2降速8/5/7.53*2=0.42M
VC4降速8/5/7.53*2=0.42M
VC6降速8/4/7.53*2=0.53M
VC7降速8/8/7.53*2=0.28M
作为又一种实现方式,可以通过多媒体通信控制协议H.245消息,向媒体流接收端发送各媒体流的标识或从媒体流接收端接收对各媒体流的评分。
根据本发明实施例提供的一种媒体流的传输带宽的调整方法,媒体流发送端通过获取媒体流接收端根据多个媒体流的标识对各媒体流做出的评分,其中,多个媒体流在同一传输端口传输,这些标识是基于各个媒体流内容进行描述的;当检测到拥塞发生或拥塞解除时,媒体流发送端根据这些评分对相应的媒体流进行传输带宽的调整,从而使得可以对在同一传输端口传输的多个媒体流基于媒体流内容进行媒体流的传输带宽的调整。
图3为对图1所示的本发明一种媒体流的传输带宽的调整方法的一个实施例的进一步细化的方法流程图。如图3所示,该方法包括以下步骤:
步骤S201,媒体流发送端将至少两个媒体流的标识发送给媒体流接收端,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识。
步骤S202,所述媒体流发送端获取所述媒体流接收端对各媒体流的评分,所述各媒体流的评分是由所述媒体流接收端根据所述各媒体流的标识做出。
步骤S201和步骤S202分别与上述实施例的步骤S101和步骤S102相同或类似,在此不再赘述。
步骤S203,当检测到拥塞发生或者拥塞解除时,按照所述至少一个媒体流的评分占总评分的比例,调节所述至少一个媒体流的传输带宽,其中,所述总评分是所述至少两个媒体流的评分之和。
对于传输带宽的调整,作为一个实施方式,在步骤S203中,首先计算各个媒体流的评分之和作为总评分,然后按照每个媒体流的评分占总评分的比例来调节相应的媒体流的传输带宽。
作为另一个实施方式或者说步骤S203的替代,当检测到拥塞发生时,对于评分高于设定阈值的媒体流,维持媒体流的传输带宽,从而保证媒体流接收端重视的媒体流可以传输通畅。其它媒体流则减小媒体流的传输带宽。
例如,媒体流1,评分8,占带宽2M,媒体流2,评分7,占带宽2M,媒体流3,评分4,占带宽1M,媒体流4,评分3,占带宽1M。若该端口需要减小带宽2M,则媒体流1不减小带宽,媒体流2、媒体流3、媒体流4分别减小2/3M;或者媒体流1、媒体流2不减小带宽,媒体流3、媒体流4分别减小1M。
作为又一个实施方式或者说步骤S203的替代,当检测到拥塞发生时,对于评分低于设定阈值的媒体流,切断媒体流的传输。这样,在拥塞发生时,根据媒体流接收端的基于媒体内容的选择,切断了一些关注度较低的媒体流,保证了其它媒体流的传输。
例如,媒体流1评分8占带宽2M,媒体流2评分7占带宽2M,媒体流3评分4占带宽1M,媒体流4评分3占带宽1M,若该端口需要降带宽2M,则切断媒体流3和媒体流4的传输,保证媒体流1和媒体流2带宽不改变;若该端口需要降带宽1M,则切断媒体流4的传输。
拥塞解除时的传输带宽的调整操作为拥塞发生时的逆操作。
作为再一个实施方式,当检测到拥塞解除时,对于评分高于第三设定阈值的媒体流,等比例提高媒体流的传输带宽,维持其余的媒体流的传输带宽。这样,保证评分高的媒体流优先得到传输带宽资源。
作为再又一个实施方式,当检测到拥塞解除时,恢复媒体流的传输带宽到拥塞发生之前媒体流的传输带宽初始值。这种传输带宽调整方式简单,易操作。
对于检测拥塞或拥塞解除的方式,可以有如下三种:
方式一,网络中的某一网元设备检测到拥塞或拥塞解除,并将其通知给媒体流接收端;
方式二,媒体流发送端检测到拥塞,并将其通知给媒体流接收端;
方式三,媒体流接收端检测到拥塞。
对于方式一和方式二,媒体流接收端只需要能解析网络或者媒体流发送端发送的消息,根据这个消息来发送评分。
对于方式三,媒体流接收端需要有拥塞检测能力,即可以主动探测到网络上发送拥塞,需要检测模块。
步骤S204,所述媒体流发送端获取所述媒体流接收端对所述至少两个媒体流的评分的更新,当检测到所述至少两个媒体流发生拥塞或者拥塞解除时,依据更新后的评分对所述至少一个媒体流进行传输带宽的调整。
可能因为某些因素,如媒体流接收端的兴趣改变等,媒体流接收端可以对这些媒体流重新定义评分规则,并重新进行评分,即为评分的动态更新过程。这个动态的更新过程,只需要依附于标识,即只要有初始的标识即可。因此,可由媒体流接收端控制发送评分的时机。
请参见图4,为本发明一种媒体流的传输带宽的调整方法的又一个实施例的应用场景图。图4中,C、D分别代表媒体流发送端和媒体流接收端的端口,其中,端口C为UDP端口,向端口D发送多个媒体流。如图4所示,端口D发送了两次更新的评分,分别为评分b和评分c,最后的评分为评分c。
判断哪个评分在先,那个评分在后的方法,可以是:
1.通过评分接收的先后顺序判断,在接收到新的评分之后,旧的评分可以直接抛弃;
2.通过评分的序列号来判断,序列号靠后的评分为最新的评分。评分的序列号可以使用承载其消息的序列号,即SDP或CLUE或H.245的序列号,也可以为其重新分配一个序列号(这种情况下,在更新评分时,需要对评分的序列号一并进行更新)。
根据本发明实施例提供的一种媒体流的传输带宽的调整方法,媒体流发送端通过获取媒体流接收端根据多个媒体流的标识对各媒体流做出的评分,并获取评分的更新,其中,多个媒体流在同一传输端口传输,这些标识是基于各个媒体流内容进行描述的;当检测到拥塞发生或拥塞解除时,媒体流发送端根据这些评分对相应的媒体流进行传输带宽的调整,从而使得可以对在同一传输端口传输的多个媒体流基于媒体流内容进行媒体流的传输带宽的调整。
图5为本发明一种媒体流的传输带宽的调整方法的再一个实施例的方法流程图。如图5所示,该方法包括以下步骤:
步骤S301,媒体流接收端接收媒体流发送端发送的至少两个媒体流的标识,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识。
本发明实施例中,媒体流接收端接收到接收媒体流发送端发送的多个媒体流,该媒体流发送端和媒体流接收端可以是会议终端、多点控制单元(MultipointControl Unit,MCU)和浏览器等媒体通信中的各个端口。
媒体流发送端采用标识对各个媒体流的内容进行描述,每个媒体流采用一个或多个基于该媒体流内容的标识进行描述。该基于媒体流内容的标识包括各媒体流的以下一个或多个特征:媒体捕获内容(Media Capture Content)、图像合成(Composed)、捕获内容的切换和/或规则、动态内容采集(Dynamic)、画面视角(Scene View)、角色(Role)、画面优先级(Scene Priority)、共享(Presentation)和语言(Language)。本实施例中的标识与前述实施例中标识的定义相同,在此不再赘述。
步骤S302,所述媒体流接收端根据所述各媒体流的标识对所述各媒体流做出评分。
媒体流接收端根据接收到的各媒体流的标识对各媒体流做出评分,而该标识是基于媒体流内容进行描述的,因此,该评分可以体现媒体流接收端对各媒体流内容的偏重、关注程度和策略等。
步骤S303,所述媒体流接收端将所述各媒体流的评分发送给所述媒体流发送端,使得当检测到拥塞发生或者拥塞解除时,所述媒体流发送端根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整。
媒体流接收端将各媒体流的评分发送给媒体流发送端,使得当检测到拥塞发生或者拥塞解除时,媒体流发送端可以根据至少一个媒体流的评分对该媒体流进行传输带宽的调整,从而使得可以对在同一传输端口传输的多个媒体流基于媒体流内容进行媒体流的传输带宽的调整。
对于发送评分的时机可以有多种选择,媒体流接收端可以在收到媒体流发送端发送的标识后,立即进行评分,并将评分发送给媒体流发送端;也可以在检测到有拥塞或拥塞解除时,才发送评分。
媒体流接收端发送的对各媒体流的评分,其发送方式包括:通过在实时传输协议(Real-time Transport Protocol,RTP)消息或者实时传输控制协议(RTPControl Protocol,RTCP)消息的包头中增加字段,携带该评分;或者,通过SDP消息、网真多流控制协议(Controlling Multiple Streams for Telepresence,CLUE)消息或多媒体通信控制协议H.245发送该评分。
根据本发明实施例提供的一种媒体流的传输带宽的调整方法,媒体流接收端根据媒体流发送端发送的多个媒体流的标识,对各媒体流做出的评分并发送给媒体流发送端,使得当检测到拥塞发生或拥塞解除时,媒体流发送端根据这些评分对相应的媒体流进行传输带宽的调整,从而使得可以对在同一传输端口传输的多个媒体流基于媒体流内容进行媒体流的传输带宽的调整,其中,多个媒体流在同一传输端口传输,这些标识是基于各个媒体流内容进行描述的。
图6为对图5所示的本发明一种媒体流的传输带宽的调整方法的再一个实施例的进一步细化的方法流程图。如图6所示,该方法包括以下步骤:
步骤S401,媒体流接收端接收媒体流发送端发送的至少两个媒体流的标识,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识。
本步骤与前述实施例的步骤S301相同或类似,在此不再赘述。
步骤S402,所述媒体流接收端选取所述各媒体流的全部或部分标识,对所述选取的标识进行赋值。
步骤S403,为所述选取的标识分配相应的加权值。
步骤S404,根据所述选取的标识的加权值对相应标识的赋值进行加权,将加权后的值作为所述选取的标识的加权赋值。
步骤S405,所述媒体流接收端针对所述每个媒体流,将对所述选取的标识的加权赋值的和作为对所述各媒体流的评分。
步骤S402至步骤S405为媒体流接收到根据各媒体流的标识对各媒体流做出评分,该评分方式为采用加权方式进行评分。
对于评分的方式,有多种选择,可以是如下的几种或者其组合:
1、选取其中部分标识,并赋值,其他的抛弃;
例如,仅选择画面优先级和画面内容,而抛弃其他的参数不做考虑。
2、选取一个标识(如画面优先级、画面内容等),将其直接作为评分;
3、为不同的标识分配不同的权值,分别加权之后算出评分。
例如,为画面优先级分配权值为1,为其他标识分配大于1(例如3)的权值,这样其他因素对权值的影响力加大,媒体流发送端对评分的影响力减弱。用户可以更主观的选择自己想看的内容。
举例来说,在视频会议中,音频流比视频流更需要保证质量,故媒体流接收端可以将音频流加权取一个高于所有视频的权值,来保证音频流的带宽。
活动视频相对于一般视频更受关注,比如按照发言者来切换视频的情况下,用户更关心这种画面。因此,这种情况下,媒体流接收端可以选取动态内容采集标识直接作为评分值,或者将其设置一个较大的权值,作为主要参考依据。
在网真会议中,中屏往往是较重要人物,媒体流接收端可以通过将画面内容标识设置为更高的权值来进行考虑。
另外,这些标识不仅仅只是上述所列的。还可以包括其他任何媒体流发送端想通知给媒体流接收端的信息。
4、媒体流接收端可以根据需要为特定的媒体流增加一定的分数。(当某视频流有特别关注的信息时,可以对该视频流进行特殊处理)
综上所述,媒体流发送端将自己的媒体内容通过预估的标识发送给媒体流接收端,媒体流接收端再根据这些内容基于自己的策略进行修改,从而获得最终的评分值。
步骤S406,所述媒体流接收端将所述各媒体流的评分发送给所述媒体流发送端,使得当检测到拥塞发生或者拥塞解除时,所述媒体流发送端根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整。
本步骤与前述实施例的步骤S303相同或类似,在此不再赘述。
根据本发明实施例提供的一种媒体流的传输带宽的调整方法,媒体流接收端根据媒体流发送端发送的多个媒体流的标识,对各媒体流做出的评分并发送给媒体流发送端,使得当检测到拥塞发生或拥塞解除时,媒体流发送端根据这些评分对相应的媒体流进行传输带宽的调整,从而使得可以对在同一传输端口传输的多个媒体流基于媒体流内容进行媒体流的传输带宽的调整,其中,多个媒体流在同一传输端口传输,这些标识是基于各个媒体流内容进行描述的。
图7为本发明一种媒体流发送端的一个实施例的结构示意图。如图7所示,该媒体流发送端1000包括:
第一发送单元101,用于将至少两个媒体流的标识发送给媒体流接收端,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识。
本发明实施例中,媒体流发送端通过同一个传输端口例如UDP端口,向媒体流接收端发送多个媒体流,该媒体流发送端和媒体流接收端可以是会议终端、多点控制单元(Multipoint Control Unit,MCU)和浏览器等媒体通信中的各个端口。
采用标识对各个媒体流的内容进行描述,每个媒体流采用一个或多个基于该媒体流内容的标识进行描述。该基于媒体流内容的标识包括各媒体流的以下一个或多个特征:媒体捕获内容(Media Capture Content)、图像合成(Composed)、捕获内容的规则选择、动态内容采集(Dynamic)、画面视角(Scene View)、角色(Role)、画面优先级(Scene Priority)、共享(Presentation)和语言(Language)。这些标识的具体含义与前述实施例中相同,在此不再赘述。
第一发送单元101向媒体流接收端发送该标识,其发送方式包括:通过在实时传输协议(Real-time Transport Protocol,RTP)消息或者实时传输控制协议(RTP Control Protocol,RTCP)消息的包头中增加字段,携带该标识;或者,通过SDP消息、网真多流控制协议(Controlling Multiple Streams for Telepresence,CLUE)消息或多媒体通信控制协议H.245发送该标识。
第一接收单元102,用于获取所述媒体流接收端对各媒体流的评分,所述各媒体流的评分是由所述媒体流接收端根据所述各媒体流的标识做出。
第一接收单元102获取媒体流接收端对各媒体流的评分,各媒体流的评分是媒体流接收端根据接收到的各媒体流的标识做出的,而该标识是基于媒体流内容进行描述的,因此,该评分可以体现媒体流接收端对各媒体流内容的偏重、关注程度和策略等。
对于发送评分的时机可以有多种选择,媒体流接收端可以在收到媒体流发送端发送的标识后,立即进行评分,并将评分发送给媒体流发送端;也可以在检测到有拥塞或拥塞解除时,才发送评分。
媒体流发送端获取媒体流接收端发送的对各媒体流的评分,其发送方式包括:通过在实时传输协议(Real-time Transport Protocol,RTP)消息或者实时传输控制协议(RTP Control Protocol,RTCP)消息的包头中增加字段,携带该评分;或者,通过SDP消息、网真多流控制协议(Controlling Multiple Streams forTelepresence,CLUE)消息或多媒体通信控制协议H.245发送该评分。
调整单元103,用于当检测到拥塞发生或者拥塞解除时,根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整。
当检测到拥塞发生或拥塞解除时,根据一个或多个媒体流的评分对相应的一个或多个媒体流的传输带宽进行调整,例如将传输带宽减小或增加,由于各个媒体流可能具有不同的评分,因此,对相应的媒体流的传输带宽的调整会不同。
根据本发明实施例提供的一种媒体流发送端,其通过获取媒体流接收端根据多个媒体流的标识对各媒体流做出的评分,其中,多个媒体流在同一传输端口传输,这些标识是基于各个媒体流内容进行描述的;当检测到拥塞发生或拥塞解除时,媒体流发送端根据这些评分对相应的媒体流进行传输带宽的调整,从而使得可以对在同一传输端口传输的多个媒体流基于媒体流内容进行媒体流的传输带宽的调整。
图8A-图8E为对图7所示的本发明一种媒体流发送端的一个实施例的进一步细化的结构示意图。
如图8A所示,该媒体流发送端2000包括:
第一发送单元201,用于将至少两个媒体流的标识发送给媒体流接收端,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识。
第一接收单元202,用于获取所述媒体流接收端对各媒体流的评分,所述各媒体流的评分是由所述媒体流接收端根据所述各媒体流的标识做出。
第一发送单元201和第一接收单元202的功能分别与上述实施例的第一发送单元101和第一接收单元102的功能相同或类似,在此不再赘述。
调整单元203,用于当检测到拥塞发生或者拥塞解除时,根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整。
作为一个实施方式,调整单元203包括第一调节单元2031。
第一调节单元2031,用于当检测到拥塞发生或者拥塞解除时,按照所述至少一个媒体流的评分占总评分的比例,调节所述至少一个媒体流的传输带宽,其中,所述总评分是所述至少两个媒体流的评分之和。
对于传输带宽的调整,首先计算各个媒体流的评分之和作为总评分,然后按照每个媒体流的评分占总评分的比例来调节相应的媒体流的传输带宽。
作为另一个实施方式,如图8B所示,调整单元203还可以包括维持单元2032,该维持单元用于当检测到拥塞发生时,对于评分高于设定阈值的媒体流,维持媒体流的传输带宽,从而保证媒体流接收端重视的媒体流可以传输通畅。其它媒体流则减小媒体流的传输带宽。
例如,媒体流1,评分8,占带宽2M,媒体流2,评分7,占带宽2M,媒体流3,评分4,占带宽1M,媒体流4,评分3,占带宽1M。若该端口需要减小带宽2M,则媒体流1不减小带宽,媒体流2、媒体流3、媒体流4分别减小2/3M;或者媒体流1、媒体流2不减小带宽,媒体流3、媒体流4分别减小1M。
作为又一个实施方式,如图8C所示,调整单元203还可以包括切断单元2033,该切断单元用于当检测到拥塞发生时,对于评分低于设定阈值的媒体流,切断媒体流的传输。这样,在拥塞发生时,根据媒体流接收端的基于媒体内容的选择,切断了一些关注度较低的媒体流,保证了其它媒体流的传输。
例如,媒体流1评分8占带宽2M,媒体流2评分7占带宽2M,媒体流3评分4占带宽1M,媒体流4评分3占带宽1M,若该端口需要降带宽2M,则切断媒体流3和媒体流4的传输,保证媒体流1和媒体流2带宽不改变;若该端口需要降带宽1M,则切断媒体流4的传输。
拥塞解除时的传输带宽的调整操作为拥塞发生时的逆操作。
作为再一个实施方式,如图8D所示,调整单元203还可以包括第二调节单元2034,该第二调节单元用于当检测到拥塞解除时,对于评分高于第三设定阈值的媒体流,等比例提高媒体流的传输带宽,维持其余的媒体流的传输带宽。这样,保证评分高的媒体流优先得到传输带宽资源。
作为再又一个实施方式,如图8E所示,调整单元203还可以包括恢复单元2035,该恢复单元用于当检测到拥塞解除时,恢复媒体流的传输带宽到拥塞发生之前媒体流的传输带宽初始值。这种传输带宽调整方式简单,易操作。
需要说明的是,调整单元203可以是上述图8A-8E所示的第一调节单元2031、维持单元2032、切断单元2033、第二调节单元2034或恢复单元2035中的任意一个,也可以是它们的组合。
对于检测拥塞或拥塞解除的方式,可以有如下三种:
方式一,网络中的某一网元设备检测到拥塞或拥塞解除,并将其通知给媒体流接收端;
方式二,媒体流发送端检测到拥塞,并将其通知给媒体流接收端;
方式三,媒体流接收端检测到拥塞。
对于方式一和方式二,媒体流接收端只需要能解析网络或者媒体流发送端发送的消息,根据这个消息来发送评分。
对于方式三,媒体流接收端需要有拥塞检测能力,即可以主动探测到网络上发送拥塞,需要检测模块。
更新单元204,用于获取所述媒体流接收端对所述至少两个媒体流的评分的更新,当检测到所述至少两个媒体流发生拥塞或者拥塞解除时,依据更新后的评分对所述至少两个媒体流进行传输带宽的调整。
可能因为某些因素,如媒体流接收端的兴趣改变等,媒体流接收端可以对这些媒体流重新定义评分规则,并重新进行评分,即为评分的动态更新过程。这个动态的更新过程,只需要依附于标识,即只要有初始的标识即可。因此,可由媒体流接收端控制发送评分的时机。
请参见图4,为本发明一种媒体流的传输带宽的调整方法的又一个实施例的应用场景图。图4中,C、D分别代表媒体流发送端和媒体流接收端的端口,其中,端口C为UDP端口,向端口D发送多个媒体流。如图4所示,端口D发送了两次更新的评分,分别为评分b和评分c,最后的评分为评分c。
判断哪个评分在先,那个评分在后的方法,可以是:
1.通过评分接收的先后顺序判断,在接收到新的评分之后,旧的评分可以直接抛弃;
2.通过评分的序列号来判断,序列号靠后的评分为最新的评分。评分的序列号可以使用承载其消息的序列号,即SDP或CLUE或H.245的序列号,也可以为其重新分配一个序列号(这种情况下,在更新评分时,需要对评分的序列号一并进行更新)。
根据本发明实施例提供的一种媒体流发送端,该媒体流发送端通过获取媒体流接收端根据多个媒体流的标识对各媒体流做出的评分,并获取评分的更新,其中,多个媒体流在同一传输端口传输,这些标识是基于各个媒体流内容进行描述的;当检测到拥塞发生或拥塞解除时,媒体流发送端根据这些评分对相应的媒体流进行传输带宽的调整,从而使得可以对在同一传输端口传输的多个媒体流基于媒体流内容进行媒体流的传输带宽的调整。
图9为本发明一种媒体流接收端的一个实施例的结构示意图。如图9所示,该媒体流接收端3000包括:
第二接收单元301,用于接收媒体流发送端发送的至少两个媒体流的标识,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识。
本发明实施例中,第二接收单元301接收到接收媒体流发送端发送的多个媒体流,该媒体流发送端和媒体流接收端可以是会议终端、多点控制单元(Multipoint Control Unit,MCU)和浏览器等媒体通信中的各个端口。
媒体流发送端采用标识对各个媒体流的内容进行描述,每个媒体流采用一个或多个基于该媒体流内容的标识进行描述。该基于媒体流内容的标识包括各媒体流的以下一个或多个特征:媒体捕获内容(Media Capture Content)、图像合成(Composed)、捕获内容的规则选择、动态内容采集(Dynamic)、画面视角(SceneView)、角色(Role)、画面优先级(Scene Priority)、共享(Presentation)和语言(Language)。本实施例中的标识与前述实施例中标识的含义相同,在此不再赘述。
评分单元302,用于根据所述各媒体流的标识对所述各媒体流做出评分。
评分单元302根据接收到的各媒体流的标识对各媒体流做出评分,而该标识是基于媒体流内容进行描述的,因此,该评分可以体现媒体流接收端对各媒体流内容的偏重、关注程度和策略等。
第二发送单元303,用于将所述各媒体流的评分发送给所述媒体流发送端,使得当检测到拥塞发生或者拥塞解除时,所述媒体流发送端根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整。
第二发送单元303将各媒体流的评分发送给媒体流发送端,使得当检测到拥塞发生或者拥塞解除时,媒体流发送端可以根据至少一个媒体流的评分对该媒体流进行传输带宽的调整,从而使得可以对在同一传输端口传输的多个媒体流基于媒体流内容进行媒体流的传输带宽的调整。
对于发送评分的时机可以有多种选择,媒体流接收端可以在收到媒体流发送端发送的标识后,立即进行评分,并将评分发送给媒体流发送端;也可以在检测到有拥塞或拥塞解除时,才发送评分。
媒体流接收端发送对各媒体流的评分,其发送方式包括:通过在实时传输协议(Real-time Transport Protocol,RTP)消息或者实时传输控制协议(RTP ControlProtocol,RTCP)消息的包头中增加字段,携带该评分;或者,通过SDP消息、网真多流控制协议(Controlling Multiple Streams for Telepresence,CLUE)消息或多媒体通信控制协议H.245发送该评分。
根据本发明实施例提供的一种媒体流接收端,该媒体流接收端根据媒体流发送端发送的多个媒体流的标识,对各媒体流做出的评分并发送给媒体流发送端,使得当检测到拥塞发生或拥塞解除时,媒体流发送端根据这些评分对相应的媒体流进行传输带宽的调整,从而使得可以对在同一传输端口传输的多个媒体流基于媒体流内容进行媒体流的传输带宽的调整,其中,多个媒体流在同一传输端口传输,这些标识是基于各个媒体流内容进行描述的。
图10为对图9所示的本发明一种媒体流接收端的一个实施例的进一步细化的结构示意图。如图10所示,该媒体流接收端4000包括:
第二接收单元401,用于接收媒体流发送端发送的至少两个媒体流的标识,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识。
本第二接收单元401的功能与前述实施例的第二接收单元301的功能相同或类似,在此不再赘述。
评分单元402,用于根据所述各媒体流的标识对所述各媒体流做出评分。
作为一种实施方式,该评分单元402可包括赋值单元4021、分配单元4022、加权单元4023和评分获取单元4024。
赋值单元4021,用于选取所述各媒体流的全部或部分标识,对所述选取的标识进行赋值。
分配单元4022,用于为所述选取的标识分配相应的加权值。
加权单元4023,用于根据所述选取的标识的加权值对相应的标识的赋值进行加权,将加权后的值作为所述选取的标识的加权赋值。
评分获取单元4024,用于针对所述每个媒体流,将对所述选取的标识的加权赋值的和作为对所述各媒体流的评分。
上述实施方式中的该评分单元401为根据各媒体流的标识对各媒体流做出评分,该评分方式为采用加权方式进行评分。
作为另一种实施方式,赋值单元还可以用于选取所述各媒体流的全部或部分标识,对所述选取的标识进行赋值,或将所述媒体流发送端对所述选取的标识的初始赋值作为对所述选取的标识的赋值。相应地,评分获取单元还可以用于针对所述每个媒体流,将对所述选取的标识的所述赋值的和作为对所述各媒体流的评分。
对于评分的方式,有多种选择,可以是如下的几种或者其组合:
1、选取其中部分标识,并赋值,其他的抛弃;
例如,仅选择画面优先级和画面内容,而抛弃其他的参数不做考虑。
2、选取一个标识(如画面优先级、画面内容等),将其直接作为评分;
3、为不同的标识分配不同的权值,分别加权之后算出评分。
例如,为画面优先级分配权值为1,为其他标识分配大于1(例如3)的权值,这样其他因素对权值的影响力加大,媒体流发送端对评分的影响力减弱。用户可以更主观的选择自己想看的内容。
举例来说,在视频会议中,音频流比视频流更需要保证质量,故媒体流接收端可以将音频流加权取一个高于所有视频的权值,来保证音频流的带宽。
活动视频相对于一般视频更受关注,比如按照发言者来切换视频的情况下,用户更关心这种画面。因此,这种情况下,媒体流接收端可以选取动态内容采集标识直接作为评分值,或者将其设置一个较大的权值,作为主要参考依据。
在网真会议中,中屏往往是较重要人物,媒体流接收端可以通过将画面内容标识设置为更高的权值来进行考虑。
另外,这些标识不仅仅只是上述所列的。还可以包括其他任何媒体流发送端想通知给媒体流接收端的信息。
4、媒体流接收端可以根据需要为特定的媒体流增加一定的分数。(当某视频流有特别关注的信息时,可以对该视频流进行特殊处理)
综上所述,媒体流发送端将自己媒体内容通过预估的标识发送给媒体流接收端,媒体流接收端再根据这些内容基于自己的策略进行修改,从而获得最终的评分值。
第二发送单元403,用于将所述各媒体流的评分发送给所述媒体流发送端,使得当检测到拥塞发生或者拥塞解除时,所述媒体流发送端根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整。
该第二发送单元403的功能与前述实施例的第二发送单元303的功能相同或类似,在此不再赘述。
根据本发明实施例提供的一种媒体流接收端,该媒体流接收端根据媒体流发送端发送的多个媒体流的标识,对各媒体流做出的评分并发送给媒体流发送端,使得当检测到拥塞发生或拥塞解除时,媒体流发送端根据这些评分对相应的媒体流进行传输带宽的调整,从而使得可以对在同一传输端口传输的多个媒体流基于媒体流内容进行媒体流的传输带宽的调整,其中,多个媒体流在同一传输端口传输,这些标识是基于各个媒体流内容进行描述的。
本发明实施例还提供一种媒体流收发系统。图11为本发明一种媒体流收发系统的实施例的结构示意图。如图11所示,该媒体流收发系统5000包括前述实施例中的媒体流发送端、媒体流接收端和传输网络,该媒体流发送端和媒体流接收端通过该传输网络交互信息。
根据本发明实施例提供的一种媒体流收发系统,媒体流发送端通过获取媒体流接收端根据多个媒体流的标识对各媒体流做出的评分,其中,多个媒体流在同一传输端口传输,这些标识是基于各个媒体流内容进行描述的;当检测到拥塞发生或拥塞解除时,媒体流发送端根据这些评分对相应的媒体流进行传输带宽的调整,从而使得可以对在同一传输端口传输的多个媒体流基于媒体流内容进行媒体流的传输带宽的调整。
以上所揭露的仅为本发明较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。
Claims (17)
1.一种媒体流的传输带宽的调整方法,其特征在于,包括:
媒体流发送端将至少两个媒体流的标识发送给媒体流接收端,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识;
所述媒体流发送端获取所述媒体流接收端对各媒体流的评分,所述各媒体流的评分是由所述媒体流接收端根据所述各媒体流的标识做出;
当检测到拥塞发生或者拥塞解除时,根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整。
2.如权利要求1所述的方法,其特征在于,所述基于媒体流内容的标识包括各媒体流如下至少一种特征:媒体捕获内容(Media Capture Content)、图像合成(Composed)、捕获内容的切换和/或规则、动态内容采集(Dynamic)、画面视角(Scene View)、角色(Role)、画面优先级(Scene Priority)、共享(Presentation)和语言(Language)。
3.如权利要求1或2所述的方法,其特征在于,通过如下方式进行所述至少两个媒体流的标识,以及所述对各媒体流的评分的发送:
在实时传输协议RTP消息或实时传输控制协议RTCP消息的包头中增加字段,携带所述各媒体流的标识或所述对各媒体流的评分;或
通过会话描述协议SDP消息、网真多流控制协议CLUE消息或多媒体通信控制协议H.245消息,向所述媒体流接收端发送所述各媒体流的标识或从所述媒体流接收端接收所述对各媒体流的评分。
4.如权利要求1-3任意一项所述的方法,其特征在于,所述当检测到拥塞发生或者拥塞解除时,根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整,包括:
当检测到拥塞发生或者拥塞解除时,按照所述至少一个媒体流的评分占总评分的比例,调节所述至少一个媒体流的传输带宽,其中,所述总评分是所述至少两个媒体流的评分之和;或
当检测到所述拥塞发生时,对于评分高于第一设定阈值的媒体流,维持所述媒体流的传输带宽;或
当检测到所述拥塞发生时,对于评分低于第二设定阈值的媒体流,切断所述媒体流的传输;或
当检测到所述拥塞解除时,对于评分高于第三设定阈值的媒体流,等比例提高所述媒体流的传输带宽,维持所述至少两个媒体流中其余的媒体流的传输带宽;或
当检测到所述拥塞解除时,恢复所述至少一个媒体流的传输带宽到拥塞发生之前所述至少一个媒体流的传输带宽初始值。
5.如权利要求1-4任意一项所述的方法,其特征在于,还包括:
所述媒体流发送端获取所述媒体流接收端对所述至少两个媒体流的评分的更新,当检测到所述至少两个媒体流发生拥塞或者拥塞解除时,依据更新后的评分对所述至少一个媒体流进行传输带宽的调整。
6.一种媒体流的传输带宽的调整方法,其特征在于,包括:
媒体流接收端接收媒体流发送端发送的至少两个媒体流的标识,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识;
所述媒体流接收端根据所述各媒体流的标识对所述各媒体流做出评分;
所述媒体流接收端将所述各媒体流的评分发送给所述媒体流发送端,使得当检测到拥塞发生或者拥塞解除时,所述媒体流发送端根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整。
7.如权利要求6所述的方法,其特征在于,所述媒体流接收端根据所述各媒体流的标识对所述各媒体流做出评分,包括:
所述媒体流接收端选取所述各媒体流的全部或部分标识,对所述选取的标识进行赋值,或将所述媒体流发送端对所述选取的标识的初始赋值作为对所述选取的标识的赋值;
所述媒体流接收端针对所述每个媒体流,将对所述选取的标识的所述赋值的和作为对所述各媒体流的评分。
8.如权利要求7所述的方法,其特征在于,所述对所述选取的标识进行赋值之后,进一步包括:
为所述选取的标识分配相应的加权值;
根据所述选取的标识的加权值对相应标识的赋值进行加权,将加权后的值作为所述选取的标识的加权赋值;
所述媒体流接收端针对所述每个媒体流,将对所述选取的标识的所述赋值的和作为对所述各媒体流的评分,具体为:
所述媒体流接收端针对所述每个媒体流,将对所述选取的标识的加权赋值的和作为对所述各媒体流的评分。
9.一种媒体流发送端,其特征在于,包括:
第一发送单元,用于将至少两个媒体流的标识发送给媒体流接收端,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识;
第一接收单元,用于获取所述媒体流接收端对各媒体流的评分,所述各媒体流的评分是由所述媒体流接收端根据所述各媒体流的标识做出;
调整单元,用于当检测到拥塞发生或者拥塞解除时,根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整。
10.如权利要求9所述的媒体流发送端,其特征在于,所述基于媒体流内容的标识包括各媒体流如下至少一种特征:媒体捕获内容(Media CaptureContent)、图像合成(Composed)、捕获内容的切换和/或规则、动态内容采集(Dynamic)、画面视角(Scene View)、角色(Role)、画面优先级(Scene Priority)、共享(Presentation)和语言(Language)。
11.如权利要求9或10所述的媒体流发送端,其特征在于,通过如下方式进行所述至少两个媒体流的标识,以及所述对各媒体流的评分的发送:
在实时传输协议RTP消息或实时传输控制协议RTCP消息的包头中增加字段,携带所述各媒体流的标识或所述对各媒体流的评分;或
通过会话描述协议SDP消息、网真多流控制协议CLUE消息或多媒体通信控制协议H.245消息,向所述媒体流接收端发送所述各媒体流的标识或从所述媒体流接收端接收所述对各媒体流的评分。
12.如权利要求9-11任意一项所述的媒体流发送端,其特征在于,所述调整单元包括:
第一调节单元,用于当检测到拥塞发生或者拥塞解除时,按照所述至少一个媒体流的评分占总评分的比例,调节所述至少一个媒体流的传输带宽,其中,所述总评分是所述至少两个媒体流的评分之和;或
维持单元,用于当检测到所述拥塞发生时,对于评分高于第一设定阈值的媒体流,维持所述媒体流的传输带宽;或
切断单元,用于当检测到所述拥塞发生时,对于评分低于第二设定阈值的媒体流,切断所述媒体流的传输;或
第二调节单元,用于当检测到所述拥塞解除时,对于评分高于第三设定阈值的媒体流,等比例提高所述媒体流的传输带宽,维持所述至少两个媒体流中其余的媒体流的传输带宽;或
恢复单元,用于当检测到所述拥塞解除时,恢复所述至少一个媒体流的传输带宽到拥塞发生之前所述至少一个媒体流的传输带宽初始值。
13.如权利要求9-12任意一项所述的媒体流发送端,其特征在于,还包括:
更新单元,用于获取所述媒体流接收端对所述至少两个媒体流的评分的更新;
所述调整单元还用于当检测到所述至少两个媒体流发生拥塞或者拥塞解除时,依据更新后的评分对所述至少一个媒体流进行传输带宽的调整。
14.一种媒体流接收端,其特征在于,包括:
第二接收单元,用于接收媒体流发送端发送的至少两个媒体流的标识,其中,所述至少两个媒体流在同一传输端口进行传输,所述至少两个媒体流的标识为所述至少两个媒体流中各媒体流的基于媒体流内容进行描述的标识;
评分单元,用于根据所述各媒体流的标识对所述各媒体流做出评分;
第二发送单元,用于将所述各媒体流的评分发送给所述媒体流发送端,使得当检测到拥塞发生或者拥塞解除时,所述媒体流发送端根据至少一个媒体流的评分对所述至少一个媒体流进行传输带宽的调整。
15.如权利要求14所述的媒体流接收端,其特征在于,所述评分单元包括:
赋值单元,用于选取所述各媒体流的全部或部分标识,对所述选取的标识进行赋值,或将所述媒体流发送端对所述选取的标识的初始赋值作为对所述选取的标识的赋值;
评分获取单元,用于针对所述每个媒体流,将对所述选取的标识的所述赋值的和作为对所述各媒体流的评分。
16.如权利要求15所述的媒体流接收端,其特征在于,所述评分单元还包括:
分配单元,用于为所述选取的标识分配相应的加权值;
加权单元,用于根据所述选取的标识的加权值对相应标识的赋值进行加权,将加权后的值作为所述选取的标识的加权赋值;
所述评分获取单元还用于针对所述每个媒体流,将对所述选取的标识的加权赋值的和作为对所述各媒体流的评分。
17.一种媒体流收发系统,其特征在于,包括权利要求9-13所述的媒体流发送端、权利要求14-16所述的媒体流接收端和传输网络,所述媒体流发送端和所述媒体流接收端通过所述传输网络交互信息。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310131471.1A CN104113766B (zh) | 2013-04-16 | 2013-04-16 | 一种媒体流的传输带宽的调整方法及相关装置 |
PCT/CN2013/085363 WO2014169599A1 (zh) | 2013-04-16 | 2013-10-17 | 一种媒体流的传输带宽的调整方法及相关装置 |
EP13882078.2A EP2966816B1 (en) | 2013-04-16 | 2013-10-17 | Method and related device for adjusting transmission bandwidth of media stream |
US14/880,591 US10050882B2 (en) | 2013-04-16 | 2015-10-12 | Method for adjusting media stream transmission bandwidth and related apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310131471.1A CN104113766B (zh) | 2013-04-16 | 2013-04-16 | 一种媒体流的传输带宽的调整方法及相关装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104113766A true CN104113766A (zh) | 2014-10-22 |
CN104113766B CN104113766B (zh) | 2018-01-02 |
Family
ID=51710380
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310131471.1A Active CN104113766B (zh) | 2013-04-16 | 2013-04-16 | 一种媒体流的传输带宽的调整方法及相关装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10050882B2 (zh) |
EP (1) | EP2966816B1 (zh) |
CN (1) | CN104113766B (zh) |
WO (1) | WO2014169599A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106302377A (zh) * | 2015-06-29 | 2017-01-04 | 华为技术有限公司 | 媒体会话处理方法方法和相关设备及通信系统 |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9386275B2 (en) * | 2014-01-06 | 2016-07-05 | Intel IP Corporation | Interactive video conferencing |
US10104704B2 (en) * | 2014-02-07 | 2018-10-16 | Cisco Technology, Inc. | Dynamic acceleration of prioritized mobile application traffic |
US9516220B2 (en) | 2014-10-02 | 2016-12-06 | Intel Corporation | Interactive video conferencing |
US10021346B2 (en) | 2014-12-05 | 2018-07-10 | Intel IP Corporation | Interactive video conferencing |
US9813299B2 (en) * | 2016-02-24 | 2017-11-07 | Ciena Corporation | Systems and methods for bandwidth management in software defined networking controlled multi-layer networks |
US10108345B2 (en) * | 2016-11-02 | 2018-10-23 | Samsung Electronics Co., Ltd. | Victim stream selection algorithms in the multi-stream scheme |
KR102025426B1 (ko) * | 2018-05-11 | 2019-09-25 | 한국전자통신연구원 | Sdn 기반의 통신 노드에서의 트래픽 과적에 따른 서비스 품질 저하를 해소하기 위한 대역폭 제어 방법 및 장치 |
US11013340B2 (en) | 2018-05-23 | 2021-05-25 | L&P Property Management Company | Pocketed spring assembly having dimensionally stabilizing substrate |
US11171869B2 (en) * | 2019-04-10 | 2021-11-09 | At&T Intellectual Property I, L.P. | Microburst detection and management |
US11080011B1 (en) * | 2020-03-20 | 2021-08-03 | Tap Sound System | Audio rendering device and audio configurator device for audio stream selection, and related methods |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101924742A (zh) * | 2009-06-16 | 2010-12-22 | 华为技术有限公司 | 媒体传输方法及设备、媒体存储方法及设备 |
US7984179B1 (en) * | 2004-06-29 | 2011-07-19 | Sextant Navigation, Inc. | Adaptive media transport management for continuous media stream over LAN/WAN environment |
CN102422604A (zh) * | 2009-05-11 | 2012-04-18 | 日本电气株式会社 | 通信装置和通信控制方法 |
CN102710586A (zh) * | 2011-03-28 | 2012-10-03 | 华为技术有限公司 | 流媒体传输控制方法、媒体传输控制方法、相关设备 |
CN102843542A (zh) * | 2012-09-07 | 2012-12-26 | 华为技术有限公司 | 多流会议的媒体协商方法、设备和系统 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6584093B1 (en) * | 1998-08-25 | 2003-06-24 | Cisco Technology, Inc. | Method and apparatus for automatic inter-domain routing of calls |
CN101237389B (zh) * | 2007-02-02 | 2011-11-09 | 华为技术有限公司 | 一种实现远程媒体流控制的方法、通信系统和设备 |
CN101123606A (zh) * | 2007-07-13 | 2008-02-13 | 上海广电(集团)有限公司中央研究院 | 基于实时传输协议或实时控制协议的avs传输控制方法 |
US8427949B2 (en) * | 2009-08-07 | 2013-04-23 | Future Wei Technologies, Inc. | System and method for adapting a source rate |
US9014038B2 (en) * | 2011-12-19 | 2015-04-21 | Bandwidth.Com, Inc. | Intelligent multi-streaming for enhancing or avoiding dropped and interrupted communication sessions |
-
2013
- 2013-04-16 CN CN201310131471.1A patent/CN104113766B/zh active Active
- 2013-10-17 WO PCT/CN2013/085363 patent/WO2014169599A1/zh active Application Filing
- 2013-10-17 EP EP13882078.2A patent/EP2966816B1/en active Active
-
2015
- 2015-10-12 US US14/880,591 patent/US10050882B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7984179B1 (en) * | 2004-06-29 | 2011-07-19 | Sextant Navigation, Inc. | Adaptive media transport management for continuous media stream over LAN/WAN environment |
CN102422604A (zh) * | 2009-05-11 | 2012-04-18 | 日本电气株式会社 | 通信装置和通信控制方法 |
CN101924742A (zh) * | 2009-06-16 | 2010-12-22 | 华为技术有限公司 | 媒体传输方法及设备、媒体存储方法及设备 |
CN102710586A (zh) * | 2011-03-28 | 2012-10-03 | 华为技术有限公司 | 流媒体传输控制方法、媒体传输控制方法、相关设备 |
CN102843542A (zh) * | 2012-09-07 | 2012-12-26 | 华为技术有限公司 | 多流会议的媒体协商方法、设备和系统 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106302377A (zh) * | 2015-06-29 | 2017-01-04 | 华为技术有限公司 | 媒体会话处理方法方法和相关设备及通信系统 |
WO2017000636A1 (zh) * | 2015-06-29 | 2017-01-05 | 华为技术有限公司 | 媒体会话处理方法方法和相关设备及通信系统 |
EP3300329A4 (en) * | 2015-06-29 | 2018-06-27 | Huawei Technologies Co., Ltd. | Media session processing method, related device, and communication system |
CN106302377B (zh) * | 2015-06-29 | 2019-10-15 | 华为技术有限公司 | 媒体会话处理方法和相关设备及通信系统 |
US10645128B2 (en) | 2015-06-29 | 2020-05-05 | Huawei Technologies Co., Ltd. | Media session processing method, related device, and communications system |
Also Published As
Publication number | Publication date |
---|---|
WO2014169599A1 (zh) | 2014-10-23 |
EP2966816A1 (en) | 2016-01-13 |
CN104113766B (zh) | 2018-01-02 |
US10050882B2 (en) | 2018-08-14 |
US20160036704A1 (en) | 2016-02-04 |
EP2966816A4 (en) | 2016-01-20 |
EP2966816B1 (en) | 2017-12-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104113766A (zh) | 一种媒体流的传输带宽的调整方法及相关装置 | |
AU2016213760B2 (en) | Media negotiation method, device, and system for multi-stream conference | |
CN103023666B (zh) | 用于低延迟和分布式会议应用的会议服务器架构的系统和方法 | |
CN108881972B (zh) | 一种码率分配方法、装置、设备和存储介质 | |
CN107027048A (zh) | 一种直播连麦及信息展示的方法及装置 | |
CN102342066A (zh) | 实时多媒体流处理带宽管理 | |
KR20170007419A (ko) | 비디오 회의를 제시하기 위한 방법, 디바이스 및 시스템 | |
CN102833518A (zh) | 一种mcu多画面优化配置的方法及装置 | |
CN102387338B (zh) | 分布式视频处理方法及视频会议系统 | |
EP2936803B1 (en) | Method and a device for optimizing large scaled video conferences | |
CN102883131A (zh) | 基于远程呈现系统的信令交互方法及装置 | |
Huang et al. | SyncCast: synchronized dissemination in multi-site interactive 3D tele-immersion | |
Christodoulou et al. | Adaptive subframe allocation for next generation multimedia delivery over hybrid LTE unicast broadcast | |
CN102378152B (zh) | 一种业务处理方法、装置及系统 | |
CN105357467A (zh) | 音频视频会议中的远程互动方法、装置及系统 | |
CN105979397A (zh) | 一种跨设备群聊的方法及系统 | |
Tatematsu et al. | QoE assessment in tele-operation with 3D video and haptic media | |
CN103354557A (zh) | 媒体控制服务器级联系统及控制多媒体码流的方法和装置 | |
CN105282477A (zh) | 多方视频数据混屏实现方法、装置、系统和混屏服务器 | |
CN103765859A (zh) | 一种多路辅流控制的方法、控制设备、节点和系统 | |
CN105791740A (zh) | 多点音频视频通信中远程互动的方法及设备 | |
Chodorek et al. | TFD-capable dynamic QoS assurance using a variable time horizon based on scene changes | |
CN103974027A (zh) | 多端到多端的实时通信方法及系统 | |
CN103152545A (zh) | 一种处理纠错请求的方法、视频服务器和视频会议系统 | |
CN112218033A (zh) | 一种基于客户端进行资源分配的会议系统及其工作方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |