CN102484748A - 管理视频自适应算法 - Google Patents

管理视频自适应算法 Download PDF

Info

Publication number
CN102484748A
CN102484748A CN2010800370348A CN201080037034A CN102484748A CN 102484748 A CN102484748 A CN 102484748A CN 2010800370348 A CN2010800370348 A CN 2010800370348A CN 201080037034 A CN201080037034 A CN 201080037034A CN 102484748 A CN102484748 A CN 102484748A
Authority
CN
China
Prior art keywords
rate
control parameter
media
adaptive algorithm
adaptation module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2010800370348A
Other languages
English (en)
Other versions
CN102484748B (zh
Inventor
N·K·里昂
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN102484748A publication Critical patent/CN102484748A/zh
Application granted granted Critical
Publication of CN102484748B publication Critical patent/CN102484748B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6377—Control signals issued by the client directed to the server or network components directed to server
    • H04N21/6379—Control signals issued by the client directed to the server or network components directed to server directed to encoder, e.g. for requesting a lower encoding rate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209—Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/633—Control signals issued by server directed to the network components or client
    • H04N21/6332—Control signals issued by server directed to the network components or client directed to client
    • H04N21/6336—Control signals issued by server directed to the network components or client directed to client directed to decoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6373—Control signals issued by the client directed to the server or network components for rate control, e.g. request to the server to modify its transmission rate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64723—Monitoring of network processes or resources, e.g. monitoring of network load
    • H04N21/64738—Monitoring network characteristics, e.g. bandwidth, congestion level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64746—Control signals issued by the network directed to the server or the client
    • H04N21/64761—Control signals issued by the network directed to the server or the client directed to the server
    • H04N21/64769—Control signals issued by the network directed to the server or the client directed to the server for rate control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64784—Data processing by the network
    • H04N21/64792—Controlling the complexity of the content stream, e.g. by dropping packets

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Communication Control (AREA)

Abstract

描述了通过修改动态率自适应算法所显露的控制参数来控制动态率自适应算法的操作的技术。在一个方面，一种装置包括含多个控制参数的率自适应模块。该率自适应模块监视网络条件并基于网络条件和这多个控制参数来调整媒体编码器的编码率。这多个控制参数中的每个控制参数指定控制该率自适应算法对网络条件的响应的阈值或定时值。该装置还包括接收这多个控制参数中的第一控制参数的值并将第一控制参数设为该值的客户端。

Description

管理视频自适应算法
本申请要求提交于2009年6月16日的美国临时申请No.61/187,396的权益，同时要求提交于2009年8月10日的美国临时申请No.61/232,562的权益，这两个申请中每一个申请的全部内容通过引用包括于此。
技术领域
本公开涉及数字视频编码，尤其涉及用于控制视频编码率的技术。
背景
数字视频能力可被纳入各式各样的设备，包括数字电视、数字直接广播系统、无线通信设备、个人数字助理(PAD)、膝上型计算机、台式计算机、视频游戏控制台、数码相机、数字记录设备、蜂窝或卫星无线电电话、及类似物。数字视频设备可在处理和传送视频序列方面提供相比于传统模拟视频系统的明显改进。
已经确立了不同的视频编码标准用于编码数字视频序列。例如运动图像专家组(MPEG)已开发出数种标准，包括MPEG-1、MPEG-2和MPEG-4。其他示例包括国际电信联盟(ITU)-T H.263标准、以及新出现的ITU-T H.264标准及其对应物ISO/IEC MPEG-4部分10，即高级视频编码(AVC)。这些视频编码标准通过以压缩方式编码数据来支持改进的视频序列传输效率。
动态率自适应技术被用于调整分配给视频流的编码比特的数目，即编码率。可调整编码率以确保经编码的视频序列符合质量要求和/或由于变化的网络条件导致的可用带宽的改变。一些率控制技术被设计成产生恒定编码率，而其他率控制技术被设计成产生恒定质量。动态率自适应技术可平衡编码率和质量等级，并且响应于网络拥塞状况和视频帧内容。
概述
本公开描述了用于管理动态率自适应算法实现的技术。一般而言，所使用的特定动态率自适应算法可根据设备制造商所提供的实现而在设备与设备之间有所不同。然而，这些设备可使用任意数目的具有变化的特性的不同网络的服务，这些变化的特性影响在这些设备上运行的因实现而异的动态率自适应算法的性能。根据本文描述的技术，动态率自适应算法显露网络运营商可用来修改动态率自适应算法的操作的一组参数。
在一个方面，一种方法包括由媒体设备接收用于率自适应算法的多个控制参数中的第一控制参数的值，其中该率自适应算法监视网络条件并基于网络条件和这多个控制参数调整媒体编码器的编码率，其中这多个控制参数中的每个控制参数指定控制所述率自适应算法对网络条件的响应的阈值或定时值。该方法还包括将第一控制参数设为该值。
在另一方面，一种装置包括含多个控制参数的率自适应模块，其中该率自适应模块监视网络条件并基于网络条件和这多个控制参数调整媒体编码器的编码率，其中这多个控制参数中的每个控制参数指定控制该率自适应算法对网络条件的响应的阈值或定时值。该装置还包括接收这多个控制参数中的第一控制参数的值并将第一控制参数设为该值的客户端。
在另一方面，一种设备包括用于由媒体设备接收用于率自适应算法的多个控制参数中的第一控制参数的值的装置，其中该率自适应算法监视网络条件并基于网络条件和多个控制参数调整媒体编码器的编码率，其中这多个控制参数中的每个控制参数指定控制所述率自适应算法对网络条件的响应的阈值或定时值。该设备还包括用于将所述第一控制参数设为该值的装置。
在另一方面，一种计算机可读存储介质包括使一个或多个可编程处理器进行以下动作的指令：由媒体设备接收用于率自适应算法的多个控制参数中的第一控制参数的值，其中该率自适应算法监视网络条件并基于网络条件和多个控制参数调整媒体编码器的编码率，其中这多个控制参数中的每个控制参数指定控制所述率自适应算法对网络条件的响应的阈值或定时值。这些指令还使一个或多个可编程处理器将第一控制参数设为该值。
本公开中所描述的技术可以硬件、软件、固件或其任何组合的形式在数字视频装置中实现。如果以软件形式实现，则此软件可在诸如处理器等的机器中执行。该软件初始可以作为指令被存储在机器可读存储介质中并由机器执行以支持根据本公开的视频编码率自适应。
在附图及以下说明中阐述这些技术的一个或多个示例的详情。其它特征、目的、以及优点将可从此说明和附图、以及所附权利要求书中显见。
附图简述
图1是解说根据所描述的技术操作的示例性网络的框图。
图2是解说根据本文描述的技术具有能使用示例性规约服务器进行修改的率自适应算法的示例视频服务器和视频终端的框图。
图3是解说根据所描述的技术可被用于控制率自适应算法的示例性参数的表的框图。
图4是解说根据所描述的技术使用的用尽余量的带注释的图。
图5是解说根据本公开的技术的示例去拥塞过程的带注释的图。
图6是解说根据本公开的技术的规约服务器和媒体终端的示例性操作的流程图。
图7是解说根据本公开的技术在UMTS网络中操作的规约服务器和视频服务器的示例性操作的流程图。
图8是解说根据本公开的技术在UMTS网络中操作的MTSI客户端的示例性操作的流程图。
详细描述
图1是解说一示例性网络2的框图。在一些示例中，网络2包括根据第三代合作伙伴项目(3GPP)标准和根据本文描述的技术操作的通用移动电信服务(UMTS)网络。仅仅出于解说的目的，本文的技术将参照UMTS网络来描述。然而，在其他示例中，这些技术也适用于其他通信网络类型。
UMTS网络2包括经由通信接口20通信地耦合的核心网4和UMTS地面无线接入网(UTRAN)5。核心网4提供分组交换(PS)服务，并且在一些方面还可提供电路交换(CS)服务。PS和CS服务可包括移动性服务，诸如认证和漫游，以及呼叫处置服务、核心网信令、记账、核心网4与外部网络(未示出)之间的互通、和其他服务。核心网4可被连接至一个或多个主干网，诸如因特网、综合业务数字网络(ISDN)、和公共交换电话网(PSTN)(未示出)。
通信接口20为UTRAN 5提供对核心网4服务的接入。通信接口20启用Iu-ps接口，并且在一些方面还可包括Iu-cs接口。一般而言，Iu-ps接口提供启用与分组交换网络的通信的协议，并且可将无线电网络控制器6(“RNC”)链接至核心网4中的服务GPRS支持节点(SGSN)(未示出)。一般而言，Iu-cs接口提供启用与电路交换网络的通信的协议，并且可将RNC 6链接至核心网4中的移动交换中心(MSC)(未示出)。
UTRAN 5提供无线通信服务，并在图1的示例中包括两个基站，即经由通信链路22A-22B连接至RNC 6的B节点8A和B节点8B(“B节点8”)。B节点8是使用空中接口与无线设备通信的基收发机站。B节点8中的每一个可根据其配置来服务若干蜂窝小区(或“扇区”)。下文中，B节点8之一所服务的地理区划被称为蜂窝小区。在一些方面，B节点8中的每一个可以是站点控制器、接入点、或其他类型的无线收发机站。
在UTRAN 5中，B节点8使用无线电链路24A-24B通信地耦合至无线用户装备(UE)12A-12B(“UE 12”)。具体而言，UE 12A处在B节点8A的蜂窝小区中，并因此经由无线电链路24A与B节点8A交换数据和控制信息。同样，UE 12B处在B节点8B的蜂窝小区中，并因此经由无线电链路24B与B节点8B交换数据和控制信息。UE 12中的每一个是无线通信设备，并且可包括例如移动电话、具有例如3G无线卡的膝上型或台式计算机、具有无线能力的上网本、视频游戏设备、寻呼机、个人数字助理(PDA)、电视、或视频相机。UE 12中的每一个运行一个或多个应用，诸如移动呼叫、视频游戏、视频会议、以及电子邮件等等。从UE 12至节点8之一的通信被称为上行链路，而从B节点8之一至UE 12的通信被称为下行链路。RNC 6管理B节点8、路由去往/来自B节点8的数据、以及经由通信接口20使UTRAN 5接口至核心网4。在一些方面，UTRAN 5可包括以各种配置来安排的附加RNC和B节点。
UMTS网络2可包括分组交换网络，并且因此可在对链路资源的需求改变时在不同的用户和应用之间快速地重新指派链路资源。UMTS网络2提供下行链路分组数据服务。例如，UMTS网络2可提供高速下行链路分组接入(HSDPA)服务。HSDPA服务可在频分双工(FDD)模式或时分双工(TDD)模式下操作。
HSDPA规定无线电链路24包括在下文被称为共享下行链路的高速下行链路共享信道(HS-DSCH)。即，B节点8之一的蜂窝小区中的UE 12共享由该B节点提供并经由无线电链路24传达的HS-DSCH。B节点8基于任何连接着的UE 12所经历的当前无线电条件以及该连接着的UE 12的数据需求来调度相应的共享下行链路。例如，当UE 12A在B节点8A的蜂窝小区内四处移动时，无线电链路24A的特性由于几何系统、天气、干扰、以及其他条件的变化而变化。作为一个示例，较靠近蜂窝小区边缘的UE相比于靠近B节点8A发射机的UE一般具有明显较差的链路条件。为了优化系统容量，B节点8A调度器选择服务处在最佳链路条件下的UE，因为这允许共享下行链路(即，HS-DSCH)上有最快的传输率。这种信道敏感调度利用多UE分集通过青睐能以更高速率从共享下行链路接收数据的终端来改善蜂窝小区吞吐量。
UMTS网络2服务可规定用于以下四类话务的服务质量(QoS)等级：1)常规(例如，IP语音(VoIP)、视频电话、视频游戏)；2)流送(例如，多媒体、点播视频、网络广播)；3)交互(web浏览、网络游戏、数据库访问)；以及4)后台(电子邮件、SMS、下载)。UTRAN 5按需向UE 12上运行的应用授予QoS级别。B节点8出于为蜂窝小区中的所有UE 12提供公平性的需要和满足UE 12上运行的应用的具体QoS要求的需要来调和最大化系统吞吐量和容量的目标。这些目标常常是矛盾的。
B节点8之一的共享下行链路的负载可在例如蜂窝小区中的一个UE 12开始具有QoS要求的新多媒体或数据会话时增大。在一些情形中，另外的媒体或数据会话可携带较高优先级的话务，诸如能先占视频RTP话务的VoIP。作为另一示例，负载可在一个UE 12切换到蜂窝小区中时、以及在共享下行链路上要求QoS的一个UE 12向蜂窝小区的边缘移动时增大。较低质量的无线电链路使得共享下行链路为了支持对朝向蜂窝小区边缘移动的UE 12的传输的代价更高。例如，由于必须向B节点8之一的蜂窝小区边缘处的UE 12提供共享下行链路上的高速、低等待时间的QoS，该B节点需要为该特定UE 12分配更长时段的共享下行链路以补偿较低的链路速度。这为共享下行链路造成负担并且降低了其用于服务该蜂窝小区中的其他UE 12的容量。
由于共享下行链路的共享性质，蜂窝小区中每个UE 12的要求影响到该蜂窝小区中所有UE 12的性能。这可能导致递送给该蜂窝小区中的一些或所有UE 12的QoS的变动。尽管设计良好的HSDPA QoS调度器平衡了提供QoS与公平性的需要和最大化系统吞吐量的目标，但是上文解释的因素造成了在会话期间被授予终端的实际QoS的变动。即使在UTRAN 5已经向UE 12之一的应用授予了特定QoS级别(例如，48kbps数据率)时，UTRAN 5也可能无法在每个时刻都向该UE 12提供该QoS级别。在这样的情形下，该UE 12将经历所递送的QoS级别的变动，该变动基于由于移动性而导致的该UE 12与蜂窝小区中的其他UE 12的相对位置的变化和由于其他UE 12导致的蜂窝小区负载情况/拥塞。
HSDPA提供对各种端对端多媒体服务的支持。例如，对于实时分组交换服务，UMTS网络2可实现3GPP定义的分组交换对话(PSC)服务、分组交换流送(PSS)服务、和多媒体广播/多媒体服务(MBMS)服务。
另外，示例性UMTS网络2可提供网际协议多媒体系统多媒体电话服务(MTSI)。MTSI于可在http://www.3gpp.org/ftp/Specs/archive/26_series/26.114/26114-7a0.zip获得的第三代合作伙伴项目2009年技术规范组服务和系统方面“3GPP TS 26.114V7.10.0”中进行了记载。如在下文详细描述的，UE 12包括MTSI客户端并且因此支持在实时传输协议(RTP)上传输的语音、视频和/或文本。
UE 12A可使用MTSI通过UMTS网络2向UE 12B发送包含作为视频会话28的一方面的视频数据的RTP分组。视频会话28可以是视频呼叫、视频会议、流送电影、或其他要求视频传输的多媒体会话。UE 12规定用于所支持的每种媒体类型(包括视频)的媒体编解码器。UE 12A包括根据各种视频编码标准中的任何标准对从视频源获得的视频进行编码的视频编码器，该视频源可以是实况或存档的视频供给。这些技术可以与各种视频编码标准中的任何标准联用，这些标准诸如有MPEG-1、MPEG-2、或MPEG-4标准，ITU H.263或H.264标准，或者与H.264标准基本相同的ISO/IEC MPEG-4部分10标准，即高级视频编码(AVC)。另外，UE 12A包括对视频编码器用于编码视频段内的帧的编码率进行控制的传送侧率自适应模块14A(被示为“TX侧率自适应模块14A”)。编码率指定分配给视频段中的帧的编码比特的数目。
传送侧率控制模块14A采用动态率自适应算法，这使得UE 12A视频编码器能对变化的网络条件作出响应。例如，传送侧率自适应模块14A可响应于分配用于经编码媒体的带宽的减少而增大视频编码器所用的量化参数(QP)以降低经编码媒体的比特率。分配用于经编码媒体的带宽可能由于例如UE 12中的接收方所经历的递送QoS级别的变化而改变。
UE 12B可在视频会话28期间接收来自UE 12A的RTP分组并处理收到的RTP分组。UE 12B包括测量共享下行链路上的分组到达统计量的接收器侧率自适应模块14B。基于该测量，接收器侧率自适应模块14B提供反馈30，反馈30指示传送侧率自适应模块14A比例减小或比例增大其编码率及由此的媒体传输率以更接近地匹配共享下行链路上对于UE 12B的带宽供应。
一般而言，用户装备供应商实现传送侧率自适应模块14A和接收器侧率自适应模块14B以促成因用户装备设备而异的最佳自适应方法。因此，在各种方面中的UTRAN 5可包括具有率自适应模块14的不同专属实现的UE 12。
根据本文描述的技术，传送侧率自适应模块14A显露影响UE 12A的率自适应及编码算法的控制参数集。另外，接收器侧率自适应模块14B显露影响UE 12B的率自适应及编码算法的不同的控制参数集。
根据所描述的技术，UTRAN 5还包括经由通信链路24C通信地耦合至RNC 6的规约服务器10。在一些方面，规约服务器10使用其他无线接口(诸如蓝牙、IrDA)或有线接口(诸如通用串行总线(USB)、火线、和RS-232)来规约UE 12。规约服务器10通常是UMTS网络2中的计算机服务器。在一些方面，规约服务器10是与UE 12中的一者或多者具有有线连接的膝上型设备。在一些方面，规约服务器10是根据3GPP术语的用户装备，并且可包括例如移动电话、具有例如3G无线卡的膝上型或台式计算机、具有无线能力的上网本、个人数字助理(PDA)等等。
规约服务器10单独或组合地建立与UE 12A-12B的规约会话26A-26B以如本公开中所描述地修改传送侧率自适应模块14A和接收器侧率自适应模块14B所显露的控制参数，并由此更改UTRAN 5内运行的率自适应及编码算法。以这种方式，尽管UE 12的率自适应及编码算法是专属的，但是规约服务器10仍然控制这些算法的运行以促成UTRAN 5的效率、QoS、吞吐量、及其他目标。作为一个示例，规约服务器10可经由规约会话26A指示传送侧率自适应模块14A响应于检测到分组拥塞而降低视频编码率以降低视频会话28的传输率并由此降低视频会话28在UE 12B所用的共享下行链路(由无线电链路24B包括)上的负担。该降低例如可允许利用该共享下行链路的其他用户装备(未示出)具有更一致的或更佳的QoS。
图2是解说根据本文描述的技术具有能使用示例性规约服务器10进行修改的率自适应算法的示例视频服务器40和视频终端60的框图。
视频服务器40可对应于图1的UE 12A。视频服务器40包括视频源42和发送客户端44。在所解说的图2的示例性方面，发送客户端44是MTSI客户端。发送客户端44在下文被称为发送MTSI客户端44。视频源42可以是视频捕捉设备(诸如视频相机)、或者存储先前捕捉的数字视频的视频存档。视频源42还可以是通往实况或存档的视频供给的接口。
发送MTSI客户端44支持并以其他方式为视频服务器40提供至MTSI的接口，并使视频服务器40能传送对话语音、文本和视频。发送MTSI客户端44处置与其他MTSI客户端的媒体会话的会话建立与控制，并另外处置媒体控制、媒体编码/解码、以及媒体数据和控制数据传输。
发送MTSI客户端44包括视频编码器46、视频分组器48以及传送侧率自适应模块50(“Tx侧率自适应模块50”)。发送MTSI客户端44是一般性MTSI客户端的简化的示例性方面。在其他方面，发送MTSI客户端44可另外包括视频解码器、文本及语音编解码器、会话建立与控制模块、激活模块、或启用MTSI的其他功能方面。
视频编码器46根据上文提及的各种视频编码标准中的任何标准(诸如H.264)编码来自视频源42的视频。视频分组器48是基于分组的接口，它从视频编码器46接收经编码视频段并将经编码视频段划分成一系列分组以供传输。结果得到的分组可从应用层传到其他层(诸如传输层和物理层)以作进一步处理，诸如复用、附加分组化、和其他操作。
传送侧率自适应模块50控制视频编码器46用于编码视频段内的帧的编码率。编码率指定分配给视频段中的帧的编码比特的数目。传送侧率自适应模块50可对应于图1的传送侧率自适应模块14A。
传送侧率自适应模块50接收来自接收客户端(诸如接收客户端64)的反馈31，并通过恰当地增大或减小编码率来作出响应。反馈31可包括指示传送侧率自适应模块50采取措施以修改编码率的指令、关于收到分组的统计量、以及传送侧率自适应模块50可用于调整编码率或发送速率的任何其他信息。例如，传送侧率自适应模块50可支持编解码器控制消息(CCM)的临时最大媒体比特率请求(TMMBR)和临时最大媒体比特率通知(TMMBN)消息。
在此示例性方面，传送侧率自适应模块50根据MTSI规范实现扩展的RTP控制协议(RTCP)反馈接收机制以供传送侧率自适应模块50用来处置接收视频终端所经历的接收条件的RTCP反馈。在UMTS网络2的实现PSS的诸方面，传送侧率自适应模块50支持RTCP下一应用数据单元(NADU)因应用而异的功能(APP)分组，后者提供关于视频接收器上用于收到媒体数据的缓冲水平的反馈信息。
在图2中，发送客户端44经由MTSI视频会话29向视频终端60发送分组化视频数据。视频终端60可对应于图1的UE 12B，并包括接收客户端64和观看器62。观看器62使视频终端60用户能够观看视频终端60收到的视频。观看器62可包括屏幕(诸如液晶显示器(LCD))、投影仪、计算机监视器、或其他观看组件。
接收客户端64可支持并以其他方式为视频终端60提供至MTSI的接口，并使视频终端60能接收对话语音、文本和视频。在所解说的图2的示例性方面，接收客户端64是MTSI客户端。接收客户端64因此在下文被称为接收MTSI客户端64。接收MTSI客户端64处置与其他MTSI客户端的媒体会话的会话建立与控制，并另外处置媒体控制、媒体编码/解码、以及媒体数据和控制数据传输。
接收MTSI客户端64包括视频解码器68、视频提取器66、以及接收器侧率自适应模块70。接收MTSI客户端64是一般性MTSI客户端的简化的示例性方面。在其他方面，接收MTSI客户端64可另外包括视频编码器、文本及语音编解码器、会话建立与控制模块、激活模块、或启用MTSI的其他功能方面。
视频提取器66是基于分组的接口，它从接收MTSI客户端64收到的视频分组中提取视频并恢复出分组化视频流。视频提取器将经编码视频流传给视频解码器68，后者根据用于该经编码视频流的恰适视频编码标准(诸如H.264)解码该经编码视频流并将经解码视频流发送给观看器62以供观看。
接收器侧率自适应模块70监视接收MTSI客户端64的媒体分组接收统计量。接收器侧率自适应模块70监视的统计量可包括分组丢失率、分组抖动、以及分组等待时间/延迟。基于监视到的分组统计量，接收器侧率自适应模块70生成反馈31并将其提供给视频服务器40的传送侧率自适应模块50以致使视频编码器46增大或减小编码率以及所伴随的视频服务器40的传输率。接收器侧率自适应模块70可生成反馈31，该反馈31包括指示传送侧率自适应模块50采取措施以修改编码率的指令、分组统计量、或传送侧率自适应模块50可用于调整编码率或发送速率的任何其他信息。例如，接收器侧率自适应模块70支持TMMBR和TMMBN消息。在此示例性方面，接收器侧率自适应模块70根据MTSI规范实现扩展的RTP控制协议(RTCP)反馈机制以在反馈31中向传送侧率自适应模块50报告接收条件。
在UMTS网络2的实现PSS的诸方面，接收器侧率自适应模块70可使用RTCP下一应用数据单元(NADU)因应用而异的功能(APP)分组以向传送侧率自适应模块50提供关于用于收到的经编码媒体数据的缓冲水平的反馈信息。在这样的方面，传送侧率自适应模块50通过恰当地比例增大/减小其编码率来作出响应。
根据本公开的技术，传送侧率自适应模块50显露一组媒体发送器控制参数51。这些媒体发送器控制参数例如通过改变与图像质量有关的边界条件、改变定时参数、以及修改传送侧率自适应模块50用来确定视频编码器46的编码率的缩放比率来影响传送侧率自适应模块50的操作。在一些方面，传送侧率自适应模块50所显露的媒体发送器控制参数51可被读取以确定这些参数的当前值。
类似地，根据本公开的技术，接收器侧率自适应模块70显露一组媒体接收器控制参数71。媒体接收器控制参数例如通过改变与分组丢失率的演算有关的边界和定时条件、改变定时参数以及接收器侧率自适应模块70用来确定被提供给传送侧率自适应模块50的反馈31的性质和范围的其他值来影响接收器侧率自适应模块70的操作。在一些方面，传送侧率自适应模块50所显露的媒体发送器控制参数51可被读取以确定这些参数的当前值。
MTSI客户端的内部编码及率自适应算法可能常常是专属的和/或不可获取的。相应地，视频编码器46、传送侧率自适应模块50以及接收器侧率自适应模块70可包括网络运营商使用常规方法无法控制的“黑盒子”。然而，通过使用本公开的技术改变媒体发送器控制参数51和/或媒体接收器控制参数71中的一者或多者，网络运营商可分别修改传送侧率自适应模块50和/或接收器侧率自适应模块70的操作，并因此实质上改变视频编码器46的编码率。在此方面，网络运营商可使用这些控制参数作为“控制钮”修改“黑盒子”的操作从而促成包括视频服务器40和视频终端60的网络的各种目标。媒体接收器控制参数71和媒体发送器控制参数51由此配置和控制视频终端60和视频服务器40分别用来对变化的网络条件作出反应的进程。在一些方面，媒体接收器控制参数71和媒体发送器控制参数51仅仅在除了由网络运营商显式地更改时改变。在这样的方面，这些参数不响应于变化的网络条件而改变。
规约服务器10是使网络运营商58(“运营商58”)建立与视频服务器40和视频终端60的规约会话26A-26B从而分别修改媒体发送器控制参数51和媒体接收器控制参数71的用户装备。规约服务器10包括接口54，运营商58可用该接口54进行交互从而使规约服务器10将媒体发送器控制参数51和/或媒体接收器控制参数71修改为运营商58所选的值。规约服务器10还包括收集和分析包括视频服务器40和视频终端60的网络(例如，图1的UMTS网络2)的网络统计量的网络分析器56。在一些方面，网络分析器56使用规约会话26A从视频服务器40读取媒体发送器控制参数值51和/或使用规约会话26B从视频终端60读取媒体接收器控制参数值71。网络分析器56使用这些参数值根据视频服务器40和/或视频终端60的当前配置来分析网络条件并经由接口54将该分析提供给运营商58。在这些方面的网络分析器56还可经由接口54将参数值提供给运营商58。
通过使用规约服务器10修改媒体发送器控制参数51和媒体接收器控制参数71，运营商58可改变视频编码器46、传送侧率自适应模块50、和接收器侧率自适应模块70的“黑盒子”的行为从而促成某些网络目标，诸如带宽公平、最大吞吐量、或其他此类目标。在一些方面，规约服务器10至少是部分自主的并且能自动地通过分别向视频服务器40和视频终端60规约不同的媒体发送器控制参数51和媒体接收器控制参数71来响应变化的网络条件。
图3包括媒体接收器参数表80和媒体发送器参数表82。媒体接收器参数表80列出了示例性媒体接收器参数81A-81P(“媒体接收器参数81”)。根据本公开的技术，示例性接收器侧率自适应模块70显露媒体接收器参数81中的一个或多个参数以使网络运营商能影响接收器侧率自适应模块70的操作并因此影响视频终端60和视频服务器40的操作。接收器侧率自适应模块70的媒体接收器控制参数71可表示媒体接收器参数81中的一个或多个参数。在一些方面，视频终端60可提供媒体接收器参数81的多个子集，这多个子集对应于包括视频终端60的网络所提供的不同的服务级别(媒体接收器参数81的因服务而异的子集可与其他子集相交，即交迭)。
这样，网络运营商可更改媒体接收器参数81的一因服务而异的子集而不影响到媒体接收器参数81的其他因服务而异的子集。例如，视频终端60可提供金、银、和铜级别的服务。网络运营商可更改媒体接收器参数81中对应于铜服务级别的子集以便当视频终端60正以铜服务级别操作时影响视频终端60的网络的服务质量。以下段落描述媒体接收器参数81中的每个参数。在一些方面，媒体接收器参数81中与时间相关的参数是以毫秒为量纲的。
PLR_最大8IA指定分组丢失率(PLR)的上限阈值，PLR是对视频终端60未收到的分组的百分比的统计测量。PLR可关于RTP分组来测量。在一些方面，PLR包括在所恰适调度的用尽(playout)里未及时到达的那些RTP分组(如同丢失)。当PLR超过PLR_最大81A时，接收器侧率自适应模块70指示传送侧率自适应模块50降低分组丢失率。
PLR_低81B指示PLR的下限阈值。当PLR降到低于PLR_低81B时，接收器侧率自适应模块70指示传送侧率自适应模块50增大媒体传输率。
PLR_M_窗_最大81C指定接收器侧率自适应模块70在其上观测和计算PLR以用于与PLR_最大81A进行比较的滑动窗的历时。
PLR_M_窗_低_81D指定接收器侧率自适应模块70在其上观测和计算以用于与PLR_最小81B进行比较的滑动窗的历时。将PLR_M_窗_最大81C与PLR_M_窗_低81D分开来指定是因为过度的分组丢失是可能要求接收器侧率自适应模块70的快速响应的紧急条件。因此，网络运营商可能希望PLR_M_窗_最大81C有较短的观测窗值。低分组丢失率不一定是紧急条件，并且网络运营商可对PLR_M_窗_低81D使用较长的观测窗值以确保网络条件足以稳定从而力图增大媒体传输率。
目标_用尽_余量_最小81E指定媒体分组到达与其所恰适调度的用尽时间之间的最小可接受时间。测量从用尽时间到分组到达分布的X百分点(由下文描述的X_百分数81G指定)以得到该时间。在未满足目标_用尽_余量_最小81E时，接收器侧率自适应模块70可指示传送侧率自适应模块50降低媒体传输率从而实现媒体分组更及时的到达。目标_用尽_余量_最小81E在下文结合图4做更详细的描述。
目标_用尽_余量_高81F指定媒体分组到达与其所恰适调度的用尽时间之间的时间的上限(最大)阈值。测量从用尽时间至分组到达分布的X百分点(由下文描述的X_百分数81G指定)以得到该时间。当超过目标_用尽_余量_高81F时，接收器侧率自适应模块70可指示传送侧率自适应模块50增大媒体传输率以改善媒体质量，例如视频图像质量。目标_用尽_余量_高81F在下文结合图4做更详细的描述。
X_百分数81G指定结合目标_用尽_余量_最小81E和目标_用尽_余量_高81F使用的分组到达分布的X百分点。
目标_用尽_M_窗_最小81H指定接收器侧率自适应模块70在其上观测和计算媒体分组到达与用尽之间的余量的滑动窗的历时。接收器侧率自适应模块70将对于目标_用尽_M_窗_最小81H所演算出的余量与目标_用尽_余量_最小81E作比较。
目标_用尽_M_窗_高81I指定接收器侧率自适应模块70在其上观测和计算媒体分组到达与用尽之间的余量的滑动窗的历时。接收器侧率自适应模块70将对于目标_用尽_M_窗_高81I所演算出的余量与目标_用尽_余量_高_81F作比较。
PL_突发81J指定分组丢失的上限(最大)阈值数目。当在由PL_突发_窗81K指定的历时上的分组丢失超过PL_突发81J，接收器侧率自适应模块70指示传送侧率自适应模块50降低媒体传输率以适应突发性分组丢失条件。
PL_突发_窗81K指定接收器侧率自适应模块70在其上观测和演算分组丢失以用于与PL_突发81J进行比较来确定突发性分组丢失条件的窗。
最大_RTP_间隙81L是在未接收到媒体分组的情况下直到接收器侧率自适应模块70声明突发性分组丢失/严重拥塞条件并指示传送侧率自适应模块50适应突发性分组丢失条件之前可流逝的阈值时间量方面的因子。在严重分组丢失的情形中，收到媒体分组中的间隙(分组丢失间隙)会妨碍常规分组丢失观测，因为接收器侧率自适应模块70必须收到后续分组才确定在前的分组实际是丢失了。使用最大_RTP_间隙81L和本文描述的技术允许接收器侧率自适应模块70在不必观测中间分组丢失之后的媒体分组的情况下确定拥塞。
在一些情形中，接收器侧率自适应模块70可演算该阈值时间量以用于通过保持基于先前视频帧的接收和这些先前视频帧的时间戳的帧周期的运行估计(例如，移动平均)T_帧_估计来确定何时存在分组丢失间隙。收到媒体(例如，RTP)的时间戳允许接收器侧率自适应模块70基于最近收到的视频帧来估计帧周期。如果接收器侧率自适应模块70未能在值为最大_RTP_间隙81L与_T_帧_估计的乘积的历时里接收到任何媒体分组，则接收器侧率自适应模块70声明突发性分组丢失/严重拥塞条件，并可指示传送侧率自适应模块50降低媒体传输率以进行自适应。
估计分组丢失间隙可能是有挑战性的，因为媒体分组可能不是以常规间隔生成的并且共享下行链路调度算法可能导致分组递送时间的抖动。因此，在一些方面，保守地设置最大_RTP_间隙81L。
示例性接收器侧率自适应模块70使用T_帧_估计，因为编码器不经常突然地改变编码帧率，并因此该估计可用作检测视频帧传输中的间隙的相当可靠的基础。在一些方面，可使用估计帧周期的其他方法。
增加_反馈_最小_间隔81M指定接收器侧率自适应模块70在向传送侧率自适应模块50发送增加最大率限制的后续反馈31消息(例如TMMBR消息)之前要等待的最小间隔。增加_反馈_最小_间隔81M影响发生动态率自适应的速率以及信令开销(较低的间隔导致较多数目的反馈消息)。
减小_反馈_最小_间隔81N指定接收器侧率自适应模块70在向传送侧率自适应模块50发送减小最大率限制的后续反馈31消息(例如TMMBR消息)之前要等待的最小间隔。减小_反馈_最小_间隔81N影响发生动态率自适应的速率以及信令开销。拥塞常常需要紧急自适应而增大传输率不是那么必需的，因此减小_反馈_最小_间隔81N是与增加_反馈_最小_间隔81M分开且通常比它小的参数。
去拥塞81O指定去拥塞动作的强度水平。当接收器侧率自适应模块70例如基于与媒体接收器参数81中的其他参数有关的观测和演算检测到拥塞条件，则接收器侧率自适应模块70采取动作以指示传送侧率自适应模块50在让视频服务器40以传输路径的可持续吞吐量速率传送媒体之前对共享下行链路进行去拥塞。在一些方面，去拥塞81O指定范围从0到10的参数值，其中0指示无需执行去拥塞，而渐增的值指示接收器侧率自适应模块70应采取越来越激进的去拥塞动作。
去拥塞_时间81P指定接收器侧率自适应模块70要去拥塞的时间量。0值指示接收器侧率自适应模块70无需尝试去拥塞动作。去拥塞_时间81P在下文结合图5做更详细的描述。
媒体发送器参数表82列出了示例性媒体发送器参数83A-83H(“媒体发送器参数83”)。根据本公开的技术，示例性传送侧率自适应模块50显露媒体发送器参数81中的一个或多个参数以使网络运营商能影响接收器侧率自适应模块传送侧率自适应模块50的操作并因此影响视频服务器40的操作。传送侧率自适应模块50的媒体发送器控制参数51可表示媒体发送器参数83中的一个或多个参数。在一些方面，视频终端40可提供媒体发送器参数83的多个子集，这多个子集对应于包括视频服务器40的网络所提供的不同的服务级别(媒体发送器参数83的因服务而异的子集可与其他子集相交，即交迭)。这样，网络运营商可更改媒体发送器参数83的一因服务而异的子集而不影响媒体发送器参数83的其他因服务而异的子集。例如，视频服务器40可提供金、银、和铜级别的服务。网络运营商可更改媒体发送器参数83中对应于铜服务级别的子集以便当视频服务器40正以铜服务级别操作时影响视频服务器40的网络的服务质量。以下段落描述媒体发送器参数83中的每个参数。在一些方面，媒体发送器参数83中与时间相关的参数是以毫秒为量纲的。
最小_比特_率83A指定视频编码器(例如视频编码器46)的最小可接受比特率。最小_比特_率83A可以被表示为(根据当前服务级别)对视频会话所支持的最大比特率的百分比。因此，网络运营商无需在多个服务集中设置多个最小_比特_率83A。如果发送MTSI客户端44不能支持最小_比特_率83A的值，发送MTSI客户端44取决于丢弃_保持_视频83G(下文描述)的值搁置该视频流或丢弃该视频流。
最小_帧_率83B指定视频编码器(例如视频编码器46)的最小可接受帧率。最小_帧_率83B被表示为(根据当前服务级别)对视频会话所支持的最大帧率的百分比。因此，网络运营商无需在多个服务集中设置多个最小_比特_率83A。如果发送MTSI客户端44不能支持最小_帧_率83B的值，发送MTSI客户端44取决于丢弃_保持_视频83G(下文描述)的值搁置该视频流或丢弃该视频流。
最小_图像_质量83C指定视频编码器(例如视频编码器46)的最小可接受图像质量。最小_图像_质量83C可被表示为以分贝(dB)计的峰信噪比(PSNR)。如果发送MTSI客户端44不能支持最小_图像_质量83C的值，发送MTSI客户端44取决于丢弃_保持_视频83G(下文描述)的值搁置该视频流或丢弃该视频流。
斜坡_升_速率83D指定视频编码器(例如视频编码器46)将目标编码率增大到较高率限制的速率。斜坡_升_速率83D可用kbps每秒为单位来表示。在一些方面，该较高率限制由传送侧率自适应模块50根据来自接收器侧率自适应模块70的可包括TMBBR消息的反馈31来设置。
斜坡_降_速率83E指定视频编码器(例如视频编码器46)将目标编码率减小到较低率限制的速率。斜坡_降_速率83D可用kbps每秒为单位来表示。在一些方面，该较低率限制由传送侧率自适应模块50根据来自接收器侧率自适应模块70的反馈31来设置。虽然斜坡降常常是用于缓解拥塞的必需技术，但由于传输路径上的突然拥塞从而斜坡升可能不是所希望的。因此，斜坡_降_速率83E是与斜坡_升_速率83D分开的参数。
上行链路_RA 83F是指定发送MTSI客户端44是否使用上行链路率自适应的布尔参数，这涉及使用关于上行链路吞吐量的较低层信息以自适应编码器率并避免媒体分组拥塞。
丢弃_保持_视频83G是指定在视频质量不能满足最小_比特_率83A、最小_帧_率83B、或最小_图像_质量83C的最小设置要求的情况下接收器侧率自适应模块70是搁置该视频流还是丢弃该视频流的布尔参数。丢弃_保持_视频83G因此是丢弃或保持参数。如果接收器侧率自适应模块70搁置该视频流，则接收器侧率自适应模块70可维持QoS保留。否则，接收器侧率自适应模块70将该视频流的QoS保留连同该视频流本身一起丢弃。在一些实施例中，搁置视频流的接收器侧率自适应模块70可允许发送MTSI客户端44继续传送其他媒体，诸如音频。
初始_编解码器_速率83H指定编码器(例如，视频编码器26)进行传送的初始速率。在一些方面，初始_编解码器_速率83H适用于音频编码器、视频编码器、和/或测试编码器。
图4是解说根据本文描述的技术使用的用尽余量的带注释的图84。如所示的，分组的用尽余量是媒体分组到达媒体接收器(例如视频终端60)与为该媒体分组恰适调度的用尽时间之间的时间量。为了将分组到达时间的抖动考虑在内，用尽余量是相对于一时间窗的整体分组到达分布中的X百分点来测量的。
目标_用尽_余量_最小81E和目标_用尽_余量_高81F定义接收器侧率自适应模块70的用尽的目标范围，而X_百分数81G指定将被用于测量用尽余量的分组到达分布的百分数。目标_用尽_余量_最小81E指定分组用尽的下限阈值。当媒体接收器(例如，视频终端60)的用尽余量低于目标_用尽_余量_最小81E时，接收器侧率自适应模块70可指示传送侧率自适应模块50对共享下行链路去拥塞。目标_用尽_余量_高81F指定分组用尽的上限(最大)阈值。当媒体接收器(例如，视频终端60)的用尽余量高于目标_用尽_余量_高81F时，接收器侧率自适应模块70可指示传送侧率自适应模块50例如通过增大编码率来改善媒体质量。目标_用尽_M_窗_最小81H和目标_用尽_M_窗_高81I定义接收器侧率自适应模块70在其上观测分组到达和用尽时间的不同滑动时间窗。使用目标_用尽_M_窗_最小81H和目标_用尽_M_窗_高81I来演算最小和高用尽余量以用于分别与目标_用尽_余量_最小81E和目标_用尽_余量_高81F进行比较。
在一些方面，目标_用尽_M_窗_最小81H和目标_用尽_M_窗_高81I是不同的值以便考虑到网络运营商对缓解拥塞和改善媒体质量所实施的不同优先级。导致用尽余量太低的网络拥塞可迫使接收器侧率自适应模块70和传送侧率自适应模块50进行立即自适应。因此，目标_用尽_M_窗_最小81H可被设置成小于接收器侧率自适应模块70用来检测较大用尽余量的目标_用尽_M_窗_高81I。
图5是解说示例性接收器侧率自适应模块70和传送侧率自适应模块50根据本公开的技术执行的示例去拥塞过程的带注释的图86。接收器侧率自适应模块70根据一个或多个媒体接收器参数81检测到共享下行链路上的拥塞并向传送侧率自适应模块50发送反馈31。在示例性图86中，反馈31包括指示传送侧率自适应模块50将传输率降到低于该传输路径的估计可持续速率的TMMBR消息。该TMMBR消息包括指定该较低传输率的TMMBR值98。传送侧率自适应模块50以斜坡降速率92(由斜坡_降_速率83E指定)降低其传输率。媒体发送器(例如，视频服务器40)降低传输率允许包括该媒体发送器的网络降低拥塞分组的积压。
接收器侧率自适应模块70随后在发送第二TMMBR消息形式的附加反馈31之前等待由拥塞_时间81P指定的时间，该第二TMMBR消息指示传送侧率自适应模块50将传输率增大到第二TMMBR值99。在该带注释的示例图86中，新的传输率接近该传输路径的估计可持续速率。传送侧率自适应模块50以斜坡升速率94(由斜坡_升_速率83D指定)增大其传输率。
一般而言，拥塞_时间81P的小值指示接收器侧率自适应模块70应执行激进的去拥塞并将TMMBR值98(指定用于去拥塞的传输率)设为明显低于传输路径的最高可持续速率。相反方面，拥塞_时间81P的大值指示接收器侧率自适应模块70应执行保守去拥塞并将TMMBR值98设为低于但更接近传输路径的最高可持续速率。拥塞_时间81P的零值指示接收器侧率自适应模块70不应指示传送侧率自适应模块50执行任何去拥塞。在一些方面，网络运营商指定去拥塞81O的值以控制去拥塞强度水平。
图6是解说工作于UMTS网络2中的规约服务器10和视频终端60根据本公开的技术的示例性操作的流程图。初始，网络运营商监视UMTS网络2中的网络条件(100)和UE处的体验质量。基于该网络条件和测得的体验质量，网络运营商使用规约服务器10修改视频终端60的接收MTSI客户端64中的接收器侧率自适应模块70的媒体接收器控制参数71中的一个或多个参数(102)。接收器侧率自适应模块70根据经修改的媒体接收器控制参数71进行操作以通过生成并向视频服务器40发送反馈31来使视频终端60所经历的传输率自适应(104)。
图7是解说工作于UMTS网络2中的规约服务器10和视频服务器40根据本公开的技术的示例性操作的流程图。初始，网络运营商监视UMTS网络2中的网络条件(110)和UE处的体验质量。基于该网络条件和测得的体验质量，网络运营商使用规约服务器10修改视频服务器40的发送MTSI客户端44中的传送侧率自适应模块50的媒体发送器控制参数51中的一个或多个参数(112)。传送侧率自适应模块50根据经修改的媒体发送器控制参数51进行操作以使视频服务器40的传输率自适应(114)。视频服务器40可通过更改视频流的编码率来使传输率自适应。
图8是解说工作于UMTS网络2中的MTSI客户端根据本公开的技术的示例性操作的流程图。MTSI客户端接收用于由该MTSI客户端运行以使媒体编码器的速率适应网络条件的率自适应算法的控制参数的值(120)。作为一个示例，该MTSI客户端可从规约服务器(诸如上文描述的规约服务器10)接收控制参数的值。作为响应，该MTSI客户端将该控制参数设为该收到的值(122)。另外，该MTSI客户端开始根据新设置的控制参数来运行率自适应以使媒体编码器的传输率适应网络条件(124)。
本公开中描述的技术可以在通用微处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、可编程逻辑器件(PLD)或其他等效逻辑设备中的一者或更多者内实现。相应地，如本文中所使用的术语“处理器”或“控制器”可以指前述结构或者任何其他适用于实现本文中所描述的技术的结构中的任一种或更多种。
本文中所解说的各种组件可以由硬件、软件、固件或其任何合适的任何合适组合来实现。在附图中，各种组件被描绘为分开的单元或模块。然而，参照这些附图描述的各种组件中的全部或几个可被集成到公共硬件、固件和/或软件内的组合单元或模块中。因此，将特征表示为组件、单元或模块意在突出特定功能特征以便于解说，且不一定要求用分开的硬件、固件或软件组件来实现此类特征。在一些情形中，各种单元可实现为有一个或更多个处理器执行的可编程过程。
本文中描述为模块、设备或组件的任何特征可以一起实现在集成的逻辑器件中或者单独地作为分立但可互操作的逻辑器件。在各方面中，此类组件可至少部分地形成为一个或更多个集成电路设备，它们可被统称为集成电路设备，诸如集成电路芯片或芯片组。此类电路系统可设在单个集成电路芯片设备中或多个互通的集成电路芯片设备中，并且可用在各种各样的图像、显示、音频或其他多媒体应用和设备中的任何应用和设备之中。例如，在一些方面中，此类组件可构成诸如无线通信设备手持机(例如，移动电话手持机)之类的移动设备的一部分。
如果实现在软件中，这些技术可至少部分地由包括有指令的代码的计算机可读数据存储介质来实现，这些指令在被一个或更多个处理器执行时执行以上所描述的方法中的一个或更多个。计算机可读存储介质可构成可包括包装材料的计算机程序产品的一部分。计算机可读存储介质可以包括诸如同步动态随机存取存储器(SDRAM)之类的随机存取存储器(RAM)、只读存储器(ROM)、非易失性随机存取存储器(NVRAM)、电可擦除可编程只读存储器(EEPROM)、嵌入式动态随机存取存储器(eDRAM)、静态随机存取存储器(SRAM)、闪存、磁或光数据存储介质。所利用的任何软件可由诸如一个或更多个DSP、通用微处理器、ASIC、FPGA之类的一个或更多个处理器、或者其他等效的集成或分立逻辑电路体系来执行。
本公开中已描述了各方面。这些及其他方面均落在所附权利要求的范围之内。

Claims (50)

1.一种方法，包括：
由媒体设备接收用于率自适应算法的多个控制参数中的第一控制参数的值，其中所述率自适应算法监视网络条件并基于所述网络条件和所述多个控制参数调整媒体编码器的编码率，其中所述多个控制参数中的每个控制参数指定控制所述率自适应算法对所述网络条件的响应的阈值或定时值；以及
将所述第一控制参数设为该值。
2.如权利要求1所述的方法，其特征在于，所述媒体设备包括含所述率自适应算法的网际协议多媒体系统多媒体电话服务(MTSI)客户端。
3.如权利要求1所述的方法，其特征在于，所述多个控制参数包括各自与多个服务级别之一相关联的多个因服务而异的控制参数子集，其中所述多个服务级别中的每个服务级别定义用户的不同服务质量，并且其中所述方法还包括：
根据所述多个服务级别中的第一服务级别操作所述媒体设备，其中所述率自适应算法基于所述网络条件和与所述第一服务级别相关联的因服务而异的控制参数子集来调整所述媒体编码器的所述编码率。
4.如权利要求1所述的方法，其特征在于，
所述媒体设备是媒体接收器；以及
所述率自适应算法包括接收器侧率自适应算法并通过向包括所述媒体编码器的媒体传送器发送反馈来调整所述媒体编码器的所述编码率，其中所述反馈指示所述媒体传送器调整所述媒体编码器的所述编码率。
5.如权利要求1所述的方法，其特征在于，
所述媒体设备是包括所述媒体编码器的媒体传送器，以及
所述率自适应算法包括传送器侧率自适应算法。
6.如权利要求1所述的方法，其特征在于，所述媒体编码器是视频编码器。
7.如权利要求1所述的方法，其特征在于，所述第一控制参数是从包括以下参数的组中选择的：
下限分组丢失率阈值；
上限分组丢失率阈值；
第一分组丢失率测量窗，指定所述率自适应算法在其上测量所述下限分组丢失率阈值的滑动窗的历时；以及
第二分组丢失率测量窗，指定所述率自适应算法在其上测量所述上限分组丢失率阈值的滑动窗的历时。
8.如权利要求1所述的方法，其特征在于，所述第一控制参数是从包括以下参数的组中选择的：
最小目标用尽余量，指定媒体分组到达与其所恰适调度的用尽时间之间的最小可接受时间；
最大目标用尽余量，指定媒体分组到达与其所恰适调度的用尽时间之间的上限时间阈值；
分组到达时间分布的百分点值，指定用于测量用尽余量的百分数；
第一目标用尽窗口，指定所述率自适应算法在其上观测和演算媒体分组到达与用尽之间的余量以供用于所述最小目标用尽余量的滑动窗的历时；以及
第二目标用尽窗口，指定所述率自适应算法在其上观测和演算媒体分组到达与用尽之间的余量以供用于所述最大目标用尽余量的滑动窗的历时。
9.如权利要求1所述的方法，其特征在于，所述第一控制参数是从包括以下参数的组中选择的：
上限分组丢失数目阈值；
分组丢失数目测量窗，指定所述率自适应算法在其上观测和演算用于与所述上限分组丢失数目阈值作比较的分组丢失的滑动窗的历时；以及
最大实时传输协议(RTP)间隙值，其为在未收到媒体分组的情况下直到所述率自适应算法声明突发条件之前可流逝的时间历时方面的因子。
10.如权利要求1所述的方法，其特征在于，所述第一控制参数是从包括用于减小最大率限制的第一最小反馈间隔值和用于增加最大率限制的第二最小反馈间隔值的组中选择的。
11.如权利要求1所述的方法，其特征在于，所述第一控制参数是从包括去拥塞值和去拥塞时间值的组中选择的。
12.如权利要求1所述的方法，其特征在于，所述第一控制参数是从包括最小比特率、最小帧率、和最小图像质量的组中选择的。
13.如权利要求1所述的方法，其特征在于，所述第一控制参数是从包括以下参数的组中选择的：
斜坡升速率，指定所述率自适应算法将目标编码率增加到较高率限制的速率；以及
斜坡降速率，指定所述率自适应算法将所述目标编码率减小到较低率限制的速率的。
14.如权利要求1所述的方法，其特征在于，所述第一控制参数是从包括上行链路率自适应参数、丢弃保持参数、以及初始编解码器速率的组中选择的。
15.一种装置，包括：
包括多个控制参数的率自适应模块，其中所述率自适应模块监视网络条件并基于所述网络条件和所述多个控制参数调整媒体编码器的编码率，其中所述多个控制参数中的每个控制参数指定控制所述率自适应模块对所述网络条件的响应的阈值或定时值；以及
客户端，其接收所述多个控制参数中的第一控制参数的值并将所述第一控制参数设为该值。
16.如权利要求15所述的装置，其特征在于，所述客户端包括含所述率自适应模块的网际协议多媒体系统多媒体电话服务(MTSI)客户端。
17.如权利要求15所述的装置，其特征在于，
所述多个控制参数包括各自与多个服务级别之一相关联的多个因服务而异的控制参数子集，其中所述多个服务级别中的每个服务级别定义用户的不同服务质量，
所述率自适应模块基于所述网络条件和与所述多个服务级别中的第一服务级别相关联的因服务而异的控制参数子集来调整所述媒体编码器的所述编码率。
18.如权利要求15所述的装置，其特征在于，
所述装置是媒体接收器；以及
所述率自适应模块包括接收器侧率自适应模块并通过向包括所述媒体编码器的媒体传送器发送反馈来调整所述媒体编码器的所述编码率，其中所述反馈指示所述媒体传送器调整所述媒体编码器的所述编码率。
19.如权利要求15所述的装置，其特征在于，还包括所述媒体编码器，
其中所述装置是媒体传送器，以及
所述率自适应模块包括传送器侧率自适应模块。
20.如权利要求15所述的装置，其特征在于，所述媒体编码器是视频编码器。
21.如权利要求15所述的装置，其特征在于，所述第一控制参数是从包括以下参数的组中选择的：
下限分组丢失率阈值；
上限分组丢失率阈值；
第一分组丢失率测量窗，指定所述率自适应模块在其上测量所述下限分组丢失率阈值的滑动窗的历时；以及
第二分组丢失率测量窗，指定所述率自适应模块在其上测量所述上限分组丢失率阈值的滑动窗的历时。
22.如权利要求15所述的装置，其特征在于，所述第一控制参数是从包括以下参数的组中选择的：
最小目标用尽余量，指定媒体分组到达与其所恰适调度的用尽时间之间的最小可接受时间；
最大目标用尽余量，指定媒体分组到达与其所恰适调度的用尽时间之间的上限时间阈值；
分组到达时间分布的百分点值，指定用于测量用尽余量的百分数；
第一目标用尽窗口，指定所述率自适应模块在其上观测和演算媒体分组到达与用尽之间的余量以供用于所述最小目标用尽余量的滑动窗的历时；以及
第二目标用尽窗口，指定所述率自适应模块在其上观测和演算媒体分组到达与用尽之间的余量以供用于所述最大目标用尽余量的滑动窗的历时。
23.如权利要求15所述的装置，其特征在于，所述第一控制参数是从包括以下参数的组中选择的：
上限分组丢失数目阈值；
分组丢失数目测量窗，指定所述率自适应模块在其上观测和演算用于与所述上限分组丢失数目阈值作比较的分组丢失的滑动窗的历时；以及
最大实时传输协议(RTP)间隙值，其为在未收到媒体分组的情况下直到所述率自适应模块声明突发条件之前可流逝的时间历时方面的因子。
24.如权利要求15所述的装置，其特征在于，所述第一控制参数是从包括用于减小最大率限制的第一最小反馈间隔值和用于增加最大率限制的第二最小反馈间隔值的组中选择的。
25.如权利要求15所述的装置，其特征在于，所述第一控制参数是从包括去拥塞值和去拥塞时间值的组中选择的。
26.如权利要求15所述的装置，其特征在于，所述第一控制参数是从包括最小比特率、最小帧率、和最小图像质量的组中选择的。
27.如权利要求15所述的装置，其特征在于，所述第一控制参数是从包括以下参数的组中选择的：
斜坡升速率，指定所述率自适应模块将目标编码率增加到较高率限制的速率；以及
斜坡降速率，指定所述率自适应模块将所述目标编码率减小到较低率限制的速率的。
28.如权利要求15所述的装置，其特征在于，所述第一控制参数是从包括上行链路率自适应参数、丢弃或保持参数、以及初始编解码器速率的组中选择的。
29.如权利要求13所述的装置，其特征在于，所述装置包括无线通信设备手持机。
30.如权利要求13所述的装置，其特征在于，所述装置包括一个或多个集成电路设备。
31.一种设备，包括：
用于由媒体设备接收用于率自适应算法的多个控制参数中的第一控制参数的值的装置，其中所述率自适应算法监视网络条件并基于所述网络条件和所述多个控制参数调整媒体编码器的编码率，其中所述多个控制参数中的每个控制参数指定控制所述率自适应算法对所述网络条件的响应的阈值或定时值；以及
用于将所述第一控制参数设为该值的装置。
32.如权利要求31所述的设备，其特征在于，所述设备包括网际协议多媒体系统多媒体电话服务(MTSI)客户端。
33.如权利要求31所述的设备，其特征在于，所述多个控制参数包括各自与多个服务级别之一相关联的多个因服务而异的控制参数子集，其中所述多个服务级别中的每个服务级别定义用户的不同服务质量，并且其中所述设备还包括：
用于根据所述多个服务级别中的第一服务级别操作所述媒体设备的装置，其中所述率自适应算法基于所述网络条件和与所述第一服务级别相关联的因服务而异的控制参数子集来调整所述媒体编码器的所述编码率。
34.如权利要求31所述的设备，其特征在于，
所述设备是媒体接收器，以及
所述率自适应算法包括接收器侧率自适应算法并通过向包括所述媒体编码器的媒体传送器发送反馈来调整所述媒体编码器的所述编码率，其中所述反馈指示所述媒体传送器调整所述媒体编码器的所述编码率。
35.如权利要求31所述的设备，其特征在于，
所述设备是包括所述媒体编码器的媒体传送器，以及
所述率自适应算法包括传送器侧率自适应算法。
36.如权利要求31所述的设备，其特征在于，所述媒体编码器是视频编码器。
37.一种包括指令的计算机可读存储介质，所述指令用于使可编程处理器：
由媒体设备接收用于率自适应算法的多个控制参数中的第一控制参数的值，其中所述率自适应算法监视网络条件并基于所述网络条件和所述多个控制参数调整媒体编码器的编码率，其中所述多个控制参数中的每个控制参数指定控制所述率自适应算法对所述网络条件的响应的阈值或定时值；以及
将所述第一控制参数设为该值。
38.如权利要求37所述的计算机可读存储介质，其特征在于，所述媒体设备包括含所述率自适应算法的网际协议多媒体系统多媒体电话服务(MTSI)客户端。
39.如权利要求37所述的计算机可读存储介质，其特征在于，所述多个控制参数包括各自与多个服务级别之一相关联的多个因服务而异的控制参数子集，其中所述多个服务级别中的每个服务级别定义用户的不同服务质量，并且还包括使可编程处理器进行以下动作的指令：
根据所述多个服务级别中的第一服务级别操作所述媒体设备，其中所述率自适应算法基于所述网络条件和与所述第一服务级别相关联的因服务而异的控制参数子集来调整所述媒体编码器的所述编码率。
40.如权利要求37所述的计算机可读存储介质，其特征在于：
所述媒体设备是媒体接收器，以及
所述率自适应算法包括接收器侧率自适应算法并通过向包括所述媒体编码器的媒体传送器发送反馈来调整所述媒体编码器的所述编码率，其中所述反馈指示所述媒体传送器调整所述媒体编码器的所述编码率。
41.如权利要求37所述的计算机可读存储介质，其特征在于：
所述媒体设备是包括所述媒体编码器的媒体传送器，以及
所述率自适应算法包括传送器侧率自适应算法。
42.如权利要求37所述的计算机可读存储介质，其特征在于，所述媒体编码器是视频编码器。
43.如权利要求37所述的计算机可读存储介质，其特征在于，所述第一控制参数是从包括以下参数的组中选择的：
下限分组丢失率阈值；
上限分组丢失率阈值；
第一分组丢失率测量窗，指定所述率自适应算法在其上测量所述下限分组丢失率阈值的滑动窗的历时；以及
第二分组丢失率测量窗，指定所述率自适应算法在其上测量所述上限分组丢失率阈值的滑动窗的历时。
44.如权利要求37所述的计算机可读存储介质，其特征在于，所述第一控制参数是从包括以下参数的组中选择的：
最小目标用尽余量，指定媒体分组到达与其所恰适调度的用尽时间之间的最小可接受时间；
最大目标用尽余量，指定媒体分组到达与其所恰适调度的用尽时间之间的上限时间阈值；
分组到达时间分布的百分点值，指定用于测量用尽余量的百分数；
第一目标用尽窗口，指定所述率自适应算法在其上观测和演算媒体分组到达与用尽之间的余量以供用于所述最小目标用尽余量的滑动窗的历时；以及
第二目标用尽窗口，指定所述率自适应算法在其上观测和演算媒体分组到达与用尽之间的余量以供用于所述最大目标用尽余量的滑动窗的历时。
45.如权利要求37所述的计算机可读存储介质，其特征在于，所述第一控制参数是从包括以下参数的组中选择的：
上限分组丢失数目阈值；
分组丢失数目测量窗，指定所述率自适应算法在其上观测和演算用于与所述上限分组丢失数目阈值作比较的分组丢失的滑动窗的历时；以及
最大实时传输协议(RTP)间隙值，其为在未收到媒体分组的情况下直到所述率自适应算法声明突发条件之前可流逝的时间历时方面的因子。
46.如权利要求37所述的计算机可读存储介质，其特征在于，所述第一控制参数是从包括用于减小最大率限制的第一最小反馈间隔值和用于增加最大率限制的第二最小反馈间隔值的组中选择的。
47.如权利要求37所述的计算机可读存储介质，其特征在于，所述第一控制参数是从包括去拥塞值和去拥塞时间值的组中选择的。
48.如权利要求37所述的计算机可读存储介质，其特征在于，所述第一控制参数是从包括最小比特率、最小帧率、和最小图像质量的组中选择的。
49.如权利要求37所述的计算机可读存储介质，其特征在于，所述第一控制参数是从包括以下参数的组中选择的：
斜坡升速率，指定所述率自适应算法将目标编码率增加到较高率限制的速率的；以及
斜坡降速率，指定所述率自适应算法将所述目标编码率减小到较低率限制的速率的。
50.如权利要求37所述的计算机可读存储介质，其特征在于，所述第一控制参数是从包括上行链路率自适应参数、丢弃或保持参数、以及初始编解码器速率的组中选择的。
CN201080037034.8A 2009-06-16 2010-06-16 管理视频自适应算法 Active CN102484748B (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US18739609P 2009-06-16 2009-06-16
US61/187,396 2009-06-16
US23256209P 2009-08-10 2009-08-10
US61/232,562 2009-08-10
US12/756,495 2010-04-08
US12/756,495 US8537699B2 (en) 2009-06-16 2010-04-08 Managing video adaptation algorithms
PCT/US2010/038756 WO2010148048A1 (en) 2009-06-16 2010-06-16 Managing video adaptation algorithms

Publications (2)

Publication Number Publication Date
CN102484748A true CN102484748A (zh) 2012-05-30
CN102484748B CN102484748B (zh) 2015-09-02

Family

ID=43306406

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080037034.8A Active CN102484748B (zh) 2009-06-16 2010-06-16 管理视频自适应算法

Country Status (13)

Country Link
US (1) US8537699B2 (zh)
EP (1) EP2443831B1 (zh)
JP (1) JP5832997B2 (zh)
KR (1) KR101296306B1 (zh)
CN (1) CN102484748B (zh)
AU (1) AU2010260097A1 (zh)
BR (1) BRPI1013818B1 (zh)
ES (1) ES2687797T3 (zh)
HU (1) HUE039634T2 (zh)
IL (1) IL217062A0 (zh)
SG (1) SG177263A1 (zh)
TW (1) TWI523536B (zh)
WO (1) WO2010148048A1 (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104202614A (zh) * 2014-08-15 2014-12-10 小米科技有限责任公司 一种基于网络环境调整视频画质的方法及装置
CN104253967A (zh) * 2014-09-26 2014-12-31 厦门亿联网络技术股份有限公司 一种实时视频通信传输控制方法
CN104770042A (zh) * 2012-10-29 2015-07-08 高通股份有限公司 用于增强视频电话以实现本地qos的方法
CN104813638A (zh) * 2012-11-30 2015-07-29 阿尔卡特朗讯公司 用于接收http自适应流视频的方法和客户端装置
CN104980818A (zh) * 2014-04-02 2015-10-14 想象技术有限公司 增强的媒体质量管理
CN106664437A (zh) * 2014-07-10 2017-05-10 英特尔公司 用于无线视频的自适应比特率流传输
CN106937073A (zh) * 2015-12-29 2017-07-07 展讯通信（上海）有限公司 基于VoLTE的视频通话码率调整方法、装置及移动终端
CN107211158A (zh) * 2014-11-05 2017-09-26 三星电子株式会社 用于控制在多个终端当中的屏幕共享的方法和设备、以及记录介质
CN108206925A (zh) * 2016-12-16 2018-06-26 展讯通信（上海）有限公司 多路视频通话的实现方法、装置及多通终端
US10085050B2 (en) 2014-08-15 2018-09-25 Xiaomi Inc. Method and apparatus for adjusting video quality based on network environment
WO2020258427A1 (zh) * 2019-06-28 2020-12-30 合肥工业大学 一种QoE驱动下的VR视频自适应采集与传输方法
US10911750B2 (en) 2016-12-30 2021-02-02 SZ DJI Technology Co., Ltd. System and methods for feedback-based data transmission
US10924745B2 (en) 2016-12-30 2021-02-16 SZ DJI Technology Co., Ltd. Image processing method and device
US11070732B2 (en) 2016-12-30 2021-07-20 SZ DJI Technology Co., Ltd. Method for image processing, device, unmanned aerial vehicle, and receiver
CN114640853A (zh) * 2022-05-18 2022-06-17 滨州市人防工程与指挥保障中心 一种无人机巡航图像处理系统

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10165286B2 (en) 2009-07-08 2018-12-25 Dejero Labs Inc. System and method for automatic encoder adjustment based on transport data
US9756468B2 (en) 2009-07-08 2017-09-05 Dejero Labs Inc. System and method for providing data services on vehicles
US9049271B1 (en) 2009-07-16 2015-06-02 Teradici Corporation Switch-initiated congestion management method
US20120314574A1 (en) * 2009-12-07 2012-12-13 Interdigital Patent Holdings, Inc. Method and apparatus for enabling coder selection and rate adaptation for 3gpp for media streams between a media and a mobile terminal
US10057333B2 (en) * 2009-12-10 2018-08-21 Royal Bank Of Canada Coordinated processing of data by networked computing resources
US20110283014A1 (en) * 2010-05-14 2011-11-17 Rahul Malik Distribution of Multimedia Content over a Network
US8723913B2 (en) 2010-10-07 2014-05-13 T-Mobile Usa, Inc. Rate adaptation for video calling
US8595374B2 (en) * 2010-12-08 2013-11-26 At&T Intellectual Property I, L.P. Method and apparatus for capacity dimensioning in a communication network
PL2649807T3 (pl) * 2010-12-10 2018-09-28 Deutsche Telekom Ag Sposób i aparatura do oceny jakości sygnału wideo podczas kodowania i transmisji sygnału wideo
US9253105B2 (en) * 2010-12-30 2016-02-02 Nokia Technologies Oy Methods and apparatuses for facilitating determination of a state of a receiver buffer
TWI454150B (zh) * 2011-05-06 2014-09-21 Altek Corp 影像檔案的處理方法
WO2013014246A1 (en) * 2011-07-26 2013-01-31 Nec Europe Ltd. A method for controlling the encoding rate of data traffic and a network
US20130304934A1 (en) * 2011-09-29 2013-11-14 Avvasi Inc. Methods and systems for controlling quality of a media session
US20150326941A1 (en) * 2011-09-30 2015-11-12 Jie Gao Software based wireless channel-aware adaptive video bit rate encoding
US9118801B2 (en) 2011-10-24 2015-08-25 T-Mobile Usa, Inc. Optimizing video-call quality of service
US9942580B2 (en) 2011-11-18 2018-04-10 At&T Intellecutal Property I, L.P. System and method for automatically selecting encoding/decoding for streaming media
EP2605469A1 (en) * 2011-12-13 2013-06-19 Thomson Licensing Method and apparatus to control a multipath adaptive streaming session
US9819717B2 (en) * 2011-12-28 2017-11-14 Intel Corporation Video adaptation for content-aware wireless streaming
CA2785205C (en) * 2012-02-24 2019-12-31 Sandvine Incorporated Ulc Systems and methods for traffic management
US9306994B2 (en) * 2012-06-06 2016-04-05 Cisco Technology, Inc. Stabilization of adaptive streaming video clients through rate limiting
CN103582029B (zh) 2012-07-24 2018-05-18 华为技术有限公司 策略控制方法及设备
US9602594B2 (en) 2012-07-31 2017-03-21 Microsoft Technology Licensing, Llc Processing requests
US9516078B2 (en) 2012-10-26 2016-12-06 Cisco Technology, Inc. System and method for providing intelligent chunk duration
EP2784996A1 (en) * 2013-03-27 2014-10-01 British Telecommunications public limited company Deadline driven content delivery
US9167417B2 (en) 2013-05-17 2015-10-20 Nokia Solutions And Networks Oy Application based network information maintenance
US9204421B2 (en) 2013-05-17 2015-12-01 Nokia Solutions And Networks Oy Application configured triggers and push notifications of network information
EP2806633A1 (en) * 2013-05-23 2014-11-26 Alcatel Lucent Method and apparatus for improved network optimization for providing video from a plurality of sources to a plurality of clients
EP3000198B1 (en) * 2013-05-23 2020-04-01 Nokia Solutions and Networks Oy Method and apparatus for optimization of video transmissions
JP5987798B2 (ja) * 2013-08-06 2016-09-07 富士ゼロックス株式会社 情報処理システム、情報処理装置及びプログラム
EP3036959A4 (en) * 2013-08-21 2016-08-03 Ericsson Telefon Ab L M NETWORK-SUPPORTED RATE ADAPTATION
KR102050417B1 (ko) * 2013-09-25 2019-12-17 한화테크윈 주식회사 네트워크 시스템 및 방법
WO2015055368A2 (en) * 2013-10-15 2015-04-23 Nokia Solutions And Networks Oy Application based network information maintenance
KR20150049052A (ko) * 2013-10-29 2015-05-08 삼성에스디에스 주식회사 데이터 전송 장치 및 방법
KR101838082B1 (ko) 2013-11-01 2018-03-13 엘지전자 주식회사 방송 신호를 송신하는 장치, 방송 신호를 수신하는 장치, 방송 신호를 송신하는 방법 및 방송 신호를 수신하는 방법
CN104639953B (zh) * 2013-11-15 2017-11-03 成都鼎桥通信技术有限公司 音视频分发链路的码率自适应方法和音视频分发设备
US9584759B2 (en) * 2014-02-14 2017-02-28 Telefonaktiebolaget Lm Ericsson (Publ) Determination of bit rate request
CN104954888B (zh) * 2014-03-24 2018-03-20 中国电信股份有限公司 调整流媒体码流发送速率的方法和装置
US9438853B2 (en) * 2014-07-29 2016-09-06 Qualcomm Incorporated Receiver driven up-switching in video telephony
US10298650B2 (en) 2016-04-20 2019-05-21 Vasona Networks, Inc. Maximum sustainable encoding bit rates for video downloads
EP3449588B1 (en) * 2016-04-29 2022-01-05 Telefonaktiebolaget LM Ericsson (publ) Wireless device specific maximum code rate limit adjustment
WO2018212613A1 (en) * 2017-05-17 2018-11-22 Samsung Electronics Co., Ltd. Tcp proxy device-assisted communication method and apparatus in wireless communication
US10979744B2 (en) * 2017-11-03 2021-04-13 Nvidia Corporation Method and system for low latency high frame rate streaming
CN109361937A (zh) * 2018-09-25 2019-02-19 江苏电力信息技术有限公司 一种大屏多路推流码率自动调整方法
US11539960B2 (en) 2019-10-01 2022-12-27 Sony Interactive Entertainment Inc. Game application providing scene change hint for encoding at a cloud gaming server
US11865434B2 (en) 2019-10-01 2024-01-09 Sony Interactive Entertainment Inc. Reducing latency in cloud gaming applications by overlapping receive and decode of video frames and their display at the client
US11110349B2 (en) 2019-10-01 2021-09-07 Sony Interactive Entertainment Inc. Dynamic client buffering and usage of received video frames for cloud gaming
US11344799B2 (en) * 2019-10-01 2022-05-31 Sony Interactive Entertainment Inc. Scene change hint and client bandwidth used at encoder for handling video frames after a scene change in cloud gaming applications
US11446572B2 (en) 2019-10-01 2022-09-20 Sony Interactive Entertainment Inc. Early scan-out of server display buffer at flip-time for cloud gaming applications
CN111212308B (zh) * 2020-01-15 2020-09-25 珠海安联锐视科技股份有限公司 一种无线网络自适应调节的方法
NO346978B1 (en) 2021-11-26 2023-03-20 Pexip AS Method, system and computer program product for upspeeding in a videoconferencing session
WO2024063168A1 (ko) * 2022-09-19 2024-03-28 삼성전자 주식회사 라이브 비디오 분석에 대한 네트워크 자원 및 연산 자원 조인트 스케줄링을 위한 방법 및 장치

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1202487A2 (en) * 2000-10-31 2002-05-02 Kabushiki Kaisha Toshiba Data transmission apparatus and method
US20030152032A1 (en) * 2002-02-14 2003-08-14 Kddi Corporation Video information transmission system, and apparatus and program used for video information transmission system
CN101057439A (zh) * 2004-11-17 2007-10-17 夏普株式会社 发送器、接收器以及通信系统
WO2009008829A1 (en) * 2007-07-09 2009-01-15 Telefonaktiebolaget L M Ericsson (Publ) Adaptive rate control in a communications system

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020057336A1 (en) 2000-03-02 2002-05-16 Gaul Michael A. Interactive program guide configuration system
SE0301053D0 (sv) 2003-04-07 2003-04-07 Ericsson Telefon Ab L M Method and system in a communications network
US20060072837A1 (en) * 2003-04-17 2006-04-06 Ralston John D Mobile imaging application, device architecture, and service platform architecture
US7400588B2 (en) * 2003-08-01 2008-07-15 Thomson Licensing Dynamic rate adaptation using neural networks for transmitting video data
US8842555B2 (en) 2005-10-21 2014-09-23 Qualcomm Incorporated Methods and systems for adaptive encoding of real-time information in packet-switched wireless communication systems
ITMI20052238A1 (it) 2005-11-23 2007-05-24 Marconi Comm Spa Un metodo e uno schema di trasporto a pacchetto per la realizzazione di meccanismi di pilicing distribuito
KR20120034084A (ko) 2007-01-10 2012-04-09 콸콤 인코포레이티드 멀티미디어 전화 통신을 위한 컨텐트- 및 링크-의존 코딩 적응 구조
EP2122999B1 (en) * 2007-01-18 2016-03-09 Telefonaktiebolaget LM Ericsson (publ) Dividing rtcp bandwidth between compound and non- compound rtcp packets
MX2009013434A (es) * 2007-07-06 2010-01-15 Ericsson Telefon Ab L M Control de congestion en un nodo de transmision.
US8095680B2 (en) * 2007-12-20 2012-01-10 Telefonaktiebolaget Lm Ericsson (Publ) Real-time network transport protocol interface method and apparatus
US8027206B2 (en) * 2009-01-30 2011-09-27 Qualcomm Incorporated Bit line voltage control in spin transfer torque magnetoresistive random access memory

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1202487A2 (en) * 2000-10-31 2002-05-02 Kabushiki Kaisha Toshiba Data transmission apparatus and method
US20030152032A1 (en) * 2002-02-14 2003-08-14 Kddi Corporation Video information transmission system, and apparatus and program used for video information transmission system
CN101057439A (zh) * 2004-11-17 2007-10-17 夏普株式会社 发送器、接收器以及通信系统
WO2009008829A1 (en) * 2007-07-09 2009-01-15 Telefonaktiebolaget L M Ericsson (Publ) Adaptive rate control in a communications system

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104770042A (zh) * 2012-10-29 2015-07-08 高通股份有限公司 用于增强视频电话以实现本地qos的方法
CN104770042B (zh) * 2012-10-29 2018-09-28 高通股份有限公司 用于增强视频电话以实现本地qos的方法
CN104813638A (zh) * 2012-11-30 2015-07-29 阿尔卡特朗讯公司 用于接收http自适应流视频的方法和客户端装置
CN104980818A (zh) * 2014-04-02 2015-10-14 想象技术有限公司 增强的媒体质量管理
CN106664437A (zh) * 2014-07-10 2017-05-10 英特尔公司 用于无线视频的自适应比特率流传输
CN106664437B (zh) * 2014-07-10 2020-04-10 英特尔公司 一种用于对视频内容进行编码以进行无线传输的计算机实现的方法、系统、设备以及可读介质
US10085050B2 (en) 2014-08-15 2018-09-25 Xiaomi Inc. Method and apparatus for adjusting video quality based on network environment
CN104202614A (zh) * 2014-08-15 2014-12-10 小米科技有限责任公司 一种基于网络环境调整视频画质的方法及装置
CN104202614B (zh) * 2014-08-15 2016-03-09 小米科技有限责任公司 一种基于网络环境调整视频画质的方法及装置
CN104253967A (zh) * 2014-09-26 2014-12-31 厦门亿联网络技术股份有限公司 一种实时视频通信传输控制方法
CN107211158A (zh) * 2014-11-05 2017-09-26 三星电子株式会社 用于控制在多个终端当中的屏幕共享的方法和设备、以及记录介质
US10671336B2 (en) 2014-11-05 2020-06-02 Samsung Electronics Co., Ltd. Method and device for controlling screen sharing among plurality of terminals, and recording medium
CN107211158B (zh) * 2014-11-05 2020-09-29 三星电子株式会社 用于控制在多个终端当中的屏幕共享的方法和设备、以及记录介质
CN106937073B (zh) * 2015-12-29 2019-10-15 展讯通信（上海）有限公司 基于VoLTE的视频通话码率调整方法、装置及移动终端
CN106937073A (zh) * 2015-12-29 2017-07-07 展讯通信（上海）有限公司 基于VoLTE的视频通话码率调整方法、装置及移动终端
CN108206925A (zh) * 2016-12-16 2018-06-26 展讯通信（上海）有限公司 多路视频通话的实现方法、装置及多通终端
US10911750B2 (en) 2016-12-30 2021-02-02 SZ DJI Technology Co., Ltd. System and methods for feedback-based data transmission
US10924745B2 (en) 2016-12-30 2021-02-16 SZ DJI Technology Co., Ltd. Image processing method and device
US11070732B2 (en) 2016-12-30 2021-07-20 SZ DJI Technology Co., Ltd. Method for image processing, device, unmanned aerial vehicle, and receiver
WO2020258427A1 (zh) * 2019-06-28 2020-12-30 合肥工业大学 一种QoE驱动下的VR视频自适应采集与传输方法
US11831883B2 (en) 2019-06-28 2023-11-28 Hefei University Of Technology QoE-based adaptive acquisition and transmission method for VR video
CN114640853A (zh) * 2022-05-18 2022-06-17 滨州市人防工程与指挥保障中心 一种无人机巡航图像处理系统

Also Published As

Publication number Publication date
BRPI1013818A2 (pt) 2016-04-12
EP2443831B1 (en) 2018-07-18
CN102484748B (zh) 2015-09-02
KR20120031070A (ko) 2012-03-29
TW201112768A (en) 2011-04-01
WO2010148048A1 (en) 2010-12-23
BRPI1013818B1 (pt) 2021-01-19
TWI523536B (zh) 2016-02-21
JP2012530469A (ja) 2012-11-29
IL217062A0 (en) 2012-02-29
JP5832997B2 (ja) 2015-12-16
ES2687797T3 (es) 2018-10-29
SG177263A1 (en) 2012-02-28
US8537699B2 (en) 2013-09-17
HUE039634T2 (hu) 2019-01-28
EP2443831A1 (en) 2012-04-25
KR101296306B1 (ko) 2013-08-14
AU2010260097A1 (en) 2012-01-19
US20100316066A1 (en) 2010-12-16

Similar Documents

Publication Publication Date Title
CN102484748B (zh) 管理视频自适应算法
Gross et al. Cross-layer optimization of OFDM transmission systems for MPEG-4 video streaming
TWI501592B (zh) 在通信網路中對資料優先順序排序用於智慧丟棄的系統和方法
US9538220B2 (en) Video streaming quality of experience degradation control using a video quality metric
US8893198B2 (en) Systems and methods for prioritization of data for intelligent discard in a communication network
US8665724B2 (en) Systems and methods for prioritizing and scheduling packets in a communication network
EP1719302B8 (en) Fast signalling procedure for streaming services quality of service managing in wireless networks
CA2786200C (en) Systems and methods for prioritization of data for intelligent discard in a communication network
CN103733680B (zh) 用于控制无线上行会话的方法和装置
US20130298170A1 (en) Video streaming quality of experience recovery using a video quality metric
US20130290492A1 (en) State management for video streaming quality of experience degradation control and recovery using a video quality metric
EP3968691A1 (en) Resource management concept
WO2006020834A9 (en) Multicast and broadcast streaming method and system
CN101578842A (zh) 用于多媒体电话的依赖于内容和链路的编码自适应
WO2014209493A1 (en) State management for video streaming quality of experience degradation control and recovery using a video quality metric
CN100394743C (zh) 数据传输率调节系统及其使用的数据传输率调节方法
WO2014209494A1 (en) Video streaming quality of experience degradation control using a video quality metric
WO2014209495A1 (en) Video streaming quality of experience recovery using a video quality metric
Falik et al. Transmission algorithm for video streaming over cellular networks

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant