CN101686383B - 通过网络传输媒体的方法及系统 - Google Patents

通过网络传输媒体的方法及系统 Download PDF

Info

Publication number
CN101686383B
CN101686383B CN200810165775.9A CN200810165775A CN101686383B CN 101686383 B CN101686383 B CN 101686383B CN 200810165775 A CN200810165775 A CN 200810165775A CN 101686383 B CN101686383 B CN 101686383B
Authority
CN
China
Prior art keywords
packet
video
rate
group
utility curve
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN200810165775.9A
Other languages
English (en)
Other versions
CN101686383A (zh
Inventor
徐力
钱浙滨
张�育
刘萍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Carrier Fire and Security Americas Corp
Original Assignee
UTC Fire and Security Americas Corp Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by UTC Fire and Security Americas Corp Inc filed Critical UTC Fire and Security Americas Corp Inc
Priority to CN200810165775.9A priority Critical patent/CN101686383B/zh
Priority to US12/564,303 priority patent/US8228982B2/en
Publication of CN101686383A publication Critical patent/CN101686383A/zh
Application granted granted Critical
Publication of CN101686383B publication Critical patent/CN101686383B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • H04L47/24Traffic characterised by specific attributes, e.g. priority or QoS
    • H04L47/2416Real-time traffic
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • H04L47/25Flow control; Congestion control with rate being modified by the source upon detecting a change of network conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • H04L47/38Flow control; Congestion control by adapting coding or compression rate
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402Monitoring of the downstream path of the transmission network, e.g. bandwidth available
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2404Monitoring of server processing errors or hardware failure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • H04N21/64322IP
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64723Monitoring of network processes or resources, e.g. monitoring of network load

Abstract

一种通过网络传输媒体的方法,该方法包括:把源媒体编码成若干数据包,监测一当前组数据包的实时传输状态,绘制可以反映出不同传输速率下传输质量的实效曲线。根据所述一当前组数据包的实时传输状态和所述实效曲线计算下一组数据包的目标传输速率,并为所述下一组数据包确定一个控制策略,以实现该目标传输速率。

Description

通过网络传输媒体的方法及系统
技术领域
本发明涉及媒体传输系统及方法。
背景技术
媒体流用来通过网络在发送端和接收端之间传输媒体,其中网络可包括国际互联网、企业内部网或局域网等等,媒体包括视频、音频或其他多媒体。例如,视频流通过网络来传输视频。因为视频的尺寸通常比较大,尤其是实时视频,通常在网络传输的过程中需占据较大的网络带宽。当对某一个视频流所分配的带宽不足时,可能会出现丢包,从而导致在接收端无法重现该视频流。如何在有限的网络带宽内传输视频并保证视频质量一个研究的课题。
比如,一个安防系统通常在不同的位置设置摄像装置,用以记录不同位置和角度的视频。通过编码器对这些视频进行编码,然后通过网络传输给解码器。每个视频流都需占据网络的一些带宽,如果网络出现拥堵,其中一个视频流分配的带宽不足,视频数据会被丢失,则解码器无法还原该视频,整个安防系统存在缺陷。
发明内容
本发明的目的在于提供一种实时监测网络状况,并调整媒体流传输速率以适应网络带宽变化的方法和控制系统。
本发明提供一种通过网络传输媒体的方法,该方法包括:把源媒体编码成若干数据包,监测一当前组数据包的实时传输状态,绘制可以反映出不同传输速率下传输质量的实效曲线。根据所述一当前组数据包的实时传输状态和所述实效曲线计算下一组数据包的目标传输速率,并为所述下一组数据包确定一个控制策略,以实现该目标传输速率。
本发明还提供一种控制系统,包括:一可将视频编码成若干可选择性层的视频编码器;一用来测试视频流当前组数据包的实时传输状态的网络测量模块;一从网络测量模块获得实时传输状态信息的速率分配模块,速率分配模块绘制反映不同选择性图层的视频流质量的实效曲线,速率分配模块根据当前组数据包的实时传输状态和实效曲线计算下一组数据包的目标传输速率;以及一依据所述目标传输速率确定控制策略的优化模块。
附图说明
通过结合附图对于本发明的实施例进行描述,可以更好地理解本发明,在附图中:
图1是依照本发明一种视频流系统的一个实施例,该系统通过网络传输若干视频流。
图2是图1中一个视频流的示意性结构框图。
图3是图2所示视频流的一个实效曲线示意图。
图4示意一组编码图片组。
图5是依据图4中编码图片组所设定的选择层示意图。
图6为图1中视频流系统里不同视频流的实效曲线示意图。
具体实施方式
图1是依据本发明一个实施例通过网络11传输媒体的媒体流系统10。该媒体流系统10应用于视频监控系统,其中传输的媒体是视频,网络11为一局域网。若干个网络相机(未图示)录制不同视角的视频,该录制的视频在图中标记为源视频12,然后传输至编码器14进行编码,已编码的视频通过网络11传输,然后由各自对应的接收器16接收。每条由源视频12传输给相应的接收器16的传输流为一个“视频流”。在图1所示实施例中,媒体流系统10拥有同样数量的源视频12和接收器16,而且源视频12和接收器16是一一对应关系。在其他实施例中,若干接收器16通过网络11存取同一源视频12,形成若干个视频流;或一个接收器16通过网络11存取若干个源视频12,形成若干个视频流。每个视频流还包括一个实时控制模块18。每个控制模块18控制相应的视频流的实时传输速率。
图2显示的是图1的一个视频流的示意性框图。源视频12传输给编码器14,编码器14把源视频12压缩并编码成一系列图片组。每个图片组包括一定数量的帧,每个帧含有特定的时序。每一帧然后被打包成若干数据包,数据包通过网络11传输出去,然后被相应的接收器16接收。控制模块18获得当前一组数据包Pi的传输状态,然后确定下一组数据包Pi+1的传输速率。在某些实施例中,每组数据包可以是一个图片组、或同一图片组的一部分、或两个或两个以上邻近图片组的结合。
控制模块18包括一个网络测量模块20、一个速率分配模块22和一个优化模块24。网络测量模块20接收当前组数据包Pi的传输状态信息,然后把该传输状态信息发送给速率分配模块22,速率分配模块22在当前组数据包Pi的传输状态的基础上确定下一组数据包Pi+1的目标传输速率,接着发送Pi+1的目标传输速率给优化模块24。优化模块24最终确定可实现该下一组数据包Pi+1的目标传输速率的控制方案。
在某些实施例中,该网络测量模块24可位于系统10的应用层、传输层、网络层或网卡的驱动程序中。用网络测量模块24测得的传输状态信息可能包括:丢包、往返迟延时间、发送率(Rs)、接收率(Rr)等。可利用现有的模块测量或设计专门的测量元件测量该传输状态信息。例如,作为一种实施方式,不依赖于时间同步,通过接收器16的反馈信息可测得数据包的往返迟延时间。一旦接收器16接收到当前组数据包Pi,它会把反馈信息发送到网络测量模块20。网络测量模块20获得反馈信息后,始可计算出相应的传送和接收所经历的时间。在另一个实施例中,操作系统10传输层中有一种DCCP/TFRC(数据包拥塞控制协议/TCP友好数据控制)堆栈,用来测试往返迟延时间、丢包率、发送率、接收率等。在又一实施例,实时控制协议的内容可以自行设计从而达到包含所需要的状态信息的目的。
在一个实施例中,当前组数据包Pi的传输速率Rsi依据公式1:
Rsi=∑Sizes/(Tsn-Ts0)                  公式1
其中,∑Sizes是当前组数据包Pi里各数据包尺寸的和,Tsn是编码器14发送该当前组数据包Pi中最后一个数据包的时间,而Ts0是编码器发送该当前组数据包Pi中第一个数据包的时间。作为一种实施方式,Tsn和Ts0可包括在当前组数据包Pi的包头中,并被接收器16读取。
当时组数据包Pi的接收率Rri取决于公式2:
Rri=∑Sizer/Trn-Tr0                  公式2
其中,∑Sizer为接收器16所成功接收到的当前组数据包Pi里各数据包尺寸的和,Tm是接收器16接收到当前组数据包Pi最后一个数据包的时间,Tr0是接收器16接收到当前组数据包Pi的第一个数据包的时间。
分配模块22对所传输的视频流定义一条实效曲线,该实效曲线评估在不同传输速率Rs时所对应的不同的用户满意度。3所示为一个示意性的实效曲线26,该实效曲线26的横坐标为传输速率Rs,纵坐标表示在不同传输速率Rs所对应的用户满意度,该值反映接收端用户对不同发送速率Rs的视频的主观感受。在一个实施例中,网络测量模块20测得当前组数据包Pi的当前实际传输速率Rsi。速率分配模块22根据该当前实际传输速率Rsi和实效曲线26,计算下一组数据包Pi+1的传输速率Rsi+1。最后优化模块24依据该Rsi+1对应的控制方案。
在一个实施例中,编码器14是可分级的视频编码器,比如MPEG-4AVC/H.264标准的解码器。实效曲线26是在该可分级的视频编码器14的基础上建立的。视频流在时间序列上被编码成一系列的图片组。每个图片组包括图4所示的16帧,每帧具有一定的时序和尺寸。该图片组包括独立的I帧和附属的P帧。I帧指那些不需任何前帧或后帧的信息就可单独解码的帧。P帧为解码时需要图片组中前面某一帧或某些帧信息的帧。在图4的示范实施例中,第“0”帧是一个I帧,第“1-15”帧是P帧。
如图4和图5所示,该图片组中的16帧提供16个可选择性传输的层,该16个层是由每一帧的重要性决定的。图5所示每一层中,“1”代表相应的帧在该层中会被发送,“0”相应的帧在该层中不被发送。例如在第一层中,只有第“0”帧被发送到网络11中,此层中发送出去的总尺寸即第“0”帧的大小。在第二层,第“0”帧和第“8”帧被发送到网络11,则该第二层所发送的总尺寸即为第“0”帧和第“8”帧尺寸的和。以些类推,第十六层中全部的16帧都被发送出去,所发送的尺寸即为16个尺寸之和。在图5所示的实施例中,各层中帧的选择的是大致相称的。
在一个实施例中,图3中的实效曲线26的横坐标是由图5中所示的16个层确定的,每一层对应一个传输速率Rs。该传输速率Rs根据公式3计算:
Rs=∑Size/∑T                        公式3
其中,∑Size反映的是相应层中被发送帧的总尺寸,∑T反映的是此层中所有帧的总时间。表1所示为图片组中各层与相应传输速率Rs之间对应关系的一个例子,实效曲线26的横坐标即这16个传输速率Rs确定。
表1
 
帧i 传输速率Rs(Kbps)
0 202.211
1 327.454
2 414.172
3 504.275
4 557.305
5 616.031
6 672.933
7 732.472
8 760.388
9 795.655
10 828.727
11 865.088
12 896.278
13 932.451
14 965.921
15 1002.661
图3中实效曲线26的纵坐标为各层的“有效值”。也就是说,实效曲线26的纵坐标值反映的是接收器16接收到的传输品质,其可根据帧数的重要性来评估。例如,第“0”帧是一个最重要的I帧,其有效值可评估为0.8,因此第一层的有效值是0.8。第“8”帧是一个P帧,且直接依附于第“0”帧,重要性略低于第“0”帧着,则其有效值评估为0.5,因此图5中第二层(包括第“0”和第“8”帧)的有效值是1.3。其他层的有效值可以这种方法计算出来,然后得到16个有效值,从而确定了16个点,以及由这16个点确定的实效曲线26。
分配模块22从传感模块20得到传输速率Rsi和接收率Rri,并在实效曲线26确定与传输速率Rsi最接近的点Ci,然后根据公式4-6确定下一组数据包Pi+1的目标传输速率Rsi+1
Rsi+1=Rsi+k*Rsi(utilityGain-Price)        公式4
Price=(Rsi-Rri)/Rsi                      公式5
UtilityGain=λ*current_gradient/max_gradient         公式6
其中,“k”是由用户经验决定的可变参数,其值在0.1-3之间;“current_gradient”是实效曲线26上Ci点的斜率,“max_gradient”是实效曲线26的最大斜率。“λ”是由用户经验确定的参数;“Price”表示当前配置所花费的网络资源成本。
当接收率Rri等于传输速率Rsi,当前组数据包Pi的网络配置可以被认为是足够的,因此“Price”的值为0。下一组数据包Pi+1的传输速率Rsi+1可适当增加,这种增加与Ci点的斜率和实效曲线26的最大斜率的比值相关。
当接收率Rri小于传输速率Rsi,“Price”的值大于0。此时网络可能出现拥塞等情况,因此下一组数据包Psi+1的传输速率Rsi+1依据公式4减小。
在计算出下一组数据包Pi+1的目标传输速率Rsi+1后,在实效曲线26上找到与目标传输速率Rsi+1对应的点。如果没有完全对应的点,即选择离传输速率Rsi+1最近的传输速率所在点Cj。优化模块24依据点Cj确定一个合适的控制方案。在一个实施例中,优化模块24选择图5中传送点Cj所对应的层传送下一组数据包Pi+1,以实现该传输速率Rsi+1。编码器14对源视频12可以进行时间和/或空间上分层的编码,由此,对于已确定的传输速率Rsi+1,优化模块24选择一个相应的时序上的层,或选择一个相应的分辨率的分层,或选择一个相应的信噪比分层,或选择上述分层方式的组合。
在一个实施例中,系统10的不同视频流具有不同的实效曲线。图6显示了三种视频流的实效曲线36、46、56的示意图,其中3条曲线的有效值应用的是同一标准。第一个实效曲线36对应的是默认分辨率是720*480(D1),帧率是30帧每秒的视频流;第一个实效曲线46对应的默认是分辨率是D1,帧率是15帧每秒的视频流;第一个实效曲线56对应的是默认分辨率是352*240(CIF),帧率是15帧每秒的视频流。每个视频流具有相应的控制器18,分别实时控制其传输速率。
在一个实施例中,控制器18还包括一个供输入用户信息的接口(未图示)。用户可以输入特定的分辨率、或特定的帧率,或特定的关于信噪比等用户信息。
作为一个可供选择的实施例,优化模块24将下一组数据包Pi+1的已确定的传输速率Ri+1发送至解码器14。解码器14据此压缩源视频12,以满足该目标传输速率Ri+1
本发明的逻辑操作可通硬件、软件、固定程序或上述任一组合来实现。在一个实施例中,该逻辑可以由存储在内存里的软件或固定程序来执行。作为一个通过硬件来实现的实施例,本逻辑操作可通过下列任一已有技术或其组合运行:具有一旦得到数据信号就可执行逻辑函数的逻辑门的分立逻辑电路,具有适量的组合逻辑门的专用集成电路(ASIC)、可编程门阵列(PGA)、现场可编程门阵列(FPGA)等等。另外,本发明的范围还包括在硬件或一定形式的软件媒介中以逻辑操作方式实现。
虽然结合特定的实施例对本发明进行了说明,但本领域的技术人员可以理解,对本发明可以作出许多修改和变型。因此,要认识到,权利要求书的意图在于覆盖在本发明真正构思和范围内的所有这些修改和变型。

Claims (13)

1.一种通过网络传输媒体的方法,所述方法包括:
把源媒体编码成若干数据包;
监测当前组数据包的实际传输速率;
绘制可以反映出不同传输速率下传输质量的实效曲线;
通过将当前组数据包的传输速率映射到实效曲线上最接近的点并根据此最接近的点的斜率和实效曲线最大斜率的比值计算出目标传输速率来根据所述当前组数据包的实际传输速率和所述实效曲线计算下一组数据包的目标传输速率;以及
为所述下一组数据包确定一控制策略,以实现该目标传输速率。
2.如权利要求1所述的通过网络传输媒体的方法,其中所述媒体为视频。
3.如权利要求2所述的通过网络传输媒体的方法,其中监测当前组数据包的实际传输速率包括通过接收器监测当前组数据包的传输速率。
4.如权利要求3所述的通过网络传输媒体的方法,其中把源媒体编码成若干数据包包括用可伸缩视频编码器将源视频编码成若干个可选择的层。
5.如权利要求4所述的通过网络传输媒体的方法,其中若干个可选择的层是按照不同图像帧率进行编排的若干帧所构成的。
6.如权利要求4所述的通过网络传输媒体的方法,其中若干个可选择的层是按照不同图像尺寸进行编排的层。
7.如权利要求4所述的通过网络传输媒体的方法,其中若干个可选择的层是不同图像帧率序列和不同图像尺寸序列组合的层。
8.如权利要求4所述的通过网络传输媒体的方法,其中把源视频编码成数据包包括把源视频编码成一系列的图片组,每组图片具有若干帧,而且每个图片组包括独立的I帧和附属的P帧。
9.如权利要求4至8中任何一项所述的通过网络传输媒体的方法,其中绘制视频的实效曲线包括对可选择的不同层,计算其相应的传输速率,并评估其相应的用户满意度。
10.如权利要求4-8任何一项所述的通过网络传输媒体的方法,其中为了得到下一组数据包的目标传输速率所确定的方案包括根据目标传输速率选择适当的层。
11.如权利要求2-8中任何一项所述的通过网络传输媒体的方法,进一步包括在该网络中为每个视频流绘制实效曲线。
12.一种控制系统,包括:
可将视频编码成若干可选择的层的视频编码器;
用来测量视频流当前组数据包的实际传输速率的网络测量模块;
从网络测量模块获得实际传输速率的速率分配模块,速率分配模块绘制反映不同可选择的层的视频流质量的实效曲线,速率分配模块通过将当前组数据包的传输速率映射到实效曲线上最接近的点并根据此最接近的点的斜率和实效曲线最大斜率的比值计算出目标传输速率来根据当前组数据包的实际传输速率和实效曲线计算下一组数据包的目标传输速率;以及
依据所述目标传输速率确定控制策略的优化模块。
13.如权利要求12所述的控制系统,其中速率分配模块包括供输入应用参数的用户接口。
CN200810165775.9A 2008-09-23 2008-09-23 通过网络传输媒体的方法及系统 Expired - Fee Related CN101686383B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN200810165775.9A CN101686383B (zh) 2008-09-23 2008-09-23 通过网络传输媒体的方法及系统
US12/564,303 US8228982B2 (en) 2008-09-23 2009-09-22 Adaptive video streaming system and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN200810165775.9A CN101686383B (zh) 2008-09-23 2008-09-23 通过网络传输媒体的方法及系统

Publications (2)

Publication Number Publication Date
CN101686383A CN101686383A (zh) 2010-03-31
CN101686383B true CN101686383B (zh) 2013-05-01

Family

ID=42037645

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200810165775.9A Expired - Fee Related CN101686383B (zh) 2008-09-23 2008-09-23 通过网络传输媒体的方法及系统

Country Status (2)

Country Link
US (1) US8228982B2 (zh)
CN (1) CN101686383B (zh)

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007106844A2 (en) 2006-03-14 2007-09-20 Divx, Inc. Federated digital rights management scheme including trusted systems
US8180029B2 (en) 2007-06-28 2012-05-15 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US11095583B2 (en) 2007-06-28 2021-08-17 Voxer Ip Llc Real-time messaging method and apparatus
US8997161B2 (en) * 2008-01-02 2015-03-31 Sonic Ip, Inc. Application enhancement tracks
FR2932938B1 (fr) * 2008-06-19 2012-11-16 Canon Kk Procede et dispositif de transmission de donnees
US8510303B2 (en) 2009-01-07 2013-08-13 Divx, Llc Singular, collective and automated creation of a media guide for online content
KR101557504B1 (ko) * 2009-04-13 2015-10-07 삼성전자주식회사 채널 적응형 비디오 전송 방법, 이를 이용한 장치 및 이를 제공하는 시스템
TWI389569B (zh) * 2009-07-21 2013-03-11 Acer Inc 視訊會議訊號處理系統
EP2507995A4 (en) 2009-12-04 2014-07-09 Sonic Ip Inc SYSTEMS AND METHODS FOR TRANSPORTING ELEMENTARY BIT TRAIN CRYPTOGRAPHIC MATERIAL
US10448083B2 (en) * 2010-04-06 2019-10-15 Comcast Cable Communications, Llc Streaming and rendering of 3-dimensional video
US11711592B2 (en) 2010-04-06 2023-07-25 Comcast Cable Communications, Llc Distribution of multiple signals of video content independently over a network
EP2448265A1 (en) 2010-10-26 2012-05-02 Google, Inc. Lip synchronization in a video conference
CN102547269A (zh) * 2010-12-31 2012-07-04 上海讯垒网络科技有限公司 网络视频浏览方法
US8914534B2 (en) 2011-01-05 2014-12-16 Sonic Ip, Inc. Systems and methods for adaptive bitrate streaming of media stored in matroska container files using hypertext transfer protocol
US8837578B2 (en) * 2011-03-16 2014-09-16 Verizon Patent And Licensing Inc. MPEG-W decoder
US9210302B1 (en) 2011-08-10 2015-12-08 Google Inc. System, method and apparatus for multipoint video transmission
US9467708B2 (en) 2011-08-30 2016-10-11 Sonic Ip, Inc. Selection of resolutions for seamless resolution switching of multimedia content
US8964977B2 (en) 2011-09-01 2015-02-24 Sonic Ip, Inc. Systems and methods for saving encoded media streamed using adaptive bitrate streaming
US8909922B2 (en) 2011-09-01 2014-12-09 Sonic Ip, Inc. Systems and methods for playing back alternative streams of protected content protected using common cryptographic information
CN103179171B (zh) * 2011-12-26 2015-12-16 中国移动通信集团山东有限公司 基于分布式系统架构的文件传输方法及装置
US8917309B1 (en) 2012-03-08 2014-12-23 Google, Inc. Key frame distribution in video conferencing
CN103458272B (zh) * 2012-05-30 2017-04-12 中国电信股份有限公司 确定视频流推送码率的方法、装置与服务器
US8791982B1 (en) 2012-06-27 2014-07-29 Google Inc. Video multicast engine
US9197685B2 (en) 2012-06-28 2015-11-24 Sonic Ip, Inc. Systems and methods for fast video startup using trick play streams
US9143812B2 (en) 2012-06-29 2015-09-22 Sonic Ip, Inc. Adaptive streaming of multimedia
EP2875417B1 (en) 2012-07-18 2020-01-01 Verimatrix, Inc. Systems and methods for rapid content switching to provide a linear tv experience using streaming content distribution
US8914836B2 (en) 2012-09-28 2014-12-16 Sonic Ip, Inc. Systems, methods, and computer program products for load adaptive streaming
US20140161199A1 (en) * 2012-12-06 2014-06-12 Xiaomi Inc. Method and apparatus for processing video image
CN103905924B (zh) * 2012-12-28 2018-06-08 联芯科技有限公司 终端侧的视频自适应接收方法和装置
US9313510B2 (en) 2012-12-31 2016-04-12 Sonic Ip, Inc. Use of objective quality measures of streamed content to reduce streaming bandwidth
US9191457B2 (en) 2012-12-31 2015-11-17 Sonic Ip, Inc. Systems, methods, and media for controlling delivery of content
US9264475B2 (en) * 2012-12-31 2016-02-16 Sonic Ip, Inc. Use of objective quality measures of streamed content to reduce streaming bandwidth
US10397292B2 (en) 2013-03-15 2019-08-27 Divx, Llc Systems, methods, and media for delivery of content
US9906785B2 (en) 2013-03-15 2018-02-27 Sonic Ip, Inc. Systems, methods, and media for transcoding video data according to encoding parameters indicated by received metadata
US10110647B2 (en) * 2013-03-28 2018-10-23 Qualcomm Incorporated Method and apparatus for altering bandwidth consumption
US9344517B2 (en) 2013-03-28 2016-05-17 Sonic Ip, Inc. Downloading and adaptive streaming of multimedia content to a device with cache assist
US9094737B2 (en) 2013-05-30 2015-07-28 Sonic Ip, Inc. Network video streaming with trick play based on separate trick play files
US9247317B2 (en) 2013-05-30 2016-01-26 Sonic Ip, Inc. Content streaming with client device trick play index
US9967305B2 (en) 2013-06-28 2018-05-08 Divx, Llc Systems, methods, and media for streaming media content
US9866878B2 (en) 2014-04-05 2018-01-09 Sonic Ip, Inc. Systems and methods for encoding and playing back video at different frame rates using enhancement layers
GB201411366D0 (en) 2014-06-26 2014-08-13 Univ Warwick Controlling packet flow in a network
WO2016045062A1 (zh) * 2014-09-25 2016-03-31 华为技术有限公司 数据包传输的装置、系统及方法
DE102014220428A1 (de) * 2014-10-08 2016-04-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Einstellen von Datenraten in einem Videokamerasystem
CN104639978A (zh) * 2015-02-13 2015-05-20 上海小蚁科技有限公司 多媒体处理方法及装置
US9609275B2 (en) 2015-07-08 2017-03-28 Google Inc. Single-stream transmission method for multi-user video conferencing
US10075292B2 (en) 2016-03-30 2018-09-11 Divx, Llc Systems and methods for quick start-up of playback
US20170324642A1 (en) * 2016-05-04 2017-11-09 Microsoft Technology Licensing, Llc Initial and periodic slowdowns for background connections
US10498795B2 (en) 2017-02-17 2019-12-03 Divx, Llc Systems and methods for adaptive switching between multiple content delivery networks during adaptive bitrate streaming
GB2577689B (en) * 2018-10-01 2023-03-22 Digital Barriers Services Ltd Video surveillance and object recognition
US11463651B2 (en) 2019-12-23 2022-10-04 Carrier Corporation Video frame-based media stream bandwidth reduction
US11438545B2 (en) 2019-12-23 2022-09-06 Carrier Corporation Video image-based media stream bandwidth reduction

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1468001A (zh) * 2002-06-27 2004-01-14 上海汉唐科技有限公司 基于因特网的媒体流自适应传输方法
CN1735075A (zh) * 2004-07-23 2006-02-15 Lg电子株式会社 多媒体数据传输速率的自适应估算方法
CN1859579A (zh) * 2005-05-04 2006-11-08 三星电子株式会社 传输多媒体数据流的设备和方法
EP1758420A1 (en) * 2005-08-23 2007-02-28 NTT DoCoMo Inc. Transmission rate control method, mobile station, and ratio network controller
CN1988664A (zh) * 2006-12-30 2007-06-27 清华大学 基于多参考预测链编码的无线视频传输方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6795863B1 (en) * 1999-08-10 2004-09-21 Intline.Com, Inc. System, device and method for combining streaming video with e-mail
US7143432B1 (en) * 1999-10-01 2006-11-28 Vidiator Enterprises Inc. System for transforming streaming video data
CN1435055A (zh) * 1999-12-22 2003-08-06 通用仪器公司 使用空间可调性及同时传送编码的多投射环境的视讯压缩
US7327761B2 (en) * 2000-02-03 2008-02-05 Bandwiz Inc. Data streaming
US7184548B2 (en) * 2001-05-04 2007-02-27 Hewlett-Packard Development Company, L.P. Encoding and decoding methods for secure scalable streaming and related systems
US7299292B2 (en) * 2002-03-29 2007-11-20 Widevine Technologies, Inc. Process and streaming server for encrypting a data stream to a virtual smart card client system
KR100928968B1 (ko) * 2004-12-14 2009-11-26 삼성전자주식회사 영상 부호화 및 복호화장치와 그 방법
FR2880743A1 (fr) * 2005-01-12 2006-07-14 France Telecom Dispositif et procedes de codage et de decodage echelonnables de flux de donnees d'images, signal, programme d'ordinateur et module d'adaptation de qualite d'image correspondants
AU2006223416A1 (en) * 2005-03-10 2006-09-21 Qualcomm Incorporated Content adaptive multimedia processing
WO2006126974A1 (en) * 2005-04-11 2006-11-30 Tubitak Bilten Optimal video adaptation for resource constrained mobile devices based on subjective utility models
US8379721B2 (en) * 2005-09-22 2013-02-19 Qualcomm Incorported Two pass rate control techniques for video coding using a min-max approach
FR2903556B1 (fr) * 2006-07-04 2008-10-03 Canon Kk Procedes et des dispositifs de codage et de decodage d'images, un systeme de telecommunications comportant de tels dispositifs et des programmes d'ordinateur mettant en oeuvre de tels procedes
US8170094B2 (en) * 2006-11-30 2012-05-01 Motorola Mobility, Inc. Method and system for scalable bitstream extraction
US8582647B2 (en) * 2007-04-23 2013-11-12 Qualcomm Incorporated Methods and systems for quality controlled encoding

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1468001A (zh) * 2002-06-27 2004-01-14 上海汉唐科技有限公司 基于因特网的媒体流自适应传输方法
CN1735075A (zh) * 2004-07-23 2006-02-15 Lg电子株式会社 多媒体数据传输速率的自适应估算方法
CN1859579A (zh) * 2005-05-04 2006-11-08 三星电子株式会社 传输多媒体数据流的设备和方法
EP1758420A1 (en) * 2005-08-23 2007-02-28 NTT DoCoMo Inc. Transmission rate control method, mobile station, and ratio network controller
CN1988664A (zh) * 2006-12-30 2007-06-27 清华大学 基于多参考预测链编码的无线视频传输方法

Also Published As

Publication number Publication date
US20100074324A1 (en) 2010-03-25
US8228982B2 (en) 2012-07-24
CN101686383A (zh) 2010-03-31

Similar Documents

Publication Publication Date Title
CN101686383B (zh) 通过网络传输媒体的方法及系统
US10298985B2 (en) Systems and methods for performing quality based streaming
CN107211193B (zh) 感知体验质量估计驱动的智能适应视频流传输方法和系统
US20190327510A1 (en) Systems and Methods for Performing Quality Based Streaming
CN100420250C (zh) 通信设备操作方法、数据呈现方法和设备
CN104394486B (zh) 一种基于云桌面的视频流处理方法及装置
CN102334341B (zh) 用于控制媒体流的编码的系统及方法
CA2749160C (en) Informative data streaming server
KR101717813B1 (ko) 네트워크 서비스에 대한 체감 품질 관리를 위한 방법 및 장치
CN102318311B (zh) 多视频流传输中的带宽分配控制方法
CN101951331B (zh) 数字家庭网络多媒体共享系统及其共享方法
Ramakrishnan et al. SDN based QoE optimization for HTTP-based adaptive video streaming
CN102246531B (zh) 复用视频流传输
CN109729437B (zh) 流媒体自适应传输方法、终端和系统
US20140126628A1 (en) Best quality given a maximum bit rate
CN103051978A (zh) 一种基于h264的实时移动视频服务控制方法
CN103210642B (zh) 在http流送期间发生表达切换时传送用于自然再现的可缩放http流的方法
CN102714728B (zh) 视频图像编码数据的显示方法、设备和通信系统
RU2598805C2 (ru) Способ для динамической адаптации частоты следования битов при приеме и соответствующий приемник
CN103004190A (zh) 视频流传送
CN108292970A (zh) 通过互联网(ott)直播分发的自适应比特率(abr)调整
CN110460871A (zh) 直播视频的生成方法、装置、系统及设备
CN106375790A (zh) 一种QoE驱动的多频道HAS码率自适应调度方法
KR100929771B1 (ko) 스트림당 이용가능한 대역폭 및 비트 스트림 교환을계산하는 다중 데이터 스트림을 전송하기 위한 데이터통신 방법 및 시스템
CN105812710A (zh) 视频通话过程中优化图像质量的方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: GENERAL ELECTRIC SECURITY CO., LTD.

Free format text: FORMER OWNER: GENERAL ELECTRIC CO., LTD.

Effective date: 20100419

C41 Transfer of patent application or patent right or utility model
COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; FROM: NEW YORK STATE, U.S.A. TO: FLORIDA STATE, U.S.A

TA01 Transfer of patent application right

Effective date of registration: 20100419

Address after: American Florida

Applicant after: GE Security Inc.

Address before: American New York

Applicant before: General Electric Company

C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: American Florida

Applicant after: UTC Fire & Security Americas Corp. Inc.

Address before: American Florida

Applicant before: GE Security Inc.

COR Change of bibliographic data

Free format text: CORRECT: APPLICANT; FROM: GE SECURITY INC. TO: UTC FIRE + SECURITY AMERICA CORPORATION, INC.

C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130501

Termination date: 20150923

EXPY Termination of patent right or utility model