CN100539544C - 媒体流式传输分发系统 - Google Patents

媒体流式传输分发系统 Download PDF

Info

Publication number
CN100539544C
CN100539544C CNB03805261XA CN03805261A CN100539544C CN 100539544 C CN100539544 C CN 100539544C CN B03805261X A CNB03805261X A CN B03805261XA CN 03805261 A CN03805261 A CN 03805261A CN 100539544 C CN100539544 C CN 100539544C
Authority
CN
China
Prior art keywords
media stream
grouping
picture
feedback
packet loss
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB03805261XA
Other languages
English (en)
Other versions
CN1640076A (zh
Inventor
张晋声
吉村健
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Hewlett Packard Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hewlett Packard Co filed Critical Hewlett Packard Co
Publication of CN1640076A publication Critical patent/CN1640076A/zh
Application granted granted Critical
Publication of CN100539544C publication Critical patent/CN100539544C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/173Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309Transmission or handling of upstream communications
    • H04N7/17318Direct or substantially direct transmission and handling of requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0001Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0006Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the transmission format
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0001Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0009Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the channel coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0001Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0014Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the source coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/12Arrangements for detecting or preventing errors in the information received by using return channel
    • H04L1/16Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/12Arrangements for detecting or preventing errors in the information received by using return channel
    • H04L1/16Arrangements for detecting or preventing errors in the information received by using return channel in which the return channel carries supervisory signals, e.g. repetition request signals
    • H04L1/18Automatic repetition systems, e.g. Van Duuren systems
    • H04L1/1867Arrangements specially adapted for the transmitter end
    • H04L1/1874Buffer management
    • H04L1/1877Buffer management for semi-reliable protocols, e.g. for less sensitive applications like streaming video
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2404Monitoring of server processing errors or hardware failure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6106Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6112Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving terrestrial transmission, e.g. DVB-T
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637Control signals issued by the client directed to the server or network components
    • H04N21/6375Control signals issued by the client directed to the server or network components for requesting retransmission, e.g. of data packets lost or corrupted during transmission from server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • H04N21/6437Real-time Transport Protocol [RTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64723Monitoring of network processes or resources, e.g. monitoring of network load
    • H04N21/6473Monitoring network processes errors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0001Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0015Systems modifying transmission characteristics according to link quality, e.g. power backoff characterised by the adaptation strategy
    • H04L1/0019Systems modifying transmission characteristics according to link quality, e.g. power backoff characterised by the adaptation strategy in which mode-switching is based on a statistical approach
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/004Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0056Systems characterized by the type of code used
    • H04L1/0057Block codes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L2001/0092Error control systems characterised by the topology of the transmission link
    • H04L2001/0097Relays

Abstract

一种媒体流式传输分发系统,用于在网络中发生的分组丢失的影响到达低速通信如无线电通信的基站之前,减小该分组丢失的影响的扩散。该系统包括:媒体分发设备,用于通过实时传输协议向网络分组发送媒体流;以及基站,用于通过低速通信如无线电通信发送媒体流。该系统还包括分组分析设备,用于监控到达无线电基站的分组以及向媒体分发设备发送与分组丢失相关的反馈信息。根据来自中继设备和媒体流的终端设备的反馈,有可能获得从媒体分发设备到中继设备的传输速率和从中继设备到终端设备的传输速率,从而在更大的传输速率下,剩余带宽用于重发和前向错误校正,由此提高通信质量。

Description

媒体流式传输分发系统
技术领域
本发明涉及媒体流式传输(streaming),尤其是涉及以下情况下的流式传输,其中在流传输路径上的延迟变得比传输路径的中间位置的延迟大,例如媒体流经过末段(last-hop)的无线蜂窝链路被发送给客户的情况。注意,虽然在以下说明中取无线蜂窝链路作为具有大延迟的传输路径的例子,但是本发明不限于此。
背景技术
近些年来,由于通信技术的快速发展,通过无线通信执行多媒体传输已成为可能。为了使接收无线数据传输的客户实时地重放多媒体,通信路径上的服务质量(QoS)控制(传输速率控制和分组丢失复原能力控制)变得重要。
以下所示的非专利文件1公开了无线基站包括在整形点(流量控制点)之后的实时传输协议(RTP)监控代理。RTP监控代理监控到达无线基站并且要经过无线蜂窝链路被传送的多媒体流,并且把指示从媒体服务器到无线基站的有线网络中的拥塞状态的信息反馈给媒体服务器。从无线基站无线地接收数据分组的客户根据实时传输控制协议(RTCP)向媒体服务器发送接收确认信息。
媒体服务器根据来自RTP监控代理的反馈信息和来自客户的接收报告,确定有线网络中的拥塞状态和无线链路上的链路错误条件。当由于有线网络中的拥塞造成了分组丢失时,媒体服务器减小媒体流传输速率,当由于无线链路中的错误造成了分组丢失时,媒体服务器提高媒体编码的分组丢失复原能力。例如,可以通过提高视频编码中的帧内编码率来提高分组丢失复原能力。
在该类型的常规技术中,一旦发生分组丢失,则在提高分组丢失复原能力之前,需要相当多的时间。在由于响应有线网络中的拥塞的流量控制由网络队列将视频流中包含帧内编码画面(I画面)的分组丢弃,然后多个随后的预测编码画面(P画面)的分组经过末段的无线链路被发送的情况下,因为不能获得所需的作为重构P画面的参考的I画面,因此客户不能重构这些P画面。而且,即使当P画面被丢弃了,在下一个I画面到达之前,取决于该丢弃的P画面的所有P画面都不能被重构。在一般的传输控制协议(TCP)通信中,根据反馈信息重发丢失的分组。然而,在其中媒体被实时地重构和重放的流式传输(streaming)中,在客户的缓冲器尺寸小的这种情况下,重发可能太迟。当由于有线网络中的拥塞造成了分组被丢弃时,不仅丢弃的分组发生了重构错误,而且在随后成功收到的分组中包含的P画面也发生了重构错误。
因此,需要减小这种错误传播现象,即在从低速通信如无线通信的基站向上的网络中发生的分组丢失对随后的分组中包含的媒体的重构有影响。
发明内容
根据本发明一方面的媒体流式传输(streaming)传送系统包括:媒体传送设备,用于根据实时传输协议以分组的形式向网络发送媒体流;以及连接到网络的无线基站,用于通过低速通信如无线电通信发送媒体流。该系统还包括分组分析设备,用于监控到达无线基站的分组以及向媒体传送设备发送与分组丢失有关的反馈信息。
根据本发明的另一方面,提供一种在上述系统中包括的媒体传送设备。
根据本发明的实施例,分组分析设备把分组头中包含的顺序号作为反馈信息发送给媒体传送设备。
此外,在本发明的实施例中,媒体传送设备根据反馈信息确定分组丢失,并且取决于确定的分组丢失,改变媒体流以便减小分组丢失的影响。
根据本发明的实施例,媒体流是包括一序列I画面和P画面的电影。媒体传送设备包括存储器,该存储器用于存储一个电影的多个媒体流,所述多个媒体流至少包括以第一配置包含I画面的第一媒体流和以不同于第一配置的第二配置包含I画面的第二媒体流。
媒体传送设备还包括切换装置,其用于响应分组丢失的确定,为已发生丢失的目的地选择其中在丢失分组中的画面之后的第一I画面最早出现在多个媒体流当中的媒体流,以及把要发送的媒体流切换到选择的媒体流。这样能够减少错误传播现象,即分组丢失对随后分组中包含的媒体的重放有影响。
在本发明的实施例中,提供具有不同的帧内编码I画面的频率的媒体流,并且响应分组丢失把媒体流切换到具有更高的I画面频率的媒体流。
此外,根据本发明的另一方面,媒体传送设备还包括用于产生媒体流的编码设备。该编码设备被配置成响应分组丢失的确定产生以I画面开始的媒体流。
根据本发明的实施例,编码设备根据来自分组分析设备的反馈信息响应分组丢失的检测,至少为被发送给已发生丢失的客户的媒体流提高I画面的频率。
此外,根据本发明的实施例,媒体传送设备从作为媒体流的目的地的无线终端接收关于分组接收的客户反馈信息,并且根据客户反馈信息和来自分组分析设备的反馈信息判断是在网络中的有线传输中还是在从无线基站的无线传输中发生了分组丢失。
此外,在本发明的实施例中,媒体传送设备根据关于分组丢失的反馈信息执行分组重发。
此外,根据本发明的实施例,根据来自媒体流中继设备和终端两者的反馈,来获得从媒体传送设备到中继设备的传输速率和从中继设备到终端的传输速率,并且把剩余带宽用于更大传输速率的一侧的重发和前向错误校正,由此提高通信质量。
附图说明
图1所示框图显示了本发明实施例的概念。
图2所示框图显示了本发明实施例的结构。
图3所示框图显示了本发明的替换实施例的结构。
图4所示的图显示了视频压缩编码格式的例子。
图5所示的图显示了运动图像专家组(MPEG)I画面和P画面序列的例子。
图6所示的顺序图显示了根据本发明第一实施例和第二实施例的通信顺序。
图7所示框图显示了本发明又一实施例的概念。
图8所示框图显示了图7中的实施例的详细结构。
图9所示的顺序图显示了根据本发明第三实施例的通信顺序。
具体实施方式
以下将参照附图说明本发明的实施例。图1所示框图显示了本发明的实施例的总体结构。媒体传送设备11执行多媒体的实时传送。多媒体包括图像、音频、文本、图形等,每一种多媒体的流被分组发送,并且由接收设备实时地重构和重放。在以下说明中,相对于视频流来说明这些媒体。媒体传送设备11能够以点播发送的形式传送媒体流,或者以广播的形式传送媒体流。
当媒体传送请求来自无线终端19,如移动电话、便携式终端(PDA,个人数字助理)、配有无线通信设备的计算机,媒体传送设备11就把媒体流分组,将实时传输协议(RTP)头和网际协议(IP)头加到媒体流分组上,并且经由有线网络21发送媒体流分组。分组根据IP被路由,并且到达无线基站10。IP是一种无连接通信协议,当网络上发生拥塞时,溢出网络队列中的分组可以从网络被丢弃。
无线基站10把从网络21收到的分组发送给无线终端19。根据本发明,为无线基站10提供分组分析设备15,其监控到达无线基站10的媒体流分组。可以通过IP头中包括的一对源地址和目的地址以及用户数据报协议(UDP)头中包括的一对源端口号和目的端口号,来识别被发送到特定的无线终端19的一序列媒体流分组。如以下将要说明的,RTP头被包括在分组中,且RTP头包括相对于媒体流中的该分组唯一的顺序号。
当检测到具有相同的源地址和目的地址以及相同的源端口号和目的端口号的一序列分组的流动时,分组分析设备15把RTP头中包含的分组号的反馈(ACK,确认)提供给媒体传送设备11。媒体传送设备11能够由该反馈信息检测分组丢失。当媒体传送设备11由分组顺序号检测到I画面分组丢失了,媒体格式被切换到具有更高的I画面频率的格式。
利用该操作,无线终端19能够早一些收到I画面,因此能够防止视频重构质量的下降。
接下来参考图2对本发明的实施例进行更详细的说明。媒体传送设备11以两种不同的格式把视频内容A、B、C和D存储到多媒体内容数据库27中。即,视频A以第一格式被存储为视频内容A1,以第二格式被存储为A2。类似,视频B以第一格式被存储为B1,以第二格式被存储为B2,视频C以第一格式被存储为C1,以第二格式被存储为C2。
图5显示了两种格式的例子。图5(A)显示了第一格式的例子,图5(B)显示了第二格式的例子。第二格式被设置为具有比第一格式更高的I画面频率。在图5中,I表示帧内编码的I画面,P表示基于I画面被预测编码的P画面。当在I画面与P画面之间有另一个前面的P画面,则P画面基于I画面和该前面的P画面被预测编码。在该实施例中,电影按照MPEG4被编码。
根据MPEG4标准,输入图像的帧(画面)被分类为I画面和P画面,其中对于每一I画面,只利用该帧的信息对其进行编码,与其它帧中的图像无关,对于每一P画面,基于I画面对其进行预测;并且残余预测误差被编码用于传输。
每一I画面和P画面都通过离散余弦变换(DCT)被转换成DCT系数。DCT系数和运动矢量信息被加密编码。此时,一幅画面被分为8×8的象素块,并且对每一象素块执行DCT。四个相邻的象素块组合成一个宏块(MB),多个宏块组合为一块组(GOB)。如图4(B)所示,多个宏块被置于一个分组内并被发送。
在该实施例中,媒体传送设备11执行点播多媒体传送。在图中只显示了视频内容,但是将与视频同步的且被重构的音频内容也类似地存储在数据库中,且与视频内容并行地被发送。
格式切换部分29响应来自反馈控制部分35的指令,把从数据库27中提取的内容在第一格式与第二格式之间切换。
分组分析设备15中包括的多媒体流检测部分37从到达无线基站10的IP分组当中检测包含RTP头的分组,并且根据分组的一对源地址和目的地址以及一对源端口号和目的端口号检测多媒体流。RTP头监控部分39监控在多媒体流检测部分37检测到的多媒体流IP分组中包含的RTP头,并检查在RTP头中包含的分组顺序号。当通过检查跨过多个分组的顺序号检测到顺序号的丢失时,RTP头监控部分39把用于识别丢失的IP分组的信息发送给反馈发生器41。在一个实施例中,用于识别IP分组的信息包括源地址、目的地址以及丢失的RTP分组的顺序号。此外,在另一实施例中,RTP监控部分39不是把丢失的RTP分组的顺序号发送给反馈发生器41,而是每当检测到RTP分组就把RTP分组的顺序号发送给反馈发生器41。
一旦收到每一RTP分组,反馈发生器41就将该RTP分组的顺序号作为ACK返回给源地址。在替换的实施例中,反馈发生器41响应发自RTP头监控部分39的信息,根据一序列RTP分组的顺序号判定在预定的时期内是否有RTP分组丢失了,并把丢失的RTP分组的顺序号发送给源地址。在这种情况下的反馈中,实时传输控制协议(RTCP)也可以被扩展和发送。这些被发送到有线网络21。
媒体传送设备11的反馈控制部分35从分组分析设备15接收反馈信息,并且响应丢失分组的顺序号的接收,发送媒体格式切换指令给格式切换部分29。在另一实施例中,反馈控制部分35根据发自分组分析设备15的ACK信息监控丢失的分组的顺序号,并且当检测到丢失的分组时,发送媒体格式切换指令给格式切换部分29。
在所有的实施例中,当检测到分组丢失时,反馈控制部分35发送格式切换指令给格式切换部分29。当丢失的分组是P画面的,其影响小于I画面的情况。因此,如果切换的作用较小(例如,当在下一个I画面之前只有几个P画面时等),可以忽略格式切换。
现在,假设第一格式的媒体A1被提供给无线终端19,格式切换部分29把流切换到第二格式的媒体A2。再参考图5(A),在媒体A1流中,假设丢失的是一个或多个包含I画面51的宏块的分组,或者是包含P画面51a的宏块的分组。格式切换部分29响应来自反馈控制部分35的指令,把媒体切换到第二格式的A2,并且在媒体A1中的I画面51或P画面51a丢失之后,从最先出现在媒体A2中的I画面57开始发送。
在无线终端19,因为一个或多个I画面51的分组或P画面51a的分组丢失了,因此随后的根据I画面51或P画面51a被编码的P画面51b、51c、51d和51e不能被正确地重构。然而,媒体传送设备11把媒体格式切换到具有更高的I画面频率的第二格式,并且从图5(B)所示的第二格式的I画面57开始发送。因此,无线终端19能够正确地从I画面57重构媒体。
图6显示了在根据本发明的媒体传送系统中的通信和处理顺序的例子。
从数据库27中提取的内容在分组部分31被分组,然后从流发送部分33被发到有线网络21。参考图6,流发送部分33执行RTP处理例程111和RTCP处理例程113。
RTP处理例程111把用于识别压缩编码格式的压缩码头加到对应于一个分组的压缩数据上,并且还添加RTP头、UDP头和IP头。图4(A)显示了这种分组格式的例子。RTP头包含分组顺序号。用随机数确定该顺序号的初始值,并且把从该初始值开始的序号加到每一分组。RTP头包含同步源(SSRC)标识符。对于该标识符,相同的值被加到应该被组合处理的多个流上,例如,同一用户的声音流和图像流。
处理例程111向RTP分组添加RTP头、UDP头和IP头,以便根据UDP/IP协议进行传输。IP头包含指示传输源的源地址,和指示客户的目的地址。而且,UDP头包含指示传输源的端口号的源端口号,和指示客户的端口号的目的端口号。
图4(B)显示了一帧中的画面怎样按照MPEG标准被分为多个分组并被发送。例如,由于I画面的大信息容量,I画面被分为多个分组,然后被发送。当在网络上发生大量拥塞时,可以丢弃一部分I画面分组,并且有可能完整的I画面没有到达无线终端19
Figure C03805261D0012154405QIETU
在图4(B)中,GOB表示一块组,MB表示宏块。
RTCP处理例程113与发送RTP分组的网络交换控制信息。RTCP(RTP控制协议)是一种补充RTP的协议,其中发送设备和接收设备相互通知控制信息,由此实现流量控制、时钟同步,以及媒体之间例如音频数据和视频数据之间的同步。
在RTP分组发送之前,RTCP处理例程113把作为信息源的描述的源描述(SDES)转变成RTCP分组115,并利用添加了IP头和UDP头的UDP/IP协议将其发送到网络上。此后,RTP处理例程111按顺序向网络发送RTP分组117、119和121。
在图2中,位于无线基站10前面的整形点(shaping point)13代表一个或多个中继设备,其管理从媒体传送设备11到无线基站的路径上的有线网络中的流量控制。无线基站10配有例如作为整形点的对应部件的3层交换机(layer 3 switch),用于缓冲以高速从有线网络21收到的分组,以及以适于无线基站10的无线部分的处理速度的速度将收到的分组提供给无线基站10的无线部分。
参考图6,根据RTCP分组115和随后的RTP分组117、119和121,无线基站10的分组分析设备15检测到它们是同一媒体流的部分,并且由在预定时期内收到的分组计算分组丢失率、不稳定性等(131)。然后,分组分析设备15将这些信息加到要发往媒体传送设备11的RTCP分组上,并把该RTCP分组发送到有线网络上。
每当分组分析设备15检测到来自媒体传送设备11的同一媒体流的RTP分组,它就把包含该RTP分组的顺序号的接收确认信号(ACK)发送给媒体传送设备11。在替换的实施例中,分组分析设备15不是每当收到RTP分组就返回ACK,而是监控属于同一媒体流的RTP分组的顺序号是否相连。当分组分析设备15检测到顺序号遗漏了,它就把包含丢失的RTP分组的顺序号的接收失败信号(NACK)发送给媒体传送设备11。
在媒体传送设备11的RTCP处理例程113中,当收到作为已发出的RTCP分组115的响应的RTCP分组133时,取决于分组丢弃率和其中包含的其它控制信息,改变要发出的媒体流的传输速率。而且,当在RTCP处理例程113中检测到的分组丢失率较高时,反馈控制部分35向格式切换部分29(图2)发送控制信号,以便把随后的媒体流格式切换到具有更高的I画面频率的格式。
在媒体传送设备11的RTP处理例程111中,每当收到来自无线基站10的ACK分组105、107和109,在ACK分组中包含的从无线基站10收到的RTP分组的顺序号就被传送给反馈控制部分35。反馈控制部分35检查是否有任何发出的分组没有到达无线基站10,即是否有任何分组丢失了(141)。当反馈控制部分35检测到分组丢失了,然后反馈控制部分35判断在该丢失的RTP分组中包含的数据是否为I画面(143)。当丢失的RTP分组是I画面时,上述的格式切换过程(145)立即开始。
在步骤143,当确定丢失的分组是P画面时,然后确定丢失的分组是否达到P画面丢失时的重发设置基准(147)。当P画面分组丢失时,其影响小于I画面的情况。因此,当达到预定的基准值时,切换格式(149),并且在达到该基准值之前,不切换格式。例如,可以这样设置基准值,以至在下一个I画面之前只有几个P画面的情况下,不切换格式。
无线基站10的无线部分无线地发送收到的IP分组。无线终端19接收无线通信,并重构媒体流。无线地发送和接收IP分组是公知的技术,因此省略其详细说明。
取决于无线终端19的结构,无线终端19能够向媒体传送设备11发送ACK信号。特别是,符合第三代伙伴计划(3GPP)标准的无线终端不能象分组分析设备15一样发送ACK分组。当不需要符合该标准时,可以把无线终端构造成发送ACK分组。反馈控制部分35比较来自分组分析设备15的反馈信息与来自无线终端19的信息,由此可以知道从无线基站10到无线终端19的无线通信的质量。当判定无线通信的质量较低时,反馈控制部分35向格式切换部分29发出指令,以便把媒体格式切换到具有更高的I画面频率的格式。媒体的格式不仅仅有两种类型。可以使用多种类型的格式,并且取决于通信状态,可以在多种格式之间切换。例如,当以具有较高的I画面频率的格式执行传输时,如果检测到足够好的通信状态,则可以将格式切换到具有更低的I画面频率的格式。这样,媒体传送设备11可以调节流传输的负荷。
接下来参考图3说明本发明的另一实施例。在图3中,用相同的附图标记表示与图2中的实施例相似的元件。在媒体传送设备11处,输入的图像30被编码部分28实时地压缩/编码,然后被分组部分31转变成分组,然后作为媒体流被发送到有线网络21。输入的图像30可以是预先记录和存储在存储设备中的图像,或者可以是如在中继广播一样利用摄像机实时捕获的图像。
编码部分28根据已经说明的MPEG4标准对输入的图像进行编码。编码部分28具有自动译码功能,该译码功能响应来自反馈控制部分35的指令,改变编码中I画面的频率。即,当根据来自分组分析设备15的反馈信息检测到在到达无线基站10的媒体流中丢失了包含I画面宏块的分组时,编码部分28切换编码,以便增加I画面的频率。
接下来,说明根据来自无线基站的反馈执行丢失分组的重发的另一实施例。
在无线链路中,延时通常较长。在媒体传送设备与无线基站之间来回的时间比在无线基站与无线终端客户之间来回的时间短得多。因此,根据被提供给无线终端的接收缓冲器的尺寸(即由于分组重发造成的分组到达可以延迟的程度),当在从媒体传送设备到无线基站的有线网络上和从无线基站到无线终端的无线链路中有任何分组丢失时,作为恢复丢失的分组的一种形式,判断是在有线网络上还是在无线链路上重发丢失的分组,或者执行前向错误校正(FEC),以便能够优化每一通信路径的吞吐量。利用Reed-Solomon编码或本领域技术人员公知的其它错误校正编码专门实现FEC。而且,为了进一步提高抗突发错误能力,可以执行本领域技术人员公知的交错处理。利用交错来提高校正突发错误的能力的公知例子是例如用于CD-DA的交叉交错Reed-Solomon码(CIRC)。
为了在适当的时间执行分组重发和FEC,根据无线终端的接收缓冲器的尺寸可以提供三种方式作为恢复两个通信路径上的丢失分组的形式。以下详细说明这些方式。
图7显示了拥有这种功能的媒体流传送系统的总体结构。用相同的附图标记表示与图1、2、3中相似的组成元件。无线基站10配有第一反馈部分71,FEC解码器72,在无线基站执行流量控制的整形点13’,FEC发生器18,第二反馈部分73,以及无线发送设备14。FEC解码器72,在利用FEC恢复网络21上的丢失分组的方式(以下说明的方式3)下,用于利用被发送到网络21上的错误校正编码信息恢复丢失的分组,以及消除错误校正码并把数据的主体发送给下一级。当到达的分组超出了无线基站的缓冲器容量时,整形点13’丢弃部分分组。即,整形点13’是用于调节分组进入无线链路的速率的装置。FEC发生器18,在利用FEC恢复无线设备14与无线终端19之间的无线链路上的丢失分组的方式(以下说明的方式2和方式3)下,用于产生错误校正码,该错误校正码要被附加到将被发送到无线链路上的数据流上。
图8显示了在图7所示系统中的媒体传送设备采用格式切换系统的情况下的实施例。它对应于图2中的实施例。多媒体流检测部分37’从到达无线基站10的IP分组当中检测包含RTP头的分组,并根据分组的一对源地址和目的地址以及一对源端口号和目的端口号检测多媒体流。
RTP头监控部分39’监控多媒体流检测部分37’检测的多媒体流的IP分组中包含的RTP头,并检查RTP头中包含的分组顺序号。根据跨过多个分组的顺序号的检查,当发现有任何顺序号丢失时,RTP头监控部分39’就向反馈发生器41’发送用于识别丢失的IP分组的信息。在一个实施例中,用于识别IP分组的信息包括源地址、目的地址以及丢失的RTP分组的顺序号。此外,在另一个实施例中,RTP头监控部分39’不是把丢失的RTP分组的顺序号发送给反馈发生器41’,而是把检测到的每一RTP分组的顺序号发送给反馈发生器41’。
一旦收到每一RTP分组,反馈发生器41’就把分组的顺序号作为ACK返回给源地址。在替换的实施例中,反馈发生器41’响应来自RTP头监控部分39’的信息传送,根据一序列RTP分组的顺序号判断在预定时间内是否有任何RTP分组丢失了,然后向源地址发送丢失的RTP分组的顺序号。在又一替换的实施例中,不是每当收到单个RTP分组或每当发现丢失的RTP分组就响应源地址,而是一次对多个RTP分组作出响应。为了更详细地说明这一点,对于每N个分组,返回指示每一分组是否被正常收到或丢失的收到/丢失数据。这样确定集中在一起的分组的数目N,使得响应延时落入这样的范围内,以便能够及时地从源地址重发分组。
图9所示的顺序图显示了图8的系统中的通信顺序。如参考图6所说明的,媒体传送设备11具有RTP处理部分111和RTCP处理部分113。RTCP处理部分113在发送RTCP分组之前,发出包含发送端信息(SDES)的RTCP分组115到有线网络21,以发向无线基站10。无线基站10的第一反馈部分71响应RTCP分组115和随后的RTP分组117、119和121,计算分组丢失率和有线网络21的网络传输延时,然后将该信息加到RTCP分组133上并将RTCP分组133发送给媒体传送设备11。
一旦收到媒体流的每一RTP分组,无线基站10的第二反馈部分73就将带有RTP分组的顺序号的接收应答信号(ACK)发回给媒体传送设备11。在图9中,ACK105被返回以响应RTP分组117的接收,ACK107被返回以响应RTP分组119的接收,ACK109被返回以响应RTP分组121的接收。当然,可以不把正常收到的分组的顺序号发回给媒体传送设备(如相对于图8中的反馈发生器41’说明的),而发回丢失分组的数目,或者可以为集中在一起的多个分组返回已到达/仍未到达的响应。
参考图8,第二反馈部分73配有多媒体流检测部分37’、RTP头监控部分39’和反馈发生器41’。这些部分每一个的功能与参照图2和图3说明的分组分析设备15中所包括的多媒体流检测部分37、RTP头监控部分39和反馈发生器41的功能相同。
媒体传送设备11的RTCP处理部分113把RTCP分组133中包含的分组丢失率和延时传送给反馈控制部分35。反馈控制部分35根据该信息选择媒体流的传输方式(157)。
以下说明上述的三种方式,但是首先说明利用来自无线基站10的两种类型反馈,即净馈给(Net-Feeds)和SP馈给(SP-Feeds),和以图8中的虚线25表示的来自无线终端19的反馈(客户反馈),来获得媒体传送设备11为确定媒体流的传输速率和传输方式所需的参数的方法。
首先,将要使用的符号定义如下:
l1:有线网络21上的分组丢失率
R* 1:有线网络21上允许的最大传输速率
R1:从媒体传送设备11的传输速率
R’1:在无限基站10处的接收速率
R1 (2):在FEC解码器72为FEC消除了错误校正信息之后并且在整形点13’处执行分组丢弃处理之前的无线基站中的内部速率
R1 (3):在离开整形点13’之后的无线基站中的内部速率
12:无线链路上(即无线设备14与无线终端19之间)的分组丢失率
R* 2:无线链路上允许的最大传输速率
R2:从无线基站10的传输速率
R’2:在无线终端19处的接收速率
r:媒体流编码率
在此,可以利用以下两种方法之一,在无线基站10处确定无线链路上允许的最大传输速率R* 2
第一种方法在设置无线链路的过程中使用理想的最大传输速率信息。即,当设置无线链路时,确定被分配给该无线链路的资源,特别是带宽,从而根据该带宽确定理想的或最大的可能传输速率。该值表示为R* 2。在该方法中,在使用该无线链路的会话中,所使用的速率被固定,除了在要使用的无线基站被替代的情况之外,例如当无线终端19的位置改变时。
第二种方法根据无线基站10中的发送缓冲器的填充速率来推导最大传输速率R* 2,该无线基站10的发送缓冲器中具有准备从无线基站10发往无线链路的分组。即,如果发送缓冲器的填充速率下降或者缓冲器保持为空,则认为当前的传输速率低于最大速率,反过来,如果填充速率在增加也是如此。这样获得的速率R* 2在多数情况下随时间波动。
可以通过例如无线基站10中的无线设备14,或通过用于控制无线设备14的设备等,来确定最大传输速率R* 2
媒体传送设备11和无线基站10的传输速率R1和R2(即在发送端的速率)是相对与媒体流有关的所有分组的速率,该所有分组不仅包括媒体流的数据的主体,而且还包括被加到媒体流数据的主体上的用于FEC的分组,以及重发的分组。因为在有线网络上或无线链路上会发生分组丢失,因此在各个接收端处的速率R’1和R’2下降到发送端处的速率之下。换句话说,以下公式被建立。
R’1≤R1,R’2≤R2
当分组从有线网络21到达无线基站10时,首先它们被传给FEC解码器72。如果这些分组被应用了FEC,则它们被解码。结果,在分组离开FEC解码器之后的速率R1 (2)下降到无线基站10的接收速率R’1之下。
在此,在该实施例中使用的FEC中,由应用FEC产生的输出由原始数据分组和奇偶校验分组组成。而且,奇偶校验分组以单独的流从原始数据分组发出。关于这种类型的FEC,参考例如RFC2733(RTP有效载荷格式或一般前向错误校正)。FEC解码器(被提供给无线基站10的解码器72和被提供给无线终端19的解码器(未显示))利用在其它流中发送的奇偶校验分组来重构丢失的原始数据分组。
在分组离开无线基站之前,FEC发生器18比较在离开整形点13’之后的速率R1 (3)与无线链路上的最大速率R* 2。如果R1 (3)<R* 2,则FEC发生器18使用剩余的带宽R* 2—R1 (3),用于FEC恢复在无线链路上丢失的分组。最后,从无线基站10的传输速率R2达到在无线链路上允许的最大传输速率R* 2
整形点13’被提供在FEC解码器72与FEC发生器18之间。当在有线网络21上消除了FEC之后的速率R1 (2)大于无线链路的带宽时,即当其大于最大速率R* 2时,分组被丢弃。此外,在此也可以检测和消除具有相同RTP顺序号的复制分组。
从无线基站10到媒体传送设备11的净馈给和SP馈给这两种类型反馈分别经过第一反馈部分71和第二反馈部分73,刚好在FEC解码器72和FEC发生器18之前被发送。
在整形点13’之前执行反馈的第一反馈部分71向媒体传送设备11发送反馈净馈给,以通知有线网络上的当前状态。反馈净馈给是统计反馈,其包括在分组窗口(packet window)收集的信息,例如在中间范围的时帧(例如几秒)中的分组丢失率和往返时间的平均值和方差。这种类型的统计反馈是公知的。如果需要,参考例如RFC1889(Rtp:用于实时应用的传输协议)。
在整形点13’之后执行反馈的第二反馈部分73以分组接收确认分组(ACK)的形式向媒体传送设备11发送反馈SP馈给,从而媒体传送设备11能够判定在无线传输之前哪一分组丢失了。反馈SP馈给在短期内(例如1秒)被发出。
除了反馈净馈给和SP馈给之外,在该实施例中,无线终端19还以几乎无延迟的较短间隔向媒体传送设备11传送反馈。
这些类型的反馈使媒体传送设备能够获得如下列出的信息。
首先,利用反馈净馈给,媒体传送设备11能够知道在有线网络上允许的最大传输速率R* 1。而且,有线网络上的分组丢失率l1清楚地显示在反馈净馈给中。
反馈SP馈给在有线网络的末端提供高分辨率的反馈,即基于分组的反馈。因此,媒体传送设备11能够准确地掌握哪些分组正确地到达无线基站10。
此外,利用反馈SP馈给和来自无线终端19的客户反馈,媒体传送设备11能够以以下方式获得无线链路上的分组丢失率12,以及无线链路上允许的最大传输速率R* 2。即,把反馈SP馈给与仅仅相对于其中已消除了用于FEC的奇偶校验分组流的原始数据分组流的客户反馈相对比。从而,媒体传送设备11能够获得在应用FEC之后的分组丢失率。而且,根据相对于奇偶校验分组流的客户反馈,媒体传送设备11能够掌握在无线链路上已应用了多少FEC,即用于奇偶校验分组流的带宽。如果在应用FEC之后的分组丢失率和用于FEC的奇偶校验分组流的带宽(即奇偶校验分组率)都知道了,则有可能获得在应用FEC之前的无线链路上的“原始”丢失率12
在该实施例中,无线基站10根据媒体流所需的延迟特性,即无线终端19的接收缓冲器容量,自动地选择三种方式之一,然后操作。以下,说明方式1至方式3。
方式1
该方式适用于无线终端19(客户)拥有大的接收缓冲器的情况,该大的接收缓冲器能够允许由于在无线链路上重发必需次数的丢失分组造成的分组到达定时的极不稳定性。注意,在第三代移动电话通信计划中,无线基站10可以设置无线终端19以便在链路层重发,如本领域技术人员所公知的。其特殊的结构或操作自身与本发明没有直接关系。如果需要,参考《用于通用移动通信系统的宽带码分多址:用于第三代移动通信的无线接入》(H.Holma and A.Toskala,Eds.,WCDMA for UMTS:Wireless accessfor Third Generation Mobile Communications,Wiley,2001)H.Holma和A.Toskala,Eds.,Wiley出版社,2001年。因此,为了实现方式1,可以使用利用第三代移动电话链路层重发分组的功能。即,如果无线基站10把无线终端19的错误控制方式设置为重发方式,则链路层将以一种相对于应用层透明的方式执行如下的操作。即,在链路层,当在无线终端19检测到丢失的分组,无线终端19请求无线基站10重发指定的分组。当无线基站10收到重发请求时,它比较到此为止指定的分组已被重发的次数与该方式被设置时所设置的最大重发次数,然后在已经达到最大重发次数的情况下向无线终端19通知重发失败。在没有达到最大重发次数的情况下,无线基站10向无线终端19重发被临时存储的、且对应于丢失分组的已发送分组之一。根据无线链路上的分组丢失率l2和用于通过执行重发改善分组丢失率的目标值,来确定丢失分组的最大重发次数,但是可以预先知道适当的或标准的值,或者可以通过进行如上所述的测量来确定值。已收到重发的分组的无线终端19利用重发的分组恢复媒体流。因此,利用应用层,将原始错误控制方式简单地设置为上述的重发方式,由此看上去好像已经从无线基站10收到了媒体流而没有任何错误。因此,虽然在无线基站10到无线终端19的无线链路中实质上没有分组丢失,但是在分组发送延迟中确实发生了大量的变化。
此外,媒体传送设备11利用来自无线基站10的反馈净馈给,在有线网络上执行拥塞控制。
此外,利用来自无线基站10的反馈SP馈给,在应用层上执行有线网路上的丢失分组的重发。在方式1中,实际上在无线链路上没有丢失的分组,从而来自无线基站10的反馈与来自无线终端的反馈基本上相同,但是反馈SP馈给到达媒体传送设备11的速度比来自无线终端的反馈快得多。
与其中总是添加错误校正码的FEC相比,只有当分组实际丢失时,才更高效地执行分组重发。在方式1中,伴随分组重发的延迟和不稳定性不成为问题,从而在有线网络和无线链路上都采用重发,而不是FEC。
方式2
该方式用于这样的情况,其中无线终端19中的接收缓冲器的尺寸足以满足要在有线网络上重发必需次数的丢失分组,但是没有大得足以允许无线链路上的这种重发。
在方式2中,当分组在有线网络上丢失时,媒体传送设备11以类似于方式1的方式,利用来自无线基站10的反馈SP馈给重发丢失的分组,并且当分组在无线基站10与无线终端19之间的无线链路上丢失时,利用FEC解决该问题。
通常,无线链路上的传输速率低于有线网络21。因此,在此假设典型的情况,即R* 1>R* 2。如上所述,媒体传送设备11能够从反馈信息获得R* 1、R* 2和l2。因此,媒体传送设备11能够适当地选择媒体编码率(即媒体流的传输速率)r。当错误校正被执行时,没有用于无线链路上的媒体流的带宽R* 2—r抵抗无线链路上的丢失率l2。从而,可以发送足以实际上恢复所有丢失分组的错误校正奇偶校验分组流。
在有线网络上,利用剩余带宽R* 2—r在应用层上执行重发。而且,因为在无线基站10丢弃复制分组,因此这种分组不占用无线链路上的带宽。
方式3
该方式适用于这种情况,其中因为无线基站10的缓冲器容量极小,因此不允许不仅由无线链路上的重发、而且还由在有线网络上重发必需次数的丢失分组造成的任何延迟。
在方式3中,媒体传送设备11应用适于有线网络上的错误率和其它这种错误特性的FEC,然后向无线基站10发送媒体流。FEC解码器72在无线基站10消除用于该FEC的奇偶校验流。然后FEC发生器18应用另一个适于无线链路的错误特性的FEC,然后发送给无线终端19。
再参考图9,反馈控制部分35根据发自第二反馈部分73的RTP分组接收确认信号(ACK),判断媒体流中的分组是否丢失(141)。当检测到分组丢失,则反馈控制部分35判定通信是否正在以方式1或方式2进行(151)。当通信正在以方式1或方式2进行,然后执行相对于图6中的块143、145、147和149说明的分组重发过程(153)。当通信正在以方式3进行,如果可能且希望,把要使用的误差校正码改变为更合适的(155)。
至此已说明了本发明的特定实施例,但是本发明不限于上述的实施例。

Claims (17)

1.一种媒体流式传输传送系统,包括:
媒体传送设备,用于根据实时传输协议以分组的形式向有线网络发送媒体流;
中继设备,其连接到所述有线网络,用于向无线链路发送所述媒体流;以及
分组分析装置,用于监控到达所述中继设备的所述分组,以及向所述媒体传送设备发送指示所述有线网络的状态的反馈信息;
其中所述媒体流是包括一序列帧内编码的画面和预测编码的画面的视频;以及
其中所述媒体传送设备包括:
存储器,用于存储一幅视频的多个媒体流,所述多个媒体流至少包括以第一配置包含帧内编码画面的第一媒体流和以不同于所述第一配置的第二配置包含帧内编码画面的第二媒体流;以及
切换装置,用于响应所述分组丢失的确定,为已发生丢失的目的地选择其中在所述丢失分组中的画面之后的第一帧内编码画面最早出现在所述多个媒体流当中的媒体流,以及把要发送的媒体流切换到所述选择的媒体流。
2.根据权利要求1所述的传送系统,其中所述反馈信息是每当所述媒体流的分组到达时被发送给所述中继设备的确认响应。
3.根据权利要求1所述的传送系统,其中所述反馈信息是从所述媒体流丢失的分组的顺序号。
4.根据权利要求2或3所述的传送系统,其中所述媒体传送设备被配置成根据所述反馈信息改变所述媒体流。
5.根据权利要求1所述的传送系统,
其中所述媒体传送设备包括用于产生所述媒体流的编码设备;以及
其中所述编码设备被配置成响应所述分组丢失的确定,产生以帧内编码画面开始的媒体流。
6.一种网络中继设备,包括:
检测装置,其连接到有线网络,用于接收在所述有线网络中传输的分组以及检测媒体流;以及
分组分析装置,用于检测在所述检测到的媒体流中的分组丢失以及执行向所述媒体流的源的反馈,
其中所述网络中继设备向所述源发送从所述有线网络收到的、且被发送给不同于所述有线网络的无线链路的分组识别信息。
7.根据权利要求6所述的中继设备,其中根据在组成所述媒体流的一序列分组的头中包括的顺序号执行所述分组丢失的检测。
8.一种用于发送包括一序列分组的媒体流的媒体传送设备,
其中所述设备被配置成,响应与所述媒体流的传输路径上的分组丢失有关的反馈,改变所述媒体流以便减小所述丢失的影响;
其中所述媒体流是包括一序列帧内编码画面和预测编码画面的视频;
其中所述媒体传送设备包括用于产生所述媒体流的编码设备;
其中所述编码设备被设置成响应所述分组丢失的确定,产生以帧内编码画面开始的媒体流;以及
其中与所述分组丢失有关的所述反馈是与在所述传输路径从有线网络切换到无线链路的点处观测的所述分组丢失有关的反馈。
9.一种用于发送包括一序列分组的媒体流的媒体传送设备,
其中所述设备被配置成,响应与所述媒体流的传输路径上的分组丢失有关的反馈,改变所述媒体流以便减小所述丢失的影响;以及
其中所述媒体流是包括一序列帧内编码画面和预测编码画面的视频,
所述媒体传送设备包括:
存储器,用于存储一幅视频的多个媒体流,所述多个媒体流至少包括以第一配置包含帧内编码画面的第一媒体流和以不同于所述第一配置的第二配置包含帧内编码画面的第二媒体流;以及
切换装置,用于响应所述分组丢失的确定,为已发生丢失的目的地选择其中在所述丢失分组中的画面之后的第一帧内编码画面最早出现在所述多个媒体流当中的媒体流,以及把要发送的媒体流切换到所述选择的媒体流。
10.根据权利要求9所述的媒体传送设备,其中所述编码设备被配置成,根据来自所述分组分析设备的反馈信息响应分组丢失的检测,所述编码设备至少为被发送给已发生所述丢失的目的地的媒体流增加帧内编码画面的频率。
11.根据权利要求9所述的媒体传送设备,其中所述编码设备被配置成,根据来自所述分组分析设备的反馈信息响应所述分组丢失的检测,所述编码设备向已发生所述丢失的目的地发送以帧内编码画面开始的媒体流。
12.根据权利要求8所述的媒体传送设备,其中所述媒体传送设备根据所述与分组丢失有关的反馈信息执行所述的分组重发。
13.一种用于连接有线网络与无线链路的中继设备,所述中继设备包括:
第一反馈设备,用于接收在所述有线网络上传输的媒体流的分组,以及向传输源发送包括预定时期内的分组丢失率的信息;
整形点,该整形点是用于调节分组进入无线链路的速率的装置;以及
第二反馈设备,用于把关于通过所述整形点发送到所述无线链路的分组的确认响应发送给所述传输源。
14.根据权利要求13所述的中继设备,其中所述第二反馈设备把在通过所述整形点发送到所述无线链路的所述分组的头中包含的顺序号发送给所述传输源。
15.一种媒体流传送系统,包括:
媒体传送设备,用于利用实时传输协议以分组的形式向有线网络发送媒体流;
中继设备,其连接到所述有线网络,用于向无线链路发送所述媒体流,所述中继设备包括:
第一反馈设备,用于接收在所述有线网络中传输的所述媒体流的分组,以及向传输源发送包括预定时期内所述有线网络中的分组丢失率的信息;
整形点,该整形点是用于调节分组进入无线链路的速率的装置;以及
第二反馈设备,用于把关于通过所述整形点发送到所述无线链路的分组的确认响应发送给所述传输源,
其中所述媒体流是包括一序列帧内编码的画面和预测编码的画面的视频;以及
其中所述媒体传送设备包括:
存储器,用于存储一幅视频的多个媒体流,所述多个媒体流至少包括以第一配置包含帧内编码画面的第一媒体流和以不同于所述第一配置的第二配置包含帧内编码画面的第二媒体流;以及
切换装置,用于响应所述分组丢失的确定,为已发生丢失的目的地选择其中在所述丢失分组中的画面之后的第一帧内编码画面最早出现在所述多个媒体流当中的媒体流,以及把要发送的媒体流切换到所述选择的媒体流。
16.根据权利要求15所述的媒体流传送系统,其中所述系统被配置成,如果无线终端的接收缓冲器大得足以提供从所述媒体传送设备的重发,则根据来自所述无线终端的确认响应执行重发。
17.根据权利要求15所述的媒体流传送系统,其中所述系统被配置成,如果无线终端的接收缓冲器不是大得足以提供从所述媒体传送设备的重发,则所述中继设备发送添加了错误校正码的媒体流。
CNB03805261XA 2002-03-06 2003-03-05 媒体流式传输分发系统 Expired - Fee Related CN100539544C (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP61017/2002 2002-03-06
JP2002061017 2002-03-06
JP53733/2003 2003-02-28
JP2003053733A JP4116470B2 (ja) 2002-03-06 2003-02-28 メディア・ストリーミング配信システム

Publications (2)

Publication Number Publication Date
CN1640076A CN1640076A (zh) 2005-07-13
CN100539544C true CN100539544C (zh) 2009-09-09

Family

ID=27790993

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB03805261XA Expired - Fee Related CN100539544C (zh) 2002-03-06 2003-03-05 媒体流式传输分发系统

Country Status (6)

Country Link
US (1) US7443797B2 (zh)
EP (2) EP1482681B1 (zh)
JP (1) JP4116470B2 (zh)
KR (1) KR100941562B1 (zh)
CN (1) CN100539544C (zh)
WO (1) WO2003075526A1 (zh)

Families Citing this family (155)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7068729B2 (en) 2001-12-21 2006-06-27 Digital Fountain, Inc. Multi-stage code generator and decoder for communication systems
US6307487B1 (en) 1998-09-23 2001-10-23 Digital Fountain, Inc. Information additive code generator and decoder for communication systems
WO2007091968A2 (en) 2006-02-06 2007-08-16 Telefonaktiebolaget Lm Ericsson (Publ) Method and arrangement for improving media transmission quality using robust representation of media frames
US6834308B1 (en) 2000-02-17 2004-12-21 Audible Magic Corporation Method and apparatus for identifying media content presented on a media playing device
US7562012B1 (en) 2000-11-03 2009-07-14 Audible Magic Corporation Method and apparatus for creating a unique audio signature
EP1490767B1 (en) 2001-04-05 2014-06-11 Audible Magic Corporation Copyright detection and protection system and method
US7529659B2 (en) * 2005-09-28 2009-05-05 Audible Magic Corporation Method and apparatus for identifying an unknown work
US8972481B2 (en) 2001-07-20 2015-03-03 Audible Magic, Inc. Playlist generation method and apparatus
US9240810B2 (en) 2002-06-11 2016-01-19 Digital Fountain, Inc. Systems and processes for decoding chain reaction codes through inactivation
KR101143282B1 (ko) 2002-10-05 2012-05-08 디지털 파운튼, 인크. 연쇄 반응 코드의 체계적 인코딩 및 디코딩
US7616638B2 (en) 2003-07-29 2009-11-10 Orbital Data Corporation Wavefront detection and disambiguation of acknowledgments
US8270423B2 (en) 2003-07-29 2012-09-18 Citrix Systems, Inc. Systems and methods of using packet boundaries for reduction in timeout prevention
US7630305B2 (en) 2003-07-29 2009-12-08 Orbital Data Corporation TCP selective acknowledgements for communicating delivered and missed data packets
US8332326B2 (en) * 2003-02-01 2012-12-11 Audible Magic Corporation Method and apparatus to identify a work received by a processing system
JP3838511B2 (ja) * 2003-03-24 2006-10-25 株式会社Kddi研究所 動画像圧縮符号化送受信装置
WO2005009069A1 (en) * 2003-07-10 2005-01-27 Telefonaktiebolaget Lm Ericsson (Publ) Radio link management based on retransmission request performance
US7417989B1 (en) * 2003-07-29 2008-08-26 Sprint Spectrum L.P. Method and system for actually identifying a media source in a real-time-protocol stream
US8437284B2 (en) 2003-07-29 2013-05-07 Citrix Systems, Inc. Systems and methods for additional retransmissions of dropped packets
US8238241B2 (en) 2003-07-29 2012-08-07 Citrix Systems, Inc. Automatic detection and window virtualization for flow control
US8432800B2 (en) 2003-07-29 2013-04-30 Citrix Systems, Inc. Systems and methods for stochastic-based quality of service
CN101834610B (zh) 2003-10-06 2013-01-30 数字方敦股份有限公司 通过通信信道接收从源发射的数据的方法和装置
JPWO2005099188A1 (ja) 2004-03-05 2008-03-06 日本電気株式会社 通信品質管理方法および装置
KR101205758B1 (ko) 2004-05-07 2012-12-03 디지털 파운튼, 인크. 파일 다운로드 및 스트리밍 시스템
CN100349411C (zh) * 2004-06-30 2007-11-14 华为技术有限公司 媒体流服务质量上报方法
WO2006020826A2 (en) * 2004-08-11 2006-02-23 Digital Fountain, Inc. Method and apparatus for fast encoding of data symbols according to half-weight codes
US7660366B2 (en) * 2004-08-30 2010-02-09 Harmonic Inc. Message synchronization over a stochastic network
CN101069378B (zh) * 2004-08-31 2014-07-23 艾利森电话股份有限公司 数据单元发送器和数据单元中继装置
US7626926B2 (en) * 2004-12-09 2009-12-01 Airvana, Inc. Traffic management in a wireless data network
CN100344112C (zh) * 2004-12-14 2007-10-17 华为技术有限公司 下一代网络中mg上报服务质量信息的实现方法
US20060150055A1 (en) * 2005-01-06 2006-07-06 Terayon Communication Systems, Inc. Adaptive information delivery system using FEC feedback
EP1713194A1 (en) * 2005-04-15 2006-10-18 Siemens Aktiengesellschaft Method for updating an encoder state register
EP1889410B1 (en) * 2005-05-30 2008-10-01 Telefonaktiebolaget LM Ericsson (publ) Data unit relay device and method of controlling the same
WO2007001518A1 (en) * 2005-06-14 2007-01-04 Broadband Royalty Corporation Media stream distribution system
US8102878B2 (en) 2005-09-29 2012-01-24 Qualcomm Incorporated Video packet shaping for video telephony
US8548048B2 (en) 2005-10-27 2013-10-01 Qualcomm Incorporated Video source rate control for video telephony
US8514711B2 (en) 2005-10-21 2013-08-20 Qualcomm Incorporated Reverse link lower layer assisted video error control
US8406309B2 (en) 2005-10-21 2013-03-26 Qualcomm Incorporated Video rate adaptation to reverse link conditions
US8842555B2 (en) 2005-10-21 2014-09-23 Qualcomm Incorporated Methods and systems for adaptive encoding of real-time information in packet-switched wireless communication systems
US20070094691A1 (en) * 2005-10-24 2007-04-26 Gazdzinski Robert F Method and apparatus for on-demand content transmission and control over networks
US7613979B1 (en) * 2005-12-07 2009-11-03 Sony Computer Entertainment Inc. Network communication protocol for large scale distribution of streaming content
KR100656654B1 (ko) * 2005-12-13 2006-12-11 주식회사 팬택앤큐리텔 Dmb 녹화 기능을 구비한 이동통신단말기 및 그 에러정정 방법
US20070147314A1 (en) * 2005-12-22 2007-06-28 Telefonaktiebolaget Lm Ericsson (Publ) Network processing node and method for manipulating packets
CN101686107B (zh) * 2006-02-13 2014-08-13 数字方敦股份有限公司 使用可变fec开销和保护周期的流送和缓冲
US9270414B2 (en) 2006-02-21 2016-02-23 Digital Fountain, Inc. Multiple-field based code generator and decoder for communications systems
US8032650B2 (en) * 2006-03-15 2011-10-04 Arris Group, Inc. Media stream distribution system
US8612619B2 (en) * 2006-03-31 2013-12-17 Alcatel Lucent Method and apparatus for improved multicast streaming in wireless networks
US8175175B1 (en) * 2006-04-03 2012-05-08 Aaris Group Inc. Method and system for rate-shaping and transmitting media streams
EP2013987B1 (en) * 2006-04-29 2012-12-26 Thomson Licensing Seamless handover of multicast sessions in internet protocol based wireless networks using staggercasting
WO2007134196A2 (en) 2006-05-10 2007-11-22 Digital Fountain, Inc. Code generator and decoder using hybrid codes
JP4791538B2 (ja) * 2006-05-19 2011-10-12 パナソニック株式会社 無線通信装置
JP4711921B2 (ja) * 2006-05-22 2011-06-29 パナソニック株式会社 通信端末装置および再送要求方法
US20070280217A1 (en) * 2006-06-01 2007-12-06 Texas Instruments Incorporated Inter-nodal robust mode for real-time media streams in a network
US9380096B2 (en) 2006-06-09 2016-06-28 Qualcomm Incorporated Enhanced block-request streaming system for handling low-latency streaming
US9386064B2 (en) 2006-06-09 2016-07-05 Qualcomm Incorporated Enhanced block-request streaming using URL templates and construction rules
US9432433B2 (en) 2006-06-09 2016-08-30 Qualcomm Incorporated Enhanced block-request streaming system using signaling or block creation
US9178535B2 (en) 2006-06-09 2015-11-03 Digital Fountain, Inc. Dynamic stream interleaving and sub-stream based delivery
US9209934B2 (en) 2006-06-09 2015-12-08 Qualcomm Incorporated Enhanced block-request streaming using cooperative parallel HTTP and forward error correction
US9419749B2 (en) 2009-08-19 2016-08-16 Qualcomm Incorporated Methods and apparatus employing FEC codes with permanent inactivation of symbols for encoding and decoding processes
US8296813B2 (en) * 2006-06-22 2012-10-23 Sony Computer Entertainment Inc. Predictive frame dropping to enhance quality of service in streaming data
KR101419287B1 (ko) * 2006-07-07 2014-07-14 삼성전자주식회사 Ipdc 서비스를 제공하는 장치 및 방법 및 ipdc서비스를 처리하는 장치 및 방법
WO2008052383A1 (en) * 2006-10-30 2008-05-08 Huawei Technologies Co., Ltd. Load control of ue mbms measurement reporting
US8046656B2 (en) * 2006-10-31 2011-10-25 Hewlett-Packard Development Company, L.P. Rendering and correcting data
CN101179480B (zh) * 2006-11-07 2010-05-12 中兴通讯股份有限公司 一种转发流媒体的方法
JP4250654B2 (ja) * 2006-11-17 2009-04-08 株式会社東芝 通信装置、通信方法および通信プログラム
US8929360B2 (en) 2006-12-07 2015-01-06 Cisco Technology, Inc. Systems, methods, media, and means for hiding network topology
KR101370478B1 (ko) 2007-01-10 2014-03-06 퀄컴 인코포레이티드 멀티미디어 전화 통신을 위한 컨텐트- 및 링크-의존 코딩 적응 구조
US8767839B2 (en) * 2007-01-22 2014-07-01 Qualcomm Incorporated Error filter to differentiate between reverse link and forward link video data errors
US8180283B2 (en) * 2007-02-14 2012-05-15 Alcatel Lucent Method of providing feedback to a media server in a wireless communication system
US20100325255A1 (en) * 2007-04-05 2010-12-23 Gene Cheung Data transmission system and method
WO2008142736A1 (ja) * 2007-05-21 2008-11-27 Fujitsu Limited 中継装置、及び中継方法
US8006314B2 (en) 2007-07-27 2011-08-23 Audible Magic Corporation System for identifying content of digital data
US8190750B2 (en) * 2007-08-24 2012-05-29 Alcatel Lucent Content rate selection for media servers with proxy-feedback-controlled frame transmission
JP5027305B2 (ja) 2007-09-12 2012-09-19 デジタル ファウンテン, インコーポレイテッド 信頼できる通信を可能にするためのソース識別情報の生成および伝達
JP4382153B2 (ja) * 2007-12-12 2009-12-09 パナソニック株式会社 データ送受信システム、端末、中継機器及びデータ送信方法
US7724652B2 (en) * 2008-01-08 2010-05-25 International Business Machines Corporation Method of reducing network congestion
KR101407523B1 (ko) * 2008-01-09 2014-06-16 삼성전자주식회사 스트리밍 서비스를 제공하는 시스템 및 이의 스트리밍서비스 방법
US8797850B2 (en) 2008-01-10 2014-08-05 Qualcomm Incorporated System and method to adapt to network congestion
KR101008356B1 (ko) * 2008-01-21 2011-01-14 최태암 스트리밍 중계장치, 사용자 단말장치 및 스트리밍 서비스중계방법
US8238420B1 (en) * 2008-01-24 2012-08-07 Adobe Systems Incorporated Video content transcoding for mobile devices
CN101222296B (zh) * 2008-01-31 2010-06-09 上海交通大学 上行蜂窝视频通信中自适应的传输方法及系统
JP2009182780A (ja) * 2008-01-31 2009-08-13 Nec Corp 再送プロセスのデータ処理方法およびそれを用いた通信装置
US8379083B1 (en) * 2008-07-17 2013-02-19 Sprint Communications Company L.P. Simultaneous viewing and reliable recording of multimedia content over a network
US8015310B2 (en) * 2008-08-08 2011-09-06 Cisco Technology, Inc. Systems and methods of adaptive playout of delayed media streams
US7886073B2 (en) * 2008-08-08 2011-02-08 Cisco Technology, Inc. Systems and methods of reducing media stream delay
US8352992B1 (en) * 2008-10-09 2013-01-08 Hewlett-Packard Development Company, L.P. Wireless media streaming
WO2010070699A1 (ja) * 2008-12-15 2010-06-24 富士通株式会社 データ送信方法
US8239739B2 (en) * 2009-02-03 2012-08-07 Cisco Technology, Inc. Systems and methods of deferred error recovery
US8537736B2 (en) * 2009-02-25 2013-09-17 Industrial Technology Research Institute Methods and systems for wireless multicast and broadcast services
US8752097B2 (en) * 2009-02-27 2014-06-10 At&T Mobility Ii Llc Method and apparatus for distributing media
US9281847B2 (en) 2009-02-27 2016-03-08 Qualcomm Incorporated Mobile reception of digital video broadcasting—terrestrial services
US8199651B1 (en) * 2009-03-16 2012-06-12 Audible Magic Corporation Method and system for modifying communication flows at a port level
CA2755774C (en) * 2009-03-19 2015-01-06 Azuki Systems, Inc. Method for scalable live streaming delivery for mobile audiences
CA2759880C (en) * 2009-03-23 2013-09-24 Azuki Systems, Inc. Method and system for efficient streaming video dynamic rate adaptation
CN101902315B (zh) * 2009-06-01 2013-04-17 华为技术有限公司 基于前向纠错的重传方法、设备和通信系统
US10165286B2 (en) 2009-07-08 2018-12-25 Dejero Labs Inc. System and method for automatic encoder adjustment based on transport data
US8873560B2 (en) * 2009-07-08 2014-10-28 Dejero Labs Inc. Multipath video streaming over a wireless network
US10033779B2 (en) 2009-07-08 2018-07-24 Dejero Labs Inc. Multipath data streaming over multiple wireless networks
US8942215B2 (en) 2010-07-15 2015-01-27 Dejero Labs Inc. System and method for transmission of data from a wireless mobile device over a multipath wireless router
US10117055B2 (en) 2009-07-08 2018-10-30 Dejero Labs Inc. System and method for providing data services on vehicles
US9756468B2 (en) 2009-07-08 2017-09-05 Dejero Labs Inc. System and method for providing data services on vehicles
US9288010B2 (en) 2009-08-19 2016-03-15 Qualcomm Incorporated Universal file delivery methods for providing unequal error protection and bundled file delivery services
US8136018B2 (en) * 2009-08-24 2012-03-13 Sony Computer Entertainment Inc. Network communication protocol for large scale distribution of streaming content
US9917874B2 (en) 2009-09-22 2018-03-13 Qualcomm Incorporated Enhanced block-request streaming using block partitioning or request controls for improved client-side handling
EP2302845B1 (en) 2009-09-23 2012-06-20 Google, Inc. Method and device for determining a jitter buffer level
CN101860803A (zh) * 2010-06-12 2010-10-13 珠海无线蜂网科技有限公司 一种广播电视信号的发射方法、传输中心、基站及系统
US9485546B2 (en) 2010-06-29 2016-11-01 Qualcomm Incorporated Signaling video samples for trick mode video representations
US8918533B2 (en) 2010-07-13 2014-12-23 Qualcomm Incorporated Video switching for streaming video data
US9185439B2 (en) 2010-07-15 2015-11-10 Qualcomm Incorporated Signaling data for multiplexing video components
US9596447B2 (en) 2010-07-21 2017-03-14 Qualcomm Incorporated Providing frame packing type information for video coding
US8806050B2 (en) 2010-08-10 2014-08-12 Qualcomm Incorporated Manifest file updates for network streaming of coded multimedia data
US8477050B1 (en) 2010-09-16 2013-07-02 Google Inc. Apparatus and method for encoding using signal fragments for redundant transmission of data
US8751565B1 (en) 2011-02-08 2014-06-10 Google Inc. Components for web-based configurable pipeline media processing
US8958375B2 (en) 2011-02-11 2015-02-17 Qualcomm Incorporated Framing for an improved radio link protocol including FEC
US9270299B2 (en) 2011-02-11 2016-02-23 Qualcomm Incorporated Encoding and decoding using elastic codes with flexible source block mapping
US9503223B2 (en) * 2011-03-04 2016-11-22 Blackberry Limited Controlling network device behavior
US8681866B1 (en) 2011-04-28 2014-03-25 Google Inc. Method and apparatus for encoding video by downsampling frame resolution
US9106787B1 (en) 2011-05-09 2015-08-11 Google Inc. Apparatus and method for media transmission bandwidth control using bandwidth estimation
US8661323B2 (en) 2011-05-09 2014-02-25 Google Inc. Method and apparatus for generating packet mask
US9398347B2 (en) 2011-05-30 2016-07-19 Sandvine Incorporated Ulc Systems and methods for measuring quality of experience for media streaming
US9294235B2 (en) * 2011-06-07 2016-03-22 Qualcomm Incorporated Methods and apparatuses for user equipment-based enhancements of radio link control for multi-point wireless transmission
US9253233B2 (en) 2011-08-31 2016-02-02 Qualcomm Incorporated Switch signaling methods providing improved switching between representations for adaptive HTTP streaming
US9843844B2 (en) 2011-10-05 2017-12-12 Qualcomm Incorporated Network streaming of media data
WO2013052060A1 (en) * 2011-10-07 2013-04-11 Hewlett-Packard Development Company, Lp Communication over a wireless connection
US9490850B1 (en) 2011-11-28 2016-11-08 Google Inc. Method and apparatus for decoding packetized data
US20130155918A1 (en) * 2011-12-20 2013-06-20 Nokia Siemens Networks Oy Techniques To Enhance Header Compression Efficiency And Enhance Mobile Node Security
JP5734466B2 (ja) * 2012-01-16 2015-06-17 三菱電機株式会社 映像受信端末、ホームゲートウェイ装置、品質管理システム及び品質劣化切り分けシステム
KR101917174B1 (ko) * 2012-02-24 2018-11-09 삼성전자주식회사 전자 장치 사이의 스트림 전송 방법 및 그 방법을 처리하는 전자 장치
US9294226B2 (en) 2012-03-26 2016-03-22 Qualcomm Incorporated Universal object delivery and template-based file delivery
JP6075370B2 (ja) * 2012-03-28 2017-02-08 富士通株式会社 品質評価装置、品質評価方法、通信システム、及び無線基地局装置
US9185429B1 (en) 2012-04-30 2015-11-10 Google Inc. Video encoding and decoding using un-equal error protection
US8879646B2 (en) * 2012-05-15 2014-11-04 Broadcom Corporation Split microwave backhaul architecture allowing for bandwidth changes between an indoor and outdoor unit
US10034023B1 (en) 2012-07-30 2018-07-24 Google Llc Extended protection of digital video streams
US9081778B2 (en) 2012-09-25 2015-07-14 Audible Magic Corporation Using digital fingerprints to associate data with a work
KR20140050454A (ko) * 2012-10-19 2014-04-29 삼성전자주식회사 서버, 클라이언트 디바이스 및 그 제어 방법
US9100698B2 (en) 2012-10-26 2015-08-04 Motorola Solutions, Inc. Systems and methods for sharing bandwidth across multiple video streams
US9577791B2 (en) 2012-12-05 2017-02-21 Intel Corporation Notification by network element of packet drops
US8989017B2 (en) * 2012-12-14 2015-03-24 Intel Corporation Network congestion management by packet circulation
US9172740B1 (en) 2013-01-15 2015-10-27 Google Inc. Adjustable buffer remote access
US9311692B1 (en) 2013-01-25 2016-04-12 Google Inc. Scalable buffer remote access
US9225979B1 (en) 2013-01-30 2015-12-29 Google Inc. Remote access encoding
JP6398215B2 (ja) * 2013-03-15 2018-10-03 株式会社リコー 配信制御システム、配信システム、配信制御方法、及びプログラム
CN103167359B (zh) * 2013-03-27 2016-03-02 华为技术有限公司 Rtp媒体流的传输方法及装置
CN105594219B (zh) * 2014-07-31 2019-08-20 Lg 电子株式会社 用于广播信号的发射/接收处理的设备和方法
US9787430B2 (en) 2015-05-01 2017-10-10 Qualcomm Incorporated Dynamic setting of FEC in eMBMS video streaming
CN106341738B (zh) 2015-07-08 2021-02-02 杭州海康威视数字技术股份有限公司 流媒体网络传输的带宽计算方法、服务器端和系统
EP3133078B1 (en) 2015-08-18 2019-01-30 Samsung Electronics Co., Ltd. Organometallic compound and organic light-emitting device including the same
US10951914B2 (en) * 2015-08-27 2021-03-16 Intel Corporation Reliable large group of pictures (GOP) file streaming to wireless displays
JP6246443B2 (ja) * 2015-10-22 2017-12-13 三菱電機株式会社 映像配信装置、映像配信システムおよび映像配信方法
CN108370521B (zh) * 2016-01-05 2023-03-24 富士通株式会社 信息传输方法、装置和系统
JP6533761B2 (ja) * 2016-05-18 2019-06-19 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置、情報処理システム、および情報処理方法
CN110771102B (zh) * 2017-06-29 2023-09-22 索尼公司 通信系统和控制设备
CA3200583A1 (en) * 2020-12-01 2022-06-09 Yair NEUGEBOREN Partial video async support using r-macphy device
CA3206842A1 (en) * 2021-02-01 2022-08-04 Kevin GARVEY Adaptive video slew rate for video delivery
WO2022235490A1 (en) * 2021-05-03 2022-11-10 Arris Enterprises Llc System for channel map delivery for hi split cable networks
US11700402B1 (en) * 2022-03-25 2023-07-11 Nvidia Corporation Dynamically reducing stutter and latency in video streaming applications

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2129199C (en) * 1994-07-29 1999-07-20 Roger Y.M. Cheung Method and apparatus for bridging wireless lan to a wired lan
US5699367A (en) * 1995-12-29 1997-12-16 Telefonaktiebolaget Lm Ericsson Concatenated error detection coding and packet numbering for hierarchical ARQ schemes
JPH09200188A (ja) * 1996-01-11 1997-07-31 Funai Denki Kenkyusho:Kk データ伝送システム
JPH1198503A (ja) * 1997-09-19 1999-04-09 Nec Corp 画像データの転送および再生方式
US6643496B1 (en) * 1998-03-31 2003-11-04 Canon Kabushiki Kaisha System, method, and apparatus for adjusting packet transmission rates based on dynamic evaluation of network characteristics
EP1095520A2 (en) * 1998-06-29 2001-05-02 Limt Technology AB Method and apparatus for splicing data streams
US6584153B1 (en) * 1998-07-23 2003-06-24 Diva Systems Corporation Data structure and methods for providing an interactive program guide
FR2784845B1 (fr) * 1998-10-14 2001-02-23 France Telecom Procede de basculement de la ou des composantes video d'un premier programme audiovisuel sur la ou les composantes video d'un second programme audiovisuel numerique
JP2001326914A (ja) * 2000-03-08 2001-11-22 Sony Corp 電子情報内容配信処理システム、情報配信装置、情報処理装置及び電子情報内容配信処理方法
KR100450236B1 (ko) * 2000-08-24 2004-09-30 마츠시타 덴끼 산교 가부시키가이샤 송수신 방법 및 그 장치
US7224702B2 (en) * 2000-08-30 2007-05-29 The Chinese University Of Hong Kong System and method for error-control for multicast video distribution
JP2002209234A (ja) * 2001-01-11 2002-07-26 Fujitsu Ltd 通信システム
JP4008734B2 (ja) 2001-03-29 2007-11-14 松下電器産業株式会社 データ再生装置及び携帯電話機
US7133362B2 (en) * 2001-11-14 2006-11-07 Microsoft Corporation Intelligent buffering process for network conference video

Also Published As

Publication number Publication date
EP2421190A2 (en) 2012-02-22
CN1640076A (zh) 2005-07-13
JP4116470B2 (ja) 2008-07-09
WO2003075526A1 (en) 2003-09-12
EP2421190A3 (en) 2012-04-18
US20050180415A1 (en) 2005-08-18
KR20040091688A (ko) 2004-10-28
EP1482681A1 (en) 2004-12-01
JP2003333577A (ja) 2003-11-21
EP2421190B1 (en) 2015-06-17
EP1482681A4 (en) 2010-08-18
US7443797B2 (en) 2008-10-28
EP1482681B1 (en) 2012-07-11
KR100941562B1 (ko) 2010-02-10

Similar Documents

Publication Publication Date Title
CN100539544C (zh) 媒体流式传输分发系统
US6587985B1 (en) Data transmission method, data transmission apparatus, data receiving apparatus, and packet data structure
US8223807B2 (en) Synchronizing data transmission over wireless networks
CN101155311B (zh) 一种视频通信中的视频码流错误检测和处理方法
CN101861709B (zh) 用于具有合并的自动重复请求的自适应前向纠错以在无线局域网中进行可靠多播的方法和装置
CN102742245B (zh) 用于解析网络抽象层以实现可靠数据通信的方法和设备
CN103109485A (zh) 用于作出重发决定的方法和装置
CN101552660A (zh) 对流媒体数据进行重传、播放的方法、装置及通信系统
US20120170523A1 (en) Scalable video sender over multiple links
Lo et al. Performance evaluation of MPEG-4 video streaming over UMTS networks using an integrated tool environment
CN102065372B (zh) 以广播方式传输数据的方法及相关装置
CN106230553A (zh) 数据传输方法及接收方法、数据发送终端及接收终端
Hou et al. Performance analysis of differentiated ARQ scheme for video transmission over wireless networks
Rossi et al. A partially reliable transport protocol for multiple-description real-time multimedia traffic
Meggers et al. A new feedback error control scheme for block based video communication in packet switched wireless networks
Freytes New ARQ protocol for interactive video over data networks
Kim et al. Feedback-based adaptive video streaming over lossy channels

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: HEWLETT-PACKARD DEVELOPMENT COMPANY, L.P.

Free format text: FORMER OWNER: HEWLETT-PACKARD CO. (US) P.O. BOX 10301, PALO ALTO CALIFORNIA U.S.A.

Effective date: 20120418

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20120418

Address after: Texas, USA

Patentee after: HEWLETT-PACKARD DEVELOPMENT Co.,L.P.

Address before: California, USA

Patentee before: Hewlett-Packard Co.

ASS Succession or assignment of patent right

Owner name: HEWLETT PACKARD DEVELOPMENT CO., LLP

Free format text: FORMER OWNER: PAM SA

Effective date: 20131231

Owner name: PAM SA

Free format text: FORMER OWNER: HEWLETT PACKARD DEVELOPMENT CO., LLP

Effective date: 20131231

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20131231

Address after: Texas, USA

Patentee after: HEWLETT-PACKARD DEVELOPMENT Co.,L.P.

Address before: California, USA

Patentee before: PALM, Inc.

Effective date of registration: 20131231

Address after: California, USA

Patentee after: PALM, Inc.

Address before: Texas, USA

Patentee before: HEWLETT-PACKARD DEVELOPMENT Co.,L.P.

ASS Succession or assignment of patent right

Owner name: QUALCOMM INC.

Free format text: FORMER OWNER: HEWLETT PACKARD DEVELOPMENT CO., LLP

Effective date: 20140224

TR01 Transfer of patent right

Effective date of registration: 20140224

Address after: California, USA

Patentee after: Qualcomm Inc.

Address before: Texas, USA

Patentee before: HEWLETT-PACKARD DEVELOPMENT Co.,L.P.

TR01 Transfer of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090909

Termination date: 20190305

CF01 Termination of patent right due to non-payment of annual fee