CN102257785A - 用于交织数据块的方法和装置 - Google Patents
用于交织数据块的方法和装置 Download PDFInfo
- Publication number
- CN102257785A CN102257785A CN2009801511942A CN200980151194A CN102257785A CN 102257785 A CN102257785 A CN 102257785A CN 2009801511942 A CN2009801511942 A CN 2009801511942A CN 200980151194 A CN200980151194 A CN 200980151194A CN 102257785 A CN102257785 A CN 102257785A
- Authority
- CN
- China
- Prior art keywords
- data
- divisions
- interweaving
- piece
- division
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M13/00—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes
- H03M13/27—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes using interleaving techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L1/00—Arrangements for detecting or preventing errors in the information received
- H04L1/004—Arrangements for detecting or preventing errors in the information received by using forward error control
- H04L1/0056—Systems characterized by the type of code used
- H04L1/0071—Use of interleaving
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M13/00—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L1/00—Arrangements for detecting or preventing errors in the information received
- H04L1/004—Arrangements for detecting or preventing errors in the information received by using forward error control
- H04L1/0041—Arrangements at the transmitter end
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/70—Media network packetisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23608—Remultiplexing multiplex streams, e.g. involving modifying time stamps or remapping the packet identifiers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2383—Channel coding or modulation of digital bit-stream, e.g. QPSK modulation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/24—Systems for the transmission of television signals using pulse code modulation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/24—Systems for the transmission of television signals using pulse code modulation
- H04N7/52—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Physics & Mathematics (AREA)
- Probability & Statistics with Applications (AREA)
- Theoretical Computer Science (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
在一个方面,一种方法包括接收多媒体数据块。多媒体数据块包括多个数据部分。该方法还包括基于优先级顺序来交织多个数据部分以形成经交织的数据块。优先级顺序以数据部分的多媒体数据类型为基础。该方法还包括传输经交织的数据块。在另一方面,一种方法包括:接收经交织的多媒体数据块的一个或多个数据部分;以及基于信息来确定一个或多个数据部分的第一数据部分。该方法还包括基于其他信息来确定调度中针对第一数据部分的调度条目。
Description
技术领域
本申请总体上涉及多媒体数据流式传输。具体地,本申请涉及交织数据块内的多媒体数据单元或者数据部分。
背景技术
本部分旨在为权利要求中限定的本发明提供背景或者上下文。此处的描述可以包括可以实现的概念,但未必是事先已经想到或者实现的概念。因此,除非此处另外指出,本部分中描述的内容不是针对本申请中的描述和权利要求的现有技术,并且不因包括在本部分中而被承认为是现有技术。
数据递送方法的方案可以根据所使用的路由分为单播、多播和广播,这取决于接收方的数目及其订户关系。单播是指向一个订户传输媒体内容。在单播中,接收方通常请求来自发送方的媒体内容的传输。多播被定义为向已知的订户组传输媒体内容。在多播中,用户设备(例如,通信设备)通常通过特定通信协议而加入多播会话。广播服务向未知的并且可能是任意的订户组传输媒体内容流。在广播中,用户设备(例如,通信设备)通常在不对发送方作出任何通知的情况下开始对广播传输的接收。
流式传输是流式递送、流式服务和流式应用的统称。流式递送也在流式传输之外的应用中使用,诸如视频电话。流式递送的特征在于同时接收和回放所接收的数据。通常,不可靠的通信协议(例如,用户数据报协议(UDP))用于流式递送,以便具有合理的并且相对稳定的端到端传输延迟。渐进下载是指通过可靠的通信协议(诸如,超文本传输协议(HTTP))传输多媒体文件,并且在正在接收该文件时对其进行解码和呈现。
随着网络访问技术的显著进步(例如,提供足够的带宽)以及媒体编码技术的显著进步(例如,实现提高的质量),流式服务变得越来越受欢迎。在流式传输中,内容在从远程服务器开始接收之后很短时间内就播出。例如在客户端-服务器架构中,回放延迟可以在几秒的范围内,而例如针对端对端流式应用,回放延迟可以长达1到2分钟。
流式递送部署在若干不同应用中:例如,视频点播、互联网协议电视(IPTV),移动TV广播/多播、端对端流式传输等。不同的协议对于建立和控制流式传输会话是可用的,其取决于目标应用。第三代合作伙伴计划(3GPP)定义了单播流式服务,即分组交换流式服务(PSS),其支持通过无线单播载体向移动用户流式传输实时的和存储的内容。数字视频广播(DVB)定义了IPTV服务,其通过固定载体(例如,DSL线路)向用户家庭递送实时的和存储的内容。递送可以以单播或者多播模式执行。
流式服务可以使用由3GPP定义的多媒体广播/多播服务(MBMS)。MBMS使用前向纠错(FEC)机制,用于保护媒体流以避免传输错误和分组丢失。MBMS FEC码是系统块码,其根据原始源数据生成修复数据集。源数据被分为源块。源块包括源符号集,源符号例如为数据分组或者数据单元。源块继而被馈送至FEC编码器中用于生成修复符号。
FEC解码操作在通信设备处发起,以用于恢复在传输期间发生的分组丢失。为此,通信设备缓冲当前源块的传入分组和相关修复数据。只要完成了源块和相关修复数据的接收,FEC解码就可以开始。
在多播和广播流式递送中,可扩展媒体编码可以用于提供针对不同接收方的不同分辨率水平。针对视频流的情况,可以提供空间、时间和质量可扩展性。可扩展视频编码(SVC)已经被定义为对高级视频编码(H.264/AVC)标准的扩展。SVC允许空间、时间、粗粒度和中粒度质量可扩展性。通过使用分层B图片来实现时间可扩展性,已经可以利用H.264/AVC编解码器实现分层B图片。空间可扩展性允许创建比特流的两个或更多个子集,其中每个子集产生不同的图片分辨率。质量可扩展性支持创建比特流层,其改进了视频信号的信噪比(SNR)。SVC需要单个环路解码器,以使得在单个层处执行运动补偿。音频可扩展性可以具有不同的类型。SNR可扩展性表示扩展层改进音频信号的SNR的过程。带宽可扩展性是可扩展性的一种类型,其中扩展层增加所呈现的音频带宽。信道可扩展性表示扩展层提供附加音频信道的模式。
发明内容
在一个方面,一种方法包括:接收多媒体数据块,该多媒体数据块包括多个数据部分;基于优先级顺序来交织多个数据部分以形成经交织的数据块,优先级顺序以数据部分的多媒体数据类型为基础;以及传输经交织的数据块。
在一些示例中,该方法还包括:基于与经交织的数据块相关联的信息来生成交织属性。
在其他示例中,该方法还包括:修改经交织的数据块以包括交织属性。
在一些示例中,该方法还包括:传输交织属性。在其他示例中,交织属性包括与优先级顺序相关联的信息、用于解码的优先级、时间戳和/或与数据部分相关联的信息。
在一些示例中,该方法还包括:编码多媒体数据块。
在其他示例中,该方法还包括:编码经交织的数据块。
在一些示例中,编码是前向纠错编码。
在其他示例中,优先级顺序是逆时间顺序、时间顺序、数据部分大小顺序和/或数据类型顺序。
在一些示例中,优先级顺序是预定优先级顺序。
在另一方面,一种装置包括收发机和交织器。收发机配置用于接收多媒体数据块并且传输经交织的数据块,多媒体数据块包括多个数据部分。交织器配置用于基于优先级顺序来交织多个数据部分以形成经交织的数据块,优先级顺序以数据部分的多媒体数据类型为基础。
在一些示例中,该装置还包括:进一步配置用于基于与经交织的数据块相关联的信息来生成属性的交织器。
在其他示例中,该装置还包括:进一步配置用于修改经交织的数据块以包括交织属性的交织器。
在一些示例中,该装置还包括:进一步配置用于传输交织属性的收发机。
在其他示例中,该装置还包括:编码器,配置用于编码多媒体数据块。
在一些示例中,该装置还包括:编码器,配置用于编码经交织的数据块。
在其他示例中,该装置还包括:进一步配置用于基于与数据块相关联的多媒体类型来生成优先级顺序的交织器。
在又一方面,一种编码有指令的计算机可读存储介质,当指令由计算机执行时,执行:接收多媒体数据块,该多媒体数据块包括多个数据部分;基于优先级顺序来交织多个数据部分以形成经交织的数据块,该优先级顺序以数据部分的多媒体数据类型为基础;以及传输经交织的数据块。
在另一方面,一种方法,包括:接收经交织的多媒体数据块的一个或多个数据部分;基于与一个或多个数据部分相关联的时间信息和/或一个或多个数据部分的数据类型信息来确定一个或多个数据部分的第一数据部分;以及基于随后数据块的最早数据部分的播出时间信息来确定调度中针对第一数据部分的调度条目。
在一些示例中,该方法还包括:基于与一个或多个数据部分相关联的时间信息和/或一个或多个数据部分的数据类型信息来布置一个或多个数据部分。
在其他示例中,该方法还包括:播放经布置的一个或多个数据部分。
在一些示例中,该方法还包括:基于调度中的调度条目来播放第一数据部分。
在其他示例中,该方法还包括:播放第一数据部分还包括显示第一数据部分和/或再现第一数据部分。
在一些示例中,经交织的多媒体数据块包括音频数据部分、视频数据部分、图像数据部分、文本数据部分和/或动画数据部分。
在其他示例中,该方法还包括:基于所接收的经交织的多媒体数据块的分段来确定播出时间信息。
在其他示例中,该方法还包括:基于随后数据块的最早数据部分的播出时间信息和/或停滞时间信息来确定调度中针对第一数据部分的调度条目。
在一些示例中,该方法还包括:基于与下一多媒体数据块相关联的时间信息和与一个或多个数据部分相关联的时间信息之间的差异来确定停滞时间信息。
在其他示例中,该方法还包括:进一步基于交织属性来确定一个或多个数据部分的第一数据部分。
在一些示例中,交织属性包括与经交织的多媒体数据块的一个或多个数据部分的次序相关联的信息。
在一些示例中,一个或多个数据部分的数据类型信息包括一个或多个数据部分的多媒体类型。
在又一方面,一种装置包括收发机和媒体处理器。收发机配置用于接收经交织的多媒体数据块的一个或多个数据部分。媒体处理器配置用于基于与一个或多个数据部分相关联的时间信息和/或一个或多个数据部分的数据类型信息来确定一个或多个数据部分的第一数据部分,以及基于随后数据块的最早数据部分的播出时间信息来确定调度中针对第一数据部分的调度条目。
在一些示例中,该装置还包括媒体处理器,其进一步配置用于基于与一个或多个数据部分相关联的时间信息和/或一个或多个数据部分的数据类型信息来布置一个或多个数据部分。
在其他示例中,该装置还包括显示器,其配置用于播放经布置的一个或多个数据部分。
在一些示例中,该装置还包括显示器,其配置用于基于调度中的调度条目来播放第一数据部分。
在其他示例中,该装置还包括媒体处理器,其进一步配置用于基于所接收的经交织的多媒体数据块的分段来确定播出时间信息。
在一些示例中,该装置还包括媒体处理器,其进一步配置用于基于随后数据块的最早数据部分的播出时间信息和/或停滞时间信息来确定调度中针对第一数据部分的调度条目。
在一些示例中,该装置还包括媒体处理器,其进一步配置用于基于与下一多媒体数据块相关联的时间信息和与一个或多个数据部分相关联的时间信息之间的差异来确定停滞时间信息。
在其他示例中,该装置还包括媒体处理器,其进一步配置用于基于交织属性来确定一个或多个数据部分的第一数据部分。
在另一方面,一种编码有指令的计算机可读存储介质,该指令在由计算机执行时,执行:接收经交织的多媒体数据块的一个或多个数据部分;基于与一个或多个数据部分相关联的时间信息和/或一个或多个数据部分的数据类型信息来确定一个或多个数据部分的第一数据部分;以及基于随后数据块的最早数据部分的播出时间信息来确定调度中针对第一数据部分的调度条目。
此处描述的针对多媒体数据块的交织技术可以提供以下优点中的一个或多个。一个优点是减少了传输错误和/或分组丢失,从而支持针对用户的较好观看体验。另一优点是经交织的数据的排序使得能够在接收其余多媒体时开始多媒体,从而支持针对用户的较好观看体验,以及快速信道切换。附加的优点是经交织的数据的较高观看持续时间从而支持针对用户的较好观看体验以及快速信道切换。
根据以下详细描述结合附图,各种实施方式的这些和其他优点和特征及其操作的组织和方式将变得易见。
附图说明
通过参考附图描述实施方式,在附图中:
图1示出了用于数据递送的一种示例通信系统;
图2A和图2B分别示出了一种示例通信设备的框图和一种示例服务器的框图;
图3示出了根据本发明的示例实施方式的服务器的详细框图;
图4示出了根据本发明的另一示例实施方式的服务器的详细框图;
图5A和图5B分别示出了根据本发明一个示例实施方式、示例多媒体源块的框图以及在经交织之后的相同多媒体源块的框图;
图6A和图6B示出了根据本发明一个示例实施方式、接收通信设备的示例调度过程的时间轴;
图7A是示出根据本发明一个示例实施方式进行交织的、数据块的数据部分的时间戳的呈现/显示的图示;
图7B是示出与图7a相同的数据块的未经交织的数据部分的呈现/显示时间戳的图示;
图8示出了一种示例通信设备;
图9A和图9B是包括交织描述符的数据块描述的示例;
图10A是示出根据本发明一个示例实施方式的、服务器的示例交织过程的流程图;
图10B是示出根据本发明一个示例实施方式的、服务器的示例交织过程的流程图;
图11是示出根据本发明一个示例实施方式的、通信设备的示例调度和解交织过程的流程图。
具体实施方式
在以下描述中,为了解释和非限制的目的,阐述了细节和描述以便提供对实施方式的完全理解。然而,本领域技术人员将易见的是,实施方式可以在不同于这些细节和描述的其他实施方式中实现。
公开了附录A。附录A包括针对本申请的示例实施方式的描述,并且由此通过引用并入于此。
图1示出了用于数据递送的一种示例通信系统100。该通信系统100包括至少一个通信设备110、通信网络120和至少一个多媒体服务器,例如,服务器A 130a、B 130b到Z 130z,统称为130。通信设备110包括无线电话110a、个人数字助理(PDA)110b、计算机110c、电视110z等。本领域技术人员应当理解,通信设备110可以是任何通信设备。
在多媒体流式会话中,通信设备110从一个或多个多媒体服务器130经由通信网络120接收多媒体源块。多媒体源块包括多个数据单元或者数据分组。包括媒体内容的数据分组可以承载指示数据分组中的内容的呈现顺序(例如时间戳)的信息。通信设备可以解码媒体,并且按照呈现顺序信息所定义的时间顺序对其进行显示。
根据一个示例实施方式,多媒体源块的数据部分(例如,数据单元或者数据分组)按照与其相应呈现顺序不同的顺序进行交织、排序或者布置。例如,多媒体源块中的数据部分可以按照减轻接收机侧的调谐时间的方式进行交织或者布置。在一个示例实施方式中,例如多媒体源块中的不同数据部分可以根据哪些数据部分被交织而被指派不同的优先级。在另一示例实施方式中,将例如相同数据源块中的需要解码其他数据部分的数据部分放置在多媒体源块的末尾。此类交织/布置可以允许接收设备快速地调谐并且开始播放媒体内容。例如,与音频数据相关联的数据部分也可以放置在多媒体源块的末尾处,以便允许例如加入多媒体流式会话的通信设备在没有超出期望的延迟的情况下开始播放音频内容。
在一个示例实施方式中,通信设备110从多媒体服务器130经由通信网络120接收经交织的数据块(例如,多媒体源块),并且处理经交织的数据块以用于观看和/或存储。在针对多媒体流式会话进行调谐时,通信设备110可以开始接收数据源块内随机位置处的数据部分。接收通信设备110至少部分基于与一个或多个接收的数据部分相关联的时间信息(例如,时间戳)来解交织/重新布置经交织的数据部分。解交织或者重新布置将数据部分排列在其呈现/播出顺序中。解交织例如是交织过程的逆过程。通信设备110例如可以解码经解交织的数据部分。
根据一个示例实施方式,通信设备110确定调度中针对经解交织的数据部分中的第一数据部分的调度条目,例如开始播出的时刻。例如可以至少部分地基于第一和最后数据部分的播出时间信息和/或最小缓冲时间来确定调度条目。
当单播和多播数据递送用于传输多媒体数据时,通信设备110与多媒体服务器130经由通信网络120通信,以请求多媒体数据。多媒体服务器130接收来自通信设备110的针对多媒体数据的请求。当使用单播数据递送时,请求可以标识要传输的多媒体数据,包括内容项内的开始位置,诸如电视剧的剧集。当使用多播数据递送时,多媒体服务器130正在传输一个或多个多媒体数据流,并且请求通常标识通信设备110希望接收所传输的多媒体数据流中的哪一个。多媒体服务器130接收与针对多媒体数据的请求相关联的多媒体数据块。当使用单播数据递送时,多媒体数据块对应于所请求的多媒体数据,包括内容项内的开始位置。当使用多播数据递送时,多媒体数据块是针对相应多媒体数据流要传输的下一数据块。
当广播数据递送用于传输多媒体数据时,通信设备130可以在多媒体数据的传输的任何位置开始对多媒体数据的接收。多媒体服务器130接收的多媒体数据块是要传输的下一数据块。
多媒体数据块包括多个数据部分。多媒体服务器130交织多个数据部分以形成经交织的数据块。根据一个示例实施方式,基于优先级顺序来交织多个数据部分,优先级顺序例如为逆解码顺序、解码依赖、可扩展性层的逆顺序等。交织有益地支持通信设备110中第一个所接收的数据块为用户改进观看体验,例如,用于多媒体开始的时间更少,用于空屏时间更少,用于音频的时间更多等。多媒体服务器130向相应的通信设备110传输经交织的数据块。
在一些示例中,多媒体服务器130接收多媒体数据流,其包括来自多媒体存储服务器(未示出)的、基于来自多媒体服务器130的请求的多个多媒体数据块。在其他示例中,多媒体服务器130从本地存储(例如,硬盘驱动器、cd-rom驱动器、光盘库等)和/或远程存储(例如,存储区域网、网络附接存储等)接收多媒体数据流。在一些示例中,多媒体服务器130从广播服务器(未示出)接收多媒体数据流,该广播服务器广播实时多媒体节目(例如,电视节目、电影等)。
例如,与计算机110c相关联的用户向电视节目的广播/多播会话调谐,或者请求观看电视节目,例如“Dogs of Big Wars”。计算机110c可以本地加入广播会话,经由通信网络120向服务器发送针对多播会话的加入请求,或者经由通信网络120向多媒体服务器B 130b发送单播请求。在多播递送的情况下,服务器建立到计算机110c的流式递送路径;继而流式传输服务器B 130b开始向计算机110c流式传输电视节目。在单播递送的情况下,多媒体服务器B 130b处理请求,并且开始向计算机110c流式传输电视节目。多媒体服务器B 130b流式传输电视节目包括若干步骤。多媒体服务器B 130b例如从本地存储取得针对电视节目的多媒体数据块或者接收针对电视节目的多媒体数据块。多媒体数据块包括多个数据部分,例如,音频、视频、图片、控制数据等。多媒体服务器B 130b交织多个数据部分以形成经交织的数据块。在该示例中,与音频相关联的数据部分被一起分组在数据块的末尾,并且与视频相关联的数据部分被一起分组在数据块的开端。数据部分的排序基于根据多媒体类型的优先级顺序,即视频第一,音频第二。多媒体服务器B 130b向与多播或者广播会话相关联的多播组传输经交织的数据块,或者例如针对单播会话向计算机110c传输经交织的数据块。
作为另一示例,与计算机110c相关联的用户请求观看电视节目(在该示例中,是“Dogs of Big Wars”)。计算机110c经由通信网络120向多媒体服务器B 130b传送请求。多媒体服务器B 130b处理该请求,并且将计算机110c放置到多播组中,多播组即已经请求观看电视节目的通信设备。多媒体服务器B 130b开始经由对多播组的多播向计算机110c传输电视节目。换言之,多媒体服务器B 130b在与多播组中的其他通信设备相同的数据块处开始向计算机110c的传输。多媒体服务器B 130b流式传输电视节目包括若干步骤。多媒体服务器B 130b接收针对电视节目的多媒体数据块。多媒体数据块包括多个数据部分(例如,音频、视频、图像、控制数据等)。多媒体服务器B 130b交织多个数据部分以形成经交织的数据块。在该示例中,与音频相关联的数据部分被一起分组在块的末尾,而与视频相关联的数据部分被一起分组在块的开端。数据部分的这种排序基于根据多媒体类型的优先级顺序(即,视频第一,而音频第二)。多媒体服务器B 130b向多播组中的通信设备传输经交织的数据块,即,向所有通信设备多播电视节目。
作为另一示例,与计算机110c相关联的用户进行调谐(例如,改变信道等)以观看电视节目(在该示例中,是“Dogs of Big Wars”)。多媒体服务器B 130b正在向该信道传输电视节目,即广播电视节目,并且计算机调谐至该信道。多媒体服务器B 130b广播电视节目包括若干步骤。多媒体服务器B 130b接收针对电视节目的多媒体数据块。多媒体数据块包括多个数据部分(例如,音频、视频、图像、控制数据等)。多媒体服务器B 130b交织多个数据部分以形成经交织的数据块。在该示例中,与音频相关联的数据部分被一起分组在块的末尾,而与视频相关联的数据部分被一起分组在块的开端。数据部分的这种排序基于根据多媒体类型的优先级顺序(即,视频第一而音频第二)。多媒体服务器B 130b向例如电视广播信道、互联网广播信道等之类的信道传输经交织的数据块。
作为另一示例,计算机110c从多媒体服务器B 130b接收经交织的数据块的一个或多个数据部分。通信设备110确定一个或多个数据部分的第一数据部分。基于计算机110c接收的第一完整多媒体分段(例如,音频、视频、图像等)来确定第一部分。在该示例中,计算机110c仅接收了视频数据部分的一半,但接收了全部音频数据部分。因为第一完整多媒体分段是音频分段,所以计算机110c确定第一部分是音频数据部分的开端。计算机110c确定调度中针对第一数据部分(即,第一音频数据部分)的调度条目。基于播出时间信息和/或停滞时间信息(在该示例中,停滞时间信息包括音频数据部分与下一数据块之间的一秒延迟)来确定调度条目。在该示例中,调度条目在一秒之后开始播放音频数据部分,以使得音频数据部分的末尾结束于与下一数据块的播放的开端相同的时刻。
虽然图1示出了4个通信设备110和通信网络120,但是系统100可以通过多个互连的网络(例如,互联网、内联网、外联网等)与多个通信设备通信。
图2A示出了通信系统200a中的示例通信设备210的框图。通信设备210包括收发机211、多个解码器212、媒体处理器213、显示器214和存储设备215。收发机211接收和/或传输数据(例如,数据部分、数据块、数据流、分组等)。多个解码器212解码接收的数据(例如,解码块码,解码卷积码,解码媒体数据,解密流等)。媒体处理器213确定一个或多个数据部分的第一部分和/或确定针对第一数据部分的呈现的调度条目。显示器214显示数据(例如,音频、图像等)。存储设备215(例如,存储器、硬盘驱动器等)存储数据。
虽然图2A将解码器212和媒体处理器213示出为不同的组件,但是通信设备210可以使用解码器212来解码接收的数据,确定一个或多个数据部分的第一部分,确定调度中针对第一数据部分的调度条目。
图2B示出了通信系统200b中示例多媒体服务器230的框图。多媒体服务器230包括收发机231、源编码器232、复用器233、前向纠错(FEC)编码器234、交织器235和存储设备236。收发机231接收和/或传输数据(例如,数据部分、数据块、数据流、分组等)。源编码器232编码接收的数据。复用器233复用数据(例如,将接收的数据与其他接收的数据组合,组合用于传输多个类型的数据,等等)。FEC编码器234编码数据。交织器235交织数据(例如,将数据部分布置在不连续布置中,改变数据部分的顺序,重新布置数据部分的顺序,等等)。存储设备236(例如,存储器、硬盘驱动器等)存储数据。
在一些示例中,媒体处理器213基于与一个或多个数据部分相关联的时间信息和/或一个或多个数据部分的数据类型信息来布置一个或多个数据部分。例如,媒体处理器213布置数据部分,以使得数据部分不再交织,而是按照优先级顺序,例如,使得用户能够快速观看的用于解码的优先级顺序。针对多个编码的数据流,优先级顺序与时间呈现顺序相同。在其他示例中,显示器214根据时间呈现顺序来播放经布置的数据部分。
图3示出了包括多媒体服务器330的另一示例系统300的详细框图。系统300包括多媒体存储服务器A 325a、B 325b到Z 325z(统称为325)以及多媒体服务器330。多媒体服务器330包括源编码器A 331a、B 331b到Z 331z(统称为331)、复用器333、前向纠错(FEC)编码器335以及交织器336。
每个源编码器331从多媒体存储服务器325(例如,SAN、NAS、第三方web站点、第三方存储服务器等)接收数据。源编码器331编码(例如,纠错码、协议转换)数据,以分别形成数据流A 332a、B 332b到Z 332z(统称为332)。复用器333复用流332,以形成源块334。源块334包括复用的数据流的一部分(例如,源块334包括复用的数据流的1024个符号,源块334包括复用的数据流的512个字节,等等)。源块334包括复用的数据流。FEC编码器335编码源块334以形成修复数据337b,并且交织器交织经编码的源块以形成经交织的源块337a。
虽然图3将FEC编码器335和交织器336示出为独立的组件,但是交织器336可以组合到FEC编码器335中。换言之,FEC编码器335编码并且交织源块。
图4示出了包括多媒体服务器430的另一示例系统400的详细框图。系统400包括多媒体存储服务器A 425a、B 425b到Z 425z以及多媒体服务器430。多媒体服务器430包括源编码器A 431a、B 431b到Z 431z、复用器433、前向纠错(FEC)编码器435和交织器436。
每个源编码器431从多媒体存储服务器425(例如,SAN、NAS、第三方web站点、第三方存储服务器等)接收数据。源编码器431编码(例如,纠错码、协议转换等)数据以分别形成数据流A 432a、B 432b到Z 432z(统称为432)。复用器433复用流432,并且交织器436交织经复用的流以形成经交织的源块434。经交织的源块434包括经复用的数据流的一部分(例如,源块434包括经复用的数据流的1024个符号,源块434包括经复用的数据流的512个字节,等等)。FEC编码器435编码经交织的源块434,以形成经编码的源块437a和修复数据437b。经编码的源块437a在内容方面可以与经交织的源块434相同。
在一些示例中,图2A的通信设备210使用修复数据337b来纠正经编码的源块437a中的错误和/或丢失的数据。通信设备210可以使用前向纠错解码来解码经编码的源块437a。
在另一实施方式中,交织器436位于复用器434之前。
图5A示出了一种示例多媒体源块534a的框图500a。框图500a包括源块534a、交织器536a和经交织的源块537a。源块534a包括独立访问单元(“IDR”)、音频数据(“A”)、参考访问单元(“P”)和非参考访问单元(“p”)。交织器536a交织源块534a以形成经交织的源块537a。如经交织的源块537a中所示,交织器536a将IDR、A、P和p数据部分分组到一起。在该示例中,IDR在经交织的数据块的最后,因为IDR提供可以有益地在转换时间期间向用户播放(例如,显示等)的多媒体内容的图像片段。在该示例中,A在经交织的数据块中的倒数第二位置,因为音频数据提供可以有益地在信道改变的转换时间期间向用户播放(例如,经由扬声器、经由耳机等)的多媒体内容的音频。
在一些示例中,源块534a的交织不会增加播放多媒体的时间,因为解交织延迟由最小缓冲时间覆盖,如下文所述。一个优点是各种多媒体类型可以针对每个数据块中的传输而划分优先级,使得图2A的通信设备210能够较快回放,并且为用户提供较好的观看体验(即,用于信道改变的更少等待时间)。
在其他示例中,交织器536a基于源块534a的媒体类型来交织源块534a(即,交织器536a是媒体感知的)。例如,交织器536a区分源块534a中的独立、参考和非参考媒体单元。作为另一示例,在移动TV服务中,交织器536a将音频数据A交织在源块的末尾。基于媒体类型的交织有益地支持音频数据A的成功地和早期地播放,这显著地增强了用户体验。作为另一示例,交织器536a以这样一种方式交织视频数据:即,支持通过将独立的图片IDR放置在经交织的源块537a的末尾来对其进行解码和显示。将独立图片IDR放置在经交织的源块537a末尾有益地支持初始图片的显示,并且避免了显示黑屏。在一些示例中,交织器536a按照逆解码顺序来组织参考媒体单元P,这增加了对通信设备210可用的可解码数据量。
与非交织数据流相比较的一个优点在于,经交织的数据流为通信设备210提供较高的媒体持续时间。另一优点在于,附加媒体持续时间减少了整体信道切换延迟,并且允许通信设备通过提供多媒体的基本播出(例如,静态图片的显示、播放音频等)来增强用户体验。
图5B示出了一种示例多媒体源块534b的框图500b。框图500b包括源块534b、交织器536b和经交织的源块537b。源块534b包括可扩展视频编码(SVC)流的媒体单元,该可扩展视频编码(SVC)流具有三个层:基本层(“BL”)、第一增强层(“EL1”)和第二增强层(“EL2”)。源块534b还包括音频数据(“A”)。交织器536b交织源块534b以形成经交织的源块537b。如经交织的源块537b中所示,交织器536b首先布置要传输的EL2数据单元,继而布置EL1数据单元,最后布置BL和A数据单元。该优先级顺序允许图2A的、部分接收经交织的源块537b的通信设备210开始在早期播出过程中正确地播出A和BL单元。
图6a和图6b示出了接收通信设备的示例调度过程600a和600b的时间轴620。调度过程600a和600b共同包括源块i 610a、i+1 610b和i+2 610c、调谐时间622和最小缓冲时间624。调度过程600a包括早期播出开始626a和停滞时段628。调度过程600b包括早期播出开始626b。
如图6a和图6b中所示,时间轴620是相同的。然而,图6b示出了图2A的通信设备210对停滞时段628的确定和校正。由于第一源块i 610a没有被通信设备210完全接收,所以发生停滞时段628。源块i 610a的第一分段614a没有被通信设备210接收,因为通信设备210直到传输第一分段614a之后才调谐(622)。源块i 610a的第二分段616a被通信设备210接收。由此,通信设备210仅接收源块i 610a的第二分段616a。通信设备210确定可以在早期播出开始时间626a播放第二分段616a。然而,如果第二分段616a在早期播出开始时间626a开始,则将发生停滞时段628(即,第二分段616a的最后一个数据部分与源块i+1 610b的开端之间的时间段)。
为了确定停滞时段628以及如何校正停滞时段628(即,没有停滞时段、较低停滞时段等),通信设备210可以做出若干确定和/或计算,如下文所述。通信设备210可以确定其已经从当前源块(在此示例中,是第二分段616a)接收的数据量。例如,通信设备210确定所接收的数据部分的最高时间戳与最低时间戳之间的差异(例如,使用扩展的RTP时间戳表示),并且将该差异转换为秒,并且除以媒体时钟速率以确定所接收的数据量。
在一些示例中,通信设备210确定要播出的第一数据部分。例如,第一部分是最早音频媒体部分(例如,采用音频作为用于呈现的参考,等)、最早媒体部分(例如,使用呈现时间,使用时间戳等)或者最晚媒体单元。在其他示例中,通信设备210基于该源块的第一媒体部分的接收时间和基于下一源块(即,源块i+1 610b)中的第一媒体部分的末尾而测量出的最小缓冲时间来确定下一源块的最早媒体部分的播出时间。
在一些示例中,通信设备210基于播出时间信息(例如,第一数据部分的持续时间、第一数据部分和后续数据部分的持续时间等)和/或计算出的停滞时段来调度来自当前源块610a的第一媒体部分。例如,通信设备210调度源块i+1 610b的第一媒体单元在其接收时间之后的最小缓冲时间单位播出,以及调度源块i 610a的第二分段616a在早期播出开始626b播出。在其他示例中,通信设备210确定早期播出开始626b,因为过晚开始可能导致随后的源块i+1 610b的播出延期,而过早开始可能导致缓冲下溢而无法向用户回放。
在其他示例中,通信设备210确定停滞时间信息(例如,停滞点的持续时间、停滞点的开始时间等)。停滞点持续时间被计算为随后源块的最低时间戳与可用媒体部分的最高时间戳之间的间隙。在一些示例中,当前块的最晚时间戳经由交织属性而用信令发送(例如,在经交织的数据块中发送、经由信令信道传输等),并且最晚时间戳用于确定随后源块的最低时间戳。一个优点是数据块优选地调度用于来自源块i 610a的第二分段616a的早期播出。
在一些示例中,最小缓冲时间624指示保证无中断播出所必需的时间。通信设备210确定最小缓冲时间(播出时间信息的一部分)。通信设备210基于当前源块的第一分组(即,第一数据部分)的接收与媒体解码启动之间的时间来确定最小缓冲时间。在其他示例中,用于媒体解码的开始点是优先级顺序中最早的所接收的源分组。
在其他示例中,最小缓冲时间624由服务提供者(即,主控多媒体服务器230所提供的服务的提供者)用于信令发送在接收源块的第一分组之后、要触发FEC解码之前的最小等待时间。服务提供者例如可以保证没有源块(例如,源块i+1 610b)及其修复数据将大于信令发送的“最小缓冲时间”值。
在一些示例中,FEC编码/解码服务提供的纠错保护产生了显著的延迟,这对于接收以及正确地FEC解码全部源块是必需的。在其他示例中,基于要使用的最大源块(包括FEC数据)的估计传输时间来确定最小缓冲时间624。在一些示例中,通信设备210接收在FEC解码开始之前等待至少信令发送的最小缓冲时间624的指令。
在一些示例中,通信设备210从不同时间开始播放针对相同服务的媒体。例如,在通信设备210等待接收电视节目时,通信设备210播放电视商业广告。通信设备210可以基于每个服务可用的媒体数据量和/或播出曲线上的开始和结束位置(例如,图7a所示)来确定要播放什么其他媒体。
在其他示例中,最小源块大小是1024个源符号。例如,大小为512字节的源符号对应于4194304比特的总源块大小。作为另一示例,MBMS服务具有256kbps的比特速率,这将产生覆盖大约16秒数据的源块。在一些示例中,每个源块根据80000字节的目标源块大小来构造。
在一些示例中,通信设备210在随机的时间点(例如,调谐时间622)调谐至MBMS服务,并且平均调谐时间处于源块的中间。通信设备210开始针对最小缓冲时间624的持续时间的定时器以开始解码。在其他示例中,所接收的部分块数据(例如,第二分段616a)不可解码(例如,不完整数据、丢失数据等),这导致不平稳的视频质量或者附加延迟。通信设备210例如可以确定如何平滑不平稳的视频质量和/或针对延迟而填充音频/视频。
在其他示例中,通信设备210重新排序乱序的分组,并且交织对通信设备210的其他层是透明的。图7A是示出数据部分的呈现/显示时间戳的图示700a。图示700a包括沿x轴的以秒为单位的源分组的呈现时间戳710a以及沿y轴的源分组传输顺序720a。如图所示,在源块的开端发送低优先级数据732a,在源块的末尾按照逆呈现顺序发送高优先级数据734a,并且在源块的最末尾发送最高优先级数据736a。作为一个示例,图5A的经交织的源块537a示出了图示700a中的数据的顺序—非参考图片“p”、逆呈现顺序的参考图片“Px”、音频数据“A”以及IDR图片“IDR”。
图7B是示出数据块的非交织传输的呈现/显示时间戳的图示。图示700b包括沿x轴的以秒为单位的源分组的呈现时间戳710b以及沿y轴的源分组传输顺序720b。如图所示,数据(例如,图5A的源块534a中所示)在传输流730b中连续发送。
在一些示例中,图7A和图7B示出了媒体数据交织在增加调谐时可用和可正确解码的媒体数据方面的益处。在一些示例中,图2B的交织器235将H.264媒体流(以300kbps进行编码)的媒体分组分类为承载IDR图片片段的分组、参考P图片片段的分组和非参考p图片的分组。
例如,交织器235按照如经交织的源块537中所示的升序时间次序将“IDR”图片片段布置在源块的末尾。参考“P”图片数据部分按照降序呈现时间顺序在经交织的源块537的末尾(在IDR图片分组之前)传输。最后,非参考“p”图片分组按照升序呈现时间在经交织的源块537的开端传输。
图8示出了在示例系统800中使用的示例通信设备810。系统800包括通信设备810、网络820和多媒体服务器830。通信设备810和多媒体服务器830经由网络820进行通信。通信设备810包括天线851、外壳852、扬声器853、显示器854、小键盘855、麦克风856、存储857和电池858。显示器854显示用于选择多媒体内容的交互显示864。
天线851用于接收和/或发射数据信号,并且可以由任何已知的天线材料构造。外壳852是用于保持通信设备810的组件(例如,图2A的通信设备210中所示的组件、通信设备810中所示的组件等)的盒子。该盒子可以由任何已知的盒子材料(例如,塑料、金属等)构造。扬声器853用于再现数据部分(例如,音频数据部分等)。通信设备810例如可以包括扬声器输出(未示出),其由外部扬声器(例如,头戴式耳机、第三方扬声器、无线连接扬声器等)用于再现数据部分。
显示器854用于播放数据部分。显示器854可以显示数据部分(例如,显示图像等)和/或再现数据部分(例如,动画的触觉触摸等)。显示器854显示用于选择多媒体内容的交互显示864。与通信设备810相关联的用户可以选择用于播放的多媒体内容。通信设备810基于对用于播放的多媒体内容的选择来传输针对多媒体内容的请求。
小键盘855用于输入选择和/或其他输入信息(例如,姓名、电话号码等)。麦克风856用于输入音频数据(例如,语音呼叫、指令、音频录制等)。通信设备810例如可以包括麦克风输出(未示出),其由外部麦克风(例如,头戴式耳机、第三方麦克风、无线连接麦克风等)用于输入音频。存储857用于存储数据(例如,存储多媒体数据部分、获取多媒体数据部分、存储电话号码等)。存储857可以是任何类型的存储器存储,包括可移动存储器存储和/或永久存储器存储。电池858用作通信设备810的电源。电池858可以是任何类型的功率设备(例如,可充电电池、一次性使用电池等)。
图9A和图9B是数据块描述900a和900b的示例,其包括交织描述符920a、920b和925b。数据块描述900a包括数据块的一般描述符910a和930a以及交织描述符920a。数据块描述900b包括数据块的一般描述符910b、930b和935b以及交织描述符920b和925b。
在一些示例中,图9A和图9B示出了使用服务描述协议(SDP)属性来信令发送交织。SDP属性可以包括在FEC流的SDP描述中。SDP属性可以是媒体级属性,并且可以应用于由FEC流保护的所有流(例如,流332、流432)。
图9A示出了交织器属性920a,“X-3gpp-Interleaved”。如图所示,属性的增强巴科斯诺尔范式(ABNF)语法可以定义如下:Interleaving=”a=X-3gpp-Interleaved:”SP[“true”/“false”]CRLF
在其他示例中,信令可以包括与每个数据流的媒体部分的定位和重新排序有关的更加详细的信息。例如,信令包括SDP文件的相应媒体定义中的媒体级属性920b和925b。图9b示出了针对视频流920b和音频流925b的媒体级属性。在该示例中,视频流被指派优先级1,而音频流被指派优先级0。基于该优先级,交织器235将音频数据交织在视频数据之前的源块的末尾处。
在一些示例中,交织属性包括流内布置属性。例如,流内布置属性包括混合、原始和逆转。混合可以指示传输顺序包括原始和逆转排序的媒体部分二者。原始可以指示传输顺序没有改变。逆转可以指示传输顺序被逆转。
在其他示例中,流内布置属性的ABNF语法例如可以如下:
Interleaving-Info=”a=X-3gpp-Interleaving:”Priority SP[“original”/“reverse”/“mixed”]CRLF
Priority=1*DIGIT
在一些示例中,流内布置属性放置在FEC流的SDP文件中。在该示例中,流内布置属性是指用于标识所涉及的流的流ID。
在其他示例中,与数据部分相关联的时间信息在该流的RTP分组的子集中以RTP报头扩展的形式传输。例如,指示3gpp交织报头扩展的RTP报头扩展的标识符之后跟随当前源块的最高时间戳的32比特表示。作为另一示例,源块数目由源FEC净荷来递送,该源FEC净荷附接至每个分组(也称为数据部分)。
在一些示例中,通信设备210基于交织属性和/或对数据块的分析而确定MBMS服务的主音频流按照其原始顺序递送(例如,在数据块的开端、在数据块的末尾等)。在该示例中,所接收的最后一个音频媒体部分承载针对该源块的最高时间戳。最高音频时间戳值可以用于确定相应的视频时间戳。
在其他示例中,数据块的交织是向后兼容的。换言之,例如,已有通信设备被指示基于实时传输协议(RTP)次序号值来恢复媒体分组的原始顺序。在一些示例中,交织不改变经交织的流的RTP次序编号。基于没有改变RTP次序编号,多媒体服务器230例如不使用重新排序机制(例如,解码顺序号等)。
在一些示例中,通信设备210使用交织器属性来减少调谐时间。通信设备210可以基于交织器属性来调节其针对第一部分接收的源块的媒体单元的播出曲线。后续源块的处理可以与当通信设备210在该源块开始时调谐的情况相同。换言之,用于源块的FEC纠正的最小缓冲时间可以从下一FEC块的第一接收的媒体单元应用。
图10A是示出了图2B的多媒体服务器230的示例交织过程的流程图1000a。收发机231接收(1010)多媒体数据块。多媒体数据块包括多个数据部分(也称为媒体单元)。交织器235基于与最后一个数据部分相关联的信息(例如,SDP流信息、时间戳信号等)确定(1030)最后一个数据部分的时间戳。交织器235交织(1020)多媒体数据块的数据部分以形成经交织的数据块。交织器235修改(1040)经交织的数据块以包括所确定的时间戳。收发机231传输(1050)经交织的数据块。
在其他实施方式中,图2A的通信设备210经由收发机211接收具有所确定的时间戳的、经交织的数据块。媒体处理器213可以将经交织的数据块重新组织为数据块,并且标识时间戳。媒体处理器213可以使用时间戳来确定开始播放哪个分组,如本文所述。
图10B是示出图2B的多媒体服务器230的示例交织过程的流程图1000b。收发机231接收(1080)多媒体数据块。多媒体数据块包括多个数据部分(也称为媒体单元)。交织器235交织(1082)多媒体数据块的数据部分以形成经交织的数据块。收发机231传输(1084)经交织的数据块。
在其他实施方式中,图2A的通信设备210经由收发机211接收经交织的数据块。媒体处理器213可以将经交织的数据块重新组织为数据块。媒体处理器213可以确定数据块的媒体类型,例如音频、视频等。媒体处理器213可以确定数据块中的第一分组和最后分组,并且标识针对第一分组和最后分组的时间戳。媒体处理器213可以使用第一分组与最后分组的时间戳之间的差异来确定开始播放哪个分组,如本文所述。
在其他实施方式中,图2A的通信设备210经由收发机211接收经交织的数据块。媒体处理器213可以将经交织的数据块重新组织为数据块。媒体处理器213可以确定数据块的媒体类型,例如音频、视频等。媒体处理器213标识针对一个或多个音频分组的时间戳。媒体处理器213可以使用一个或多个音频分组的时间戳来确定开始播放哪个分组,如本文所述。
图11是示出图2A的通信设备210的示例调度过程的流程图1100。收发机211接收(1110)经交织的多媒体数据块的一个或多个数据部分。媒体处理器213解交织(1120)数据部分。媒体处理器213确定(1130)数据部分的数据类型信息。媒体处理器213确定(1140)与数据部分相关联的时间信息。
媒体处理器213确定(1170)停滞时间信息,并且基于停滞时间信息来确定(1180)针对数据部分的调度条目。显示器214基于调度条目来播放(1185)数据部分。
在一些示例中,交织在应用于FEC保护的可扩展视频编码(SVC)流上时提供较好的结果。在多播环境中,当SVC在多流模式下传输时可以更为有益。SCV可以比增强层更加有益,因为基本层在单独的RTP会话上发送,一个或多个增强层可以在一个RTP会话中发送,并且时间可扩展性还可以用于与每个空间层一起产生一个或多个时间相关子层。
在其他示例中,SVC和RTP净荷格式为图2B的交织器235提供NAL单元报头中的语法元素(例如,priority_id、dependency_id、quality_id、temporal_id等),以支持媒体单元的传输顺序的重新布置。例如,可以向源块的末尾传输较高优先级的媒体单元,和/或按照逆时间顺序传输基本层。在一些示例中,与层优先级有关的信息可以从SDP文件中提取,使得不需要解析NAL单元报头和扩展。
在一些示例中,通信设备210确定数据块的交织,并且在信令发送的“最小缓冲时间”保护时段过去之前,向媒体解码器212转发媒体分组。在该示例中,通过尽可能快地播出正确的、重新构造的媒体数据而有益地减少了信道调谐时间。
在其他示例中,无法确定数据块的交织的通信设备210通过使用源块末尾的媒体分组而有益地减少了调谐时间,这使得媒体数据可能被正确地重新构造。
此处描述的各种实施方式可以在软件、硬件、应用逻辑或者软件、硬件和应用逻辑的组合中实现。软件、应用逻辑和/或硬件例如可以驻留在芯片组、移动设备、台式计算机、膝上型计算机或者服务器上。各种实施方式的软件和web实现可以利用标准编程技术来实现,标准编程技术具有用于实现各种数据库搜索步骤或者过程、相关步骤或者过程、比较步骤或者过程以及决策步骤或者过程的基于规则的逻辑和其他逻辑。各种实施方式还可以全部或者部分地在网络元件或者模块内实现。应当注意,此处以及所附权利要求中使用的词语“组件”和“模块”旨在包括使用一个或多个软件代码行的实现,和/或硬件实现,和/或用于接收手动输入的设备。
上述系统和方法可以在数字电子电路、计算机硬件、固件和/或软件中实现。实现可以作为计算机程序产品(即,有形地具体化在信息载体中的计算机程序)。实现例如可以在机器可读存储设备中,用于由数据处理装置执行,或者用于控制数据处理装置的操作。实现例如可以是可编程处理器、计算机和/或多个计算机。
计算机程序可以利用任何形式的编程语言来编写,包括编译和/或解释语言,并且计算机程序可以部署在任何形式中,包括作为适合在计算环境中使用的独立程序或者作为子例程、元件和/或其他单元。计算机程序可以部署用于在一个计算机上执行,或者在一个站点处的多个计算机上执行。
方法步骤可以由一个或多个可编程处理器来执行,该一个或多个可编程处理器运行计算机程序,以通过操作输入数据和生成输出来执行本发明的功能。方法步骤还可以由一种装置来执行,并且该装置可以实现为专用逻辑电路。该电路例如可以是FPGA(现场可编程门阵列)和/或ASIC(专用集成电路)。模块、子例程和软件代理可以指计算机程序、处理器、专用电路、软件和/或实现该功能性的硬件的部分。
适于计算机程序运行的处理器例如包括通用微处理器和专用微处理器二者,以及任何种类的数字计算机的任意一个或多个处理器。通常,处理器从只读存储器或者随机访问存储器或者二者接收指令和数据。计算机的基本元件是用于执行指令的处理器和用于存储指令和数据的一个或多个存储器设备。通常,计算机可以包括、可以可操作地耦合至用于存储数据的一个或多个海量存储设备(例如,磁盘、磁光盘或者光盘),以从其接收数据和/或向其传送数据。
数据传输和指令可以在通信网络上发生。适于具体化计算机程序指令和数据的信息载体包括所有形式的非易失性存储器,例如包括示例半导体存储器设备。信息载体例如可以是EPROM、EEPROM、闪速存储器设备、磁盘、内置硬盘、可移动盘、磁光盘、CD-ROM和/或DVD-ROM盘。处理器和存储器可以由专用逻辑电路进行补充和/或并入在其中。
为了提供与用户的交互,上述技术可以在具有显示器的计算机上实现。显示器例如可以是阴极射线管(CRT)和/或液晶显示(LCD)监视器。与用户的交互例如可以是显示针对用户的信息,以及用户可通过其向计算机提供输入(例如,与用户接口元件的交互)的键盘和指点设备(例如,鼠标或者轨迹球)。其他种类的设备可以用于提供与用户的交互。其他设备例如可以是以任何形式的感知反馈(例如,视觉反馈、听觉反馈或者触觉反馈)向用户提供的反馈。来自用户的输入例如可以是以任何形式接收的(包括听觉、话音和/或触觉输入)。
上述技术可以在包括后端组件的分布式计算系统中实现。后端组件例如可以是数据服务器、中间件组件和/或应用服务器。上述技术可以在包括前端组件的分布式计算系统中实现。前端组件例如可以是具有图形用户接口的客户端计算机;用户可以通过其与示例实现进行交互的Web浏览器;以及/或者用于传输设备的其他图形用户接口。系统的组件可以通过任何形式或者数字数据通信的介质(例如网络)互连。
网络的示例包括局域网(LAN)、广域网(WAN)、因特网、有线网、无线网、基于分组的网络和/或基于载波的网络。与网络的连接性可以包括但不限于长距无线连接、短距无线连接和各种有线连接,包括但不限于电话线、电缆线、电力线等。
基于分组的网络例如可以包括因特网、载波互联网协议(IP)网络(例如,局域网(LAN)、广域网(WAN)、校园区域网络(MAY)、城域网(MAN)、家庭区域网络(HAN))、专用IP网络、IP专用支线交换机(IPBX)、无线网络(例如,无线电接入网络(RAN)、802.11网络、802.16网络、通用分组无线电服务(GPRS)网络、HiperLAN)和/或其他基于分组的网络。基于电路的网络例如可以包括公共交换电话网(PSTN)、专用支线交换机(PBX)、无线网络(例如,RAN、蓝牙、码分多址(CDMA)网络、时分多址(TDMA)网络、全球移动通信系统(GSM)网络)和/或其他基于电路的网络。
在一些示例中,服务器使用通信协议栈来发送编码的媒体比特流。栈可以包括但不限于实时传输协议(RTP)、用户数据报协议(UDP)和因特网协议(IP)。当通信协议栈为面向分组时,服务器将编码的媒体比特流封装到分组中。例如,当使用RTP时,服务器根据RTP净荷格式将编码的媒体比特流封装到RTP分组中。通常,每个媒体类型具有专用的RTP净荷格式。
在其他示例中,服务器可以通过通信网络连接至网关。网关可以执行不同类型的功能,诸如将根据一个通信协议栈的分组流向另一通信协议栈转换、合并和分开数据流以及根据下行链路和/或接收机能力操作数据流,诸如根据主要下行链路网络条件来控制转发流的比特率。网关的示例包括MCU、电路交换与分组交换视频电话之间的网关、蜂窝一键通(PoC)服务器、数字视频广播手持(DVB-H)系统中的IP封装器或者向家庭无线网络本地转发广播传输的机顶盒。当使用RTP时,网关被称为RTP混合器或者RTP转换器,并且通常充当RTP连接的端点。
系统可以包括客户端和服务器。客户端和服务器通常是彼此相距遥远的,并且通常通过通信网络进行交互。客户端和服务器的关系通过运行在相应计算机上并且彼此具有客户端-服务器关系的计算机程序来实现。通信设备例如可以包括计算机、具有浏览器设备的计算机、电话、IP电话、移动设备(例如,蜂窝电话、个人数字助理(PDA)设备、膝上型计算机、电子邮件设备)和/或其他通信设备。浏览器设备例如包括具有万维网浏览器(例如,从Microsoft公司可得的MicrosoftInternet Explorer、从Mozilla公司可得的MozillaFirefox)的计算机(例如,台式计算机、膝上型计算机)。移动计算设备例如包括个人数字助理(PDA)。
通信设备例如可以是固定的,或者在由移动的个人携带时是移动的。通信设备还可以处于运输模式,包括但不限于,汽车、卡车、出租车、公共汽车、火车、船舶、飞机、自行车、摩托车等。某些或者全部通信设备可以发送和接收呼叫和消息,并且与服务提供者通过与基站的无线连接来进行通信。基站可以连接至允许移动电话网络与网络之间进行通信的网络服务器。系统可以包括附加通信设备和不同类型的通信设备。
通信设备可以使用各种传输技术来通信,这些传输技术包括但不限于码分多址(CDMA)、全球移动通信系统(GSM)、通用移动电信系统(UMTS)、时分多址(TDMA)、频分多址(FDMA)、传输控制协议/因特网协议(TCP/IP)、短消息收发服务(SMS)、多媒体消息收发服务(MMS)、电子邮件、即时消息收发服务(IMS)、蓝牙、IEEE 802.11等。实现本发明的各种实施方式所涉及的通信设备可以使用各种介质进行通信,这些介质包括但不限于无线电、红外、激光、电缆连接等。
包括、包含和/或每一种的复数形式是开放式的,并且包括所列举的部分,以及可以包括没有列举的其他部分。和/或是开放式的,并且包括一个或多个所列举的部分以及所列举的部分的组合。
已经出于说明和描述的目的而呈现了实施方式的上述描述。上述描述并不旨在穷举或者将本发明的实施方式限制于所公开的精确形式,并且根据以上的教导,修改和变体是可能的,并且可以从各种实施方式的实践中获取。选择和描述此处所讨论的实施方式是为了解释各种实施方式的原理和性质及其实际应用,以使得本领域技术人员使用各种实施方式中并且具有适于预期的特定使用的各种修改的本发明。此处描述的实施方式的特征可以组合在方法、装置、模块、系统和计算机程序产品的所有可能组合中。
在一些实施方式中,下文描述的任何方面可以包括下文描述的示例中的一个或多个。
在一个方面,一种方法包括:
接收多媒体数据块,该多媒体数据块包括多个数据部分;
基于优先级顺序来交织多个数据部分以形成经交织的数据块,优先级顺序以数据部分的多媒体数据类型为基础;以及
传输经交织的数据块。
在一些示例中,该方法还包括:基于与经交织的数据块相关联的信息来生成交织属性。
在其他示例中,该方法还包括:修改经交织的数据块以包括交织属性。
在一些示例中,该方法还包括:传输交织属性。
在其他示例中,交织属性包括与优先级顺序相关联的信息、用于解码的优先级、时间戳和/或与数据部分相关联的信息。
在一些示例中,该方法还包括:编码多媒体数据块。
在其他示例中,该方法还包括:编码经交织的数据块。
在一些示例中,编码是前向纠错编码。
在其他示例中,优先级顺序是逆时间顺序、时间顺序、数据部分大小顺序和/或数据类型顺序。
在一些示例中,优先级顺序是预定优先级顺序。
在另一方面,一种装置包括:
收发机,配置用于接收多媒体数据块并且传输经交织的数据块,多媒体数据块包括多个数据部分;以及
交织器,配置用于基于优先级顺序来交织多个数据部分以形成经交织的数据块,优先级顺序以数据部分的多媒体数据类型为基础。
在一些示例中,该装置还包括:进一步配置用于基于与经交织的数据块相关联的信息来生成属性的交织器。
在其他示例中,该装置还包括:进一步配置用于修改经交织的数据块以包括交织属性的交织器。
在一些示例中,该装置还包括:进一步配置用于传输交织属性的收发机。
在其他示例中,该装置还包括:编码器,配置用于编码多媒体数据块。
在一些示例中,该装置还包括:编码器,配置用于编码经交织的数据块。
在其他示例中,该装置还包括:进一步配置用于基于与数据块相关联的多媒体类型来生成优先级顺序的交织器。
在又一方面,一种编码有指令的计算机可读存储介质,当指令由计算机执行时,执行:
接收多媒体数据块,该多媒体数据块包括多个数据部分;
基于优先级顺序来交织多个数据部分以形成经交织的数据块,该优先级顺序以数据部分的多媒体数据类型为基础;以及
传输经交织的数据块。
在又一方面,一种方法,包括:
接收经交织的多媒体数据块的一个或多个数据部分;
基于与一个或多个数据部分相关联的时间信息和/或一个或多个数据部分的数据类型信息来确定一个或多个数据部分的第一数据部分;以及
基于随后数据块的最早数据部分的播出时间信息来确定调度中针对第一数据部分的调度条目。
在一些示例中,该方法还包括:基于与一个或多个数据部分相关联的时间信息和/或一个或多个数据部分的数据类型信息来布置一个或多个数据部分。
在其他示例中,该方法还包括:播放经布置的一个或多个数据部分。
在一些示例中,该方法还包括:基于调度中的调度条目来播放第一数据部分。
在其他示例中,该方法还包括:播放第一数据部分还包括显示第一数据部分和/或再现第一数据部分。
在一些示例中,经交织的多媒体数据块包括音频数据部分、视频数据部分、图像数据部分、文本数据部分和/或动画数据部分。
在其他示例中,该方法还包括:基于所接收的经交织的多媒体数据块的分段来确定播出时间信息。
在其他示例中,该方法还包括:基于随后数据块的最早数据部分的播出时间信息和/或停滞时间信息来确定调度中针对第一数据部分的调度条目。
在一些示例中,该方法还包括:基于与下一多媒体数据块相关联的时间信息和与一个或多个数据部分相关联的时间信息之间的差异来确定停滞时间信息。
在其他示例中,该方法还包括:进一步基于交织属性来确定一个或多个数据部分的第一数据部分。
在一些示例中,交织属性包括与经交织的多媒体数据块的一个或多个数据部分的次序相关联的信息。
在一些示例中,一个或多个数据部分的数据类型信息包括一个或多个数据部分的多媒体类型。
在又一方面,一种装置包括:
收发机,配置用于接收经交织的多媒体数据块的一个或多个数据部分;以及
媒体处理器,配置用于:
基于与一个或多个数据部分相关联的时间信息和/或一个或多个数据部分的数据类型信息来确定一个或多个数据部分的第一数据部分,以及
基于随后数据块的最早数据部分的播出时间信息来确定调度中针对第一数据部分的调度条目。
在一些示例中,该装置还包括媒体处理器,其进一步配置用于基于与一个或多个数据部分相关联的时间信息和/或一个或多个数据部分的数据类型信息来布置一个或多个数据部分。
在其他示例中,该装置还包括显示器,其配置用于播放经布置的一个或多个数据部分。
在一些示例中,该装置还包括显示器,其配置用于基于调度中的调度条目来播放第一数据部分。
在其他示例中,该装置还包括媒体处理器,其进一步配置用于基于所接收的经交织的多媒体数据块的分段来确定播出时间信息。
在一些示例中,该装置还包括媒体处理器,其进一步配置用于基于随后数据块的最早数据部分的播出时间信息和/或停滞时间信息来确定调度中针对第一数据部分的调度条目。
在一些示例中,该装置还包括媒体处理器,其进一步配置用于基于与下一多媒体数据块相关联的时间信息和与一个或多个数据部分相关联的时间信息之间的差异来确定停滞时间信息。
在其他示例中,该装置还包括媒体处理器,其进一步配置用于基于交织属性来确定一个或多个数据部分的第一数据部分。
在又一方面,一种编码有指令的计算机可读存储介质,该指令在由计算机执行时,执行:
接收经交织的多媒体数据块的一个或多个数据部分;
基于与一个或多个数据部分相关联的时间信息和/或一个或多个数据部分的数据类型信息来确定一个或多个数据部分的第一数据部分;以及
基于随后数据块的最早数据部分的播出时间信息来确定调度中针对第一数据部分的调度条目。
Claims (35)
1.一种方法,包括:
接收多媒体数据块,所述多媒体数据块包括多个数据部分;
基于优先级顺序来交织所述多个数据部分以形成经交织的数据块,所述优先级顺序以与所述多个数据部分相关联的类型信息为基础;以及
传输所述经交织的数据块。
2.根据权利要求1所述的方法,所述方法还包括:基于与所述经交织的数据块相关联的信息来生成交织属性。
3.根据权利要求2所述的方法,所述方法还包括以下至少一个步骤:
修改所述经交织的数据块以包括所述交织属性;以及
传输所述交织属性。
4.根据权利要求2或3所述的方法,其中所述交织属性包括与所述优先级顺序相关联的信息、用于解码的优先级、时间戳以及与所述数据部分相关联的信息中的至少一个。
5.根据权利要求1-4中任一项所述的方法,所述方法还包括以下之一:编码所述多媒体数据块或者编码所述经交织的数据块。
6.根据权利要求5所述的方法,其中所述编码是前向纠错编码。
7.根据权利要求1-6中任一项所述的方法,其中所述优先级顺序包括以下至少一个:基于逆时间顺序的优先级顺序、基于时间顺序的优先级顺序、基于数据部分大小顺序的优先级顺序、基于数据类型顺序的优先级顺序和预定优先级顺序。
8.一种装置,包括:
处理器;
存储器,其包括计算机程序代码;
所述存储器和所述计算机程序代码配置用于与所述处理器一起工作,使得所述装置执行至少以下步骤:
接收多媒体数据块并且传输经交织的数据块,所述多媒体数据块包括多个数据部分;以及
基于优先级顺序来交织所述多个数据部分以形成所述经交织的数据块,所述优先级顺序以与所述多个数据部分相关联的类型信息为基础。
9.根据权利要求8所述的装置,其中所述存储器和所述计算机程序代码配置用于与所述处理器一起工作,进一步使得所述装置基于与所述经交织的数据块相关联的信息来生成属性。
10.根据权利要求9所述的装置,其中所述存储器和所述计算机程序代码配置用于与所述处理器一起工作,进一步使得所述装置执行以下至少之一:
修改所述经交织的数据块以包括所述交织属性;以及
传输所述交织属性。
11.根据权利要求9或10所述的装置,其中所述交织属性包括以下至少一个:与所述优先级顺序相关联的信息、用于解码的优先级、时间戳和与所述数据部分相关联的信息。
12.根据权利要求8-11中任一项所述的装置,其中所述存储器和所述计算机程序代码配置用于与所述处理器一起工作,进一步使得所述装置执行以下之一:编码所述多媒体数据块或者编码所述经交织的数据块。
13.根据权利要求12所述的装置,其中所述编码是前向纠错编码。
14.根据权利要求8-13中任一项所述的装置,其中所述优先级顺序包括以下至少一个:基于逆时间顺序的优先级顺序、基于时间顺序的优先级顺序、基于数据部分大小顺序的优先级顺序、基于数据类型顺序的优先级顺序和预定优先级顺序。
15.一种编码有指令的计算机可读存储介质,所述指令在由计算机处理器执行时,使得装置至少执行:
接收多媒体数据块,所述多媒体数据块包括多个数据部分;
基于优先级顺序来交织所述多个数据部分以形成经交织的数据块,所述优先级顺序以与所述多个数据部分相关联的类型信息为基础;以及
传输所述经交织的数据块。
16.一种方法,包括:
接收经交织的多媒体数据块的一个或多个数据部分;
基于与所述一个或多个数据部分相关联的时间信息以及所述一个或多个数据部分的数据类型信息来确定所述一个或多个数据部分的第一数据部分;以及
基于与所述一个或多个数据部分相关联的时间信息以及下一数据块的最早数据部分的播出时间信息来确定调度中针对所述第一数据部分的调度条目。
17.根据权利要求16所述的方法,所述方法还包括以下至少一个步骤:
基于与所述一个或多个数据部分相关联的时间信息以及所述一个或多个数据部分的所述数据类型信息中的至少一个来布置所述一个或多个数据部分;
播放经布置的一个或多个数据部分;以及
基于所述调度中确定的所述调度条目来播放所述第一数据部分,其中播放数据部分包括显示所述数据部分和/或再现所述数据部分。
18.根据权利要求16或17所述的方法,其中所述经交织的多媒体数据块包括音频数据部分、视频数据部分、图像数据部分、文本数据部分和动画数据部分中的一个或多个。
19.根据权利要求16-18中任一项所述的方法,其中确定所述调度中的所述调度条目包括:确定所接收的、所述经交织的多媒体数据块的一个或多个数据部分的播出时间持续时间。
20.根据权利要求16-19中任一项所述的方法,所述方法还包括:基于与所述下一多媒体数据块相关联的时间信息和与所述一个或多个数据部分相关联的时间信息之间的差异来确定停滞时间段。
21.根据权利要求16-20中任一项所述的方法,所述方法还包括:
接收交织属性;以及
基于所接收的交织属性来确定所述一个或多个数据部分的所述第一数据部分。
22.根据权利要求21所述的方法,其中所述交织属性包括与所述经交织的多媒体数据块的所述一个或多个数据部分的次序相关联的信息。
23.根据权利要求16-22中任一项所述的方法,其中所述一个或多个数据部分的所述数据类型信息包括所述一个或多个数据部分的多媒体类型。
24.一种装置,包括:
处理器;
存储器,其包括计算机程序代码;
所述存储器和所述计算机程序代码配置用于与所述处理器一起工作,使得所述装置至少执行以下步骤:
接收经交织的多媒体数据块的一个或多个数据部分;
基于与所述一个或多个数据部分相关联的时间信息以及所述一个或多个数据部分的数据类型信息来确定所述一个或多个数据部分的第一数据部分;以及
基于与所述一个或多个数据部分相关联的时间信息以及下一数据块的最早数据部分的播出时间信息来确定调度中针对所述第一数据部分的调度条目。
25.根据权利要求24所述的装置,其中所述存储器和所述计算机程序代码配置用于与所述处理器一起工作,进一步使得所述装置至少执行以下步骤之一:
基于与所述一个或多个数据部分相关联的时间信息和所述一个或多个数据部分的所述数据类型信息中的至少一个来布置所述一个或多个数据部分;
播放经布置的一个或多个数据部分;以及
基于所述调度中确定的所述调度条目来播放所述第一数据部分,其中播放数据部分包括显示所述数据部分和/或再现所述数据部分。
26.根据权利要求24或25所述的装置,其中所述经交织的多媒体数据块包括音频数据部分、视频数据部分、图像数据部分、文本数据部分和动画数据部分中的一个或多个。
27.根据权利要求24-26中任一项所述的装置,其中所述存储器和所述计算机程序代码配置用于与所述处理器一起工作,进一步使得所述装置确定所接收的、所述经交织的多媒体数据块的一个或多个数据部分的播出时间持续时间。
28.根据权利要求24-27中任一项所述的装置,其中所述存储器和所述计算机程序代码配置用于与所述处理器一起工作,进一步使得所述装置基于与所述下一多媒体数据块相关联的时间信息和与所述一个或多个数据部分相关联的时间信息之间的差异来确定停滞时间段。
29.根据权利要求24-28中任一项所述的装置,其中所述存储器和所述计算机程序代码配置用于与所述处理器一起工作,进一步使得所述装置至少执行以下步骤:
接收交织属性;以及
基于所接收的交织属性来确定所述一个或多个数据部分的所述第一数据部分。
30.根据权利要求29所述的装置,其中所述交织属性包括与所述经交织的多媒体数据块的所述一个或多个数据部分的次序相关联的信息。
31.根据权利要求24-30中任一项所述的装置,其中所述一个或多个数据部分的所述数据类型信息包括所述一个或多个数据部分的多媒体类型。
32.一种编码有指令的计算机可读存储介质,所述指令在由计算机处理器执行时,使得装置至少执行:
接收经交织的多媒体数据块的一个或多个数据部分;
基于与所述一个或多个数据部分相关联的时间信息以及所述一个或多个数据部分的数据类型信息来确定所述一个或多个数据部分的第一数据部分;以及
基于与所述一个或多个数据部分相关联的时间信息以及下一数据块的最早数据部分的播出时间信息来确定调度中针对所述第一数据部分的调度条目。
33.一种装置,包括:
用于接收多媒体数据块并且传输经交织的数据块的装置,所述多媒体数据块包括多个数据部分;以及
用于基于优先级顺序来交织所述多个数据部分以形成所述经交织的数据块的装置,所述优先级顺序以与所述多个数据部分相关联的类型信息为基础。
34.一种装置,包括:
用于接收经交织的多媒体数据块的一个或多个数据部分的装置;
用于基于与所述一个或多个数据部分相关联的时间信息以及所述一个或多个数据部分的数据类型信息来确定所述一个或多个数据部分的第一数据部分的装置;以及
用于基于与所述一个或多个数据部分相关联的时间信息以及下一数据块的最早数据部分的播出时间信息来确定调度中针对所述第一数据部分的调度条目的装置。
35.一种系统,包括:
通信网络;
至少一个多媒体服务器;以及
至少一个通信设备,
其中多媒体服务器包括:
用于接收多媒体数据块并且传输经交织的数据块的装置,所述多媒体数据块包括多个数据部分;
用于至少部分基于优先级顺序来交织所述多个数据部分以形成经交织的数据块的装置,所述优先级顺序以与所述多个数据部分相关联的类型信息为基础;以及
用于通过所述通信网络向所述至少一个通信设备传输所述经交织的数据块的装置,以及
其中通信设备包括:
用于接收经交织的多媒体数据块的所述一个或多个数据部分的装置;
用于基于与所述一个或多个数据部分相关联的时间信息以及所述一个或多个数据部分的数据类型信息来确定所述一个或多个数据部分的第一数据部分的装置;以及
用于基于与所述一个或多个数据部分相关联的时间信息以及下一数据块的最早数据部分的播出时间信息来确定调度中针对所述第一数据部分的调度条目的装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US10991708P | 2008-10-30 | 2008-10-30 | |
US61/109,917 | 2008-10-30 | ||
PCT/FI2009/050857 WO2010049585A1 (en) | 2008-10-30 | 2009-10-26 | Method and apparatus for interleaving a data block |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102257785A true CN102257785A (zh) | 2011-11-23 |
Family
ID=42128306
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2009801511942A Pending CN102257785A (zh) | 2008-10-30 | 2009-10-26 | 用于交织数据块的方法和装置 |
Country Status (10)
Country | Link |
---|---|
US (1) | US8966104B2 (zh) |
EP (1) | EP2351325B1 (zh) |
KR (1) | KR101374452B1 (zh) |
CN (1) | CN102257785A (zh) |
AU (1) | AU2009309551A1 (zh) |
BR (1) | BRPI0921720A2 (zh) |
CA (1) | CA2742416A1 (zh) |
RU (1) | RU2011120258A (zh) |
TW (1) | TWI549436B (zh) |
WO (1) | WO2010049585A1 (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103200158A (zh) * | 2012-01-06 | 2013-07-10 | 宏碁股份有限公司 | 播放多媒体串流的方法及系统 |
CN106330713A (zh) * | 2015-06-29 | 2017-01-11 | 华为技术有限公司 | 一种报文传输方法及装置 |
CN106780349A (zh) * | 2016-11-21 | 2017-05-31 | 深圳开立生物医疗科技股份有限公司 | 基于fpga的空间复合成像方法以及装置 |
Families Citing this family (40)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8327115B2 (en) | 2006-04-12 | 2012-12-04 | Soft Machines, Inc. | Plural matrices of execution units for processing matrices of row dependent instructions in single clock cycle in super or separate mode |
CN107368285B (zh) | 2006-11-14 | 2020-10-09 | 英特尔公司 | 多线程架构 |
EP2204965B1 (en) * | 2008-12-31 | 2016-07-27 | Google Technology Holdings LLC | Device and method for receiving scalable content from multiple sources having different content quality |
JP5058209B2 (ja) * | 2009-05-22 | 2012-10-24 | 株式会社日立製作所 | ストリームデータ処理において逆再生を行うデータ処理システム |
US9015564B2 (en) | 2009-08-19 | 2015-04-21 | Qualcomm Incorporated | Content delivery system with allocation of source data and repair data among HTTP servers |
EP2529528B1 (en) * | 2010-01-28 | 2018-01-10 | Thomson Licensing | A method and apparatus for parsing a network abstraction-layer for reliable data communication |
JP6067378B2 (ja) | 2010-01-28 | 2017-01-25 | トムソン ライセンシングThomson Licensing | 再送決定する方法及び装置 |
KR20120034550A (ko) * | 2010-07-20 | 2012-04-12 | 한국전자통신연구원 | 스트리밍 컨텐츠 제공 장치 및 방법 |
US9467493B2 (en) | 2010-09-06 | 2016-10-11 | Electronics And Telecommunication Research Institute | Apparatus and method for providing streaming content |
WO2012037491A2 (en) | 2010-09-17 | 2012-03-22 | Soft Machines, Inc. | Single cycle multi-branch prediction including shadow cache for early far branch prediction |
EP2689330B1 (en) | 2011-03-25 | 2022-12-21 | Intel Corporation | Register file segments for supporting code block execution by using virtual cores instantiated by partitionable engines |
KR101636602B1 (ko) | 2011-03-25 | 2016-07-05 | 소프트 머신즈, 인크. | 분할가능한 엔진에 의해 인스턴스화된 가상 코어를 이용한 코드 블록의 실행을 지원하는 메모리 프래그먼트 |
WO2012135031A2 (en) | 2011-03-25 | 2012-10-04 | Soft Machines, Inc. | Executing instruction sequence code blocks by using virtual cores instantiated by partitionable engines |
CN103649932B (zh) | 2011-05-20 | 2017-09-26 | 英特尔公司 | 资源的分散分配以及用于支持由多个引擎执行指令序列的互连结构 |
CN103649931B (zh) | 2011-05-20 | 2016-10-12 | 索夫特机械公司 | 用于支持由多个引擎执行指令序列的互连结构 |
JP5795446B2 (ja) * | 2011-11-01 | 2015-10-14 | クゥアルコム・インコーポレイテッドQualcomm Incorporated | Httpサーバの間でのソースデータおよび修復データの割り当てを伴うコンテンツ配送システム |
KR101842550B1 (ko) | 2011-11-22 | 2018-03-28 | 소프트 머신즈, 인크. | 다중 엔진 마이크로프로세서용 가속 코드 최적화기 |
CN104040491B (zh) | 2011-11-22 | 2018-06-12 | 英特尔公司 | 微处理器加速的代码优化器 |
US9438883B2 (en) * | 2012-04-09 | 2016-09-06 | Intel Corporation | Quality of experience reporting for combined unicast-multicast/broadcast streaming of media content |
US20140126454A1 (en) * | 2012-11-05 | 2014-05-08 | Qualcomm Incorporated | Embms support in heterogeneous network |
GB2509323B (en) | 2012-12-28 | 2015-01-07 | Glide Talk Ltd | Reduced latency server-mediated audio-video communication |
JP6263843B2 (ja) * | 2013-02-28 | 2018-01-24 | 株式会社リコー | 通信管理システム、通信管理方法、及びプログラム |
CN105247484B (zh) | 2013-03-15 | 2021-02-23 | 英特尔公司 | 利用本地分布式标志体系架构来仿真访客集中式标志体系架构的方法 |
WO2014150991A1 (en) | 2013-03-15 | 2014-09-25 | Soft Machines, Inc. | A method for implementing a reduced size register view data structure in a microprocessor |
US9632825B2 (en) | 2013-03-15 | 2017-04-25 | Intel Corporation | Method and apparatus for efficient scheduling for asymmetrical execution units |
US9811342B2 (en) | 2013-03-15 | 2017-11-07 | Intel Corporation | Method for performing dual dispatch of blocks and half blocks |
US10140138B2 (en) | 2013-03-15 | 2018-11-27 | Intel Corporation | Methods, systems and apparatus for supporting wide and efficient front-end operation with guest-architecture emulation |
US10275255B2 (en) | 2013-03-15 | 2019-04-30 | Intel Corporation | Method for dependency broadcasting through a source organized source view data structure |
US9891924B2 (en) | 2013-03-15 | 2018-02-13 | Intel Corporation | Method for implementing a reduced size register view data structure in a microprocessor |
EP2972845B1 (en) | 2013-03-15 | 2021-07-07 | Intel Corporation | A method for executing multithreaded instructions grouped onto blocks |
US9886279B2 (en) | 2013-03-15 | 2018-02-06 | Intel Corporation | Method for populating and instruction view data structure by using register template snapshots |
US9904625B2 (en) | 2013-03-15 | 2018-02-27 | Intel Corporation | Methods, systems and apparatus for predicting the way of a set associative cache |
US9569216B2 (en) | 2013-03-15 | 2017-02-14 | Soft Machines, Inc. | Method for populating a source view data structure by using register template snapshots |
WO2014150806A1 (en) | 2013-03-15 | 2014-09-25 | Soft Machines, Inc. | A method for populating register view data structure by using register template snapshots |
WO2014150971A1 (en) | 2013-03-15 | 2014-09-25 | Soft Machines, Inc. | A method for dependency broadcasting through a block organized source view data structure |
JP2014187510A (ja) * | 2013-03-22 | 2014-10-02 | Fujitsu Ltd | ストリーミング配信システム、ストリーミング配信方法、ストリーミング配信プログラムおよびストリーミング配信サーバ |
US9436842B2 (en) * | 2013-08-16 | 2016-09-06 | Vinay Purohit | Distributed fragments file system |
US9369724B2 (en) * | 2014-03-31 | 2016-06-14 | Microsoft Technology Licensing, Llc | Decoding and synthesizing frames for incomplete video data |
WO2019243078A1 (en) * | 2018-06-20 | 2019-12-26 | Sony Corporation | Infrastructure equipment, communications device and methods |
CN112822514B (zh) * | 2020-12-30 | 2022-06-28 | 北京大学 | 基于依赖关系的视频流分组传输方法、系统、终端及介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020024970A1 (en) * | 2000-04-07 | 2002-02-28 | Amaral John M. | Transmitting MPEG data packets received from a non-constant delay network |
US20030182610A1 (en) * | 2002-03-19 | 2003-09-25 | Dennis Bushmitch | Error resilient coding, storage, and transmission of digital multimedia data |
WO2006053949A1 (en) * | 2004-11-19 | 2006-05-26 | Nokia Corporation | Packet stream arrangement in multimedia transmission |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2955561B1 (ja) | 1998-05-29 | 1999-10-04 | 株式会社ディジタル・ビジョン・ラボラトリーズ | ストリーム通信システム及びストリーム転送制御方法 |
JP2001160066A (ja) * | 1998-12-25 | 2001-06-12 | Matsushita Electric Ind Co Ltd | データ処理装置、データ処理方法および記録媒体、並びに該データ処理方法をコンピュータに実行させるためのプログラム |
JP2003046949A (ja) * | 2001-07-30 | 2003-02-14 | Hitachi Ltd | データ多重化方法、データ記録媒体、データ記録装置及びデータ記録プログラム |
MXPA03010390A (es) * | 2001-11-30 | 2005-03-07 | Matsushita Electric Ind Co Ltd | Un metodo y aparato para la conversacion de corriente, un metodo y aparato para el registro de datos y un medio de registro de datos. |
US7340527B2 (en) * | 2002-05-09 | 2008-03-04 | Matsushita Electric Industrial Co., Ltd. | Content distribution system that distributes line of stream data generated by splicing plurality of pieces of stream data |
WO2006031925A2 (en) * | 2004-09-15 | 2006-03-23 | Nokia Corporation | Providing zapping streams to broadcast receivers |
US7843947B2 (en) * | 2005-05-19 | 2010-11-30 | Nokia Corporation | System and method for providing unequal error protection to priority labeled datagrams in a DVB-H transmission system |
US20090077609A1 (en) * | 2006-01-17 | 2009-03-19 | Guillaume Bichot | Gateway For Receiving Digital Television Broadcast Services, Terminal and Corresponding Methods |
-
2009
- 2009-10-26 RU RU2011120258/08A patent/RU2011120258A/ru unknown
- 2009-10-26 BR BRPI0921720A patent/BRPI0921720A2/pt not_active IP Right Cessation
- 2009-10-26 KR KR1020117012048A patent/KR101374452B1/ko active IP Right Grant
- 2009-10-26 CN CN2009801511942A patent/CN102257785A/zh active Pending
- 2009-10-26 WO PCT/FI2009/050857 patent/WO2010049585A1/en active Application Filing
- 2009-10-26 EP EP09823130.1A patent/EP2351325B1/en active Active
- 2009-10-26 CA CA2742416A patent/CA2742416A1/en not_active Abandoned
- 2009-10-26 AU AU2009309551A patent/AU2009309551A1/en not_active Abandoned
- 2009-10-30 TW TW098136942A patent/TWI549436B/zh active
- 2009-10-30 US US12/610,061 patent/US8966104B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020024970A1 (en) * | 2000-04-07 | 2002-02-28 | Amaral John M. | Transmitting MPEG data packets received from a non-constant delay network |
US20030182610A1 (en) * | 2002-03-19 | 2003-09-25 | Dennis Bushmitch | Error resilient coding, storage, and transmission of digital multimedia data |
WO2006053949A1 (en) * | 2004-11-19 | 2006-05-26 | Nokia Corporation | Packet stream arrangement in multimedia transmission |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103200158A (zh) * | 2012-01-06 | 2013-07-10 | 宏碁股份有限公司 | 播放多媒体串流的方法及系统 |
CN106330713A (zh) * | 2015-06-29 | 2017-01-11 | 华为技术有限公司 | 一种报文传输方法及装置 |
CN106330713B (zh) * | 2015-06-29 | 2020-04-14 | 华为技术有限公司 | 一种报文传输方法及装置 |
CN106780349A (zh) * | 2016-11-21 | 2017-05-31 | 深圳开立生物医疗科技股份有限公司 | 基于fpga的空间复合成像方法以及装置 |
CN106780349B (zh) * | 2016-11-21 | 2020-02-14 | 深圳开立生物医疗科技股份有限公司 | 基于fpga的空间复合成像方法以及装置 |
Also Published As
Publication number | Publication date |
---|---|
US20100217887A1 (en) | 2010-08-26 |
EP2351325B1 (en) | 2018-09-26 |
TW201023531A (en) | 2010-06-16 |
BRPI0921720A2 (pt) | 2016-01-05 |
AU2009309551A1 (en) | 2010-05-06 |
TWI549436B (zh) | 2016-09-11 |
KR20110089309A (ko) | 2011-08-05 |
US8966104B2 (en) | 2015-02-24 |
WO2010049585A1 (en) | 2010-05-06 |
EP2351325A1 (en) | 2011-08-03 |
EP2351325A4 (en) | 2013-01-02 |
CA2742416A1 (en) | 2010-05-06 |
KR101374452B1 (ko) | 2014-03-17 |
RU2011120258A (ru) | 2012-12-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102257785A (zh) | 用于交织数据块的方法和装置 | |
JP6441521B2 (ja) | 放送システムにおける制御メッセージ構成装置及び方法 | |
RU2718170C2 (ru) | Определение местоположений событий доставки мультимедиа для транспортировки мультимедиа | |
US7746882B2 (en) | Method and device for assembling forward error correction frames in multimedia streaming | |
US9043849B2 (en) | Method for linking MMT media and DASH media | |
KR101029854B1 (ko) | 스케일러블 비디오 코딩에서 픽쳐들의 역방향-호환 집합 | |
CN108141455B (zh) | 用于媒体数据的流式发射的期限信令 | |
ES2711374T3 (es) | Transmisión de petición de bloques mejorada mediante codificación escalable | |
CN102549999A (zh) | 使用协作式并行http和前向纠错的增强型块请求流送 | |
JP2008546238A (ja) | Dvb−h送信システムにおいてプライオリティ表示されたデータグラムに不等のエラー保護を与えるシステム及び方法 | |
CN102577307A (zh) | 使用url模板和构造规则的增强型块请求流送 | |
CN102550034A (zh) | 使用块划分或请求控制以获得改善的客户端侧处置的增强型块请求流送 | |
CN102577411A (zh) | 使用信令或块创建的增强型块请求流送系统 | |
TW200822758A (en) | Scalable video coding and decoding | |
CN111837403A (zh) | 处理用于以流传送媒体数据的交互性事件 | |
TW201002081A (en) | Media stream processing |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20111123 |