CN103959799A - 用于发送/接收广播数据的装置和方法 - Google Patents
用于发送/接收广播数据的装置和方法 Download PDFInfo
- Publication number
- CN103959799A CN103959799A CN201280058688.8A CN201280058688A CN103959799A CN 103959799 A CN103959799 A CN 103959799A CN 201280058688 A CN201280058688 A CN 201280058688A CN 103959799 A CN103959799 A CN 103959799A
- Authority
- CN
- China
- Prior art keywords
- payload
- source
- fec
- information
- block
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L1/00—Arrangements for detecting or preventing errors in the information received
- H04L1/004—Arrangements for detecting or preventing errors in the information received by using forward error control
- H04L1/0075—Transmission of coding parameters to receiver
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M13/00—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes
- H03M13/03—Error detection or forward error correction by redundancy in data representation, i.e. code words containing more digits than the source words
- H03M13/05—Error detection or forward error correction by redundancy in data representation, i.e. code words containing more digits than the source words using block codes, i.e. a predetermined number of check bits joined to a predetermined number of information bits
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M13/00—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes
- H03M13/35—Unequal or adaptive error protection, e.g. by providing a different level of protection according to significance of source information or by adapting the coding according to the change of transmission channel characteristics
- H03M13/356—Unequal error protection [UEP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L1/00—Arrangements for detecting or preventing errors in the information received
- H04L1/004—Arrangements for detecting or preventing errors in the information received by using forward error control
- H04L1/0041—Arrangements at the transmitter end
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L1/00—Arrangements for detecting or preventing errors in the information received
- H04L1/004—Arrangements for detecting or preventing errors in the information received by using forward error control
- H04L1/0056—Systems characterized by the type of code used
- H04L1/0064—Concatenated codes
- H04L1/0066—Parallel concatenated codes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
- H04L65/611—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for multicast or broadcast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/70—Media network packetisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
- H04N19/66—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience involving data partitioning, i.e. separation of data into packets or partitions according to importance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2383—Channel coding or modulation of digital bit-stream, e.g. QPSK modulation
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M13/00—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes
- H03M13/03—Error detection or forward error correction by redundancy in data representation, i.e. code words containing more digits than the source words
- H03M13/05—Error detection or forward error correction by redundancy in data representation, i.e. code words containing more digits than the source words using block codes, i.e. a predetermined number of check bits joined to a predetermined number of information bits
- H03M13/11—Error detection or forward error correction by redundancy in data representation, i.e. code words containing more digits than the source words using block codes, i.e. a predetermined number of check bits joined to a predetermined number of information bits using multiple parity bits
- H03M13/1102—Codes on graphs and decoding on graphs, e.g. low-density parity check [LDPC] codes
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M13/00—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes
- H03M13/03—Error detection or forward error correction by redundancy in data representation, i.e. code words containing more digits than the source words
- H03M13/05—Error detection or forward error correction by redundancy in data representation, i.e. code words containing more digits than the source words using block codes, i.e. a predetermined number of check bits joined to a predetermined number of information bits
- H03M13/13—Linear codes
- H03M13/15—Cyclic codes, i.e. cyclic shifts of codewords produce other codewords, e.g. codes defined by a generator polynomial, Bose-Chaudhuri-Hocquenghem [BCH] codes
- H03M13/151—Cyclic codes, i.e. cyclic shifts of codewords produce other codewords, e.g. codes defined by a generator polynomial, Bose-Chaudhuri-Hocquenghem [BCH] codes using error location or error correction polynomials
- H03M13/1515—Reed-Solomon codes
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M13/00—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes
- H03M13/37—Decoding methods or techniques, not specific to the particular type of coding provided for in groups H03M13/03 - H03M13/35
- H03M13/3761—Decoding methods or techniques, not specific to the particular type of coding provided for in groups H03M13/03 - H03M13/35 using code combining, i.e. using combining of codeword portions which may have been transmitted separately, e.g. Digital Fountain codes, Raptor codes or Luby Transform [LT] codes
Abstract
提供了一种对包括不同类型的数据有效载荷的源块进行编码的方法和编码装置。所述方法包括:将源块分割成预定数目M个的子块;通过对预定数目M个的子块的每一个执行第一前向纠错(FEC)编码来生成与预定数目M个的子块的每一个相对应的预定数目P1个的基本奇偶校验有效载荷;通过对构成源块的数据有效载荷中的特定类型的数据有效载荷来执行第二FEC编码来生成与源块相对应的预定数目P2个的扩展奇偶校验有效载荷;以及基于包括预定数目M个的子块和生成的预定数目P1个基本奇偶校验有效载荷的预定数目N个的子编码块来配置源编码块。
Description
技术领域
本发明大体上涉及发送和/或接收广播数据的装置和方法。更具体地说,本发明涉及一种发送/接收基于编码和解码技术的广播数据的装置和方法。
背景技术
通常地,在广播网络中,多媒体内容利用运动图像专家组-2传输流(MPEG-2TS)来传达。特别地,在错误传输环境中对多个广播节目被复用到的比特流进行传输时希望使用MPEG-2TS。例如,MPEG-2TS适合于在用于数字电视(DTV)的广播服务中使用。
图1示出了用于支持根据相关技术的MPEG-2TS的分层结构。
参照图1,用于支持MPEG-2TS的分层结构包括媒体编码层110、同步层120、传递层130、网络层140、数据链路层150和物理层160。媒体编码层110和同步层120以被用作用于记录和传输的基础单元的格式来配置媒体数据。传递层130、网络层140、数据链路层150和物理层160以在同步层120中配置的格式来配置数据块,以使其变为用于在单独记录介质或者传输中进行记录的多媒体帧。多媒体帧被通过预定网络发送到订户的终端。
同步层120包括分段块(fragment block)122和访问单元124,并且传递层130包括MPEG-2TS/运动图像专家组-4(MP4)单元132、实时传输协议/超文本传输协议(RTP/HTTP)单元134、和用户数据报协议/传输控制协议单元(UDP/TCP)136。
然而,MPEG-2TS在支持多媒体服务方面具有几个约束,例如,单向通信、由于固定的帧大小而导致传输效率低、以及专用于音频/视频和因特网协议(IP)的传输协议被用于传输时发生的不必要的开销。因此,MPEG已经提出了新的MPEG媒体传输(MMT)标准,以作为用于提供基于MPEG的多媒体服务的多媒体传输技术之一。MMT标准已被提出用来解决对于MPEG-2TS的限制。
例如,MMT标准可以被应用来在异构网络上支持高效的混合内容传递服务。混合内容传递服务是指提供具有混合多媒体元素,例如,视频、音频、应用以及其他相似和/或适当元素的内容的服务。异构网络是指在其中广播网和通信网混合的网络。此外,MMT标准的目的在于定义更加IP友好的传送技术,IP已被认为是用于多媒体服务的传送网络中的基本技术。
因此,用于在代表型的基于IP变化的多媒体服务环境中提供高效的MPEG传递技术的MMT标准正处于研究中的标准化进程中。MMT标准使用用于在尝试提供混合网络和混合内容传递服务的最近的多媒体服务环境中提供高效的MPEG传递技术的方案的准备。另一方面,MMT系统以各种方式提供高容量内容,例如,高清晰度(HD)内容、超高清(UHD)内容、或其他类似的和/或合适的内容。
在MMT系统中,因为内容变得更加多样化并且具有更高的容量,所以数据拥塞变得严重。这导致了不能传输由发送器向接收器发送的内容数据,并且导致了在其中所发送的内容数据的所有或一部分在传输过程中丢失而不到达接收器的情况。在一般情况下,以分组来发送数据,并且使得数据丢失出现在分组单元中。在MMT系统中可能发生的分组丢失引起各种问题,例如,音频质量的劣化、视频质量的劣化、或者屏幕的中断、字幕遗漏、文件丢失、以及其它类似的问题。因此,MMT系统采用了错误控制技术,以减少可能由于根据信道条件的网络拥塞所造成的信息或数据丢失。上述错误控制技术的代表性的示例是应用层前向纠错(AL-FEC)方案。
然而,为了在支持混合内容传递服务的MMT系统中应用AL-FEC方案,用于混合内容传递服务的不同类型内容应满足不同的服务质量(QoS)要求。例如,音频和视频数据采用允许部分损失但是应该是最小延迟的QoS。相反,文件数据使用允许稍微延迟但是应该是最小损失的QoS。例如,对于可伸缩视频编码(SVC),相对比对应于增强层的内容更重要的对应于基本层的内容应该具有基于相对较强的编码的保护。对于多视图编码(MVC)的情况也是一样。换句话说,在3维(3D)内容的情况下,左视图被认为是基本层和右视图被认为是增强层,所以作为基本层的左视图使用更强的保护。这样,AL-FEC技术应该能够在支持混合内容传递服务的MMT系统中有效地保护具有不同QoS要求的多个内容。
以上资料仅仅用作背景信息,以协助本公开的理解。并没有针对上述内容是否可以应用作为与本发明相关的现有技术进行任何的判定,或者没有对其进行任何的断言。
发明内容
技术问题
本发明的各方面用于至少解决上述问题和/或缺点,并且至少提供下面描述的优点。因此,本发明的一个方面是提供一种在考虑到服务质量(QoS)的情况下,对包括具有不同的QoS要求的不同种类数据的源块(sourceblock)进行编码和解码的装置和方法。
本发明的另一个方面是提供根据构成源块的数据段的类型,以两级来对包括具有不同QoS要求的不同类型的数据的源块进行编码时,确定将应用的两级FEC编码方案的编码装置和方法。
本发明的另一个方面是提供在以两级来对包括具有不同QoS要求的不同类型的数据的源块进行编码时,对编码信号信息进行配置的编码装置和方法。
本发明的另一个方面是提供当以两级来对由具有不同QoS要求的不同类型的数据构成的源块进行编码时,具有包含用于识别哪个将受到扩展编码的信息的编码信号信息的编码装置和方法。
本发明的另一个方面是提供用于在以两级来编码源块时,识别将要受到扩展编码的对象是由具有不同QoS要求的不同类型的数据构成的整个源块或者是在源块中的特定类型的数据段的标志。
本发明的另一个方面是提供一种当以两级来编码源块时,在编码信号信息中,包括在从对于由具有不同QoS要求的不同类型的数据构成的源块进行两级编码中产生的源编码块内的有效载荷的位置信息的方案。
技术方案
在根据本发明的一个方面,提供了一种在编码装置中,对包括要求不同服务质量(QoS)的不同类型的数据有效载荷的源块进行编码的方法。所述方法包括:将源块分割成预定数目M个子块;通过对预定数目M个子块的每一个执行第一前向纠错(FEC)编码来生成与预定数目M个子块的每一个相对应的预定数目P1的基本奇偶校验有效载荷;通过对构成源块的数据有效载荷中的特定类型的数据有效载荷来执行第二FEC编码来生成与源块相对应的预定数目P2的扩展奇偶校验有效载荷;以及基于包括预定数目M个子块和与预定数目M的子块的每一个相对应生成的预定数目P1的基本奇偶校验有效载荷的预定数目N的子编码块,以及预定数目P2的扩展奇偶校验有效载荷来配置源编码块。
在根据本发明的另一个方面,提供一种用于对包括要求不同服务质量(QoS)的不同类型的数据有效载荷的源块进行编码的编码装置。所述装置包括:编码器,其用于通过对由分割源块而生成的预定数目M的子块的每一个执行第一FEC编码来生成与预定数目M的子块的每一个相对应的预定数目P1的基本奇偶校验有效载荷,并且用于通过对构成源块的数据有效载荷中的特定类型的数据有效载荷来执行第二FEC编码来生成与源块相对应的预定数目P2的扩展奇偶校验有效载荷;以及分组器,其基于包括预定数目M的子块和与预定数目M的子块的每一个相对应生成的预定数目P1的基本奇偶校验有效载荷的预定数目N的子编码块,以及预定数目P2的扩展奇偶校验有效载荷来配置源编码块。
结合附图,从以下的详细描述中,本发明的其他方面、优点、和显着特征对于本领域的技术人员而言将变得显而易见,所述附图公开了本发明的示例性实施例。
附图说明
结合附图,从以下的描述中,本发明的某些示例性实施例的上述和其它方面、特征和优点将变得更加显而易见,在附图中:
图1示出了根据现有技术的用于支持MPEG-2TS的分层结构;
图2a和2b示出了在根据本发明示例性实施例的编码装置中生成的源编码块(或前向纠错(FEC)块)的结构;
图3示出了根据本发明示例性实施例的完整的两级FEC编码方案;
图4示出了根据本发明示例性实施例的部分的两级FEC编码方案;
图5至7示出了根据本发明示例性实施例的构成源块的数据段的类型;
图8示出了根据本发明示例性实施例的,使用带内信令的编码信号信息的传输;
图9是根据本发明示例性实施例的,构成用于传送使用带内信令的编码信号信息的子编码块的源部分的源分组的结构;
图10是根据本发明示例性实施例的,构成用于传送使用带内信令的编码信号信息的子编码块的奇偶校验部分的奇偶校验分组的结构;
图11是根据本发明示例性实施例的,对应于图9的源分组或者图10的奇偶校验分组的MPEG媒体传输(MMT)分组的MMT报头的结构;
图12a至12d示出了根据本发明示例性实施例的,对应于图9的源分组或者图10奇偶校验分组的MMT分组的FEC带内信号的结构;
图13a和13b示出了根据本发明示例性实施例的,利用带内信令来实施部分的两级FEC编码方案;
图14示出了根据本发明示例性实施例的,用于发送使用带外信令的编码信号信息的装置的框图;以及
图15示出了根据本发明示例性实施例的,用于发送使用带内信令的编码信号信息的装置的框图。
应该注意,在整个附图中相同的标号用于描述相同或相似的元件、特征、和结构。
具体实施方式
参照附图,提供下面的描述来帮助对由权利要求书及其等效物所定义的本发明示例性实施例的全面理解。包括各种特定细节以帮助理解,但是这些细节将被认为仅仅是示例性的。因此,对于本领域的普通技术人员将认识到,可以在不脱离本发明的范围和精神的情况下,对本文所描述的实施例进行各种变化和修改。另外,为了清楚和简明,也可以省略对于公知功能和结构的描述。
在下面的描述和权利要求中使用的术语和词语不限于字面含义,而是仅仅被发明人用来使得本发明的理解是清楚和一致的。因此,对于本领域技术人员而言应当清楚的是,提供了本发明示例性实施例的以下描述仅供说明而不是为了限制由所附权利要求及其等同物所限定的本发明的目的。
但是应当理解的是,除非上下文另有明确规定,否则单数形式一”、“一个”、和“该”包括复数指代。因此,例如,当提及“一个组件表面”时包括提及一个或多个这样的表面。
在下面的描述中,为了便于说明,在本发明的示例性实施例的详细描述中所用术语定义如下。源块是具有用于混合内容传递服务的不同QoS要求的一组不同类型的数据段。子块是通过将源块划分为M(M是大于等于1的整数)获得的、包括具有不同QoS要求的不同类型的数据段的数据块。数据段是要以预定的大小记录到源块或者子块中的数据的单元集合。前向纠错(FFC)代码是用于FEC编码的代码,其是用于校正错误或擦除码元的纠错代码。可能存在用作FEC码的多种代码,例如RS码、LDPC、Raptor码、RaptorQ码、XOR码等。FFC编码是指利用FEC码的将在源块、子块、或者处于源块中的特定类型的数据段上执行的编码。
另外,两级FEC编码是子块通过其而受到利用第一FEC码进行的第一FEC编码,并且源块或处于源块中的特定类型的数据段受到第二FEC编码的编码方案。子编码块或FEC帧是由子块的第一FEC编码生成的码字,其由要受到第一FEC编码的目标子块(即,源部分(source part))以及从目标子块的第一FEC编码中获得的奇偶校验部分来组成。为了便于说明,一般将其称为子编码块。源部分是指将要受到第一FEC编码的目标子块,以及构成子编码块的一组预定数目(K,其为等于或大于1的整数)的源有效载荷(或源分组)。因此,预定数目(K)的源有效载荷可以等于构成目标子块的数据段。奇偶校验部分(或修补部分)是指从给定的数据的FEC编码的纠错中获取的一组预定数目的奇偶校验有效载荷(或一组奇偶校验分组)。
此外,基本奇偶校验部分(或基本修补部位)是构成子编码块的一组预定数目(P1,其为等于或大于1的整数)的奇偶校验有效载荷(或奇偶校验分组),其从目标子块的第一FEC编码中获取。扩展奇偶校验部分(或扩展修补部分)是从整个源块或处于源块中的特定类型数据段的第二FEC编码获得的一组预定数目(P2,其为等于或大于1的整数)的奇偶校验有效载荷(或奇偶校验分组)。源编码块或FEC块是包括从子块的第一FEC编码获取的子编码块和从整个源块或者源块的特定类型的数据段的第二FEC编码中获取的扩展奇偶校验部分的编码块。源编码分组或者FEC分组是包括报头信息和源编码块的分组。在使用带内信令的情况下,报头信息包含与源编码块或者FEC块相对应的编码信号信息。编码信号信息或者FEC控制信息是指用于重构源编码块或者用于控制源编码分组或者FEC分组的控制信息。其包括基于两级FEC编码的配置信息,即,第一FEC配置信息和第二FEC配置信息。
此外,编码信号分组或FEC控制分组是在其中在使用带外信令的情况下,用于发送编码信号信息或FEC控制信息的分组。码元是在源块、子块、源编码块、或子编码块中的数据单元。源码元是在FEC编码之前构成源块或子块的数据码元。编码码元是通过对源码元上执行第一或第二FEC编码而生成的码元,其是构成源编码块或子编码块的数据码元;系统码元或信息码元:属于源部分的编码码元中的一个。奇偶校验码元或修补码元是属于奇偶校验部分或修补部分的编码码元中的一个。基本奇偶校验码元或基本修补码元是属于基本奇偶校验部分或基本修补部位的编码码元中的一个;并且扩展奇偶校验码元或扩展修补码元是属于扩展奇偶校验部分或扩展修补部分的编码码元中的一个。
在本发明的下面的示例性实施例中,新定义的、与源块的两级编码相关的编码信号信息(其也被称为FEC控制信息)可以包括具有不同QoS要求的不同类型的数据。新定义的编码信号信息指的是用于重构利用两级FEC编码方案来编码的源块的控制信息。例如,编码信号信息可以对应于用于源块的编码的两级FEC编码方案来定义。这将在下面更详细地描述。另一方面,本发明的示例性实施例提出了用于重构由两级编码生成的编码块的,用于为例如解码装置的装置提供编码信号信息的方案。
本发明的另一个示例性实施例提出的是,完整的两级编码方案和部分的两级编码方案被选择性用于两级编码。例如,基于构成源块的每个数据段的类型来确定是使用完整的两级FEC编码方案或者是使用部分的两级FEC编码方案。数据段的类型可以被分类为具有一种类型的数据的第一类型的数据段,以及通过复用不同类型的数据来配置的第二类型的数据段。为此,用于区分类型的识别信息应该被包括在构成源块的数据有效载荷的报头信息中。
图2a和2b示出了在根据本发明示例性实施例的编码装置中生成的源编码块(或FEC块)的结构。
图2a示出了通过源块的一级FEC编码而生成的源编码块的结构,即,一级FEC编码结构。
参照图2a,源块被分成M个子块,每个子块具有预定的大小。M个子块的每个被利用FEC码来进行FEC编码。在FEC编码中,对应于M个子块中的每个,K个源有效载荷(K PL)和P个奇偶校验有效载荷(P PL)被生成。
子块被假设为具有要求不同服务质量(QoS)的不同类型的数据段。数据段利用对应于相同种类的资产(asset)的数据来配置,或者通过复用对应于不同类型的资产的数据来配置。在这里,不同类型的资产可以包括音频、视频、文件资产等。
参照图2a,阴影部分表示音频和视频(AV)源有效载荷,即AV数据,其对应于需要相同QoS的音频和视频资产。虚线部分表示文件数据源有效载荷,即文件数据,其对应于需要不同的QoS的文件资产。此外,白色部分表示奇偶校验有效载荷。P个奇偶校验有效载荷包括由音频和视频数据段的FEC编码产生的P1个奇偶校验码元和由文件数据段的FEC编码生成的P2个奇偶校验码元。
因此,从子块的FEC编码而获得的子编码块包括源和奇偶校验部分。源部分包括K个源有效载荷,并且奇偶校验部分包括P个奇偶校验有效载荷。例如,K个源有效载荷包括对应于音频、视频、和文件数据段的源有效载荷。P个奇偶校验有效载荷包括由音频数据段和视频数据段的FEC编码生成的P1个奇偶校验有效载荷和由文件数据段的FEC编码生成的P2个奇偶校验有效载荷。
图2b示出了由源块的两级FEC编码生成的源编码块的结构,即,两级FEC编码结构。
参照图2b,源块被分成M个子块,每个块具有预定的大小。通过对M个子块的每一个执行第一FEC编码来生成M个子编码块。M个子编码块的每一个包括K个PL和P1个奇偶校验有效载荷(P1PL)。第二FEC编码在整个源块或者处于源块中的特定类型的数据段,即,特定资产上执行。通过第二FEC编码,P2个扩展奇偶校验有效载荷,例如,P2b、M*P2PL被生成。
因此,从第一FEC编码得到的子编码块的每个包括源部分和基本奇偶校验部分。源部分包括K个源有效载荷。基本奇偶校验部分包括P1个奇偶校验负载。例如,包括在源部分中的K个源有效载荷对应于音频、视频、或文件数据段。由音频、视频、或文件数据段的第一FEC编码生成包含在基本奇偶校验部分中的P1个奇偶校验有效载荷。
参照图2b,阴影部分表示音频和视频源有效载荷,即,AV数据,其对应于具有相同QoS要求的音频和视频资产。虚线部分表示文件数据源有效载荷,即,文件数据,其对应于需要不同的QoS的文件资产。此外,白色部分表示奇偶校验有效载荷。第二FEC编码在源块中的所有数据段或源块中的特定类型的数据段,例如,文件数据段上进行。由第二FEC编码生成的P2个扩展奇偶校验有效载荷构成了扩展奇偶校验部分。因此,通过组合由第一FEC编码生成的子编码块和由第二FEC编码生成的扩展奇偶校验部分来构成源编码块。
在前面的描述中,对于混合内容传递服务,例如具有文件的AV流,对两种情况进行了检查,第一种情况下,每个子块还包括奇偶校验码元,例如在一级中的P1+P2个FEC奇偶校验,如在图2a所示,并且在第二种情况下,扩展奇偶校验码元,例如,M*P2个FEC奇偶校验被添加到整个M个子块中,如在图2b所示。在混合内容传递服务中,AV数据和文件数据一起被发送。文件数据比AV数据需要更好的FEC性能。因此,与仅仅传输AV数据相比,AV数据与文件数据一起传输进一步要求FEC奇偶校验,即,扩展奇偶校验码元。
通常,更好的AV流服务具有更低的延迟。为了在AV流服务中具有较小的延迟,需要利用尽可能短的块来执行FEC编码,例如,短的FEC码。与此相反,文件数据不会受到延迟的显著影响,但需要高的FEC性能。因此,文件数据应该利用尽可能长的块来进行FEC编码,例如,长的FEC码。这是因为,通过FEC编码的性质,在应用相同的奇偶校验添加率的情况下长块比短块表现出更好的FEC性能。
因此,需要在相同的流中将AV数据和文件数据一起传输的混合内容传递服务需要一种FEC编码技术,其用于保证对于AV数据而言的较低的延迟和对于文件数据而言的较高的FEC性能。本发明的示例性实施例基于两级FEC编码结构,在其中,AV数据利用短块来保护,而文件数据利用长块来保护。
在两级FEC编码结构中,对于要求相对高的FEC性能的资产额外地分配扩展奇偶校验,例如P2个奇偶校验。在两级FEC编码的示例中,要求较低延迟的AV资产被利用短块进行FEC编码,而且要求良好的FEC性能的文件数据利用长块来进行FEC编码。另一方面,两级FEC编码的两种实现方式被提供作为基于在哪一方面经历了在第一FEC编码之外执行的第二FEC编码的各示例性实施例。第一实施方式使得整个源块进行第二FEC编码。第二实施方式对于具有满足源块中的标准的QoS要求的特定类型的数据段进行第二FEC编码。第一实施方式可以是选项1,其可以被称为完整的两级FEC编码方案,而第二实施方案可以是选项2,其可以被称为部分的两级FEC编码方案。
图3示出了根据本发明示例性实施例的完整的两级FEC编码方案。
参照图3,源块310被划分为M个子块312-1、312-2、...、312-M。M个子块312-1、312-2、...、312–M的每一个经过第一FEC编码(FEC1编码)314。通过第一FEC编码314生成分别对应于M个子块312-1、312-2、...、312–M的M个子编码块。每个M个子编码块包括源部分316-1、316-2、...、316-M和奇偶校验部分318-1、318-2、...、318-M。因为源部分316-1、316-2、...、316-M具有与对应的子块具有相同的码元,所以在附图中其被表示为相同的术语。奇偶校验部分318-1、318-2、...、318-M具有通过在相应的子块上执行第一FEC编码而获得的奇偶校验码元。
另一方面,源块310经过第二FEC编码(FEC编码2)320。扩展奇偶校验码元从第二FEC编码320中获得。所获得的扩展奇偶校验码元构成扩展奇偶校验部分P2322。因此,通过组合从第一FEC编码314而获得的M个子编码数据块和从第二FEC编码320中获得的扩展奇偶校验部分322来构成源编码块。
如上所述,在完整的两级FEC编码中,整个源块受到第一FEC编码和第二FEC编码。换句话说,利用第一FEC码,在从源块划分的子块的每一个上进行第一FEC编码,以生成包括预定数目P1的奇偶校验有效载荷的基本奇偶校验有效载荷。利用第二FEC码,在整个源块上进行第二FEC编码,以生成包括预定数目P2的奇偶校验有效载荷的扩展奇偶校验部分。
图4示出了根据本发明示例性实施例的部分的两级FEC编码方案。
参照图4,源块410被划分成M个子块412-1、412-2、...、412-M。M个子块412-1、412-2、...、412–M的每个经过第一FEC编码(FEC1编码)414。由第一FEC编码414生成分别对应于M个子块412-1、412-2、...、412–M的M个子编码块。M个子编码块的每一个包括源部分416-1、416-2、...、416-M和奇偶校验部分418-1、418-2、...、418-M。源部分416-1、416-2、...、416-M与对应的子块具有相同的码元,所以在附图中其被表示为相同的术语。从子块的第一FEC编码获得的奇偶校验码元构成了奇偶校验部分418-1、418-2、...、418-M。
另一方面,在构成源块410的不同类型的数据段中满足预定条件的类型的数据段410-1、410-2、410-3、410-4、410-5、410-6、410-7、410-8被进行第二FEC编码(FEC2编码)420。第二FEC编码420生成扩展奇偶校验码元。所生成的扩展奇偶校验码元构成扩展奇偶校验部分,例如,扩展奇偶校验块,P2422。通过组合从第一FEC编码414获得的M个子编码块和从第二FEC编码420获得的扩展奇偶校验部分422来构成源编码块。
同时,对于在图4中建议的两级FEC编码,需要确定将受到第二FEC编码的数据段的类型。因此,需要事先设置用于确定将要受到第二FEC编码的数据段的类型的标准。希望通过使用对于构成子块的不同类型的数据段的QoS要求来设置所述标准。例如,可以通过在构成子块的不同种类的数据段中选择要求最高QoS的数据段的类型来设置所述标准。如果子块包括音频数据段、视频数据段、以及文件数据段,则应该具有最高的QoS的那些数据段中的一个满足所述标准。使用最高的QoS意味着需要最高的FEC性能。
在一般情况下,基于传输损耗的程度、优先级、错误恢复性能、传送方案、和/或数据类型来确定用于每种数据段所需的QoS。也即,要求很小的传输损耗、高优先级、和/或高级别的错误恢复性能的数据段类型要求相对高的QoS。此外,与使用定时的传输相比,使用非定时传输的数据段需要相对高的QoS。此外,为了支持3D图像,与对应于右视图的数据段相比,对应于左视图的数据段需要相对高的QoS,并且在对应于I-帧、P-帧、B-帧的数据段中,对应于I帧的数据段需要相对较高的QoS。
参照图4,其是源块包括要求不同的QoS的不同类型的数据段的情况。在这方面,一种类型的数据段可以包括对应于一个类型的资产的数据,或者其通过复用对应于不同类型的资产的数据来构成。
在数据段包括对应于一种资产的数据的情况下,期望应用如图4中所建议的部分的两级FEC编码。否则,在数据段通过复用对应于不同类型的资产的数据来构成的情况下,期望应用如图3中所建议的完整的两级FEC编码。然而,即使在数据段通过复用对应于不同类型的资产的数据来构成时的情况下,如果独立的数据段被配置用于将受到第二FEC编码的资产的数据,则期望应用图4的部分的两级FEC编码。
因此,在两级FEC编码中考虑上述情况,必不可少的是要识别哪些类型的数据段被包含在源块中,以选择性地应用完整的两级FEC编码和部分的FEC编码。例如,MMT分组为每个MMT资产定义了传输特性(TC)。TC包含有关错误恢复的信息。也即,错误恢复信息是TC信息之一。例如,TC可包括用于每个资产所需的关于QoS的信息,例如QoS信息。QoS信息可基于上述因素,例如,传输损耗的可容许程度、可允许的延迟、和/或类似物来定义。
图5至7示出了构成根据本发明示例性实施例的源块的数据段的类型。参照图5至7,构成源块的数据包括视频资产、音频资产、以及文件资产,为其中每个给定唯一识别信息ID0、ID1或ID2。
参照图5,在源块中的数据段被显示,其中数据段对应于一种类型的资产。即,在图5中,视频资产、音频资产以及文件资产的每个被给定唯一的识别信息,其可以被称作资产识别信息,其每个对应于独立的数据段。因此,每一个数据段的报头包含一个资产识别信息。
因此,在两级FEC编码中,从在每个数据段的报头中记录的资产识别信息中可以识别在数据段中包含的数据是关于哪个资产的。这使得能够从构成源块的数据段中识别对应于要进行第二FEC编码的文件资产的数据段,因此部分的两级FEC编码被应用在图5的情况中。
图6示出了如下的数据段,其中的一些数据段通过复用用于不同类型的资产,诸如视频资产和音频资产的数据来构成,并且其中的其它的数据段包含用于一种类型的资产,例如,文件资产的数据。用于音频和视频资产的资产识别信息被记录在通过复用而构成的数据段的报头中,并且用于文件资产的资产识别信息存在于包括一个资产的数据段的报头中。
因此,在两级FEC编码中,从记录在每个数据段的报头中的资产识别信息中,可以识别在数据段中包含的数据关于哪个资产。这使得能够从构成源块的数据段中识别对应于要进行第二FEC编码的文件资产的数据段,因此部分的两级FEC编码被应用在图6的情况中。
图7示出了其中的每个通过复用用于不同类型的资产,例如,视频资产、音频资产、以及文件资产的数据来构成的数据段。即,在图7中,所有数据段的报头的每个包括用于音频资产、视频资产、以及文件资产的资产识别信息。
因此,在两级FEC编码中,难以从在每个数据段的报头中记录的资产识别信息中提取用于特定的资产(例如,文件资产)的数据。在这种情况下,不可能从源块中区分仅用于将要进行第二FEC编码的文件资产的数据,完整的两级FEC编码方案被应用于图7的情况下。
表1示出了被定义来确定哪个两级FEC编码方案将被使用的数据段的示例性格式。也即,表1示出了在数据段的报头中提供QoS识别信息的示例。
【表1】
.... |
QoS指示符 |
.... |
在表1中,QoS指示符是识别优先级、层类型、帧类型、传输类型、FEC性能、数据类型等的信息。例如,QoS指示符可被用于识别“高或低优先级”、“基本层或增强层”、“I-帧或不是”、“I-帧或其他帧”、“定时数据或非定时的数据”、“高或低的FEC保护”、“左视图或右视图”、“AV数据或文件数据”等。例如,如果QoS指示符具有标识“基本层资产”和“增强层资产”的信息,则用于基本层的资产的数据段和用于增强层的资产的数据段可以被区分开来。在这种情况下,从记录在构成了源块的每个数据段的报头中的资产识别信息中,可以识别数据段是关于哪个资产的。因此,在这种情况下,可以应用部分的FEC编码,在其中仅仅用于基本层资产的数据段将要进行第二FEC编码。
但是,对于其中通过复用用于基本层资产的数据和用于增强层资产的数据来构成数据段的情况而言并不是这样。这是因为用于基本层资产的资产识别信息和用于增强层资产的资产识别信息一起存在于数据段的报头中。因此,在这种情况下,完整的FEC编码可以被应用,因为第二FEC编码可能不仅在用于基本层资产的数据段上执行。
在另一种情况下,QoS指示符具有将“I-帧”从“其他帧”中标识出的信息。在这种情况下,可以单独地配置用于I-帧的数据段和用于P-帧或B-帧的数据段。因此,从记录在构成源块的每个数据段的报头中的识别信息中,可以识别在有效载荷中记录的数据是关于哪个帧的。该识别信息可以是指示数据段的有效载荷是否包含I-帧的数据的信息。
由于包含在数据段的有效载荷中的数据的类型可以从识别信息中识别,所以可以应用部分的两级FEC编码,在其中,在构成源块的数据段中的期望类型的数据段上执行第二FEC编码。然而,在通过复用I-帧的数据和其它帧,例如,P-帧或B-帧的数据来配置数据段的情况下,难以仅提取对应于I-帧的数据段。该种情况是因为用于I-帧的资产识别信息和用于其他帧的资产识别信息一起存在于构成源块的数据段的报头中。
另一方面,为了正确地解码由根据本发明示例性实施例的两级FEC编码而生成的源编码块,编码信号信息应该被重新定义。编码信号信息从用于生成源编码块中的两级FEC编码中导出。编码信号信息应通过考虑完整的FEC编码和部分的FEC编码中的哪一个被采用用于两级FEC编码来进行配置。此外,期望通过考虑编码信号信息的传输方案以及用于源有效载荷的格式来配置编码信号信息。编码信号信息的传输方案可以分为带内信令和带外信令。
例如,构成编码信号信息的FEC配置信息主要包括长度信息和标识信息中的至少一个。此外,不但可以添加第一FEC码和第二FEC码的组合,而且可以添加用于识别哪个要进行第二FEC编码的标志。例如,标志使能对于是使用在其中对整个源块进行第二FEC编码的完整的两级编码或者是使用对不同种类的数据段中的一种数据段进行第二FEC编码的部分的两级编码的识别。
长度信息包含源块长度的信息、子块长度的信息、源部分长度的信息、基本奇偶校验部分长度的信息、以及扩展奇偶校验部分长度的信息中的至少一个。长度信息可以是元素的数目的信息。换句话说,长度信息包含在源块中的数据段的数目、子块中的数据段的数目、源部分中的源有效载荷的数目K、在基本奇偶校验部分中的奇偶校验有效载荷的数目P1、以及在扩展奇偶校验部分中的奇偶校验有效载荷的数目P2中的至少一个。
识别信息至少包括源块的识别信息、子块的识别信息、源部分的识别信息、基本奇偶校验部分的识别信息、扩展奇偶校验部分的识别信息、处于源部分中的每个源有效载荷的识别信息、处于基本奇偶校验部分中的每个奇偶校验有效载荷的识别信息、处于扩展奇偶校验部分中的每个奇偶校验有效载荷的识别信息、以及构成子块的每个数据段的识别信息。此外,可以存在编码单位块的识别信息。
源有效载荷的识别信息可以根据源部分中的源有效载荷的位置而使用按照升序或降序排序的序列号。基本奇偶校验有效载荷的识别信息可以根据在基本奇偶校验部分内的基本奇偶校验有效载荷的位置来使用按照升序或降序排序的序列号。扩展奇偶校验有效载荷的识别信息可以根据在扩展奇偶校验部分内的扩展奇偶校验有效载荷的位置来使用按照升序或降序排序的序列号。
图8示出了根据本发明示例性实施例的,使用带内信令的编码信号信息的示例性传输。
参照图8,示出了用于基于带内信令的编码信号信息的传输的编码信号分组或者FEC控制分组的结构。FEC控制分组810包括FEC控制分组报头820和有效载荷。有效载荷包括FEC编码结构字段830和FEC配置信息字段840。
FEC控制分组报头820包括标识其为FEC控制分组的信息,并且FEC编码结构字段830包含标识哪个编码方案被用于正在被发送的源编码分组的信息。例如,记录在FEC编码结构字段830中的标志值被定义来区分AL–FEC没有被应用831、一级FEC编码被应用832、完整的两级FEC编码结构(方法1)833、以及部分两级FEC编码结构(方法2)834的各种情况。即,用于AL-FEC没有被应用831的标志值被定义为“b000”,用于一级FEC编码被应用832的标志值被定义为“b001”,用于完整的两级FEC编码结构(方法1)833的标志值被定义为“b010”,而用于部分的两级FEC编码结构(方法2)834的标志值被定义为“b011”。
FEC配置信息字段840包括与两级FEC编码相关的控制信息。即,关于被包括在FEC配置信息字段840中的两级FEC编码的控制信息包括关于第一FEC编码的信息和关于第二FEC编码的信息。关于第一FEC编码的信息包括:使用的FEC码的信息(例如,FEC1码ID841);子块的长度(例如,子块长度842);第一奇偶校验块的长度(例如,奇偶校验1块长度843);源流的识别信息(例如,源流ID=0x0000844);第一奇偶校验流的识别信息(例如,奇偶校验1流ID=0×0002845);以及其他类似信息。
关于第二FEC编码的信息包括:使用的FEC码的信息,例如,FEC2码ID846;源块或部分源块的长度,例如,(部分)源块长度847;第二奇偶校验块的长度,例如,奇偶校验2块长度848;源块或部分源流的识别信息,例如,(部分)源流ID=0X0001849;第二奇偶校验流的识别信息,例如,奇偶校验2流ID=0x0003850;以及其他类似的信息。在具有固定大小的(部分)源块长度847、子块长度842、以及奇偶校验1块长度843字段的情况下,可以应用用于在FEC控制分组中的传输的带外信令。与此相反,在具有可变大小的AL-FEC的情况下,可以应用用于在FEC分组中的传输的带内信令。
图9是根据本发明示例性实施例的,构成用于传送使用带内信令的编码信号信息的子编码块的源部分的源分组的示例性结构。
参照图9,通过按照MMT分组的形式的源有效载荷920的AL-FEC编码来生成源分组910。换句话说,源分组910是从AL-FEC编码的应用中产生的MMT分组,在AL-FEC编码中,每个源有效载荷920,即MMT分组被FEC编码,并且然后向其添加用于带内信令的字段。用于带内信令的字段具有记录的编码信号信息。构成源块的每个源有效载荷920通过组合MMT报头940和MMP有效载荷950来配置。如上所述,在使用带内信令的情况下,在源分组中的编码信号信息被提供到添加到FEC编码源有效载荷的用于带内信令的字段930和MMT报头940中。
图10是根据本发明示例性实施例的,构成用于传送使用带内信令的编码信号信息的子编码块的奇偶校验部分的奇偶校验分组的示例性结构。
参照图10,在构成源块的源有效载荷是MMT分组的情况下,由源有效载荷的FEC编码而生成的一个或多个奇偶校验有效载荷1040被包含在单个的奇偶校验分组1010中。即,奇偶校验分组1010是具有除了一个或多个奇偶校验有效载荷1040之外的MMT报头1020和用于带内信令,例如,FEC带内信号的字段1030的MMT分组。奇偶校验分组1010用于应用了AL-FEC编码的奇偶校验有效载荷。如上所述,在使用带内信令的情况下,在奇偶校验分组中的编码信号信息被提供到添加到FEC编码奇偶校验有效载荷1040的用于带内信令的字段1030和MMT报头1020中。
图11是根据本发明示例性实施例的,对应于图9的源分组或者图10奇偶校验分组的MMT分组的MMT报头的结构。
参照图11,图11中所示的MMT报头1110的结构假定源有效载荷是MMT分组。MMT报头1110包括有效载荷类型字段1120和FEC编码结构字段1130。FEC编码结构字段1130等于构成如图8所示的FEC控制分组的FEC编码结构814。
有效载荷类型字段1120包括标志来定义MMT分组的有效载荷的类型。例如,有效载荷的类型可以被分类为源有效载荷1121、部分的源有效载荷1122、第一奇偶校验有效载荷1123、以及第二奇偶校验有效载荷1124。在这种情况下,有效载荷类型字段1120的标志具有用于定义四个类型的有效载荷中的每一个的值。例如,用于源有效载荷1121的标志具有“0x0000”的值,用于部分的源有效载荷1122的标志具有“0x0001”的值,用于第一奇偶校验有效载荷1123的标志具有“0x0002”的值,并且用于第二奇偶校验有效载荷1124的标志具有“0x0003”的值。因此,标志使能对于构成MMT分组的有效载荷的类型的识别。
例如,在FEC编码结构字段1130的值表示部分的两级FEC编码结构,并且有效载荷类型字段1120的标志具有指示源有效载荷1121的值0x0000的情况下,则可以识别到MMT分组的有效载荷是除了在源块中的源有效载荷中的所述部分的源有效载荷之外的源有效载荷。然而,子块可以包括源有效载荷和部分的源有效载荷这两者。在另一种情况下,如果FEC编码结构字段1130的值表示部分的两级FEC编码结构,并且有效载荷类型字段1120的标志具有指示部分的源有效载荷1122的值0x0001,则可以识别到MMT分组的有效载荷是在源块中的源有效载荷中的部分的源有效载荷。
在使用部分FEC编码的另一种情况中,在从子块中生成并且构成第一奇偶校验部分的奇偶校验分组的报头中的有效载荷类型字段1120的标志被设置为具有值“0x0002”。标志的值“0x0002”意味着MMT分组的有效载荷是通过在源块中的源有效载荷的第一FEC编码而生成的第一奇偶校验有效载荷1123。
在使用部分FEC编码的又一种情况中,在从子块中的部分的源有效载荷生成并且构成第二奇偶校验部分的奇偶校验分组的报头中的有效载荷类型字段1120的标志被设置为具有值“0x0003”。标志的值“0x0003”意味着MMT分组的有效载荷是通过在源块中的部分的源有效载荷的第二FEC编码而生成的第二奇偶校验有效载荷1124。另一方面,对于图11的MMT报头而言适合于被应用到在其中编码结构动态地变化的情况。对于编码结构不经常变化的情况,使用FEC控制分组可能更合适。
图12a至12d示出了根据本发明示例性实施例的,对应于图9的源分组或者图10奇偶校验分组的MMT分组的FEC带内信号930、1030的结构。
参照图12a至12d,如图12a至12d所示,FEC带内信号1210、1220、1230、1240的结构假定源有效载荷是MMT分组。FEC带内信号1210、1220、1230、1240的结构可以由MMT分组的有效载荷类型来单独定义。例如,图12a是在MMT分组的有效载荷是源有效载荷的情况下的FEC带内信号1210的结构,并且图12b是在MMT分组的有效载荷是部分的源有效载荷的情况下的FEC带内信号1220的结构。图12c是在MMT分组的有效载荷是第一奇偶校验有效载荷的情况下的FEC带内信号1230的结构,并且图12d是在MMT分组的有效载荷是第二奇偶校验有效载荷的情况下的FEC带内信号1240的结构。
图12a至12d中所示的FEC带内信号的每一个分别具有块ID字段1211、1221、1231、1241、有效负载ID字段1212、1222、1232、1242、和块长度字段1213、1223、1233、1243。块ID字段1211、1221、1231、1241的每一个具有用于识别对应的有效载荷属于的块区域的信息。例如,块ID字段1211、1221、1231、1241可以具有子块ID1214、1225、1234、和/或部分的源块ID1224、1244。也即,在包括源有效载荷的源分组的FEC带内信号1210中,块ID字段1211包括子块的ID1214,并且在包括部分的源有效载荷的源分组的FEC带内信号1220中,块ID字段1221包括部分的源块ID1224和子块ID1225。
在包括第一奇偶校验有效载荷的奇偶校验分组的FEC带内信号1230中,块ID字段1231包括子块ID1234,并且在包括第二奇偶校验有效载荷的奇偶校验分组的FEC带内信号1240中,块ID字段1241包含部分的源块ID1244。子块ID1214、1225、1234的每个包括在子块之间进行区分的识别信息。因此,子块ID1214、1225、1234被设定为与从子块生成的奇偶校验块的ID相同的值,这意味着子块和奇偶校验块被配置在单个FEC块中。对于部分的源块ID1224、1244的情况而言是相同的。也即,子块ID1214、1225、1234和部分的源块ID1224、1244对应于FEC块ID。
有效载荷ID字段1212、1222、1232、1242具有关于FEC块中的每个有效载荷的顺序的信息。例如,有效载荷ID字段1212、1222、1232、1242具有源有效载荷ID1215、1227,和/或部分的源有效载荷ID1226或奇偶校验1有效载荷ID1235或奇偶校验2有效载荷ID1235。也即,在包括源有效载荷的源分组的FEC带内信号1210中,有效载荷ID字段1212包括源有效载荷ID1215;并且在包括部分的源有效载荷的源分组的FEC带内信号1220中,有效载荷ID字段1222包含部分的源有效载荷ID1226和源有效载荷ID1227。
在包括第一奇偶校验有效载荷的奇偶校验分组的FEC带内信号1230中,有效载荷ID字段1232包括奇偶校验1有效载荷ID1235,并且在包括第二奇偶校验有效载荷的奇偶校验分组的FEC带内信号1240中,有效载荷ID字段1242包括奇偶校验2有效载荷ID1245。
源有效载荷标识1215、1227是指示有多少源有效载荷处于子块中的信息,即,处于来自其他源有效载荷中的相应的源有效载荷的位置中,并且部分的源有效载荷ID1226是表示有多少源有效载荷处于部分的源块中的信息。奇偶校验1有效载荷ID1235是指示有多少有效载荷处于第一奇偶校验块中的信息,以及奇偶校验2有效载荷ID1245是指示有多少有效载荷处于第二奇偶校验块中的信息。
块长度字段1213、1223、1233、1243具有关于每个块的长度的信息。在一个例子中,块长度字段1213、1223、1233、1243指示的是:对于被包括在子块中的源有效载荷,有多少源有效载荷构成子块;对部分的源块,有多少部分的源有效载荷构成部分的源块;对于第一奇偶校验块,有多少第一奇偶校验有效载荷构成第一奇偶校验块;以及对于第二奇偶校验块,有多少第二奇偶校验有效载荷构成第二奇偶校验块。即,在包括源有效载荷的源分组的FEC带内信号1210中,块长度字段1213包括子块长度1216,并在包括部分的源有效载荷的源分组的FEC带内信号1220中,块长度字段1223包括部分的源块长度1228和子块长度1229。
在包括第一奇偶校验有效载荷的奇偶校验分组的FEC带内信号1230中,块长度字段1233包括奇偶校验1块长度1236,并在包括第二奇偶校验有效载荷的奇偶校验分组的FEC带内信号1240中,块长度字段1243包括奇偶校验2块长度1246。同时,FEC带内信令方案可以大致区分为基于序列号的方案,以及基于有效载荷ID的方案。
首先,在基于序列号的方案中,序列号被以递增的方式分配到由第一FEC编码保护的、包括部分的源有效载荷的整个源有效载荷中。分配到整个源有效载荷的序列号可被用来作为源有效载荷ID。序列号被以递增方式分配给由第二FEC编码保护的部分的源有效载荷。分配给部分的源有效载荷的序列号可以被用作部份的源有效载荷ID。在这种情况下,块ID可以被设置为分配给每个FEC块中的第一个分组的序列号。块ID被公共地设置为用于FEC块中的所有分组。
接着,在方案基于有效载荷ID的情况下,块ID被设置为用于区分图12a至12d中的FEC块。例如,用于第一FEC块的所有分组的块ID被设置为“0”,并且用于第二FEC块的所有分组的块ID被设置为“1”。也即,块ID基于FEC块的顺序来设置。对于在子块或者部分的子块中的每个源有效载荷,有效载荷ID被给出为0、1、2、...、或K-1(其中K是子块中的源有效载荷的数目),并且对于奇偶校验块中的每个奇偶校验有效载荷,被给出为0、1、2、...、或P-1(其中,P是奇偶校验块的奇偶校验有效载荷的数目),或者被给出为K、K+1、...、K+P-1。
图13a和13b示出了根据本发明示例性实施例的,利用带内信令来实施部分的两级FEC编码方案。
参照图13a和图13b,在源有效载荷是MMT分组的情况下,图13a示出源块的结构,并且图13b示出了用于带内信令的源编码块的结构。如图13a所示,单个源块的示例包括对应于6个视频数据、3个音频数据和3个文件数据的12个分组。12个分组的每个包括MMT报头和MMT有效载荷。此外,假定单个源块被分割成单个的子块。也即,假设源块和子块包括相同的数据段。
利用第一FEC码的第一FEC编码在构成源块,即,12个分组的12个数据段上执行。第一FEC编码生成12个源分组和4个基本奇偶校验分组。12个源分组中每一个具有源有效载荷,即,MMT分组,以及FEC带内信号。源有效载荷包括MMT有效载荷和MMT报头。4个基本奇偶校验分组的每一个具有奇偶校验有效载荷、FEC带内信号以及MMT报头。
利用第二FEC码的第二FEC编码在部分的源块,例如来自12个数据段,即,构成源块的12个分组中的3个文件分组上执行。第二FEC编码生成2个扩展奇偶校验分组。2个扩展奇偶校验分组中的每一个具有奇偶校验有效载荷、FEC带内信号以及MMT报头。12个源分组、4个基本奇偶校验分组、以及2个扩展奇偶校验分组的MMT报头具有指示哪种类型的数据构成相应分组的有效载荷的标志。
例如,具有对应于视频和音频数据的源有效载荷的源分组的MMT报头具有被设置为“0x0000”的标志,并且具有对应于文件数据的源有效载荷的源分组的MMT报头具有被设置为“0x0001”的标志。4个基本奇偶校验分组的MMT报头具有被设置为“0x0002”的标志,并且第2个扩展奇偶校验分组的MMT报头具有被设置为“0x0003”的标志。
构成12个源分组、4个基本奇偶校验分组、以及2个扩展奇偶校验分组的FEC带内信号可以根据在MMT报头中设置的标志值来设置。例如,与在12个源分组、4个基本奇偶校验分组、以及2个扩展奇偶校验分组中的MMT报头中设置的标志值独立地,12个源分组、4个基本奇偶校验分组、以及2个扩展奇偶校验分组的FEC带内信号公共地具有“块ID”、“有效载荷ID和“块长度”。然而,在MMT报头中具有被设置为“0x0001”的标志的源分组,即,在12个源分组中的部分的源分组的FEC带内信号还额外地包括“部分的块ID”、“部分的有效载荷ID”以及“部分的块长度”。即,在部分的源有效载荷的情况下,FEC带内信号包括“部分的块ID”、“部分的有效载荷ID”以及“部分的块长度”。
编码信号信息需要被基于预定的传输方案来提供给解码装置。例如,传输方案可以是基于带外信令的传输方案或基于带内信令的传输方案。
图14示出了根据本发明示例性实施例的,用于发送使用带外信令的编码信号信息的装置的框图。
参照图14,对应于预先存储或生成的一些原始AV内容1401的数据流1被提供给AV编解码编码器1403。数据流1的示例可以是原始的AV流。AV编解码编码器1403利用音频编解码和视频编解码编码器来压缩数据流1,并提供压缩的数据流2到传输协议分组器1405。
传输协议分组器1405配置要基于压缩的数据流2而进行FEC编码的源块3,并且提供源块3到FEC编码器1407。这时,用于FEC编码的编码结构和/或编码配置相关信息可以一起提供。FEC编码器1407基于编码结构和/或编码配置相关信息来在源块上执行第一FEC编码和第二FEC编码。FEC编码器1407向传输协议分组器1405提供由第一FEC编码和第二FEC编码生成的源编码块4。传输协议分组器1405通过添加报头给由FEC编码器1407提供的源编码块4来配置FEC分组7,并且通过网络来发送FEC分组7。传输协议分组器1405还配置将在网络上发送的编码信号信息,即,对应于FEC分组7的FEC控制信息。
传输协议分组器1405可以根据编码信号信息生成编码信号分组5,即,FEC控制分组5,并且为解码装置在网络上传输FEC分组7之前发送编码信号分组5,以在解码接收的FEC分组7中参考编码信号信息5,即,FEC控制信息5。例如,解码装置可以从编码信号信息5(即,FEC控制信息5)中获得FEC结构和/或FEC编码配置相关的信息。
传输协议解分组器1409接收FEC控制分组6,并且基于从接收的FEC控制分组6获取的编码信号信息来准备对随后接收的源编码分组8的解码。接收源编码分组8,传输协议解分组器1409基于预先获取的编码信号信息从源编码分组8中获取源编码块9,并且将源编码块9提供给FEC解码器1411。FEC解码器1411通过基于事先获取的编码信号信息,对从传输协议解分组器1409接收的源编码块9执行解码,来获得每个子块的数据段。如果存在数据段丢失,则丢失的数据段被恢复。
FEC编码器1411向传输协议解分组器1409提供从源编码块9的解码所获取的源块10。传输协议解分组器1409根据从FEC解码器1411提供的源块10来配置压缩的数据流11,并且将压缩的数据流11提供到AV编解码解码器1413。AV编解码解码器1413利用音频编解码和视频编解码解码器来从压缩的数据流11中提取与AV内容相对应的视频和音频数据流12,并且将视频和音频数据流12提供给显示器1415。
图15示出了根据本发明示例性实施例的,用于发送使用带内信令的编码信号信息的装置的框图。
参照图15,在图15的装置中的处理过程类似于图14的上述过程。然而,图15中的处理过程没有包括对应于图14的步骤5和6的操作。由于省略参考标号5和6,所以图14的参考标号7至12对应于图15的参考标号5至10。
对于图15的参考标号5和6,FEC控制信息,即,关于相应的源分组或者奇偶校验分组的编码信号信息在源编码块的源分组或者奇偶校验分组的报头中被转发,如在图15的参考标号5和6中。在图14和15中,假定AV内容来用于说明,但本发明并不局限于此,并且可以使用任何类似的和/或合适类型的内容。例如,对于AV数据和文件数据通过其而一起被传输的混合内容传递服务而言也是如此。在混合内容传递服务的情况下,源块包括对应于文件数据的数据段,以及对应于AV数据的数据段。
根据上述示例性实施例中,对于广播服务,通过对具有不同的QoS要求的不同种类的数据应用选择性的FEC编码,可以对源块进行有效的保护。
虽然已经参考本发明的实施例来具体示出和描述了本发明的示例性实施例,但那些本领域的技术人员应当理解,可以在不脱离由下面的权利要求书所限定的本发明的精神和范围的情况下,对本发明在形式和细节上进行各种变化。此外,所述变化不应被理解为脱离于本发明的精神和范围。
例如,本发明的前述示例性实施例假定源有效载荷具有MMT有效载荷格式的情况。即,在源有效载荷具有MMT有效载荷格式的情况下,描述了用于配置源块的方法。然而,本发明示例性实施例可以同样应用到源有效载荷具有MMT分组格式的情况。在此,MMT分组格式具有MMT有效载荷格式加上MMT报头。在这种情况下,期望的是MMT有效载荷格式被MMT分组格式来代替,并且例如资产ID或I-帧指示符的信息将被存储在MMT报头中。
虽然已经参考本发明的某些示例性实施例示出和描述了本发明,但本领域技术人员应该理解,可以在不脱离由所附权利要求及其等同物所限定的本发明的精神和范围的情况下,对本发明在形式和细节上进行各种变化。
Claims (20)
1.一种在编码装置中,对包括要求不同服务质量QoS的不同类型的数据有效载荷的源块进行编码的方法,所述方法包括:
将源块分割成预定数目M个子块;通过对预定数目M个子块的每一个执行第一前向纠错FEC编码来生成与预定数目M个子块的每一个相对应的预定数目P1个的基本奇偶校验有效载荷;通过对构成源块的数据有效载荷中的特定类型的数据有效载荷来执行第二FEC编码来生成与源块相对应的预定数目P2个的扩展奇偶校验有效载荷;以及基于包括预定数目M个子块和与预定数目M个子块的每一个相对应生成的预定数目P1个的基本奇偶校验有效载荷的预定数目N个的子编码块,以及预定数目P2个的扩展奇偶校验有效载荷来配置源编码块。
2.根据权利要求1所述的方法,其中,所述特定类型的数据有效载荷包括在构成源块的数据有效载荷中满足预定QoS要求的数据有效载荷。
3.根据权利要求2所述的方法,其中,所述特定类型的数据有效载荷包括在构成源块的数据有效载荷中满足最高QoS要求的数据有效载荷。
4.根据权利要求1所述的方法,进一步包括:使用带内信令或者带外信令来发送对应于源编码块的编码信号信息。
5.根据权利要求4所述的方法,其中,使用带内信令的编码信号信息的发送包括在MPEG媒体传输(MMT)报头和带内信号字段中记录编码信号信息,其中,MMT报头是要被组合到构成源块的数据有效载荷、预定数目P1个的基本奇偶校验有效载荷、以及预定数目P2个的扩展奇偶校验有效载荷的报头,并且其中,带内信号字段是要被组合到构成源块的数据有效载荷、预定数目P1个的基本奇偶校验有效载荷、以及预定数目P2个的扩展奇偶校验有效载荷的字段,以用于记录编码信号信息。
6.根据权利要求5所述的方法,其中,记录在带内信号字段中的编码信号信息包括根据带内信号字段被组合到的有效载荷的类型而确定的块识别信息、有效载荷识别信息以及块长度信息。
7.根据权利要求6所述的方法,其中,所述块识别信息包括子块识别信息和部分的源块识别信息中的至少一个,并且其中,所述有效载荷识别信息包括源有效载荷识别信息、部分的源有效载荷识别信息、基本奇偶校验有效载荷识别信息、以及扩展奇偶校验有效载荷识别信息中的至少一个,并且其中,块长度信息包括子块长度信息、部分的源块长度信息、基本奇偶校验块长度信息、以及扩展块长度信息中的至少一个。
8.根据权利要求4所述的方法,其中,使用带外信令的编码信号信息的发送包括在FEC控制分组的有效载荷包括的FEC编码结构字段和FEC配置信息字段中记录编码信号信息。
9.根据权利要求7所述的方法,其中,在所述FEC配置信息字段中记录的编码信号信息包括第一FEC码识别信息、子块长度信息、基本奇偶校验块长度信息、源流识别信息、基本奇偶校验流识别信息、第二FEC码识别信息、源块长度信息或者部分的源块长度信息、扩展奇偶校验块长度信息、源流识别信息或者部分的源流识别信息、以及扩展奇偶校验流识别信息。
10.根据权利要求5所述的方法,其中,所述MMT报头包括用于识别要利用第二FEC码来编码的数据有效载荷的标志信息。
11.一种用于对包括要求不同服务质量QoS的不同类型的数据有效载荷的源块进行编码的编码装置,所述编码装置包括:编码器,其用于通过对由分割源块而生成的预定数目M的子块的每一个执行第一FEC编码来生成与预定数目M的子块的每一个相对应的预定数目P1的基本奇偶校验有效载荷,并且用于通过对构成源块的数据有效载荷中的特定类型的数据有效载荷来执行第二FEC编码来生成与源块相对应的预定数目P2的扩展奇偶校验有效载荷;以及分组器,其基于包括预定数目M的子块和与预定数目N的子块每一个相对应生成的预定数目P1的基本奇偶校验有效载荷的预定数目N的子编码块,以及预定数目P2的扩展奇偶校验有效载荷来配置源编码块。
12.根据权利要求11所述的编码装置,其中,所述特定类型的数据有效载荷包括在构成源块的数据有效载荷中满足预定QoS要求的数据有效载荷。
13.根据权利要求12所述的编码装置,其中,所述特定类型的数据有效载荷包括在构成源块的数据有效载荷中满足最高QoS要求的数据有效载荷。
14.根据权利要求11所述的编码装置,其中,所述分组器使用带内信令或者带外信令来发送对应于源编码块的编码信号信息。
15.根据权利要求14所述的编码装置,其中,在使用带内信令来发送编码信号信息的情况下,所述分组器在MPEG媒体传输(MMT)报头和带内信号字段中记录编码信号信息,其中,MMT报头是要被组合到构成源块的数据有效载荷、预定数目P1个的基本奇偶校验有效载荷、以及预定数目P2个的扩展奇偶校验有效载荷的报头,并且其中,带内信号字段是要被组合到构成源块的数据有效载荷、预定数目P1个的基本奇偶校验有效载荷、以及预定数目P2个的扩展奇偶校验有效载荷的字段,以用于记录编码信号信息。
16.根据权利要求15所述的编码装置,其中,记录在带内信号字段中的编码信号信息包括根据带内信号字段被组合到的有效载荷的类型而确定的块识别信息、有效载荷识别信息、以及块长度信息。
17.根据权利要求16所述的编码装置,其中,所述块识别信息包括子块识别信息和部分的源块识别信息中的至少一个,并且其中,有效载荷识别信息包括源有效载荷识别信息、部分的源有效载荷识别信息、基本奇偶校验有效载荷识别信息、以及扩展奇偶校验有效载荷识别信息中的至少一个,并且其中,所述块长度信息包括子块长度信息、部分的源块长度信息、基本奇偶校验块长度信息、以及扩展块长度信息中的至少一个。
18.根据权利要求14所述的编码装置,其中,使用带外信令的编码信号信息的发送包括在FEC控制分组的有效载荷包括的FEC编码结构字段和FEC配置信息字段中记录编码信号信息。
19.根据权利要求17所述的编码装置,其中,在所述FEC配置信息字段中记录的编码信号信息包括第一FEC码识别信息、子块长度信息、基本奇偶校验块长度信息、源流识别信息、基本奇偶校验流识别信息、第二FEC码识别信息、源块长度信息或者部分的源块长度信息、扩展奇偶校验块长度信息、源流识别信息或者部分的源流识别信息、以及扩展奇偶校验流识别信息。
20.根据权利要求15所述的编码装置,其中,所述MMT报头包括用于识别要利用第二FEC码来编码的数据有效载荷的标志信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810771276.8A CN108600786A (zh) | 2011-11-30 | 2012-11-30 | 用于发送/接收广播数据的装置和方法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20110127366 | 2011-11-30 | ||
KR10-2011-0127366 | 2011-11-30 | ||
PCT/KR2012/010311 WO2013081414A1 (en) | 2011-11-30 | 2012-11-30 | Apparatus and method of transmiting/receiving broadcast data |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810771276.8A Division CN108600786A (zh) | 2011-11-30 | 2012-11-30 | 用于发送/接收广播数据的装置和方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103959799A true CN103959799A (zh) | 2014-07-30 |
Family
ID=48466857
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201280058688.8A Pending CN103959799A (zh) | 2011-11-30 | 2012-11-30 | 用于发送/接收广播数据的装置和方法 |
CN201810771276.8A Pending CN108600786A (zh) | 2011-11-30 | 2012-11-30 | 用于发送/接收广播数据的装置和方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810771276.8A Pending CN108600786A (zh) | 2011-11-30 | 2012-11-30 | 用于发送/接收广播数据的装置和方法 |
Country Status (6)
Country | Link |
---|---|
US (2) | US20130136193A1 (zh) |
EP (2) | EP3288187B1 (zh) |
JP (1) | JP2015500587A (zh) |
KR (1) | KR102048730B1 (zh) |
CN (2) | CN103959799A (zh) |
WO (1) | WO2013081414A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016180305A1 (en) * | 2015-05-08 | 2016-11-17 | Huawei Technologies Co., Ltd. | Apparatus and method for error correction and passive optical network |
Families Citing this family (72)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013023063A1 (en) | 2011-08-09 | 2013-02-14 | Path 36 Llc | Digital media editing |
KR20130094160A (ko) * | 2012-01-20 | 2013-08-23 | 삼성전자주식회사 | 스트리밍 서비스를 제공하는 방법 및 장치 |
EP2811705B1 (en) * | 2012-01-31 | 2019-06-26 | Sharp Kabushiki Kaisha | Generation device and generation method for data packets |
CN109089122B (zh) * | 2013-01-18 | 2022-08-05 | 弗劳恩霍夫应用研究促进协会 | 一种前向纠错数据生成器和前向纠错解码器 |
US9560172B2 (en) * | 2013-05-06 | 2017-01-31 | Alcatel Lucent | Stateless recognition of keep-alive packets |
JP6571314B2 (ja) * | 2013-06-18 | 2019-09-04 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 送信方法 |
US20150032845A1 (en) * | 2013-07-26 | 2015-01-29 | Samsung Electronics Co., Ltd. | Packet transmission protocol supporting downloading and streaming |
WO2015060297A1 (ja) * | 2013-10-22 | 2015-04-30 | 日本電気株式会社 | 送信端末、通信システム、通信方法、および、プログラム |
KR20150050133A (ko) | 2013-10-31 | 2015-05-08 | 삼성전자주식회사 | 통신 시스템에서 패킷 송수신 방법 및 장치 |
TWI523465B (zh) * | 2013-12-24 | 2016-02-21 | 財團法人工業技術研究院 | 檔案傳輸系統和方法 |
US9729903B2 (en) | 2013-12-31 | 2017-08-08 | Samsung Electronics Co., Ltd. | Data transmitting device and method |
WO2015134537A1 (en) | 2014-03-04 | 2015-09-11 | Gopro, Inc. | Generation of video based on spherical content |
KR102249147B1 (ko) | 2014-03-29 | 2021-05-07 | 삼성전자주식회사 | 복합 네트워크에서 멀티미디어 데이터 관련 정보를 송수신하기 위한 장치 및 방법과 그 구조 |
US10560514B2 (en) | 2014-03-29 | 2020-02-11 | Samsung Electronics Co., Ltd. | Apparatus and method for transmitting and receiving information related to multimedia data in a hybrid network and structure thereof |
CN105306165B (zh) | 2014-06-23 | 2019-10-11 | 中兴通讯股份有限公司 | 数据发送方法及装置 |
US9685194B2 (en) | 2014-07-23 | 2017-06-20 | Gopro, Inc. | Voice-based video tagging |
US10074013B2 (en) | 2014-07-23 | 2018-09-11 | Gopro, Inc. | Scene and activity identification in video summary generation |
PT3179729T (pt) * | 2014-08-07 | 2021-09-21 | Sony Group Corp | Dispositivo de transmissão, método de transmissão e dispositivo de receção |
CN105471545B (zh) | 2014-09-10 | 2020-07-21 | 中兴通讯股份有限公司 | 一种数据包处理方法及装置 |
JP2016059012A (ja) * | 2014-09-12 | 2016-04-21 | 富士通株式会社 | 受信装置、送信装置およびデータ転送システム |
US9734870B2 (en) | 2015-01-05 | 2017-08-15 | Gopro, Inc. | Media identifier generation for camera-captured media |
WO2016110275A1 (zh) * | 2015-01-08 | 2016-07-14 | 上海交通大学 | 一种基于媒体内容的fec机制 |
US9679605B2 (en) | 2015-01-29 | 2017-06-13 | Gopro, Inc. | Variable playback speed template for video editing application |
US10186012B2 (en) | 2015-05-20 | 2019-01-22 | Gopro, Inc. | Virtual lens simulation for video and photo cropping |
US9894393B2 (en) * | 2015-08-31 | 2018-02-13 | Gopro, Inc. | Video encoding for reduced streaming latency |
US10204273B2 (en) | 2015-10-20 | 2019-02-12 | Gopro, Inc. | System and method of providing recommendations of moments of interest within video clips post capture |
US9721611B2 (en) | 2015-10-20 | 2017-08-01 | Gopro, Inc. | System and method of generating video from video clips based on moments of interest within the video clips |
US10095696B1 (en) | 2016-01-04 | 2018-10-09 | Gopro, Inc. | Systems and methods for generating recommendations of post-capture users to edit digital media content field |
US10109319B2 (en) | 2016-01-08 | 2018-10-23 | Gopro, Inc. | Digital media editing |
US9812175B2 (en) | 2016-02-04 | 2017-11-07 | Gopro, Inc. | Systems and methods for annotating a video |
EP3411975B1 (en) * | 2016-02-19 | 2022-05-04 | Mediatek Inc. | Method and system of adaptive application layer fec for mpeg media transport |
US9972066B1 (en) | 2016-03-16 | 2018-05-15 | Gopro, Inc. | Systems and methods for providing variable image projection for spherical visual content |
US10750217B2 (en) * | 2016-03-21 | 2020-08-18 | Lg Electronics Inc. | Broadcast signal transmitting/receiving device and method |
US10402938B1 (en) | 2016-03-31 | 2019-09-03 | Gopro, Inc. | Systems and methods for modifying image distortion (curvature) for viewing distance in post capture |
US9794632B1 (en) | 2016-04-07 | 2017-10-17 | Gopro, Inc. | Systems and methods for synchronization based on audio track changes in video editing |
US9838730B1 (en) | 2016-04-07 | 2017-12-05 | Gopro, Inc. | Systems and methods for audio track selection in video editing |
US9838731B1 (en) | 2016-04-07 | 2017-12-05 | Gopro, Inc. | Systems and methods for audio track selection in video editing with audio mixing option |
CN107294652A (zh) * | 2016-04-13 | 2017-10-24 | 中兴通讯股份有限公司 | 一种数据混合重传处理方法和装置 |
JP7038657B2 (ja) * | 2016-06-14 | 2022-03-18 | 株式会社Nttドコモ | 通信システム |
US9998769B1 (en) | 2016-06-15 | 2018-06-12 | Gopro, Inc. | Systems and methods for transcoding media files |
US10250894B1 (en) | 2016-06-15 | 2019-04-02 | Gopro, Inc. | Systems and methods for providing transcoded portions of a video |
US9922682B1 (en) | 2016-06-15 | 2018-03-20 | Gopro, Inc. | Systems and methods for organizing video files |
US10045120B2 (en) | 2016-06-20 | 2018-08-07 | Gopro, Inc. | Associating audio with three-dimensional objects in videos |
US10185891B1 (en) | 2016-07-08 | 2019-01-22 | Gopro, Inc. | Systems and methods for compact convolutional neural networks |
US10469909B1 (en) | 2016-07-14 | 2019-11-05 | Gopro, Inc. | Systems and methods for providing access to still images derived from a video |
US10395119B1 (en) | 2016-08-10 | 2019-08-27 | Gopro, Inc. | Systems and methods for determining activities performed during video capture |
US9836853B1 (en) | 2016-09-06 | 2017-12-05 | Gopro, Inc. | Three-dimensional convolutional neural networks for video highlight detection |
US10268898B1 (en) | 2016-09-21 | 2019-04-23 | Gopro, Inc. | Systems and methods for determining a sample frame order for analyzing a video via segments |
US10282632B1 (en) | 2016-09-21 | 2019-05-07 | Gopro, Inc. | Systems and methods for determining a sample frame order for analyzing a video |
US10002641B1 (en) | 2016-10-17 | 2018-06-19 | Gopro, Inc. | Systems and methods for determining highlight segment sets |
US10284809B1 (en) | 2016-11-07 | 2019-05-07 | Gopro, Inc. | Systems and methods for intelligently synchronizing events in visual content with musical features in audio content |
US10262639B1 (en) | 2016-11-08 | 2019-04-16 | Gopro, Inc. | Systems and methods for detecting musical features in audio content |
US10534966B1 (en) | 2017-02-02 | 2020-01-14 | Gopro, Inc. | Systems and methods for identifying activities and/or events represented in a video |
US10339443B1 (en) | 2017-02-24 | 2019-07-02 | Gopro, Inc. | Systems and methods for processing convolutional neural network operations using textures |
US10127943B1 (en) | 2017-03-02 | 2018-11-13 | Gopro, Inc. | Systems and methods for modifying videos based on music |
US10185895B1 (en) | 2017-03-23 | 2019-01-22 | Gopro, Inc. | Systems and methods for classifying activities captured within images |
US10083718B1 (en) | 2017-03-24 | 2018-09-25 | Gopro, Inc. | Systems and methods for editing videos based on motion |
US10187690B1 (en) | 2017-04-24 | 2019-01-22 | Gopro, Inc. | Systems and methods to detect and correlate user responses to media content |
US10395122B1 (en) | 2017-05-12 | 2019-08-27 | Gopro, Inc. | Systems and methods for identifying moments in videos |
CN112491500B (zh) * | 2017-07-07 | 2022-07-29 | 华为技术有限公司 | 传输数据的方法、装置、发送设备和接收设备 |
US10614114B1 (en) | 2017-07-10 | 2020-04-07 | Gopro, Inc. | Systems and methods for creating compilations based on hierarchical clustering |
US10402698B1 (en) | 2017-07-10 | 2019-09-03 | Gopro, Inc. | Systems and methods for identifying interesting moments within videos |
US10402656B1 (en) | 2017-07-13 | 2019-09-03 | Gopro, Inc. | Systems and methods for accelerating video analysis |
FR3070566B1 (fr) * | 2017-08-30 | 2020-09-04 | Sagemcom Broadband Sas | Procede de recuperation d'un fichier cible d'un logiciel d'exploitation et dispositif d'utilisation |
WO2019074341A1 (ko) * | 2017-10-13 | 2019-04-18 | 삼성전자 주식회사 | 멀티미디어 서비스 시스템에서 방송 서비스를 송수신하는 방법 및 장치 |
KR102464803B1 (ko) * | 2017-10-13 | 2022-11-09 | 삼성전자주식회사 | 응용 계층 순방향 오류 정정 방식을 사용하는 멀티미디어 서비스 제공 방법 및 장치 |
US11606528B2 (en) * | 2018-01-03 | 2023-03-14 | Saturn Licensing Llc | Advanced television systems committee (ATSC) 3.0 latency-free display of content attribute |
US10966001B2 (en) | 2018-04-05 | 2021-03-30 | Tvu Networks Corporation | Remote cloud-based video production system in an environment where there is network delay |
US11463747B2 (en) * | 2018-04-05 | 2022-10-04 | Tvu Networks Corporation | Systems and methods for real time control of a remote video production with multiple streams |
GB2598701B (en) * | 2020-05-25 | 2023-01-25 | V Nova Int Ltd | Wireless data communication system and method |
CN113709510A (zh) * | 2021-08-06 | 2021-11-26 | 联想(北京)有限公司 | 高速率数据实时传输方法及装置、设备、存储介质 |
WO2024056199A1 (en) * | 2022-09-14 | 2024-03-21 | Lenovo (Singapore) Pte. Ltd | Signaling pdu sets with application layer forward error correction in a wireless communication network |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5844918A (en) * | 1995-11-28 | 1998-12-01 | Sanyo Electric Co., Ltd. | Digital transmission/receiving method, digital communications method, and data receiving apparatus |
CN1918558A (zh) * | 2003-11-24 | 2007-02-21 | 因特隆公司 | 一种多个站在共享介质上进行通信的网络中的操作方法 |
CN101843074A (zh) * | 2007-11-01 | 2010-09-22 | 爱立信电话股份有限公司 | 无线分组网络中进行有效多媒体传递的方法和设备 |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3597647B2 (ja) * | 1995-09-29 | 2004-12-08 | 株式会社東芝 | 符号化方法及び装置 |
EP2239876A3 (en) * | 1997-06-19 | 2011-01-26 | Kabushiki Kaisha Toshiba | Information data multiplexing transmission system, multiplexer and demultiplexer used therefor, and error correcting encoder and decoder |
CA2395215C (en) * | 2000-10-21 | 2008-10-07 | Min-Koo Kim | Data transmitting/receiving method in harq data communication system |
US20020146074A1 (en) * | 2001-02-20 | 2002-10-10 | Cute Ltd. | Unequal error protection of variable-length data packets based on recursive systematic convolutional coding |
CA2380039C (en) * | 2001-04-03 | 2008-12-23 | Samsung Electronics Co., Ltd. | Method of transmitting control data in cdma mobile communication system |
US7177658B2 (en) * | 2002-05-06 | 2007-02-13 | Qualcomm, Incorporated | Multi-media broadcast and multicast service (MBMS) in a wireless communications system |
US6901063B2 (en) * | 2002-05-13 | 2005-05-31 | Qualcomm, Incorporated | Data delivery in conjunction with a hybrid automatic retransmission mechanism in CDMA communication systems |
US7310301B1 (en) * | 2003-04-18 | 2007-12-18 | General Dynamics C4 Systems, Inc. | Multi-carrier modulation with source information allocated over variable quality communication channel |
US7676735B2 (en) * | 2005-06-10 | 2010-03-09 | Digital Fountain Inc. | Forward error-correcting (FEC) coding and streaming |
US8908577B2 (en) * | 2005-12-02 | 2014-12-09 | Qualcomm Incorporated | Solving IP buffering delays in mobile multimedia applications with translayer optimization |
US8340006B2 (en) * | 2006-04-12 | 2012-12-25 | Panasonic Corporation | Transmission of multicast/broadcast services in a wireless communication network |
WO2008013528A1 (en) * | 2006-07-25 | 2008-01-31 | Thomson Licensing | Recovery from burst packet loss in internet protocol based wireless networks using staggercasting and cross-packet forward error correction |
US8990663B2 (en) * | 2006-12-21 | 2015-03-24 | Thomson Licensing | Method to support forward error correction for real-time audio and video data over internet protocol networks |
US8199796B2 (en) * | 2006-12-22 | 2012-06-12 | Newport Media, Inc. | Physical layer aware video encoding for mobile TV applications |
JP5507813B2 (ja) * | 2007-02-16 | 2014-05-28 | パナソニック株式会社 | 送信装置及び受信装置 |
KR20090012180A (ko) * | 2007-07-28 | 2009-02-02 | 엘지전자 주식회사 | 디지털 방송 시스템 및 데이터 처리 방법 |
US8386630B1 (en) * | 2007-09-09 | 2013-02-26 | Arris Solutions, Inc. | Video-aware P2P streaming and download with support for real-time content alteration |
KR101001024B1 (ko) * | 2007-12-18 | 2010-12-14 | 한국전자통신연구원 | 비디오 멀티캐스팅 서비스에서 정보 보안 유지 방법 및장치 |
KR101367886B1 (ko) * | 2008-05-07 | 2014-02-26 | 디지털 파운튼, 인크. | 브로드캐스트 채널 상에서의 고속 채널 재핑 및 고품질 스트리밍 보호 |
EP2324635A1 (en) * | 2008-08-12 | 2011-05-25 | Telefonaktiebolaget L M Ericsson (PUBL) | Subdivision of media streams for channel switching |
EP2348657B1 (en) * | 2008-12-18 | 2013-09-11 | Nippon Telegraph And Telephone Corporation | Communications system, transmission device and method of communication |
US8681841B2 (en) * | 2009-11-09 | 2014-03-25 | Adeptence, Llc | Method and apparatus for a single-carrier wireless communication system |
US8839078B2 (en) * | 2010-03-05 | 2014-09-16 | Samsung Electronics Co., Ltd. | Application layer FEC framework for WiGig |
TW201223170A (en) * | 2010-11-18 | 2012-06-01 | Ind Tech Res Inst | Layer-aware Forward Error Correction encoding and decoding method, encoding apparatus, decoding apparatus and system thereof |
JP5908107B2 (ja) * | 2011-11-21 | 2016-04-26 | フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ | 層認識のある前方誤り訂正のためのインターリーブ |
-
2012
- 2012-11-30 WO PCT/KR2012/010311 patent/WO2013081414A1/en active Application Filing
- 2012-11-30 CN CN201280058688.8A patent/CN103959799A/zh active Pending
- 2012-11-30 US US13/690,808 patent/US20130136193A1/en not_active Abandoned
- 2012-11-30 JP JP2014544672A patent/JP2015500587A/ja active Pending
- 2012-11-30 CN CN201810771276.8A patent/CN108600786A/zh active Pending
- 2012-11-30 KR KR1020147018166A patent/KR102048730B1/ko active IP Right Grant
- 2012-11-30 EP EP17189357.1A patent/EP3288187B1/en active Active
- 2012-11-30 EP EP12853877.4A patent/EP2786578A4/en not_active Withdrawn
-
2015
- 2015-12-18 US US14/974,888 patent/US20160105259A1/en not_active Abandoned
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5844918A (en) * | 1995-11-28 | 1998-12-01 | Sanyo Electric Co., Ltd. | Digital transmission/receiving method, digital communications method, and data receiving apparatus |
CN1918558A (zh) * | 2003-11-24 | 2007-02-21 | 因特隆公司 | 一种多个站在共享介质上进行通信的网络中的操作方法 |
CN101843074A (zh) * | 2007-11-01 | 2010-09-22 | 爱立信电话股份有限公司 | 无线分组网络中进行有效多媒体传递的方法和设备 |
Non-Patent Citations (1)
Title |
---|
SHENGJIE ZHAO ET AL: "Optimal Resource Allocation for Wireless Video over CDMA Networks", 《IEEE TRANSACTIONS ON MOBILE COMPUTING》 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016180305A1 (en) * | 2015-05-08 | 2016-11-17 | Huawei Technologies Co., Ltd. | Apparatus and method for error correction and passive optical network |
Also Published As
Publication number | Publication date |
---|---|
JP2015500587A (ja) | 2015-01-05 |
WO2013081414A1 (en) | 2013-06-06 |
EP3288187B1 (en) | 2023-01-04 |
US20130136193A1 (en) | 2013-05-30 |
EP2786578A4 (en) | 2015-11-04 |
EP3288187A1 (en) | 2018-02-28 |
US20160105259A1 (en) | 2016-04-14 |
EP2786578A1 (en) | 2014-10-08 |
CN108600786A (zh) | 2018-09-28 |
KR102048730B1 (ko) | 2020-01-08 |
KR20140098231A (ko) | 2014-08-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103959799A (zh) | 用于发送/接收广播数据的装置和方法 | |
US11757962B2 (en) | Multimedia streams which use control information to associate audiovisual streams | |
JP6689511B2 (ja) | 順方向エラー訂正スキームを使用するパケット送受信装置及び方法 | |
CN102123297B (zh) | 用于数字多媒体广播的系统和方法 | |
CN105723718A (zh) | 发送广播信号的设备、接收广播信号的设备、发送广播信号的方法和接收广播信号的方法 | |
US11277647B2 (en) | Forward error correction using source blocks with symbols from at least two datastreams with synchronized start symbol identifiers among the datastreams | |
CN105745899B (zh) | 发送广播信号的设备、接收广播信号的设备、发送广播信号的方法和接收广播信号的方法 | |
CN1497884A (zh) | 单载波传输系统及其方法 | |
CN105393480A (zh) | 用于在多媒体通信系统中发送/接收分组的装置和方法 | |
CN101707706A (zh) | 发送和接收流的数字发送和接收装置及其处理方法 | |
US20150006991A1 (en) | Graceful degradation-forward error correction method and apparatus for performing same | |
CN109245863B (zh) | 用于传输和接收前向纠错分组的装置和方法 | |
CN104137455A (zh) | 提供流传输服务的方法和装置 | |
CN101330398B (zh) | 一种业务数据流的发送方法 | |
KR100811186B1 (ko) | 듀얼 전송 스트림 생성 장치 및 방법 | |
CN102664891A (zh) | 联合数据可区分编码和分组前向纠错编码的多媒体数据流传输方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20140730 |