CN101185336A - 用于使用切片内再同步点的错误恢复的方法及设备 - Google Patents

用于使用切片内再同步点的错误恢复的方法及设备 Download PDF

Info

Publication number
CN101185336A
CN101185336A CNA2006800144726A CN200680014472A CN101185336A CN 101185336 A CN101185336 A CN 101185336A CN A2006800144726 A CNA2006800144726 A CN A2006800144726A CN 200680014472 A CN200680014472 A CN 200680014472A CN 101185336 A CN101185336 A CN 101185336A
Authority
CN
China
Prior art keywords
information
synchronous points
bit stream
decoded
section
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2006800144726A
Other languages
English (en)
Inventor
苏密特·辛格·塞蒂
塞伊富拉·哈立德·奥古兹
维贾雅拉克希米·R·拉韦恩德拉恩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN101185336A publication Critical patent/CN101185336A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
    • H04N19/68—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience involving the insertion of resynchronisation markers into the bitstream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/19—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding using optimisation based on Lagrange multipliers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]

Abstract

本发明涉及一种视频编码的方法，其包括对再同步点信息进行编码，其中所述再同步点信息包含用于识别再同步点在视频位流的区段内的位置的信息及用于对跟在所述再同步点后的位流进行解码的信息。此外，本发明还涉及一种用于对数字视频进行解码的方法，其包括：接收包含再同步点信息的经编码位流，其中所述再同步点信息包含用于识别再同步点的位置的信息及用于对跟在所述再同步点后的位流进行解码的信息；对所述接收的位流进行解码；及根据所述再同步点信息定位所述位流中的所述再同步点。

Description

用于使用切片内再同步点的错误恢复的方法及设备
根据35 U.S.C.§119主张优先权
本专利申请案主张优先于2005年3月10日提出申请且名称为“ContentClassification for Video Processing”的第60/660,879号临时申请案及名称为“Method andApparatus for Error Recovery Using Intra-Slice Resynchronization Points”的第60/713,207号临时申请案，所述两个临时申请案均受让于本发明的受让人并以引用的方式明确地并入本文中。
技术领域
本发明涉及用于使用错误管理方案来对数字数据进行编码及解码的方法和设备。
背景技术
在移动通信系统中，对更高数据速率及更高服务质量的需求日益迅速增长。然而，例如有限的发射功率、有限的带宽及多路径衰落等因素仍在继续限制实际系统所处理的数据速率。在多媒体通信中，特别是在易出错环境中，所传输媒体的错误恢复力在提供期望的服务质量方面至关重要，这是因为甚至是单个经解码值中的错误也可能导致解码假象在空间及时间上传播。人们已使用了各种编码措施以在维持必要的数据速率的同时使错误最小化，然而，所有这些技术均存在错误会到达解码器侧的问题。
混合编码标准，例如MPEG-1、MPEG-2、MPEG-4(统称为MPEG-x)、H.261、H.262、H.263及H.264(统称为H.26x)描述了数据处理及操纵技术(在本文中称作混合编码)，所述数据处理及操纵技术非常适用于使用固定或可变长度源编码技术来压缩及递送视频、音频及其它信息。特定而言，以上所提及的标准及其它混合编码标准和技术说明性地使用帧内熵编码技术(例如，运行长度编码、哈夫曼(Huffman)编码及类似技术)及帧间编码技术(例如，正向及反向预测性编码、运动补偿及类似技术)来压缩视频信息。具体而言，在视频处理系统情况下，混合视频编码系统的特征是使用帧内及/或帧间运动补偿编码对视频帧进行基于预测的压缩编码。
熵编码能够对由随机信息源所产生的符号实施非常有效的无损表示。因此，其是无损数据压缩方案与有损数据压缩方案二者中必不可少的组元。熵编码尽管对压缩效率非常有益，然而其也会使解码过程复杂化。所有不同熵编码方法的共同特征是使单个或一系列源符号与二进制图案(即，称作码字的一系列1及0)相关联并由所述二进制图案表示，而所述码字的长度会随符号似然性的降低而增大。因而，更似然的符号会指配到更紧凑的表示形式，从而平均而言，能够相对于基于固定长度表示法的直接符号字母大小实现明显的节约。
关于位流(即，信息源的输出的熵编码表示形式)中下一符号将耗用多少个位的多义性对于解码器而言颇为复杂。然而，更为重要的是，倘若位流中存在错误，则将可变大小的码字与已翻转位(因为出现错误)结合使用可能常常会导致仿效不正确码字长度且因而，剖析/解码过程可能会丧失其与位流的同步，即，可能会开始不能对码字边界进行正确识别且因而不能对位流进行正确解译。
假定执行基本程度错误检测措施的解码器在解码位流中遇到问题并丧失同步。最终，或者由于违背语法(即，码字无效)，或者由于语义不对(例如，参数值无效或出现不期望的位流对象)，所述解码器可能开始意识到所述问题并采取必要措施来使其自身与所述位流重新同步化。这可能会导致数据丢失的程度远远超过开始就触发数据丢失的讹误。由于在数字压缩中所使用的空间预测，数据丢失可能会在整个帧中在空间上蔓延。如果所丢失数据是用于运动补偿预测区域的参考帧的一部分，则数据丢失还会加剧，从而导致错误在时间上的传播。
MPEG-x及H.26x混合编码标准通常提供在NALU(网络抽象层单元)边界处再同步点(RSP)，最常见的NALU是切片。切片可是一群组呈光栅扫描次序的连续宏块，其中宏块由16×16个像素构成。像素是由亮度值(Y)及两个色度值(Cr及Cb)来界定。在H.264中，以4:2:0格式来存储Y、Cr及Cb分量，其中Cr及Cb分量是沿X及Y方向按2倍缩减取样。因而，每一宏块也将由256个Y分量、64个Cr分量及64个Cb分量组成。H.264通过引入切片群组及挠性宏块排序(FMO)来对切片概念进行了归纳。切片群组及FMO使切片与宏块的关联性能够完全随意，从而提供远远超过传统连续宏块结构的灵活性。切片是始于称作前缀码的RSP。RSP前缀码是字节定位的保留位串码字，所述码字为三个字节长的数量级。为用作真实的再同步点，所有编码间预测链避免提及所述RSP之前的数据。因前缀码字节所引起的开销以及因预测性编码链中断或劣化所引起的编码效率损失是频繁使用切片(即，使用短切片)的缺点所在，所述缺点抹煞了其在支持错误恢复力方面的优点。根据所述关切因素，作为缺省编码器行为，将整个帧编码成单个切片并不罕见。另一种流行的更短切片结构是使每一宏块行构成切片。短于宏块行的切片则很少使用且当使用时，理由大多是使切片大小(以位数量为单位)与所需运送的分组大小相匹配。
在传统的基于切片的再同步方案中，如果在解码器处检测到数据中存在错误，例如语义或语法错误(例如)，则使得在错误之后出现的整个切片无用。这不是期望状态，对于例如整个帧的更长切片尤其如此。需要一种可抢救包含于讹误切片中的某些视频数据的片内再同步点(IS-RSP)。另外，需要以智能方式对IS-RSP加以定位以使错误恢复力最大化、同时减小开销。
发明内容
一种用于视频编码的方法及设备包括用于如下的方法及装置：对再同步点信息进行编码，其中所述再同步点信息包括用于识别再同步点在视频位流的区段内的位置的信息、及用于对跟在所述再同步点后的位流进行解码的信息；及传输所述经编码的再同步点信息。
在另一方面，一种用于视频编码的设备包括：编码器，其用于对再同步点信息进行编码，其中所述再同步点信息包括用于识别再同步点在视频位流的区段内的位置的信息、及用于对跟在所述再同步点后的位流进行解码的信息；及通信器，其经配置以传输所述经编码的再同步点信息。
在以上方面，所述用于视频编码的方法及设备可进一步包括用于如下的方法或装置：计算多个候选位置的速率失真成本；及根据所述计算的速率失真成本来选择所述候选位置中的至少一者作为所述再同步点的位置。所述用于视频编码的方法及设备可进一步包括用于如下的方法或装置：选择所述再同步点在所述视频位流的区段内的位置，其中所述区段是由子宏块、宏块、切片、帧、及帧序列组成的群组的成员。所述用于视频编码的方法及设备可进一步包括用于如下的方法或装置：选择所述再同步点在所述视频位流的区段内的位置，其中所述再同步点是宏块的开始。
所述用于对所述位流进行解码的信息可包括与邻近视频区段相关的信息。所述用于对所述位流进行解码的信息可包括由量化参数、空间预测模式标识符及若干非零系数组成的群组的成员。所述用于对所述位流进行解码的信息可包括与其中所述位流跟在所述再同步点后的上下文相关的信息。
所述用于视频编码的方法及设备可进一步包括用于如下的方法或装置：将所述再同步点信息编码于数据消息中，其中所述数据消息是带内应用消息、用户专用私有数据消息、辅助增强信息消息、及MPEG用户数据消息中的一者。所述用于对所述位流进行解码的信息可包括与其中所述位流跟在所述再同步点后的上下文相关的信息。
在另一方面，一种用于解码的方法及设备包括用于如下的方法或装置：接收包括再同步点信息的经编码位流，其中所述再同步点信息包括用于识别再同步点的位置的信息及用于对跟在所述再同步点后的位流进行解码的信息；及对所述接收的位流进行解码。
在又一方面，一种用于对视频进行解码的设备包括：接收机，其用于接收包括再同步点信息的经编码位流，其中所述再同步点信息包括用于识别再同步点的位置的信息及用于对跟在所述再同步点后的位流进行解码的信息；及解码器，其用于对所述接收的位流进行解码。
在上文中，所述用于解码的方法及设备可进一步包括用于如下的方法或装置：根据所述再同步点信息定位所述位流中的再同步点。所述用于对所述位流进行解码的信息可包括与其中对跟在所述再同步点后的位流进行编码的上下文相关的信息。所述用于解码的方法及设备可进一步包括用于如下的方法或装置：将所述经解码位流的当前上下文与包含于所述再同步点信息中的所接收上下文信息相比较；及如果所述比较显示所述当前上下文与所述接收的上下文信息不相同，则停止对所述位流进行解码并在所述再同步点处重新开始对所述位流进行解码。所述再同步点的位置可处于视频区段内，所述视频区段选自由子宏块、宏块、切片、帧、及帧序列组成的群组中的成员。所述再同步点的位置可是宏块的开始。
所述用于对所述位流进行解码的信息可包括与邻近视频区段相关的信息。所述用于对所述位流进行解码的信息可包括由量化参数、空间预测模式标识符及若干非零系数组成的群组的成员。
所述用于解码的方法及设备可进一步包括用于如下的方法或装置：接收数据消息中的再同步点信息，其中所述数据消息是由带内应用消息、用户专用私有数据消息、辅助增强信息消息、及MPEG用户数据消息组成的群组中的成员。所述用于解码的方法及设备可进一步包括用于如下的方法或装置：接收使用可变长度代码所编码的再同步点信息。所述用于解码的方法及设备可进一步包括用于如下的方法或装置：检测所述位流中的错误；停止对所述位流的解码；及在所述经定位的再同步点处继续进行解码。
在又一方面，一种用于对多媒体数据进行编码的方法及设备包括用于如下的方法或装置：对再同步点数据进行编码；及将所述再同步点数据插入多媒体流切片中。所述用于编码的方法及设备可进一步包括用于如下的方法或装置：选择所述切片内的再同步点的位置；且其中所述插入包括将所述再同步点插入所述选定的位置中。所述用于选择的方法及装置可包括：计算多个候选位置的速率失真成本；及根据所述速率失真成本来选择至少一个候选位置。所述再同步点可包括所述多媒体数据的上下文信息。
在又一方面，一种用于处理多媒体流的方法及设备包括用于如下的方法或装置：接收多媒体流切片中的再同步点数据；及根据所述再同步点数据来重组多媒体数据。所述再同步点可包括所述多媒体数据的上下文信息。
在以上方面，可使用经配置以执行所述方法或执行所述设备的功能的计算机可读媒体及/或处理器来构建所述方法及/或设备。
附图说明
图1是用于递送流式视频的通信系统的实例的图解；
图2描绘16×16像素宏块及邻近的16×16像素宏块的实例；
图3图解说明用于对IS-RSP进行编码的过程的实例；
图4描绘其中通过利用IS-RSP来遏制错误传播的视频帧；
图5是用于识别最佳候选IS-RSP位置的IS-RSP编码方案的实例；
图6描绘供在用于识别最佳候选IS-RSP位置的速率失真分析中使用的错误机率及关联失真的实例；
图7是利用IS-RSP的解码器过程的实例的图解；及
图8是利用IS-RSP的解码器过程的另一实例的图解。
图9-10图解说明用于对IS-RSP进行编码的实例性方法及设备。
图11-12图解说明用于解码的实例性方法及设备。
图13-14图解说明用于对IS-RSP进行编码的实例性方法及设备。
图15-16图解说明用于处理多媒体流的实例性方法及设备。
具体实施方式
本发明描述用于在视频位流(例如，切片)的区段内提供改进的再同步点的方法及设备。编码器可提供再同步点信息，所述再同步点信息包含用于定位所述再同步点的信息、以及用于跟在对所述再同步点后的位流进行解码的信息。由于所述再同步点位于所述视频位流的区段内，因而解码器可在所述再同步点处再同步化而不会牺牲所述区段中的其余数据。其实例适用于包括视频、音频、或视频及音频数据二者的多媒体数据。在下文说明中，为提供对所述实施例的透彻理解而给出特定细节。然而，所属领域的技术人员应了解，所述实施例可在不具备所述特定细节的情况下实施。例如，电组件可按方块图形式加以显示，以免以不必要的细节形式使所述实施例不分明。在其它例示中，可详细显示此类组件、其它结构及技术以进一步解释所述实施例。
也应注意，可将所述实施例描述为过程，所述过程被描绘为流程图、工艺流程图、结构图或方块图。尽管流程图可将各作业描述为顺序性过程，然而还可平行或同时实施所述作业中的许多作业并可重复所述过程。另外，可重新排列各作业的次序。当其作业完成时，所述过程即告结束。一个过程可对应于一种方法、功能、程序、子例程、子程序等。当一个过程对应于一种功能时，其结束对应于所述功能返回到调用功能或主功能。
图1是用于递送流式视频的通信系统的实例的图解。系统100包含编码器装置105及解码器装置110。编码器装置105进一步包含变换器/量化器组件115、熵编码器组件120、IS-RSP定位器组件125、存储器组件130、处理器组件135、及通信组件140。处理器135提供计算平台以实施其它组件的过程。变换器/量化器组件115将视频数据从空间域变换到另一个域，例如在DCT(离散余弦变换)情形中为频域。将对其进行变换的数据可是经帧内编码的数据(其中对实际视频数据实施变换)或者其可是经帧间编码的数据(其中对运动向量及残余错误实施变换)。其它数字变换包括哈达马德(Hadamard)变换、DWT(离散小波变换)、及整数变换(例如，在H.264中所用的变换)。
变换器/量化器组件115分配用于表示每一经变换系数的位数量。对经变换系数的量化可因每一宏块而异。熵编码器组件120使用上下文自适应性可变长度编码(CAVLC)方案对残余块数据进行编码而其它经可变长度编码的单元可使用Exp-Golomb代码来进行编码。残余块数据是预测与正被编码的原始块像素信息之间的差。在切片层以上，将语法要素编码成固定长度或可变长度的二进制码。在切片层及以下，则使用可变长度代码(VLC)对各要素进行编码。H.264标准还支持基于上下文的自适应性二进制算术编码(CABAC)作为熵编码方案。本文所论述的实例性方法涉及CAVLC熵编码方案，但类似方法也可与CABAC熵编码一起使用。IS-RSP定位器组件125实施用于在切片内识别一组可用作IS-RSP的宏块边界的计算。在一种方案中，在寻找IS-RSP的最佳位置时实施速率失真成本优化分析。存储器组件130用于存储例如要编码的原始视频数据、要传输的经编码视频数据、或正由各种编码器组件处理的中间数据等信息。
通信组件140(例如接收机)含有用于从外部源145接收要编码数据的电路及/或逻辑。外部源145可是例如外部存储器、因特网、实况视频及/或音频馈入，且接收数据可包含有线及/或无线通信。通信组件140也含有用于通过网络150来发射(TX)经编码数据的电路及/或逻辑，例如发射机。网络150可是例如电话、电缆及光纤等有线系统或者无线系统的一部分。在无线通信系统的情况下，网络150可包括(例如)码分多址(CDMA或CDMA2000)通信系统的一部分，或另一选择为，所述系统可是：频分多址(FDMA)系统；时分多址(TDMA)系统，例如用于服务行业的GSM/GPRS(通用分组无线电服务)/EDGE(加强型数据GSM环境)或TETRA(地面中继无线电)移动电话技术；宽带码分多址(WCDMA)；高数据速率(1xEV-DO或1xEV-DO金牌多播)系统；或一般而言，任一采用各种技术的组合的无线通信系统。可将编码器装置105中的一个或一个以上元件予以省略、重新排列及/或加以组合。例如，处理器组件135可位于编码器装置105外部。
解码器装置110含有与编码器装置105相似的组件，包含反变换器/解量化器组件155、熵解码器组件160、错误恢复组件165、存储器组件170、通信组件175及处理器组件180。解码器装置110接收已通过网络150或从外部存储器185传输的经编码数据。通信组件175含有用于与网络150相结合来接收(Rx)经编码数据的电路及/或逻辑(例如，接收机)、以及用于从外部存储器185接收经编码数据的逻辑。外部存储器185可是(例如)外部RAM或ROM、或者远程服务器。首先由熵解码组件160对经帧内编码的数据进行解码。在熵解码之后，由反变换器/解量化器组件155将所述数据解量化及反变换，从而得到可显示于显示器组件190上的已解码图片。
在对从其预测经帧间编码的数据的参考帧进行解码后，可对所述经帧间编码的数据进行解码。熵解码器组件160对所述数据进行解码，从而得到经量化/变换的残余错误系数。反变换器/解量化器组件155对所述残余错误系数进行解量化及反变换，从而得到经解码的残余错误。然后，将所述残余错误与来自所述参考帧的最佳匹配宏块相组合，所述最佳匹配宏块是使用所接收的运动向量信息来识别。经解码的帧可通过显示器组件190加以显示，并存储于外部存储器185中或存储于处理器组件180的内部存储器中。显示器组件190可是含有例如视频显示硬件及逻辑(包括显示屏幕)等部件的解码装置的整体部分，或者其可是外部外围装置。通信组件175也含有用于将经解码帧传送到外部存储组件185或显示器组件190的逻辑。
熵解码器组件160也含有用于实施各种语法及语义检查的逻辑。语法及语义检查用于识别违背任何数条规则的的讹误码字。如果确定位流出现讹误，则错误恢复组件165定位所述位流中下一最接近的非讹误IS-RSP的位置，以允许继续进行解码。由IS-RSP定位器组件125及错误恢复组件165所实施的过程的细节将在下文中予以论述。可将编码器装置110中的一个或一个以上元件予以省略、重新排列及/或加以组合。例如，处理器组件180可位于编码器装置105外部。
在H.264中引入上下文自适应性可变长度编码(CAVLC)会使再同步问题复杂化。在H.264中，在上下文中对许多个符号进行编码，且每一符号的机率随其在被编码时所处的上下文(也就是说，在符号之前已处理过什么)而异。由于存在此种上下文相依性，因此不仅丢失符号将存在丧失同步的风险，且丢失其它用于确定所述符号在被编码时所处上下文的数据也将存在丧失同步的风险。因此，为在CAVLC位流中提供再同步点(IS-RSP)，解码器不仅需要位流中查看的位置，且其也可能需要后续符号所依赖的上下文信息。
现在将论述显示在IS-RSP中需要什么信息以启用H.264上下文自适应性位流中的再同步的实例。图2描绘16×16像素宏块及邻近16×16宏块的实例。宏块200含有16个4×4像素块201至216。在这个实例中，假定宏块200是经帧内编码的宏块。经帧内编码的宏块与经帧间编码的宏块的上下文相依性有所不同。用于经帧内编码的宏块200的上下文自适应性编码相依于邻近宏块220及230的参数。对宏块200的编码及解码相依于邻近的四个4×4像素块221到224中及邻近的四个4×4像素块231到234中非零系数(Y、Cr及Cb系数)的数量。对宏块200的编码及解码还相依于用于对宏块220进行编码的量化参数值且在某些情况下相依于块221到224及块231到234的帧内预测模式。如果在对块200的CAVLC经编码符号进行解码时，宏块220或230的上下文参数丢失，则解码器将无法继续进一步解码并需要进行再同步。在H.264中，因使用NALU前缀码进行再同步，含有宏块200的切片的其余部分可能会丢失。然而，如果宏块200是再同步点，则无论宏块220及230的状态如何，解码也可继续进行，这是因为IS-RSP含有关于邻近块的必要上下文参数，如下文所述。
可通过对包括用于在视频位流的区段内识别再同步点位置的信息的再同步点信息进行编码、并对用于对跟在所述再同步点后的位流进行解码的信息进行编码，来形成再同步点。
例如，为使宏块200成为再同步点，可用解码器用于定位IS-RSP标记240且因此定位宏块200的信息对IS-RSP消息进行编码。为提供健壮的再同步点，所述IS-RSP消息可含有使解码器对宏块200进行解码所需的邻近MB信息(即，为对宏块200进行解码所需的相依性信息)、以及与宏块在帧内的位置相关的信息和与宏块在位流内的位置相关的信息。
作为实例，为在例如H.264中使经帧内编码的宏块200用作再同步点，IS-RSP分组可含有以下H.264特定参数：
·MB位偏移量，其给出所述IS-RSP宏块在位流内的开始的位置。
·MB地址偏移量或索引，其标识所述IS-RSP宏块的空间位置。
·位于所述IS-RSP宏块顶部左侧的8个4×4块块的非零系数的数量。
·位于所述IS-RSP宏块顶部左侧的8个4×4块的帧内预测模式。(如果IS-RSP指向以帧内16×16模式编码的宏块，则可省略所述信息)。
·位于所述IS-RSP宏块左侧的MB的量化参数(QP)值。其中最后三项识别如上文所论述的上下文自适应性参数。
将用作再同步点的经帧间编码宏块可具有相同的MB位偏移量及MB地址偏移量信息，但可具有不同的与邻近宏块相关的信息或其它上下文自适应性相依量。经帧间编码的MB的上下文自适应性参数包含以下信息：
·邻近MB的模式(顶部及底部的宏块)。
·邻近4×4块中非零系数的数量。
·邻近4×4块的运动向量及参考图片索引。
在一个实例中，可在“用户数据未登记(user_data_unregistered)”辅助增强信息(SEI)消息中发送IS-RSP数据，借此维持H.264位流的相符性。尽管以上实例是具体针对H.264标准，然而IS-RSP的基本原理也可容易地应用于其它混合视频编码标准，例如，MPEG-x及H.26x。由于所有这些标准的语法也以某种或其它方式为载送带内应用数据/用户专用私有数据(例如，H.264中的SEI消息或MPEG-2中的用户数据(user_data))提供条件，因而确实能够如此。还可使用压缩编码技术对IS-RSP数据进行编码来提高编码效率。例如，如果IS-RSP在帧中在空间上彼此靠近，则可使用空间预测技术对IS-RSP数据进行编码来提高编码效率。
可将切片内再同步点或IS-RSP扩展到视频区段而非切片。切片、或者在MPEG-x标准中将其称为块群组的是H.264或MPEG-x视频序列体系架构中许多个经分隔的区段中的一者。H.264体系架构包含由一个或一个以上图片(或帧)构成的序列，其中图片是由一个或一个以上切片构成且其中切片是由一个或一个以上宏块构成。可将宏块进一步分隔成各种大小的子宏块。再同步点可含有能在任一层经分隔的视频(例如序列内、帧内以及切片内)上启用再同步的信息。例如，如果切片标题信息出现讹误，则能在所述讹误切片处启用再同步的RSP将需要所述切片标题信息且RSP将有效地为帧内RSP。
并不需要对每一宏块发送IS-RSP，这是因为将需要巨大量的开销数据。编码器装置可使用一种算法(例如下文所述的一种算法)来智能地选择将IS-RSP定位于何处。下文所述的算法是一种用于使开销保持最小、同时改进错误恢复力的方法的实例。
可通过编码过程来产生再同步点并将再同步点提供到解码过程来解决信道损伤(根据下文将要说明的折衷而尽可能频繁地进行)。同样，再同步点还可在位流中唯一地加以识别。此外，其结构可提供相当好的抗干扰水准来抵抗因噪音引起的仿效以及因噪音引起达到使其不能可靠检测程度的修改(就统计意义而言)。再同步点可用于通过将所有预测器初始化到能限制将来的空间及/或时间预测涉及IS-RSP之前的宏块的适当缺省值，来阻止预测性编码相依性的传播。
对用于识别切片内再同步点的编码过程的综合且正确的设计可将如下考虑在内：1)信道模型，2)针对特定应用的带宽及质量(失真)约束条件，及3)帧的内容。
视应用而定，可能期望存在内容相依性。在一种可能的应用中，可利用特定切片不存在片内再同步点来向解码器暗示：倘若在所述切片中出现错误及随之出现的数据丢失，则可非常令人满意地实施为解码器与编码器两者所已知的适当(空间或时间)隐匿算法。
下文提供并入有内容自适应性形式的实例性IS-RSP编码方案。所述方案也可用于图解说明将由编码器采用的用于识别再同步点的位置的总体架构及原理。
图3图解说明用于对IS-RSP进行编码的实例性过程的实例。过程300包含用于从多个候选位置中识别出最优或接近最优的IS-RSP位置的迭代循环。这允许以可变方式或自适应性方式选择IS-RSP的位置。这种可变性或自适应性会提供优于其中使连续再同步点相隔固定距离定位(例如，每100个宏块一个再同步点)的方法的优点。可由编码装置(例如，IS-RSP定位组件125)与图1中的处理器135一起实施过程300。在步骤305处，编码器(或选择器)选择IS-RSP的候选位置。选择IS-RSP候选位置的方法的细节将在下文中予以论述。在步骤310处，计算量度，例如，速率失真成本。在步骤310中所用的量度，例如在下文中所论述的速率失真成本，是用于衡量因IS-RSP而增加的位数量与由预期错误所造成的潜在失真之间的折衷。使用对各候选位置的速率失真成本的比较来选择315所述IS-RSP位置。可将所选定位置(根据成本计算310)存储于存储器中。决策块320测试是否还有候选位置要测试，如果还存在更多的候选位置，则重复步骤305、310及315，而如果不再存在更多的候选位置，则通过在步骤325中对IS-RSP信息进行编码来结束过程300。可将过程300中的一个或一个以上要素予以省略、重新排列及/或加以组合。
图4描绘其中通过利用IS-RSP来控制错误传播的视频帧。帧400表示由单个切片及六个行420a-420f构成的经内编码的帧，其中行420a-420f由若干宏块(未显示)构成。例如图3中所示的编码过程已在帧400中定位了多个IS-RSP 405。如在上文中所述及在图2中所描绘，对每一经内编码的宏块的解码也相依于包含于正被解码的宏块左侧及上方邻近宏块中的知识。如果在帧400中不包含IS-RSP 405，则错误410将在经历所述错误后得到解码的整个帧中传播。由于解码器将被迫在下一切片(下一NALU前缀码)处再同步，这将导致丢失第二行420b的大部分及所有行420c-420f。而通过如图所示来定位IS-RSP，则可将错误传播限制在位于IS-RSP 405b左侧及下方的区415。在所述再同步点IS-RSP 405b之后，在行420b中，可对所述行的其余部分进行解码。在行420c中，位于讹误宏块下面的宏块直到下一再同步点处405c处才能被重组，这是因为其相依于上面的邻近宏块。由于行420c中的IS-RSP 405c位于行420b中IS-RSP 405b的左侧，因而行420c中的错误415更早地得到遏制。这是远比由切片再同步NALU所提供失真条件更为有利的失真条件。
图5是用于识别候选IS-RSP位置的IS-RSP编码方法的实例。帧500由若干个行505构成，其中每一行505也构成切片。在这个实例中，编码器将在每一切片中提供两个IS-RSP，每一IS-RSP也位于窄的宏块区域内。第一区域包含三个宏块位置510、515及520，而第二区域包含三个宏块位置525、530及535。通过如图所示将切片定位于居中定位的切片部分中，可减轻错误的传播。
下文所述的速率失真(R-D)优化问题可利用以下命名法、量值及标记法。假定由下式求出的R-D成本函数的一般(复合)形式R+D
R+λD                                              [1]
作为在寻找IS-RSP良好位置时要最小化的量。
R及D分别表示速率(为对IS-RSP进行编码所需的位数量)及与选择特定编码模式相关联的失真(重组错误)，且A是拉格朗日(Lagrange)乘数，其描述速率与在特定R-D优化设定中将经受的失真之间的折衷。因此，所述成本函数估计对再同步点进行编码所引起的额外成本与失真减小所带来的节约之间的折衷。
在混合视频编码器中所实施的一种标准R-D优化是一种在确定宏块编码模式时所用的R-D优化。一般而言，这是具有多个参数的向量量，假定再同步点未施加任何约束条件。针对紧靠位置i(其中i∈{510，515，520}或i∈{525，530，535}右侧的宏块对编码器的标准R-D优化公式求解会分别得到速率RS，i及失真DS，i。因而，假定不存在再同步点插入及不存在数据丢失，则由下式求出总成本：
RS，i+λDS，i                                      [2]
对于不可靠信道而言，公式2(假定无数据丢失)不恰当，须加以修改。任何恰当的公式也须考虑随机信道行为，且因而，总成本可变为预期量(概率平均数)而非如在上面公式[2]中计算出的确定量。
更现实的丢失知晓分析可在选择所述标准R-D优化问题的解的同时使因错误而引起的预期成本相关联(即在位置i处不插入再同步点但可能存在丢失)。假定切片出现错误的机率可加以确定并由pe表示。还假定当切片出现错误时，已在单个点处且在数个位范围内出现讹误。通过使用适当(数据/符号)的交错技术，可实际上使所述两个假定非常精确，在数字无线通信情况下尤其如此。作为最后一个简化，将假定当切片出现错误时，所述切片内的确切错误位置相对于宏块单元均匀地分布。更精确的模型可能还已考虑到了所述切片中每一宏块的编码表示形式的大小(位数量)。根据上述假定，可将与无再同步点插入相关联的信道知晓预期总成本修改如下：
RS，i+λ((1-pe)·DS，i+pe·(pi·(DL，a+DL，b)))    [3]
其中在公式[3]中新引入的参数描绘于图6中。图6描绘在用于识别最佳候选IS-RSP位置的速率失真分析中使用的错误机率及关联失真的实例。条件概率pi(610)是在所述切片中存在错误(其中pe是出现错误的概率)条件下在位置“i”之前出现错误的概率。DL，b(620)是因错误615而引起的与在即将插入的候选IS-RSP之前丢失的切片数据相关联的失真。DL，a是与在所述即将插入的候选IS-RSP之后丢失的数据相关联的失真。
切片在针对位置“i”(605)所考虑的候选再同步点之后出现讹误的机率并不会促使插入所述候选再同步点，这是因为其将毫无益处。因此，为避免出现不公平的偏向，在公式[3]中不存在因在位置“i”(605)右侧发生可能的错误而造成切片数据丢失所引起的失真成分。
在位置“i”(605)处存在片内再同步点并不会避免在错误位置(610)与位置“i”(605)之间出现切片数据丢失。因此，倘若在所述候选再同步点之前出现错误，则因丢失所述区段切片数据所可能引起的失真DL，b(620)是确定的。因而，将DL，b(620)包含于用于估计是否在“i”(605)处插入再同步点的预期总成本函数中。
量DL，a(625)将会减小可供解码器利用的适当空间或时间隐匿算法的影响的失真考虑在内。考虑“未隐匿”及“完全隐匿”两种极端情况(此将在下文中加以论述)将颇为有趣且有所帮助。
理想的情况是，如果存在关于其将来用途的先验信息，则量DL，a(625)也反映会减小同一切片中后续IS-RSP的影响的失真。
下一步骤是计算(在一个实例中是使用速率失真计算器组件)与在位置“i”(605)处实际插入IS-RSP相关联的预期“信道知晓”R-D成本。编码器在处理紧接在再同步点之后(即，位于右侧)的宏块时，须遵守支持上述再同步的实现的编码约束条件(例如，将所有预测器初始化到适当缺省值)。假定根据这些约束条件，编码器已将如下形式的R-D优化问题(非常类似于上文所述的标准R-D优化问题)公式化并对其求解：
(RR，i+RO，i)+λDR，i                                      [4]
在公式[4]中，RR，i及DR，i分别是与为所述再同步点宏块所选定的受约束编码模式相关联的速率及失真(重组错误)，且RO，i是与将包含于所述位流中的所需开销信息相关联的速率(例如，包含于SEI消息中的IS-RSP信息)。如上文所论述，公式[4]中的R-D成本表达式并非信道知晓，且可将其作如下修改来引入信道知晓性：
(RR，i+RO，i)+λ((1-pe)·DR，i+pe·(pi·(DL，a+DL，b)))    [5]
由于可在位置“i”(605)处重新开始解码，因而可将失真DL，a(625)设定为0。所得到的与将再同步点插入于位置“i”处相关联的“信道既知”预期R-D成本由下式求出：
(RR，i+RO，i)+λ((1-pe)·DR，i+pe·(pi·DL，b))            [6]
因此，用于识别良好宏块位置来定位IS-RSP的总体算法是将在无IS-RSP情况下(参见如下公式[7])由公式[3]求出的R-D成本与在包含IS-RSP情况下(参见如下公式[8])由公式[6]求出的R-D成本相比较。编码器可计算以下两个量：
CNo_RSP，i＝RS，i+λ((1-pe)·DS，i+pe·(pi·(DL，a+DL，b)))    [7]
CRSP，i＝(RR，i+RO，i)+λ((1-pe)·DR，i+pe·(pi·DL，b))       [8]
可针对所有用于定位IS-RSP的候选位置(包括图5中的i∈(510，515，520)或i∈(525，530，535))来计算公式[7]及[8]。如果在所述候选位置的至少一个候选位置中满足不等式CRSP，i＜CNo_RSP，i，则编码器即决定插入IS-RSP。而如果在多于一个候选位置处满足不等式CRSP，i＜CNo_RSP，i，则编码器须作出选择(如在图3中的步骤315中所示)，所述选择可有利于得到最小CRSP，i值的位置。这会在一定程度上实现内容自适应性，因为当再同步点与适当图像形体(例如竖直边缘，来自所述竖直边缘左侧邻近者的水平预测跨越其已无法提供满意的效能且因此是不期望的)对齐时，与再同步点相关联的编码约束条件的重要性可能要小得多。在这些情况下，RR，i及DR，i可能分别非常接近RS，i及DS，i的值，从而会减小以完全灵活性编码的效能优点、并扩大因失真分量(pe.pi.DL，a)而引起的CRSP，i与CNo_RSP，i之间的差，由此增大IS-RSP插入的似然性。
如果考虑一种反映出显著的失真关切因素(也就是说，假定其边界远离零的λ值)的应用及相匹配的编码器设计，则会出现有趣的情形。还假定信道的pe不可忽略不计。在解码器处“无隐匿”的极端情况中，代表总信号损失的失真分量DL，a可能非常大，从而使项(pe.pi.DL，a)成为支配项并使CNo_RSP，i(由公式[7]求出)大于CRSP，i(由公式[8]求出)，并因而建议插入再同步点。在另一极端情况中，如果假定“完全隐匿”(其可通过成功的隐匿算法及适合的图像内容来很好地逼近)，则所有因切片数据丢失而引起的失真分量(DL，*)也可消失，从而剩下以下成本(分别从公式[7]及[8]得出)：
CNo_RSP，i＝RS，i+λ((1-pe)·DS，i)                            [9]
CRSP，i＝(RR，i+RO，i)+λ((1-pe)·DR，i)                       [10]
需要为用于识别IS_RSP的开销信息分配的额外速率RO，i、以及根据由再同步点所施加的约束条件来执行的编码的次优化效能，可使CRSP，i＞CNo_RSP，i此意味着不需要使用再同步点。对于介于所述两种情况之间的其它情况，公式[7]及[8]会提供简单但有用的框架来用于定位片内再同步点。
图7是利用IS-RSP的解码器过程的实例的图解。过程700可由解码器装置(例如图1中的解码器装置110)来实施。所述解码器装置首先在步骤705处接收以如在上文实例中所述的方式使用IS-RSP编码的经编码视频位流。接收装置(例如图1中的通信组件175)可实施作业705。所述解码器装置在步骤710处使用在例如H.26x及MPEG-x等标准中所概述的在对所述位流进行编码时所用的方法来对所述接收的视频位流进行解码。解码装置(例如图1中的反变换器/解量化器组件155)可实施作业710。H.26x及MPEG-x标准也清楚地说明了依从标准的编码器及解码器所必须遵循的语义及语法准则。所述解码器在步骤715处将经解码的变数的值与通过语义及语法规则所设定的值范围相比较，以识别所述位流是否已出现讹误。比较装置(例如图1中的熵解码装置160及错误恢复组件165)可实施步骤715的语义及语法比较检查。语义比较检查包含但不限于以下各项：
·NAL单元标题字节语法要素。
·SPS(序列参数集合)语法要素。
·PPS(图片参数集合)语法要素。
·切片标题语法要素。
·切片层存取单元描述符。
·所解码宏块的总数。
·宏块层语法要素。
·可用性旗标(以上下文相依方式)。
·位流缓冲器中的数据不足以进行连续解码。
·外部提供的参考帧缓冲器(大小及数量)与当前(即有效)SPS寓意的比较。
语法比较检查包含与对CAVLC熵码字进行解码相关联的解码失败。如果违背任何语义或语法规则或者以任一其它方式检测到错误位，则步骤720检测这些失败并启动再同步。如果在步骤720处未违背规则，则步骤725检查是否还有更多数据要解码。解码装置(例如图1中的错误恢复组件165)实施步骤720及725的作业。如果还存在更多的数据，则继续进行步骤705到725(且可能730)，直到不再存在更多的数据为止，且所述过程结束。
如果检测到位错误，则实施再同步。为实施再同步，解码器在步骤730处对位流中下一非讹误IS-RSP进行定位并重新开始解码，从所定位的下一非讹误IS-RSP重复步骤705到730。定位装置(例如图1中的错误恢复组件165)实施步骤730的定位作业。解码器可能已在步骤705中接收到位流中的IS-RSP信息。在一个实例中，IS-RSP信息可包含于带内应用消息或用户专用私有数据消息(例如H.264中的SEI消息或MPEG-2中的用户数据消息)中。如上文所论述，所述消息含有与IS-RSP宏块在视频帧内的位置相关的信息、以及与IS-RSP在位流内的位置相关的信息。如上文所论述，所述消息也含有为使解码器在IS-RSP经识别宏块位置处继续解码(步骤710)所需的数据。可将过程700中的一个或一个以上要素予以省略、重新排列及/或加以组合。
图8是利用IS-RSP的解码器过程的另一实例的图解。过程800含有与图7的过程700相似的步骤，但IS-RSP是用于以一种方式识别先前未检测到讹误的位流，而非如在图7中所示检测位流中的讹误并随后对IS-RSP进行定位。步骤805、810及820分别类似于图7的步骤705、710及725。在对位流进行解码的过程中，解码器可遇到已在IS-RSP信息消息中被识别为IS-RSP的点。当解码器在步骤815处以这种方式来定位IS-RSP时，其将当前位流的上下文与包含于IS-RSP消息中的上下文信息相比较825。如果所述上下文不一致，则对所述位流中的当前数据与包含于IS-RSP中的数据两者实施对由语义及语法规则所设定的值范围的比较检查(未图示)。通过将包含于当前位流中的数据值及包含于IS-RSP中的数据与由语义及语法规则所容许的值范围相比较，解码器可确定当前位流及/或IS-RSP数据是否出现讹误。如果在步骤830处发现所述位流出现讹误，则解码器可停止其当前解码并在步骤835处在其刚刚定位出的IS-RSP处重新开始解码，并继续进行到步骤805。而如果确定是IS-RSP而非位流出现讹误，则所述过程在步骤805处继续进行。如果确定位流与IS-RSP两者均出现讹误(未显示)，则可对下一IS-RSP进行定位且所述过程可在805处继续进行。此外，如果所述当前上下文与包含于IS-RSP中的上下文之间的上下文比较显示一致，则未识别出讹误且所述过程在步骤805处继续进行。比较装置(例如图1中的熵解码组件160及错误恢复组件165)可实施步骤825的上下文及/或语义及语法比较检查。可将过程800的一个或一个以上要素予以省略、重新排列及/或加以组合。
上文所述的各实例是对IS-RSP利用16×16像素宏块。如所属领域的技术人员所知，还可对上文所论述的IS-RSP方法利用其它块大小。
图9图解说明一种用于视频编码的实例性方法900。方法900包括：对再同步点信息进行编码910，其中所述再同步点信息包括用于识别再同步点在视频位流的区段内的位置的信息、及用于对跟在所述再同步点后的位流进行解码的信息；及传输920所述经编码的再同步点信息。图10图解说明一种用于视频编码的实例性设备1000。设备1000包括：经配置以对再同步点信息进行编码的编码模块1010，其中所述再同步点信息包括用于识别再同步点在视频位流的区段内的位置的信息、及用于对跟在所述再同步点后的位流进行解码的信息；及传输模块1020，其经配置以传输所述经编码的再同步点信息。
图11图解说明一种用于对视频数据进行解码的实例性方法1100。方法1100包括：接收1100包括再同步点信息的经编码位流，其中所述再同步点信息包括用于识别再同步点的位置的信息及用于对跟在所述再同步点后的位流进行解码的信息；及对所述接收的位流进行解码1120。图12图解说明对视频进行解码的实例性设备1200。设备1200包括：接收器模块1210，其经配置以接收包括再同步点信息的经编码位流，其中所述再同步点信息包括用于识别再同步点的位置的信息及用于对跟在所述再同步点后的位流进行解码的信息；及解码模块，其经配置以对所述接收的位流进行解码。
图13图解说明一种用于对多媒体数据进行编码的实例性方法1300。方法1300包括：对再同步点数据进行编码1310；及将所述再同步点数据插入1320多媒体流切片中。所述方法可进一步包括选择再同步点在所述切片内的位置；且其中插入包括在所述选定的位置中插入所述再同步点。所述选择可包括：计算多个候选位置的速率失真成本；及根据所述速率失真成本选择至少一个候选位置。图14图解说明用于执行对多媒体数据的编码的实例性设备1400。设备1400包括：编码模块1410，其经配置以对再同步点数据进行编码；及插入模块1420，其经配置以将所述再同步点数据插入多媒体流切片中。
图15图解说明一种用于处理多媒体流的实例性方法1500。方法1500包括：接收1510多媒体流切片中的再同步点数据；及根据所述再同步点数据重组1520多媒体数据。图16图解说明用于处理多媒体流的实例性设备1600。设备1600包括：接收模块，其经配置以接收多媒体流切片中的再同步点数据；及重组模块，其根据所述再同步点数据重组多媒体数据。
上文所述各实例仅使用视频作为实例。上文所述各方法及设备还可用于其它流式数据形式，包含音频、图形、图像、文本及其组合。
所属领域的技术人员应了解，可使用众多种不同技术及技法中的任一种来表示信息及信号。例如，整个上述说明中可能提及的数据、指令、命令、信息、信号、位、符号和码片可由电压、电流、电磁波、磁场或粒子、光场或粒子、或其任一组合来表示。
所属领域的技术人员应进一步了解，结合本文所揭示实例所阐述的各种例示性逻辑块、模块、及算法步骤可构建为电子硬件、计算机软件或两者的组合。为清晰地显示硬件与软件的互换性，上文是基于功能性来概述各种例示性组件、块、模块、电路、及步骤。此种功能性实施为硬件还是软件取决于特定应用及施加于整个系统的设计制约条件。所属领域的技术人员可针对每一特定应用以不同的方式构建所述功能性，但此种实施方案决不应视为背离所揭示方法的范围。
结合本文所揭示实例描述的各种例示性逻辑块、模块及电路可使用通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、场可编程门阵列(FPGA)或其它可编程逻辑装置、离散门或晶体管逻辑、离散硬件元件、或设计用于实施本文所述功能的其任一组合来构建或实施。通用处理器可为微处理器，但另一选择为，处理器还可为任何常规处理器、控制器、微控制器或状态机。处理器还可构建为计算装置的组合，例如，DSP与微处理器的组合、多个微处理器的组合、一个或一个以上微处理器与DSP核心的联合，或任一其它此类配置。
结合本文所揭示实例来描述的方法或算法的步骤可直接实施于硬件中、由处理器执行的软件模块中或两者的组合中。软件模块可驻存于RAM存储器、快闪存储器、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬磁盘、可装卸磁盘、CD-ROM、或现有技术中已知的任一其它形式的存储媒体中。实例性存储媒体耦接到处理器，以使所述处理器可自所述存储媒体读取信息及向所述存储媒体写入信息。另一选择为，所述存储媒体可为处理器的组成部分。处理器及存储媒体可驻存于专用集成电路(ASIC)中。ASIC可驻存于无线调制解调器中。另一选择为，处理器及存储媒体可作为离散组件驻存于无线调制解调器中。
上文对所揭示实例的说明旨在使所属领域的技术人员均可制作或利用所揭示方法与设备。所属领域的技术人员将易知对所述实例的各种修改，且本文所界定的一般原理还可应用于其它实例，这并不背离所揭示方法与设备的精神或范围。
因此，已描述了各种用于在视频位流的区段内提供再同步点以使解码器能够定位所述再同步点并对跟在所述再同步点后的位流进行解码的方法及设备。

Claims (106)

1.一种视频编码的方法，其包括：
对再同步点信息进行编码，其中所述再同步点信息包括识别再同步点在视频位流的区段内的位置的信息及用于对跟在所述再同步点后的所述位流进行解码的信息；及
传输所述经编码的再同步点信息。
2.如权利要求1所述的方法，其进一步包括：
计算多个候选位置的速率失真成本；及
根据所述计算的速率失真成本选择所述候选位置中的至少一者作为所述再同步点的位置。
3.如权利要求1所述的方法，其进一步包括选择所述再同步点在所述视频位流的区段内的位置，其中所述区段是由子宏块、宏块、切片、帧及帧序列组成的群组中的成员。
4.如权利要求1所述的方法，其进一步包括选择所述再同步点在所述视频位流的区段内的位置，其中所述再同步点是宏块的开始。
5.如权利要求1所述的方法，其中所述用于对所述位流进行解码的信息包括与邻近视频区段相关的信息。
6.如权利要求1所述的方法，其中所述用于对所述位流进行解码的信息包括由量化参数、空间预测模式标识符及若干非零系数组成的群组中的成员。
7.如权利要求1所述的方法，其进一步包括将所述再同步点信息编码于数据消息中，其中所述数据消息是带内应用消息、用户专用私有数据消息、辅助增强信息消息及MPEG用户数据消息中的一者。
8.如权利要求1所述的方法，其中所述用于对所述位流进行解码的信息包括与其中所述位流跟在所述再同步点后的上下文相关的信息。
9.一种用于视频编码的设备，其包括：
编码装置，其用于对再同步点信息进行编码，其中所述再同步点信息包括用于识别再同步点在视频位流的区段内的位置的信息及用于对跟在所述再同步点后的位流进行解码的信息；及
传输装置，其用于传输所述经编码的再同步点信息。
10.如权利要求9所述的设备，其进一步包括：
计算装置，其用于计算多个候选位置的速率失真成本；及
选择装置，其用于根据所述计算的速率失真成本选择所述候选位置中的至少一者作为所述再同步点的位置。
11.如权利要求9所述的设备，其进一步包括用于选择所述再同步点在所述视频位流的区段内的位置的装置，其中所述区段是由子宏块、宏块、切片、帧及帧序列组成的群组中的成员。
12.如权利要求9所述的设备，其进一步包括用于选择所述再同步点在所述视频位流的区段内的位置的装置，其中所述再同步点是宏块的开始。
13.如权利要求9所述的设备，其中所述用于对所述位流进行解码的信息包括与邻近视频区段相关的信息。
14.如权利要求9所述的设备，其中所述用于对所述位流进行解码的信息包括由量化参数、空间预测模式标识符及若干非零系数组成的群组中的成员。
15.如权利要求9所述的设备，其进一步包括将所述再同步点信息编码于数据消息中的装置，其中所述数据消息是带内应用消息、用户专用私有数据消息、辅助增强信息消息及MPEG用户数据消息中的一者。
16.如权利要求9所述的设备，其中所述用于对所述位流进行解码的信息包括与其中所述位流跟在所述再同步点后的上下文相关的信息。
17.一种用于视频编码的处理器，所述处理器经配置以控制：
对再同步点信息进行编码，其中所述再同步点信息包括用于识别再同步点在视频位流的区段内的位置的信息及用于对跟在所述再同步点后的所述位流进行解码的信息；及
传输所述经编码的再同步点信息。
18.如权利要求17所述的处理器，其进一步经配置以控制：
计算多个候选位置的速率失真成本；及
根据所述计算的速率失真成本选择所述候选位置中的至少一者作为所述再同步点的位置。
19.如权利要求17所述的处理器，其进一步经配置以控制选择所述再同步点在所述视频位流的区段内的位置，其中所述区段是由子宏块、宏块、切片、帧及帧序列组成的群组中的成员。
20.如权利要求17所述的处理器，其进一步经配置以控制选择所述再同步点在所述视频位流的区段内的位置，其中所述再同步点是宏块的开始。
21.如权利要求17所述的处理器，其中所述用于对所述位流进行解码的信息包括与邻近视频区段相关的信息。
22.如权利要求17所述的处理器，其中所述用于对所述位流进行解码的信息包括由量化参数、空间预测模式标识符及若干非零系数组成的群组中的成员。
23.如权利要求17所述的处理器，其进一步经配置以控制将所述再同步点信息编码于数据消息中，其中所述数据消息是带内应用消息、用户专用私有数据消息、辅助增强信息消息及MPEG用户数据消息中的一者。
24.如权利要求17所述的处理器，其中所述用于对所述位流进行解码的信息包括与其中所述位流跟在所述再同步点后的上下文相关的信息。
25.一种用于视频编码的设备，其包括：
编码器，其用于对再同步点信息进行编码，其中所述再同步点信息包括用于识别再同步点在视频位流的区段内的位置的信息及用于对跟在所述再同步点后的位流进行解码的信息；及
通信器，其经配置以传输所述经编码的再同步点信息。
26.如权利要求25所述的设备，其进一步包括选择器以选择所述再同步点在所述视频位流的区段内的位置，其中所述区段是由子宏块、宏块、切片、帧及帧序列组成的群组中的成员。
27.如权利要求25所述的设备，其进一步包括选择器以选择所述再同步点在所述视频位流的区段内的位置，其中所述再同步点是宏块的开始。
28.如权利要求25所述的设备，其中所述用于对所述位流进行解码的信息包括与邻近视频区段相关的信息。
29.如权利要求25所述的设备，其中所述用于对所述位流进行解码的信息包括由量化参数、空间预测模式标识符及若干非零系数组成的群组中的成员。
30.如权利要求25所述的设备，其中所述编码器将所述再同步点信息编码于数据消息中，其中所述数据消息是由带内应用消息、用户专用私有数据消息、辅助增强信息消息及MPEG用户数据消息组成的群组中的成员。
31.如权利要求25所述的设备，其中所述编码器使用可变长度编码对所述再同步点信息进行编码。
32.如权利要求25所述的设备，其进一步包括：
选择器；及
计算器，其用于计算多个候选位置的速率失真成本；
其中所述选择器根据所述计算的速率失真成本来选择所述候选位置中的至少一者作为所述再同步点的位置。
33.一种计算机可读媒体，其实施一种用于视频编码的方法，所述方法包括：
对再同步点信息进行编码，其中所述再同步点信息包括用于识别再同步点在视频位流的区段内的位置的信息及用于对跟在所述再同步点后的位流进行解码的信息；及
传输所述经编码的再同步点信息。
34.如权利要求33所述的计算机可读媒体，其中所述方法进一步包括：
计算多个候选位置的速率失真成本；及
根据所述计算的速率失真成本选择所述候选位置中的至少一者作为所述再同步点的位置。
35.如权利要求33所述的计算机可读媒体，其中所述方法进一步包括选择所述再同步点在所述视频位流的区段内的位置，其中所述区段是由子宏块、宏块、切片、帧及帧序列组成的群组中的成员。
36.如权利要求33所述的计算机可读媒体，其中所述方法进一步包括选择所述再同步点在所述视频位流的区段内的位置，其中所述再同步点是宏块的开始。
37.如权利要求33所述的计算机可读媒体，其中所述用于对所述位流进行解码的信息包括与邻近视频区段相关的信息。
38.如权利要求33所述的计算机可读媒体，其中所述用于对所述位流进行解码的信息包括由量化参数、空间预测模式标识符及若干非零系数组成的群组中的成员。
39.如权利要求33所述的计算机可读媒体，其中所述方法进一步包括将所述再同步点信息编码于数据消息中，其中所述数据消息是带内应用消息、用户专用私有数据消息、辅助增强信息消息及MPEG用户数据消息中的一者。
40.如权利要求33所述的计算机可读媒体，其中所述用于对所述位流进行解码的信息包括与其中所述位流跟在所述再同步点后的上下文相关的信息。
41.一种用于对视频数据进行解码的方法，其包括：
接收包括再同步点信息的经编码的位流，其中所述再同步点信息包括用于识别再同步点的位置的信息及用于对跟在所述再同步点后的位流进行解码的信息；及
对所述接收的位流进行解码。
42.如权利要求41所述的方法，其中所述方法进一步包括：
根据所述再同步点信息定位所述位流中的再同步点。
43.如权利要求41所述的方法，其中所述用于对所述位流进行解码的信息包括与其中对跟在所述再同步点后的位流进行编码的上下文相关的信息。
44.如权利要求43所述的方法，其中所述方法进一步包括：
将所述经解码位流的当前上下文与包含于所述再同步点信息中的所接收上下文信息进行比较；及
如果所述比较显示所述当前上下文与所述接收的上下文信息不相同，则停止对所述位流进行解码并在所述再同步点处重新开始对所述位流进行解码。
45.如权利要求41所述的方法，其中所述再同步点的位置处于视频区段内，所述视频区段选自由子宏块、宏块、切片、帧及帧序列组成的群组中的成员。
46.如权利要求41所述的方法，其中所述再同步点的位置是宏块的开始。
47.如权利要求41所述的方法，其中所述用于对所述位流进行解码的信息包括与邻近视频区段相关的信息。
48.如权利要求41所述的方法，其中所述用于对所述位流进行解码的信息包括由量化参数、空间预测模式标识符及若干非零系数组成的群组中的成员。
49.如权利要求41所述的方法，其中所述方法进一步包括：
接收数据消息中的所述再同步点信息，其中所述数据消息是由带内应用消息、用户专用私有数据消息、辅助增强信息消息及MPEG用户数据消息组成的群组中的成员。
50.如权利要求41所述的方法，其中所述方法进一步包括：
接收使用可变长度代码编码的再同步点信息。
51.如权利要求41所述的方法，其中所述方法进一步包括：
检测所述位流中的错误；
停止对所述位流的解码；及
在所述经定位的再同步点处继续进行解码。
52.一种用于对视频进行解码的设备，其包括：
接收装置，其用于接收包括再同步点信息的经编码位流，其中所述再同步点信息包含用于识别再同步点的位置的信息及用于对跟在所述再同步点后的位流进行解码的信息；及
解码装置，其用于对所述接收的位流进行解码。
53.如权利要求52所述的设备，其进一步包括：
定位装置，其用于根据所述再同步点信息定位所述位流中的再同步点。
54.如权利要求52所述的设备，其中所述用于对所述位流进行解码的信息包括与其中对跟在所述再同步点后的位流进行编码的上下文相关的信息。
55.如权利要求54所述的设备，其进一步包括：
比较装置，其用于将所述经解码位流的当前上下文与包含于所述再同步点信息中的所接收上下文信息进行比较；及
停止装置，其用于在所述比较显示所述当前上下文与所述接收的上下文信息不相同时，停止对所述位流进行解码并在所述再同步点处重新开始对所述位流进行解码。
56.如权利要求52所述的设备，其中所述再同步点的位置处于视频区段内，所述视频区段选自由子宏块、宏块、切片、帧及帧序列组成的群组中的成员。
57.如权利要求52所述的设备，其中所述再同步点的位置是宏块的开始。
58.如权利要求52所述的设备，其中所述用于对所述位流进行解码的信息包括与邻近视频区段相关的信息。
59.如权利要求52所述的设备，其中所述用于对所述位流进行解码的信息包括由量化参数、空间预测模式标识符及若干非零系数组成的群组中的成员。
60.如权利要求52所述的设备，其进一步包括：
接收装置，其用于接收数据消息中的再同步点信息，其中所述数据消息是由带内应用消息、用户专用私有数据消息、辅助增强信息消息及MPEG用户数据消息组成的群组中的成员。
61.如权利要求52所述的设备，其进一步包括：
接收装置，其用于接收使用可变长度代码所编码的再同步点信息。
62.如权利要求52所述的设备，其进一步包括：
检测装置，其用于检测所述位流中的错误；
停止装置，其用于停止对所述位流的解码；及
继续装置，其用于在所述经定位的再同步点处继续进行解码。
63.一种用于对视频进行解码的处理器，所述处理器经配置以控制：
接收包括再同步点信息的经编码位流，其中所述再同步点信息包括用于识别再同步点的位置的信息及用于对跟在所述再同步点后的位流进行解码的信息；及
对所述接收的位流进行解码。
64.如权利要求63所述的处理器，其中所述处理器进一步经配置以控制：
根据所述再同步点信息定位所述位流中的再同步点。
65.如权利要求63所述的处理器，其中所述用于对所述位流进行解码的信息包括与其中对跟在所述再同步点后的位流进行编码的上下文相关的信息。
66.如权利要求64所述的处理器，其中所述处理器进一步经配置以控制：
将所述经解码位流的当前上下文与包含于所述再同步点信息中的所接收上下文信息进行比较；及
如果所述比较显示所述当前上下文与所述接收的上下文信息不相同，则停止对所述位流进行解码并在所述再同步点处重新开始对所述位流进行解码。
67.如权利要求63所述的处理器，其中所述再同步点的位置处于视频区段内，所述视频区段选自由子宏块、宏块、切片、帧及帧序列组成的群组中的成员。
68.如权利要求63所述的处理器，其中所述再同步点的位置是宏块的开始。
69.如权利要求63所述的处理器，其中所述用于对所述位流进行解码的信息包括与邻近视频区段相关的信息。
70.如权利要求63所述的处理器，其中所述用于对所述位流进行解码的信息包括由量化参数、空间预测模式标识符及若干非零系数组成的群组中的成员。
71.如权利要求63所述的处理器，其中所述处理器进一步经配置以控制：
接收数据消息中的再同步点信息，其中所述数据消息是由带内应用消息、用户专用私有数据消息、辅助增强信息消息及MPEG用户数据消息组成的群组中的成员。
72.如权利要求63所述的处理器，其中所述方法进一步包括：
接收使用可变长度代码编码的再同步点信息。
73.如权利要求63所述的处理器，其中所述方法进一步包括：
检测所述位流中的错误；
停止对所述位流的解码；及
在所述经定位的再同步点处继续进行解码。
74.一种用于对视频进行解码的设备，其包括：
接收机，其用于接收包括再同步点信息的经编码位流，其中所述再同步点信息包括用于识别再同步点的位置的信息及用于对跟在所述再同步点后的位流进行解码的信息；及
解码器，其用于对所述接收的位流进行解码。
75.如权利要求74所述的设备，其中所述解码器进一步经配置以根据所述再同步点信息定位所述位流中的再同步点。
76.如权利要求74所述的设备，其中所述用于对所述位流进行解码的信息包括与其中对跟在所述再同步点后的位流进行编码的上下文相关的信息。
77.如权利要求76所述的设备，其中所述解码器进一步经配置以：
将所述经解码位流的当前上下文与包含于所述再同步点信息中的所接收上下文信息进行比较；及
如果所述比较显示所述当前上下文与所述接收的上下文信息不相同，则停止对所述位流进行解码并在所述再同步点处重新开始对所述位流进行解码。
78.如权利要求74所述的设备，其中所述再同步点的位置处于视频区段内，所述视频区段选自由子宏块、宏块、切片、帧及帧序列组成的群组中的成员。
79.如权利要求74所述的设备，其中所述再同步点的位置是宏块的开始。
80.如权利要求74所述的设备，其中所述用于对所述位流进行解码的信息包括与邻近视频区段相关的信息。
81.如权利要求74所述的设备，其中所述用于对所述位流进行解码的信息包括由量化参数、空间预测模式标识符及若干非零系数组成的群组中的成员。
82.如权利要求74所述的设备，其中所述接收机进一步经配置以接收数据消息中的再同步点信息，其中所述数据消息是由带内应用消息、用户专用私有数据消息、辅助增强信息消息及MPEG用户数据消息组成的群组中的成员。
83.如权利要求74所述的设备，其中所述解码器进一步经配置以：
检测所述位流中的错误；
停止对所述位流的解码；及
在所述经定位的再同步点处继续进行解码。
84.一种计算机可读媒体，其实施一种用于对视频进行解码的方法，所述方法包括：
接收包括再同步点信息的经编码位流，其中所述再同步点信息包括用于识别再同步点的位置的信息及用于对跟在所述再同步点后的位流进行解码的信息；及
对所述接收的位流进行解码。
85.如权利要求84所述的计算机可读媒体，其中所述方法进一步包括：
根据所述再同步点信息定位所述位流中的再同步点。
86.如权利要求84所述的计算机可读媒体，其中所述用于对所述位流进行解码的信息包括与其中对跟在所述再同步点后的位流进行编码的上下文相关的信息。
87.如权利要求86所述的计算机可读媒体，其中所述方法进一步包括：
将所述经解码位流的当前上下文与包含于所述再同步点信息中的所接收上下文信息进行比较；及
如果所述比较显示所述当前上下文与所述接收的上下文信息不相同，则停止对所述位流进行解码并在所述再同步点处重新开始对所述位流进行解码。
88.如权利要求84所述的计算机可读媒体，其中所述再同步点的位置处于视频区段内，所述视频区段选自由子宏块、宏块、切片、帧及帧序列组成的群组中的成员。
89.如权利要求84所述的计算机可读媒体，其中所述再同步点的位置是宏块的开始。
90.如权利要求84所述的计算机可读媒体，其中所述用于对所述位流进行解码的信息包括与邻近视频区段相关的信息。
91.如权利要求84所述的计算机可读媒体，其中所述用于对所述位流进行解码的信息包括由量化参数、空间预测模式标识符及若干非零系数组成的群组中的成员。
92.如权利要求84所述的计算机可读媒体，其中所述方法进一步包括：
接收数据消息中的再同步点信息，其中所述数据消息是由带内应用消息、用户专用私有数据消息、辅助增强信息消息及MPEG用户数据消息组成的群组中的成员。
93.如权利要求84所述的计算机可读媒体，其中所述方法进一步包括：
接收使用可变长度代码编码的再同步点信息。
94.如权利要求84所述的计算机可读媒体，其中所述方法进一步包括：
检测所述位流中的错误；
停止对所述位流的解码；及
在所述经定位的再同步点处继续进行解码。
95.一种用于对多媒体数据进行编码的方法，其包括：
对再同步点数据进行编码；及
将所述再同步点数据插入多媒体流的切片中。
96.如权利要求95所述的方法，其进一步包括：
选择再同步点在所述切片内的位置；且其中插入包括：
将所述再同步点插入所述选定的位置中。
97.如权利要求96所述的方法，其进一步包括：
计算多个候选位置的速率失真成本；及
根据所述速率失真成本选择至少一个候选位置。
98.如权利要求95所述的方法，其中所述再同步点包括所述多媒体数据的上下文信息。
99.一种用于对多媒体数据进行编码的设备，其包括：
编码装置，其用于对再同步点数据进行编码；及
插入装置，其用于将所述再同步点数据插入多媒体流的切片中。
100.如权利要求99所述的设备，其进一步包括：
选择装置，其用于选择再同步点在所述切片内的位置；且其中插入包括：
插入装置，其用于将所述再同步点插入所述选定的位置中。
101.如权利要求100所述的设备，其中所述用于选择的装置包括：
计算装置，其用于计算多个候选位置的速率失真成本；及
选择装置，其用于根据所述速率失真成本选择至少一个候选位置。
102.如权利要求99所述的设备，其中所述再同步点包括所述多媒体数据的上下文信息。
103.一种用于处理多媒体流的方法，其包括：
接收多媒体流的切片中的再同步点数据；及
根据所述再同步点数据重组多媒体数据。
104.如权利要求103所述的方法，其中所述再同步点包括所述多媒体数据的上下文信息。
105.一种用于处理多媒体流的设备，其包括：
接收装置，其用于接收多媒体流的切片中的再同步点数据；及
重组装置，其用于根据所述再同步点数据来重组多媒体数据。
106.如权利要求105所述的设备，其中所述再同步点包括所述多媒体数据的上下文信息。
CNA2006800144726A 2005-03-10 2006-03-10 用于使用切片内再同步点的错误恢复的方法及设备 Pending CN101185336A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US66087905P 2005-03-10 2005-03-10
US60/660,879 2005-03-10
US71320705P 2005-09-01 2005-09-01
US60/713,207 2005-09-01
PCT/US2006/008764 WO2006099224A1 (en) 2005-03-10 2006-03-10 Method and apparatus for error recovery using intra-slice resynchronization points

Publications (1)

Publication Number Publication Date
CN101185336A true CN101185336A (zh) 2008-05-21

Family

ID=36658621

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2006800144726A Pending CN101185336A (zh) 2005-03-10 2006-03-10 用于使用切片内再同步点的错误恢复的方法及设备

Country Status (8)

Country Link
US (1) US7929776B2 (zh)
EP (1) EP1856915B1 (zh)
JP (1) JP2008537373A (zh)
KR (1) KR100928127B1 (zh)
CN (1) CN101185336A (zh)
AT (1) ATE468705T1 (zh)
DE (1) DE602006014369D1 (zh)
WO (1) WO2006099224A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104067524A (zh) * 2012-01-19 2014-09-24 高通股份有限公司 具有精简的初始化值集合的上下文自适应熵译码
CN107197279A (zh) * 2008-02-22 2017-09-22 高通股份有限公司 快速宏块增量量化参数的决定
CN107396116A (zh) * 2012-01-30 2017-11-24 三星电子株式会社 视频编码和解码设备及非暂时性计算机可读存储介质

Families Citing this family (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8780957B2 (en) 2005-01-14 2014-07-15 Qualcomm Incorporated Optimal weights for MMSE space-time equalizer of multicode CDMA system
EP2268042B1 (en) * 2005-03-10 2014-07-02 Qualcomm Incorporated A decoder architecture for optimized error management in streaming multimedia
US7925955B2 (en) * 2005-03-10 2011-04-12 Qualcomm Incorporated Transmit driver in communication system
AR052601A1 (es) 2005-03-10 2007-03-21 Qualcomm Inc Clasificacion de contenido para procesamiento de multimedia
US8693540B2 (en) * 2005-03-10 2014-04-08 Qualcomm Incorporated Method and apparatus of temporal error concealment for P-frame
KR101273479B1 (ko) * 2005-07-06 2013-06-14 톰슨 라이센싱 화상 시퀀스 및 로고를 포함하는 비디오 콘텐츠를 코딩하는 방법 및 디바이스
US7714748B1 (en) * 2005-07-22 2010-05-11 Marvell International Ltd. Systems and methods for constructing high-rate constrained codes
US8879857B2 (en) 2005-09-27 2014-11-04 Qualcomm Incorporated Redundant data encoding methods and device
US10860424B1 (en) 2005-09-30 2020-12-08 Pure Storage, Inc. Background verification processing in a storage network
US11620185B2 (en) 2005-09-30 2023-04-04 Pure Storage, Inc. Integrity processing in a dispersed storage network
US11221917B1 (en) 2005-09-30 2022-01-11 Pure Storage, Inc. Integrity processing in a dispersed storage network
US8555109B2 (en) 2009-07-30 2013-10-08 Cleversafe, Inc. Method and apparatus for distributed storage integrity processing
US8948260B2 (en) 2005-10-17 2015-02-03 Qualcomm Incorporated Adaptive GOP structure in video streaming
US8654848B2 (en) 2005-10-17 2014-02-18 Qualcomm Incorporated Method and apparatus for shot detection in video streaming
US8005140B2 (en) * 2006-03-17 2011-08-23 Research In Motion Limited Soft decision and iterative video coding for MPEG and H.264
US9131164B2 (en) 2006-04-04 2015-09-08 Qualcomm Incorporated Preprocessor method and apparatus
US20080225947A1 (en) * 2007-03-13 2008-09-18 Matthias Narroschke Quantization for hybrid video coding
US8634462B2 (en) * 2007-03-13 2014-01-21 Matthias Narroschke Quantization for hybrid video coding
KR101366244B1 (ko) * 2007-04-24 2014-02-21 삼성전자주식회사 레지듀얼 데이터를 이용한 영상의 에러 은닉 방법 및 장치
US8121189B2 (en) * 2007-09-20 2012-02-21 Microsoft Corporation Video decoding using created reference pictures
US9848209B2 (en) * 2008-04-02 2017-12-19 Microsoft Technology Licensing, Llc Adaptive error detection for MPEG-2 error concealment
US8358700B2 (en) * 2008-06-03 2013-01-22 Omnivision Technologies, Inc. Video coding apparatus and method for supporting arbitrary-sized regions-of-interest
US9924184B2 (en) * 2008-06-30 2018-03-20 Microsoft Technology Licensing, Llc Error detection, protection and recovery for video decoding
US9788018B2 (en) * 2008-06-30 2017-10-10 Microsoft Technology Licensing, Llc Error concealment techniques in video decoding
US9131241B2 (en) * 2008-11-25 2015-09-08 Microsoft Technology Licensing, Llc Adjusting hardware acceleration for video playback based on error detection
WO2010126613A2 (en) * 2009-05-01 2010-11-04 Thomson Licensing Inter-layer dependency information for 3dv
US8340510B2 (en) 2009-07-17 2012-12-25 Microsoft Corporation Implementing channel start and file seek for decoder
WO2012008037A1 (ja) * 2010-07-15 2012-01-19 富士通株式会社 動画像復号装置、動画像復号方法及び動画像符号化装置ならびに動画像符号化方法
US9883161B2 (en) 2010-09-14 2018-01-30 Thomson Licensing Compression methods and apparatus for occlusion data
CN104811706B (zh) 2011-01-06 2017-10-27 三星电子株式会社 视频的编码方法和装置及视频的解码方法和装置
FR2972588A1 (fr) 2011-03-07 2012-09-14 France Telecom Procede de codage et decodage d'images, dispositif de codage et decodage et programmes d'ordinateur correspondants
FR2977111A1 (fr) * 2011-06-24 2012-12-28 France Telecom Procede de codage et decodage d'images, dispositif de codage et decodage et programmes d'ordinateur correspondants
US8767824B2 (en) * 2011-07-11 2014-07-01 Sharp Kabushiki Kaisha Video decoder parallelization for tiles
US20130223524A1 (en) * 2012-02-29 2013-08-29 Microsoft Corporation Dynamic insertion of synchronization predicted video frames
GB2499831B (en) * 2012-03-02 2015-08-05 Canon Kk Method and device for decoding a bitstream
US9344720B2 (en) * 2012-08-07 2016-05-17 Apple Inc. Entropy coding techniques and protocol to support parallel processing with low latency
US9386326B2 (en) * 2012-10-05 2016-07-05 Nvidia Corporation Video decoding error concealment techniques
JP6023596B2 (ja) * 2013-01-24 2016-11-09 株式会社日立情報通信エンジニアリング 画像符号化装置
US10904551B2 (en) * 2013-04-05 2021-01-26 Texas Instruments Incorporated Video coding using intra block copy
EP4020995A1 (en) 2015-07-16 2022-06-29 Dolby Laboratories Licensing Corporation Signal reshaping and coding for hdr and wide color gamut signals
US10986354B2 (en) * 2018-04-16 2021-04-20 Panasonic Intellectual Property Corporation Of America Encoder, decoder, encoding method, and decoding method

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09182067A (ja) * 1995-10-27 1997-07-11 Toshiba Corp 画像符号化／復号化装置
EP0861001B1 (en) 1997-02-07 2012-05-23 Texas Instruments Incorporated Error resilient video encoding
KR100363162B1 (ko) 1998-11-02 2003-01-24 삼성전자 주식회사 영상신호의전송/복원방법및장치
JP3907860B2 (ja) * 1999-02-16 2007-04-18 三菱電機株式会社 動画像復号装置及び動画像復号方法
US6339658B1 (en) * 1999-03-09 2002-01-15 Rockwell Science Center, Llc Error resilient still image packetization method and packet structure
US8275047B2 (en) * 2001-09-20 2012-09-25 Xilinx, Inc. Method and device for block-based conditional motion compensation
GB2381980A (en) 2001-11-07 2003-05-14 Motorola Inc Error concealment in scalable video transmissions
GB2386275B (en) 2002-03-05 2004-03-17 Motorola Inc Scalable video transmissions
JP2006060813A (ja) * 2004-08-20 2006-03-02 Polycom Inc ビデオデコーダにおける誤り隠蔽
US8601130B2 (en) 2006-06-07 2013-12-03 Qualcomm Incorporated Propagating session state changes to network functions in an active set

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107197279A (zh) * 2008-02-22 2017-09-22 高通股份有限公司 快速宏块增量量化参数的决定
CN104067524A (zh) * 2012-01-19 2014-09-24 高通股份有限公司 具有精简的初始化值集合的上下文自适应熵译码
CN104067524B (zh) * 2012-01-19 2017-06-13 高通股份有限公司 具有精简的初始化值集合的上下文自适应熵译码
CN107396116A (zh) * 2012-01-30 2017-11-24 三星电子株式会社 视频编码和解码设备及非暂时性计算机可读存储介质
CN107396116B (zh) * 2012-01-30 2020-03-27 三星电子株式会社 视频编码和解码设备及非暂时性计算机可读存储介质

Also Published As

Publication number Publication date
ATE468705T1 (de) 2010-06-15
KR20070110550A (ko) 2007-11-19
EP1856915B1 (en) 2010-05-19
US7929776B2 (en) 2011-04-19
EP1856915A1 (en) 2007-11-21
KR100928127B1 (ko) 2009-11-25
US20060233239A1 (en) 2006-10-19
WO2006099224A1 (en) 2006-09-21
DE602006014369D1 (de) 2010-07-01
JP2008537373A (ja) 2008-09-11

Similar Documents

Publication Publication Date Title
CN101185336A (zh) 用于使用切片内再同步点的错误恢复的方法及设备
CN103299621B (zh) 用于视频译码中的一般化p/b帧的参考图片列表构造
KR101523452B1 (ko) 비디오 코딩에서 블록에 대한 스캐닝 순서에 기초하여 비디오 블록 내의 마지막 유효 계수의 포지션을 코딩
RU2562381C1 (ru) Кодирование коэффициентов преобразования для видеокодирования
CN103039074B (zh) Gpb帧中的双向运动向量的联合译码
CN101171842B (zh) 多媒体数据的改进的编码
US8467449B2 (en) CAVLC enhancements for SVC CGS enhancement layer coding
CN103238322A (zh) 在视频译码中单独地译码视频块的最后有效系数的位置
JP6553181B2 (ja) パレットモードコーディングのための方法
US20110243226A1 (en) Low complexity entropy-encoding/decoding method and apparatus
CN101946515A (zh) Cabac译码器的二回合量化
CN103190147A (zh) 用于视频译码的语法元素的联合译码
CN1981531A (zh) 构建用于时间可分级的双向预测帧的方法和装置
CN101267563A (zh) 自适应可变长度编码
CN101529919A (zh) 在视频编码中减少参考帧搜索的设备和方法
CN104205830A (zh) 用于在视频译码中的参考索引译码的旁路二进制位
CN104854870A (zh) 在视频译码中的低延迟缓冲模型
CN101946516A (zh) 快速宏块增量量化参数的决定
KR101539169B1 (ko) 비디오 코딩을 위한 런-모드 기반 계수 코딩
CN104488267A (zh) 平铺块及波前并行处理
CN101563928A (zh) 使用其它编码模式的信息的编码模式选择
CN101690227A (zh) 用于对子带进行熵译码的子带扫描技术
CN103918263A (zh) 用于扫描视频编译中的矩形变换的设备和方法
CN104380748A (zh) 用于样本自适应偏移(sao)语法元素的经旁通译码二进位的分组
CN101663895B (zh) 使用所估计译码成本的视频译码模式选择

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1113886

Country of ref document: HK

C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20080521

REG Reference to a national code

Ref country code: HK

Ref legal event code: WD

Ref document number: 1113886

Country of ref document: HK