CN101668215A - 图像解码方法 - Google Patents

图像解码方法 Download PDF

Info

Publication number
CN101668215A
CN101668215A CN200910179440.7A CN200910179440A CN101668215A CN 101668215 A CN101668215 A CN 101668215A CN 200910179440 A CN200910179440 A CN 200910179440A CN 101668215 A CN101668215 A CN 101668215A
Authority
CN
China
Prior art keywords
image
coded
equipment
video sequence
nal unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN200910179440.7A
Other languages
English (en)
Inventor
M·汉努克塞拉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nokia Oyj
Original Assignee
Nokia Oyj
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Oyj filed Critical Nokia Oyj
Publication of CN101668215A publication Critical patent/CN101668215A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64784—Data processing by the network
    • H04N21/64792—Controlling the complexity of the content stream, e.g. by dropping packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/31—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the temporal domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)

Abstract

本发明涉及一种用于对编码图像进行排序的方法，该方法包括一个用于在编码器中形成编码图像的编码步骤。形成至少一个图像组，并且为图像组中的每个图像定义一个图像ID。在该方法中，执行传输步骤用于将所述的编码图像传输到解码器。编码图像按照解码顺序重新排列并且被解码从而形成解码图像。在编码步骤中，为编码图像定义一个与图像ID分离的视频序列ID，该视频序列ID对于同一图像组中的每个图像来说是相同的。在解码步骤中，使用视频序列ID来确定哪些图像属于相同的图像组。本发明还涉及一个系统，一个编码器，一个解码器，电子设备，软件程序以及一个存储介质。

Description

图像解码方法
分案申请
本申请是申请号为“200480004447.0”，申请日为“2004年2月17日”，发明名称为“图像解码方法”的发明专利申请的分案申请。
技术领域
本发明涉及一种用于对编码图像进行排序的方法，该方法包括用于在编码器中形成编码图像的编码步骤，用于解码编码器中的所述编码图像的可选假定解码步骤，用于将所述的编码图像传送到解码器的传送步骤，以及用于按照解码顺序排列解码图像的重新排列步骤。本发明还涉及一种系统，一个编码器，一个解码器，一种设备，一个计算机程序，一个信号，一个模块以及一个计算机程序产品。
背景技术
公开的视频编码标准包括ITU-T H.261，ITU-T H.263，ISO/IECMPEG-1，ISO/I EC，MEPG-2，以及ISO/IEC MPEG-4第二部分。这些标准在此作为传统的视频编码标准而被引用。
视频通信系统
视频通信系统可以被分成对话式系统(conversational system)和非对话式系统。对话式系统包括视频会议以及视频电话。这种系统的例子包括ITU-T建议H.320，H.323，以及H.324，这些标准分别详细描述了在ISDN，IP，PSTN网络中操作的视频会议/电话系统。对话式系统的特征在于其努力使终端-终端的延时最小(从音-视频捕获到远端音-视频呈现)从而改善用户体验。
非对话式系统包括存储内容的回放系统，诸如数字紧致盘(DVD)或者存储在回放设备的大型存储器中的视频文件，数字电视，和流。下面给出了这些技术领域中的最重要标准的简单回顾。
在今天的数字视频消费电子设备中占统治地位的标准是MPEG-2，它包括视频压缩，音频压缩，存储和传送的技术规范。编码视频的存储和传送基于基础流的概念。基础流由来自于一个单独的源(例如视频)的编码数据以及用于同步，识别和描述源信息所需的附加数据构成。基础流被打包成恒定长度或者可变长度的包从而形成一个打包的基础流(PES：Packetized Elementary Stream)。每个PES包由一个报头以及随后的流数据构成，流数据被称为负载。来自于每个基础流的PES包被合并从而形成一个节目流(PS)或者一个传输流(TS)。PS针对具有可忽略的传输误差的应用，例如存储-播放类型的应用设备。TS针对具有易受影响的传输误差的应用。但是，TS假设网络吞吐量保持恒定。
在ITU-T的联合视频组(JVT)和ISO/IEC正在努力研究一种标准。JVT的工作是基于ITU-T的早前的标准化工程，被称为H.26L。JVT标准的目标是发布与诸如ITU-T建议H.264，ISO/IEC国际标准14496-10(MPEG-4第10部分)相同的标准文本。草拟的标准在本文中被称为JVT编码标准，根据草拟标准的编解码器被称为JVT编解码器。
编解码规范本身在概念上区别了视频编码层(VCL)和网络抽象层(NAL)。VCL包括编解码器的信号处理功能，诸如传送，量化，运动搜索/补偿，以及循环滤波。其遵循目前视频编码器领域最通用的概念：基于宏块的编码器利用具有运动补偿的内图像预测并且对残差信号进行转换编码。VCL编码器的输出是片(slice)：一个包含整数个宏块的宏块数据的比特串，以及条头信息(包含该条中的第一个宏块的空间地址，初始量化参数，等)。条中的宏块按照扫描顺序依次排列，除非使用所谓的灵活宏块排序语法特别说明了一种不同的宏块分配。仅在条内使用图像内预测，例如内预测和运动矢量预测。
NAL将VCL的条输出压缩到网络抽象层单元(NAL单元或者NALU)，这些单元适于在打包网络上传输或者在打包定向复用环境中使用。JVT的附件B定义了一个封装处理，从而在面向字节流的网络上传送这样的NALU。
H.263可选的参考图像选择模式以及MPEG-4第2部分的NEWPRED编码工具能够为每个图像段(例如H.263中的每个条)选择用于运动补偿的参考帧。而且，H.263可选的增强参考图像选择模式和JVT编码标准能够分别为每个宏块选择参考帧。
参考图像选择能够启动多种类型的时间可伸缩方案。附图1表明了一个时间可伸缩方案的例子，在这里称为递归时间可伸缩。示例的方案能够利用三种恒定的帧速率解码。附图2描述了一种被称为视频冗余编码的方案，其中一个图像序列以交织的方式被分成两个或者多个独立的编码线。这些以及所有随后的附图中的箭头表示运动补偿的方向，帧下方的数值与每个帧的捕获和显示次数相应。
参数组概念
JVT编解码的一个基础的设计概念是生成自包含的包，从而不需要生成诸如报头副本的结构。通过将与不止一个条相关的信息同媒体流分离可以实现上述方式。高层的元信息应当在包含条包的RTP包流之前被可靠地异步发送。该信息还能够在不具有专用于此目的带外传输信道的设备中带内传送。高级别参数的组合被称为参数组。参数组包括诸如图像尺寸，显示窗，所采用的可选编码模式，宏块分配映射等信息。
为了能够改变图像参数(例如图像尺寸)，同时不需要发送与条打包流同步更新的参数组，编码器和解码器可以包括一个多于一个参数组的列表。每个条头包括一个表示将被使用的参数组的码字。
这种结构允许将参数组的传输同包流相分离，并且通过附加的装置，例如，作为容量变换的副作用，或者通过(可靠的或者不可靠的)控制协议来传送。甚至有可能从不传送它们，而通过一个应用设计规范而将其固定。
传输顺序
在传统的视频编码标准中，除了B图像以外，图像的解码顺序与显示顺序相同。传统的B图像的块可以根据两个参考图像在时间上进行双向预测，其中一个参考图像在时间上在先显示，而另一个参考图像在时间上在后显示。只有在解码顺序中最近的参考图像能够在显示顺序中位于B图像之前(例外：在H.263的交织编码中，时间上连续的参考帧的两场图像在解码顺序中都位于B图像之前)。传统的B图像不能作为时间预测中的参考图像使用，因此传统的B图像可以被任意放置而不会影响任何其他图像的解码。
JVT编码标准与早前的标准相比具有以下的新颖的技术特征：
-图像的解码顺序与显示顺序分离。帧_数(frame_num)语法单元的值表示解码顺序，图像顺序计数表示显示顺序。
-B图像中用于一个块的参考图像在显示顺序中可以在B图像之前或者之后。因此，B图像表示双向预测图像，而不是双向图像。
-没有被用作参考图像的图像被明确标记。任何类型的图像(帧内图像，帧间图像，B等)或者是参考图像或者是非参考图像。(因此，B图像能够作为用于时间预测其它图像的参考图像使用)。
-图像可以包括利用不同的编码类型编码的条。换句话说，编码图像可以包括例如帧内编码条和B-编码条。
显示顺序与解码顺序的分离从压缩效率和误差弹性的方面具有优势。
在附图3中表明了预测结构潜在的提高了压缩效率的例子。方框表示图像，方框内的大写字母表示编码类型，方框内的数字是根据JVT编码标准的图像编号，箭头表示预测的依赖关系。注意图像B17是图像B18的参考图像。与传统编码相比，压缩效率潜在的提高了，这是由于图像B18的参考图像与传统的利用PBBP或者PBBBP的编码图像方案相比在时间上更为靠近。与传统的PBP编码图像方案相比，压缩效率潜在的提高，这是由于部分参考图像是双向预测的。
附图4表明了能够用于提高误差弹性的内图像延迟方法的例子。传统上，内图像在一个场景切换之后立即被编码，或者是作为一个到期的内图像更新周期的响应而被编码。在内图像延迟方法中，一个内图像并不是在产生编码一个内图像的需要之后立即被编码，而是选择一个在时间上连续的图像作为一个内图像。编码的内图像和内图像的传统位置之间的每个图像都利用下一个时间上连续的图像进行预测。如图4所示，内图像延迟方法生成了两个独立的帧间图像预测链，而传统的编码方法仅生成一个单独的帧间图像链。很明显，两个链的方法比一个链的传统方法更能够稳定的抵御擦除误差(erasure error)。如果一个链丢失了数据包，另一个链仍然能够被正确接收。在传统的编码中，包损失经常会使误差被传送到帧间图像预测链剩余部分。
通常有两种类型的排序和时间信息与数字视频相关：解码和呈现顺序。下面更进一步的介绍相关的技术。
解码时间戳(DTS)表示与参考时钟相关的时间，编码数据单元在参考时钟被解码。如果DTS被编码和传送，其用于两个目的：第一，如果图像的解码顺序与它们的输出顺序不同，DTS明确表示解码顺序。第二，DTS保证一个特定的解码前缓冲(用于解码器的编码数据单元的缓冲)，假如接收速率在任何时刻都接近传输速率。在终端-终端反应时间变化的网络中，DTS的第二种应用没有或者几乎不产生影响。相反，假如在后解码缓冲器(用于解码图像的缓冲)中存在用于未压缩图像的空间，接收数据能够被尽可能快的解码。
DTS的运输取决于通信系统和所使用的视频编码标准。在MPEG-2系统中，DTS能够选择性的作为一个项目在PES包的报头中传送。在JVT编码标准中，DTS能够选择性的作为补充增强信息(SEI)的一部分被携带，并且能够在可选的假设参考解码器中被使用。在ISO基础媒体文件格式中，DTS将自身的方框类型，解码时间贡献给取样方框。在多种系统中，例如基于RTP的流系统中，DTS根本没有被传输，这是由于在该系统中解码顺序被假设与传输顺序相同，并且抽取解码时间不会发挥重要作用。
H.263选择附件U和附件W.6.12说明了一个图像编号，该数在解码顺序中相对于先前的参考图像增加1。在JVT编码标准中，帧_数语法单元(以后也被称为帧编号)与H.263的图像编号类似。JVT编码标准说明了内图像的一个特殊类型，称为瞬间解码刷新(IDR)图像。没有后来图像会参考在解码顺序中位于IDR图像之前的图像。一个IDR图像经常被编码作为场景改变的响应。在JVT编码标准中，帧编号在每个IDR图像处被复位为0，假如如附图5a和5b所示丢失了IDR图像，其能够在任何情况下改进误差弹性。但是，应当注意JVT编码标准中的场景信息SEI消息还能够被用于检测场景变化。
H.263图像编号能够被用于恢复参考图像的解码顺序。与此相似，JVT帧编号能够被用于恢复解码顺序中IDR图像(包含在内)和下一个IDR图像(不包含在内)之间的帧的解码顺序。但是，由于补充参考场对(连续图像被编码为场，它们的奇偶性不同)共享相同的帧编号，它们的解码顺序不能根据帧编号而重建。
一个非参考图像的H.263图像编号或JVT帧编号被指定为等同于在解码顺序中的先前参考图像的图像编号或帧编号上加1。如果多个非参考帧在解码顺序中连续，他们共享相同的图像编号或帧编号。非参考图像的图像或帧编号也可以和解码顺序中随后的参考图像的图像或帧编号相同。也可以利用在H.263中的时间参考(TR)编码单元或JVT编码标准中的图像顺序计数(POC)的概念来恢复连续非参考图像的解码顺序。
当假设显示一幅图像时，呈现时间戳(PTS)指示一个与参考时钟相关的时间。呈现时间戳还被称为显示时间戳，输出时间戳，以及合成时间戳。
PTS的传输依赖于使用的通信系统和视频编码标准。在MPEG-2系统中，PTS能够可选择地被当作PES包的报头的一个项目被传输。在JVT编码标准中，PTS能够可选择地被当作辅助增强信息(SEI)的一部分被传输，并且在假设参考解码器的操作中被使用。在ISO基础媒体文件格式中，PTS将其独有的逻辑单元类型，合成时间贡献给采样逻辑，其中呈现时间戳已经相对于相应的解码时间戳编码。在RTP中，在RTP包报头中的RTP时间戳相应于PTS。
传统的视频编码标准在多个方面在与PTS类似的时间参考编码(TR)单元起作用。在一些传统的视频编码标准中，例如MPEG-2视频，TR在图像组(GOP)的开始被复位为零。在JVT编码标准中，在视频编码层中没有时间的概念。为每一帧和场指定图像顺序计数(POC)，并且与TR相似，其被用于B条的直接时间预测。POC在IDR图像处被复位为0。
RTP序列编号通常是位于RTP报头中的16比特无符号值，对于每个发送的RTP数据包，该值增加1，并且接收机可以使用该值来检测包损失以及恢复包序列。
多媒体流的传输
一个多媒体流送系统有一个流送服务器和多个通过网络访问服务器的播放器。网络通常是面向包的并且提供一点或不提供装置来维持服务质量。播放器通常从服务器中取出预存储的或直播的多媒体内容并且在下载内容的同时实时播放该内容。通信的种类可以是点对点或者是多点传送。在点对点流传送中，服务器为每一个播放器提供一个独立的连接。在多点流传送中，服务器传送一个单一数据流给多个播放器，并且只有在需要的时候，网络单元才复制该流。
当一个播放器已经建立了一个与服务器的连接并且要求了多媒体流时，服务器开始传输所需的流。播放器并没有立即开始回放该流，而是通常缓冲输入数据几秒钟。在此，这种缓冲被称为初始缓冲。初始缓冲帮助维持不间断的回放，因为，在偶然增加传输延迟或网络全部掉线的情况下，用户可以解码并回放缓冲的数据。
为了避免无限制的传输延迟，在流送媒体中通常不喜欢可靠的传输协议。代替地，系统选择不可靠的传输协议，例如UDP，其一方面继承了更多的稳定传输延迟，但是另一方面也存在着数据恶化或丢失。
RTP和RTCP协议可以被用于UDP之上来控制实时通信。RTP提供了装置来检测传输包丢失，在接收端重新排列包的正确顺序，以及将抽样时间戳与每一个包相关联。RTCP传送关于包的多大部分被正确接收的信息，并且因此其能够被用于流控制的目的。
传输误差
存在两种主要类型的传输误差，即比特误差和包误差。比特误差通常与电路转换信道有关，例如移动通信中的无线访问网络连接，它们是由物理信道的缺陷，例如无线干扰造成的。这种缺陷可能导致传输数据中的比特倒置，比特插入以及比特删除。包误差通常是由包转换网络中的元件造成的。例如，包路由器通常很拥堵，即输入了太多包，但不能以相同的速率将其输出。在这种情况下，缓冲器溢出，并且会丢失一些包。也可能复制包并以与传输顺序不同的顺序输出包，但是它们通常被看作比包损失更不常见。包误差也可能由所使用的传输协议堆栈的运行引起。例如，一些协议使用在发射机中计算的并且与源编码数据压缩在一起的校验和。如果在数据中存在比特倒置的误差，接收机不能以相同的校验和结束，并且可以放弃接收到的包。
第二(2G)和第三(3G)代移动网络，包括GPRS，UMTS以及CDMA-2000，提供了无线链路连接的两种基本类型，确认和非确认类型。确认的连接是由接收者(移动站，MS。或者基站子系统，BSS)检测无线链路帧的完整性，并且如果发生传输误差，给无线链路的另一个终端发送一个重发请求。由于链路层的重传，始发者不得不缓存一个无线链路帧，直到接收到一个该帧的肯定确认。在较为严峻的无线环境下，该缓冲器可能溢出并造成数据损失。不管怎样，已经表明使用确认无线链路协议模式进行流服务是有益的。非确认的连接通常会放弃出错的无线链路帧。
包损失可以被校正或者被隐藏。损失校正指的是完美的恢复丢失数据，就像从未引入损失那样的能力。损失隐藏指的是隐藏传输误差产生的影响，从而使它们在重建的视频序列中不可见的能力。
当播放器检测到一个包损失时，其可以请求重发该包。由于初始的缓冲，重发的包可能在其被安排的回放时间之前被接收。一些商业互联网流系统使用优先级协议执行重发请求。在IETF上执行工作从而将选择重发请求方案标准化为RTCP的一部分。
所有的这些重发请求协议的一个共同的特征是它们都不适于对大量的播放器进行多点广播，因为这样可能使网络流量激烈增加。结果，多点流设备不得不依赖非交互包损失控制。
点-点流系统还可以从非交互误差控制技术中受益。首先，一些系统不包括任何的交互误差控制机制，它们最好也不具有任何来自播放器的反馈，从而简化系统。其次，损失包的重发以及其他形式的交互误差控制通常比非交互误差控制方法占用更大部分的传输数据速率。流服务器必须确保交互误差控制方法不保留大部分可用网络吞吐量。实际上，服务器必须限制交互误差控制操作的数量。第三，传输延迟可能限制服务器和播放器之间的交互数量，这是由于对于一个特定数据采样进行的所有交互误差控制操作必须最好在数据采样被回放之前进行。
非交互包损失控制机制可以被归类到前向误差控制和通过后处理进行的误差隐藏。前向误差控制指的是发射机向传输数据中增加冗余数据从而使接收机即使在存在传输损失时仍然能够恢复至少部分传输数据的技术。通过预处理的误差隐藏全部是面向接收机的。这些方法努力估算出错的接收数据的正确表示。
大多数视频压缩算法产生时间预测INTER或者P图像。结果，一幅图像中的数据损失会造成在根据校正图像时间预测的后续图像中出现视觉效果下降。视频通信系统可以在显示图像中隐藏损失，或者在屏幕上冻结最新的正确图像，直到接收到独立于校正帧的图像帧。
在传统的视频编码标准中，解码顺序与输出顺序相关。换句话说，I和P图像的解码顺序与它们的输出顺序相同，B图像的解码顺序立即跟随输出顺序中B图像的最后参考图像的解码顺序。结果，可能根据已知的输出顺序恢复解码顺序。输出顺序通常在时间参考(TR)场中的基本视频比特流，以及系统复用层，例如RTP报头中传送。这样，在传统的视频编码标准中，不存在与不同于解码顺序的传输顺序相关的呈现问题。
对于本领域的技术人员来说很明显，编码图像的解码顺序可以根据帧计数来重建，在帧计数中，视频比特流与H.263图像编号类似，并且在每个IDR图像不归零(如同JVT编码标准一样)。但是，当使用这样解决方案时可能发生两个问题：
第一，附图5a表明了一种解决方案，其中使用连续计数方案。例如，如果丢失了IDR图像I37(不能被接收或解码)，解码器继续解码接下来的图像，但是它使用的是错误的参考图像。这导致错误继续向下传输到接下来的帧，直到接收到独立于校正帧的下一帧，并且该帧被正确解码为止。在附图5b所示的例子中，帧编号在一个IDR图像被复位为0。现在，在丢失了一个IDR图像10的情况下，解码器通知在最新正确解码图像P36之后在图像编号中存在一个大的间隙。解码器然后假设发生了一个误差并且将显示器冻结在图像P36，直到接收并解码独立于该校正帧的下一帧。
第二，如果接收机假设了一种预定义计数方案，例如在解码顺序中每个参考图像增加1，则在接合和子序列去除中的出现的问题是很明显的。接收机可以使用预定义的计数方案检测损失。接合(slicing)指的是在另一个编码序列的中间插入一个编码序列的操作。一个实际使用的接合的例子是在数字电视广播中插入广告。如果接收机采用了一个预定义的计数方案，发射机必须根据接合序列的位置和帧计数在传输过程中更新帧计数。类似的，如果发射机决定不传输任何子序列以避免在一个IP网络中出现网络拥堵，例如，需要根据放置的子序列的位置和帧计数在传输过程中更新帧计数的数。在本说明书中，将在以后详细描述子序列的概念。
对于本领域的技术人员来说，NAL单元的解码顺序能够根据NAL单元序列编号重建，NAL单元序列编号与RTP序列编号类似，但是表明的是NAL单元的解码顺序，不是传输顺序。但是，当采用这种解决方案时会产生两个问题：
第一，在某些情况下，不需要完美恢复解码顺序。例如，一幅图像的SEI消息通常以任意顺序解码。如果解码器支持任意的条排序，一幅图像的条能够以任意顺序解码。结果，由于网络元件中的无意识的包的排列差别，NAL单元可以不按照NAL序列编号的顺序接收，接收机不必须等待与丢失的NAL单元序列编号相应的NAL单元，即使NAL单元以及接下来的NAL单元序列编号能够被实际解码。该附加延迟会降低所使用的视频通信系统所感受到的主观质量。而且，它可能引发不必要的损失校正的使用或者隐藏处理。
第二，某些NAL单元，例如用于非参考图像的条以及SEI NAL单元可以被网络元件放弃，而不会影响其它NAL单元的解码处理。NAL单元的放弃可能造成在NAL单元序列编号的接收序列中出现间隙。结果，例如对于RTP序列编号，接收机假设预定义的计数方案，例如每个NAL单元按照解码顺序增加1，并且使用序列编号中的间隙进行损失检测。NAL单元序列编号的使用同排列NAL单元，同时不影响其它NAL单元的解码相矛盾。
子序列
JVT编码标准还包括一个子序列概念，其与非参考图像的使用相比能够提高时间可伸缩性，从而使得图像的帧间预测链能够被看作是一整个，同时不影响编码流的剩余部分的解译能力。
子序列是一个子序列层内的一组编码图像。一幅图像属于一个子序列层，并且仅属于一个子序列层。一个子序列不依赖于相同子序列层中的任何其他子序列，也不依赖于更高子序列层中的子序列。层0的子序列可以独立于任何其他的子序列以及先前的长期的参考图像而被解码。附图6a表明了在层1含有子序列的图像流的例子。
一个子序列层包括序列中的编码图像的子集。子序列层利用非负整数计数。具有较大的层数的层是比具有较小层数的层更高的层。这些层根据彼此之间的依赖性排序从而使某一层不依赖于任何更高的层，但是可以依赖更低的层。换句话说，层0可以独立解码，层1中的图像可以根据层0预测，层2中的图像可以根据层0和层1预测，等。期望主观质量与解码层的数目一起增加。
子序列的概念包含在JVT解码标准当中：在序列参数组中required_frame_num_update_behaviour_flag等于1表明编码序列不包含所有的子序列。required_frame_num_update_behaviour_flag的使用不需要为每个参考帧的帧编号加1。与之相替代的，帧编号中的间隙可以在解码图像缓冲器中具体表示。如果一个“丢失”的帧编号涉及帧间预测，则可能推断图像丢失。否则，处理与“丢失”的帧编号相应的帧，就好像它们是被插入到具有滑动窗缓冲模式的解码图像缓冲器的正常帧。在所放置的子序列中的所有图像结构都被指定一个解码图像缓冲器中的“丢失”帧编号，但是它们在其他子序列的帧间预测中从未被使用。
JVT编码标准还包括涉及SEI消息的可选子序列。子序列信息SEI消息与解码顺序中的下一条有关。其表明该条所属的子序列层以及该子序列的子序列识别符(sub_seq_id)。
每个IDR图像的条报头包括一个识别符(idr_pic_id)。如果两个IDR图像在解码顺序上连续，之间没有任何的插入图像，idr_pic_id的值将从第一个IDR图像到其它的图像改变。如果当前图像属于一个子序列，该子序列解码顺序中的第一幅图像是IDR图像，则sub_seq_id的值将与IDR图像的idr_pic_id的值相同。
JVT编码标准中的编码图像的解码顺序通常不能根据帧编号和子序列识别符重建。如果传输顺序与解码顺序不同，并且编码图像属于子序列层1，不能根据子序列识别符和帧编号推断与子序列层0相关的解码顺序。例如，考虑在附图6b中表明的编码方案，其中输出顺序从左向右，方框表示图像，方框里面的大写字母表示根据JVT编码标准的帧编号，下划线中的字符表示非参考图像，箭头表示预测依赖关系。如果图像按照I0，P1，P3，I0，P1，B2，B4，P5的顺序传送，不能够推断图像B2属于哪个独立图像组(独立GOP)。一个独立GOP是能够不参考任何其他图像组中的图像而正确解码的图像组。
可以讨论在先前的例子中，能够根据其输出时间戳来推断图像B2的正确独立GOP。但是，图像的解码顺序不能根据输出时间戳和图像编号恢复，因为解码顺序和输出顺序是不相关的。考虑下面的例子(附图6c)，其中输出顺序从左到右，方框表示图像，方框内的大写字母表示编码类型，方框内的数字表示根据JVT编码标准的帧编号，箭头表示预测依赖关系。如果图像不按照解码顺序输出，就不能可靠地检测在输出顺序中，图像P4是否应当在第一或第二独立GOP的P3之后解码。
基础和冗余图像
基础编码图像是一幅图像的基础编码表示。解码的基础编码图像覆盖整个图像区域，即基础编码图像包括该图像的所有条和宏块。冗余编码图像除非基础编码图像丢失或者恶化而不会被用于解码的一幅图像或者图像的一部分的冗余编码表示。冗余编码图像不需要包括基础编码图像中的所有宏块。
缓冲
流客户端通常具有一个能够存储比较大数量的数据的接收机缓冲器。最初，当建立一个流送对话时，客户并没有立即开始回放数据流，而是通常将输入的数据缓冲几秒钟。这一缓冲有助于维持连续的回放，因为，万一偶然增加的传输延时或网络吞吐量下降，客户可以解码和回放缓冲的数据。否则，没有初始缓冲，客户只有冻结显示，停止解码，并且等待输入数据。该缓冲对于自动或选择性地在任何一个协议层的重发也是必需的。如果图像的任何一部分丢失了，就会采用一个重发机制来重新发送丢失的数据。如果重发数据在其所安排的解码或回放时间之前被接收，该丢失就被完美地恢复了。
编码图像可以根据其在解码序列的主观质量中的重要性而被分级。例如，非参考图像，例如传统的B图像，在主观上被认为最不重要，因为它们的不存在不会影响其它图像的解码。主观的分级也可以在数据分割或条组的基础上进行。主观上认为最重要的编码条和数据分割可以早于它们的解码顺序指示而被发送，而主观上认为最不重要的编码条和数据分割可以晚于它们自然编码顺序指示被发送。因此，任何一个最重要的条和数据分割的重发相对于最不重要的条和数据分割更可能在安排的解码或回放时间之前被接收。
发明内容
本发明能够在视频通信方案中将来自于传输顺序的视频数据重新排列成解码顺序，在该方案中，这种顺序对于不按解码顺序传输数据非常有利。
在本发明中，解码顺序的带内信令从发射机被传送到接收机。该信令可以是能够被用于恢复解码顺序的视频比特流中的任何其他信令的补充或者替代，例如JVT编码标准中的帧编号。
下文将描述JVT编码标准中对帧编号的补充信令。以后，一个独立的GOP包括按照解码顺序从一个IDR图像(包含在内)到下一个IDR图像(不包含在内)的图像。该流中的每个NAL单元包括或者与一个视频序列ID有关，该视频序列ID对于一个独立GOP中的所有NAL来说保持不变。
一个独立GOP的视频序列ID将与解码顺序中先前的独立GOP的视频序列ID不同，或者与先前的视频序列ID(模运算)相比，其应当增加。在前一情况下，独立GOP的解码顺序由它们的接收顺序确定。例如，以具有最小的RTP序列编号的IDR图像开始的独立GOP首先被解码。在后面的情况下，独立的GOP按照视频序列ID递增的顺序被解码。
在下面的描述中，通过使用基于编码器解码器的系统来描述本发明，但是很明显本发明还能够在其它存储视频信号的系统中执行。存储的视频信号可以是在编码之前存储的未编码信号，作为编码之后存储的编码信号，或者作为编码和解码处理之后存储的解码信号。一个文件系统接收音频和/或视频比特流，该比特流例如按照解码顺序被封装，并作为一个文件被存储。此外，编码器和文件系统能够生成元数据，其说明图像和NAL单元的主观重要性，并且本质上包含有关子序列的信息。该文件能够被存储到一个数据库中，直接回放服务器能够从该数据库中读出NAL单元，并将其封装成RTP包。根据可选择的元数据以及所使用的数据连接，直接回放服务器能够将包的传输顺序修改为不同于解码顺序，去除子序列，判断SEI消息将传输的内容，如果存在的话，等等。在接收端，RTP包被接收和缓存。通常，NAL单元首先被重新排列成正确的顺序，之后，NAL单元被传送到解码器。
根据H.264标准，VCL NAL单元被指定为具有nal_unit_type等于1-5(包含1和5)的NAL单元。在该标准中，NAL单元类型1-5被定义为：
1 非IDR图像的编码条
2 编码条数据部分A
3 编码条数据部分B
4 编码条数据部分C
5 IDR图像的编码条
下文中根据本发明的优选实施例描述了视频比特流中的任何解码顺序信息的替代信令。一个解码顺序编号(DON)表示NAL单元的解码顺序，而不是NAL单元传输到解码器的传输顺序。以后，DON被假设为没有一般性损失的16位无符号整数。令一个NAL单元的DON为D1，另一个NAL单元的DON为D2。如果D1＜D2并且D2-D1＜32768，或者如果D1＞D2，并且D1-D2＞＝32768，那么DON＝D1的NAL单元在NAL单元传输顺序上先于DON＝D2的NAL单元。D1＜D2并且D2-D1＞＝32768，或者如果D1＞D2，并且D1-D2＜32768，那么DON＝D2的NAL单元在NAL单元传输顺序上先于DON＝D1的NAL单元。与不同的基础编码图像相关的NAL单元不会具有相同的DON的值。与相同的基础编码图像相关的NAL单元可以具有相同的DON的值。如果基础编码图像的所有NAL单元具有相同的DON的值，与基础编码图像相关的冗余编码图像的NAL单元可以与基础编码图像的NAL单元具有不同的DON的值。具有相同的DON的值的NAL单元的NAL单元传输顺序例如可以如下所示：
1.图像分隔NAL单元，如果存在的话
2.序列参数组NAL单元，如果存在的话
3.图像参数组NAL单元，如果存在的话
4.SEI NAL单元，如果存在的话
5.基础编码图像的编码条和条数据分割NAL单元，如果存在的话
6.冗余编码图像的编码条和条数据分割NAL单元，如果存在的话
7.滤波数据NAL单元，如果存在的话
8.序列NAL结束单元，如果存在的话
9.流NAL结束单元，如果存在的话。
根据本发明的第一方面，提供了一种方法，主要特征在于在编码步骤中，为编码图像定义了一个与图像ID不同的视频序列ID。
根据本发明的第二方面，提供了一种用于编码图像和用于对编码图像排序的编码器，包括一个排列器，用于形成至少一个编码图像组并且为该图像组中的每个图像定义一个图像ID，该编码器进一步包括一个定义器，用于为编码图像定义一个与图像ID分离的视频序列ID，视频序列ID被安排成与相同的图像组中的每个图像相同。
根据本发明的第三方面，提供了一种用于解码编码图像从而形成解码图像的解码器，包括一个重新排列器，用于以解码顺序排列编码图像，该解码器进一步包括一个处理器，用于通过使用视频序列ID来确定哪些图像属于相同的图像组。
根据本发明的第四方面，提供了一种包括用于执行编码图像的排序方法的计算机可执行步骤的软件程序，该方法包括用于在编码器中形成编码图像的编码步骤，其中形成至少一个图像组，为该图像组中的每个图像定义一个图像ID，一个用于将所述的编码图像传输到解码器的传输步骤，一个用于按照解码顺序排列编码图像的重新排列步骤，其中在编码步骤中，为编码图像定义一个与图像ID相分离的视频序列ID。
根据本发明的第五方面，提供了一种包括编码图像的信号，编码图像至少形成了一个图像组，为该图像组的每个图像定义一个图像ID，其中在该信号中为编码图像定义一个与图像ID分离的视频序列ID，对于相同图像组中的每个图像而言视频序列ID相同。
根据本发明的第六方面，提供了一种用于排序包含有第一和第二编码图像的编码图像的方法，根据第一编码图像形成至少一个第一传输单元，根据第二编码图像形成至少一个第二传输单元，其中为所述的第一传输单元定义一个第一识别符，为所述的第二传输单元定义一个第二识别符，第一和第二识别符分别表示包含在第一传输单元中的信息和包含在第二传输单元中的信息的解码顺序。
根据本发明的第七方面，提供了一种用于对包含第一和第二编码图像的编码图像进行排序的设备，该设备包括一个排列器，用于根据第一编码图像形成至少一个第一传输单元，根据第二编码图像形成至少一个第二传输单元，该设备进一步包括一个定义器，用于为所述的第一传输单元定义一个第一识别符，为所述的第二传输单元定义一个第二识别符，第一和第二识别符分别表示包含在第一传输单元中的信息和包含在第二传输单元中的信息的解码顺序。
根据本发明的第八方面，提供了一种用于编码图像和用于对包含第一和第二编码图像的编码图像进行排序的编码器，该编码器包括一个排列器，用于根据第一编码图像形成至少一个第一传输单元，和根据第二编码图像形成一个第二传输单元，该编码器进一步包括一个定义器，用于为所述的第一传输单元定义一个第一识别符，为所述的第二传输单元定义一个第二识别符，第一和第二识别符分别表示包含在第一传输单元中的信息和包含在第二传输单元中的信息的解码顺序。
根据本发明的第九方面，提供了一种用于解码编码图像从而形成解码图像的解码器，编码图像包括在根据第一编码图像形成的至少一个第一传输单元中传输的第一编码图像和在根据第二编码图像形成的至少一个第二传输单元中传输的第二编码图像，该解码器进一步包括一个处理器，用于根据为所述的第一传输单元定义的第一识别符和为所述的第二传输单元定义的第二识别符来确定包含在第一传输单元中的信息和包含在第二传输单元中的信息的解码顺序。
根据本发明的第十方面，提供了一种包括一个用于编码图像和用于对包含第一和第二编码图像的编码图像进行排序的系统，该编码器包括一个排列器，用于根据第一编码图像形成至少一个第一传输单元和根据第二编码图像形成至少一个第二传输单元，以及一个用于解码编码图像的解码器，该系统在编码器中进一步包括一个定义器，用于为所述的第一传输单元定义一个第一识别符，为所述的第二传输单元定义一个第二识别符，第一和第二识别符分别表示包含在第一传输单元中的信息和包含在第二传输单元中的信息的解码顺序，在解码器中进一步包括一个处理器，用于根据所述的第一识别符和所述的第二识别符确定包含在第一传输单元中的信息和包含在第二传输单元中的信息的解码顺序。
根据本发明的第十一方面，提供了一种含有用于执行用于排序包含第一和第二编码图像的编码图像，从而根据第一编码图像形成至少一个第一传输单元，根据第二编码图像形成至少一个第二传输单元的方法的计算机可执行步骤的计算机程序，该计算机程序进一步包括用于为所述的第一传输单元确定一个第一识别符和为所述的第二传输单元确定一个第二识别符的计算机可执行步骤，第一和第二识别符分别表示包含在第一传输单元中的信息和包含在第二传输单元中的信息的解码顺序。
根据本发明的第十二方面，提供了一种计算机程序产品，用于存储一个包含有用于执行含有第一和第二编码图像的编码图像的排序，从而根据第一编码图像形成至少一个第一传输单元和根据第二编码图像形成至少一个第二传输单元的方法的计算机可执行步骤的计算机程序该计算机程序进一步包括用于为所述的第一传输单元确定一个第一识别符和为所述的第二传输单元确定一个第二识别符的计算机可执行步骤，第一和第二识别符分别表示包含在第一传输单元中的信息和包含在第二传输单元中的信息的解码顺序。
根据本发明的第十三方面，提供了一种含有根据第一编码图像形成的至少一个第一传输单元，和根据第二编码图像形成的至少一个第二传输单元的信号，该信号进一步包括为所述的第一传输单元确定的一个第一识别符和为所述的第二传输单元确定的一个第二识别符，第一和第二识别符分别表示包含在第一传输单元中的信息和包含在第二传输单元中的信息的解码顺序。
根据本发明的第十四方面，提供了一种用于排序用于传输的编码图像的模块，编码图像包括第一和第二编码图像，该模块包括一个排列器，用于根据第一编码图像形成至少一个第一传输单元，根据第二编码图像形成至少一个第二传输单元，该模块进一步包括一个定义器，用于为所述的第一传输单元定义一个第一识别符，为所述的第二传输单元定义一个第二识别符，第一和第二识别符分别表示包含在第一传输单元中的信息和包含在第二传输单元中的信息的解码顺序。
根据本发明的第十五方面，提供了一种用于对编码图像进行重新排序从而进行解码的模块，编码图像包括在根据第一编码图像形成的至少一个第一传输单元中传输的第一编码图像和在根据第二编码图像形成的至少一个第二传输单元中传输的第二编码图像，该模块进一步包括一个处理器，用于根据为所述的第一传输单元定义的第一识别符和为所述的第二传输单元定义的第二识别符，确定包含在第一传输单元中的信息和包含在第二传输单元中的信息的解码顺序。
本发明提高了编码系统的可靠性。通过使用本发明，图像的正确解码顺序能够比现有系统更可靠地确定，即使在解码器中不能获得视频流中的某些包。
附图说明
附图1表明了一个递归时间可伸缩方案的例子，
附图2表明了被称为视频冗余编码的方案，其中一个图像序列以交织的方式被分成两个或者多个独立的编码线程，
附图3表明了潜在地提高压缩效率的预测结构的例子，
附图4表明了能够被用于提高误差弹性的图像内延迟方法的例子，
附图5a和5b表明了现有技术中对编码视频流图像的不同计数方案，
附图6a表明了一个在层1含有子序列的图像流的例子，
附图6b表明了在层1含有具有子序列的两个独立图像组的图像流的例子，
附图6c表明了不同独立图像组的图像流的例子，
附图7表明了在层1含有子序列的图像流的另一个例子，
附图8表明了根据本发明的系统的优选实施例，
附图9表明了根据本发明的编码器的优选实施例，
附图10表明了根据本发明的解码器的优选实施例，
附图11a表明了在本发明中使用的NAL打包格式的例子，以及
附图11b表明了在本发明中使用的NAL打包格式的另一个例子。
具体实施方式
下面将参照附图8的系统，附图9中的编码器1和可选的假设参考解码器(HRD)5和附图10中的解码器2详细描述本发明。将被编码的图像可以是例如来自与诸如摄像机、视频记录器等的视频源3的视频流图像。视频流的图像(帧)可以被分成更小的部分，例如条。条可以进一步被分成块。在编码器1中，视频流被编码从而减小通过传输信道4传输或者存储在存储介质(未显示)中的信息。视频流图像被输入到编码器1。编码器具有一个编码缓冲器1.1(附图9)用于暂时存储将被编码的某些图像。编码器1还包括一个存储器1.3和一个处理器1.2，其中可以应用根据本发明的编码任务。存储器1.3和处理器1.2可以与传输设备6共用，或者传输设备6具有其它的处理器和/或存储器(未显示)用于传输设备6的其它功能。编码器1执行运动估计和/或其它的任务来压缩视频流。在运动估计中搜索将被编码的图像(当前图像)和先前和/或随后的图像之间的相似性。如果发现具有相似性，则可以使用该比较图像或部分该图像作为将被编码图像的参考图像。在JVT中，图像的显示顺序和解码顺序不是必须相同，其中只要图像被作为参考图像使用，该参考图像必须被存储在缓冲器中(例如编码缓冲器1.1)。编码器1还将图像的显示顺序信息插入到传输流中。实际上，除了JVT语法(例如RTP时间戳)以外，还可以使用时间信息SEI消息或者时间戳。
如果需要，编码图像从编码处理被移动到编码图像缓冲器1.2。编码图像通过传输信道4从编码器1被传送到解码器2。在解码器2中，编码图像被解码从而形成与编码图像尽可能相对应的未压缩图像。每个解码图像都被缓存在解码器2的解码图像缓冲器(DPB)2.1中，除非该图像在解码之后立即被显示并且没有被作为参考图像使用。在根据本发明的系统中，组合了参考图像缓冲和显示图像缓冲，并且它们使用相同的解码图像缓冲器2.1。这消除了在两个不同的地方存储相同图像的需要，因此降低了解码器2的存储需要。
解码器1还包括一个存储器2.3以及一个处理器2.2，在处理器中应用根据本发明的解码任务。存储器2.3和处理器2.2可以与接收设备8共用，或者接收设备8可以具有令外的处理器和/或存储器(未显示)，用于接收设备8的其它功能。
RTP包的负载格式根据需要被定义为多个不同的负载结构。但是，一个接收到的RTP包包含什么样的结构可以从该负载的第一个字节中明确得知。该字节将被构建为一个NAL单元报头。NAL单元类型字段表明目前是哪一结构。可能的结构是：单独NAL单元包，集合包和分段单元。单独NAL单元包在负载中仅包括一个单独的NAL单元。NAL报头类型字段将等于原始的NAL单元类型，即1-23的范围内含1和23。集合包类型被用于将多个NAL单元集合成一个单独的RTP负载。该包存在四种版本，单独时间集合包类型A(STAP-A)，单独时间集合包类型B(STAP-B)，具有16比特偏移的多时间集合包(MTAP)(MTAP16)以及具有24比特偏移的多时间集合包(MTAP)(MTAP24)。为STAP-A，STAP-B，MTAP16以及MTAP24设定的NAL单元类型编号分别是24，25，26和27。分段单元被用于将一个单独的NAL单元分成多个RTP包。它存在两个版本，分别用NAL单元类型编号28和29识别。
为RTP包传输定义的打包模式存在三种情况：
-单独NAL单元模式，
-非交织模式，以及
-交织模式。
单独NAL单元模式适用于遵照ITU-T建议H.241的对话式系统。非交织模式适用于不遵照ITU-T建议H.241的对话式系统。在非交织模式，NAL单元按照NAL单元解码顺序传输。交织模式适用于不需要非常低的终端-终端反应时间的系统。交织模式允许不按照NAL单元解码顺序传输NAL单元。
所使用的打包模式可以通过可选打包模式MIME参数或者通过外部装置表示。使用的打包模式控制RTP负载中允许的NAL单元类型。
在交织打包模式中，允许NAL单元的传输顺序与NAL单元的解码顺序不同。解码顺序编号(DON)是负载结构中的一个字段或者是表示NAL单元解码顺序的导出变量。
传输和解码顺序的组合按照如下方式由可选交织深度MIME参数控制。当可选交织深度MIME参数的值等于0并且不允许NAL单元不按照解码顺序传输时，NAL单元的传输顺序与NAL的解码顺序相同。当可选交织深度MIME参数的值大于0或者允许NAL单元不按照它们的解码顺序传输时，实际上，
-在多时间集合包16(MTAP16)和多时间集合包24(MTAP24)中NAL单元的顺序不需要与NAL单元解码顺序相同，以及
-通过拆封单独时间集合包B(STAP-B)，MTAP和两个连续包中的分段单元B(FU-B)形成的NAL单元的顺序不需要与NAL单元解码顺序相同。
单独NAL单元包，STAP-A以及FU-A的RTP负载结构不包括DON。STAP-B和FU-B结构包括DON，MTAP的结构允许DON的推导。
如果发射机期望封装每个包的一个NAL单元，并且不按照解码顺序发射包，可以使用STAP-B包类型。
在单独NAL单元打包模式，NAL单元的传输顺序与它们的NAL单元解码顺序相同。在非交织打包模式，单独NAL单元包和STAP-A，FU-A的传输顺序与它们的NAL单元解码顺序相同。一个STAP中的NAL单元按照NAL单元解码顺序呈现。
由于H.264允许解码顺序与显示顺序不同，RTP时间戳的值可以不作为RTP序列编号的函数单调递减。
传输顺序中的第一NAL单元的DON值可以被设定为任意值。DON值的范围是0-65535(包括0和65535)。在达到最大值之后，DON的值归零。
包含在任意的STAP-B，MTAP中的两个NAL单元的解码顺序或者以一个FU-B开始的一系列分段单元的解码顺序按照如下的方式被确定。令一个NAL单元的DON的值为D1，另一个NAL单元的DON的值为D2。如果D1＝D2，则两个NAL单元的NAL单元解码顺序可以是任意的。如果D1＜D2，并且D2-D1＜32768，或者如果D1＞D2，并且D1-D2＞＝32768，则在NAL单元解码顺序中，DON的值等于D1的NAL单元位于DON的值等于D2的NAL单元之前。如果D1＜D2，并且D2-D1＞＝32768，或者如果D1＞D2，并且D1-D2＜32768，则在NAL单元解码顺序中，DON的值等于D2的NAL单元位于DON的值等于D1的NAL单元之前。与场相关的DON的值这样被确定从而使按照上述方式由DON的值确定的解码顺序与NAL单元解码顺序一致。如果NAL单元流中的两个连续的NAL单元的顺序被转换，并且新的顺序仍然与NAL单元解码顺序一致，NAL单元具有相同的DON值。例如，当使用中的视频编码方案允许任意的条顺序，则允许一个编码图像中的所有编码条NAL单元具有相同的DON值。结果，具有相同DON值的NAL单元可以利用任何顺序解码，并且具有不同DON值的两个NAL单元应当按照上述的顺序被传送到解码器。当NAL单元解码顺序中的两个连续的NAL单元具有不同的DON值时，解码顺序中第二NAL单元的DON值应当是解码顺序中第一NAL单元的DON的值加1。接收机不能期望NAL单元解码顺序中的两个连续的NAL单元的DON的值的绝对差等于1，即使在无误差传输当中。由于在将DON的值与NAL单元相关时，可能并不知道是否所有的NAL单元都被传送到接收机，因此不需要增加1。例如，当包将被转送到的网络存在比特率缺乏时，网关将不转送非参考图像的编码条NAL单元或者SEI NAL单元。在另一个例子中，现场直播可能一次又一次的地被诸如广告的编码前的内容所打断。预编码剪辑中的第一个内图像被预先传送从而确保在接收机中能够实际接收到该图像。在传输第一个内图像时，始发者并不确切知道在在预编码剪辑的第一个内图像之前有多少NAL单元将按照解码顺序出现。因此，必须在传送它们时估计预编码剪辑中的第一个内图像的NAL单元的DON的值，并且可以会出现DON值的空白。
编码
现在让我们详细考虑编解码处理。来自于视频源3的图像进入编码器1并且预先存储在编码前缓冲器1.1中。编码处理不需要在第一图像进入到编码缓冲器1.1之后立即开始，可以在编码缓冲器1.1中存在预定数目的图像之后开始。然后编码器1努力从可以被用作参考帧的图像中选择合适的候选帧。编码器1然后执行编码从而形成编码图像。编码图像可以是例如预测图像(P)，双向预测图像(B)，和/或内编码图像(I)。内编码图像可以在不使用任何其他图像的情况下被解码，但是其它类型的图像在被解码之前至少需要一个参考图像。任何上述类型的图像都可以作为参考图像。
编码器最好为图像附上两个时间戳：一个解码时间戳(DTS)和一个输出时间戳(OTS)。解码器可以使用时间戳来确定正确的解码时间和输出(显示)图像的时间。但是，这些时间戳不一定被传送到解码器或者解码器不使用时间戳。
编码器还在最低层0之上的一个或者多个层上形成子序列。层0上的子序列能够独立解码，但是高层的图像取决于一些较低层的图像。在附图6a所示的例子中存在两个层：层0和层1。图像I0，P6和P12属于层0，而附图6a中所示的其它图像P1-P5，P7-P11属于层1。有利的是，编码器形成图像组(GOP)从而使得一个GOP中的每个图像能够仅使用相同GOP中的图像重建。换句话说，一个GOP包含至少一个独立解码图像，该独立解码图像是所有其它图像的参考图像或者是参考图像链中的第一个参考图像。在附图7所示的例子中，存在两个独立的图像组。第一个独立图像组包括层0的图像10(0)，P1(0)，P3(0)，层1上的图像B2(0)，2×B3(0)，B4(0)，2×B5(0)，B6(0)，P5(0)，P6(0)。第二独立图像组包括层0的图像10(1)和P1(1)以及层1上的图像2×B3(1)和B2(1)。每个独立图像组中的层1上的图像进一步被配置成子序列。第一独立图像组的第一子序列包括图像B3(0)，B2(0)，B3(0)，第二子序列包括图像B5(0)，B4(0)，B5(0)，第三子序列包括图像B6(0)，P5(0)，P6(0)。第二独立图像组的子序列包括图像B3(1)，B2(1)，B3(1)。扩号内的数字表示为该图像所属的独立图像组定义的视频序列ID。
为每个图像传送视频序列ID。其可以在视频比特流中例如补充增强信息数据传输。视频序列ID也能够在传输协议的报头字段传输，例如在JVT编码标准的RTP负载报头中。依照目前对独立GOP的分割，视频序列ID可以被存储在视频文件格式的元数据中，例如在MPEG-4 AVC文件格式中。
下文将简要描述用于表示视频比特流中的解码顺序信息的另一个优选方法。编码器将解码顺序编号(DON)初始化为一个合适的开始值，例如0。这里假设一种具有一个最大值的循环递增计数方案。如果，例如解码顺序编号是16比特无符号整数，最大值是65535。编码器根据基础编码图像形成一个或者多个NAL单元。编码器能够为相同图像的每个NAL单元定义相同的解码顺序编号，并且如果存在冗余编码图像(高层的子序列)，编码器能够为这些冗余编码图像的NAL单元指派一个不同的DON。当整个基础编码图像和其可能的冗余编码图像被编码时，编码器开始按照解码顺序处理下一基础编码图像。如果解码顺序编号的值小于所述的最大值，编码器最好将解码顺序编号增加1。如果解码顺序编号具有最大值，编码器将解码顺序值设置为最小值，最好为0。然后，编码器根据所述的下一个基础编码图像形成NAL单元，并且将它们指派为解码顺序编号的当前值。如果分别存在相同基础编码图像的任何冗余编码图像，它们也被转换成NAL单元。操作继续，直到所有的基础编码图像以及每个冗余编码图像(如果存在的话)都被处理。传输设备在所有图像都被处理之前可以开始传输NAL单元。
如果编码器知道远端解码器不能以任意的顺序(即，不按照光栅扫描顺序)处理接收的条，编码器应当为光栅扫描顺序中的基础编码图像的每个条指派一个递增的DON值。就是说，如果在单独NAL单元中传送一个条，则每个连续的NAL单元具有不同的DON值。如果该条作为一个数据分割NAL单元传送，则条的每个数据分割NAL单元共享相同的DON值。对于一个冗余编码图像的条，编码器为DON指派一个大于相应的基础编码图像的相应条的DON值。
在接收机中，解码顺序编号能够被用于确定编码图像的正确解码顺序。
附图11a和11b描述了能够应用于本发明的NAL包格式的例子。所述包包括一个报头11和一个负载部分12。报头11最好包括一个误差指示符字段11.1(F，禁止)，一个优先级字段11.2，以及一个类型字段11.3。误差指示符字段11.1表明一个无比特误差的NAL单元。最好是，当设置误差指示符字段时，提醒解码器比特误差可能出现在负载或者NALU类型字节中。不能处理比特误差的解码器会放弃这些包。优先级字段11.2被用于表明封装在包的负载部分12的图像的重要性。在一个应用例子中，优先级字段可以具有以下的四个不同的值。值00表示NALU的内容没有被用于重建参考图像(可以用作未来的参考)。这种NALU可以被放弃并且不会存在参考图像不完整的风险。00之上的值表示NALU的解码需要保持参考图像的完整性。而且，00之上的值表示相对的传输优先级，由编码器确定。智能网络元件能够使用该信息为更为重要的NALU提供更好的保护。11是最高的传输优先级，其次是10，01，00是最低的。
NALU的负载部分12包括至少一个视频序列ID字段12.1，一个场表示符12.2，一个尺寸字段12.3，时间信息12.4，以及编码图像信息12.5。视频序列ID字段12.1被用于存储该图像所属的视频序列编号。场表示符12.2被用于表示在使用两帧图像格式时，该图像是第一帧还是第二帧。两帧都被编码为独立的图像。第一场表示符等于1表明NALU属于一个编码帧或者位于解码顺序中相同帧的第二编码场之前的编码场。第一场表示符等于0表明NALU属于位于解码顺序中相同帧的第一编码场之后的编码场。时间信息字段11.3被用于转换与时间相关的信息，如果必须的话。
NAL单元能够在不同种类的包中被传输。在该优选实施例中，不同的包格式包括简单包和集合包。集合包能够进一步被分成单时间集合包和多时间集合包。
根据本发明的简单包包括一个NALU。通过按照RTP顺序拆封简单包形成的NAL单元流应当遵照NAL单元传输顺序。
集合包是负载规范的包集合方案。引入该方案是为了反映两个不同网络类型一有线IP网络(MTU尺寸通常由以太MTU尺寸，约为1500字节限制)，以及基于IP或者非IP(例如H.324/M)的无线网络，其优选地具有254字节或者更小传输单元尺寸-MTU尺寸的显著不同。为了防止两个领域之间的媒体转码，并且为了避免不期望的打包费用，引入了一种包集合方案。
单独时间集合包(STAP)将NALU和一致的NALU时间集合起来。多时间集合包(MTAP)分别与潜在不同的NALU时间集合。定义了两种在NALU时间戳偏移长度上不同的两种不同的MTAP。NALU时间被定义为如果NALU将在其自身的RTP包中传输，RTP时间戳将具有的值。
MTAP和STAP共享下述的根据本发明的一个优选实施例的非限制打包规则。RTP时间戳必须被设置为所有将被集合的NALU的NALU时间的最小值。NALU类型字节中的类型字段必须被按照表1的方式设置为合适的值。如果集合NALU的所有的误差表示符字段是0，误差表示符字段11.1必须被清除，否则，其必须被设置。
表1
  类型   包   时间戳偏移字段长度(以比特为单位)
  0×18   STAP   0
  0×19   MTAP16   16
  0×20   MTAP24   24
集合包的NALU负载包括一个或者多个集合包。集合包能够传输所需的多个集合单元，但是一个集合包中的数据的总数目必须适合于一个IP包，并且可以选择尺寸，使产生的IP包小于MTU尺寸。
只要集合的NALU共享相同的NALU时间，就应当使用单独时间集合包(STAP)。STAP的NALU负载包括视频序列ID字段12.1(例如7比特)，以及位于单独图像集合单元(SPAU)之后的场表示符12.2。单独时间集合包类型B(STAP-B)还包括DON。
根据本说明的视频序列可以是NALU流的任何部分，该部分能够独立于NALU流的其它部分而被解码。
一帧包括被编码为独立图像的两场。第一场表示符等于1表示NALU属与一个编码帧，或者属于解码顺序中相同帧的第二编码场之前的编码场。第一场表示符等于0表示NALU属于解码顺序中相同帧的第一编码场之后的编码场。
单独图像集合单元包括例如16位无符号的尺寸信息，该信息表明位于包括其NALU类型字节的NALU自身之后的下一个NALU的字节尺寸(不包括两个字节，但是包括NALU的NALU类型字节)。
多时间集合包(MTAP)具有与STAP类似的结构。它包括NALU报头字节，以及一个或者多个多图像集合单元。不同MTAP场之间的选择随应用而不同，时间戳偏移的越大，MTAP的灵活性越高，但是费用也越高。
在本说明书中定义了两种不同的多时间集合单元。它们两个都包括例如接下来的NALU的16位无符号尺寸信息(与STAP的尺寸信息相同)。除了这些16比特之外，还包括视频序列ID字段12.1(例如7比特)，场表示符12.2以及该NALU的n比特时间信息，其中n可以是16或者24。时间信息字段必须被设定从而能够通过从MTAP的RTP时间戳增加时间信息来产生MTAP中每个NALU的RTP包的RTP时间戳(NALU时间)。
在另一个替代实施例中，多时间集合包(MTAP)包括NALU报头字节，解码顺序编号基础(DONB)字段12.1(例如16比特)，以及一个或者多个多图像集合单元。在这种情况下，按照以下的方式定义了两个不同的多时间集合单元。它们两个都包括例如随后的NALU的16位无符号尺寸信息(与STAP的尺寸信息相同)。除了这些16比特之外，还具有解码顺序编号变量(DOND)字段12.5(例如7比特)，以及该NALU的n比特时间信息，其中n可以是16或者24。随后的NALU的DON等于DONB+DOND。时间信息字段必须被设置从而能够通过从MTAP的RTP时间戳增加时间信息来产生MTAP中的每个NALU的RTP包的RTP时间戳(NALU时间)。DONB可以包括MTAP的NAL单元中的最小的DON值。
传输
在准备好第一编码图像之后可以立即开始传输和/或存储(以及可选地虚拟解码)编码图像。由于解码顺序和输出顺序不一致，因此该图像不一定是解码器输出顺序中的第一个。
在对视频流的第一图像编码时，可以开始传输。编码图像可选地被存储在编码图像缓冲器1.2中。并且传输可以在稍后的阶段开始，例如，在对视频流的某一部分编码之后。
解码器2也应当以正确的顺序输出解码的图像，例如，通过使用图像顺序计数的排序，并且需要清楚、标准地定义重新排序过程。
解包
解包处理与实施方式相关。因此，下面描述的是一个适当的实施方式的非限制性的例子。也可以使用其它的方案。关于上述算法的最优化方案也是可行的。
在这些解包规则背后的基本概念是从传输顺序到NAL单元传送顺序对NAL单元重新排序。
解码
下面，将描述接收器8的操作。接收器8收集属于一个图像的所有包，并将它们按照合理的顺序排列。顺序的严格性依赖于所应用的方案。接收到的包最好被存储在接收缓冲器9.1中(解码前缓冲器)。接收机8丢弃任何无用的东西，并将剩余的传送到解码器2。通过将它们的负载卸载成携带NALU的单独的RTP包来处理集合包。这些NALU像在单独的RTP包中被接收那样进行处理，以他们在集合包中安排的顺序。
对于存储在缓冲器中的每个NAL单元，包含NAL单元的包的RTP序列编号最好被存储并且与存储的NAL单元相关。而且，包含NAL单元的包类型(简单包或者集合包)被存储并且与每个存储的NAL单元相关。
以下，N为可选的num-reorder-VCL-NAL-units参数(交织深度参数)的值，其指定按照NAL单元传输顺序位于包流中任何VCL NAL单元之前并且按照RTP序列编号顺序或者包含VCL NAL单元的集合包的合成顺序在所述VCL NAL之后的VCL NAL单元的最大数量。如果不出现该参数，可以使用一个0值编号。当初始化一个视频流传送对话时，接收器在向解码器2传输任何包之前，将至少N个VCL NAL单元缓存在接收缓存器9.1中。
当接收缓冲器9.1包括至少N个VCL NAL单元时，从接收缓冲器9.1中移出NAL单元，并且按照下述的顺序将其传送到解码器2，直到缓冲器包含有N-1个VCL NAL单元为止。
以后，令PVSID为传送到解码器的最后的NAL单元的视频序列ID(VSID)。一个STAP中的所有NAL单元共享相同的VSID。NAL被传送给解码器的顺序按照以下的方式指定：如果缓冲器的最旧的RTP序列编号与一个简单包相对应，该简单包中的NALU是NAL单元传输顺序中的下一个NALU。如果缓冲器中的最旧的RTP序列编号与一个集合包相对应，则在按照RTP序列编号顺序传送的集合包中的NALU中恢复NAL单元传输顺序，直到下一个简单包(不包含)。以后将这组NALU称为候选NALU。如果简单包中传送的NALU没有驻留在缓冲器中，则所有的NALU都属于候选NALU。
对于候选NALU中的每个NAL单元，按照以下的方式计算VSID的距离。如果NAL单元的VSID大于PVSID，则VSID距离等于VSID-PVSID。否则，VSID距离等于2^(用于标记VSID的比特数)-PVSID+VSID。NAL单元按照VSID距离的递增顺序被传送到解码器。如果几个NAL单元共享相同的VSID距离，将它们传送到解码器的顺序将遵照在本说明书中定义的NAL单元传输顺序。NAL单元传输顺序能够按照以下描述的方式恢复。
在上文中使用了术语PVSID和VSID。很明显，也可以使用PDON(在NAL单元传输顺序中，集合包的先前的NAL单元的解码顺序编号)和DON(解码顺序编号)。
首先，条和数据分割根据它们的帧编号，RTP时间戳，以及第一场标记与图像相关：共享相同的帧编号，RTP时间戳，以及第一场标记的数值的所有NALU属于相同的图像。SEI NALU，序列参数组NALU，图像参数组NALU，图像分隔NALU，序列NALU的结束，流NALU的结束，填充数据NALU属于传输顺序中下一VCL NAL单元的图像。
其次，图像的传输顺序根据每一图像的nal_ref_idc，帧编号，第一场标记，以及RTP时间戳推断。图像的传输顺序按照帧编号(模运算)递增的顺序。如果几个图像共享相同的帧编号的值，则nal_ref_idc＝0的图像首先被传送。如果几个图像共享相同的帧编号的值，并且它们的nal_ref_idc都等于0，则按照RTP时间戳递增的顺序传送图像。如果两个图像共享相同的RTP时间戳，第一场标记＝1的图像首先被传送。注意这里将基础编码图像以及相应的冗余编码图像被看作是一个编码图像。
第三，如果使用的视频解码器不支持任意条排序，则条和A数据分隔的传输顺序按照条报头中的first_mb_in_slice语法单元递增的顺序。而且，在传输顺序中，在相应的A数据分隔之后，立即传送B和C数据分隔。
下面的附加解包规则可以被用于执行JVT解包器的操作：按照RTP序列编号的顺序将NALU传送给JVT解码器。集合包中携带的NALU在集合包中按照它们的顺序依次呈现。集合包的所有的NALU都在处理下一个RTP包之前被处理。
智能RTP接收机(例如网关)能够识别丢失的DPA。如果发现了丢失的DPA，网关可以决定不发送DPB和DPC部分，因此它们的信息对于JVT解码而言毫无意义。以这种方式，通过放弃无用的包，同时不解析一个复杂的比特流，网络元件能够降低网络负载。
智能接收机可以丢弃NAL参考ldc为0的所有包。但是，如果可能，它们应当处理处理这些包，因为如果放弃了这些包，用户体验也会受到影响。
DPB2.1包含用于存储多个图像的空间。这些空间在描述中也被称为帧存储器。解码器2按照正确的顺序解码接收到的图像。为了这样做，解码器检查接收图像的视频序列ID信息。如果编码器已经为每个独立的图像组自由地选择了视频序列ID，解码器将按照接收图像的顺序解码独立图像组中的图像。如果编码器使用递增(或者递减)数字方案为每个独立图像组定义了视频序列ID，解码器则按照视频序列ID的顺序解码独立图像组。换句话说，具有最小(或最大)的视频序列ID的独立图像组将最先被解码。
本发明可以被实现在多种系统和装置中。包含编码器1和可选的HRD5的传输设备6最好还包括一个传输机7，用于向传输信道4传输编码图像。接收设备8包括一个接收机9，用于接收编码图像，解码器2，和用于在其上显示解码的图像的显示器10。传输信道可以是，例如，一个路上运输通信信道和/或一个无线通信信道。传输设备和接收设备还包括一个或多个能够运行用于根据本发明控制视频流的编码/解码处理的必需步骤的处理器1.2，2.2。因此，根据本发明的方法主要实现为一个处理器的计算机可执行步骤。图像的缓冲可以在设备的存储器1.3，2.3中执行。解码器的程序代码1.4可以被存储在存储器1.3中。解码器的程序代码2.4可以相应地存储在存储器2.3中。

Claims (26)

1.一种用于对编码图像排序的方法，该方法包括为至少两个编码的图像定义视频序列标识，该视频序列标识与对于属于不同视频序列的图像不同。
2.根据权利要求1所述的方法，其中该视频序列标识被编码进图像流中。
3.根据权利要求1所述的方法，包括形成两个或者多个图像组，并且为所述的两个或者多个图像组定义不同的视频序列标识。
4.根据权利要求1所述的方法，包括根据该视频序列标识来确定图像的解码顺序。
5.根据权利要求1所述的方法，包括为所述至少两个编码图像形成图像标识，在传输层传送视频序列标识，并且在视频层传送图像标识。
6.根据权利要求1所述的方法，包括为所述至少两个编码图像定义分离并且不同的视频序列标识。
7.根据权利要求3所述的方法，其中每个图像组中的一个图像是可独立解码的图像，该方法包括形成图像组中的图像的至少一个子序列，其中该子序列的每个图像具有与同一图像组中的可独立解码的图像相同的视频序列标识。
8.根据权利要求1所述的方法，包括根据所述至少两个编码图像中的第一编码图像形成至少一个第一传输单元，并且根据所述至少两个编码图像中的第二编码图像形成至少一个第二传输单元。
9.根据权利要求8所述的方法，其中编码图像包括一个或多个条，所述的第一传输单元包括第一条，所述的第二传输单元包括第二条。
10.一种用于对编码图像排序的设备，该设备包括定义器，用于为至少两个编码的图像定义视频序列标识，该视频序列标识与对于属于不同视频序列的图像不同。
11.根据权利要求10所述的设备，包括编码器，用于将该视频序列标识编码进图像流中。
12.根据权利要求10所述的设备，其中该设备包括形成器，用于形成两个或者多个图像组，以及定义器，用于为所述的两个或者多个图像组定义不同的视频序列标识。
13.根据权利要求10所述的设备，其中该视频序列标识被安排为由解码器用来确定图像的解码顺序。
14.根据权利要求12所述的设备，其中该设备包括形成器，用于为所述至少两个编码图像形成图像标识，以及传送器，用于在传输层传送视频序列标识，并且在视频层传送图像标识。
15.根据权利要求10所述的设备，其中该设备包括定义器，用于为所述至少两个编码图像定义分离并且不同的视频序列标识。
16.根据权利要求12所述的设备，其中每个图像组中的一个图像是可独立解码的图像，该设备包括形成器，用于形成图像组中的图像的至少一个子序列，其中该子序列的每个图像具有与同一图像组中的可独立解码的图像相同的视频序列标识。
17.根据权利要求10所述的设备，其中该设备包括形成器，用于根据所述至少两个编码图像中的第一编码图像形成至少一个第一传输单元，以及根据所述至少两个编码图像中的第二编码图像形成至少一个第二传输单元。
18.根据权利要求17所述的设备，其中编码图像包括一个或多个条，所述的第一传输单元包括第一条，所述的第二传输单元包括第二条。
19.根据权利要求10所述的设备，其中该设备是网关设备。
20.根据权利要求10所述的设备，其中该设备是移动通信设备。
21.根据权利要求10所述的设备，其中该设备是流服务器。
22.根据权利要求10所述的设备，其中该设备是编码器。
23.一种用于对编码图像进行解码以形成解码图像的设备，该设备包括解码器，用于为至少两个编码的图像解码视频序列标识，以及处理器，用于使用所述视频序列标识确定哪个图像属于同一图像组。
24.根据权利要求23所述的设备，其中该设备被安排为解码两个或更多的图像组，其中为所述两个或更多的图像组定义不同的视频序列标识。
25.根据权利要求24所述的设备，其中每个图像组中的一个图像是可独立解码的图像，该设备包括解码器，用于解码图像组中的图像的至少一个子序列，其中该子序列的每个图像具有与同一图像组中的可独立解码的图像相同的视频序列标识。
26.根据权利要求23所述的设备，其中该设备包括解码器，用于对所述至少两个编码图像中的第一编码图像的至少一个第一传输单元、以及所述至少两个编码图像中的第二编码图像的至少一个第二传输单元进行解码。
CN200910179440.7A 2003-02-18 2004-02-17 图像解码方法 Pending CN101668215A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US44818903P 2003-02-18 2003-02-18
US60/448,189 2003-02-18

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN200480004447.0A Division CN100568964C (zh) 2003-02-18 2004-02-17 图像解码方法

Publications (1)

Publication Number Publication Date
CN101668215A true CN101668215A (zh) 2010-03-10

Family

ID=32908554

Family Applications (2)

Application Number Title Priority Date Filing Date
CN200910179440.7A Pending CN101668215A (zh) 2003-02-18 2004-02-17 图像解码方法
CN200480004447.0A Expired - Lifetime CN100568964C (zh) 2003-02-18 2004-02-17 图像解码方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN200480004447.0A Expired - Lifetime CN100568964C (zh) 2003-02-18 2004-02-17 图像解码方法

Country Status (10)

Country Link
US (1) US8532194B2 (zh)
EP (1) EP1595404B1 (zh)
JP (2) JP2006518127A (zh)
CN (2) CN101668215A (zh)
HK (1) HK1088162A1 (zh)
MX (1) MXPA05008405A (zh)
MY (1) MY136056A (zh)
TW (1) TWI293228B (zh)
WO (1) WO2004075554A1 (zh)
ZA (1) ZA200506149B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103168473A (zh) * 2010-10-16 2013-06-19 Lg电子株式会社 数字接收机以及用于处理数字接收机中的3d 内容的方法
CN104661021A (zh) * 2015-02-12 2015-05-27 国家电网公司 一种视频流的质量评估方法和装置
CN107257472A (zh) * 2012-04-23 2017-10-17 Lg 电子株式会社 视频编码方法、视频解码方法以及实现该方法的装置
CN110008728A (zh) * 2019-04-11 2019-07-12 苏州超擎图形软件科技发展有限公司 电子证据防伪方法及装置

Families Citing this family (75)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7003035B2 (en) 2002-01-25 2006-02-21 Microsoft Corporation Video coding methods and apparatuses
US20040001546A1 (en) 2002-06-03 2004-01-01 Alexandros Tourapis Spatiotemporal prediction for bidirectionally predictive (B) pictures and motion vector prediction for multi-picture reference motion compensation
US7154952B2 (en) 2002-07-19 2006-12-26 Microsoft Corporation Timestamp-independent motion vector prediction for predictive (P) and bidirectionally predictive (B) pictures
JP5068947B2 (ja) * 2003-02-18 2012-11-07 ノキア コーポレイション ピクチャの符号化方法
BR0318528A (pt) * 2003-10-09 2006-09-12 Thomson Licensing processo de derivação de modo direto para encobrimento de erros
US20050201471A1 (en) * 2004-02-13 2005-09-15 Nokia Corporation Picture decoding method
US7542435B2 (en) * 2004-05-12 2009-06-02 Nokia Corporation Buffer level signaling for rate adaptation in multimedia streaming
US9124907B2 (en) * 2004-10-04 2015-09-01 Nokia Technologies Oy Picture buffering method
BRPI0516309B1 (pt) * 2004-10-05 2019-07-02 Vectormax Corporation Sistema de vídeo de compressão
US20060080436A1 (en) * 2004-10-07 2006-04-13 Nokia Corporation System and method for multimedia streaming using interleaved packetization
DE102004053877A1 (de) * 2004-11-04 2006-05-18 Mediatek Inc. Verfahren zur Media File Aufnahme und der Wiederherstellung nach einem Stromausfall und entsprechende Geräte
US7751324B2 (en) * 2004-11-19 2010-07-06 Nokia Corporation Packet stream arrangement in multimedia transmission
WO2006106185A1 (en) * 2005-04-07 2006-10-12 Nokia Corporation Buffering in streaming delivery
CN100459717C (zh) * 2005-04-20 2009-02-04 华为技术有限公司 基于h.264的压缩视频传输误码消除方法
EP1908300B1 (en) * 2005-07-25 2018-05-16 Thomson Licensing DTV Method and apparatus for the concealment of missing video frames
KR20070038396A (ko) 2005-10-05 2007-04-10 엘지전자 주식회사 영상 신호의 인코딩 및 디코딩 방법
KR100772868B1 (ko) * 2005-11-29 2007-11-02 삼성전자주식회사 복수 계층을 기반으로 하는 스케일러블 비디오 코딩 방법및 장치
KR101493407B1 (ko) 2005-12-07 2015-02-16 톰슨 라이센싱 기준 프레임 선택 규칙을 사용하는 비디오 에러 은폐를 위한 방법 및 장치
CN105049894B (zh) * 2005-12-08 2018-03-16 维德约股份有限公司 用于视频通信系统中的差错弹性和随机接入的系统和方法
US9182228B2 (en) 2006-02-13 2015-11-10 Sony Corporation Multi-lens array system and method
US8767836B2 (en) * 2006-03-27 2014-07-01 Nokia Corporation Picture delimiter in scalable video coding
US8599841B1 (en) 2006-03-28 2013-12-03 Nvidia Corporation Multi-format bitstream decoding engine
US8593469B2 (en) 2006-03-29 2013-11-26 Nvidia Corporation Method and circuit for efficient caching of reference video data
FR2899758A1 (fr) * 2006-04-07 2007-10-12 France Telecom Procede et dispositif de codage de donnees en un flux scalable
US20090180546A1 (en) * 2008-01-09 2009-07-16 Rodriguez Arturo A Assistance for processing pictures in concatenated video streams
DE102006057983A1 (de) * 2006-12-08 2008-06-12 Siemens Ag Verfahren zur Vidoecodierung einer Folge digitalisierter Bilder
CN101543018B (zh) 2007-01-12 2012-12-26 庆熙大学校产学协力团 网络提取层单元的分组格式、使用该格式的视频编解码算法和装置以及使用该格式进行IPv6标签交换的QoS控制算法和装置
CN101622879B (zh) 2007-01-18 2012-05-23 诺基亚公司 以rtp净荷格式传输sei消息
EP2154839B1 (en) * 2007-06-06 2013-05-22 Fujitsu Limited Relay device and terminal
US8605779B2 (en) * 2007-06-20 2013-12-10 Microsoft Corporation Mechanisms to conceal real time video artifacts caused by frame loss
US8477852B2 (en) * 2007-06-20 2013-07-02 Nvidia Corporation Uniform video decoding and display
US8254455B2 (en) 2007-06-30 2012-08-28 Microsoft Corporation Computing collocated macroblock information for direct mode macroblocks
US8849051B2 (en) 2007-09-17 2014-09-30 Nvidia Corporation Decoding variable length codes in JPEG applications
US8502709B2 (en) 2007-09-17 2013-08-06 Nvidia Corporation Decoding variable length codes in media applications
US8718388B2 (en) 2007-12-11 2014-05-06 Cisco Technology, Inc. Video processing with tiered interdependencies of pictures
US8923285B2 (en) * 2008-04-30 2014-12-30 Qualcomm Incorporated Apparatus and methods for transmitting data over a wireless mesh network
JP4950133B2 (ja) * 2008-06-11 2012-06-13 日本放送協会 受信エラー補完型受信機及びプログラム
US8886022B2 (en) 2008-06-12 2014-11-11 Cisco Technology, Inc. Picture interdependencies signals in context of MMCO to assist stream manipulation
US8699578B2 (en) 2008-06-17 2014-04-15 Cisco Technology, Inc. Methods and systems for processing multi-latticed video streams
US8971402B2 (en) 2008-06-17 2015-03-03 Cisco Technology, Inc. Processing of impaired and incomplete multi-latticed video streams
US9307267B2 (en) 2008-12-11 2016-04-05 Nvidia Corporation Techniques for scalable dynamic data encoding and decoding
US8189666B2 (en) * 2009-02-02 2012-05-29 Microsoft Corporation Local picture identifier and computation of co-located information
US8767832B2 (en) * 2009-03-10 2014-07-01 Mediatek Inc. Method and apparatus for processing a multimedia bitstream
JP5072893B2 (ja) 2009-03-25 2012-11-14 株式会社東芝 画像符号化方法および画像復号化方法
JP4947389B2 (ja) * 2009-04-03 2012-06-06 ソニー株式会社 画像信号復号装置、画像信号復号方法、および画像信号符号化方法
US8687685B2 (en) 2009-04-14 2014-04-01 Qualcomm Incorporated Efficient transcoding of B-frames to P-frames
KR101097690B1 (ko) * 2009-04-28 2011-12-22 파나소닉 주식회사 화상 복호 방법 및 화상 복호 장치
US8949883B2 (en) 2009-05-12 2015-02-03 Cisco Technology, Inc. Signalling buffer characteristics for splicing operations of video streams
CN101568027B (zh) * 2009-05-22 2012-09-05 华为技术有限公司 转发视频数据的方法、装置和系统
KR101624649B1 (ko) * 2009-08-14 2016-05-26 삼성전자주식회사 계층적인 부호화 블록 패턴 정보를 이용한 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
KR20110106160A (ko) * 2010-03-22 2011-09-28 (주)인터큐비트 다중 디스플레이를 이용한 초고해상도 영상 재생 시스템
US8700796B2 (en) * 2010-09-22 2014-04-15 Qualcomm Incorporated MAC data service enhancements
CA2817790A1 (en) * 2010-12-31 2012-07-05 Beijing Goland Tech Co., Ltd. Method for h264 transcoding with code stream information reuse
KR101744355B1 (ko) 2011-01-19 2017-06-08 삼성전자주식회사 상호 계층 최적화를 이용한 멀티미디어 데이터 패킷을 송신하는 방법 및 장치
EP2745477B1 (en) * 2011-08-18 2016-04-27 VID SCALE, Inc. Methods and systems for packet differentiation
JP5795525B2 (ja) * 2011-12-13 2015-10-14 日本電信電話株式会社 画像符号化方法，画像復号方法，画像符号化装置，画像復号装置，画像符号化プログラムおよび画像復号プログラム
JP5661206B2 (ja) * 2012-01-31 2015-01-28 シャープ株式会社 生成装置、再生装置、データ構造、生成方法、再生方法、制御プログラム、および記録媒体
CN103379320B (zh) * 2012-04-16 2016-11-23 华为技术有限公司 视频图像码流处理方法和设备
AU2013254214C1 (en) * 2012-04-23 2017-03-02 Sun Patent Trust Encoding method, decoding method, encoding apparatus, decoding apparatus, and encoding and decoding apparatus
CN102752193B (zh) * 2012-05-23 2015-07-29 杭州斯凯网络科技有限公司 一种直播流的快速缓冲方法
JP6019824B2 (ja) * 2012-07-02 2016-11-02 富士通株式会社 動画像符号化装置及び動画像符号化方法ならびに動画像符号化用コンピュータプログラム
US20140010277A1 (en) * 2012-07-09 2014-01-09 Qualcomm, Incorporated Supplemental enhancement information (sei) messages having a fixed-length coded video parameter set (vps) id
US9924164B2 (en) * 2013-01-03 2018-03-20 Disney Enterprises, Inc. Efficient re-transcoding of key-frame-aligned unencrypted assets
US9667959B2 (en) * 2013-03-29 2017-05-30 Qualcomm Incorporated RTP payload format designs
US9350781B2 (en) * 2013-05-31 2016-05-24 Qualcomm Incorporated Single network abstraction layer unit packets with decoding order number for video coding
US9525883B2 (en) * 2013-07-15 2016-12-20 Qualcomm Incorporated Cross-layer alignment of intra random access point pictures
US9654774B2 (en) * 2013-12-12 2017-05-16 Qualcomm Incorporated POC value design for multi-layer video coding
JP2015136060A (ja) * 2014-01-17 2015-07-27 ソニー株式会社 通信装置、通信データ生成方法、および通信データ処理方法
TWI548266B (zh) * 2014-06-24 2016-09-01 愛爾達科技股份有限公司 多媒體檔案儲存系統與相關裝置
US10349129B2 (en) * 2016-09-06 2019-07-09 Vitrotv Hk Ltd Systems and methods for a hardware feedback loop to verify received content has been presented on a display
CN107241325A (zh) * 2017-06-05 2017-10-10 威创集团股份有限公司 一种ip视频超低延时传输方法及装置
US10484714B2 (en) * 2017-09-27 2019-11-19 Intel Corporation Codec for multi-camera compression
US10735826B2 (en) * 2017-12-20 2020-08-04 Intel Corporation Free dimension format and codec
CN113784123B (zh) * 2021-11-11 2022-03-15 腾讯科技（深圳）有限公司 视频编码方法和装置、存储介质及电子设备
CN114173207B (zh) * 2021-11-15 2024-02-23 杭州当虹科技股份有限公司 一种视频帧顺序传输的方法和系统

Family Cites Families (86)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5122875A (en) * 1991-02-27 1992-06-16 General Electric Company An HDTV compression system
FR2675951B1 (fr) * 1991-04-23 1997-08-29 Thomson Csf Structure de jonction josephson.
US5387941A (en) * 1991-06-14 1995-02-07 Wavephore, Inc. Data with video transmitter
FR2685489B1 (fr) * 1991-12-23 1994-08-05 Thomson Csf Capteur de champ magnetique faible a effet magnetoresistif.
US5467173A (en) * 1993-02-05 1995-11-14 Konica Corporation Speed control circuit for an optical scanning system driving motor for an image forming apparatus
US5481543A (en) * 1993-03-16 1996-01-02 Sony Corporation Rational input buffer arrangements for auxiliary information in video and audio signal processing systems
US5481643A (en) 1993-03-18 1996-01-02 U.S. Philips Corporation Transmitter, receiver and record carrier for transmitting/receiving at least a first and a second signal component
US5486864A (en) 1993-05-13 1996-01-23 Rca Thomson Licensing Corporation Differential time code method and apparatus as for a compressed video signal
US5398072A (en) * 1993-10-25 1995-03-14 Lsi Logic Corporation Management of channel buffer in video decoders
DE4415729A1 (de) * 1994-05-05 1995-11-09 Thomson Brandt Gmbh Kassettenrecorder zur wahlweisen Aufnahme von Kassetten verschiedener Größe
JPH0865665A (ja) * 1994-08-25 1996-03-08 Hitachi Denshi Ltd 画像圧縮伝送方法および画像圧縮伝送システム
ES2150013T3 (es) 1994-12-28 2000-11-16 Koninkl Philips Electronics Nv Gestion de almacenamiento intermedio en sistemas de compresion variable de transferencia de bits.
US5517250A (en) * 1995-02-28 1996-05-14 General Instrument Corporation Of Delaware Acquisition of desired data from a packetized data stream and synchronization thereto
US5677905A (en) * 1995-03-28 1997-10-14 Bell Atlantic Network Services, Inc. Access subnetwork controller for video dial tone networks
US5877812A (en) * 1995-11-21 1999-03-02 Imedia Corporation Method and apparatus for increasing channel utilization for digital video transmission
US5719632A (en) * 1996-01-25 1998-02-17 Ibm Corporation Motion video compression system with buffer empty/fill look-ahead bit allocation
US5892924A (en) * 1996-01-31 1999-04-06 Ipsilon Networks, Inc. Method and apparatus for dynamically shifting between routing and switching packets in a transmission network
BR9707253A (pt) 1996-01-31 1999-06-01 Ipsilon Networks Inc Processos de transmitir pacetes entre um nó a montante e um nó a jusante em uma rede e de comutar um fluxo em um primeiro nó produto de programa de computador unídade de comutação básica em um sistema para transmitir pacotes em uma rede unidade de porta de comutador e agente de comutação
JP3493872B2 (ja) * 1996-02-29 2004-02-03 ソニー株式会社 画像データ処理方法およびその装置
TW351903B (en) * 1996-07-03 1999-02-01 Matsushita Electric Ind Co Ltd Encoding method, encoding apparatus, decoding and compositing method, decoding and composition appratus, and record medium recorded with the aforesaid methods for multiple images
FR2750769B1 (fr) * 1996-07-05 1998-11-13 Thomson Csf Capteur de champ magnetique en couche mince
US6188700B1 (en) * 1996-11-07 2001-02-13 Sony Corporation Method and apparatus for encoding MPEG signals using variable rate encoding and dynamically varying transmission buffers
WO1998025413A1 (en) * 1996-12-04 1998-06-11 Matsushita Electric Industrial Co., Ltd. Optical disc for high resolution and three-dimensional image recording, optical disc reproducing device, and optical disc recording device
US6011590A (en) * 1997-01-03 2000-01-04 Ncr Corporation Method of transmitting compressed information to minimize buffer space
IL121815A (en) 1997-09-22 2000-09-28 Security 7 Software Ltd Method and system for the identification and the suppression of executable objects
KR100248080B1 (ko) 1997-10-06 2000-03-15 정선종 다자간 멀티미디어 통신에서의 에러제어 방법
CN1123268C (zh) 1997-10-09 2003-10-01 夸尔柯姆股份有限公司 在多址通信系统中执行空闲切换的方法和装置
US7301944B1 (en) * 1997-10-24 2007-11-27 Tranz-Send Broadcasting Network, Inc. Media file distribution with adaptive transmission protocols
FR2771511B1 (fr) * 1997-11-25 2000-02-04 Thomson Csf Capteur de champ magnetique et procede de fabrication de ce capteur
US6625320B1 (en) * 1997-11-27 2003-09-23 British Telecommunications Public Limited Company Transcoding
US6023233A (en) * 1998-03-20 2000-02-08 Craven; Peter G. Data rate control for variable rate compression systems
US6289129B1 (en) 1998-06-19 2001-09-11 Motorola, Inc. Video rate buffer for use with push dataflow
US6526022B1 (en) 1998-06-30 2003-02-25 Sun Microsystems Detecting congestion by comparing successive loss of packets in windows to provide congestion control in reliable multicast protocol
US6573942B1 (en) 1998-08-17 2003-06-03 Sharp Laboratories Of America, Inc. Buffer system for controlled and timely delivery of MPEG-2F data services
JP3552929B2 (ja) * 1998-11-27 2004-08-11 松下電器産業株式会社 復号化装置及び復号化方法
US6496980B1 (en) * 1998-12-07 2002-12-17 Intel Corporation Method of providing replay on demand for streaming digital multimedia
JP2000232649A (ja) * 1998-12-10 2000-08-22 Fujitsu Ltd Ｍｐｅｇビデオ復号器及びｍｐｅｇビデオ復号方法
FR2787197B1 (fr) 1998-12-11 2001-02-23 Thomson Csf Capteur de champ magnetique a magnetoresistance geante
EP1069777A4 (en) * 1999-02-05 2009-03-04 Sony Corp SYSTEMS AND METHODS FOR ENCODING AND DECODING, MULTIPLEXING SYSTEM AND METHOD, AND DISPLAY SYSTEM AND METHOD
US6782490B2 (en) 1999-03-17 2004-08-24 At&T Corp. Network-based service for the repair of IP multicast sessions
US6269080B1 (en) * 1999-04-13 2001-07-31 Glenayre Electronics, Inc. Method of multicast file distribution and synchronization
FI113124B (fi) 1999-04-29 2004-02-27 Nokia Corp Tiedonsiirto
FR2795272B1 (fr) * 1999-06-18 2001-07-20 Thomson Multimedia Sa Procede de commutation de flux mpeg
JP3587092B2 (ja) 1999-07-30 2004-11-10 松下電工株式会社 応答分散式通信方法および通信システム
KR100335057B1 (ko) * 2000-03-08 2002-05-02 구자홍 동영상 수신 장치
US6697426B1 (en) * 2000-03-17 2004-02-24 Koninklijke Philips Electronics N.V. Reduction of layer-decoding complexity by reordering the transmission of enhancement layer frames
CN1290273C (zh) 2000-04-06 2006-12-13 株式会社Ntt都科摩 多点传播传送方法及多点传播传送系统与移动台及基地台
JP3683468B2 (ja) * 2000-04-13 2005-08-17 株式会社エヌ・ティ・ティ・ドコモ マルチキャストサービス提供システムにおける再送制御方法、情報配信装置及び無線端末
US6493388B1 (en) * 2000-04-19 2002-12-10 General Instrument Corporation Rate control and buffer protection for variable bit rate video programs over a constant rate channel
JP2002010216A (ja) * 2000-04-20 2002-01-11 Canon Inc 復号化装置及びその制御方法並びに記憶媒体
JP4407007B2 (ja) * 2000-05-02 2010-02-03 ソニー株式会社 データ送信装置及び方法
US7016970B2 (en) * 2000-07-06 2006-03-21 Matsushita Electric Industrial Co., Ltd. System for transmitting stream data from server to client based on buffer and transmission capacities and delay time of the client
JP3594296B2 (ja) 2000-07-24 2004-11-24 松下電器産業株式会社 動画像符号化データの送信装置および送信方法
FI120125B (fi) * 2000-08-21 2009-06-30 Nokia Corp Kuvankoodaus
US7382796B2 (en) * 2000-12-13 2008-06-03 Visible World, Inc. System and method for seamless switching through buffering
WO2002037763A1 (fr) 2000-11-06 2002-05-10 Matsushita Electric Industrial Co., Ltd. Emetteur, recepteur, et procede de distribution de donnees radiodiffusees
FI118830B (fi) * 2001-02-08 2008-03-31 Nokia Corp Tietovirran toisto
TWI222630B (en) * 2001-04-24 2004-10-21 Matsushita Electric Ind Co Ltd Magnetoresistive element and magnetoresistive memory device using the same
JP2002330379A (ja) * 2001-05-02 2002-11-15 Sony Corp コンテンツ提供装置
JP2002359641A (ja) 2001-05-31 2002-12-13 Matsushita Electric Ind Co Ltd ファイル配信システム、ファイル配信サーバ装置、及び受信クライアント装置
JP4556351B2 (ja) 2001-06-19 2010-10-06 ソニー株式会社 マルチキャスト通信方法およびシステム
US20030031175A1 (en) 2001-08-01 2003-02-13 Masato Hayashi Method of multicasting
US8923688B2 (en) * 2001-09-12 2014-12-30 Broadcom Corporation Performing personal video recording (PVR) functions on digital video streams
US7356079B2 (en) * 2001-11-21 2008-04-08 Vixs Systems Inc. Method and system for rate control during video transcoding
JP2003209576A (ja) * 2002-01-15 2003-07-25 Matsushita Electric Ind Co Ltd マルチキャスト通信方法及びそのシステム
FI114527B (fi) * 2002-01-23 2004-10-29 Nokia Corp Kuvakehysten ryhmittely videokoodauksessa
US7831990B2 (en) * 2002-04-29 2010-11-09 Sony Corporation Generic adaptation layer for JVT video
EP1516449B1 (en) * 2002-06-21 2016-06-22 BRITISH TELECOMMUNICATIONS public limited company Timer-based feedback in multicast communication
AU2003247605A1 (en) * 2002-07-02 2004-01-23 Conexant Systems, Inc. Hypothetical reference decoder for compressed image and video
EP1379085A1 (en) * 2002-07-04 2004-01-07 Deutsche Thomson-Brandt Gmbh Method and device for linking multimedia data
US20040039796A1 (en) * 2002-08-08 2004-02-26 Virtual Radio, Inc. Personalized cyber disk jockey and Internet radio advertising
US7289500B1 (en) * 2003-07-17 2007-10-30 Novell, Inc. Method and system for reliable multicast data transmission
JP5068947B2 (ja) 2003-02-18 2012-11-07 ノキア コーポレイション ピクチャの符号化方法
FR2852400B1 (fr) * 2003-03-14 2005-06-24 Capteur magnetoresistif comprenant un element sensible ferromagnetique/antiferromagnetique
FR2852399B1 (fr) 2003-03-14 2005-07-15 Roulements Soc Nouvelle Capteur magnetoriesistif comprenant un element sensible ferromagnetique/antiferromagnetique
US6873786B2 (en) 2003-05-05 2005-03-29 Thomson Licensing S.A. Reverse trick modes on non-progressive video using special groups of pictures
US7415069B2 (en) * 2003-12-09 2008-08-19 Lsi Corporation Method for activation and deactivation of infrequently changing sequence and picture parameter sets
US20050201471A1 (en) * 2004-02-13 2005-09-15 Nokia Corporation Picture decoding method
US7296205B2 (en) * 2004-02-18 2007-11-13 Nokia Corporation Data repair
JP2007531177A (ja) * 2004-04-02 2007-11-01 Ｔｄｋ株式会社 磁気抵抗ヘッドを安定化させる合成フリー層
US7606008B2 (en) * 2004-04-02 2009-10-20 Tdk Corporation Stabilizer for magnetoresistive head and method of manufacture
JP2007531182A (ja) * 2004-04-02 2007-11-01 Ｔｄｋ株式会社 膜面垂直通電モード磁気抵抗ヘッド用安定化器とその製造方法
US9124907B2 (en) * 2004-10-04 2015-09-01 Nokia Technologies Oy Picture buffering method
JP2007110011A (ja) * 2005-10-17 2007-04-26 Tdk Corp 磁気抵抗効果素子、薄膜磁気ヘッド、薄膜磁気ヘッドのウエハ、ヘッドジンバルアセンブリ、ハードディスク装置、磁気メモリ素子、および磁気センサアセンブリ
US8036070B2 (en) * 2007-11-14 2011-10-11 Centre National De La Recherche Scientifique Magnetic recording device, especially for a hard disk and its manufacturing process
US20090128965A1 (en) * 2007-11-15 2009-05-21 Tomohito Mizuno Cpp magneto-resistive element provided with a pair of magnetic layers and nicr buffer layer

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103168473A (zh) * 2010-10-16 2013-06-19 Lg电子株式会社 数字接收机以及用于处理数字接收机中的3d 内容的方法
CN103168473B (zh) * 2010-10-16 2016-09-28 Lg电子株式会社 数字接收机以及用于处理数字接收机中的3d 内容的方法
CN107257472A (zh) * 2012-04-23 2017-10-17 Lg 电子株式会社 视频编码方法、视频解码方法以及实现该方法的装置
US10511850B2 (en) 2012-04-23 2019-12-17 Lg Electronics Inc. Video-encoding method, video-decoding method, and apparatus implementing same
CN107257472B (zh) * 2012-04-23 2020-05-12 Lg 电子株式会社 视频编码方法、视频解码方法以及实现该方法的装置
US10869052B2 (en) 2012-04-23 2020-12-15 Lg Electronics Inc. Video-encoding method, video-decoding method, and apparatus implementing same
US11330281B2 (en) 2012-04-23 2022-05-10 Lg Electronics Inc. Video-encoding method, video-decoding method, and apparatus implementing same
US11917178B2 (en) 2012-04-23 2024-02-27 Lg Electronics Inc. Video-encoding method, video-decoding method, and apparatus implementing same
CN104661021A (zh) * 2015-02-12 2015-05-27 国家电网公司 一种视频流的质量评估方法和装置
CN104661021B (zh) * 2015-02-12 2017-03-08 国家电网公司 一种视频流的质量评估方法
CN110008728A (zh) * 2019-04-11 2019-07-12 苏州超擎图形软件科技发展有限公司 电子证据防伪方法及装置
CN110008728B (zh) * 2019-04-11 2021-08-24 苏州超擎图形软件科技发展有限公司 电子证据防伪方法及装置

Also Published As

Publication number Publication date
EP1595404B1 (en) 2014-10-22
MXPA05008405A (es) 2005-10-05
TWI293228B (en) 2008-02-01
MY136056A (en) 2008-08-29
US20040228413A1 (en) 2004-11-18
CN1751517A (zh) 2006-03-22
JP5341629B2 (ja) 2013-11-13
EP1595404A1 (en) 2005-11-16
TW200428879A (en) 2004-12-16
JP2006518127A (ja) 2006-08-03
HK1088162A1 (en) 2006-10-27
JP2009260981A (ja) 2009-11-05
ZA200506149B (en) 2006-05-31
US8532194B2 (en) 2013-09-10
CN100568964C (zh) 2009-12-09
WO2004075554A1 (en) 2004-09-02

Similar Documents

Publication Publication Date Title
CN100568964C (zh) 图像解码方法
CN1934865B (zh) 调整编码器和解码器中缓冲器的大小的方法及装置
CN1751518B (zh) 图像编码方法
TWI280059B (en) Picture coding method
CN1801944B (zh) 用于视频编码和解码的方法和设备
FI112147B (fi) Laite kompressoidun videodatan järjestämiseksi häiriöllisen liikennekanavan yli siirtoa varten
MXPA05011533A (es) Metodo de codificacion de imagenes.
CN1856111B (zh) 视频信号编解码方法、编解码器及其相关的设备
CN101611551A (zh) 用于视频通信系统中的差错弹性的改进系统和方法
MXPA06009109A (en) Resizing of buffer in encoder and decoder

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20100310