CN101601297A - 用于对视频序列的画面组进行编码的方法和设备,其中每个组包括一幅帧内编码的画面和两幅以上的预测编码的画面 - Google Patents

用于对视频序列的画面组进行编码的方法和设备,其中每个组包括一幅帧内编码的画面和两幅以上的预测编码的画面 Download PDF

Info

Publication number
CN101601297A
CN101601297A CNA2006800557875A CN200680055787A CN101601297A CN 101601297 A CN101601297 A CN 101601297A CN A2006800557875 A CNA2006800557875 A CN A2006800557875A CN 200680055787 A CN200680055787 A CN 200680055787A CN 101601297 A CN101601297 A CN 101601297A
Authority
CN
China
Prior art keywords
picture
rgop
group
backward
cloth
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2006800557875A
Other languages
English (en)
Other versions
CN101601297B (zh
Inventor
陈衢清
陈志波
顾晓东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
International Digital Madison Patent Holding SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of CN101601297A publication Critical patent/CN101601297A/zh
Application granted granted Critical
Publication of CN101601297B publication Critical patent/CN101601297B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005Reproducing at a different information rate from the information rate of recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/177Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/114Adapting the group of pictures [GOP] structure, e.g. number of B-frames between two anchor frames
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
    • H04N19/66Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience involving data partitioning, i.e. separation of data into packets or partitions according to importance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H04N19/895Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder in combination with error concealment

Abstract

在已知的视频编码标准中,基本上有三类画面:I、P和B。视频序列通常以画面组(GOPi)的结构来编码,其中,将一些P或B画面在一幅I画面之后编码。然而,此GOP结构在差错复原和存储介质记录方面具有某些弱点。如果P画面丢失(例如由于传输通道差错),则后续的P画面不能正确重建,并且差错将沿时间传播并引起不愉快的缺陷。此GOP结构被设计为仅仅适用于向前播放,而反向播放操作很复杂。根据本发明,可反向的GOP结构用于视频编码和解码。RGOP结构包括两条编码链,即向前编码链和向后编码链。RGOP结构中的每幅画面仅被分配至这些链中的一条,并且相邻的RGOP链的视频画面是交错的。

Description

用于对视频序列的画面组进行编码的方法和设备,其中每个组包括一幅帧内编码的画面和两幅以上的预测编码的画面
技术领域
本发明涉及一种用于对视频序列的画面组进行编码的方法和设备,其中每个所述组包括一幅帧内编码的画面和使用向前预测以及向后预测的两幅以上的预测编码的画面。
背景技术
在已知的MPEG/H.26x视频编码标准(例如,MPEG-1、MPEG-2、MPEG-4、MPEG-4AVC/H.264、H.263、VC-1)中,基本上有三类画面:I(帧内(intraframe)编码)画面、P(帧间(interframe)编码)画面以及B(双向预测)画面。I画面不使用其它画面作为参考,使其可以在易于出错的视频传输中用作为再同步点(re-synchronisation-point)。I画面也可以用作视频编辑和快速向前/向后播放中的随机访问点。P画面可以使用一幅或多幅之前的画面来作为参考,这样,由于预测而增加了编码效率。B画面可以使用之前和之后的画面来预测,并进一步提高编码效率。
如图1中所示,视频序列通常以画面组(group of picture)(GOP)结构来编码,其中,在一幅I画面之后对多幅P(P1、P2、P3)和/或B画面进行编码。然而,该GOP结构有一些缺点,尤其在下述的两种应用中:
a)差错复原(error resilience)
如果画面P1丢失(例如,由于传输通道差错),那么随后的P画面不能被正确地重建,且差错将沿时间传播,并引起一些不愉快的缺陷(artefact)。尽管在解码器侧可以采用差错消除,但由于丢失了某些重要信息,所以不能非常好的去除缺陷。
b)例如在DVD或VCR上的存储介质记录
DVD(数字通用磁盘)或VCR(录像机)通常需要类似于向前、向后、停止、暂停、快速向前、快速向后和随机访问的功能。然而,已知的MPEG GOP结构被设计为仅用于向前播放,而反向播放操作很复杂。仅仅通过向后方向访问I画面即可实现简单的快速向后播放,但是如果期望平滑的一幅画面接一幅画面地反向播放,则需要更大的复杂性、带宽、和/或存储器缓冲区。例如,人们可以对GOP进行解码至当前帧,然后回退以再次从GOP开始解码至将要显示的下一帧。然而,这需要高带宽的吞吐量。否则,如果期望比特流仅被解码一次,则需要大量的存储器缓冲。
已经提出了一些不同的GOP结构以解决上述问题。对于差错复原,在S.Wenger,、G.Knorr、J.Ott、F.Kossentini的″Error ResilienceSupport in H.263+″,IEEE Transactions on Circuits and Systems forVideo Technol-ogy,Vol.8,No.7,November 1998(用于H.263+编码译码应用)中已经提出了视频冗余编码方法。此方法以下列方式将视频序列划分为两条或更多的链:每幅画面均被分配至这些链中的一条。每条链独立编码。在图2中示出了使用两条预测链的GOP结构。在这些链中的一条由于数据包丢失而损坏的情况下,剩下的链仍保持完好并且可以被解码和显示。可以通过使用其它未损坏链中的信息继续对损坏的链进行解码,或者进行一些差错消除,这仅导致轻微的主观质量(subjective quality)减退。也可以停止对损坏链的解码,而这仅导致帧速度的降低,这对主观质量的影响要比其它的差错缺陷小。两种情况下作为结果的差错复原性能均比图1中的GOP预测结构更好。然而,此结构不支持反向播放的功能。
对于反向播放,C.W.Lin、J.Zhou、J.Youn、M.T.Sun在″MPEG Video Streaming with VCR Functionality″,IEEE Transac-tions on Circuits and Systems for Video Technology,Vol.11,No.3,March 2001中已经提出了,在服务器中,即,在编码过程中加入反向编码比特流。一旦完成了编码并且到达视频序列的最后画面,视频画面就以反向顺序编码,从而产生反向编码比特流。如果服务器仅有向前编码比特流(即,原始序列不可得),则每次沿反向方向(即,从最后GOP至第一GOP)将向前比特流解码至两幅GOP,然后,以反向顺序重新对视频序列进行编码。离线执行反向编码比特流的生成。然而,每幅画面被编码了两次并因此比特流大小几乎翻倍。
T.Fang、L.P.Chau在″An error-resilient GOP structure for robustvideo transmission″,IEEE Transactions on Multimedia,Vol.7,No.6,December 2005中已经提出了一种新的GOP结构,其考虑了差错复原和VCR反向播放。通过将I画面(In)放置在每个GOP的中间,经预测的P画面被分为两个部分:如图3中相应的GOP结构(没有B画面)所示,它们中的一半(Pn-1,…Pm+i+1)被向后预测(backward-predicted)编码,而它们的另一半(Pn+1,…Pn+j)被向前预测(forward-predicted)编码。下标是原始视频序列中画面的时间编号,在原始视频序列中下标按照i>1,n-1>m+i+1,j>1,和k-1>n+j+1单调递增。如果包括了B画面,将不会在实质上影响该结构。显然地,如果一幅P画面被破坏,至多将仅仅影响GOP的一半,而排列在画面In的另一侧的GOP的另一半将不会受影响。事实上,此GOP结构是两条预测链的另一种形式,其中,一条链向前而另一条向后。
一方面,由于GOP中P帧的一半已经被反向编码,所以此GOP结构使反向播放变得相对容易。另一方面,该GOP结构在差错复原和反向播放这两方面仍然具有缺点。如果丢失了Pm+1,则Pm+1至Pm+i均被破坏,且在这个时间段内将会注意到差错缺陷。尽管画面链Pn-1至Pm+i+1可以被正确地接收,但其不会有助于对时间段Pm+1至Pm+i内的画面进行解码。因此,此GOP结构不能提供如图2中所描述的GOP结构那样的差错复原性能。此外,此GOP结构不能提供连续的反向播放功能,因为连续P帧的一半仍然是向前编码的。详细来说,反向播放的处理顺序为:Ik→Pk-1→…→Pn+j+1→In→Pn-1→…→Pm+i+1→Im…。因此,在Pn+j至Pn+1和Pm+i至Pm+1之间有空隙,这将在反向播放中引起大的抖动。如果确实需要显示从Pn+j至Pn+1和从Pm+i至Pm+1的画面,这就需要常规的多通道解码或巨量缓冲,这与标准GOP结构中的问题相同。
发明内容
本发明将要解决的问题是提供一种GOP结构,其增强视频传输的差错复原并实现流畅的反向播放功能。
此问题由权利要求1和3中所公开的方法解决。在权利要求2和4中披露有使用这些方法的设备。
根据本发明,可反向的GOP(RGOP)结构用于视频编码和解码。RGOP结构包括向前编码链和向后编码链两条链。RGOP结构中的每幅画面仅被分配给这些链中的一条,并且两条链的视频画面是交错的(interleaved)。
此RGOP结构改善了差错复原,因为如果一条预测链被破坏而其它的预测链完好,视频序列仍然能够被解码并流畅显示,而没有任何明显的缺陷,如下面所解释的。此RGOP结构也提供了用于记录应用的简单和流畅的反向播放功能。
本发明的处理的额外代价是编码效率的少量降低,这是由编码中的预测没有使用最近的帧而造成的。但是冗余比特可用于增强差错复原或恢复。
原则上,本发明的编码方法适合于对视频序列的画面组编码,每个所述组包括一幅帧内编码画面和两幅以上的预测编码画面,其中,所述预测编码画面的一部分从所述帧内编码画面开始向后预测编码,而所述预测编码画面的另一部分从所述帧内编码画面开始向前预测编码,由此,在这些向前和向后预测编码画面链中忽略了画面,因而所述视频序列的每两幅相邻画面组以重叠方式排列,使得在当前画面组中的向前和向后预测编码画面链中的所述丢失的画面以交错的方式包括在一个所述的相邻重叠画面组之中。
原则上,本发明的编码设备适合于对视频序列的画面组编码,每个所述组包括一幅帧内编码画面和两幅以上的预测编码画面,所述设备包括用于将所述预测编码画面的一部分从所述帧内编码画面开始向后预测编码、以及用于将所述预测编码画面的另一部分从所述帧内编码画面开始向前预测编码的装置,由此,在这些向前和向后预测编码画面链中忽略了画面,因而所述视频序列的每两个相邻画面组以重叠的方式排列,使得在当前画面组中的向前和向后预测编码画面链中的所述丢失的画面以交错的方式包括在一个所述相邻重叠画面组之中。
原则上,本发明的解码方法适合于对视频序列的画面组解码,每个所述组包括一幅帧内编码画面和两幅以上的预测编码画面,其中,所述预测编码画面的一部分从所述帧内编码画面开始向后预测编码,而所述预测编码画面的另一部分从所述帧内编码画面开始向前编码,并且所述画面的所述解码以对应的顺序进行,由此,在这些向前和向后预测编码画面链中忽略了画面,因而所述视频序列的每两个相邻画面组以重叠的方式排列,使得在当前画面组中的向前和向后预测编码画面链中的所述丢失的画面以交错的方式包括在一个所述相邻重叠画面组中,并且在所述解码中,将对应的解码画面以所述视频序列的原始画面顺序组合为解码输出信号。
原则上,本发明的解码设备适合于对视频序列的画面组解码,每个所述组包括一幅帧内编码画面和两幅以上的预测编码画面,其中,所述预测编码画面的一部分从所述帧内编码画面开始向后预测编码,而所述预测编码画面的另一部分从所述帧内编码画面开始向前预测编码,由此,在这些向前和向后预测编码画面链中忽略了画面,因而所述视频序列的每两个相邻画面组以重叠的方式排列,使得在当前画面组中的向前和向后预测编码画面链中的所述丢失的画面以交错的方式包括在一个所述相邻重叠画面组中,所述设备包括用于以对应的顺序对所述画面组的画面解码,并将对应的解码画面以所述视频序列的原始画面顺序组合成为解码输出信号的装置。
对应的从属权利要求中披露了本发明的有利的其它实施例。
附图说明
参考附图描述本发明的示例性实施例,在图中示出了:
图1示出了典型的MPEG GOP结构;
图2示出了具有两个预测链的已知的GOP结构;
图3示出了其中I画面排列在GOP中间的已知的GOP结构;
图4示出了本发明的RGOP结构;
图5示出了本发明的RGOP结构的另一实例;
图6示出了具有不规则交错的本发明的RGOP结构;
图7示出了包含有B画面的本发明的RGOP结构;
图8示出了本发明的编码器的实例;
图9示出了本发明的解码器的实例;
具体实施方式
在RGOP结构中,一组时间上连续的画面被交错地重新调度(re-schedule)为两条预测链。即,画面的一半通过从前一I画面开始的预测而被向前编码,而剩下的画面通过从后一I画面开始的预测而被向后编码。优选地,在向前编码画面的比特流之后发送反向画面的比特流,从而形成新的RGOP。
在图4中示出了一种典型的RGOP结构。在原始的视频序列中包含画面Im、Pm+1、Pm+2、Pm+3、Pm+4、…、Pn-2、Pn-1、In、Pn+1、Pn+2、Pn+3、Pn+4、…、Pk-2、Pk-1、Ik、…,并具有两幅GOP的长度,选择画面Pm+2、Pm+4、…、Pn-1用于从画面In开始向后方进行的反向预测编码链,而选择画面Pn+1、Pn+3、…、Pk-2用于从画面In开始向前方进行的向前预测编码链。这两条链一起构建了新的RGOPi
相应地,画面Pm+1、Pm+3、…、Pn-2形成了前一RGOPi-1中的向前预测编码链,而画面Pn+2、Pn+4、…、Pk-1形成了下一RGOPi+1中的向后预测编码链,即,每个RGOP包括向后预测编码链以及向前预测编码链。邻近的RGOP和它们的画面是交错的,即,在视频序列的GOP长度部分之内,每隔一幅的画面属于当前RGOPi而其中间的画面属于对应的相邻RGOPi-1或RGOPi+1
每个RGOP的比特流包括I画面、向后预测编码链、以及向前预测编码链。这可以表示为{I,{向后预测编码链},{向前预测编码链}}。对于图4的情况,传输顺序为:
{RGOPi-2},{Im,{…},{Pm+1,Pm+3,…,Pn-2}},
{In,{Pn-1,…,Pm+4,Pm+2},{Pn+1,Pn+3,…,Pk-2}},
{Ik,{Pk-1,…,Pn+4,Pn+2},{…}},{RGOPi+2}。
对于差错复原或恢复,如果在一条预测链中的一幅画面(例如Pm+1)丢失了,则随后进入下一个GOP中的下一幅I画面(例如In),并随后向后或反向解码。因此,可以对Pn-1、…、Pm+4、Pm+2进行正确解码。通过使用这些正确解码的画面,画面{Pm+1,Pm+3,…,Pn-2}可以通过差错消除或插值法来更好地恢复。即使没有使用差错消除算法,也可以显示帧速率较低的序列{Pm+2,Pm+4,…,Pn-1}作为替代,而不会产生很多令人烦恼的缺陷。
此外,此RGOP结构具有良好的容量,以克服广泛出现在无线传输中的突发差错。在时间方向上连续的画面Pm+1、Pm+2、Pm+3、Pm+4、…、Pn-2被分配给不同的RGOP,使得在{Pm+1、Pm+3、…、Pn-2}和{Pn-1、…、Pm+4、Pm+2}的传输之间有延时。当一条预测链中发生突发差错时,其它的链通常是完好的,因而几乎可以完全保持解码后的视频序列的质量。
并且,由于包括了向前预测链和向后预测链,所以本发明的RGOP结构可以容易地提供向前播放和反向播放。
图5描述了本发明的RGOP结构的第二实施例,该RGOP结构具有与图4中描述的相同的特征。画面{Pm+2,Pm+4,…,Pn-1}和{Pn+2,Pn+4,…,Pk-1}被向前预测编码以形成向前预测链,而画面{Pn-2,…,Pm+3,Pm+1}和{Pk-2,…,Pn+3,Pn+1}被反向预测编码以形成向后预测链。传送顺序为:
{RGOPi-2},{Im,{…},{Pm+2,Pm+4,…,Pn-1}},{In,{Pn-2,…,Pm+3,Pm+1},{Pn+2,Pn+4,…,Pk-1}},{Ik,{Pk-2,…,Pn+3,Pn+1},{…}},{RGOPi+2}。
图6示出了发明性RGOP结构,在该结构中,交错是不规则的。即,向前预测链中的画面数量大于向后预测链中的画面数量。画面{Pm+1,Pm+2,Pm+4,Pm+5,…,Pk-3,Pk-2}被向前预测编码以形成向前预测链,而画面{Pk-1,…,Pm+6,Pm+3}被反向预测编码以形成向后预测链。此结构对向前播放比反向播放更有利。向前编码画面与反向编码画面的比例可以根据应用需求而变化。
可以在向前预测和向后预测链的每一个中采用多重参考帧。但是在向前预测链中的画面不能根据向后预测链画面来预测,反之亦然。
本发明的RGOP结构可以推广至视频序列包括B画面的情况。图7中示出了一个实例。这对于差错复原视频编码与DVD和VCR应用来说是有用的。画面{Pm+1,Pm+3,Pm+5,Pm+7,Pm+9…,Pk-2}被向前预测编码以形成向前预测链,而画面{Pk-1,…,Pm+10,Pm+8,Pm+6,Pm+4,Pm+2}被向后预测编码以形成向后预测链。这些链也可以以相应的B画面来开始和/或结束。
图8中的像素块编码器的视频数据输入信号IE包括用于编码的宏模块数据。以对应于图6或图7中所描述的方式来处理画面。对于帧内视频数据的情况,减法器SUB简单地允许这些数据通过。它们在变换(transform)装置T和量化装置Q中处理,并送入熵编码器ECOD,熵编码器输出编码器输出信号OE。例如,ECOD可以实现系数的哈夫曼编码(Huffman coding)并加入标题信息和动态矢量数据。对于帧间视频数据的情况,在减法器SUB内,从输入信号IE中减去预测块或宏模块数据PMD,且差值数据通过变换装置T和量化装置Q送入熵编码器ECOD中。Q的输出信号还在反向量化装置QE -1中处理,其输出信号通过反向变换装置TE -1以重建的块或宏模块的差值数据RMDD的形式送入合并器ADDE。ADDE的输出信号缓存在动态估计和补偿装置FS_MC_E中的帧存储器中,其沿图6或7中描述的方向来执行重建的块或宏模块数据的动态补偿,并将以此方式预测的块或宏模块数据PMD输出至SUB的减法输入端以及输出至合并器ADDE的另一输入端。量化装置Q和反向量化装置QE -1可以由编码器缓冲器ENCB的占空等级来控制。ADDE的输出信号作为重建帧数据REC而被编码器COD输出。SUB的输出信号作为残留帧数据RES而被编码器COD输出。
在图9中,编码的像素数据输入信号ID通过熵解码装置EDEC、反向量化装置QD -1和反向变换装置TD -1而作为残留帧数据RES送入合并器ADDD,所述合并器输出重建后像素数据输出信号OD。以对应于图6或图7所描述的方式来处理画面。例如,EDEC可以对系数执行哈夫曼解码并解码和/或估计标题信息和动态矢量数据。QE -1、QD -1、TE -1、TD -1和EDEC具有与Q、T和ECOD功能相对应的逆功能。ADDD的输出信号被缓存在动态补偿装置FS_MC_D的帧存储器中。FS_MC_D按照图6或图7中描述的方向对重建的块或宏模块数据实现动态补偿。在帧间解码块或宏模块数据的情况下,在FS_MC_D中预测的块或宏模块数据PMD被送至合并器ADDE的第二输入端。在帧内解码块或宏模块数据的情况下,合并器ADDD简单地传递来自TD -1的输出信号。如果差错信号ES表示向后或向前预测链中的画面(即,至少一幅画面)没有被正确接收,则在对应的预测链中的剩余画面不能被解码,而是使用相邻画面组中对应的交错解码画面来消除或插值,以生成所述视频序列(IE)的丢失输出画面,或者对应的预测链中的剩余画面没有被解码,但是对接下来的帧内编码画面持续解码,且当前链输出信号OD在其帧速率上可以相应调整。
图8和9中的转换和逆转换可以分别是DCT或逆DCT。

Claims (10)

1.一种用于对视频序列(IE)的画面组(RGOPi)进行编码的方法,每个所述组包括一幅帧内编码画面(I)和两幅以上的预测编码画面(P),其特征在于,所述预测编码画面的一部分(Pn-1,Pm+4,...,Pm+2;Pn-2,...,Pm+3,Pm+1)从所述帧内编码画面(In)开始向后预测编码,而所述预测编码画面的另一部分(Pn+1,Pn+3,...,Pk-2;Pn+2,Pn+4,...,Pk-1)从所述帧内编码画面(In)开始向前预测编码,由此,画面在这些向前和向后预测编码画面的链中被忽略,因而所述视频序列的每两个相邻画面组(RGOPi-1,RGOPi;RGOPi,RGOPi+1)以重叠方式排列,使得在当前画面组(RGOPi)中的所述向前和向后预测编码画面链中丢失的所述画面(Pn-2,...,Pm+3;Pn+2,Pn+4;Pn-1,...,Pm+4;Pn+1,Pn+3)以交错的方式包含在相邻重叠的所述画面组(RGOPi-1;RGOPi+1)中的一个中。
2.一种用于对视频序列(IE)的画面组(RGOPi)进行编码的设备,每个所述组包括一幅帧内编码画面(I)和两幅以上的预测编码画面(P),所述设备包括用于从所述帧内编码画面(In)开始对所述预测编码画面的一部分(Pn-1,Pm+4,...,Pm+2;Pn-2,...,Pm+3,Pm+1)进行向后预测编码,以及用于从所述帧内编码画面(In)开始对所述预测编码画面的另一部分(Pn+1,Pn+3,...,Pk-2;Pn+2,Pn+4,...,Pk-1)进行向前预测编码的装置(SUB、T、Q、QE -1、TE -1、ADDE、FS_MC_E、ECOD),由此,画面在这些向前和向后预测编码画面的链中被忽略,因而所述视频序列的每两个相邻画面组(RGOi-1,RGOPi;RGOPi,RGOPi+1)以重叠方式排列,使得在当前画面组(RGOPi)中的所述向前和向后预测编码画面链中丢失的所述画面(Pn-2,...,Pm+3;Pn+2,Pn+4;Pn-1,...,Pm+4;Pn+1,Pn+3)以交错的方式包含在相邻重叠的所述画面组(RGOPi-1;RGOPi+1)中的一个中。
3.一种用于对视频序列(IE)的画面组(RGOPi)进行解码的方法,每个所述画面组包括一幅帧内编码画面(I)和两幅以上的预测编码画面(P),其中,所述预测编码画面的一部分(Pn-1,Pm+4,...,Pm+2;Pn-2,...,Pm+3,Pm+1)从所述帧内编码画面(In)开始向后预测编码,而所述预测编码画面的另一部分(Pn+1,Pn+3,...,Pk-2;Pn+2,Pn+4,...,Pk-1)从所述帧内编码画面(In)开始向前预测编码,并且以对应的顺序执行对所述画面的所述解码,由此,画面在这些向前和向后预测编码画面的链中被忽略,因而所述视频序列的每两个相邻画面组(RGOPi-1,RGOPi;RGOPi,RGOPi+1)以重叠方式排列,使得在当前画面组(RGOPi)中的所述向前和向后预测编码画面链中的丢失的所述画面(Pn-2,...,Pm+3;Pn+2,Pn+4;Pn-1,...,Pm+4;Pn+1,Pn+3)以交错的方式包含在相邻重叠的所述画面组(RGOPi-1;RGOPi+1)中的一个中,并且在所述的解码中,将对应解码的画面按照所述视频序列(IE)的原始画面顺序组合为经解码的输出信号(OD)。
4.一种用于对视频序列(IE)的画面组(RGOPi)进行解码的设备,每个所述组包括一幅帧内编码画面(I)和两幅以上的预测编码画面(P),其中,所述预测编码画面的一部分(Pn-1,Pm+4,...,Pm+2;Pn-2,...,Pm+3,Pm+1)从所述帧内编码画面(In)开始向后预测编码,而所述预测编码画面的另一部分(Pn+1,Pn+3,...,Pk-2;Pn+2,Pn+4,...,Pk-1)从所述帧内编码画面(In)开始向前预测编码,由此,画面在这些向前和向后预测编码画面的链中被忽略,因而所述视频序列的每两个相邻画面组(RGOPi-1,RGOPi;RGOPi,RGOPi+1)以重叠方式排列,使得在当前画面组(RGOPi)中的所述向前和向后预测编码画面链中的丢失的所述画面(Pn-2,...,Pm+3;Pn+2,Pn+4;Pn-1,...,Pm+4;Pn+1,Pn+3)以交错的方式包含在相邻重叠的所述画面组(RGOPi-1;RGOPi+1)中的一个中,所述设备包括用于以对应的顺序对所述画面组的画面进行解码,并将对应解码的画面按照所述视频序列(IE)的原始画面顺序组合为经解码的输出信号(OD)的装置(EDEC,QD -1,TD -1,ADDD,FS_MC_D)。
5.根据权利要求1或3所述的方法,或根据权利要求2或4所述的设备,其中,所述交错是不规则的。
6.根据权利要求1或3所述的方法,或根据权利要求2或3所述的设备,其中,所述向前和向后预测编码画面链包括双向预测编码画面(B)。
7.根据权利要求3、5或6中任一项所述的方法,或根据权利要求4至6中任一项所述的设备,当接收所述向前或向后预测编码画面链中的至少一幅画面有错误时,不对对应的预测链中的剩余画面进行解码,而继续对随后的帧内编码画面(In,Ik)进行解码。
8.根据权利要求7所述的方法或设备,其中,对应地调整所述解码输出信号(OD)的帧速率。
9.根据权利要求3、5或6中任一项所述的方法,或根据权利要求4至6中任一项所述的设备,当接收所述向后或向前预测编码画面链中的至少一幅画面有错误(ES)时,不对对应的预测链中的剩余画面进行解码,而进行消除(CONC)或使用相邻画面组(RGOPi)的对应交错解码画面来插补。
10.存储介质,例如光盘,所述存储介质包括或存储或已经在所述存储介质上记录有根据权利要求1、5和6中任一项所述的方法来编码的数字视频信号。
CN2006800557875A 2006-09-07 2006-09-07 用于对视频序列的画面组进行编码的方法和设备 Active CN101601297B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2006/002308 WO2008031263A1 (en) 2006-09-07 2006-09-07 Method and apparatus for encoding groups of pictures of a video sequence, each of said groups including an intra encoded picture and more than two predicted encoded pictures

Publications (2)

Publication Number Publication Date
CN101601297A true CN101601297A (zh) 2009-12-09
CN101601297B CN101601297B (zh) 2011-09-14

Family

ID=39183346

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2006800557875A Active CN101601297B (zh) 2006-09-07 2006-09-07 用于对视频序列的画面组进行编码的方法和设备

Country Status (6)

Country Link
US (1) US8335252B2 (zh)
EP (1) EP2060120A4 (zh)
JP (1) JP5190059B2 (zh)
KR (1) KR101345073B1 (zh)
CN (1) CN101601297B (zh)
WO (1) WO2008031263A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102970616A (zh) * 2012-12-04 2013-03-13 华为技术有限公司 一种传输视频的方法及装置
JPWO2017006538A1 (ja) * 2015-07-07 2017-07-06 パナソニックIpマネジメント株式会社 撮像装置および静止画像生成方法

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8831402B2 (en) 2008-06-16 2014-09-09 Telefonaktiebolaget Lm Ericsson (Publ) Media stream processing
US20170055001A1 (en) * 2014-05-08 2017-02-23 Mitsubishi Electric Corporation Image encoding apparatus and image decoding apparatus
CN109819317A (zh) * 2019-01-07 2019-05-28 北京奇艺世纪科技有限公司 一种视频处理方法、装置、终端和存储介质

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2671820B2 (ja) * 1994-09-28 1997-11-05 日本電気株式会社 両方向予測方法及び両方向予測装置
US5510844A (en) * 1994-11-18 1996-04-23 At&T Corp. Video bitstream regeneration using previously agreed to high priority segments
JPH1198513A (ja) 1997-09-18 1999-04-09 Toshiba Corp 動画像符号化/復号化装置
JP3022492B2 (ja) * 1998-06-17 2000-03-21 松下電器産業株式会社 映像信号圧縮符号化装置
GB2343321B (en) * 1998-11-02 2003-03-26 Nokia Mobile Phones Ltd Error concealment in a video signal
JP4018859B2 (ja) * 2000-01-19 2007-12-05 パイオニア株式会社 情報再生装置
GB2364459B (en) * 2000-06-30 2004-03-31 Nokia Mobile Phones Ltd Video error resilience
US6816552B2 (en) * 2001-07-11 2004-11-09 Dolby Laboratories Licensing Corporation Interpolation of video compression frames
FI114527B (fi) * 2002-01-23 2004-10-29 Nokia Corp Kuvakehysten ryhmittely videokoodauksessa
KR100959573B1 (ko) * 2002-01-23 2010-05-27 노키아 코포레이션 비디오 코딩시 이미지 프레임들의 그루핑
JP4010889B2 (ja) * 2002-07-01 2007-11-21 富士フイルム株式会社 記録ヘッドおよび画像記録方法ならびに画像記録装置
EP1383334B1 (en) * 2002-07-17 2012-02-01 Panasonic Corporation Video data transmitting apparatus, video data receiving apparatus, and broadcasting system
US7302105B2 (en) * 2002-07-22 2007-11-27 Canon Kabushiki Kaisha Moving image coding apparatus, moving image decoding apparatus, and methods therefor
US7024098B2 (en) 2003-05-05 2006-04-04 Thomson Licensing Reverse trick modes on progressive video using special groups of pictures
US6873786B2 (en) * 2003-05-05 2005-03-29 Thomson Licensing S.A. Reverse trick modes on non-progressive video using special groups of pictures
US20040223735A1 (en) 2003-05-05 2004-11-11 Shu Lin Forward trick modes on non-progressive video using special groups of pictures
EP1633128A1 (en) * 2004-09-02 2006-03-08 Deutsche Thomson-Brandt Gmbh Method and apparatus for decoding encoded groups of pictures of a video sequence and presenting said video sequence and said groups of pictures in temporally backward direction

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102970616A (zh) * 2012-12-04 2013-03-13 华为技术有限公司 一种传输视频的方法及装置
CN102970616B (zh) * 2012-12-04 2015-04-29 华为技术有限公司 一种传输视频的方法及装置
JPWO2017006538A1 (ja) * 2015-07-07 2017-07-06 パナソニックIpマネジメント株式会社 撮像装置および静止画像生成方法

Also Published As

Publication number Publication date
JP5190059B2 (ja) 2013-04-24
KR20090064375A (ko) 2009-06-18
KR101345073B1 (ko) 2013-12-26
US8335252B2 (en) 2012-12-18
CN101601297B (zh) 2011-09-14
EP2060120A1 (en) 2009-05-20
EP2060120A4 (en) 2012-01-04
JP2010503296A (ja) 2010-01-28
US20110044386A1 (en) 2011-02-24
WO2008031263A1 (en) 2008-03-20

Similar Documents

Publication Publication Date Title
EP0542195B1 (en) Interframe predicting method and picture signal coding/decoding apparatus
JP3923898B2 (ja) 画像符号化方法及び装置
JP4584871B2 (ja) 画像符号化記録装置および画像符号化記録方法
KR0151234B1 (ko) 화상재생장치 및 화상복호장치
JP3019912B2 (ja) 画像データ編集装置
JP2001245305A (ja) ディジタル映像データ通信システムにおけるエラー伝播抑制のための送受信データの処理方法及びこのための記録媒体
JP4666255B2 (ja) 符号化データ選定、符号化データ設定、再符号化データ生成及び再符号化の方法及び装置
WO2009052697A1 (en) A dual prediction video encoding and decoding method and a device
CN101601297B (zh) 用于对视频序列的画面组进行编码的方法和设备
JPH0759085A (ja) 強制イントラフレーム符号化方法
WO2008151564A1 (en) Encoding and decoding method, encoder and decoder, and image processing system
KR100987911B1 (ko) 디지털 비디오 부호화를 위한 가변 정확도 화상간 타이밍지정 방법 및 장치
CN101127900A (zh) 利用基本层的图像信号的编码/解码方法及装置
JP3245496B2 (ja) 画像符号化方法、画像符号化回路、画像符号化装置及び再生装置
US9591319B2 (en) Video encoder
JP3663661B2 (ja) 映像信号再生装置、映像信号復号化装置及び方法
JP4291185B2 (ja) トランスコーディング方法、トランスコーダ及びプログラム
JP3891198B2 (ja) 復号装置及び方法、並びに伝送装置及び方法
JP3821714B2 (ja) 動画像符号化装置および動画像記録再生装置
JP2005159832A (ja) 信号処理装置
KR100459274B1 (ko) 영상 압축 및 복원방법과 그 장치
KR100237307B1 (ko) 엠펙(mpeg) 비디오 신호 복호화기의 2배속 재생장치
van Gassel et al. MPEG-2 compliant trick play over a digital interface
JP4642055B2 (ja) 動画符号化装置、及び動画記録再生装置
JP3465660B2 (ja) ビデオ信号復号化方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP02 Change in the address of a patent holder
CP02 Change in the address of a patent holder

Address after: I Si Eli Murli Nor, France

Patentee after: THOMSON LICENSING

Address before: French Boulogne

Patentee before: THOMSON LICENSING

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190131

Address after: Paris France

Patentee after: International Digital Madison Patent Holding Co.

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING

Effective date of registration: 20190131

Address after: I Si Eli Murli Nor, France

Patentee after: THOMSON LICENSING

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING