CN1910925A - 编码和解码视频比特流的方法和装置 - Google Patents

编码和解码视频比特流的方法和装置 Download PDF

Info

Publication number
CN1910925A
CN1910925A CNA2005800027554A CN200580002755A CN1910925A CN 1910925 A CN1910925 A CN 1910925A CN A2005800027554 A CNA2005800027554 A CN A2005800027554A CN 200580002755 A CN200580002755 A CN 200580002755A CN 1910925 A CN1910925 A CN 1910925A
Authority
CN
China
Prior art keywords
video
bit stream
redundancy
frame
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2005800027554A
Other languages
English (en)
Inventor
申成撤
李钟元
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN1910925A publication Critical patent/CN1910925A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
    • H04N19/64—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets characterised by ordering of coefficients or of bits for transmission
    • A—HUMAN NECESSITIES
    • A41—WEARING APPAREL
    • A41D—OUTERWEAR; PROTECTIVE GARMENTS; ACCESSORIES
    • A41D13/00—Professional, industrial or sporting protective garments, e.g. surgeons' gowns or garments protecting against blows or punches
    • A41D13/04—Aprons; Fastening devices for aprons
    • A—HUMAN NECESSITIES
    • A41—WEARING APPAREL
    • A41D—OUTERWEAR; PROTECTIVE GARMENTS; ACCESSORIES
    • A41D15/00—Convertible garments
    • A41D15/04—Garments convertible into other articles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122—Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/162—User input
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • A—HUMAN NECESSITIES
    • A41—WEARING APPAREL
    • A41D—OUTERWEAR; PROTECTIVE GARMENTS; ACCESSORIES
    • A41D2500/00—Materials for garments
    • A41D2500/30—Non-woven

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Textile Engineering (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

提供一种视频编码器、视频编码方法、视频解码器和视频解码方法，用于传输基于根据环境自适应选择的适当压缩方法的压缩视频信号。视频编码器包括：第一编码部分，用于从输入视频帧中移除时间和空间冗余，对通过从输入视频帧中移除时间和空间冗余而产生的变换系数进行量化，并且产生比特流；第二编码部分，用于从输入视频帧中移除空间和时间冗余，对通过从输入视频帧中移除空间和时间冗余而产生的变换系数进行量化，并且产生比特流；和模式选择器，用于将从第一编码部分和第二编码部分输入的比特流相互进行比较，并且仅输出基于比较结果选择的比特流。因此，可以恢复用各种分辨率水平解码的视频帧。

Description

编码和解码视频比特流的方法和装置
技术领域
本发明涉及视频压缩，尤其涉及一种以自适应于环境的高效方式编码和解码视频流的方法和装置。
背景技术
随着包括因特网在内的信息通信技术的发展，包含诸如文本、视频、音频等各种信息的多媒体服务正在增长。由于多媒体数据的量通常较大，因此多媒体数据要求大容量的存储介质和宽的传输带宽。例如，具有640*480分辨率的24位真彩色图像需要640*480*24比特的容量，即，大约每帧7.37Mbit的数据。当以每秒30帧的速度传输该图像时，需要221Mbits/sec的带宽。当存储基于这样图像的90分钟电影时，大约需要1200Gbit的存储空间。因此，压缩编码方法对于传输包括文本、视频和音频的多媒体数据来说是必不可少的。
数据压缩的基本原理在于移除数据冗余(redundancy)。可以通过移除(remove)空间冗余(在图像中重复相同颜色或对象)、时间冗余(在运动图像中相邻帧之间变化很小或者在音频中重复相同的声音)、或者心理视觉冗余(考虑人对高频率的有限感知和视力)来压缩数据。
图1是常规MC-EZBC(运动补偿嵌入式零块编码)视频编码器的方框图。
时间变换单元110移除输入视频帧的时间冗余。时间变换单元110包括运动估计单元112和时间滤波单元114。
运动估计单元112将正被运动估计的当前帧的各个块与对应于当前帧的块的参考帧的块进行比较，并且获得最佳运动向量。
时间滤波单元114使用关于参考帧的信息和运动估计单元112获得的运动向量执行时间滤波。
被时间变换单元110从中移除了时间冗余的帧，即，经过时间滤波的帧被送到空间变换单元120以从中移除空间冗余。使用小波变换来移除空间冗余以满足空间可缩放性(scalability)要求。
通过空间变换将经过时间滤波的帧转换成变换系数。然后变换系数被送到量化器130进行量化。量化器130用整数值系数量化实数变化系数。换句话说，量化可以降低表示图像数据所需的比特数量。此外，通过对变换系数执行嵌入式量化，可以实现信噪比(SNR)可缩放性。
比特流生成器140产生具有头的比特流，包括编码图像数据，运动向量和包括参考帧号在内的其他信息。
同时，在使用小波变换来移除空间冗余的情况下，原始图像仍然留在经过小波变换的帧中。因此，可以对首先通过小波变换进行了变换的帧执行时间变换。该方法称为小波域滤波方法，或者如图2所述的带内可缩放视频编码。
图2是基于带内可缩放视频编码工作的视频编码器的方框图。所示的视频编码器的各个方框以图1所示的相同方式操作。图1和2中的编码器之间的差在于图2所示的编码器用空间变换单元210对输入帧执行空间变换，然后通过时间变换单元220对经过空间变换的帧执行时间变换。
发明内容
上述视频编码方法彼此不同之处在于视频压缩效率或者解码压缩视频时的恢复性能。例如，像图1所示的编码器，在使用先移除时间冗余再移除空间冗余的空间域时间滤波方法(称为第一编码模式)的情况下，使用对单个分辨率获得的运动向量压缩每个编码帧。当用多个分辨率水平对编码视频进行解码时，使用对单个分辨率获得的运动向量执行解码。因此，基于单个分辨率恢复的视频的精细水平下降。特别地，当使用以高分辨率水平编码的帧的运动向量将视频恢复成低分辨率视频时，简单的缩放运动向量不可避免地降低帧的解码准确度。
同时，像图2所示的编码器，在使用先移除空间冗余再移除时间冗余的小波域时间滤波方法(称为第二编码模式)的情况下，由于首先执行空间变换而获得多个分辨率水平的多个运动向量。在这种情况下，由于可以从多个运动向量中选择适合解码所需的分辨率水平的运动向量，因此可以增加解码精度。在应当用高分辨率解码帧的情况下，第一编码模式比第二编码模式使用起来更有利。
因此，期望一种自适应地采用更有效压缩方法的编码技术。
本发明提供一种视频编码器、视频编码方法、视频解码器和视频解码方法，用于传输基于根据环境自适应选择的适当压缩方法的压缩视频信号。
根据本发明的一个方面，提供一种视频编码器，包括：第一编码部分，用于移除输入视频帧的时间冗余，移除输入视频帧的空间冗余，对通过从输入视频帧中移除时间和空间冗余而产生的变换系数进行量化，然后产生比特流；第二编码部分，用于移除输入视频帧的空间冗余，移除输入视频帧的时间冗余，对通过从输入视频帧中移除空间和时间冗余而产生的变换系数进行量化，然后产生比特流；和模式选择器，用于将从第一编码部分和第二编码部分输入的比特流相互进行比较，并且仅输出基于比较结果选择的比特流。
模式选择器可以选择并输出具有较小数据量的比特流。
此外，当要恢复的视频的分辨率水平高于或等于预定值时，模式选择器可以选择并输出由第一编码部分编码的比特流，而当要恢复的视频的分辨率水平低于预定值时，则模式选择器可以选择并输出由第二编码部分编码的比特流。
此外，模式选择器可以选择并输出由用户选择的编码部分编码的比特流。
从模式选择器输出的比特流可以包括关于移除空间和时间冗余的顺序的信息。
根据本发明的另一方面，提供一种视频编码方法，包括：第一编码操作，用于移除输入视频帧的时间冗余，移除输入视频帧的空间冗余，对通过从输入视频帧中移除时间和空间冗余而产生的变换系数进行量化，然后产生比特流；第二编码操作，用于移除输入视频帧的空间冗余，移除输入视频帧的时间冗余，对通过从输入视频帧中移除空间和时间冗余而产生的变换系数进行量化，然后产生比特流；以及将从第一编码部分和第二编码部分输入的比特流相互进行比较，并且仅输出基于比较结果选择的比特流。
所选比特流可以具有比未被选中的比特流小的数据量。
当要恢复的视频的分辨率水平高于或等于预定值时，所选比特流可以是在第一编码操作中产生的比特流，而当要恢复的视频的分辨率水平低于预定值时，所选比特流可以是在第二编码操作中产生的比特流。
所选比特流可以是由用户任意选择的比特流。
输出的比特流可以包括关于移除空间和时间冗余的顺序的信息。
根据本发明的再一个方面，提供一种视频解码器，包括：比特流解释器(interpreter)，用于解释输入比特流以提取关于编码帧的信息；第一解码部分，用于逆(inverse)量化关于编码帧的信息以产生第一变换系数，对第一变换系数执行逆空间变换，并且对经空间变换的系数执行逆时间变换；和第二解码部分，用于逆量化关于编码帧的信息以产生第二变换系数，对第二变换系数执行逆时间变换，并且对经时间变换的系数执行逆空间变换。
最好，比特流解释器从输入比特流中提取关于冗余移除顺序的信息，并且按照提取的冗余移除顺序，将关于编码帧的信息输出到第一或第二解码部分。
根据本发明的再一个方面，提供一种视频解码方法，包括：解释输入比特流以提取关于编码帧的信息；从提取的信息中解释关于冗余移除顺序的信息，以确定解码模式；和在所确定的解码模式中执行对编码帧的解码操作。
可以这样实现解码模式：逆量化关于编码帧的信息以产生第一变换系数，对第一变换系数执行逆空间变换，并且对经空间变换的系数执行逆时间变换；或者逆量化关于编码帧的信息以产生第二变换系数，对第二变换系数执行逆时间变换，并且对经时间变换的系数执行逆空间变换。
附图说明
通过参照附图对其示范性实施例的详细描述，本发明的上述和其他方面将变得更加清楚，其中：
图1是常规的基于运动补偿嵌入式零块编码(MC-EZBC)的视频编码器的方框图；
图2是带内可缩放视频编码器的方框图；
图3是根据本发明示范性实施例的视频编码器的方框图；
图4是根据本发明另一示范性实施例的视频编码器的方框图；
图5是示出根据本发明示范性实施例的视频编码方法的流程图；
图6是示出根据本发明示范性实施例的视频解码器的方框图；以及
图7是示出根据本发明示范性实施例的视频解码方法的流程图。
具体实施方式
现在将参照附图详细描述根据本发明的视频编码器、视频编码方法、视频解码器和视频解码方法。
图3是根据本发明示范性实施例的视频编码器的示意方框图。
参照图3，根据本发明示范性实施例的视频编码器包括通过第一编码模式编码视频帧的第一编码部分310、通过第二编码模式编码视频帧的第二编码部分320和模式选择器330。
第一编码部分310包括：时间变换单元312，用于移除输入视频帧的时间冗余；空间变换单元314，用于移除输入视频帧的空间冗余；量化器316，用于对通过从输入视频帧中移除时间和空间冗余而产生的变换系数进行量化；和比特流生成器318，用于产生比特流，比特流包括量化的变换系数、用在时间滤波中的运动向量和参考帧号。
时间变换单元312包括运动估计单元(未示出)和时间滤波单元(未示出)，用于通过补偿帧间运动来执行时间滤波。
在对输入帧进行时间滤波时作为参考的帧(下面称为参考帧)与当前正被时间滤波的当前帧之间的相似程度越高，帧的压缩率就越高。因此，为了对每个输入帧执行时间冗余的最佳移除，将当前正被时间滤波的当前帧与多个帧进行比较，并且选择具有最高相似程度的帧作为用于移除时间冗余的参考帧。下面，将要被选择为参考帧的候选帧称为相关帧。
运动估计单元将当前正被时间滤波的当前帧的各个宏块(macroblock)与对应于当前帧的宏块的相关帧的宏块进行比较，以获得最佳运动向量。
时间滤波单元使用关于参考帧的信息和运动估计单元获得运动向量来执行时间变换。使用从中获得相应运动向量的相关帧作为用于从当前帧中移除时间冗余的参考帧。
从中移除了时间冗余的帧，即，经过时间滤波的帧，被送到空间变换单元314以移除空间冗余。一种可以满足空间可缩放性的空间冗余移除方法是小波变换，但是本发明不限于该方法。
在公知的小波变换技术中，将帧分解成四部分。与整个图像相似的四分之一大小的图像(L图像)被放在帧的左上部分中，而根据L图像重建整个图像所需的信息(H图像)被放在其他三个部分中。同样地，L图像可以被分解成四分之一大小的LL图像和重建L图像所需的信息。对JPEG 2000标准应用使用小波变换的图像压缩，并且移除帧之间的空间冗余。此外，与离散余弦变换(DCT)方法相比，小波变换允许将原始图像信息存储在变换后的图像(原始图像的缩小版本)中，从而允许使用缩小的图像提供空间可缩放性的视频编码。
经过时间滤波的帧在经受空间变换后被转换成变换系数，然后被送到量化器316进行量化。量化器316用整数值系数量化实数变化系数。换句话说，量化可以降低表示图像数据所需的比特数量。
由于在常规视频压缩中通常在空间变换之前执行时间滤波，因此术语“变换系数”主要用于指示通过空间变换产生的值。换句话说，当变换系数是通过DCT产生的时称为DCT系数，或者当变换系数是通过小波变换产生的时称为小波系数。在本发明中，变换系数是指在经受量化(即，嵌入式量化)前通过从帧中移除空间冗余和时间冗余而获得的值。
通过对变换系数执行嵌入式量化，可以在减少表示图像数据所需的比特数量的同时实现信噪比(SNR)可缩放性。此外，术语“嵌入式量化”用来表示编码的比特流包含量化信息。换句话说，按照视觉重要性来标记压缩的数据。当前公知的嵌入式量化算法包括嵌入式零树小波算法(EZW)、层次树中分区(SPIHT)、嵌入式零块编码(EZBC)、最优截断的嵌入式块编码(EBCOT)等。本发明意图采用任何已知的嵌入式量化算法。
比特流生成器318产生具有附加到数据的头的比特流，包括量化后产生的信息、运动向量和参考帧号。
第二编码部分320包括：空间变换单元322，用于移除空间冗余；时间变换单元324，用于移除时间冗余；量化器326，用于对移除空间和时间冗余后产生的变换系数进行量化；和比特流生成器328，用于产生比特流，比特流包括量化的变换系数、用在时间滤波中的运动向量和参考帧号。
空间变换单元322移除构成视频序列的多个帧的空间冗余。在该示范性实施例中，空间变换单元322使用小波变换移除帧的空间冗余。从中移除了时间冗余的帧，即，经过时间滤波的帧，被送到时间变换单元324以移除时间冗余。
时间变换单元324移除经过空间变换的帧的时间冗余。为此，时间变换单元324包括运动估计单元(未示出)和时间滤波单元(未示出)。时间变换单元324以与第一编码部分310的时间变换单元312相同的方式操作，除了输入帧是经过空间变换的帧以外。
量化器326通过对空间和时间变换后产生的变换系数进行量化，创建量化的图像信息，即，编码图像信息，并且将创建的信息送到比特流生成器328。
比特流生成器328产生具有附加到数据的头的比特流，包括编码图像信息和运动向量信息。
第一编码部分310和第二编码部分320可以对视频信号进行编码以满足时间、空间或SNR可缩放性。
各个比特流生成器318和328可以具有包括移除时间和空间冗余时的顺序(优先权)顺序的信息(简称为冗余移除顺序)的比特流，允许解码器单元识别视频序列是基于第一编码模式还是第二编码模式编码的。可以在各种模式下执行将顺序信息包含在比特流中。
例如，在基于第一编码模式执行编码的情况下，使第二编码部分320中产生的比特流包含关于冗余移除顺序的信息，而第一编码部分310中产生的比特流不包含关于冗余移除顺序的信息。同时，在选择第一编码模式或第二编码模式的情况下都可以包含关于冗余移除顺序的信息。
模式选择器330接收第一和第二编码部分310和320编码的视频信号的比特流，并且根据环境从接收的比特流中选择更有效的比特流并且将其输出。
例如，在考虑编码器和解码器之间建立的网络环境的情况下，模式选择器330比较第一编码部分310和第二编码部分320对预定数据量的视频序列进行编码之后最终输出的比特流的量。如果编码器和解码器之间建立的网络不是处在良好的环境中，则模式选择器330基于比较结果选择产生较小比特流量的编码部分，以允许所选编码器产生的比特流输出到解码器，从而增加数据传输效率。
或者，模式选择器330可以根据解码器侧要求的分辨率选择视频编码方法。通常，基于第一编码模式的可缩放视频编码在恢复高分辨率视频的情况下呈现高性能，而基于第二编码模式的可缩放视频编码在恢复低分辨率视频的情况下呈现高性能。
因此，当解码器侧需要以高于预定值的分辨率水平恢复视频时，模式选择器330自适应地选择和输出由第一编码模式编码的比特流，或者当解码器侧需要以低于预定值的分辨率水平恢复视频时，模式选择器330自适应地选择和输出由第二编码模式编码的比特流。在这种情况下，如图4所示，布置在编码部分310和320前面的模式选择器330根据解码器侧要求的分辨率水平选择更有效的编码部分，从而视频序列可被只输入到对应的编码部分。
此外，对产生最终输出比特流的编码部分的选择可以取决于用户的选择。
根据图3和4中所示的示范性实施例的视频编码器不仅可以用硬件模块实现，而且可以用软件模块和能够执行该软件模块的计算装置实现。
图5是示出根据本发明示范性实施例的视频编码方法的流程图。
当在操作S110输入第一视频序列时，各个编码部分310和320中的每一个在操作S120根据第一编码模式执行视频编码操作，在操作S 130根据第二编码模式执行视频编码操作。基于各自编码结果的比特流被输出到模式选择器330。然后，在操作S140，模式选择器330将从基于两种模式的编码产生的比特流相互进行比较，并且选择这两种模式中的更有效的模式。
例如，对于给定量的视频序列，将从第一编码部分310输出的比特流量与从第二编码部分320输出的比特流量进行比较，并且可以选择产生较小比特流量的编码部分来在编码操作中使用。当编码器侧和解码器侧之间的网络环境差时，这种编码部分的自适应选择可以增加传输带宽的利用效率。
总的来说，基于第一编码模式的可缩放视频编码在恢复高分辨率视频时呈现高性能，而基于第二编码模式的可缩放视频编码在恢复低分辨率视频时呈现高性能。因此，为了将比特流自适应地发送到所需的分辨率水平，当用户需要高于预定值的分辨率水平时，选择第一编码模式，或者当用户需要低于预定值的分辨率水平时，选择第二编码模式。
在这种情况下，如图4所示，位于编码器310和320前面的模式选择器330根据解码器侧所需的分辨率水平，选择更有效的编码部分，从而视频序列可被只输入到相应的编码部分。
当以上述方式根据环境选择更有效的视频编码模式时，在操作S150，模式选择器330仅输出基于所选视频编码模式的比特流。
图6是示出根据本发明示范性实施例的可缩放视频解码器的方框图。
可缩放视频解码器包括：比特流解释器510，用于解释输入比特流以提取关于编码图像(编码帧)的信息；第一解码部分520，用于恢复以第一编码模式编码的图像；和第二解码部分530，用于恢复以第二编码模式编码的图像。
首先，比特流解释器510解释输入比特流以提取关于编码图像(编码帧)的信息，并且确定冗余移除顺序。当轮到第一解码部分520时，输入比特流被输出到第一解码部分520。否则，当轮到第二解码部分530时，输入比特流被输出到第二解码部分530。
输入到第一解码部分520的关于编码帧的信息被逆量化器522逆量化并转换成变换系数。变换系数经受逆空间变换单元524的逆空间变换。该逆空间变换与编码帧的空间变换相关联。当在执行空间变换中使用小波变换时，使用逆小波变换执行逆空间变换。当在执行编码帧的空间变换中使用DCT变换时，使用逆DCT变换执行逆空间变换。逆时间变换单元526对在执行逆空间变换后得到的帧进行逆时间变换，然后将其恢复成组成视频序列的帧。
输入到第二解码部分530的关于编码帧的信息被逆量化器532逆量化并转换成变换系数。变换系数经受逆时间变换单元534的逆时间变换。逆空间变换单元536对在执行逆时间变换后得到的编码帧进行逆空间变换，然后将其恢复成组成视频序列的帧。
逆空间变换单元536执行的逆空间变换基于逆小波变换技术。
图6所示的视频解码器不仅可用硬件模块实现，也可用软件模块实现。
图7是示出根据本发明示范性实施例的视频解码方法的流程图。
当在操作S510输入第一比特流时，比特流解释器510在操作S520解释输入比特流以提取关于图像、运动向量、参考帧号和冗余移除顺序的信息。
按照冗余移除顺序对提取的关于图像的信息执行视频序列的恢复。在恢复之前，在操作S530确定输入比特流的冗余移除顺序。一方面，如果以第一编码模式编码了输入比特流，则按照逆量化(步骤S544)、逆空间变换(S554)和逆时间变换(操作S564)的顺序执行视频恢复。另一方面，如果以第二编码模式编码了输入比特流，则按照逆量化(步骤S542)、逆时间变换(S552)和逆空间变换(操作S562)的顺序执行视频恢复。然后，在操作S570最终输出通过操作恢复的视频序列。
工业适用性
如上所述，根据本发明，可以自适应地选择多个视频编码模式之一以便发送以所选视频编码模式压缩的视频信号，从而根据环境高效地对编码视频信号进行解码。
在结束详细描述时，本领域技术人员应当理解，在基本不背离本发明原理的前提下可以对示范性实施例进行许多变型和修改。因此，本发明所公开的示范性实施例是以普遍和描述性的意义使用的，而非用于限制目的。

Claims (25)

1.一种视频编码器，包括：
第一编码部分，用于移除输入视频帧的时间冗余，移除输入视频帧的空间冗余，对通过从输入视频帧中移除时间和空间冗余而产生的变换系数进行量化，然后产生第一比特流；
第二编码部分，用于移除输入视频帧的空间冗余，移除输入视频帧的时间冗余，对通过从输入视频帧中移除空间和时间冗余而产生的变换系数进行量化，然后产生第二比特流；和
模式选择器，用于选择第一比特流和第二比特流之一。
2.如权利要求1所述的视频编码器，其中，模式选择器选择并输出具有较小数据量的比特流。
3.如权利要求1所述的视频编码器，其中，如果要恢复的视频的分辨率水平高于或等于预定值，则模式选择器选择并输出由第一编码部分编码的第一比特流，而如果要恢复的视频的分辨率水平低于预定值，则模式选择器选择并输出由第二编码部分编码的第二比特流。
4.如权利要求1所述的视频编码器，其中，模式选择器选择并输出由用户选择的编码部分编码的比特流。
5.如权利要求1所述的视频编码器，其中，从模式选择器输出的比特流包括关于移除空间和时间冗余的顺序的信息。
6.如权利要求1所述的视频编码器，其中，所述模式选择器位于所述第一和第二编码部分的下游，并且输出所述第一和第二比特流中所选的一个。
7.一种视频编码方法，包括：
第一编码操作，用于移除输入视频帧的时间冗余，移除输入视频帧的空间冗余，对通过从输入视频帧中移除时间和空间冗余而产生的变换系数进行量化，然后产生第一比特流；
第二编码操作，用于移除输入视频帧的空间冗余，移除输入视频帧的时间冗余，对通过从输入视频帧中移除空间和时间冗余而产生的变换系数进行量化，然后产生第二比特流；以及
选择第一比特流和第二比特流之一，并且输出所选比特流。
8.如权利要求7所述的视频编码方法，其中，所选比特流具有比未被选中的比特流小的数据量。
9.如权利要求7所述的视频编码方法，其中，如果要恢复的视频的分辨率水平高于或等于预定值，则所选比特流是在第一编码操作中产生的比特流，而如果要恢复的视频的分辨率水平低于预定值，则所选比特流是在第二编码操作中产生的比特流。
10.如权利要求7所述的视频编码方法，其中，所选比特流是由用户选择的比特流。
11.如权利要求7所述的视频编码方法，其中，输出的比特流包括关于移除空间和时间冗余的顺序的信息。
12.如权利要求7所述的视频编码方法，其中，同时执行所述第一和第二编码操作。
13.一种具有计算机可读程序的记录介质，该程序用于执行权利要求7所述的方法。
14.一种视频编码方法，包括：
接收视频序列并且在第一可用编码操作和第二可用编码操作之间选择，以及
如果选择所述第一编码操作，则移除所述视频序列的输入视频帧的时间冗余，移除输入视频帧的空间冗余，对通过从输入视频帧中移除时间和空间冗余而产生的变换系数进行量化，然后产生第一比特流；或
如果选择所述第二编码操作，则移除所述视频序列的输入视频帧的空间冗余，移除输入视频帧的时间冗余，对通过从输入视频帧中移除空间和时间冗余而产生的变换系数进行量化，然后产生第二比特流；以及
输出所述第一和第二比特流之一。
15.如权利要求14所述的视频编码方法，其中，所选的编码操作产生具有比未被选中的比特流的数据量小的比特流。
16.如权利要求14所述的视频编码方法，其中，如果要恢复的视频的分辨率水平高于或等于预定值，则选择第一编码操作，而如果要恢复的视频的分辨率水平低于预定值，则选择第二编码操作。
17.如权利要求14所述的视频编码方法，其中，所选编码操作是由用户选择的。
18.如权利要求14所述的视频编码方法，其中，输出的比特流包括关于移除空间和时间冗余的顺序的信息。
19.一种具有计算机可读程序的记录介质，该程序用于执行权利要求14所述的方法。
20.一种视频解码器，包括：
比特流解释器，用于解释输入比特流以提取关于编码帧的信息；
第一解码部分，用于逆量化关于编码帧的信息以产生第一变换系数，对第一变换系数执行逆空间变换，并且对经空间变换的系数执行逆时间变换；和
第二解码部分，用于逆量化关于编码帧的信息以产生第二变换系数，对第二变换系数执行逆时间变换，并且对经时间变换的系数执行逆空间变换。
21.如权利要求20所述的视频解码器，其中，比特流解释器从输入比特流中提取关于冗余移除顺序的信息，并且按照提取的冗余移除顺序，将关于编码帧的信息输出到第一或第二解码部分。
22.如权利要求20所述的视频解码器，其中，解码器从所述第一和第二解码部分之一输出视频序列。
23.一种视频解码方法，包括：
解释输入比特流以提取关于编码帧的信息；
从提取的信息中解释关于冗余移除顺序的信息，以确定解码模式；和
在所确定的解码模式中执行对编码帧的解码操作。
24.如权利要求23所述的视频解码方法，其中，解码模式被实现如下：逆量化关于编码帧的信息以产生第一变换系数，对第一变换系数执行逆空间变换，并且对经空间变换的系数执行逆时间变换；或者逆量化关于编码帧的信息以产生第二变换系数，对第二变换系数执行逆时间变换，并且对经时间变换的系数执行逆空间变换。
25.一种具有计算机可读程序的记录介质，该程序用于执行权利要求23所述的方法。
CNA2005800027554A 2004-01-27 2005-01-07 编码和解码视频比特流的方法和装置 Pending CN1910925A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020040005024 2004-01-27
KR1020040005024A KR100855466B1 (ko) 2004-01-27 2004-01-27 비디오 코딩 및 디코딩 방법, 및 이를 위한 장치

Publications (1)

Publication Number Publication Date
CN1910925A true CN1910925A (zh) 2007-02-07

Family

ID=34793330

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2005800027554A Pending CN1910925A (zh) 2004-01-27 2005-01-07 编码和解码视频比特流的方法和装置

Country Status (4)

Country Link
US (1) US20050163217A1 (zh)
KR (1) KR100855466B1 (zh)
CN (1) CN1910925A (zh)
WO (1) WO2005071968A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102948146A (zh) * 2010-04-13 2013-02-27 三星电子株式会社 基于树结构的编码单元执行去块滤波的视频编码方法和视频编码设备以及视频解码方法和视频解码设备
CN101715124B (zh) * 2008-10-07 2013-05-08 镇江唐桥微电子有限公司 单路输入多路输出的视频编码系统及视频编码方法
CN103609126A (zh) * 2011-06-28 2014-02-26 索尼公司 图像处理装置和图像处理方法

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101375601A (zh) * 2006-01-25 2009-02-25 Lg电子株式会社 发射和接收数字广播信号的方法和接收系统
US20070269123A1 (en) * 2006-05-16 2007-11-22 Randall Don Briggs Method and apparatus for performing image enhancement in an image processing pipeline
US20080037880A1 (en) * 2006-08-11 2008-02-14 Lcj Enterprises Llc Scalable, progressive image compression and archiving system over a low bit rate internet protocol network
GB0905317D0 (en) * 2008-07-14 2009-05-13 Musion Ip Ltd Video processing and telepresence system and method
US20100250120A1 (en) * 2009-03-31 2010-09-30 Microsoft Corporation Managing storage and delivery of navigation images
EP2509315B1 (en) * 2011-04-04 2016-08-17 Nxp B.V. Video decoding switchable between two modes of inverse motion compensation
US9565431B2 (en) * 2012-04-04 2017-02-07 Qualcomm Incorporated Low-delay video buffering in video coding
CN105163120B (zh) * 2014-06-09 2018-09-25 浙江大学 一种假设解码器中输入码流缓冲区的输入和输出/从缓冲区获取数据的方法及装置、传输视频码流的方法
CN104410861A (zh) * 2014-11-24 2015-03-11 华为技术有限公司 视频编码方法及装置
CN116320536B (zh) * 2023-05-16 2023-08-18 瀚博半导体(上海)有限公司 视频处理方法、装置、计算机设备及计算机可读存储介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5138447A (en) * 1991-02-11 1992-08-11 General Instrument Corporation Method and apparatus for communicating compressed digital video signals using multiple processors
KR0134505B1 (ko) * 1992-09-09 1998-04-23 배순훈 적응적 움직임 검출기능을 가진 영상 부호화기
KR20000059799A (ko) 1999-03-09 2000-10-05 구자홍 웨이브릿 부호화를 이용한 움직임 보상 부호화 장치 및 방법
KR20010069016A (ko) * 2000-01-11 2001-07-23 구자홍 영상부호화기의 인트라/인터 부호화 모드의 결정방법
US7072393B2 (en) * 2001-06-25 2006-07-04 International Business Machines Corporation Multiple parallel encoders and statistical analysis thereof for encoding a video sequence

Cited By (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101715124B (zh) * 2008-10-07 2013-05-08 镇江唐桥微电子有限公司 单路输入多路输出的视频编码系统及视频编码方法
US10027972B2 (en) 2010-04-13 2018-07-17 Samsung Electronics Co., Ltd. Video encoding method and video encoding apparatus and video decoding method and video decoding apparatus, which perform deblocking filtering based on tree-structure encoding units
CN102948146B (zh) * 2010-04-13 2016-10-19 三星电子株式会社 基于树结构的编码单元执行去块滤波的视频编码方法和视频编码设备以及视频解码方法和视频解码设备
US10432965B2 (en) 2010-04-13 2019-10-01 Samsung Electronics Co., Ltd. Video-encoding method and video-encoding apparatus based on encoding units determined in accordance with a tree structure, and video-decoding method and video-decoding apparatus based on encoding units determined in accordance with a tree structure
US9247247B2 (en) 2010-04-13 2016-01-26 Samsung Electronics Co., Ltd. Video-encoding method and video-encoding apparatus using prediction units based on encoding units determined in accordance with a tree structure, and video-decoding method and video-decoding apparatus using prediction units based on encoding units determined in accordance with a tree structure
US10412411B2 (en) 2010-04-13 2019-09-10 Samsung Electronics Co., Ltd. Video-encoding method and video-encoding apparatus using prediction units based on encoding units determined in accordance with a tree structure, and video-decoding method and video-decoding apparatus using prediction units based on encoding units determined in accordance with a tree structure
US9485511B2 (en) 2010-04-13 2016-11-01 Samsung Electronics Co., Ltd. Video-encoding method and video-encoding apparatus based on encoding units determined in accordance with a tree structure, and video-decoding method and video-decoding apparatus based on encoding units determined in accordance with a tree structure
CN106162178A (zh) * 2010-04-13 2016-11-23 三星电子株式会社 执行去块滤波的对视频进行解码的设备
US9565438B2 (en) 2010-04-13 2017-02-07 Samsung Electronics Co., Ltd. Video-encoding method and video-encoding apparatus using prediction units based on encoding units determined in accordance with a tree structure, and video-decoding method and video-decoding apparatus using prediction units based on encoding units determined in accordance with a tree structure
US9654790B2 (en) 2010-04-13 2017-05-16 Samsung Electronics Co., Ltd. Video-encoding method and video-encoding apparatus based on encoding units determined in accordance with a tree structure, and video-decoding method and video-decoding apparatus based on encoding units determined in accordance with a tree structure
CN106803957A (zh) * 2010-04-13 2017-06-06 三星电子株式会社 对视频进行解码的设备
US9712822B2 (en) 2010-04-13 2017-07-18 Samsung Electronics Co., Ltd. Video encoding method and video encoding apparatus and video decoding method and video decoding apparatus, which perform deblocking filtering based on tree-structure encoding units
CN106162178B (zh) * 2010-04-13 2019-08-13 三星电子株式会社 执行去块滤波的对视频进行解码的设备
US10306262B2 (en) 2010-04-13 2019-05-28 Samsung Electronics Co., Ltd. Video encoding method and video encoding apparatus and video decoding method and video decoding apparatus, which perform deblocking filtering based on tree-structure encoding units
CN102948146A (zh) * 2010-04-13 2013-02-27 三星电子株式会社 基于树结构的编码单元执行去块滤波的视频编码方法和视频编码设备以及视频解码方法和视频解码设备
US9942564B2 (en) 2010-04-13 2018-04-10 Samsung Electronics Co., Ltd. Video-encoding method and video-encoding apparatus based on encoding units determined in accordance with a tree structure, and video-decoding method and video-decoding apparatus based on encoding units determined in accordance with a tree structure
US9936216B2 (en) 2010-04-13 2018-04-03 Samsung Electronics Co., Ltd. Video-encoding method and video-encoding apparatus using prediction units based on encoding units determined in accordance with a tree structure, and video-decoding method and video-decoding apparatus using prediction units based on encoding units determined in accordance with a tree structure
US9712823B2 (en) 2010-04-13 2017-07-18 Samsung Electronics Co., Ltd. Video-encoding method and video-encoding apparatus using prediction units based on encoding units determined in accordance with a tree structure, and video-decoding method and video-decoding apparatus using prediction units based on encoding units determined in accordance with a tree structure
CN107454401A (zh) * 2011-06-28 2017-12-08 索尼公司 图像处理装置和图像处理方法
CN103609126A (zh) * 2011-06-28 2014-02-26 索尼公司 图像处理装置和图像处理方法
CN104113764A (zh) * 2011-06-28 2014-10-22 索尼公司 图像处理装置和图像处理方法
CN107295335A (zh) * 2011-06-28 2017-10-24 索尼公司 图像处理装置和图像处理方法
CN103609126B (zh) * 2011-06-28 2017-09-08 索尼公司 图像处理装置和图像处理方法
CN107426571A (zh) * 2011-06-28 2017-12-01 索尼公司 图像处理装置和图像处理方法
CN107318018A (zh) * 2011-06-28 2017-11-03 索尼公司 图像处理装置和图像处理方法
CN104113764B (zh) * 2011-06-28 2017-10-27 索尼公司 图像处理装置和图像处理方法
CN107318018B (zh) * 2011-06-28 2019-11-01 索尼公司 图像处理装置和图像处理方法
CN107454401B (zh) * 2011-06-28 2019-11-19 索尼公司 图像处理装置和图像处理方法
CN107426571B (zh) * 2011-06-28 2019-12-10 索尼公司 图像处理装置和图像处理方法
CN107295335B (zh) * 2011-06-28 2020-03-17 索尼公司 图像处理装置和图像处理方法

Also Published As

Publication number Publication date
WO2005071968A1 (en) 2005-08-04
US20050163217A1 (en) 2005-07-28
KR20050077396A (ko) 2005-08-02
KR100855466B1 (ko) 2008-09-01

Similar Documents

Publication Publication Date Title
CN1910925A (zh) 编码和解码视频比特流的方法和装置
CN1200568C (zh) 在图像和视频的编码/解码中的变换系数的最佳扫描方法
CN1266649C (zh) 视频编码方法
CN101036388A (zh) 对混合比特流进行预解码的方法和设备
CN1232123C (zh) 用于精细可伸缩性增强层的基于活动的频率加权方法及系统
CN1722838A (zh) 使用基础层的可伸缩性视频编码方法和设备
CN1951122A (zh) 支持可变画面组大小的可伸缩视频编码方法和可伸缩视频编码器
CN1722831A (zh) 对包括基本层的比特流预解码和解码的方法和设备
CN1914921A (zh) 在编码器中提供可分级性的可分级视频编码设备和方法
CN1722836A (zh) 视频编码和解码方法以及视频编码器和解码器
CN1383684A (zh) 彩色视频编码与解码方法
CN1968419A (zh) 利用人类视觉特性对图像进行编码及解码的方法和设备
Xing et al. Arbitrarily shaped video-object coding by wavelet
CN1722837A (zh) 用于可分级视频编码和解码的方法和设备
CN1319382C (zh) 可伸缩视频编解码器体系结构设计方法
KR100834749B1 (ko) 스케일러블 비디오 스트림 재생장치 및 그 방법
CN1372770A (zh) 视频序列压缩的编码方法
CN1885945A (zh) 分级编码和解码方法
CN1809169A (zh) 对画面进行无损直流分量编码的方法和设备
Auli-Llinas et al. Efficient rate control for JPEG2000 coder and decoder
Nister et al. An embedded DCT-based still image coding algorithm
CN1633814A (zh) 存储器带宽效率高的精细可分级(fgs)编码器
KR101421231B1 (ko) 웨이블릿 변환을 이용한 영상 압축 장치
CN101146227A (zh) 嵌套式渐进可伸缩性三维小波视频编码算法
KR20030048719A (ko) Dvr 시스템에서 영상전송 및 저장을 위한 웨이블릿 변환기반 영상 압축 기법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication