CN1575605A - 空间可伸缩压缩 - Google Patents

空间可伸缩压缩 Download PDF

Info

Publication number
CN1575605A
CN1575605A CNA028210646A CN02821064A CN1575605A CN 1575605 A CN1575605 A CN 1575605A CN A028210646 A CNA028210646 A CN A028210646A CN 02821064 A CN02821064 A CN 02821064A CN 1575605 A CN1575605 A CN 1575605A
Authority
CN
China
Prior art keywords
stream
encoder
enhanced
basic
generate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA028210646A
Other languages
English (en)
Other versions
CN1254978C (zh
Inventor
W·H·A·布鲁斯
R·B·M·克莱恩冈内维克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN1575605A publication Critical patent/CN1575605A/zh
Application granted granted Critical
Publication of CN1254978C publication Critical patent/CN1254978C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/152—Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/192—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding the adaptation method, adaptation tool or adaptation type being iterative or recursive
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H04N19/198—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters including smoothing of a sequence of encoding parameters, e.g. by averaging, by choice of the maximum, minimum or median value
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Image Processing (AREA)

Abstract

公开了一种用于对输入视频流有效地进行空间可伸缩的压缩的设备。一种基本编码器编码一个基本编码器流。修改装置修改该基本编码器流的内容以生成多个基本流。一个增强编码器编码一个增强编码器流。修改装置修改该增强编码器流的内容以生成多个增强流。

Description

空间可伸缩压缩
技术领域
本发明涉及一种视频编码器，更具体涉及使用空间可伸缩压缩方案生成多个基本流和多个增强流的一种视频编码器。
发明背景
由于数字视频固有的巨大数据量，全动态、高清晰的数字视频信号的传输成为高清晰电视发展中的一个重要问题。更特别的是，每一帧数字图像都是一幅根据特定系统的显示分辨率由像素阵列组成的静止图像。因此，包含在高分辨率的视频序列中的原始数字信息量是巨大的。为了减少必须被传输的数据量，通常使用压缩方案来压缩数据。已经建立了各种各样的视频压缩标准或者方法，包括：MPEG-2、MPEG-4、H.263和H.264。
在许多实现的应用中，一个流中的视频具有不同分辨率和/或质量。完成上述功能的方法不严格地称为可伸缩技术。有三个轴，于其上可以设置可伸缩性。第一个是时间轴上的可伸缩性，通常被称作时间可伸缩性。第二个是质量轴上的可伸缩性，通常被称作信噪比可伸缩性或者精细粒度可伸缩性。第三个轴是分辨率轴(图像中的像素个数)经常被称作空间可伸缩性或者分层编码。在分层编码中，比特流被分成两个或者更多个比特流或者层。每个层能够被结合而组成单个高质量的信号。例如，基本层可以提供一个低质量的视频信号，然而增强层可以提供能够增强基本层图像的附加信息。
特别地，空间可伸缩性能够提供在不同视频标准或者解码器性能之间的兼容性。利用空间可伸缩性，基本层视频可以具有比输入的视频序列更低的分辨率，在这种情况下，增强层携带了能够将基本层分辨率恢复到输入序列水平的信息。
大多数的视频压缩标准支持空间可伸缩性。附图1图示了支持MPEG-2/MPEG-4的空间可伸缩性的编码器100的结构图。编码器100由一个基本编码器112和一个增强编码器114组成。基本编码器的部件包括：一个低通滤波器和下采样器120，一个运动估计器122，一个运动补偿器124，一个正交变换(例如离散余弦变换(DCT))电路130，一个量化器132，一个可变长度编码器134，一个码率控制电路135，一个反向的量化器138，一个反向变换电路140，开关128、144，以及一个内插和上采样电路150。增强编码器114包括：一个运动估计器154，一个运动补偿器155，一个选择器156，和一个正交变换(例如离散余弦变换(DCT))电路158，一个量化器160，一个可变长度编码器162，一个码率控制电路164，一个反向的量化器166，一个反向变换电路168，以及开关170、172。这些单独部件的操作在本技术领域里是公知的，因此将不对其进行详细描述。
遗憾的是，分层编码方案的编码效率并不是非常高。事实上，对于一个给定的图片质量，对于一个序列的基本层和增强层的码率之和要高于一次编码的同一序列的码率。
附图2图示了另一个已知的由DemoGrafx公司提出的编码器200。该编码器基本包含与编码器100相同的部件，每个部件的操作也基本与编码器100中的相同，所以单独部件的操作将不作描述。在这个配置中，将输入块与上采样器150产生的上采样输出之间的残差输入到运动估计器154中。为了指导/帮助增强编码器的运动估计器的运行，正如附图2中所示的虚线，从基本层产生的估算运动矢量被用于运动估计器154。然而，该装置并未显著地克服附图1中所示配置的问题。
发明概述
本发明的一个目的是通过提供一个空间可伸缩的压缩方案来克服已知的空间可伸缩性方案中的上述缺陷中的至少一部分，该方案以不同的质量水平生成多个基本流，并且以不同的质量水平生成多个增强流。
根据本发明的一个实施例，公开了一个用于对输入视频流有效地进行空间可伸缩的压缩的设备。一个基本编码器编码一个基本编码器流。修改装置修改该基本编码器流的内容从而生成多个基本流。一个增强编码器编码一个增强编码器流。修改装置修改该增强编码器流的内容从而生成多个增强流。
根据本发明的另一个实施例，公开了一个用于提供输入视频流的空间可伸缩的压缩的设备和方法。输入视频流被下采样以降低视频流的分辨率。该下采样视频流被编码生成基本编码器流。从基本编码器流中生成多个基本流。该基本编码器流被解码并且被上变频以生成一个重建的视频流。估算输入视频流的帧与重建的视频流的帧之间的预期的运动，并且根据在伸展(upscaled)的基本层加增强层来计算所接收的流中每一帧的运动矢量。从视频流中减去该重建的视频流生成一个剩余流。使用该运动矢量在一个运动补偿单元里算出预测流。将该预测流从该剩余流中减去。将最终的剩余流编码并且输出一个增强编码器流。从增强编码器流中生成多个增强流。
根据本发明的另一个实施例，公开了用于解码多个已编码视频信号的方法和设备。每一个视频流被解码并且接下来该视频流被结合起来。对解码视频流中的量化系数进行一个相反的量化操作从而生成DCT系数。对DCT系数进行一个相反的DCT操作以生成第一信号。在运动补偿器中生成预测的图像，并且将该第一信号与该预测的图像相结合以生成一个输出信号。
根据此后实施例的描述，本发明的这些和其他方面将被清晰地阐明。
附图简述
本发明将通过实例根据附图进行描述，其中：
附图1是具有空间可伸缩性的代表已知编码器的结构图；
附图2是具有空间可伸缩性的代表已知编码器的结构图；
附图3是根据本发明的一个实施例的具有空间可伸缩性的代表编码器的结构图；
附图4图示了一个根据本发明的一个实施例的具有串联衰减器的修改设备；
附图5图示了一个根据本发明的一个实施例的具有级联衰减器的修改设备；
附图6图示了一个根据本发明的一个实施例的解码器。
本发明的详细描述
附图3是一个根据本发明的实施例的编码器的示意图表。所描述的编码系统300完成了分层压缩，由此该信道的一部分被用于提供较低分辨率的多个基本层，剩下的部分被用于传输多个增强层，由此各种各样的基本层和增强层可以被结合生成不同质量水平的视频流。本领域技术人员的应当理解的是：还可以使用其他的编码配置来生成多层的基本和增强视频流，并且本发明并不限于此。
编码器300包括一个基本编码器312和一个增强编码器314。基本编码器包括：一个低通滤波器和下采样器320，一个运动估计器322，一个运动补偿器324，一个正交变换(例如离散余弦变换(DCT))电路330，一个量化器332，一个可变长度编码器(VLC)334，一个码率控制电路335，一个反向的量化器338，一个反向变换电路340，开关328、344，以及一个内插上采样电路350。
输入视频块316由分路器318分路并且被传送到基本编码器312和增强编码器314中。在基本编码器312中，输入信息被输入一个低通滤波器和下采样器320中。低通滤波器降低了视频块的分辨率，然后该视频块被提供给运动估计器322。运动估计器322将每一帧的图像数据处理为I图像、P图像或者B图像。顺序输入的帧中的每一幅图像以一种预先设定的方式被处理为I图像、P图像或者B图像之一。例如以I、B、P、B、P、......、B、P的序列。也就是说，运动估计器322参照存储在帧存储器中的一系列图像中预先设定的参考帧，该帧存储器未在图中给出，并且检测出宏块的运动矢量，也就是说，通过宏块与用于检测宏块中运动矢量的参考帧之间的模式匹配(块匹配)，将该帧中16×16像素的小块进行编码。
在MPEG中，有四个图像预测模式，包括内部编码(帧内编码)、前向预测编码、后向预测编码、和双向预测编码。I图像是内部编码图像，P图像是内部编码或者前向预测编码或者后向预测编码图像，B图像是内部编码，前向预测编码或者双向预测编码图像。
运动估计器322对于P帧进行前向预测以检测其运动矢量。另外，运动估计器322对于B帧进行前向预测、后向预测、和双向预测从而检测各自的运动矢量。以一种已知的方法，运动估计器322在帧存储器中搜索与当前输入像素块最相似的像素块。在这个技术领域中已知各种各样的搜索算法。该算法一般都是建立在对于当前输入块的像素与候选块的像素间的均方误差(MSE)或平均绝对误差(MAD)的评价之上。具有最小的MAD或者MSE的候选块被选为运动补偿预测块。该运动补偿预测块相对于当前输入块的位置是运动矢量。
当从运动估计器322中接收到预测模式和运动矢量时，运动补偿器324就可以根据预测模式和运动矢量读出存储在帧存储器中的已编码并且已经本地解码的图像数据，并且还可以将已读出的数据作为预测图像提供给算术单元325和开关344。算术单元325还接收输入块并计算在输入块和从运动补偿器324中得到的预测图像之间的差。该差值被提供给DCT电路330。
当且仅当从运动估计器322中收到预测模式，也就是说，如果预测模式是内部编码模式，运动补偿器324不会输出一个预测图像。在该情况下，算术单元325不会进行上述的处理，而是直接将输入块输出到DCT电路330中。
DCT电路330对于算术单元33的输出信号进行DCT处理，从而得到提供给量化器332的DCT系数。量化器332根据作为反馈收到的在一个缓冲区(图中没有示出)中的数据存储数量来设置一个量化步长(量化尺度)，并且使用该量化步长量化来自DCT电路330的DCT系数。该量化DCT系数与已设置的量化步长一起提供给VLC单元334。
该VLC单元334根据量化器332提供的量化步长将量化器332提供的量化系数转换为可变长度码，例如霍夫曼编码。转换得到的量化系数的结果被输出到一个图中没有示出的缓冲区中。量化步长和量化系数同样也被提供给反向量化器338，该反向量化器根据量化步长对量化系数进行反量化，从而将该量化系数转换为DCT系数。该DCT系数被提供给对DCT系数执行反向DCT变换的反向DCT单元340。由此得到的反向DCT系数被提供给算术单元348。
算术单元348从反向DCT单元340中接收反向DCT系数，并且根据开关344的位置从运动补偿器324中接收数据。算术单元348将来自反向DCT单元340的信号(预测剩余)与来自运动补偿器324的预测图像相加以便本地解码该原始图像。然而，如果预测模式指示为内部编码，反向DCT单元340的输出将被直接提供给帧存储器。由算术单元340得到的解码图像被送到帧存储器并且存储在帧存储器中，以便以后用作内部编码图像、前向预测编码图像、后向预测编码图像、或双向预测编码图像的参考图像。
量化器332中的量化系数也还应用于修改设备400。修改设备400包括了多个衰减步骤，该步骤可以如附图4所示串联配置或者可以如附图5所示级联或者平行配置。如附图4所示，来自量化器332的量化系数被应用到衰减器401。于是信号被衰减器401衰减，从而导致信号407携带了衰减的DCT系数。与衰减器401串联，第二个衰减器403衰减了信号407携带的DCT系数的幅度并且传送由信号413携带的新的衰减系数，该信号被可变长度编码器422进行可变长度编码，用于生成第一基本视频流BaseBase0。
衰减器401和403分别包括：反向量化器402和408，分别带有一个加权设备404和410，分别串联一个量化器406和412。来自量化器332的量化系数被反向量化器402反向量化。通过将一个8×8的加权矩阵乘到DCT块上来实现加权，因此每一个DCT系数乘上一个包含在该矩阵中的加权因子，每一个乘法运算的结果都被四舍五入到最接近的整数，加权矩阵中元素的数值在0和1之间，例如对于低频值，将该元素设置为接近1的非均匀值，而对于高频值，将该元素设置为接近0的非均匀值，或者设置为均匀值以便在8×8DCT块中的所有系数都被等同地衰减。量化步长包括用一个新的量化因子去除加权DCT系数，以便传递量化DCT系数，所述量化因子对于构成一个宏块的所有8×8块的所有系数来说是相同的。
与衰减器401相关的编码误差415是通过减法单元414从来自量化器332的信号中减去信号407而生成的。于是该编码误差415由可变长度编码器416进行可变长度编码，用于生成基本增强视频流BaseEnh2。与衰减器403相关的编码误差419是通过利用减法单元418从信号407中减去信号413而生成的。于是该编码误差419由可变长度编码器420进行可变长度编码，用于生成第二基本增强视频流BaseEnh1。
在该例子中，最小质量基本分辨率将由视频流BaseBase0提供。中间质量基本分辨率将通过结合视频流BaseBase0和视频流BaseEnh0来提供。高质量的基本分辨率将通过结合视频流BaseBase0、BaseEnh0和视频流BaseEnh1来提供。
增强编码器314包括：一个运动估计器354，一个运动补偿器356，一个DCT电路368，一个量化器370，一个VLC单元372，一个码率控制电路374，一个反向的量化器376，一个反向DCT电路378，开关366、382，减法器358、364，以及加法器380、388。另外，增强编码器314可能还包括直流偏置360和384，加法器362和减法器386。这些部件的操作与基本编码器312中的相似部件的操作相似，所以将不作详细介绍。
还将算术单元340的输出提供给上采样器350，该上采样器一般重建从解码视频流中滤掉的分辨率，并且提供具有与高分辨率输入基本相同的分辨率的视频数据流。然而，由于过滤以及由于压缩、解压缩产生的损失，在重建流中会存在有某些误差。通过在减法单元358中从原始的、未修改的高分辨率流中减去重建高分辨率流，可以测定该误差。
根据图3所示的本发明的一个实施例，原始未修改的高分辨率流还被提供给运动估计器354。该重建的高分辨率流还被提供给加法器388，该加法器将来自反向DCT378的输出相加(根据开关382的位置，可能被运动补偿器356的输出修改)。加法器388的输出被提供给运动估计器354。因此，运动估计器对于伸展的基本层加增强层进行运动估计，而不是处理原始的高分辨率流与重建的高分辨率流之间的残差。该运动估计器生成跟踪实际运动的运动矢量，该运动矢量的性能优于附图1和2中的已知系统生成的矢量。这样产生了感觉上较好的图像质量，特别是用于对于消费者的应用，这比专业应用要求的码率更低。
进一步来讲，后接一个限幅操作的直流偏置操作能够被引入增强编码器314中，其中直流偏置的值360被加法器362加到来自减法单元358的剩余信号输出中。可选的直流偏置和限幅操作允许现有标准的应用，例如MPEG，对于增强编码器而言，该像素值在一个预定的范围内，例如0......255。该剩余信号通常集中在0附近。通过加一个直流偏置值360，该样本的浓度可能移动到该范围的中央，例如对于8位视频样本而言是128。该加法的优点在于：可以使用用于增强层的编码器的标准部件，而且将导致一个成本效益(IP信息块的重用)方案。
以与上述生成多种基本视频流相似的方式生成各种各样的增强层视频流。来自量化器370的量化系数也被应用到修改设备450。修改设备450具有与如附图4所示的修改设备400相同的部件，并且在以下的描述中，相同的参考数字被用于相同的部件。来自量化器370的量化系数被应用于衰减器401。于是信号被衰减器401衰减，该衰减器导致了由信号407携带的衰减的DCT系数。与衰减器401串联，第二个衰减器403衰减了由信号407携带的DCT系数的幅度，并且将由信号413携带的新衰减的系数传送走，该新衰减的系数被可变长度编码器422进行可变长度的编码，用于产生第一增强视频流EnhBase0。
衰减器401和403分别包括：反向量化器402和408，分别带有一个加权设备404和4410，分别串联一个量化器406和412。通过将一个8×8的加权矩阵乘到DCT块上来实现加权，因此每一个DCT系数乘上一个包含在该矩阵中的加权因子，每一个乘法运算的结果都被四舍五入到最接近的整数，加权矩阵中为幅度在0和1之间的数值，例如用于低频值时设置为接近1的非均匀值，用于高频值时设置为接近0或者接近非均匀值以便在8×8DCT块中的所有系数被等同衰减。量化步长包括用一个新的量化因子去除加权DCT系数，以便传递量化DCT系数，所述量化因子对于构成一个宏块的所有8×8块的所有系数来说是相同的。
与衰减器401相关的编码误差415通过减法单元414从来自量化器370的信号中减去信号407而生成。于是该编码误差415由可变长度编码器416进行可变长度编码，用于生成第二增强视频流EnhEnh2。与衰减器403相关的编码误差419通过减法单元418从信号407中减去信号413而生成。于是该编码误差419由可变长度编码器420进行可变长度编码，用于生成第三基本增强视频流EnhEnh1。
在该例子中，通过将视频流EnhBase0加到高质量基本分辨率视频流中来提供最小质量全分辨率。通过将视频流EnhBase0、视频流EnhEnh1与高质量基本分辨率相结合来提供中间质量全分辨率。通过将视频流EnhBase0、EnhEnh1和视频流EnhEnh2与高质量基本分辨率相结合来提供高质量的全分辨率。
附图5图示了一个修改设备，其中衰减器是以级联或者并联而连接的。应当理解的是，该修改设备500能够作为修改设备400和450的替代品而用于基本层和增强层中。来自量化器332(或者量化器370)中的量化系数被提供到第一衰减器501中。衰减器501包括一个反向量化器502，一个加权设备504，和一个量化器506。量化系数在反向量化器502中被反向量化，然后在加权设备504和量化器506中被加权和重新量化，正如上面关于附图4的描述。然后由信号513携带的衰减了的DCT系数在可变长度编码器514中被编码以生成第一基本(增强)流。
通过在减法单元516中从来自量化器332(量化器370)中的信号中减去信号517来生成衰减器501的编码误差517。该编码误差被应用到第二个衰减器503中，该衰减器包含一个反向量化器508，一个加权设备510，和一个量化器512。该衰减的信号519通过可变长度编码器520进行编码，该可变长度编码器生成第二基本(或者增强)流。通过在减法单元522中从信号517中减去信号519来生成衰减器503的编码误差523。该编码误差523通过可变长度编码器524进行编码，从而生成第三基本(或者增强)流。
根据本发明的一个实施例，附图6图示了一个解码器，该解码器用于解码由修改设备生成的多种基本或者增强流。所述的多种基本或者增强流被多个可变长度解码器602、604、606解码。然后被解码的流在算术单元608中加在一起。将该合成流中的被解码的量化系数提供给反量化器610，该反量化器根据量化步长反量化该量化系数，从而将该量化系数转换为DCT系数。该DCT系数被提供给反向DCT单元612，该反向DCT单元对DCT系数执行反向DCT。将得到的反向DCT系数提供给算术单元614。算术单元614接收来自反向DCT单元612的反向DCT系数和来自运动补偿器616的数据(以一种已知的方式生成)。算术单元614将来自反向DCT单元612的流加到来自运动补偿器616的预测图像上来生成解码的基本(增强)流。该被解码的基本和增强流可以以一种已知的方式结合从而生成解码视频输出。
应当理解，本发明的不同的实施例不能仅被限制为上述步骤的顺序，在不影响本发明的整体操作情况下，一些步骤的时序可以被相互交换。进一步来讲，术语“包含”并不排除其他部件或者步骤，术语“一个”并不排除多个而且单个处理器或者其它单元可以执行权利要求中所叙述的几个单元或者电路的功能。

Claims (21)

1.一个用于对输入视频流有效地进行空间可伸缩的压缩的设备，包括：
基本编码器，用于编码一个基本编码器流；
用于修改基本编码器流的内容以生成多个基本流的装置；
用于编码一个增强编码器流的增强编码器；和
用于修改一个增强编码器流的内容以生成多个增强流的装置。
2.根据权利要求1的设备，其中所述的修改是通过一组串行组合的衰减步骤和与每个所述衰减步骤相关联的重新编码步骤进行的，所述衰减步骤被应用于组成所述基本编码器流的系数上，所述重新编码步骤用于从每个衰减步骤产生的编码误差中传送所述多个基本流中的一个基本流。
3.根据权利要求1的设备，其中所述的修改是通过一组串行组合的衰减步骤和与每个所述衰减步骤相关联的重新编码步骤进行的，所述衰减步骤被应用于组成所述增强编码器流的系数上，而所述重新编码步骤用于从每个衰减步骤产生的编码误差中传送所述多个增强流中的一个增强流。
4.根据权利要求1的设备，其中所述的修改是通过一组级联组合的衰减步骤和与每个所述衰减步骤相关联的重新编码步骤进行的，所述衰减步骤被应用于组成所述基本编码器流的系数上，而所述重新编码步骤用于从每个衰减步骤产生的编码误差中传送所述多个基本流中的一个基本流。
5.根据权利要求1的设备，其中所述的修改是通过一组级联组合的衰减步骤和与每个所述衰减步骤相关联的重新编码步骤进行的，所述衰减步骤被应用于组成所述增强编码器流的系数上，而所述重新编码步骤用于从每个衰减步骤产生的编码误差中传送所述多个增强流中的一个增强流。
6.一个用于对输入视频流进行编码的分层编码器，包括：
用于降低视频流的分辨率的下采样单元；
用于对基本编码器流进行编码的基本编码器；
用于通过修改基本编码器流的内容来生成多个基本流的装置；
用于解码和提高基本编码器流的分辨率以生成重建视频流的上变频单元；
一个运动估计单元，该运动估计单元接收输入视频流和重建视频流，并且基于伸展的基本层加上增强层来计算该接收流的每一帧的运动矢量；
用于从输入视频流中减去重建视频流以生成剩余流的第一减法单元；
用于从运动估计单元中接收运动矢量并且输出预测流的运动补偿单元；
用于从剩余流中减去预测流的第二减法单元；
用于对来自减法单元的结果流进行编码并且生成一个增强编码器流的增强编码器；
用于通过修改增强编码器流的内容生成多个增强流的装置。
7.根据权利要求6所述的分层编码器，其中用于生成多个基本流的所述装置包括：
应用于组成所述基本编码器流的系数上的一组衰减装置，所述衰减装置被串联组合以用于传送所述多个基本流中的一个基本流；
和每一个衰减装置相关联的重新编码装置，所述重新编码装置用于从每一个衰减装置产生的编码误差中传送所述多个基本流中的一个基本流。
8.根据权利要求6所述的分层编码器，其中用于生成多个基本流的所述装置包括：
应用于组成所述基本编码器流的系数上的一组衰减装置，所述衰减装置被级联组合以用于传送所述多个基本流中的一个基本流；
和每一个衰减装置相关联的重新编码装置，所述重新编码装置用于从每一个衰减装置产生的编码误差中传送所述多个基本流中的一个基本流。
9.根据权利要求7所述的分层编码器，其中用于生成多个增强流的装置包括：
应用于组成所述增强编码器流的系数上的一组衰减装置，所述衰减装置被串联组合以用于传送所述多个增强流中的一个增强流；
和每一个衰减装置相关联的重新编码装置，所述重新编码装置用于从每一个衰减装置产生的编码误差中传送所述多个增强流中的一个增强流。
10.根据权利要求8所述的分层编码器，其中用于生成多个增强流的装置包括：
应用于组成所述增强编码器流的系数上的一组衰减装置，所述衰减装置被级联组合以用于传送所述多个增强流中的一个增强流；
和每一个所述衰减装置相关联的重新编码装置，所述重新编码装置用于从每一个衰减装置产生的编码误差中传送所述的多个增强流中的一个增强流。
11.根据权利要求7所述的分层编码器，其中衰减装置包括串联在用于量化系数的量化装置之前的频率加权装置，该频率加权装置在块的级别上执行。
12.根据权利要求7所述的分层编码器，其中每一个重新编码装置包括：用于从用于传送编码误差的相关衰减装置的输入信号中减去输出信号的减法装置，和用于从编码误差中生成所述基本流中的一个基本流的可变长度编码装置。
13根据权利要求8所述的分层编码器，其中衰减装置包括串联在用于量化系数的量化装置之前的频率加权装置，该频率加权装置在块的级别上执行。
14根据权利要求13所述的分层编码器，其中每一个重新编码装置包括：用于从用于传送编码误差的相关衰减装置的输入信号中减去输出信号的减法装置，和用于从编码误差中生成所述基本流中的一个基本流的可变长度编码装置。
15根据权利要求9所述的分层编码器，其中衰减装置包括串联在用于量化系数的量化装置之前的频率加权装置，该频率加权装置在块的级别上执行。
16根据权利要求7所述的分层编码器，其中每一个重新编码装置包括：用于从用于传送编码误差的相关衰减装置的输入信号中减去输出信号的减法装置，和用于从编码误差中生成所述增强流中的一个增强流的可变长度编码装置。
17.一个用于对输入视频流提供空间可伸缩的压缩的方法，包括步骤：
下采样输入视频流以降低视频流的分辨率；
对下采样视频流进行编码以生成基本编码器流；
通过修改基本编码器流的内容从而生成多个基本流；
解码和上变频基本流以生成重建视频流；
估计在来自输入视频流和重建视频流的帧之间的预期的运动，并且基于伸展的基本层加增强层来计算该接收流的每一帧的运动矢量；
从视频流中减去重建视频流以生成剩余流；
使用运动矢量在运动补偿单元中计算预测流；
从剩余流中减去预测流；
对结果剩余流进行编码并且输出一个增强编码器流；和
通过修改增强编码器流的内容生成多个增强流。
18.用于对多个编码的视频信号进行解码的解码器，包括：
多个解码器，一个解码器用于一个视频流，用于解码所述视频流；
用于结合所述解码的视频流的算术单元；
用于对在所述解码的视频流中的量化系数进行反向量化操作以生成DCT系数的反向量化装置；
用于对DCT系数进行反向DCT操作以生成第一信号的反向DCT装置；
用于生成预测图像的运动补偿单元；
用于将第一信号和预测图像结合以生成输出信号的算术单元。
19.根据权利要求18所述的解码器，其中多个编码的视频流是基本流。
20.根据权利要求18所述的解码器，其中多个视频流是增强流。
21.用于对多个编码的视频信号进行解码的方法，包括：
解码每一个所述视频流；
结合所述解码的视频流；
对在所述解码的视频流中的量化系数进行反向量化操作以生成DCT系数；
对于DCT系数进行反向DCT操作以生成第一信号；
在运动补偿器中生成预测图像；
将第一信号和预测图像结合以生成输出信号。
CNB028210646A 2001-10-26 2002-10-21 用于空间可伸缩的压缩和解压缩视图像的设备和方法以及用于此的编码器 Expired - Fee Related CN1254978C (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
EP01204066 2001-10-26
EP01204066.3 2001-10-26
EP02075916.3 2002-03-08
EP02075916 2002-03-08

Publications (2)

Publication Number Publication Date
CN1575605A true CN1575605A (zh) 2005-02-02
CN1254978C CN1254978C (zh) 2006-05-03

Family

ID=26077019

Family Applications (4)

Application Number Title Priority Date Filing Date
CNB028210301A Expired - Fee Related CN1253008C (zh) 2001-10-26 2002-10-14 空间可分级压缩的方法和设备
CNB028210638A Expired - Fee Related CN1294761C (zh) 2001-10-26 2002-10-21 视频编解码方法及装置
CNB028210859A Expired - Fee Related CN100471269C (zh) 2001-10-26 2002-10-21 视频信息压缩装置和方法、解码方法、分层编码器和解码器
CNB028210646A Expired - Fee Related CN1254978C (zh) 2001-10-26 2002-10-21 用于空间可伸缩的压缩和解压缩视图像的设备和方法以及用于此的编码器

Family Applications Before (3)

Application Number Title Priority Date Filing Date
CNB028210301A Expired - Fee Related CN1253008C (zh) 2001-10-26 2002-10-14 空间可分级压缩的方法和设备
CNB028210638A Expired - Fee Related CN1294761C (zh) 2001-10-26 2002-10-21 视频编解码方法及装置
CNB028210859A Expired - Fee Related CN100471269C (zh) 2001-10-26 2002-10-21 视频信息压缩装置和方法、解码方法、分层编码器和解码器

Country Status (7)

Country Link
US (4) US20050002458A1 (zh)
EP (4) EP1442601A1 (zh)
JP (4) JP2005506815A (zh)
KR (4) KR20040054746A (zh)
CN (4) CN1253008C (zh)
AU (2) AU2002339573A1 (zh)
WO (4) WO2003036978A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103038783A (zh) * 2010-03-09 2013-04-10 泰景系统公司 自适应视频解码电路及其方法
CN104754355A (zh) * 2010-01-19 2015-07-01 三星电子株式会社 对运动矢量进行编码和解码的方法和设备

Families Citing this family (123)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2441206A1 (en) 2001-03-19 2002-09-26 Gyros Ab Characterization of reaction variables
US6956902B2 (en) * 2001-10-11 2005-10-18 Hewlett-Packard Development Company, L.P. Method and apparatus for a multi-user video navigation system
JP2005506815A (ja) * 2001-10-26 2005-03-03 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ 空間拡張可能圧縮のための方法及び装置
GB2417384B (en) * 2001-12-03 2006-05-03 Imagination Tech Ltd Method and apparatus for compressing data and decompressing compressed data
GB0128888D0 (en) 2001-12-03 2002-01-23 Imagination Tech Ltd Method and apparatus for compressing data and decompressing compressed data
EP1833262A1 (en) * 2002-01-18 2007-09-12 Kabushiki Kaisha Toshiba Video encoding method and apparatus and video decoding method and apparatus
US20030151753A1 (en) 2002-02-08 2003-08-14 Shipeng Li Methods and apparatuses for use in switching between streaming video bitstreams
US6996173B2 (en) * 2002-01-25 2006-02-07 Microsoft Corporation Seamless switching of scalable video bitstreams
US7483487B2 (en) * 2002-04-11 2009-01-27 Microsoft Corporation Streaming methods and systems
BR0316559A (pt) * 2002-11-25 2005-10-04 Thomson Licensing Sa Decodificador em duas camadas para dvd hìbrido de alta definição
JP2004350263A (ja) * 2003-04-28 2004-12-09 Canon Inc 画像処理装置及び画像処理方法
JP2007525067A (ja) * 2003-06-19 2007-08-30 トムソン ライセンシング 低複雑性空間スケーラブル符号化のための方法および装置
TWI362226B (en) * 2003-10-24 2012-04-11 Qualcomm Inc Method and apparatus for seamlessly switching reception between multimedia streams in a wireless communication system
EP1692872A1 (en) * 2003-12-03 2006-08-23 Koninklijke Philips Electronics N.V. System and method for improved scalability support in mpeg-2 systems
WO2005057935A2 (en) * 2003-12-09 2005-06-23 Koninklijke Philips Electronics, N.V. Spatial and snr scalable video coding
JP2005295494A (ja) * 2003-12-25 2005-10-20 Matsushita Electric Ind Co Ltd 直流オフセットキャンセル回路
JP2007520950A (ja) * 2004-01-21 2007-07-26 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 空間及びｓｎｒファイングラニュラースケーラブルビデオ符号化及び伝送の方法
KR100586883B1 (ko) 2004-03-04 2006-06-08 삼성전자주식회사 비디오 스트리밍 서비스를 위한 비디오 코딩방법, 프리디코딩방법, 비디오 디코딩방법, 및 이를 위한 장치와, 이미지 필터링방법
KR100994773B1 (ko) * 2004-03-29 2010-11-16 삼성전자주식회사 계층적 움직임 추정에 있어서 움직임 벡터 생성 방법 및장치
KR101014667B1 (ko) * 2004-05-27 2011-02-16 삼성전자주식회사 스케일러블 동영상 인코딩, 디코딩 장치 및 그 방법
US8249159B2 (en) * 2004-06-23 2012-08-21 Agency For Science, Technology And Research Scalable video coding with grid motion estimation and compensation
WO2006008681A1 (en) * 2004-07-13 2006-01-26 Koninklijke Philips Electronics N.V. Method of spatial and snr picture compression
KR100621581B1 (ko) 2004-07-15 2006-09-13 삼성전자주식회사 기초 계층을 포함하는 비트스트림을 프리디코딩,디코딩하는 방법, 및 장치
KR100679011B1 (ko) * 2004-07-15 2007-02-05 삼성전자주식회사 기초 계층을 이용하는 스케일러블 비디오 코딩 방법 및 장치
CN100466735C (zh) * 2004-07-15 2009-03-04 三星电子株式会社 视频编码和解码方法以及视频编码器和解码器
TWI268715B (en) 2004-08-16 2006-12-11 Nippon Telegraph & Telephone Picture encoding method, picture decoding method, picture encoding apparatus, and picture decoding apparatus
KR100662350B1 (ko) * 2004-08-23 2007-01-02 엘지전자 주식회사 영상 전송 장치 및 방법
EP1631089A1 (en) * 2004-08-30 2006-03-01 Matsushita Electric Industrial Co., Ltd. Video coding apparatus and decoding apparatus
EP1790166A2 (en) * 2004-08-31 2007-05-30 Koninklijke Philips Electronics N.V. A method and apparatus for motion estimation
KR100679018B1 (ko) * 2004-09-07 2007-02-05 삼성전자주식회사 다계층 비디오 코딩 및 디코딩 방법, 비디오 인코더 및디코더
KR100878809B1 (ko) 2004-09-23 2009-01-14 엘지전자 주식회사 비디오 신호의 디코딩 방법 및 이의 장치
DE102004059993B4 (de) * 2004-10-15 2006-08-31 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen einer codierten Videosequenz unter Verwendung einer Zwischen-Schicht-Bewegungsdaten-Prädiktion sowie Computerprogramm und computerlesbares Medium
KR100679022B1 (ko) 2004-10-18 2007-02-05 삼성전자주식회사 계층간 필터링을 이용한 비디오 코딩 및 디코딩방법과,비디오 인코더 및 디코더
WO2006080655A1 (en) * 2004-10-18 2006-08-03 Samsung Electronics Co., Ltd. Apparatus and method for adjusting bitrate of coded scalable bitsteam based on multi-layer
KR100664929B1 (ko) 2004-10-21 2007-01-04 삼성전자주식회사 다 계층 기반의 비디오 코더에서 모션 벡터를 효율적으로압축하는 방법 및 장치
DE102004056447A1 (de) 2004-11-23 2006-05-24 Siemens Ag Codierverfahren und Decodierverfahren, sowie Codiervorrichtung und Decodiervorrichtung
KR20060059769A (ko) * 2004-11-29 2006-06-02 엘지전자 주식회사 영상신호의 엔코딩시에 베이스 레이어 픽처의 벡터를이용하기 위한 미세정보를 코딩하는 방법과 그 미세정보를이용하는 디코딩 방법
US20060120454A1 (en) * 2004-11-29 2006-06-08 Park Seung W Method and apparatus for encoding/decoding video signal using motion vectors of pictures in base layer
KR20060059764A (ko) * 2004-11-29 2006-06-02 엘지전자 주식회사 앞서 변환된 에이취-픽처를 기준픽처로 이용하는 영상신호의 엔코딩 방법 및 장치와 그 영상신호를 디코딩하는 방법및 장치
KR100888962B1 (ko) 2004-12-06 2009-03-17 엘지전자 주식회사 영상 신호의 인코딩 및 디코딩 방법
KR100888963B1 (ko) * 2004-12-06 2009-03-17 엘지전자 주식회사 영상 신호의 스케일러블 인코딩 및 디코딩 방법
KR100670459B1 (ko) * 2004-12-10 2007-01-16 엘지전자 주식회사 영상 압축 부호화 및 복호화 방법과 장치
JP2008523686A (ja) * 2004-12-13 2008-07-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ スケーラブル画像符号化
KR20060069227A (ko) * 2004-12-16 2006-06-21 엘지전자 주식회사 영상신호의 엔코딩/디코딩시에 영상블록을 위한 모션벡터를베이스 레이어 픽처의 모션벡터로부터 유도하는 방법 및장치
JP2008526077A (ja) 2004-12-22 2008-07-17 エヌエックスピー ビー ヴィ ビデオストリーム変更装置
JP5313223B2 (ja) * 2005-01-07 2013-10-09 株式会社エヌ・ティ・ティ・ドコモ 動画像復号装置及び動画像符号化装置
JP2006333436A (ja) * 2005-01-07 2006-12-07 Ntt Docomo Inc 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、動画像符号化プログラム、及び、動画像復号プログラム
KR100701740B1 (ko) * 2005-01-11 2007-03-29 엘지전자 주식회사 영상 데이터의 ｐｉ프레임 인코딩과 디코딩을 위한 장치및 방법
US20060153295A1 (en) * 2005-01-12 2006-07-13 Nokia Corporation Method and system for inter-layer prediction mode coding in scalable video coding
KR100714689B1 (ko) * 2005-01-21 2007-05-04 삼성전자주식회사 다 계층 구조 기반의 스케일러블 비디오 코딩 및 디코딩방법, 이를 위한 장치
KR100913088B1 (ko) * 2005-01-21 2009-08-21 엘지전자 주식회사 베이스 레이어의 내부모드 블록의 예측정보를 이용하여영상신호를 엔코딩/디코딩하는 방법 및 장치
EP1900222A4 (en) 2005-01-21 2009-10-28 Lg Electronics Inc METHOD AND APPARATUS FOR ENCODING / DECODING VIDEO SIGNALS USING BLOCK PREDICTION INFORMATION
CN100340116C (zh) * 2005-01-21 2007-09-26 浙江大学 一种复杂度可分级的运动估计方法
WO2006078109A1 (en) * 2005-01-21 2006-07-27 Samsung Electronics Co., Ltd. Method of multi-layer based scalable video encoding and decoding and apparatus for the same
KR100703748B1 (ko) 2005-01-25 2007-04-05 삼성전자주식회사 다 계층 기반의 비디오 프레임을 효율적으로 예측하는 방법및 그 방법을 이용한 비디오 코딩 방법 및 장치
KR100703770B1 (ko) 2005-03-25 2007-04-06 삼성전자주식회사 가중 예측을 이용한 비디오 코딩 및 디코딩 방법, 이를위한 장치
US7876833B2 (en) * 2005-04-11 2011-01-25 Sharp Laboratories Of America, Inc. Method and apparatus for adaptive up-scaling for spatially scalable coding
DE102005016827A1 (de) * 2005-04-12 2006-10-19 Siemens Ag Adaptive Interpolation bei der Bild- oder Videokodierung
KR100763182B1 (ko) * 2005-05-02 2007-10-05 삼성전자주식회사 다계층 기반의 가중 예측을 이용한 비디오 코딩 방법 및장치
US8619860B2 (en) * 2005-05-03 2013-12-31 Qualcomm Incorporated System and method for scalable encoding and decoding of multimedia data using multiple layers
US7974341B2 (en) * 2005-05-03 2011-07-05 Qualcomm, Incorporated Rate control for multi-layer video design
KR100878811B1 (ko) * 2005-05-26 2009-01-14 엘지전자 주식회사 비디오 신호의 디코딩 방법 및 이의 장치
KR20060122671A (ko) * 2005-05-26 2006-11-30 엘지전자 주식회사 영상 신호의 스케일러블 인코딩 및 디코딩 방법
US7830961B2 (en) * 2005-06-21 2010-11-09 Seiko Epson Corporation Motion estimation and inter-mode prediction
WO2007009239A1 (en) * 2005-07-19 2007-01-25 March Networks Corporation Hierarchical data storage
US8289370B2 (en) 2005-07-20 2012-10-16 Vidyo, Inc. System and method for scalable and low-delay videoconferencing using scalable video coding
KR100725407B1 (ko) * 2005-07-21 2007-06-07 삼성전자주식회사 방향적 인트라 잔차 예측에 따라 비디오 신호를 인코딩하고디코딩하는 방법 및 장치
KR20070012201A (ko) * 2005-07-21 2007-01-25 엘지전자 주식회사 영상 신호의 인코딩 및 디코딩 방법
US7894535B2 (en) * 2005-08-23 2011-02-22 Sony Ericsson Mobile Communications Ab Systems and methods for distributing and/or playing multicasted video signals in multiple display formats
US8139642B2 (en) * 2005-08-29 2012-03-20 Stmicroelectronics S.R.L. Method for encoding signals, related systems and program product therefor
KR100763194B1 (ko) * 2005-10-14 2007-10-04 삼성전자주식회사 단일 루프 디코딩 조건을 만족하는 인트라 베이스 예측방법, 상기 방법을 이용한 비디오 코딩 방법 및 장치
FR2894422A1 (fr) * 2005-12-01 2007-06-08 Thomson Licensing Sas Procede de prediction de donnees mouvement et de texture
FR2894423A1 (fr) * 2005-12-05 2007-06-08 Thomson Licensing Sas Procede de prediction de donnees mouvement et de texture
FR2894424A1 (fr) * 2005-12-05 2007-06-08 Thomson Licensing Sas Procede de prediction de donnees mouvement et de texture
CN102036071B (zh) 2005-12-08 2014-04-02 维德约股份有限公司 用于视频通信系统中的差错弹性和随机接入的系统和方法
US8170102B2 (en) * 2005-12-19 2012-05-01 Seiko Epson Corporation Macroblock homogeneity analysis and inter mode prediction
US7843995B2 (en) * 2005-12-19 2010-11-30 Seiko Epson Corporation Temporal and spatial analysis of a video macroblock
US8315308B2 (en) 2006-01-11 2012-11-20 Qualcomm Incorporated Video coding with fine granularity spatial scalability
KR100772873B1 (ko) * 2006-01-12 2007-11-02 삼성전자주식회사 스무딩 예측을 이용한 다계층 기반의 비디오 인코딩 방법,디코딩 방법, 비디오 인코더 및 비디오 디코더
KR100843080B1 (ko) * 2006-02-24 2008-07-02 삼성전자주식회사 비디오 트랜스코딩 방법 및 장치
US8693538B2 (en) * 2006-03-03 2014-04-08 Vidyo, Inc. System and method for providing error resilience, random access and rate control in scalable video communications
WO2007111450A1 (en) * 2006-03-24 2007-10-04 Electronics And Telecommunications Research Institute Coding method of reducing interlayer redundancy using mition data of fgs layer and device thereof
KR100759870B1 (ko) * 2006-03-24 2007-09-18 경희대학교 산학협력단 Ｃｂｐ에 기초하여 선택된 보간 필터를 이용하여 공간 계층 간의 예측을 수행하는 ｈ.264 스케일러블 영상 부호화/복호화 방법 및 그 장치
US8184712B2 (en) * 2006-04-30 2012-05-22 Hewlett-Packard Development Company, L.P. Robust and efficient compression/decompression providing for adjustable division of computational complexity between encoding/compression and decoding/decompression
US8250618B2 (en) * 2006-09-18 2012-08-21 Elemental Technologies, Inc. Real-time network adaptive digital video encoding/decoding
EP2092748A4 (en) * 2006-12-14 2011-01-05 Thomson Licensing METHOD AND DEVICE FOR CODING AND / OR DECODING VIDEO DATA USING EXPANSION LAYER RESTRICTION FOR SOFTENCE SCALINGABILITY
EP2102988A4 (en) * 2007-01-09 2010-08-18 Vidyo Inc IMPROVED SYSTEMS AND METHODS OF TROUBLESHOOTING IN VIDEO COMMUNICATION SYSTEMS
EP1944978A1 (en) * 2007-01-12 2008-07-16 Koninklijke Philips Electronics N.V. Method and system for encoding a video signal. encoded video signal, method and system for decoding a video signal
JP2008176415A (ja) 2007-01-16 2008-07-31 Nikon Corp 撮像装置、画像記録プログラム、画像データ記録媒体、画像処理装置および画像処理プログラム
CN101272489B (zh) * 2007-03-21 2011-08-10 中兴通讯股份有限公司 视频图像质量增强的编解码装置与编解码方法
ATE484155T1 (de) * 2007-06-29 2010-10-15 Fraunhofer Ges Forschung Skalierbare videocodierung, die pixelwert- verfeinerungsskalierbarkeit unterstützt
US8331451B2 (en) 2007-07-18 2012-12-11 Samsung Electronics Co., Ltd. Method and apparatus for enhancing resolution of video image
US8184715B1 (en) 2007-08-09 2012-05-22 Elemental Technologies, Inc. Method for efficiently executing video encoding operations on stream processor architectures
US8121197B2 (en) 2007-11-13 2012-02-21 Elemental Technologies, Inc. Video encoding and decoding using parallel processors
KR101375663B1 (ko) * 2007-12-06 2014-04-03 삼성전자주식회사 영상을 계층적으로 부호화/복호화하는 방법 및 장치
JP5138048B2 (ja) * 2007-12-19 2013-02-06 ドルビー ラボラトリーズ ライセンシング コーポレイション 適応性動き推定
JP4849130B2 (ja) * 2008-02-19 2012-01-11 ソニー株式会社 画像処理装置、および画像処理方法、並びにプログラム
CN102090069B (zh) * 2008-06-09 2014-04-30 维德约股份有限公司 可缩放视频和音频通信系统中的改进视图布局管理
JP5232114B2 (ja) * 2008-09-29 2013-07-10 パナソニック株式会社 画像符号化装置、及び画像符号化方法
KR100958253B1 (ko) 2008-10-21 2010-05-17 인하대학교 산학협력단 블록 단위 스케러블 부호화기, 복호화기 및 그 방법
KR101557504B1 (ko) * 2009-04-13 2015-10-07 삼성전자주식회사 채널 적응형 비디오 전송 방법, 이를 이용한 장치 및 이를 제공하는 시스템
US8948488B2 (en) * 2009-07-31 2015-02-03 General Electric Company Methods and systems for digitally enhancing an image of a stained material
IT1399565B1 (it) * 2010-04-16 2013-04-19 Fond Istituto Italiano Di Tecnologia "procedimento di codifica/decodifica di segnali video/immagine con descrizione multipla e relativo apparato di codifica/decodifica"
WO2012036468A2 (en) * 2010-09-14 2012-03-22 Samsung Electronics Co., Ltd. Method and apparatus for hierarchical picture encoding and decoding
US8644383B2 (en) 2011-03-10 2014-02-04 Microsoft Corporation Mean absolute difference prediction for video encoding rate control
CA2829493A1 (en) 2011-03-10 2012-09-13 Vidyo, Inc. Dependency parameter set for scalable video coding
US20130003847A1 (en) * 2011-06-30 2013-01-03 Danny Hong Motion Prediction in Scalable Video Coding
CN103636137A (zh) * 2011-06-30 2014-03-12 维德约股份有限公司 可伸缩视频编码技术
WO2013009441A2 (en) * 2011-07-12 2013-01-17 Vidyo, Inc. Scalable video coding using multiple coding technologies
US9386311B2 (en) * 2011-12-01 2016-07-05 Intel Corporation Motion estimation methods for residual prediction
WO2013137890A1 (en) * 2012-03-15 2013-09-19 Intel Corporation Hierarchical motion estimation employing nonlinear scaling and adaptive source block size
US9313486B2 (en) 2012-06-20 2016-04-12 Vidyo, Inc. Hybrid video coding techniques
JP5464238B2 (ja) * 2012-07-10 2014-04-09 株式会社ニコン 撮像装置、画像記録プログラム、画像処理装置および画像処理プログラム
US20140072048A1 (en) * 2012-09-13 2014-03-13 Samsung Electronics Co., Ltd Method and apparatus for a switchable de-ringing filter for image/video coding
KR20150063379A (ko) * 2012-09-28 2015-06-09 소니 주식회사 부호화 장치 및 부호화 방법, 및 복호 장치 및 복호 방법
US20160234520A1 (en) * 2013-09-16 2016-08-11 Entropic Communications, Llc Efficient progressive jpeg decode method
CN104581180A (zh) * 2014-12-31 2015-04-29 乐视网信息技术（北京）股份有限公司 一种视频编码方法及装置
US10616583B2 (en) * 2016-06-30 2020-04-07 Sony Interactive Entertainment Inc. Encoding/decoding digital frames by down-sampling/up-sampling with enhancement information
MX2019008890A (es) * 2017-02-03 2019-09-10 Sony Corp Dispositivo de transmision, metodo de transmision, dispositivo de reception y metodo de recepcion.
US10356404B1 (en) * 2017-09-28 2019-07-16 Amazon Technologies, Inc. Image processing using just-noticeable-difference thresholds
CN109274966A (zh) * 2018-09-21 2019-01-25 华中科技大学 一种基于运动矢量的监控视频内容去重方法和系统
GB2623226A (en) * 2019-07-05 2024-04-10 V Nova Int Ltd Quantization of residuals in video coding
WO2021005347A1 (en) * 2019-07-05 2021-01-14 V-Nova International Ltd Quantization of residuals in video coding

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04177992A (ja) * 1990-11-09 1992-06-25 Victor Co Of Japan Ltd 階層性を有する画像符号化装置
US5253058A (en) * 1992-04-01 1993-10-12 Bell Communications Research, Inc. Efficient coding scheme for multilevel video transmission
FR2697393A1 (fr) * 1992-10-28 1994-04-29 Philips Electronique Lab Dispositif de codage de signaux numériques représentatifs d'images, et dispositif de décodage correspondant.
JP3545000B2 (ja) * 1992-11-02 2004-07-21 ソニー株式会社 画像信号符号化装置、画像信号復号化装置
JP3367992B2 (ja) * 1993-04-27 2003-01-20 日本ビクター株式会社 動画像符号化装置および復号化装置
WO1995035628A1 (en) * 1994-06-17 1995-12-28 Snell & Wilcox Limited Video compression
JPH08256341A (ja) * 1995-03-17 1996-10-01 Sony Corp 画像信号符号化方法、画像信号符号化装置、画像信号記録媒体、及び画像信号復号化装置
US5619256A (en) * 1995-05-26 1997-04-08 Lucent Technologies Inc. Digital 3D/stereoscopic video compression technique utilizing disparity and motion compensated predictions
US6957350B1 (en) * 1996-01-30 2005-10-18 Dolby Laboratories Licensing Corporation Encrypted and watermarked temporal and resolution layering in advanced television
JP3263807B2 (ja) * 1996-09-09 2002-03-11 ソニー株式会社 画像符号化装置および画像符号化方法
IL167288A (en) * 1997-04-01 2012-03-29 Sony Corp Image encryption device, image encryption method, image decryption device, image decryption method, and appropriate medium
US6057884A (en) * 1997-06-05 2000-05-02 General Instrument Corporation Temporal and spatial scaleable coding for video object planes
US6269192B1 (en) 1997-07-11 2001-07-31 Sarnoff Corporation Apparatus and method for multiscale zerotree entropy encoding
KR100281099B1 (ko) * 1997-07-30 2001-04-02 구자홍 동영상의부호화에따른블록화현상제거방법
US6795501B1 (en) * 1997-11-05 2004-09-21 Intel Corporation Multi-layer coder/decoder for producing quantization error signal samples
US6850564B1 (en) * 1998-06-26 2005-02-01 Sarnoff Corporation Apparatus and method for dynamically controlling the frame rate of video streams
US6700933B1 (en) * 2000-02-15 2004-03-02 Microsoft Corporation System and method with advance predicted bit-plane coding for progressive fine-granularity scalable (PFGS) video coding
US6493387B1 (en) * 2000-04-10 2002-12-10 Samsung Electronics Co., Ltd. Moving picture coding/decoding method and apparatus having spatially scalable architecture and signal-to-noise ratio scalable architecture together
US7133449B2 (en) * 2000-09-18 2006-11-07 Broadcom Corporation Apparatus and method for conserving memory in a fine granularity scalability coding system
US6907070B2 (en) * 2000-12-15 2005-06-14 Microsoft Corporation Drifting reduction and macroblock-based control in progressive fine granularity scalable video coding
US6792044B2 (en) * 2001-05-16 2004-09-14 Koninklijke Philips Electronics N.V. Method of and system for activity-based frequency weighting for FGS enhancement layers
KR20030020419A (ko) * 2001-05-29 2003-03-08 코닌클리케 필립스 일렉트로닉스 엔.브이. 비디오 트랜스코딩을 위한 방법 및 디바이스
JP2005506815A (ja) * 2001-10-26 2005-03-03 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ 空間拡張可能圧縮のための方法及び装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104754355A (zh) * 2010-01-19 2015-07-01 三星电子株式会社 对运动矢量进行编码和解码的方法和设备
CN104754355B (zh) * 2010-01-19 2018-11-23 三星电子株式会社 一种图像解码设备
US10484709B2 (en) 2010-01-19 2019-11-19 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding motion vector based on reduced motion vector predictor candidates
US10708616B2 (en) 2010-01-19 2020-07-07 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding motion vector based on reduced motion vector predictor candidates
CN103038783A (zh) * 2010-03-09 2013-04-10 泰景系统公司 自适应视频解码电路及其方法
CN103038783B (zh) * 2010-03-09 2016-03-09 泰景系统公司 自适应视频解码电路及其方法

Also Published As

Publication number Publication date
AU2002339573A1 (en) 2003-05-06
KR20040054746A (ko) 2004-06-25
JP2005507587A (ja) 2005-03-17
EP1442601A1 (en) 2004-08-04
EP1442605A2 (en) 2004-08-04
WO2003036978A1 (en) 2003-05-01
JP2005507589A (ja) 2005-03-17
JP2005506815A (ja) 2005-03-03
CN1294761C (zh) 2007-01-10
KR20040054742A (ko) 2004-06-25
KR100929330B1 (ko) 2009-12-03
CN1575604A (zh) 2005-02-02
AU2002341323A1 (en) 2003-05-06
KR20040047977A (ko) 2004-06-05
US7359558B2 (en) 2008-04-15
US20030086622A1 (en) 2003-05-08
US20040252767A1 (en) 2004-12-16
CN1254978C (zh) 2006-05-03
WO2003036981A1 (en) 2003-05-01
CN1575602A (zh) 2005-02-02
WO2003036983A2 (en) 2003-05-01
CN1253008C (zh) 2006-04-19
WO2003036983A3 (en) 2004-06-10
US20050002458A1 (en) 2005-01-06
KR20040054747A (ko) 2004-06-25
EP1452035A2 (en) 2004-09-01
US20040252901A1 (en) 2004-12-16
EP1442606A1 (en) 2004-08-04
CN100471269C (zh) 2009-03-18
CN1611077A (zh) 2005-04-27
WO2003036982A3 (en) 2004-06-03
US7146056B2 (en) 2006-12-05
JP2005507588A (ja) 2005-03-17
WO2003036982A2 (en) 2003-05-01

Similar Documents

Publication Publication Date Title
CN1254978C (zh) 用于空间可伸缩的压缩和解压缩视图像的设备和方法以及用于此的编码器
CN1232123C (zh) 用于精细可伸缩性增强层的基于活动的频率加权方法及系统
CN1764280B (zh) 基于多层在视频编码器中有效压缩运动矢量的方法和装置
CN1751519A (zh) 视频编码
CN1254975C (zh) 对视频数据和视频信号进行编码和解码的方法及装置
JP3132456B2 (ja) 階層的画像符号化方式、及び階層的画像復号方式
CN1173577C (zh) 补偿idct失配的dct域下转换系统
CN1640145A (zh) 使用高质量参考帧的改进高效快速的结构
CN101288308A (zh) 满足单环解码条件的帧内基本层预测方法及使用该预测方法的视频编码方法和设备
JP2005507589A5 (zh)
CA2543947A1 (en) Method and apparatus for adaptively selecting context model for entropy coding
CN1140132C (zh) 运动图像代码串变换装置及其方法
MX2008012863A (es) Metodo y aparato de codificacion de video que soporta analisis sintactico independiente.
JP2004032718A (ja) フェーディング推定／補償によりビデオフレームを処理するシステムおよび方法
CN1575606A (zh) 空间可缩放的压缩
KR100834757B1 (ko) 엔트로피 부호화 효율을 향상시키는 방법 및 그 방법을이용한 비디오 인코더 및 비디오 디코더
CN112866697B (zh) 视频图像编解码方法、装置、电子设备及存储介质
CN1726725A (zh) 弹性存储
CN1633814A (zh) 存储器带宽效率高的精细可分级(fgs)编码器
CN1515085A (zh) 用于细粒度可伸缩视频的运动补偿
JPH04322593A (ja) 画像符号化装置及びその復号化装置
JP2004266794A (ja) マルチ・リゾルーション・ビデオ符号化および復号化
KR100927389B1 (ko) 스케일가능하지 않은 코딩된 비디오 신호로부터 스케일가능한 코딩된 비디오 신호를 생성하는 방법
JP4781301B2 (ja) 符号化側動き補償装置及び復号側動き補償装置
Özenli et al. Performance analysis of Dirac video codec in different motion vector accuracies and wavelet lifting decompositions

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20060503

Termination date: 20101021