CN101080014A - 视频解码方法和装置 - Google Patents

视频解码方法和装置 Download PDF

Info

Publication number
CN101080014A
CN101080014A CNA2007101288459A CN200710128845A CN101080014A CN 101080014 A CN101080014 A CN 101080014A CN A2007101288459 A CNA2007101288459 A CN A2007101288459A CN 200710128845 A CN200710128845 A CN 200710128845A CN 101080014 A CN101080014 A CN 101080014A
Authority
CN
China
Prior art keywords
image signal
image
signal
decoded
compressing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2007101288459A
Other languages
English (en)
Other versions
CN101080014B (zh
Inventor
古藤晋一郎
平井隆介
山口昇
浅野涉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Publication of CN101080014A publication Critical patent/CN101080014A/zh
Application granted granted Critical
Publication of CN101080014B publication Critical patent/CN101080014B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/43—Hardware specially adapted for motion estimation or compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H04N19/426—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements using memory downsizing methods
    • H04N19/428—Recompression, e.g. by spatial or temporal decimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一种视频解码装置包括：解码器，用于使用用于视频信号的预测图像信号来解码视频编码数据；压缩设备，用于压缩解码图像信号；第一存储器，用于存储解码图像信号；第二存储器，用于存储压缩图像信号；解压缩设备，用于解压缩从第二存储器读取的压缩图像信号；选择器，用于根据图像单元中的视频编码数据的编码类型和块单元中的预测模式中至少之一，选择从第一存储器读取的解码图像信号和从压缩设备读取的压缩/解压缩图像信号之一作为参考图像信号；以及运动补偿器，用于对参考图像信号执行运动补偿来产生预测图像信号。

Description

视频解码方法和装置
技术领域
本发明涉及一种视频解码方法和装置。
背景技术
诸如MPEG-2(ISO/IEC 13818-2|ITU-T Rec.H.262)、MPEG-4(ISO/IEC14496-2)或H.264(ITU-T Rec.H.264|ISO/IEC 14496-10)的视频编码国际标准系统采用画面间预测编码(inter-predictive encoding)，诸如帧间或场间预测编码。在基于画面间预测编码的编码视频数据的解码过程中，预测图像通过使用存储在图像存储器中的多个帧的多个参考图像的运动补偿来产生。
用于存储参考图像的图像存储器使用外部存储器如DRAM，或内置在解码LSI中的内部存储器。当产生预测图像时，图像存储器被频繁地访问。因此，需要宽的存储器带宽。为了增加存储器带宽，LSI的管脚数量由于数据比特宽度的增加而必须增加，或者外部存储器的数量或操作频率必须增加。因此，实施成本也增加了。
在此提出了一种压缩解码图像和将压缩的解码图像存储在图像存储器中以便减小存储器访问频率、即存储器带宽的技术。在这种技术中，当存储在图像存储器中的解码图像被用作参考图像或用于显示的重构图像时，将其从图像存储器中读出并解压缩。根据例如JP-A2000-50272(KOKAI)和JP-A2000-78568(KOKAI)，解码图像通过滤波被转化为压缩图像，然后被存储到图像存储器。参考图像通过解压缩从图像存储器中所读取的压缩图像而被产生。
根据JP-A2000-04440(KOKAI)，解码过程基于仅使用视频编码数据的低频分量的压缩图像来完成。参考图像通过哈达玛(Hadamard)转换和量化来压缩解码图像而被产生，并且被存储在图像存储器中。在解码的时候，从图像存储器所读取的压缩参考图像通过反量化和反哈达玛转换来被解压缩。
在以上现有技术所描述的存储器带宽减小技术中，对解码图像进行滤波或不可逆的压缩和解压缩过程如哈达玛转换和量化来产生参考图像。因此，由于解码过程产生的压缩失真被叠加到参考图像上。在视频编码系统如MPEG的情况中，参考图像的失真被叠加到下一个解码图像上，并且被叠加有失真的解码图像被用作下一个参考图像。通过这种方式，在解码的时候所发生的失真随着时间被累积，并且在重构图像中被感知为大的噪声。
发明内容
本发明的一个方面提供了一种视频解码装置，包括：使用用于视频信号的预测图像信号的解码视频编码数据来产生解码图像信号的解码器；配置为压缩解码图像信号来产生压缩图像信号的压缩单元；存储解码图像信号的第一存储器；存储压缩图像信号的第二存储器；配置为解压缩从第二存储器所读取的压缩图像信号来产生压缩/解压缩图像信号的解压缩单元；根据图像单元中的视频编码数据的编码类型和块单元中的预测模式中至少之一，选择从第一存储器所读取的解码图像信号和压缩/解压缩图像信号之一作为参考图像信号的选择器；以及在参考图像信号上执行运动补偿来产生预测图像信号的运动补偿器。
附图说明
图1是根据第一实施方式的视频解码装置的框图；
图2是示出运动补偿的预测帧间编码的预测结构的图示；
图3是说明使存储器带宽减小成为可能的视频解码装置的解码操作的图示；
图4是说明根据第一实施方式的解码操作的图示；
图5是说明第一实施方式的另一种解操作的图示；
图6是解释根据实施方式的第一解码模式选择方法的流程图；
图7是解释根据实施方式的第二解码模式选择方法的流程图；
图8是解释根据实施方式的第三解码模式选择方法的流程图；
图9是解释根据实施方式的第四解码模式选择方法的流程图；
图10是解释根据实施方式的第五解码模式选择方法的流程图；
图11是解释根据实施方式的第六解码模式选择方法的流程图；
图12是解释根据实施方式的第七解码模式选择方法的流程图；
图13是表示使用未压缩图像以宏块(macroblock)为单元执行的解码处理的过程的流程图；
图14是表示使用压缩图像以宏块为单元中执行的解码处理的过程的流程图；
图15是作为第一例子用于解码图像的压缩设备的框图；
图16是作为第一例子用于解码图像的解压缩设备的框图；
图17是图16的解压缩设备的改进的框图；
图18是作为第二例子用于解码图像的压缩设备的框图；
图19是作为第二例子用于解码图像的解压缩设备的框图；
图20是作为第三例子用于解码图像的压缩设备的框图；
图21是作为第三例子用于解码图像的解压缩设备的框图；
图22是根据第二实施方式的视频解码装置的框图；
图23是根据第三实施方式的视频解码装置的框图；
图24是根据第四实施方式的视频解码装置的框图；
具体实施方式
将参考附图描述实施方式。
(第一实施方式)
图1所示的第一实施方式的视频解码装置被提供以由编码系统使用运动补偿预测如MPEG-2编码运动图像而产生的视频编码数据100(例如，MPEG-2比特流)。视频编码数据100由可变长度解码器101进行可变长度解码，即经过可变长度编码的解码过程。可变长度解码器101产生量化正交转换系数(例如DCT系数)和编码模式信息119。
编码模式信息119包括表示视频编码数据的编码类型的信息，即图像单元中的编码类型(编码图像类型)、像素块单元中(例如宏块单元中)的编码类型(编码宏块类型)或像素块单元中的预测模式。量化正交转换系数由反量化器102反量化。反量化正交转换系数经过反正交转换器103的反正交转换来产生预测误差信号。
加法器104以像素块为单元将从反正交转换器103所输出的预测误差信号和从运动补偿器106所输出的预测图像信号107相加并产生以像素块为单元的解码图像信号108。像素块是一维块或包括多个像素的二维块。解码图像信号108被写入外部存储器112中的第一帧存储器113。解码图像信号108被压缩设备115压缩。压缩设备115所产生的压缩图像信号被写入第二帧存储器114。第一帧存储器113和第二帧存储器114在图1的例子中被提供在外部存储器112(存储器，比如在解码LSI外部的DRAM)。然而，它们也可被提拱在内部存储器(内置在解码LSI中的存储器)中。
参考图像选择器120根据从可变长度解码器101所输出的编码模式信息119(像素块单元中的预测模式、编码图像类型或编码宏块类型)选择解码模式，并选择适于所选择的解码模式的参考图像信号。换句话说，参考图像选择器120根据所选择的解码模式，选择从第一帧存储器113所读取的解码图像信号或由解压缩设备116通过解压缩从第二帧存储器114所读取的压缩图像信号而产生的图像信号(以下称为压缩/解压缩图像信号)之一作为参考图像信号。
以下将详细解释解码模式选择方法。参考图像选择器120所选择的参考图像信号被输入到运动补偿器106。从第二帧存储器114所读取的压缩图像信号通过第二解压缩设备117解压缩。从第二解压缩设备117所输出的图像信号是通过解压缩由压缩设备115压缩、并被存储在第二帧存储器114中的解码图像信号而获得的信号，其被称为压缩/解压缩信号。
压缩/解压缩图像信号被提供给后端处理器105。后端处理器105对输入压缩/解压缩图像信号执行后处理，如缩放(scaling)、边缘增强和颜色校正，以输出图像信号(被称为重构信号)110用于显示。重构图像信号110被提供给显示设备来显示运动图像。
通常，视频解码过程需要(a)将解码图像信号写入图像存储器，(b)从图像存储器中读取解码图像信号用于显示，即重构图像信号的产生，以及(c)从图像存储器读取参考图像信号以产生预测图像信号。因此，在每个单位时间到图像存储器的传送数据的数量，即存储器带宽大大增加。特别地，当高像素速率(pixel rate)的视濒信号的视频编码数据、诸如高清帧(高清电视：HDTV)被解码时，需要非常宽的存储器带宽。
通常，为了对应于宽的存储器带宽，多个图像存储器被并行配置以增加将被同时传送的数据的比特宽度，并且使用允许高速传送的存储器元件。因此，图像存储器的成本很大程度地影响视频解码装置的实施成本。当经运动补偿预测编码的运动图像数据被解码时，对运动向量所指示的图像存储器中位置的像素块的随机存取在读取参考图像信号时是必须的。因此，存储器存取的开销增加，并且特别需要高带宽。
解码图像信号以像素块为单元被连续地写入图像存储器中。此外，用于显示的解码图像信号以行为单元被从图像存储器中连续读取。因此，用于写入/读取解码图像信号的存储器存取的开销减小了。
在第一实施方式中，当需要宽存储器带宽的参考图像信号被从外部存储器112读取以便产生预测图像信号时，传送数据的量被减小以降低总存储器带宽和解码装置的成本。换句话说，根据第一实施方式，不仅提供了如图1所示的外部存储器112中临时存储正常解码图像信号的第一帧存储器113，而且提供了第二帧存储器114，用于临时存储由压缩设备115所压缩的解码图像信号。
为了获得参考图像信号，参考图像选择器120根据对应于表示编码图像类型、编码宏块类型或预测模式的编码模式信息的解码模式选择(a)当图像信号被从外部存储器112读取时从第一帧存储器113所读取的未压缩解码图像信号或者，(b)通过解压缩设备116解压缩从第二帧存储器114所读取的压缩图像信号而获得的图像信号。
根据上述的视频解码装置，当图像信号被从外部存储器112读取时的存储器带宽相对于通过始终从图像存储器中读出未压缩解码图像信号来产生参考信号的传统视频解码装置来说被有效地减小了。
当通过压缩解码图像信号、在图像存储器中临时存储图像信号并解压缩从图像存储器所读取的图像信号而产生参考图像信号时，参考图像信号的失真随着时间累积，从而导致在重构图像信号上叠加大的噪声。第一实施方式解决了这种问题。
以下将参考图2到5描述相对于传统视频解码装置或视濒解码装置如背景技术中所述减小存储器带宽的根据第一实施方式的视频解码装置的操作。
在如图2所示的运动补偿预测帧间编码的MPEG-2预测结构中，I0、P1、…表示视频编码数据的每个编码图像的帧，箭头表示从参考图像到编码图像的帧间预测的关系。I、P和B分别指示帧内编码图像(I图像)、前向预测编码图像(P图像)和双向预测编码图像(B图像)。I、P和B之后的数字表示显示帧的顺序。上述编码图像类型表示I图像、P图像或B图像。
在传统的视频解码装置中，首先，I0图像被解码，并且使用I0图像的解码图像作为参考图像来解码P3图像。此外，使用I0和P3图像的解码图像作为参考图像来解码B1和B2图像。使用P3图像的解码图像作为参考图像来解码P6图像。通过这种方式，解码被依次完成。
用于减小存储器带宽的现有技术的视频解码装置的解码操作将参考图3进行描述。图像的解码顺序类似于图2。首先，I0图像被解码，然后I0图像的解码图像经过不可逆的压缩/解压缩过程，从而产生压缩/解压缩图像400。由于不可逆的压缩过程而发生的压缩噪声(在图3中由符号*表述)被叠加到压缩/解压缩图像400上。因为P3图像是使用压缩/解压缩图像400作为参考图像来解码的，所以叠加到压缩/解压缩图像400上的噪声照原来的样子被叠加到P3图像的解码图像上。对P3图像的解码图像进行不可逆的压缩/解压缩过程，来产生压缩/解压缩图像401。由于进一步的不可逆的压缩过程，压缩噪声(compressionnoise)被叠加到压缩/解压缩图像401上。
使用压缩/解压缩图像400和401作为参考图像来解码B1和B2图像。压缩/解压缩图像400和401的压缩噪声被叠加到B1和B2图像的解码图像上。然而，在B图像的双向预测中，因为预测图像由两个参考图像的平均形成，所以由参考图像的压缩所引起的随机压缩噪声通过将参考图像平均而被减小。接着，使用压缩/解压缩图像401解码P6图像。此外，对P6图像的解码图像执行不可逆的压缩过程，来产生压缩/解压缩图像402。由于进一步的不可逆的的压缩过程，压缩噪声被累积地叠加到压缩/解压缩图像402上。
在这种方式的图3所示的解码过程中，由参考图像的压缩过程所引起的压缩噪声根据帧间预测编码的结构而随着时间被累积。累积的压缩噪声也被叠加到用于显示的解码图像上。因此，重构图像信号在图像质量上极度恶化。
图4示出了根据图1所示第一实施例的视频解码装置的解码操作。图像的解码顺序类似于图1和2。首先，I0图像类似于图2被解码。I0图像的解码图像经过不可逆的压缩过程，并被临时保存在第二帧存储器中。此外，解码图像经过解压缩来产生压缩/解压缩图像410。由于不可逆压缩过程，压缩噪声(图3中由符号*表述)被叠加到压缩/解压缩图像410上。P3图像不是使用压缩/解压缩图像410、而是使用I0图像的未压缩解码图像作为参考图像来解码。由参考图像的压缩所引起的压缩噪声不被叠加到P3图像的解码图像上。
P3图像的解码图像经过不可逆的压缩过程，以产生压缩/解压缩图像411。由于不可逆的压缩过程，压缩噪声被叠加到压缩/解压缩图像411上。使用压缩/解压缩图像410和411作为参考图像来解码B1和B2图像。压缩/解压缩图像410和411的压缩噪声被叠加到B1和B2图像的解码图像上。然而，在B图像的双向预测中，两个参考图像的平均形成预测图像，使得由参考图像的压缩所引起的随机压缩噪声通过将参考图像平均而被减小。使用P3图像的未压缩解码图像作为参考图像来解码P6图像。
通过这种方式，根据第一实施方式的视频解码装置通过使用未压缩解码图像(例如I0图像的解码图像)作为参考图像来解码P图像，使得由参考图像的压缩过程所引起的压缩噪声不累积。相反，因为使用压缩/解压缩图像作为参考图像来解码不能使用解码图像作为参考图像的B图像，所以与图像读取相关的存储器带宽可被减小。因为B图像的解码图像不被用作参考图像，所以不产生参考图像的压缩噪声的暂时累积，其结果是图像质量不会极度恶化。B图像的双向预测需要读取两个参考图像，从而与P图像相比需要更宽的存储器带宽。然而，可以通过使用压缩/解压缩图像作为参考图像来有效地减小峰值存储器带宽。
图5说明了根据图1所示的第一实施方式的视频解码装置的另一种解码操作。首先，对I0图像的解码图像执行压缩430，来产生压缩图像420。接着，类似于图4，使用I0图像的未压缩解码图像作为参考图像来解码P3图像。P3图像的解码图像被压缩，来产生压缩图像423。使用I0和P3图像的未压缩解码图像和通过压缩它们而获得的压缩图像420和423来解码B1图像。
B图像包含仅由前向参考帧(在此是I0图像)预测的前向预测像素块fw、仅由后向参考帧(在此是P3图像)预测的后向预测像素块bw和由双向参考帧(在此是I0和P3图像)的预测图像的平均预测的双向预测像素块bi。换句话说，为B图像准备表示B图像的预测像素块是前向预测像素块、后向预测像素块还是双向预测像素块的像素单元中的预测模式。
在图5的解码操作中，使用I0图像的未压缩解码图像作为参考图像来解码前向预测像素块fw，使用P3图像的未压缩解码图像作为参考图像来解码后向预测像素块bw。通过这种方式，前向预测像素块或后向预测像素块仅需要一个参考图像用于解码。因此，不需更更宽的存储器带宽。因此，通过如上所述使用不包含压缩噪声的未压缩解码图像作为参考图像来防止对应于前向预测像素块和后向预测像素块的解码图像恶化。在双向预测像素块bi的情况下，压缩图像420和423被从外部存储器读取，通过使用通过对图像420和423执行解压缩431和432所获得的两个压缩/解压缩图像作为参考图像的两个参考图像的平均来产生预测图像。通常，需要两个参考图像的双向预测像素块要求宽的存储器带宽。相反，根据图5的解码操作，压缩图像被存储在外部存储器中，并且使用通过解压缩从外部存储器所读取的压缩图像而获得的压缩/解压缩图像作为参考图像来产生预测图像信号。这种解码操作使减小存储器带宽成为可能。此外，在双向预测像素块的情况下，通过两个参考图像的平均产生预测图像。因此，参考图像的压缩噪声通过平均来减小，其结果是可抑制图像质量的恶化。
通过这种方式，仅B图像的双向预测像素块通过使用压缩/解压缩图像作为参考图像的运动补偿预测来解码。因此，可减小存储器带宽的峰值。此外，可以最小化使用压缩/解压缩图像所获得的解码图像的图像质量恶化。
不用作参考图像的B1图像的解码图像被压缩并作为压缩图像421被存储在外部存储器中。在被用作参考图像的I和P图像的解码图像的情况下，未压缩解码图像信号和压缩图像信号二者被临时存储在外部存储器中。在B图像的解码图像的情况下，仅压缩图像信号被临时存储在外部存储器中。B2图像类似于B1图像被解码。接着，P4图像被解码。P4图像在显示顺序上跟随P3图像。
在MPEG-2系统中，可以为在时间上跟随I或P图像的P图像不仅选择使用一个参考像素块的前向预测像素块，而且选择采取两个参考像素块的平均作为预测图像的被称为双基预测(dual prime prediction)的预测模式的块(被称为双基预测像素块)。换句话说，对于在时间上跟随I或P图像的P图像，准备以至少表示预测像素块是利用单个参考图像的前向预测像素块还是利用多个参考图像的双基预测像素块的像素块为单元的预测模式。双基预测需要读取两个参考图像，如B图像的双向预测那样，并且因此需要宽的存储器带宽。
根据图5的解码操作，在时间方向上连续的两个P图像(例如P3和P4图像)的后向侧上的P图像(在此为P4图像)中，使用未压缩参考图像(在此为P3图像)来解码前向预测像素块fw。在双基预测像素块的情况下，存储在外部存储器中的压缩图像423的两个参考块被读取并分别经过解压缩过程433和434。通过从两个解压缩参考块的平均产生预测图像来减小峰值存储器带宽。在双基预测中，通过两个参考图像的平均或其线性和来产生预测图像，如B图像的双向预测那样。通过将参考图像平均减小了压缩图像的压缩噪音，并且图像质量的恶化被最小化。通过对P4图像的解码图像进行压缩过程435来产生压缩图像424，并且压缩图像424被存储在外部存储器中。
解码图像通过被从编码顺序以重新排序为显示顺序而被显示。在图5的解码操作中，存储在外部存储器112中的压缩图像420、421、423和424以显示顺序被读取，并且通过解压缩设备117被解压缩，然后通过后端处理器105被发送到显示设备来显示运动图像。当压缩/解压缩图像被用于通过这种方式显示运动图像时，更以外部存储器112读取的用于显示的解码图像数据的量被减小，使得允许存储器带宽的减小。此外，因为B图像不被用作参考图像，所以仅压缩图像需要被临时存储在外部存储器112中。因此，要被写入外部存储器112的图像数据的量可被减小。
综上所述，第一实施方式获得了以下优点。
(1)在从外部存储器112随机读取图像的情况下，在解码需要宽存储器带宽的使用两个参考图像的预测像素块以及解码不被用作参考图像的B图像时，读出压缩图像。因此，在随机读取图像时的存储器带宽可被大大减小。
(2)当解码图像被写入外部存储器112时，不被用作参考图像的B图像的解码图像被压缩并随后被存储在外部存储器112中，从而可减小存储器带宽。
(3)当从外部存储器112读取解码图像用于显示运动图像时，从外部存储器112读取压缩的解码图像(压缩图像)并且对其解压缩来产生重构视频信号。因此，可减小存储器带宽。
(4)当被用作参考图像的I和P图像的解码图像被写入外部存储器112时，压缩解码图像以及未压缩解码图像必须被写入外部存储器112中。因此，增加了存储器带宽。然而，因为解码图像根据连续地址被写入存储器，所以存储器存取的开销相对于参考图像的读取来说是足够小的。此外，存储器带宽的增加相对于另一存储器带宽的减小来说更小。
通过这种方式，解码过程中的总存储器带宽相对于常规视频解码装置来说被大大减小。换句话说，根据第一实施方式，外部存储器的比特宽度和外部存储器的数量可通过外部存储器的存储器带宽的减小来减小。外部存储器的操作时钟在数量上可被减小。因此，可以实现视频解码装置的低成本和低功耗，同时使图像质量恶化最小化。
(解码模式选择方法)
在该实施方式中，如下所述可以从未压缩解码图像或压缩图像中选择参考图像，以及从未压缩解码图像或压缩解码图像中选择要显示的解码图像。当未压缩解码图像与参考图像和用于显示的重构图像二者一起使用时，解码模式类似于常规解码模式。
在以下描述中，使用未压缩解码画面用于参考画面和重构画面的常规解码模式被称为“全解码(full decode)”。使用压缩/解压缩图像作为参考图像的解码模式被际为“压缩参考解码”。使用未压缩解码图像作为参考图像的解码模式被称为“全参考解码”。以下将解释实施方式中选择各种解码模式的方法。
(第一解码模式选择方法)
图6示出了第一解码模式选择方法的过程。根据第一解码模式选择方法，以编码运动图像序列为单元来选择码模式。首先，编码视频序列的帧速率(framerate)和图像尺寸的信息被读取(步骤S100)。帧速率乘以图像尺寸来计算每个单位时间的像素速率(pixel rate)(每秒的像素数量：PPS)(步骤S101)。阈值TH1与在步骤S101中所计算的像素速率比较(步骤S102)。如果像素速率小于TH1，则选择全解码模式(步骤S103)。当像素速率大于TH1时，选择压缩参考模式(步骤S104)。外部存储器112的存储器带宽通常可被认为与像素速率成正比的关系。当阈值TH1被设置为解码装置在全解码模式中可处理的最大像素速率或小于最大像素速率时，可选择用于最小化图像质量恶化的最佳解码模式。
(第二解码模式选择方法)
以下参考图7描述根据实施方式的第二解码模式选择方法。在第二解码模式选择方法中，如第一解码模式选择方法那样，以编码视频序列为单元来选择操作模式。如第一解码模式选择方法那样读取编码视频序列的帧速率和图像尺寸的信息(步骤S110)。通过将帧速率乘以图像尺寸来计算(步骤S111)像素速率(每秒的像素(PPS))。将在步骤S111中所计算的像素速率与第一阈值TH1比较(步骤S112)。如果像素速率小于TH1，则选择全解码模式(步骤S113)。
当像素速率不小于TH1时，将像素速率与第二阈值TH2比较(步骤S114)。当像素速率小于TH2时，对于参考图像选择压缩/未压缩切换模式，并且为重构图像选择未压缩模式(步骤S115)。在压缩/未压缩模式中，从第一帧存储器113所读取的未压缩解码图像和通过解压缩从第二帧存储器114所读取的解码图像而获得的压缩/解压缩图像被自适应地切换。在未压缩模式中，选择未压缩解码图像(步骤S115)。
当像素速率大于TH2时，类似于步骤S115，为参考图像选择压缩/未压缩模式，并且为重构图像选择使用压缩/解压缩图像的压缩模式(步骤S117)。阈值TH2是大于阈值TH1的值，并且被设置为这样的值，即使得解码装置可比步骤S115的过程更正确地解码编码视频数据，即不缺乏存储器带宽。
用于解码相同像素速率的视频编码数据所需要的存储器带宽以步骤S117、S115和S113的顺序增加。因此，第二解码模式选择方法的使用使得可以根据输入视频编码数据的像素速率选择最小化图像质量恶化的最佳解码模式。
(第三解码模式选择方法)
实施方式的第三解码模式选择方法将参考图8描述。在图8的流程图中，在图7中增加了用于将像素速率与第三阈值TH3进行比较的步骤S116。当在步骤S116中像素速率超过TH3时，始终为参考图像和重构图像选择压缩模式(步骤S119)。换句话说，在步骤S119中，从第二帧存储器114读取压缩解码图像，以便产生参考图像和重构图像。使用通过解压缩从第二帧存储器114所读取的压缩解码图像而获得的压缩/解压缩图像来产生参考图像和重构图像。
当在步骤S116中像素速率不大于TH3时，类似于步骤S115，为参考图像选择压缩/未压缩模式，并且为重构图像选择使用压缩/解压缩图像的压缩模式(步骤S117)。图8的其它步骤类似于图7。阈值TH3是大于阈值TH2的值，并且根据步骤S117中可进行解码的最大像素速率来确定。
用于解码相同像素速率的视频编码数据所需要的存储器带宽以步骤S119、S117、S115和S113的顺序增加。因此，第三解码模式选择方法的使用使地可以根据像素速率为输入视频编码数据选择使图像质量恶化最小化的最佳解码模式。
(第四解码模式选择方法)
实施方式的第四解码模式选择方法将参考图9描述。在第四解码模式选择方法中，以视频编码数据100的编码图像为单元选择操作模式。当解码开始时(步骤S120)，在每个编码图像读取首标信息(图像首标信息)(步骤S121)。根据图像首标信息确定编码图像是否是参考图像(其是否是被用作参考图像的画面间编码图像(inter-encoded picture))(步骤S122)。在视频编码数据100的编码方法是MPEG-2的例子的情况下，在步骤S122分析图像首标信息来检查对应于图像首标的语法元素(syntax element)的编码类型(picture_coding_type)。如果编码类型是B图像，则“否”，即确定编码图像不是参考图像。如果该编码类型是I或P图像，则“是”，即确定编码图像是参考图像。
如果视频编码数据100的编码系统是H.264，则在步骤S122中参考H.264标准所指定的NAL单元语法的“nal_ref_idc”。如果“nal_ref_idc”的值是0，那么编码图像不是参考图像。因此，“否”，即在步骤S122中确定编码图像不是参考图像。如果“nal_ref_idc”的值是非零，则编码图像是参考图像。因此，“是”，即在步骤S122中确定编码图像是参考图像。
在步骤S122中选择“是”的编码图像通过全参考解码模式被解码(步骤S123)。通过使用解压缩从第二帧存储器114所读取的压缩解码图像而获得的压缩/解压缩图像作为参考图像的压缩参考解码模式来解码在步骤S123中选择“否”的编码图像(步骤S124)
随后，检查解码是否继续(步骤S125)。当解码被连续进行时，过程返回到步骤S121来解码下一个图像。当解码停止时，解码在步骤S126完成。
通过这种方式，根据第四解码模式选择方法，可以通过对用作参考图像的编码图像执行常规全参考解码来防止由参考图像的压缩所引起的压缩噪声在时间方向上的传播。当编码图像不被用作参考图像时，压缩/解压缩图像被用作参考图像，从而用于读取用于参考图像的图像的存储器带宽被减小。因此，存储器带宽可被有效地减小，同时抑制解码图像的图像质量降低。
(第五解码模式选择方法)
实施方式的第五解码模式选择方法在此参考图10描述。在第五解码模式选择方法中，像第四解码模式选择方法那样，以编码图像为单元来选择解码模式。如图9所示，通过在步骤S122中确定将被解码的编码图像是否被用作参考图像来进行全参考解码(步骤S123)和使用压缩参考帧存储器的压缩参考解码(步骤S124)的选择。
在第五解码模式选择方法中，测量外部存储器112的存取负载(步骤S140)，并且检查所测得的负载是否是大于给定值的过载(步骤S141)。在过载的情况下，选择压缩参考解码模式(步骤S124)。当负载小于给定值时，选择常规金参考解码模式(步骤S123)。
通过这种方式，根据第五解码模式选择方法，可根据外部存储器112的存取负载来选择最佳解码模式。因此，可以防止解码由于存储器存取过载而被中止，同时使解码过程中的图像质量恶化最小化。
(第六解码模式选择方法)
实施方式的第六解码模式选择方法在此参考图11描述。在第六解码模式选择方法中，解码模式以编码像素块为单元来选择。当开始解码编码图像时(步骤S130)，某宏块的首标信息被以编码为单元读取(步骤S131)。根据所读取的首标信息，确定将被解码的像素块的预测模式是否是“多参考预测模式”，即用于使用多个参考图像来产生预测图像信号的模式(步骤S132)。
具体地，在多参考预测模式中，预测图像信号通过多个参考图像的平均或它们的线性和来产生。当在步骤S132中确定预测模式为多参考预测模式时，编码图像通过将通过解压缩从第二帧存储器114所读取的压缩解码图像而获得的压缩/解压缩图像用作参考图像的压缩参考解码模式来解码(步骤S133)。当在步骤S132中确定预测模式不是多参考预测模式时，即当确定预测模式为使用单个参考图像产生预测图像信号的单参考预测模式时，编码图像通过常规全参考解码模式来解码(步骤S134)。为编码图像中的所有宏块进行这种解码(步骤S135)。如果编码图像中的所有宏块已经被完全解码，则编码图像的解码就完成了(步骤S136)。
对其应用多参考预测模式的像素块需要高的存储器带宽来读取参考图像。相反，在单参考预测模式的情况下，所需的存储器带宽很小。
根据第六解码模式选择方法，根据不同的帧间预测模式，以编码像素块为单元来切换解码模式。具体来说，
(1)在存储器带宽增加的多参考预测模式中，在压缩参考解码模式中进行解码。
(2)在单参考预测模式中，在未压缩解码模式中进行解码。
因此，重构图像的图像质量恶化可被抑制到最小，同时减小峰值存储器带宽。
(第七解码模式选择方法)
根据实施方式的第七解码模式选择方法在此参考图12描述。像第六解码模式选择方法那样，第七解码模式选择方法以编码像素块为单元来选择操作模式。在第六解码模式选择方法中，通过图11所示的每个像素块(宏块)的预测模式来选择全参考解码模式(步骤S134)或使用压缩参考帧存储器的压缩参考解码模式(步骤S133)(S132)。
在第七解码模式选择方法中，测量外部存储器112的存储器存取负载(步骤S142)。检查所测得的负载是否是大于给定值的过载(步骤S143)。在过载的情况下，选择压缩参考解码模式(步骤S133)。当负载小于给定值时，选择常规全参考解码模式(步骤S134)。这种解码模式选择以像素为单元进行，直到在步骤S135中确定所有宏块(MB)已经被完成。
通过这种方式，根据第七解码模式选择方法，因为可根据存储器存取的负载来以像素为单元选择最佳解码模式，所以可以防止解码由于存储器存取过载而中止，同时使解码过程中的图像质量恶化最小化。
(全参考解码过程)
图6到12所示的全参考解码过程(步骤S103、S113、S123和S134)将参考表示以宏块为单元的全参考解码过程流程的图13来详细描述。
当每个编码宏块的解码开始时(步骤S150)，编码宏块数据的熵码(entropycode)被解码来产生量化正交转换系数、预测模式和运动向量的信息(步骤S151)。对在步骤S151中所产生的正交转换系数进行反量化(步骤S152)和反正交转换(步骤S154)，来产生预测误差信号E。
基于在步骤S151中所产生的预测模式和运动向量信息读取参考图像信号(步骤S153)，并且根据预测模式产生预测图像P(步骤S155)。预测误差信号E和所产生的预测图像P相加来产生解码图像(步骤S156)。所产生的解码图像被写入第一帧存储器113(步骤S157)，并且在考虑压缩过程(步骤S158)的情况下被写入第二帧存储器114(步骤S159)。解码图像根据编码图像的图像类型和以下规则被写入帧存储器113和114。
(规则1)用作参考图像的编码图像(在MPEG-2的情况下是I和P图像)：未压缩解码图像被写入第一帧存储器113，压缩/解压缩解码图像被写入第二帧存储器114。
(规则2)不被用作参考图像的编码图像(在MPEG-2的情况下是B图像)：当用于显示压缩/解压缩图像的重构图像信号被使用时，压缩图像被写入第二帧存储器114(步骤S159)，但是不将未压缩解码图像写入第一帧存储器113(步骤S157)。
当用于显示未压缩解码图像的重构图像信号被使用时，不进行解码图像的压缩(步骤S158)和将压缩图像写入第二帧存储器114(步骤S159)，但是未压缩解码图像被写入第一帧存储器113中(步骤S157)。
(压缩参考解码过程)
图6到12所示的压缩参考解码过程(步骤S104、S115、S117、S119、S124和S133)将参考表示以宏块为单元执行的压缩参考解码过程流程的图14来详细描述。
在图14中，在产生预测误差信号E之前的过程类似于图13的全解码的过程。通过使用压缩/解压缩图像作为参考图像来产生预测图像P，如下所述。基于由熵解码过程(步骤S151)和运动向量信息(步骤S161)所产生的预测模式来从第二帧存储器114读取压缩图像。所读取的压缩图像被解压缩(步骤S162)。通过使用步骤S162所获得的压缩/解压缩图像作为参考图像来产生预测图像P(步骤S155)。
通过将预测误差信号E和通过这种方式所产生的预测信号P相加来产生解码图像(步骤S156)。类似于图13中的全参考解码，解码图像根据规则1和2被写入帧存储器113和114。
将解释根据实施方式的视频解码装置中的解码图像的压缩/解压缩过程的具体例子。
(压缩/解压缩过程的第一具体例子)
图15和16示出了解码图像的压缩/解压缩过程的第一具体例子。在压缩/解压缩方法的第一例子中，解码图像信号500以4×4像素块或8×8像素块的二维块为单元或者以4×1像素块或8×1像素块的一维块为单元被输入到图15所示的压缩设备(对应于图1的压缩设备115)。在图15的压缩设备中，对于每个输入块，哈达玛转换设备501进行哈达玛转换。通过哈达玛转换所获得的转换系数经过非线性量化器502的非线性量化，从而压缩数据量。经过非线性量化的转换系数503的信息被存储在帧存储器114中作为压缩图像信号。
压缩图像信号510，即非线性量化转换系数被从第二帧存储器114读取到图16所示的解压缩设备。输入到解压缩设备的压缩图像信号510经过非线性反量化器511的非线性反量化，并且非线性反量化转换系数经过反哈达玛转换设备512的反哈达玛转换，从而产生解压缩图像信号513(压缩/解压缩图像信号)。
(解压缩过程的改进)
图17示出了图16所示的解压缩过程的改进，其中低通滤波器520被安排在反哈达玛转换设备512的后级(rear stage)上。在压缩/解压缩过程的第一具体例子中，因为使用量化过程，所以解压缩图像信号513是输入到在其上叠加压缩/解压缩过程的压缩噪声的压缩设备的解码图像信号500。因为第一压缩/解压缩过程是基于以像素为单元执行的哈达玛转换和非线性量化，所以压缩噪声是像素块单元中的噪声。像素块单元中的噪声在压缩/解压缩图像上在像素块之间的边界处产生阶跃(stpped)非连续。对压缩/解压缩图像执行低通滤波对于去除该阶跃压缩噪声是有效的。
在图17所示的例子中，因为通过低通滤波器520，由于阶跃噪声所产生的高频分量被从非线性反量化和反哈达玛转换所提供的压缩/解压缩图像513中去除，所以由于压缩和解压缩所产生的压缩失真被减小，其结果是可以重构图像质量恶化被主观减小的图像。
在图1所示的视频解码装置中，用于解压缩临时存储在第二帧存储器114中并且被从中读取作为用于产生预测图像的参考图像的压缩图像信号的解压缩设备116优选包括图16所示的没有低通滤波器的解压缩设备。用于解压缩临时存储在第二帧存储器114中并且被从中读取用于显示的压缩图像信号的解压缩设备117优选包括图17所示的具有低通滤波器520的解压缩设备。换句话说，压缩噪声被低通滤波器520从影响主观图像质量的用于显示的重构图像中去除。在压缩图像信号被读取作为参考图像的情况下，用于解码过程的计算量或硬件成本通过省略低通滤波器而减小。在提高将被显示的重构图像的主观图像质量的同时，用于解码过程的计算量或硬件成本可被最小化。
(压缩/解压缩过程的第二具体例子)
图18和19示出了解码图像的压缩/解压缩过程的第二具体例子。在第二压缩/解压缩方法中，图18所示的压缩设备(对应于图1的压缩设备115)使用二维或一维低通滤波器531对解码图像信号530进行二维或一维限带处理。伺候，通过在水平和垂直方向之一或二者上用二次采样(subsampling)设备532对像素二次采样而进行压缩过程，来产生压缩图像533。
压缩图像540被输入到图19所示的解压缩设备。通过使用重复采样(over-sampling)设备541和低通滤波器542的内插，对压缩图像信号540执行解压缩过程，从而产生解压缩图像信号543(压缩/解压缩图像信号)。
(压缩/解压缩过程的第三具体例子)
将参考图20和21介绍解码图像的压缩/解压缩过程的第三具体例子。在压缩/解压缩过程的第三具体例子中，对解码图像信号的亮度信号进行4点一维哈达玛转换，对dc分量进行线性量化，并且对ac分量进行非线性量化，其结果是数据量被压缩到1/2。对于色差信号，水平方向上的每两个像素被平均。换句话说，水平像素被二次采样到1/2，从而数据量被压缩到1/2。
根据图20所示的压缩设备，解码图像信号中的亮度信号的每个像素由8个比特组成，水平方向上连续的4个像素被输入到4*1哈达玛转换设备600。哈达玛转换设备600输出哈达玛转换所产生的10比特的哈达玛转换系数。等式(1)表示4*1哈达玛转换设备600的操作。
y ′ 0 y ′ 1 y ′ 2 y ′ 3 = 1 1 1 1 1 1 - 1 - 1 1 - 1 - 1 1 1 - 1 1 - 1 Y 0 Y 1 Y 2 Y 3 - - - ( 1 )
其中Y0、Y1、Y2和Y3是输入像素信号，y’0、y’1、y’2和y’3表示作为输出信号的哈达玛转换系数。
哈达玛转换系数的最大频率分量y’3被删除，系数y’0、y’1和y’2通过比特移位器601移位2个比特并且被线性量化为8比特的信号。被量化为8比特信号的哈达玛转换系数的dc分量y’0以其原样通过复用器604输出。哈达玛转换系数的中间频率分量y’1和y’2被比特移位器601量化为8比特的信号，然后分别使用非线性量化表602和603被量化为5比特和3比特的信号。被量化为8比特信号的dc分量和被量化为5比特和3比特信号的中间频率分量被复用器604复用为比特单元并被输出为16比特的信号。
通过这个过程，解码图像信号的亮度分量被从4像素×8比特的32比特信号转化为16比特的信号。换句话说，数据量减小到1/2。解码图像信号中的色差信号由8比特的Cb信号和8比特的Cr信号组成。Cb和Cr信号以水平两个像素为单元被输入到二次采样设备605来计算两个像素的平均并输出其。每个Cb和Cr信号的水平两个像素的平均被舍入为8比特。Cb和Cr信号通过复用器606被复用来获得16比特的信号。
以上过程将色差信号二次采样为1/2，从而实现了将其压缩为1/2。通过这种方式，图20的压缩设备通过为信号分布优化的非线性量化抑制了关于亮度信号的压缩噪声，同时将频率分量保持为大于要被哈达玛转换压缩的解码图像信号的1/2，从而实现了将数据减小到1/2。
另一方面，通过使用其高频分量的重要性低的简单计算将色差信号水平二次采样为1/2，从而实现了以低成本将信号数据量减小到1/2。因此，可以以低计算量和很少的硬件压缩解码图像，同时抑制图像质量恶化。
图21示出了解压缩被图20的压缩设备压缩的解码图像信号的解压缩设备。在图21的解压缩设备中，通过每四个像素地将亮度信号压缩为16个比特而获得的信号被输入到比特划分设备(bit division device)704。比特划分设备704将16比特信号划分为对应于亮度信号的dc分量的8比特信号和对应于其中间频率分量的5比特信号和3比特信号。中间频率分量的两个信号分别由非线性反量化表702和703反量化。dc分量和反量化的中间频率分量被输入到4*1反哈达玛转换设备700。此外，0作为对应于最大频率分量的系数被输入到反哈达玛转换设备700。经过反哈达玛转换设备700的4*1反哈达玛转换的亮度信号被输出为以四个像素为单元解压缩的解码图像信号。
关于色差信号，其中每个Cb和Cr信号被每两个像素地压缩并且被复用的16比特信号被输入到比特划分设备706。8比特Cb和Cr信号被从比特划分设备706输出。每个8比特Cb和Cr信号被上采样(up-sample)为水平两像素信号，即像素加倍，并且被输出为两像素数据。对于这种方式的亮度信号，图21的解压缩设备可通过非线性反量化和反哈达玛转换来重构大于压缩前解码图像信号的1/2的频率分量。色差信号可通过被称为像素加倍(doubling)的非常简单的过程来解压缩。因此，可以以小的计算量和很少的硬件来解压缩压缩解码图像，同时抑制图像质量恶化。
(第二实施方式)
图22示出了根据第二实施方式的视频解码装置。在图1所示的第一实施方式中，为了显示解码图像，存储在第二帧存储器114中的压缩图像信号被第二解压缩设备117读取和解压缩，然后被发送到后端处理器105来产生重构图像信号110。相反，在第二实施方式中，解码图像信号109不是从存储压缩图像信号的第二帧存储器114中读取，而是从存储未压缩解码图像信号的第一帧存储器113中读取，如图22所示，并且被提供给后端处理器105。因此，图1的第二解压缩设备117就是不必要的。
当未压缩解码图像信号被通过这种方式输入到显示系统的后端处理器105中时，可以显示压缩噪声被减小并且图像质量几乎没有恶化的视频。在第二实施方式中，用于显示的解码图像信号109的数据读取和传输量相对于第一实施方式增加了。此外，因为B图像的解码图像必须被未压缩地写入第一帧存储器113，所以必要的存储器带宽增加了。然而，因为在读取一般需要高存储器带宽的参考图像信号时，存储在第二帧存储器114中的压缩图像信号可被类似于第一实施方式那样使用，所以可显著减小存储器带宽。因此，相对于常规解码装置，可减小总的存储器带宽。
(第三实施方式)
图23示出了根据第三实施例的视频解码装置。如上清楚所述，在第一和第二实施方式中，存在重构图像信号110的质量、即显示图像的图像质量和存储器带宽的减小量之间的折衷。第三实施方式使得可以自适应选择第一和第二实施方式的方法。
根据图23，提供了开关121，其在从第一帧存储器113读取的未压缩解码图像信号和从第二帧存储器114读取并用第二解压缩设备117解压缩的压缩/解压缩图像信号之间切换，并且将其选择性地提供给后端处理器105。在这种配置的基础上，开关121可被操作使得来自第二解压缩设备117的压缩/解压缩图像信号在实现存储器带宽大量减小的情况下被提供给后端处理器105，并且在显示图像的图像质量优先的情况下，未压缩解码图像信号被提供给后端处理器105。
(第四实施方式)
在根据图24所示的第四实施方式的视频解码装置中，在加法器104和压缩设备115之间提供噪声消除器301。噪声消除器301从加法器104所输出的解码图像信号108中去除噪声。从中去除噪声的解码图像信号被压缩设备115压缩，并且被存储在第二帧存储器114中。
根据第四实施方式，外部存储器的存储器带宽类似于前述实施方式那样减小。提供噪声消除器301来去除压缩方法所特有的编码失真，比如用MPEG-2等压缩的视频编码数据100的块失真(block distortion)或蚊式噪声(mosquitonoise)。噪声消除器301使用诸如从可变长度解码器101所产生的编码模式或量化步长尺寸的信息300来自适应地消除噪声。
在常规视频解码装置中，当不同于编码的噪声消除过程被置于解码环路中时，在参考图像的编码和解码之间产生不匹配，从而在解码图像中产生失真。在第四实施方式中，不是对没有被压缩的未压缩解码图像信号执行噪声消除，而是仅对被压缩和存储在第二帧存储器114中的解码图像信号执行乘声消除。因此，使用未压缩解码图像信号作为参考图像信号的解码过程不会在编码和解码之间产生不匹配。
使用压缩图像信号作为参考图像信号的解码过程实现了压缩噪声的减小以及视频编码数据100的噪声消除。因为通过压缩和解压缩经过噪声消除的解码图像信号而获得的视濒信号通过后端处理器105被提拱给显示系统，所以可以重构减小了噪声的高质量视频，同时减小总的存储器带宽。
根据本发明，解码图像信号和通过压缩解码图像信号所获得的压缩图像信号都被存储在存储器中，并且选择从存储器中自适应地读取以便在解码时产生参考图像信号的图像信号。因此，可以抑制由于解码和随时间的传播所产生的失真到最小，并同时减小解码时的存储器带宽，且防止重构图像在质量上极度恶化。
根据本发明，通过使由于在产生参考图像的过程中使用压缩而产生的失真的短暂扩展(temporarily-spread)，同时减小解码时的存储器带宽，来防止重构图像的图像质量大大的恶化。
本领域技术人员可以预见其它的优点和修改。因此，本发明在其广义上不限于以上示出和描述的具体细节和具体实施方式。因此，在不脱离权利要求和其等同方式所定义的一般发明概念的精神和范围的情况下可作出各种修改。

Claims (19)

1.一种视频解码方法，包括：
利用用于视频信号的预测图像信号对视频编码数据进行解码，以产生解码图像信号；
压缩所述解码图像信号，以产生压缩图像信号；
将所述解码图像信号存储在第一存储器中；
将所述压缩图像信号存储在第二存储器中；
对从所述第二存储器所读取的压缩图像信号进行解压缩，以产生压缩/解压缩图像信号；
根据图像单元中视频编码数据的编码类型和块单元中预测模式中至少之一，选择从所述第一存储器所读取的解码图像信号和所述压缩/解压缩图像信号之一作为参考图像信号；以及
对所述参考图像信号执行运动补偿，以产生预测图像信号。
2.如权利要求1所述的方法，其中所述选择步骤包括：当图像单元中的编码类型是其中所述解码图像信号被用作参考图像信号的编码类型时，选择从所述第一存储器所读取的所述解码图像信号，并且当图像单元中的编码类型指示其中通过所述解码所产生的解码图像信号不被用作参考图像信号的编码类型时，选择所述压缩/解压缩图像信号。
3.如权利权求1所述的方法，其中图像单元中的编码类型表示I图像、P图像和B图像之一，并且所述选择步骤包括当所述解码图像信号表示P图像时选择从所述第一存储器所读取的解码图像信号，并且当所述解码图像信号表示B图像时选择所述压缩/解压缩图像信号。
4.如权利要求1所述的方法，其中所述选择步骤包括：当块单元中的预测模式指示在运动补偿中由参考图像信号的单个块产生预测图像信号的第一模式时，选择从所述第一存储器所读取的解码图像信号，并且当块单元中的预测模式指示在运动补偿中由参考图像信号的多个块的平均或这些块的线性和产生预测图像信号的第二模式时，选择所述压缩/解压缩图像信号。
5.如权利要求1所述的方法，其中块单元中的预测模式表示B图像的预测像素块是前向预测像素块、后向预测像素块和双向预测像素块之一，并且所述选择步骤包括：当块单元中的预测模式指示用于由前向预测像素块或后向预像素块产生预测图像信号的模式时，选择来自所述第一存储器的解码图像信号，并且当块单元中的预测模式指示用于从双向预测像素块产生预测图像信号的模式时，选择所述压缩/解压缩图像信号。
6.如权利要求1所述的方法，其中块单元中的预测模式指示其中P图像的至少一个预测像素块表示使用单个参考图像的前向预测像素块和使用多个参考图像的双基预测像素块之一的模式，并且所述选择步骤包括：当块单元中的预测模式指示用于从前向预测像素块产生预测图像信号的模式时，选择从所述第一存储器所读取的解码图像信号，并且当块单元中的预测模式是用于从双基预测像素块中产生预测图像信号的模式时，选择所述压缩/解压缩图像信号的两个参考块。
7.一种视频解码装置，包括：
解码器，用于利用用于视频信号的预测图像信号对视频编码数据进行解码，以产生解码图像信号；
压缩单元，被配置为压缩所述解码图像信号，以产生压缩图像信号；
第一存储器，用于存储所述解码图像信号；
第二存储器，用于存储所述压缩图像信号；
解压缩单元，被配置为解压缩从所述第二存储器所读取的压缩图像信号，以产生压缩/解压缩图像信号；
选择器，用于根据图像单元中的视频编码数据的编码类型和块单元中的预测模式中至少之一，选择从所述第一存储器所读取的解码图像信号和所述压缩/解压缩图像信号之一作为参考图像信号；以及
运动补偿器，用于对所述参考图像信号执行运动补偿，以产生预测图像信号。
8.如权利要求7所述的装置，其中所述选择器在图像单元中的编码类型指示其中解码器所产生的解码图像信号被用作参考图像信号的编码类型时，选择从所述第一存储器所读取的解码图像信号，并且在图像单元中的编码类型指示其中由解码器所产生的解码图像信号不被用作参考图像信号的编码类型时，选择所述压缩/解压缩图像信号。
9.如权利要求7所述的装置，其中图像单元中的编码类型表示I图像、P图像和B图像之一，并且所述选择器在解码器所产生的解码图像信号是P图像时选择从所述第一存储器所读取的解码图像信号，并且在解码器所产生的解码图像信号是B图像时选择所述压缩/解压缩图像信号。
10.如权利要求7所述的装置，其中所述选择器在块单元中的预测模式指示在所述运动补偿器中由参考图像信号的单个块中产生预测图像信号的第一模式时，选择从所述第一存储器所读取的解码图像信号，并且在块单元中的预测模式指示在所述运动补偿器中由参考图像信号的多个块的平均或这些块的线性总和产生预测图像信号的第二模式时，选择所述压缩/解压缩图像信号。
11.如权利要求7所述的装置，其中块单元中的预测模式表示B图像的预测像素块指示前向预测像素块、后向预测像素块和双向预测像素块之一，并且所述选择器在块单元中的预测模式指示用于由前向预测像素块或后向预测像素块产生预测图像信号的模式时，选择从所述第一存储器所读取的解码图像信号，并且在块单元中的预测模式指示用于由双向预测像素块产生预测图像信号的模式时选择所述压缩/解压缩图像信号。
12.如权利要求7所述的方法，其中块单元中的预测模式指示其中至少一个P图像的预测像素块表示使用单个参考图像的前向预测像素块和使用多个参考图像的双基预测像素块之一的模式，并且所述选择器在块单元中的预测模式指示用于由前向预测像素块产生预测图像信号的模式时，选择从所述第一存储器所读取的解码图像信号，并且在块单元中的预测模式指示用于由双基预测像素块产生预测图像信号的模式时，选择所述压缩/解压缩图像信号的两个参考块。
13.如权利要求7所述的装置，还包括处理器，用于通过处理所述压缩/解压缩图像信号，产生用于视频显示的重构图像信号。
14.如权利要求7所述的装置，还包括处理器，用于通过处理从所述第一存储器所读取的解码图像信号，产生用于视频显示的重构图像信号。
15.如权利要求7所述的装置，还包括选择器，用于选择所述压缩/解压缩图像信号和从所述第一存储器所读取的解码图像信号之一；以及处理器，用于处理所述选择器所选择的图像信号，以产生用于视频显示的重构图像信号。
16.如权利要求7所述的装置，还包括噪声消除器，用于去除包含在解码图像信号中的编码噪声，并且其中所述压缩单元被配置为压缩从其中去除了编码噪声的解码图像信号。
17.如权利要求7所述的装置，其中所述压缩单元被配置为通过限带滤波和二次采样，压缩解码图像信号。
18.如权利要求7所述的装置，其中所述压缩单元被配置为通过哈达玛转换和非线性量化，压缩解码图像信号。
19.如权利要求7所述的装置，其中所述压缩单元被配置为通过对解码图像信号中的亮度信号进行哈达玛转换和非线性量化，并且对解码图像信号中的色差信号进行限带滤波和二次采样，来压缩解码图像信号。
CN2007101288459A 2006-03-28 2007-03-02 视频解码方法和装置 Expired - Fee Related CN101080014B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2006088883A JP4384130B2 (ja) 2006-03-28 2006-03-28 動画像復号方法及び装置
JP2006-088883 2006-03-28
JP2006088883 2006-03-28

Publications (2)

Publication Number Publication Date
CN101080014A true CN101080014A (zh) 2007-11-28
CN101080014B CN101080014B (zh) 2011-01-19

Family

ID=38519849

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007101288459A Expired - Fee Related CN101080014B (zh) 2006-03-28 2007-03-02 视频解码方法和装置

Country Status (5)

Country Link
US (1) US8553767B2 (zh)
EP (1) EP1853067A1 (zh)
JP (1) JP4384130B2 (zh)
KR (1) KR100874518B1 (zh)
CN (1) CN101080014B (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101841711A (zh) * 2010-04-17 2010-09-22 上海交通大学 用于视频解码的反量化装置及其实现方法
CN101847394B (zh) * 2009-03-26 2012-03-07 珠海扬智电子有限公司 用以解码及显示视讯文件的存储器映射方法及装置
CN102685475A (zh) * 2011-03-11 2012-09-19 杭州海康威视软件有限公司 视频减帧率的隔行压缩显示方法及其系统
CN103065604A (zh) * 2011-10-20 2013-04-24 三星电子株式会社 显示器驱动器和操作图像数据处理装置的方法
CN103109535A (zh) * 2010-10-07 2013-05-15 松下电器产业株式会社 图像再生方法、图像再生装置、图像再生程序、摄像系统及再生系统
CN104041037A (zh) * 2012-01-26 2014-09-10 日本电信电话株式会社 运动图像编码方法、装置以及程序
CN106980465A (zh) * 2015-11-30 2017-07-25 瑞萨电子株式会社 半导体装置、数据处理系统和半导体装置控制方法
CN107736027A (zh) * 2015-06-12 2018-02-23 松下知识产权经营株式会社 图像编码方法、图像解码方法、图像编码装置及图像解码装置
CN109726034A (zh) * 2017-10-27 2019-05-07 瑞萨电子株式会社 数据处理设备和数据处理方法
CN111986619A (zh) * 2019-05-23 2020-11-24 三星显示有限公司 显示设备中的应力补偿的方法和系统

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8121196B2 (en) * 2006-11-02 2012-02-21 Corel Corporation Method and apparatus for multi-threaded video decoding
KR100939917B1 (ko) 2008-03-07 2010-02-03 에스케이 텔레콤주식회사 움직임 예측을 통한 부호화 시스템 및 움직임 예측을 통한부호화 방법
JP2009267689A (ja) * 2008-04-24 2009-11-12 Panasonic Corp 動画像符号化装置、及び動画像符号化方法
US9326004B2 (en) * 2008-06-03 2016-04-26 Broadcom Corporation Reduced memory mode video decode
US8326075B2 (en) 2008-09-11 2012-12-04 Google Inc. System and method for video encoding using adaptive loop filter
US20100098166A1 (en) * 2008-10-17 2010-04-22 Texas Instruments Incorporated Video coding with compressed reference frames
KR101539260B1 (ko) 2008-12-02 2015-07-29 삼성전자주식회사 선택적 영상정보 무손실 압축, 복원 장치 및 방법
TWI387317B (zh) * 2008-12-11 2013-02-21 Novatek Microelectronics Corp 產生重新取樣參考畫面之裝置及其方法與影像解碼系統
TW201101840A (en) * 2009-06-30 2011-01-01 Sunplus Technology Co Ltd Apparatus and method for reducing memory access bandwidth in video decoding
WO2012005106A1 (ja) * 2010-07-08 2012-01-12 日本電気株式会社 映像復号装置、映像符号化装置、映像復号方法、映像符号化方法及びプログラム
CN105491382B (zh) 2010-07-13 2017-07-04 日本电气株式会社 视频解码装置、视频解码方法以及程序
US8503528B2 (en) * 2010-09-15 2013-08-06 Google Inc. System and method for encoding video using temporal filter
JP5850214B2 (ja) * 2011-01-11 2016-02-03 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
CN103283231B (zh) * 2011-01-12 2018-04-27 西门子公司 在视频编码器中参考图像的压缩和解压缩
AU2012205813B2 (en) * 2011-01-14 2016-07-07 Vidyo, Inc. High layer syntax for temporal scalability
JP5736863B2 (ja) * 2011-03-15 2015-06-17 富士通株式会社 トランスコード装置及びトランスコード方法
US8780996B2 (en) 2011-04-07 2014-07-15 Google, Inc. System and method for encoding and decoding video data
US8780971B1 (en) 2011-04-07 2014-07-15 Google, Inc. System and method of encoding using selectable loop filters
US8781004B1 (en) 2011-04-07 2014-07-15 Google Inc. System and method for encoding video using variable loop filter
WO2012160614A1 (ja) * 2011-05-25 2012-11-29 パナソニック株式会社 動画像復号装置
US9521434B2 (en) * 2011-06-09 2016-12-13 Qualcomm Incorporated Internal bit depth increase in video coding
US8885706B2 (en) 2011-09-16 2014-11-11 Google Inc. Apparatus and methodology for a video codec system with noise reduction capability
US9268723B2 (en) * 2011-12-21 2016-02-23 Intel Corporation Dram compression scheme to reduce power consumption in motion compensation and display refresh
TWI606718B (zh) * 2012-01-03 2017-11-21 杜比實驗室特許公司 規定視覺動態範圍編碼操作及參數
US9131073B1 (en) 2012-03-02 2015-09-08 Google Inc. Motion estimation aided noise reduction
JP6064992B2 (ja) * 2012-03-28 2017-01-25 日本電気株式会社 ノイズ除去処理システム、ノイズ除去処理回路、プログラム、ノイズ除去処理方法
US9344729B1 (en) 2012-07-11 2016-05-17 Google Inc. Selective prediction signal filtering
JP5969914B2 (ja) * 2012-12-20 2016-08-17 株式会社日立情報通信エンジニアリング 動画像圧縮伸張装置
US10102613B2 (en) 2014-09-25 2018-10-16 Google Llc Frequency-domain denoising
JP6453652B2 (ja) 2015-01-09 2019-01-16 株式会社東芝 映像伝送システム
CN106303544B (zh) 2015-05-26 2019-06-11 华为技术有限公司 一种视频编解码方法、编码器和解码器
KR101770300B1 (ko) 2015-06-09 2017-08-22 삼성전자주식회사 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치
KR102171119B1 (ko) * 2015-11-05 2020-10-28 삼성전자주식회사 복수개의 블록 기반의 파이프라인을 이용한 데이터 처리 속도 개선 장치 및 그 동작 방법
TWI601410B (zh) * 2016-01-11 2017-10-01 晨星半導體股份有限公司 視訊串流解碼方法及視訊串流解碼系統
CN107820095B (zh) * 2016-09-14 2020-01-03 北京金山云网络技术有限公司 一种长期参考图像选择方法及装置
US10659797B2 (en) * 2017-10-31 2020-05-19 Google Llc Video frame codec architectures
CN111372085B (zh) * 2018-12-25 2021-07-09 厦门星宸科技有限公司 影像解码装置与方法
US11245931B2 (en) 2019-09-11 2022-02-08 Samsung Display Co., Ltd. System and method for RGBG conversion
KR20210077087A (ko) 2019-12-16 2021-06-25 삼성디스플레이 주식회사 발광 구동부 및 이를 포함하는 표시장치
US11516477B2 (en) 2021-02-11 2022-11-29 Qualcomm Incorporated Intra block copy scratch frame buffer

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5376968A (en) * 1993-03-11 1994-12-27 General Instrument Corporation Adaptive compression of digital video data using different modes such as PCM and DPCM
DE69619002T2 (de) * 1995-03-10 2002-11-21 Toshiba Kawasaki Kk Bildkodierungs-/-dekodierungsvorrichtung
US5777677A (en) * 1996-02-09 1998-07-07 International Business Machines Corporation Approximate MPEG decoder with compressed reference frames
US6744925B2 (en) * 1996-03-19 2004-06-01 Mitsubishi Denki Kabushiki Kaisha Encoding apparatus, decoding apparatus, encoding method, and decoding method
US6477202B1 (en) * 1997-09-03 2002-11-05 Matsushita Electric Industrial Co., Ltd. Apparatus of layered picture coding, apparatus of picture decoding, methods of picture decoding, apparatus of recording for digital broadcasting signal, and apparatus of picture and audio decoding
JP3568392B2 (ja) 1998-06-17 2004-09-22 三洋電機株式会社 動画像復号化装置
JP2000050272A (ja) 1998-07-31 2000-02-18 Sony Corp 復号化装置及び方法
JP2000078568A (ja) 1998-08-28 2000-03-14 Sony Corp 復号化装置及び方法
JP2001257887A (ja) * 2000-03-14 2001-09-21 Fuji Xerox Co Ltd 画像符号化装置および画像復号装置ならびに画像符号化方法および画像復号方法
US20020075961A1 (en) * 2000-12-19 2002-06-20 Philips Electronics North America Corporaton Frame-type dependent reduced complexity video decoding
JP3643777B2 (ja) * 2001-02-28 2005-04-27 三洋電機株式会社 動画像復号装置および動画像復号方法
KR20020095260A (ko) * 2001-03-12 2002-12-20 코닌클리케 필립스 일렉트로닉스 엔.브이. 비디오 인코더 및 재코딩 장치
KR20030001625A (ko) * 2001-06-25 2003-01-08 (주)아이디스 동영상 압축시 예측 프레임 생성 및 재생 방법
US7266150B2 (en) * 2001-07-11 2007-09-04 Dolby Laboratories, Inc. Interpolation of video compression frames
US6983017B2 (en) * 2001-08-20 2006-01-03 Broadcom Corporation Method and apparatus for implementing reduced memory mode for high-definition television
US7085421B2 (en) * 2002-08-05 2006-08-01 Shih-Zheng Kuo Image processing method for facilitating data transmission
KR100497760B1 (ko) * 2003-02-18 2005-06-29 (주) 멀티비아 이동통신 단말기용 동영상 부호화 시스템 및 방법
JP2005020294A (ja) * 2003-06-25 2005-01-20 Sony Corp ブロック歪低減装置
JP2005124091A (ja) * 2003-10-20 2005-05-12 Sony Corp 復号装置及び復号方法
CN101924945B (zh) * 2004-03-08 2012-07-18 三叉微系统(远东)有限公司 具有可变压缩比和用于存储及检索参考帧数据的缓冲器的视频解码器
JP4411131B2 (ja) * 2004-05-06 2010-02-10 Ｋｄｄｉ株式会社 符号化動画像再生装置
KR100640876B1 (ko) * 2004-11-17 2006-11-02 엘지전자 주식회사 이동 방송 수신기의 비디오 디코딩 시스템
US7949044B2 (en) * 2005-04-12 2011-05-24 Lsi Corporation Method for coefficient bitdepth limitation, encoder and bitstream generation apparatus

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101847394B (zh) * 2009-03-26 2012-03-07 珠海扬智电子有限公司 用以解码及显示视讯文件的存储器映射方法及装置
CN101841711B (zh) * 2010-04-17 2012-01-04 上海交通大学 用于视频解码的反量化装置及其实现方法
CN101841711A (zh) * 2010-04-17 2010-09-22 上海交通大学 用于视频解码的反量化装置及其实现方法
CN103109535A (zh) * 2010-10-07 2013-05-15 松下电器产业株式会社 图像再生方法、图像再生装置、图像再生程序、摄像系统及再生系统
CN103109535B (zh) * 2010-10-07 2016-08-17 松下知识产权经营株式会社 图像再生方法、图像再生装置、摄像系统及再生系统
CN102685475B (zh) * 2011-03-11 2015-04-29 杭州海康威视数字技术股份有限公司 视频减帧率的隔行压缩显示方法及其系统
CN102685475A (zh) * 2011-03-11 2012-09-19 杭州海康威视软件有限公司 视频减帧率的隔行压缩显示方法及其系统
CN103065604A (zh) * 2011-10-20 2013-04-24 三星电子株式会社 显示器驱动器和操作图像数据处理装置的方法
TWI561057B (en) * 2011-10-20 2016-12-01 Samsung Electronics Co Ltd Display driver and method ofoperating image data processing device
CN103065604B (zh) * 2011-10-20 2017-06-09 三星电子株式会社 显示器驱动器和操作图像数据处理装置的方法
CN104041037A (zh) * 2012-01-26 2014-09-10 日本电信电话株式会社 运动图像编码方法、装置以及程序
CN104041037B (zh) * 2012-01-26 2017-07-07 日本电信电话株式会社 运动图像编码方法、装置
US10051270B2 (en) 2012-01-26 2018-08-14 Nippon Telegraph And Telephone Corporation Video encoding method using at least two encoding methods, device and computer program
CN107736027A (zh) * 2015-06-12 2018-02-23 松下知识产权经营株式会社 图像编码方法、图像解码方法、图像编码装置及图像解码装置
CN106980465A (zh) * 2015-11-30 2017-07-25 瑞萨电子株式会社 半导体装置、数据处理系统和半导体装置控制方法
CN106980465B (zh) * 2015-11-30 2021-06-29 瑞萨电子株式会社 半导体装置、数据处理系统和半导体装置控制方法
CN109726034A (zh) * 2017-10-27 2019-05-07 瑞萨电子株式会社 数据处理设备和数据处理方法
CN109726034B (zh) * 2017-10-27 2023-04-11 瑞萨电子株式会社 数据处理设备和数据处理方法
CN111986619A (zh) * 2019-05-23 2020-11-24 三星显示有限公司 显示设备中的应力补偿的方法和系统

Also Published As

Publication number Publication date
JP4384130B2 (ja) 2009-12-16
KR20070097309A (ko) 2007-10-04
EP1853067A1 (en) 2007-11-07
US8553767B2 (en) 2013-10-08
US20070230572A1 (en) 2007-10-04
JP2007266970A (ja) 2007-10-11
CN101080014B (zh) 2011-01-19
KR100874518B1 (ko) 2008-12-16

Similar Documents

Publication Publication Date Title
CN101080014A (zh) 视频解码方法和装置
RU2694012C1 (ru) Усовершенствованное кодирование с внутрикадровым предсказанием с использованием планарных представлений
US11196995B2 (en) Image processing device and image processing method
TWI516095B (zh) 利用轉換操作之影音編碼及解碼方法
US10666945B2 (en) Image processing device and image processing method for decoding a block of an image
US8588536B2 (en) Guaranteed-rate tiled image data compression
TWI629894B (zh) 圖像處理裝置、圖像處理方法、圖像處理程式及電腦可讀取媒體
US20120189064A1 (en) Adaptive loop filtering using multiple filter shapes
US10165285B2 (en) Video coding tree sub-block splitting
JP4393875B2 (ja) 複雑さの軽減された復号化に適したシングルレイヤビデオ符号化されたビットストリームを供給するシステム及び方法
CN1347620A (zh) 转换mpeg－2 4:2:2－轮廓位流为主轮廓位流的方法及架构
JP5810700B2 (ja) 画像処理装置及び画像処理方法
WO2012153578A1 (ja) 画像処理装置及び画像処理方法
WO2009133844A1 (ja) エッジを考慮したフィルタリング機能を備えた動画像符号化／復号化方法及び装置
TW201028009A (en) Quantization parameter selections for encoding of chroma and luma video blocks
JP2008205534A (ja) 符号化方式変換装置
WO2015055111A1 (en) Method of lossless mode signaling for video system with lossless and lossy coding
US20120051425A1 (en) Multi-input adaptive filter based on combination of sum-modified laplacian filter indexing and quadtree partitioning
KR20170016849A (ko) 디스플레이 스트림 압축 (dsc) 을 위한 엔트로피 코딩 기법들
CN1627830A (zh) 色彩空间编码框架
US20140307772A1 (en) Image processing apparatus and image processing method
CN1799492A (zh) 无线内窥镜系统的准无损图像压缩和解压缩方法
KR20120118460A (ko) 화상 처리 장치 및 방법
CN1489868A (zh) 编码图像信息的方法和设备及解码图像信息的方法和设备
KR20120107961A (ko) 화상 처리 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110119

Termination date: 20150302

EXPY Termination of patent right or utility model