CN1578477A - 用于色彩图像的视频编码/解码装置和方法 - Google Patents

用于色彩图像的视频编码/解码装置和方法 Download PDF

Info

Publication number
CN1578477A
CN1578477A CNA2004100684055A CN200410068405A CN1578477A CN 1578477 A CN1578477 A CN 1578477A CN A2004100684055 A CNA2004100684055 A CN A2004100684055A CN 200410068405 A CN200410068405 A CN 200410068405A CN 1578477 A CN1578477 A CN 1578477A
Authority
CN
China
Prior art keywords
image
input picture
color component
component
prediction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2004100684055A
Other languages
English (en)
Other versions
CN1578477B (zh
Inventor
赵大星
金铉文
金佑湜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN1578477A publication Critical patent/CN1578477A/zh
Application granted granted Critical
Publication of CN1578477B publication Critical patent/CN1578477B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/523Motion estimation or motion compensation with sub-pixel accuracy
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/527Global motion vector estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Color Television Systems (AREA)

Abstract

提供一种用于色彩图像的视频编码/解码装置和方法。第一运动预测单元基于输入图像的第一运动预测结果,为输入图像产生第一预测剩余图像。图像信息检测单元将R-G-B图像的色彩分量中的预定色彩分量设置为参考色彩分量,并确定输入图像是Y-Cb-Cr图像还是R-G-B图像,确定输入图像的色彩分量是否为参考色彩分量。如果输入图像是R-G-B图像并且如果输入图像的色彩分量不是参考色彩分量,则第二运动预测单元基于参考色彩分量,对第一预测剩余图像执行运动预测并且产生第二预测剩余图像,由此根据该色彩信息执行最佳编码/解码。

Description

用于色彩图像的视频编码/解码装置和方法
技术领域
本发明涉及一种用于色彩图像的视频编码/解码装置,特别是,涉及一种基于色彩图像的色彩信息和分辨率信息执行最佳编码/解码的装置和方法。
背景技术
传统的视频压缩方法将R-G-B图像格式的图像转换为适于压缩的Y-Cb-Cr图像格式的图像,以便获得高压缩率。同时,传统的视频压缩方法将色度(Cb,Cr)分量大小减少到1/4,并且编码Cb和Cr分量,以便增加压缩效率。但是,传统的视频压缩方法不适于要求高质量图像恢复的应用。这是因为Cb和Cr分量的二次抽样产生能量损失,当R-G-B分量转换为Y-Cb-Cr分量时产生相应的质量损失。为了减少这些损失,有必要以与Y分量相同的分辨率编码Cb和Cr分量。
同时,为了编码Y-Cb-Cr分量时获得更好的质量,有必要通过直接编码R-G-B分量减少图像的质量损失。但是,传统的视频压缩方法使用传统的Y-Cb-Cr编码器编码R-G-B分量,而不使用R-G-B色彩分量中不同于Y-Cb-Cr分量的特性。上述传统的视频压缩方法的一个示例是ISO/IEC MPEG和ITU-TVCEG的联合视频组开发的AVC/H.264标准。
但是,由于R-G-B分量和Y-Cb-Cr分量的图像特性不同,如果用传统的Y-Cb-Cr编码器编码R-G-B分量,编码效率很低。例如,Y-Cb-Cr图像的各个分量(Y,Cb,Cr)在相同的区域内不相关,而R-G-B图像的各个分量(R,G,B)则相关。
同样,R-G-B图像的R,G,B分量具有相似的频率特性,但是,在Y-Cb-Cr图像中,由于R-G-B图像转换为Y-Cb-Cr图像时执行的处理,作为亮度分量的Y分量与作为色度分量的Cb和Cr分量频率特性不同。同样,传统的视频压缩方法没有将R-G-B图像和Y-Cb-Cr图像的特性正确反应到编码中。同时,传统的视频压缩方法没有在编码时依照图像大小考虑频率特性的改变。
发明内容
本发明提供了一种使用平面间预测增强R-G-B图像的编码/解码效率的视频编码/解码装置和方法。
本发明还提供了一种根据视频编码/解码的色彩信息和分辨率信息执行有效运动补偿的运动补偿装置和方法。
本发明还提供了一种根据视频编码/解码的色彩信息和分辨率信息有效减少块效率的解块滤波器和解块滤波方法。
根据本发明的一个方面,提供了一种视频编码装置,包括:第一运动预测单元,基于输入图像的第一运动预测结果,为输入图像产生第一预测剩余(residue)图像;图像信息检测单元,在R-G-B图像的色彩分量中设置参考色彩分量,确定输入图像是Y-Cb-Cr图像还是R-G-B图像,并确定输入图像的色彩分量是否为参考色彩分量;和第二运动预测单元,如果输入图像是R-G-B图像并且如果输入图像的色彩分量不是参考色彩分量,则基于参考色彩分量,对第一预测剩余图像执行运动预测并且产生第二预测剩余图像,生成第二预测剩余图像。
根据本发明的另一个方面,提供了一种由编码器执行的视频编码方法,包括:基于输入图像的第一运动预测结果,为输入图像产生第一预测剩余图像;在R-G-B图像的色彩分量中设置参考色彩分量,确定输入图像是Y-Cb-Cr图像还是R-G-B图像,确定输入图像的色彩分量是否为参考色彩分量;如果输入图像是R-G-B图像并且如果输入图像的色彩分量不是参考色彩分量,基于参考色彩分量,对第一预测剩余图像执行运动预测并且产生第二预测剩余图像。
根据本发明的另一个方面,提供了一种视频解码装置,包括:第一恢复单元,对编码图像执行预定操作,并且产生编码图像的第一预测剩余图像;图像信息检测单元,确定编码图像是R-G-B图像还是Y-Cb-Cr图像,并且确定编码图像的色彩分量是否为R-G-B图像的参考色彩分量;第二恢复单元,如果编码图像是R-G-B图像并且如果编码图像的色彩分量不是参考色彩分量,基于参考色彩分量产生编码图像的第二预测剩余图像;解块滤波器单元,减少影响基于第一预测剩余图像和第二预测剩余图像恢复的编码图像的解码图像的块影响。
根据本发明的另一个方面,提供了一种视频解码方法,包括:对编码图像执行预定操作,并且产生编码图像的第一预测剩余图像;确定编码图像是R-G-B图像还是Y-Cb-Cr图像,并且确定编码图像的色彩分量是否为R-G-B图像的参考色彩分量;如果编码图像是R-G-B图像并且如果编码图像的色彩分量不是参考色彩分量,基于参考色彩分量产生编码图像的第二预测剩余图像;减少影响基于第一预测剩余图像和第二预测剩余图像恢复的编码图像的解码图像的块影响。
根据本发明的另一个方面,提供了一种包含在解码器或编码器中的运动补偿装置,包括:图像信息检测器,检测输入图像的色彩信息;滤波器抽头选择器,基于输入图像的色彩信息,选择用于补偿的滤波器抽头的长度;内插器,使用具有所选长度的滤波器抽头内插输入图像;和运动补偿器,为内插结果执行运动补偿。
根据本发明的另一个方面,提供了一种由编码器或解码器执行的运动补偿方法,包括:检测输入图像的色彩信息;基于输入图像的色彩信息,选择用于内插的滤波器抽头的长度;使用具有所选长度的滤波器抽头内插输入图像;为内插结果执行运动补偿。
根据本发明的另一个方面,提供了一种包含在解码器或编码器中的运动补偿装置,包括:图像信息检测器,检测输入图像的分辨率和色彩信息;滤波器抽头选择器,基于输入图像的分辨率信息和色彩信息,选择用于内插的滤波器抽头的长度;内插器,使用具有所选长度的滤波器抽头内插输入图像;运动补偿器,为内插结果执行运动补偿。
根据本发明的另一个方面,提供了一种由解码器或编码器执行的运动补偿方法,包括:检测输入图像的分辨率信息和色彩信息;基于输入图像的分辨率信息和色彩信息,选择用于内插的滤波器抽头的长度;使用具有所选长度的滤波器抽头内插输入图像;为内插结果执行运动补偿。
根据本发明的另一个方面,提供了一种包含在视频解码器或视频编码器中的解块滤波器装置,包括:图像信息检测器,检测图像的色彩信息;解块滤波器选择器,基于色彩信息选择用于减少该图像的块影响的解块滤波器抽头的长度;滤波单元,使用具有所选抽头长度的解块滤波器滤波该图像。
根据本发明的另一个方面,提供了一种由解码器或编码器执行的解块滤波器选择方法,包括:检测图像的色彩信息;基于色彩信息选择用于减少图像的块影响的解块滤波器的长度;使用具有所选长度的解块滤波器滤波图像。
附图说明
通过参考附图详细描述实施例,本发明的上述和其他特征和优点将更清楚,附图为:
图1a和1b是描述根据本发明实施例的视频编码装置的结构的方块图;
图2是根据本发明一个实施例的视频编码方法的流程图;
图3a是根据本发明一个实施例的视频解码装置的结构的方块图;
图3b是根据本发明一个实施例的视频解码方法的流程图;
图4是根据本发明一个实施例的基于图像的色彩信息补偿运动的运动补偿装置的方块图;
图5是描述根据本发明一个实施例,依照图像的色彩信息执行运动补偿的方法的流程图;
图6是根据本发明另一个实施例、基于图像的色彩信息和分辨率信息补偿运动的运动补偿装置的方块图;
图7是描述根据本发明另一个实施例、基于图像的色彩信息和分辨率信息补偿运动的方法的流程图;
图8是解释使用长标记(long tab)滤波器的内插(interpolation)方法的图;
图9是解释使用短标记(short tab)滤波器的内插方法的视图;
图10是描述解块滤波器单元的视图;
图11是描述根据本发明一个实施例、根据图像的色彩信息选择解块滤波器的方法的流程图;
图12描述了将被输入到解块滤波器的宏块的垂直和水平边界;
图13描述了4×4块的垂直和水平边界的图像取样;
图14是描述根据本发明一个实施例的平面间预测编码方法的仿真结果的图表;和
图15是描述使用根据本发明的运动补偿装置执行编码时的仿真结果的图表。
具体实施方式
在下文中,将参考附图详细描述本发明的实施例。所有图中相同的附图标记表示相同的分量。
图1a是根据本发明一个实施例的视频编码装置的结构的方块图。
参考图1a,本发明一个实施例的视频编码装置包括:第一运动预测单元100,图像信息检测单元110,第二运动预测单元120,和编码单元130。第一运动预测单元100包括:平面间预测器102,平面内预测器104,和预测剩余计算器106。
第一运动预测单元100的平面间预测器102和平面内预测器104基于输入图像的时间和空间相邻图像,执行输入图像的运动预测。平面间预测器102采用与输入图像时间相邻的先前恢复的图像,执行输入图像的运动预测。平面内预测器104利用与输入图像空间相邻的输入图像的编码单元块,执行输入图像的运动预测。通常,由于初始输入图像没有先前恢复的图像,平面内预测器104对初始输入图像执行运动预测,平面间预测器102为随后的输入图像执行运动预测。预测剩余计算器106利用输入图像和平面间预测器102或平面内预测器104的运动预测结果之间的差值,产生第一预测剩余图像。
同样的,第一运动预测单元100根据输入图像的色彩信息和分辨率信息,选择性的使用具有不同抽头长度的滤波器抽头。这将在下文中参考图4到9详细描述。
图像信息检测单元110确定输入图像是R-G-B图像还是Y-Cb-Cr图像。同样的,图像信息检测单元110感觉输入图像的色彩分量。也就是说,图像信息检测单元110确定输入图像的色彩分量是R-G-B图像的R、G、或B分量,还是Y-Cb-Cr图像的Y(亮度)、Cb、或Cr(色度)分量。同样的,图像信息检测单元110设置R-G-B图像的色彩分量中的特定色彩分量为参考色彩分量。也就是说,R、G、和B分量中的一个可被设置为参考色彩分量。在下文中,假设G分量被设置为参考色彩分量。
如果输入图像的色彩分量是R-G-B图像的参考色彩分量,第二运动预测单元120基于该参考色彩分量,对从第一运动预测单元100输出的第一预测剩余图像执行运动预测,并产生第二预测剩余图像。在当前输入图像被接收之前,第二预测单元120使用的参考色彩分量被接收、编码和解码。更具体的,第二运动预测单元120基于已编码和解码过的参考色彩分量的预测剩余图像,执行运动预测。
例如,如果参考色彩分量是G分量,并且输入图像的色彩分量是B分量。第一运动预测单元100基于输入图像的运动预测结果,为B和G分量产生第一预测剩余。同样,图像信息检测单元110确定输入图像是R-G-B图像,并且输入图像的色彩分量是与参考色彩分量(G分量)不同的色彩分量(例如,B分量)。第二运动预测单元120基于已编码和解码过的参考色彩分量(G分量)的第一编码预测剩余图像,对输入图像(B分量)的第一预测剩余图像执行平面间预测,产生第二预测剩余图像。也就是说,具有B分量的输入图像被第一运动预测单元100和第二运动预测单元120预测两次。
编码单元130编码第一运动预测单元100产生的第一预测剩余图像和第二运动预测单元120产生的第二预测剩余图像,产生比特流。更具体的,编码单元130执行预测剩余图像的离散余弦变换(DCT)或者离散整数变换132,执行变换值的量化和熵编码,产生编码图像(比特流)。
由于Y-Cb-Cr图像通过色彩座标转换方法从R-G-B图像转换得到,Y-Cb-Cr图像和R-G-B图像有不同的编码特性。也就是说,Y-Cb-Cr图像的各个Y、Cb、Cr分量在相同的空间位置相互之间不相关,但是R-G-B图像的各个分量相互之间相关。因此,本发明的视频编码装置编码时,根据输入图像是R-G-B图像还是Y-Cb-Cr图像,使用不同的预测方法。
因此,本发明的视频编码装置将R-G-B图像的一个色彩分量设置为参考色彩分量,用传统编码方法编码参考色彩分量。同样,视频编码装置利用空间相邻像素或时间相邻像素,预测R-G-B图像的参考色彩分量之外的剩余两种色彩分量,并且基于参考色彩分量对预测结果进行再次预测。
图1b是根据本发明另一个实施例的视频编码装置的结构的方块图。
参考图1b,本发明的视频编码装置包括:第一运动预测单元100,图像信息检测单元110,第二运动预测单元120,编码单元130,第一恢复单元140,第二恢复单元150,和解块滤波器单元160。第一运动预测单元100包括:平面间预测器101,平面内预测器104,预测剩余计算器107。
输入图像(F(n))170是Y-Cb-Cr图像或者R-G-B图像。输入图像170被本发明的视频编码装置进行逐块处理。第一运动预测单元100包括平面间预测器101和平面内预测器104,上述平面间预测器101具有运动估计器(ME)102和运动补偿器(MC)103,用于基于先前恢复的图像(Fr(n-1))172估计和预测运动,来增强编码效率,上述平面内预测器104具有空间估计器(SE)105和空间预测器(SP)106,用于基于空间相邻块估计和预测运动。
根据Y-Cb-Cr(或者Y-U-V)图像和R-G-B图像的各个色彩分量改变运动补偿的内插方法。首先,预测剩余计算器107基于输入图像170和平面间预测器101或者平面内预测器104获得的运动预测结果,获得编码预测剩余图像ΔF(n)。如果输入图像170是Y-Cb-Cr图像,预测剩余计算器107使用预测剩余图像ΔF(n)来获得预测剩余ΔY(n)、ΔU(n)和ΔV(n)。如果输入图像170是R-G-B图像,预测剩余计算器107使用预测剩余图像ΔF(n)来获得预测剩余ΔR(n)、ΔG(n)和ΔB(n)。
编码单元130对Y-Cb-Cr图像的预测剩余ΔY(n)、ΔU(n)、ΔV(n)或者R-G-B图像的预测剩余ΔG(n)执行DCT(或者离散整数变换)、量化和熵编码,从而压缩预测剩余。
如果输入图像170是R-G-B图像,第二运动预测单元120的预测剩余预测器(RP)122利用恢复的G分量的预测剩余ΔGr(n)1 24,执行R和B分量的预测剩余ΔB(n)和ΔR(n)的平面间预测。
同样,编码单元130对通过平面间预测获得的预测剩余图像ΔB’和ΔR’(n)执行DCT(或者离散整数变换)、量化和熵编码,从而压缩预测剩余图像。DCT由ISO/IEC MPEG-4标准的第二部分定义,离散整数变换由ISO/IECMPEG和ITU-T VCEG的联合视频组开发的AVC/H.264标准定义。
第一恢复单元140对由编码单元130变换和量化的图像(将被恢复)执行逆量化,以便图像可被用于使用空间相邻块或者时间随后图像的预测,随后对图像执行反离散余弦变换(IDCT),因此产生图像的各个色彩分量的预测剩余图像。
如果将被恢复的图像是Y-Cb-Cr图像,第一恢复单元140获得恢复的预测剩余图像ΔYr(n)、ΔUr(n)和ΔVr(n)。同样的,如果将被恢复的图像是R-G-B图像,第一恢复单元140获得恢复的预测剩余图像ΔGr(n)、ΔB’r(n)和ΔR’r(n)。预测剩余图像ΔGr(n)存储在缓冲器124中,以便由第二运动预测单元120进行平面间预测。
如果将被恢复的图像的色彩分量是R和B分量,第二恢复单元150利用G分量的恢复的预测剩余图像ΔGr(n),获得R和B分量的恢复的预测剩余图像ΔBr(n)和ΔRr(n)。Y-Cb-Cr图像的恢复的预测剩余图像ΔYr(n)、ΔUr(n)和ΔVr(n)或者R-G-B图像的恢复的预测剩余图像ΔGr(n)和ΔBr(n)作为输入Fr(n)输入到解块滤波器单元160。
解块滤波器(环路滤波器)单元160将输入Fr(n)加到第一运动预测单元100产生的平面间或平面内预测结果,滤波相加后的结果,因此减少块影响。本发明的解块滤波器单元160根据Y-Cb-Cr(或者Y-U-V)图像和R-G-B图像的各个分量,在块边界区域使用不同的滤波器抽头长度。将在下文中参考图10和11详细描述。
图2是描述根据本发明一个实施例的视频编码方法的流程图。
参考图1a和2,在步骤S200,第一运动预测单元100对输入图像执行时间/空间预测(平面间预测/平面内预测)。在步骤S210,图像信息检测单元110设置G分量为R-G-B图像的参考色彩分量,确定输入图像是否为R-G-B图像。在步骤S220,如果输入图像是R-G-B图像,图像信息检测单元110确定输入图像的色彩分量是否为参考色彩分量G分量。如果输入图像的色彩分量是R或者B分量,第二运动预测单元120使用在步骤S306恢复的G分量的预测剩余图像,对各个分量执行平面间预测。换句话说,本发明的视频编码方法使用第一运动预测单元100,对除参考色彩分量之外的不同色彩分量执行运动预测,接着基于该参考色彩分量,对不同色彩分量执行运动预测。由第一运动预测单元100或者第二运动预测单元110获得的预测剩余图像通过DCT(或者离散整数变换)、量化和熵编码进行压缩。
在下文中,将详细描述应用于R-G-B图像的除参考色彩分量之外的R和B分量的平面内预测。首先,使用输入图像对具有G分量的输入图像执行运动预测,并从运动预测结果和输入图像之间的差值获得G分量的预测剩余图像ΔG。该预测剩余图像ΔG可用等式1表示。
ΔG=G-Gp                        ......(1)
其中,Gp是使用与G分量空间相邻的G分量图像或者与G分量时间相邻的G分量图像的预测值。预测剩余图像事实上经历了熵编码。
与Y、Cb和Cr分量相比,G、R和B分量之间的相关性仍然很大。为了使用G分量和R、B分量之间的相似性,R和B分量与G分量一样被时间和空间预测。因此,预测剩余图像ΔR和ΔB通过下面的等式获得。
ΔR=R-Rp                        ......(2)
ΔB=B-Bp                        ......(3)
其中,Rp和Bp是使用R和B分量的空间或时间相邻图像预测的R和B分量的预测剩余值。预测剩余值减去G分量的编码和解码的预测剩余图像的线性变换值,因此R和B分量的平面间预测剩余图像ΔR’和ΔG’通过下面的等式4和5获得。
ΔR’=ΔR-f(ΔGr)=ΔR-(a·ΔGr+b)            ......(4)
ΔB’=ΔB-f(ΔGr)=ΔB-(c·ΔGr+d)            ......(5)
与R和B分量的时间/空间预测剩余ΔR和ΔB相比,这些值编码的数据量很小,因此编码效率可被增强。这是因为利用预测剩余图像ΔG、ΔR和ΔB之间的相关性很大的事实,通过线性函数表示预测剩余ΔG和ΔR之间的关系以及预测剩余ΔG和ΔB之间的关系,预测剩余图像ΔR和ΔB可近似于ΔG的函数。在下文中,当使用G分量的预测剩余预测R分量的预测剩余时,值a和b(等式6和7)是近似线性函数的灰度(gradation)和偏差,当使用G分量的预测剩余预测B分量的预测剩余时,值c和d(等式8和9)是近似线性函数的灰度和偏差。
a=cov(ΔG,ΔR)/σ2 ΔG                        ......(6)
b=E(ΔR)-a·E(ΔG)                            ......(7)
c=cov(ΔG,ΔB)/σ2 ΔG                        ......(8)
d=E(ΔB)-c·E(ΔG)                            ......(9)
其中,cov(.)是协方差,E(.)是值的平均,σ2是方差。
图3a是描述根据本发明一个实施例的视频解码装置的结构的方块图。
参考图3a,本发明一个实施例的视频解码装置包括:第一恢复单元300,图像信息检测器310,第二恢复单元320,运动预测单元330,解块(deblock)滤波器340。
本发明的视频解码装置从压缩比特流(也就是编码的图像)恢复图像。第一恢复单元300执行压缩比特流(数据)的熵解码302、逆量化304、和反离散整数变换306,并且如果压缩比特流是Y-Cb-Cr图像,则获得Y-Cb-Cr图像的各个分量的恢复的预测剩余图像ΔYr(n)、ΔUr(n)和ΔVr(n)。同时,如果压缩比特流是R-G-B图像,第一恢复单元300获得恢复的预测剩余图像ΔGr(n)、ΔB’r(n)和ΔR’r(n)。
图像信息检测器310确定压缩比特流是Y-Cb-Cr图像还是R-G-B图像,确定压缩比特流的色彩分量是否为R-G-B图像的参考色彩分量。在下文中,假设G分量被设为参考色彩分量。
如果压缩比特流是Y-Cb-Cr图像或者是R-G-B图像的参考色彩分量,第一恢复单元300恢复的预测剩余图像是将被输入到运动预测单元330的预测剩余图像ΔFr(n)352。
如果压缩比特流是R-G-B图像的B或者R分量(也就是除参考色彩分量之外的不同分量),第二恢复单元320存储G分量的预测剩余图像ΔGr(n),用于平面间预测,以便恢复R和B分量的预测剩余图像。
同时,如果比特流用视频编码器的平面间预测编码(图1a和1b),第二恢复单元320将由运动预测单元330的MC(运动比较器)332获得的先前图像Fr(n-1)的平面间预测值与由第一恢复单元300和第二恢复单元320获得的预测剩余图像相加,并获得R-G-B或Y-Cb-Cr图像的各个分量的恢复值。如果比特流用平面内预测编码,第二恢复单元320将由运动预测器330的SP(空间预测器)334获得的平面内预测值与第一恢复单元330和第二恢复单元330获得的预测剩余图像相加,并获得R-G-B或Y-Cb-Cr图像的各个分量的恢复值。其中,根据Y-Cb-Cr(或者Y-U-V)图像和R-G-B图像的各个分量,对运动补偿使用不同的内插方法来执行运动预测单元330的平面间预测。这将在下文中参考图4到9详细描述。第二恢复单元320恢复的值传送到解块滤波器340来减少块影响,并作为各个色彩分量的恢复的图像Fr(n)352输出。
根据Y-Cb-Cr(或者Y-U-V)图像和R-G-B图像的各个分量,解块滤波单元340选择使用具有不同滤波器抽头长度的解块滤波器,其用于块边界。这将参考图10和11描述。
图3b是描述根据本发明一个实施例的视频解码方法的流程图。
参考图3a和3b,在步骤S350,第一恢复单元300从比特流产生第一预测剩余图像。同样,在步骤S355,图像信息检测器310确定比特流是Y-Cb-Cr图像还是R-G-B图像,确定比特流的色彩分量是否为R-G-B图像的参考色彩分量。
在步骤S360,如果比特流是R-G-B图像,并且比特流的色彩分量不是R-G-B图像的参考色彩分量,则第二恢复单元320预测第一预测剩余图像,并产生第二预测剩余图像,该第一预测剩余图像由第一恢复单元300使用参考色彩分量的第一预测剩余图像获得。
在步骤S365,第二恢复单元320将第一和第二预测剩余图像与由运动预测器330获得的先前图像的运动预测结果相加,获得恢复的图像。在步骤S370,解块滤波器340减少恢复的图像的块影响,获得最终恢复的图像Fr(n)352。
图4是根据本发明一个实施例的运动补偿装置的结构的方块图。
参考图4,本发明的运动补偿装置103或者332包括:图像信息检测器(未示出),滤波器抽头选择器400,内插器410和420,和运动补偿器430。
R-G-B图像的R、G和B分量具有相似的频率特性,但是在Y-Cb-Cr图像中,作为亮度分量的Y分量与作为色度分量的Cb和Cr分量频率特性不同。同时,与亮度分量相比,Y-Cb-Cr图像的色度分量具有很多低频分量和相互之间有很大的相关性。图4是根据图像的色彩分量使用不同的预测方法的运动补偿装置的方块图。
图像信息检测器(未示出)确定输入图像是Y-Cb-Cr图像还是R-G-B图像,并且确定输入图像的色彩分量是否为R-G-B图像的参考色彩分量。通常,R-G-B图像的参考色彩分量设为G分量。
滤波器抽头选择器400根据从图像信息检测器(未示出)接收的输入图像的色彩分量信息402,选择长抽头滤波内插器410或者短抽头滤波内插器420。也就是说,滤波器抽头选择器400根据输入图像的各个色彩分量选择滤波器抽头,用于最佳运动预测。在本公开文本中,长抽头滤波器可以是6抽头滤波器,短抽头滤波器可以是2抽头滤波器。
例如,如果输入图像是Y-Cb-Cr图像或者输入图像的色彩分量不是R-G-B图像的参考色彩分量,滤波器抽头选择器400选择6抽头滤波内插器,如果输入图像的色彩分量是R-G-B图像的参考色彩分量,选择2抽头滤波内插器。
滤波器抽头选择器400选择的内插器410或者420内插输入图像来执行输入图像的运动补偿。此时,每个内插器410和420基于先前帧的运动矢量412内插输入图像。
可选的,内插器410和420可以分别是6抽头滤波内插器410和双线性内插器420。如果滤波器抽头选择器400选择6抽头滤波内插器410,6抽头滤波内插器410内插输入图像。
内插器410或者420内插后的输入图像由运动补偿器430进行运动补偿。
图5是描述根据本发明依据输入图像的色彩分量执行运动补偿的方法的流程图。
参考图4和5,在步骤S500,滤波器抽头选择器400基于从图像信息检测器(未示出)接收的色彩分量,选择滤波器抽头。如果在步骤S510确定输入图像的色彩分量是R-G-B分量,在步骤520,滤波器抽头选择器400对R-G-B图像的各个分量选择相同的内插方法。例如,滤波器抽头选择器400允许R-G-B图像的所有各个分量通过长抽头滤波内插器410,或者允许R-G-B图像的所有各个分量通过短抽头滤波内插器420。
如果确定输入图像的色彩分量不是R-G-B分量,而是Y-Cb-Cr分量,在步骤S530,图像信息检测器(未示出)确定输入图像的色彩分量是否为Y分量(亮度)。如果输入图像的色彩分量是亮度分量,滤波器抽头选择器400选择长抽头滤波内插器410,以便在步骤S540输入图像可被长抽头滤波内插器410内插。如果输入图像的色彩分量是色度分量(Cb,Cr),在步骤S550,滤波器抽头选择器400选择短抽头滤波内插器420。
根据输入图像的色彩分量选择不同的抽头滤波内插器的原因是因为当输入图像的色彩分量存在许多高频分量时,与短抽头滤波内插器方法相比,使用许多相邻像素的长抽头滤波内插器方法可以正确恢复高频分量。相反的,如果输入图像的色彩分量的低频分量比高频分量多时,在维持与长抽头滤波内插器相似的性能的同时,使用相对少的相邻像素的短抽头滤波内插器在复杂性方面更有效。
图6是根据本发明另一个实施例的运动补偿装置的结构的方块图。
参考图6,本发明的运动补偿装置103或者332包括:图像信息检测器(未示出),滤波器抽头选择器600,内插器610和620,和运动补偿器630。
图像的大小或分辨率信息604与图像的色彩分量602一样影响频率特性。图6是根据本发明另一个实施例,依据图像的色彩信息或分辨率信息使用不同的运动补偿方法的运动补偿装置的方块图。
图像信息检测器(未示出)感知图像的色彩分量和分辨率信息。更详细地,图像信息检测器(未示出)确定输入图像是高分辨率图像还是低分辨率图像,并且确定输入图像的色彩分量是否为R-G-B图像的参考色彩分量。
滤波器抽头选择器600根据由图像信息检测器(未示出)感知的输入图像的色彩信息和分辨率信息,选择滤波器抽头的长度。更详细地,如果输入图像是高分辨率图像或者输入图像的色彩分量是与Y-Cb-Cr图像的Y分量(亮度)不同的色彩分量,滤波器抽头选择器600选择短抽头滤波器。同样,如果输入图像是低分辨率图像,或者输入图像是R-G-B图像,或者输入图像的色彩分量是Y-Cb-Cr图像的Y分量(亮度),滤波器抽头选择器600选择长抽头滤波器。通常,长抽头滤波器是6抽头滤波器,短抽头滤波器是2抽头滤波器。
这里有使用长滤波器抽头的内插器610(也称为长抽头滤波内插器)和使用短滤波器抽头的内插器620(也称为短抽头滤波内插器),内插器610和620相应于先前帧的运动矢量(MV)内插图像信息。
运动补偿器630对内插器内插后的输入图像的运动进行补偿。
图7是描述根据本发明另一实施例的运动补偿方法的流程图。更详细地,图7是描述是用色彩分量和分辨率信息执行运动补偿的方法的流程图。
参考图6和7,在步骤S700,图像信息检测器(未示出)接收输入图像的图像大小信息,并且在步骤S710确定输入图像是否为高分辨率图像。在本发明中,高分辨率图像表示比HD分辨级别的1280×720的图像大小更大的图像。1280×720的参考图像大小可根据环境和应用而改变。
如果输入图像是高分辨率图像,在步骤S750,滤波器抽头选择器600选择短抽头滤波内插器。原因在于,由于高分辨率图像包括的低频分量多于高频分量,不需要使用长抽头滤波器。在高分辨率图像的情况下,由于实际图像的一小部分被大量像素显示,像素值之间的差值很小。在这种情况下,由于使用长抽头滤波器和使用短抽头滤波器时,视频质量差异很小,滤波器抽头选择器600考虑复杂性而选择短抽头滤波内插器620。
如果输入图像是低分辨率图像,在步骤S700,图像信息检测器(未示出)接收色彩信息,在步骤S720,确定输入图像是否为R-G-B图像。在步骤S730,如果输入图像的色彩分量是R、G或B分量,滤波器抽头选择器600选择长抽头滤波内插器610,以便输入图像的所有各个分量可被长抽头滤波内插器610内插。如果输入图像的色彩分量不是R、G或B分量,而是Y、Cb或Cr分量,在步骤S730,图像信息检测器(未示出)确定输入图像的色彩分量是否为Y分量(亮度)。如果输入图像的色彩分量是亮度分量,在步骤S740,滤波器抽头选择器600选择长抽头滤波内插器610。如果输入图像的色彩分量是色度分量,在步骤S750,滤波器抽头选择器600选择短抽头滤波内插器。
图8描述了为了运动补偿,当先前帧的图像在垂直或水平方向上四次内插时,使用6抽头滤波器的示例。
6抽头滤波器被MPEG-4 AVC/H.264定义。参考图8,当给出先前帧的像素A到U时,位于1/4或1/2像素位置的像素a到s,可根据下面的公式得到。
首先,位于相应像素的垂直或水平方向的1/2像素位置的像素b和h,如下所示被6个相邻像素内插。
b1=(E-5×f+20×g+20×h-5×I+J)            ......(10)
h1=(A-5×C+20×G+20×M-5×R+T)            ......(11)
b=Clip1((b1+16)>>5)                     ......(12)
h=Clip1((h1+16)>>5)                     ......(13)
其中,Clip1(x)表示将值x钳位到预定大小,以便值x在图像像素的比特范围之内。在输入图像是8比特图像的情况下,如果x小于0,Clip1(x)的值x被设为0。如果x大于255,x被设为255,其中其他值保持不变。用于内插的滤波器抽头是使用相对大量的相邻像素的6抽头滤波器(1,-5,20,20,-5,1)。
使用先前恢复的对应于1/2像素位置的相邻像素,根据等式14a、14b和15,在垂直和水平方向上内插1/2像素位置的像素j。
j1=cc-5×dd+20×h1+20×m1-5×ee+ff         ......(14a)
j1=aa-5×bb+20×b1+20×s1-5×gg+hh         ......(14b)
j=Clip1((j1+512)>>10)                    ......(15)
其中,作为相邻像素值的cc、dd、h1、m1、ee、ff或aa、bb、b、s1、gg和hh是由6抽头滤波器在上面的等式10和11执行内插获得的中间结果。
位于1/2像素位置、作为最终值的像素值s和m是根据等式12和13、从像素值s1和m1恢复的值。
位于1/4像素位置的像素值a、c、d、n、f、i、k和q是平均垂直或水平方向上相邻的两个像素得到的值,如下面的等式16到23。
a=(G+b+1)>>1                              ......(16)
c=(H+b+1)>>1                              ......(17)
d=(G+h+1)>>1                              ......(18)
n=(M+h+1)>>1                              ......(19)
f=(b+j+1)>>1                              ......(20)
i=(h+j+1)>>1                              ......(21)
k=(j+m+1)>>1                              ......(22)
q=(j+s+1)>>1                              ......(23)
位于1/4像素位置的像素值e、g、p和r是通过平均对角线方向上相邻的两个像素得到的值,如下面的等式24到27。
e=(b+h+1)>>1                              ......(24)
g=(b+m+1)>>1                                                      ......(25)
p=(h+s+1)>>1                                                      ......(26)
r=(m+s+1)>>1                                                      ......(27)
图9描述了为了补偿运动,当先前帧的图像在垂直或水平方向上内插四次时,使用双线性内插方法的示例。双线性内插方法由MPEG-4 AVC/H.264定义。
在先前帧的像素A、B、C和D中,位于1/4或1/2像素位置的像素值可通过等式28a获得。
a=((4-dx)×(4-dy)×A+dx×(4-dy)×B+(4-dx)×dy×C+dx×dy×D+8)>>4  ......(28a)
其中,dx是表示在1/4像素位置,像素a在水平方向与像素A或C的相距值,dy是表示在1/4像素位置,像素a在垂直方向与像素A或B的相距值。
参考图9,双线性内插方法使用相对少量的相邻像素,并使用位于将被内插的值很近的像素值,不同于图7。
图10是根据本发明使用图像的色彩分量特性的解块滤波器单元的结构的方块图。图像的色彩分量特性被解块滤波器单元使用,用于减少图像恢复后产生的块影响,也被用于运动补偿。图10示出了考虑图像的色彩分量特性的解块滤波器的一个实施例。
参考图10,解块滤波器单元160或340包括:图像信息检测器(未示出),解块滤波器选择器1000,长抽头环路(解块)滤波器1010,短抽头环路(解块)滤波器1020。
图像信息检测器(未示出)确定输入图像是Y-Cb-Cr图像还是R-G-B图像,并且确定输入图像的色彩分量是否为亮度(Y)分量。
解块滤波器选择器1000基于输入图像的色彩分量,选择长抽头环路滤波器和短抽头环路滤波器1010和1020之一,上述两个滤波器具有不同的滤波器抽头长度。例如,如果输入图像是R-G-B图像,或者输入图像的色彩分量是Y-Cb-Cr图像的亮度(Y)分量,解块滤波器选择器1000选择长抽头环路滤波器1010。同样,如果输入图像的色彩分量是Y-Cb-Cr图像的色度(Cb或Cr)分量,解块滤波器选择器1000选择短抽头环路滤波器1020。
长抽头环路滤波器1010与短抽头环路滤波器1020有不同的滤波器抽头长度。由解块滤波器选择器1000选择长抽头环路滤波器1010和短抽头环路滤波器1020之一。
长抽头环路滤波器和短抽头环路滤波器1010和1020中的每个基于块编码模式、CBP(编码块图案)、用于先前帧的运动信息(MV、MC)参考图像数、和隔行扫描图像的场信息,确定滤波是否应被执行,并最终消除输入图像的块影响。
图11是描述根据本发明一个实施例,依据输入图像的色彩分量选择解块滤波器抽头的方法的流程图。
参考图10和11,在步骤S1110,解块滤波器选择器1000接收来自图像信息检测器(未示出)的色彩信息,并确定输入图像的色彩分量是否为R-G-B图像的色彩分量。如果输入图像的色彩分量是R-G-B图像的色彩分量,在步骤S1130,解块滤波器选择器1000为每个色彩分量分配相同的滤波器抽头系数。在这种情况下,解块滤波器选择器1000通常选择长抽头环路滤波器1010。如果输入图像的色彩分量是Y-Cb-Cr图像的色彩分量,在步骤S1140,滤波器抽头选择器1000选择长抽头滤波器1010。如果输入图像的色彩分量是色度分量,在步骤S1150,滤波器抽头选择器1000选择短抽头环路滤波器1020。
图12描述了为了减少16×16宏块中的块影响,其上执行解块滤波的垂直和水平方向的边界。
参考图12,宏块被分成16个4×4块,每个块被编码。因此,在4×4块的边界产生块影响。如图12(a)所示,首先,对垂直边界1201、1202、1203和1204执行解块滤波。随后,如参见图12(b),对水平边界1205、1206、1207和1208执行解块滤波。
图13描述了对4×4块的垂直和水平边界执行解块滤波时使用的系数。
在垂直边界,如图13(a)所示,为了减少使用像素p0、p1、p2、p3、q0、q1、q2和q3的像素值和滤波器抽头的块影响,像素p0、p1、p2、q0、q1、q2的像素值被改变。图13(b)描述了执行水平边界解块滤波的像素。
由于每个4×4块的损失程度不同,有必要改变滤波器系数,并且确定是否应对于每个4×4块执行滤波。为此,如图10所示,解块滤波是否应被执行,也就是滤波器抽头的长度等等,基于块编码模式、CBP(编码块图形)、用于先前帧的运动信息(MV、MC)参考图像数、和隔行扫描图像的场信息,利用预定阈值确定。作为基本滤波方法,使用由MPEG-4 AVC/H.264定义的滤波方法。确定对于一个4×4块是否应执行滤波的滤波标记值(filterFlag)可通过等式28b计算。
filterFlag=(Bs!=0&&Abs(p0-q0)<α&&Abs(p1-p0)<βAbs(q1-q0)<β)
                                                             ......(28b)
其中,只有当值filterFlag是1时,解块滤波才被执行。α和β是根据相邻像素值的改变确定解块滤波是否应被执行的阈值。当量化值增加时,阈值α和β变大。Bs(滤波器强度)是表示当解块滤波被执行时通过滤波器改变的像素值的范围的值。值Bs是0与4之间的值。如果值Bs是0,滤波不被执行。当值Bs接近4时,滤波器系数的值变大。值Bs被改变,因此像素p0、p1、p2、p3、q0、q1、q2、q3中的多数像素减少块影响。
首先,当色彩分量是R、G和B分量或者Y-Cb-Cr图像的Y分量时,使用的长抽头滤波器系数可用等式29到45定义。
如果值Bs小于4,如下所示,最接近边界的像素p0和q0改变为p’0和q’0。
Δ=Clip3(-tc,tc,((((q0-p0)<<2)+(p1-q1)+4>>3))           ......(29)
p’0=Clip1(p0+Δ)                                             ......(30)
q’0=Clip1(q0-Δ)                                             ......(31)
其中,Clip3(min,max,x)被定义来设定最小值min和最大值max之间的值x。Clip1(x)与等式12中的Clip1(x)具有相同的含义。tc是限定像素值的阈值。其中,如果值Bs很大,tc也有很大的值,使得像素值的改变程度更大。
对于p1和q1,定义下面的值,以便确定滤波是否应被执行。
ap=abs(2p-p0)                                                  ......(32)
ap=abs(q2-q0)                                                  ......(33)
其中,如果ap小于β,p1改变为p’1。否则,p1不改变。
p’(1)=p1+Clip3(-tc,tc,(p2+((p0+p0+1)>>1)-(p1<<1)>>1)  ......(34)
其中,如果ap小于β,如下q1改变为q’1。否则,q1不改变。
q’1=q1+Clip3(-tc,tc,(q2+((q0+q0+1)>>1)-(q1>>1)          ......(35)
如果Bs是4,用于确定滤波器系数的值Tp和Tq如下定义。
Tp=ap<β&&Abs(p0-q0)<((α>>2)+2)                           ......(36)
Tq=aq<β&&Abs(p0-q0)<((α>>2)+2)                           ......(37)
如果Tp是1,p0、p1和p2通过增加滤波器系数的值分别改变为p’0、p’1和p’2,如下所示。
p’0=(p2+2×p1+2×p0+2×q0+q1+4)>>3                           ......(38)
p’1=(p2+p1+p0+q0+2)>>2               ......(39)
p’2=(2×p3+3×p2+p1+p0+q0+4)>>3      ......(40)
同时,如果Tp是0,只有p0通过减小滤波器系数的值改变为p’0。
p’0=(2×p1+p0+q1+2)>>2             ......(41)
同时,如果Tq是1,q0、q1和q2通过增加滤波器系数的值分别改变为q’0、q’1和q’2,如下所示。
q’0=(p1+2×p0+2×q0+2×q1+q2+4)>>3    ......(42)
q’1=(p0+q0+q1+q2+2)>>2                ......(43)
q’2=(2×q3+3×q2+q1+q0+p0+4)>>3       ......(44)
同时,如果Tq是0,只有q0通过减小滤波器系数的值改变为q’0,如下所示。
q’0=(2×q1+q0+p1+2)>>2                ......(45)
如果Y-Cb-Cr图像的色彩分量是Cb或Cr分量,短抽头滤波器系数如下定义。首先,如果Bs小于4,p0和q0根据等式30和31分别改变为p’0和q’0。不同于R-G-B图像和Y分量,p1和q1的值不改变。如果Bs是4,只有p0和q0的值根据等式41和45分别改变为p’0和q’0。不同于R-G-B图像和Y分量,p1和q1的值不改变。
图14是根据本发明一个实施例,当提供R-G-B图像作为输入图像时,使用平面间预测编码方法的视频编码的仿真结果的图表。图14示出了使用根据本发明的平面间预测和不使用平面间预测时的比较结果。
其中,输入图像是1280×720大小的CREW(组)图像,仿真结果用四比特速率的PSNR(信噪功率比)表示。
图14a示出了只执行空间预测的内部模式的仿真结果,图14b示出了使用时间预测和空间预测的仿真结果。如图14所示,本发明和传统技术在相同比特率有超过3dB增益差值。
图15a示出了当R-G-B图像是输入图像时,6抽头滤波器被用于运动补偿的情况下(MC_LL)和6抽头滤波器被用于G分量并且双线性滤波器被用于R和B分量的情况下(MC_LC),640×350 Harbour(哈勃)图像的比较结果。
从图15a可见,在相同比特率,本发明的MC_LL方法的PSNR增益大于传统技术的PSNR增益。
图15b示出了当Y-Cb-Cr图像是输入图像时,6抽头滤波器被用于Y分量并且双线性滤波器被用于Cb和Cr分量的情况下(MC_LC)和6抽头滤波器被用于所有Y、Cb和Cr分量进行运动补偿的情况下(MC_LL),640×350Harbour图像的比较结果。从图15b可知,在本发明中,在相同比特率,每个Y、Cb和Cr分量的PSNR被改进。
本发明可用存储于计算机可读介质中、能在通用计算机运行的程序实现。其中,计算机可读介质包括但不限于比如磁存储介质(比如ROM、软盘、硬盘等)、光学可读介质(比如CD-ROM,DVD等等)、和载波(比如因特网上的传输)的存储介质。本发明也可用存储在计算机可读介质中的计算机可读程序代码单元实现,使通过网络连接的许多计算机系统影响分布的处理。
如上所述,本发明可考虑输入图像的色彩分量特性,有效编码和解码视频数据。特别是,可以通过平面间预测改进R-G-B图像的编码效率。本发明可被应用到由于R-G-B图像被直接编码,需要图像信息具有高质量的数字档案、数字影院等等。
同样,本发明在编码器和解码器中使用色彩分量特性和图像分辨率特性,用于运动补偿和解块滤波。本发明可以根据图像特性,通过滤波增强图像质量,改进编码效率。因此本发明可以相应于R-G-B图像和Y-Cb-Cr图像的各个特性,构造适合的编码器和解码器。
尽管本发明已经参考实施例进行了特别地展示和描述,本领域的普通技术人员应该明白,在不脱离后附的权利要求定义的本发明的精神和范围的情况下,可以在形式和细节上做各种改变。

Claims (43)

1.一种视频编码装置,包括:
第一运动预测单元,基于输入图像的第一运动预测结果,为输入图像产生第一预测剩余图像;
图像信息检测单元,在R-G-B图像的色彩分量中设置参考色彩分量,确定输入图像是Y-Cb-Cr图像还是R-G-B图像,并确定输入图像的色彩分量是否为该参考色彩分量;和
第二运动预测单元,如果输入图像是R-G-B图像并且如果输入图像的色彩分量不是参考色彩分量,则基于参考色彩分量,对第一预测剩余图像执行运动预测并产生第二预测剩余图像,生成第二预测剩余图像。
2.根据权利要求1的视频编码装置,进一步包括编码单元,编码第一预测剩余图像和第二预测剩余图像。
3.根据权利要求2的视频编码装置,其中编码单元对第一预测剩余图像和第二预测剩余图像执行离散余弦变换或离散整数变换、量化、和熵编码。
4.根据权利要求1的视频编码装置,其中R-G-B图像的参考色彩分量是G分量。
5.根据权利要求1的视频编码装置,其中第二运动预测单元基于参考色彩分量的编码和解码的第一预测剩余图像,对输入图像的第一预测剩余图像执行运动预测,并产生第二预测剩余图像。
6.根据权利要求5的视频编码装置,其中第二运动预测单元基于参考色彩分量的第一预测剩余图像的线性变换值和输入图像的第一预测剩余图像之间的差值,产生第二预测剩余图像。
7.根据权利要求1、5和6之一的视频编码装置,其中在输入图像被接收之前,接收、编码和解码参考色彩分量。
8.根据权利要求1的视频编码装置,其中第一运动预测单元包括:
平面间预测器,使用与输入图像时间相邻的先前恢复的图像,预测输入图像的运动;
平面内预测器,使用与输入图像空间相邻的编码单元块,预测输入图像的运动;
预测剩余计算器,选择平面间预测器的预测结果或者平面内预测器的预测结果,并基于选择的预测结果和输入图像之间的差值,产生第一预测剩余图像。
9.根据权利要求8的视频编码装置,其中预测剩余计算器为初始输入图像选择平面内预测器的预测结果,并为在接收初始输入图像之后接收的输入图像选择平面间预测器的预测结果。
10.根据权利要求1的视频编码装置,其中第一运动预测单元根据输入图像的色彩信息和分辨率信息选择预定长度的滤波器抽头,并使用选择的滤波器抽头为输入图像执行平面间预测。
11.一种由编码器执行的视频编码方法,包括:
基于输入图像的第一运动预测结果,为输入图像产生第一预测剩余图像;
在R-G-B图像的色彩分量中设置参考色彩分量,确定输入图像是Y-Cb-Cr图像还是R-G-B图像,并确定输入图像的色彩分量是否为参考色彩分量;和
如果输入图像是R-G-B图像并且如果输入图像的色彩分量不是参考色彩分量,则基于参考色彩分量,对第一预测剩余图像执行运动预测,并产生第二预测剩余图像。
12.根据权利要求11的视频编码方法,进一步包括:
对第一预测剩余图像和第二预测剩余图像执行离散余弦变换或者离散整数变换、量化、和熵编码。
13.根据权利要求11的视频编码方法,其中对第一预测剩余图像执行运动预测并产生第二预测剩余图像包括:
基于参考色彩分量的编码和解码的第一预测剩余图像,对输入图像的第一编码预测剩余图像执行运动预测,并产生第二预测剩余图像。
14.根据权利要求11的视频编码方法,其中对第一预测剩余图像执行运动预测并产生第二预测剩余图像包括:
基于参考色彩分量的第一预测剩余图像的线性变换值和输入图像的第一预测剩余图像之间的差值,产生第二预测剩余图像。
15.根据权利要求11的视频编码方法,其中产生第一预测剩余图像包括:
使用与输入图像时间相邻的先前恢复的图像,预测输入图像的运动;和
基于预测结果和输入图像之间的差值,产生第一预测剩余图像。
16.根据权利要求11的视频编码方法,其中产生第一预测剩余图像包括:
根据输入图像的色彩信息和分辨率信息选择具有预定长度的滤波器抽头,使用选择的滤波器抽头为输入图像执行平面间预测。
17.一种视频解码装置,包括:
第一恢复单元,对编码图像执行预定操作,并产生编码图像的第一预测剩余图像;
图像信息检测单元,确定编码图像是R-G-B图像还是Y-Cb-Cr图像,并确定编码图像的色彩分量是否为R-G-B图像的参考色彩分量;
第二恢复单元,如果编码图像是R-G-B图像且如果编码图像的色彩分量不是参考色彩分量,则基于参考色彩分量产生编码图像的第二预测剩余图像;
解块滤波器单元,减少影响基于第一预测剩余图像和第二预测剩余图像恢复的编码图像的解码图像的块影响。
18.根据权利要求17的视频解码装置,其中第一恢复单元执行编码图像的熵解码、逆量化、和反离散整数变换,并产生第一预测剩余图像。
19.根据权利要求17的视频解码装置,其中解块滤波器单元基于解码图像的色彩信息选择预定长度的滤波器抽头,并使用选择的滤波器抽头减少解码图像的块影响。
20.一种视频解码方法,包括:
对编码图像执行预定操作,并产生编码图像的第一预测剩余图像;
确定编码图像是R-G-B图像还是Y-Cb-Cr图像,并确定编码图像的色彩分量是否为R-G-B图像的参考色彩分量;
如果编码图像是R-G-B图像并且如果编码图像的色彩分量不是参考色彩分量,则基于参考色彩分量产生编码图像的第二预测剩余图像;以及
减少影响基于第一预测剩余图像和第二预测剩余图像恢复的编码图像的解码图像的块影响。
21.根据权利要求20的视频解码方法,其中产生第一预测剩余图像包括:
执行编码图像的熵解码、逆量化、和反离散整数变换,并产生第一预测剩余图像。
22.根据权利要求20的视频解码方法,其中减少解码图像的块影响包括:
基于编码图像的色彩信息选择预定长度的滤波器抽头,并使用选择的滤波器抽头减少解码图像的块影响。
23.一种包含在解码器或编码器中的运动补偿装置,包括:
图像信息检测器,检测输入图像的色彩信息;
滤波器抽头选择器,基于输入图像的色彩信息,选择用于补偿的滤波器抽头的长度;
内插器,使用具有所选长度的滤波器抽头内插输入图像;和
运动补偿器,为内插结果执行运动补偿。
24.根据权利要求23的运动补偿装置,其中图像信息检测器确定输入图像是Y-Cb-Cr图像还是R-G-B图像,并且确定输入图像的色彩分量是否为Y分量。
25.根据权利要求23的运动补偿装置,其中,如果输入图像是R-G-B图像或者输入图像的色彩分量是Y分量,则滤波器抽头选择器选择6抽头滤波器,如果输入图像的色彩分量是Y-Cb-Cr图像的Cb或Cr分量,则选择2抽头滤波器。
26.一种由编码器或解码器执行的运动补偿方法,包括:
检测输入图像的色彩信息;
基于输入图像的色彩信息,选择用于内插的滤波器抽头的长度;
使用具有所选长度的滤波器抽头内插输入图像;和
为内插结果执行运动补偿。
27.根据权利要求26的运动补偿方法,其中检测输入图像的色彩信息包括:
确定输入图像是Y-Cb-Cr图像还是R-G-B图像,并且确定输入图像的色彩分量是否为Y分量。
28.根据权利要求26的运动补偿方法,其中选择滤波器抽头的长度包括:
如果输入图像是R-G-B图像或者输入图像的色彩分量是Y分量,则选择6滤波器抽头,如果输入图像的色彩分量是Y-Cb-Cr图像的Cb或Cr分量,则选择2抽头滤波器。
29.一种包含在解码器或编码器中的运动补偿装置,包括:
图像信息检测器,检测输入图像的分辨率和色彩信息;
滤波器抽头选择器,基于输入图像的分辨率信息和色彩信息,选择用于内插的滤波器抽头的长度;
内插器,使用具有所选长度的滤波器抽头内插输入图像;和
运动补偿器,为内插结果执行运动补偿。
30.根据权利要求29的运动补偿装置,其中图像信息检测器确定输入图像是否为高分辨率图像,确定输入图像是Y-Cb-Cr图像还是R-G-B图像,并且确定输入图像的色彩分量是否为Y分量。
31.根据权利要求29的运动补偿装置,其中,如果输入图像是高分辨率图像或者输入图像的色彩分量是Y分量,则滤波器抽头选择器选择2抽头滤波器,如果输入图像是低分辨率图像,或者输入图像是R-G-B图像,或者输入图像的色彩分量是Cb或Cr分量,则选择6抽头滤波器。
32.一种由解码器或编码器执行的运动补偿方法,包括:
检测输入图像的分辨率信息和色彩信息;
基于输入图像的分辨率信息和色彩信息,选择用于内插的滤波器抽头的长度;
使用具有所选长度的滤波器抽头内插输入图像;和
为内插结果执行运动补偿。
33.根据权利要求32的运动补偿方法,其中检测图像信息包括:
确定输入图像是否为高分辨率图像,确定输入图像是Y-Cb-Cr图像还是R-G-B图像,并且确定输入图像的色彩分量是否为Y分量。
34.根据权利要求32的运动补偿方法,选择滤波器抽头的长度包括:
如果输入图像是高分辨率图像或者输入图像的色彩分量是Y分量,则选择2抽头滤波器,如果输入图像是低分辨率图像,或者输入图像是R-G-B图像,或者输入图像的色彩分量是Cb或Cr分量,则选择6抽头滤波器。
35.一种包含在视频解码器或视频编码器中的解块滤波器装置,包括:
图像信息检测器,检测图像的色彩信息;
解块滤波器选择器,基于色彩信息选择用于减少图像的块影响的解块滤波器抽头的长度;
滤波单元,使用具有所选抽头长度的解块滤波器滤波图像。
36.根据权利要求35的解块滤波器装置,其中图像信息检测器确定该图像是Y-Cb-Cr图像还是R-G-B图像,并且确定该图像的色彩分量是否为Y-Cb-Cr图像的Y分量。
37.根据权利要求35的解块滤波器装置,其中,如果该图像是R-G-B图像或者该图像的色彩分量是Y分量,则解块滤波器选择器选择6抽头解块滤波器,如果该图像的色彩分量是Cb或Cr分量,则选择2抽头解块滤波器。
38.根据权利要求35的解块滤波器装置,其中滤波单元基于块编码模式、编码块图形、先前帧的运动矢量、用于运动补偿的参考图像数、和隔行扫描图像的场信息,确定图像的滤波是否应被执行。
39.一种由解码器或编码器执行的解块滤波器选择方法,包括:
检测图像的色彩信息;
基于色彩信息选择用于减少图像的块影响的解块滤波器的长度;和
使用具有所选长度的解块滤波器滤波图像。
40.根据权利要求39的解块滤波器选择方法,其中检测图像信息包括:
确定该图像是Y-Cb-Cr图像还是R-G-B图像,并且确定该图像的色彩分量是否为Y-Cb-Cr图像的Y分量。
41.根据权利要求39的解块滤波器选择方法,其中选择解块滤波器包括:
如果该图像是R-G-B图像或者该图像的色彩分量是Y分量,则选择6抽头解块滤波器,如果该图像的色彩分量是Cb或Cr分量,则选择2抽头解块滤波器。
42.根据权利要求39的解块滤波器选择方法,其中滤波该图像包括:
基于块编码模式、编码块图案、先前帧的运动矢量、用于运动补偿的参考图像数、和隔行扫描图像的场信息,确定该图像的滤波是否应被执行。
43.一种计算机可读介质,具有用于执行权利要求11、20、26和39的方法之一的计算机程序。
CN2004100684055A 2003-07-16 2004-07-16 用于色彩图像的视频编码/解码装置和方法 Expired - Fee Related CN1578477B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR20030048666 2003-07-16
KR48666/2003 2003-07-16
KR48666/03 2003-07-16

Related Child Applications (2)

Application Number Title Priority Date Filing Date
CN2009101498070A Division CN101616329B (zh) 2003-07-16 2004-07-16 用于色彩图像的视频编码/解码装置和方法
CN2009101498085A Division CN101616330B (zh) 2003-07-16 2004-07-16 用于色彩图像的视频编码/解码装置和方法

Publications (2)

Publication Number Publication Date
CN1578477A true CN1578477A (zh) 2005-02-09
CN1578477B CN1578477B (zh) 2011-05-04

Family

ID=33563018

Family Applications (3)

Application Number Title Priority Date Filing Date
CN2009101498085A Expired - Fee Related CN101616330B (zh) 2003-07-16 2004-07-16 用于色彩图像的视频编码/解码装置和方法
CN2004100684055A Expired - Fee Related CN1578477B (zh) 2003-07-16 2004-07-16 用于色彩图像的视频编码/解码装置和方法
CN2009101498070A Expired - Fee Related CN101616329B (zh) 2003-07-16 2004-07-16 用于色彩图像的视频编码/解码装置和方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN2009101498085A Expired - Fee Related CN101616330B (zh) 2003-07-16 2004-07-16 用于色彩图像的视频编码/解码装置和方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN2009101498070A Expired - Fee Related CN101616329B (zh) 2003-07-16 2004-07-16 用于色彩图像的视频编码/解码装置和方法

Country Status (5)

Country Link
US (2) US7535961B2 (zh)
EP (1) EP1507415A3 (zh)
JP (3) JP4898103B2 (zh)
KR (1) KR100624429B1 (zh)
CN (3) CN101616330B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101401437B (zh) * 2006-03-13 2011-05-25 三星电子株式会社 通过自适应应用最优预测模式编码和/或解码运动画面方法和系统
CN1829328B (zh) * 2005-02-28 2011-06-15 三星电子株式会社 预测图像产生方法及设备和图像视频编/解码方法及设备
CN102176754B (zh) * 2005-07-22 2013-02-06 三菱电机株式会社 图像编码装置和方法、以及图像解码装置和方法
US8718134B2 (en) 2005-04-13 2014-05-06 Thomson Licensing Luma and chroma decoding using a common predictor
CN105532007A (zh) * 2013-07-12 2016-04-27 高通股份有限公司 在视频译码中用于非亮度分量的自适应解块滤波
CN107580222A (zh) * 2017-08-01 2018-01-12 北京交通大学 一种基于线性模型预测的图像或视频编码方法

Families Citing this family (101)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100244290B1 (ko) 1997-09-09 2000-02-01 구자홍 저속 전송에서의 동영상을 위한 디블록킹 필터링 방법
EP1478189A3 (en) * 2003-05-16 2004-12-22 Samsung Electronics Co., Ltd. Method and apparatus for encoding/decoding image using image residue prediction
KR100624429B1 (ko) * 2003-07-16 2006-09-19 삼성전자주식회사 칼라 영상을 위한 비디오 부호화/복호화 장치 및 그 방법
US20050111545A1 (en) 2003-11-25 2005-05-26 Ram Prabhakar Dynamic packet size control for MPEG-4 data partition mode
EP1538844A3 (en) * 2003-11-26 2006-05-31 Samsung Electronics Co., Ltd. Color image residue transformation and encoding method
KR100647294B1 (ko) 2004-11-09 2006-11-23 삼성전자주식회사 화상 데이터 부호화 및 복호화 방법 및 장치
US8149926B2 (en) * 2005-04-11 2012-04-03 Intel Corporation Generating edge masks for a deblocking filter
KR101246915B1 (ko) 2005-04-18 2013-03-25 삼성전자주식회사 동영상 부호화 또는 복호화 방법 및 장치
JP4726047B2 (ja) * 2005-04-26 2011-07-20 Kddi株式会社 画像符号化装置
US7747096B2 (en) * 2005-07-15 2010-06-29 Samsung Electronics Co., Ltd. Method, medium, and system encoding/decoding image data
EP1753242A2 (en) * 2005-07-18 2007-02-14 Matsushita Electric Industrial Co., Ltd. Switchable mode and prediction information coding
US20080130989A1 (en) * 2005-07-22 2008-06-05 Mitsubishi Electric Corporation Image encoder and image decoder, image encoding method and image decoding method, image encoding program and image decoding program, and computer readable recording medium recorded with image encoding program and computer readable recording medium recorded with image decoding program
US7903306B2 (en) * 2005-07-22 2011-03-08 Samsung Electronics Co., Ltd. Sensor image encoding and/or decoding system, medium, and method
US8681867B2 (en) * 2005-10-18 2014-03-25 Qualcomm Incorporated Selective deblock filtering techniques for video coding based on motion compensation resulting in a coded block pattern value
US8149918B2 (en) * 2005-11-10 2012-04-03 Electronics And Telecommunications Research Institute Method of estimating coded block pattern and method of determining block mode using the same for moving picture encoder
KR100873636B1 (ko) * 2005-11-14 2008-12-12 삼성전자주식회사 단일 부호화 모드를 이용하는 영상 부호화/복호화 방법 및장치
KR101256548B1 (ko) * 2005-12-30 2013-04-19 삼성전자주식회사 영상 부호화 및 복호화 장치 및 그 방법
JP5047990B2 (ja) 2006-01-10 2012-10-10 トムソン ライセンシング 4:4:4符号化の並列な実現方法及び装置
US8705630B2 (en) * 2006-02-10 2014-04-22 Nvidia Corporation Adapting one type of encoder to another type of encoder
JP4618436B2 (ja) 2006-02-10 2011-01-26 富士ゼロックス株式会社 符号化装置、復号化装置、符号化方法、復号化方法、及びプログラム
TWI339526B (en) * 2006-03-17 2011-03-21 Realtek Semiconductor Corp Image scaling method and related apparatus
JP4769605B2 (ja) 2006-03-17 2011-09-07 富士通株式会社 動画像符号装置及び方法
KR100759870B1 (ko) * 2006-03-24 2007-09-18 경희대학교 산학협력단 Cbp에 기초하여 선택된 보간 필터를 이용하여 공간 계층 간의 예측을 수행하는 h.264 스케일러블 영상 부호화/복호화 방법 및 그 장치
KR101261526B1 (ko) * 2006-07-04 2013-05-06 삼성전자주식회사 영상의 부호화 방법 및 장치, 복호화 방법 및 장치
US9001899B2 (en) * 2006-09-15 2015-04-07 Freescale Semiconductor, Inc. Video information processing system with selective chroma deblock filtering
EP2070327B1 (en) * 2006-09-30 2019-03-13 InterDigital VC Holdings, Inc. Method and device for encoding and decoding color enhancement layer for video
US9456223B2 (en) * 2006-10-18 2016-09-27 Thomson Licensing Local illumination and color compensation without explicit signaling
KR101354659B1 (ko) * 2006-11-08 2014-01-28 삼성전자주식회사 멀티 코덱을 지원하는 움직임 보상 방법 및 장치
KR20080045516A (ko) * 2006-11-20 2008-05-23 삼성전자주식회사 Rgb 영상의 부호화 및 복호화 방법과 그 장치
KR100846795B1 (ko) * 2006-11-24 2008-07-16 삼성전자주식회사 Rgb 코덱 기반의 동영상 송수신 방법 및 그 장치
US9961372B2 (en) 2006-12-08 2018-05-01 Nxp Usa, Inc. Adaptive disabling of deblock filtering based on a content characteristic of video information
US9445128B2 (en) 2006-12-08 2016-09-13 Freescale Semiconductor, Inc. System and method of determining deblocking control flag of scalable video system for indicating presentation of deblocking parameters for multiple layers
EP2116061A2 (en) * 2007-01-04 2009-11-11 Thomson Licensing Methods and apparatus for reducing coding artifacts for illumination compensation and/or color compensation in multi-view coded video
WO2008084996A1 (en) * 2007-01-11 2008-07-17 Samsung Electronics Co, . Ltd. Method and apparatus for deblocking-filtering video data
JP4571955B2 (ja) * 2007-02-07 2010-10-27 日本電信電話株式会社 適応デブロッキング処理方法,装置および適応デブロッキング処理プログラム並びにコンピュータ読み取り可能な記録媒体
KR101388133B1 (ko) 2007-02-16 2014-04-23 삼성전자주식회사 2차원 실사 영상으로부터 3차원 모델을 생성하는 방법 및장치
JP2008227702A (ja) * 2007-03-09 2008-09-25 Oki Electric Ind Co Ltd 動きベクトル探索装置、動きベクトル探索方法及び動きベクトル探索プログラム
KR100906243B1 (ko) * 2007-06-04 2009-07-07 전자부품연구원 Rgb 색 공간 신호의 영상 부호화 방법
KR101455647B1 (ko) 2007-09-14 2014-10-28 삼성전자주식회사 컬러 기반으로 예측 값을 보정하는 방법 및 장치, 이것을이용한 이미지 압축/복원 방법과 장치
US8401071B2 (en) * 2007-12-19 2013-03-19 Sony Corporation Virtually lossless video data compression
KR100939917B1 (ko) 2008-03-07 2010-02-03 에스케이 텔레콤주식회사 움직임 예측을 통한 부호화 시스템 및 움직임 예측을 통한부호화 방법
US10123050B2 (en) 2008-07-11 2018-11-06 Qualcomm Incorporated Filtering video data using a plurality of filters
KR20100018810A (ko) 2008-08-07 2010-02-18 전자부품연구원 초고화질 영상 부호화, 복호화 방법 및 장치 및 컴퓨터로판독가능한 기록매체
US9602821B2 (en) * 2008-10-01 2017-03-21 Nvidia Corporation Slice ordering for video encoding
EP2230849A1 (en) * 2009-03-20 2010-09-22 Mitsubishi Electric R&D Centre Europe B.V. Encoding and decoding video data using motion vectors
JP5130245B2 (ja) * 2009-03-31 2013-01-30 株式会社Kddi研究所 撮影解像度予測型動画像符号化装置および復号装置
CA2785036A1 (en) * 2010-02-05 2011-08-11 Telefonaktiebolaget L M Ericsson (Publ) De-blocking filtering control
JP5358485B2 (ja) * 2010-03-01 2013-12-04 株式会社Kddi研究所 画像符号化装置
TW201133394A (en) * 2010-03-31 2011-10-01 Novatek Microelectronics Corp Image transient improvement apparatus
FI3955579T3 (fi) 2010-04-13 2023-08-16 Ge Video Compression Llc Videokoodaus käyttäen kuvien monipuurakenteen alaosioita
ES2659189T3 (es) 2010-04-13 2018-03-14 Ge Video Compression, Llc Herencia en subdivisión de árbol múltiple de matriz de muestras
KR102360005B1 (ko) 2010-04-13 2022-02-08 지이 비디오 컴프레션, 엘엘씨 샘플 영역 병합
CN106412606B (zh) 2010-04-13 2020-03-27 Ge视频压缩有限责任公司 解码数据流的方法、生成数据流的方法
CA2791792A1 (en) * 2010-04-13 2011-10-20 Jinwen Zan Methods and devices for incorporating deblocking into encoded video
KR101147200B1 (ko) * 2010-05-25 2012-05-25 삼성에스디아이 주식회사 리튬 이차 전지용 음극 및 이를 포함하는 리튬 이차 전지
WO2012012444A2 (en) * 2010-07-19 2012-01-26 Dolby Laboratories Licensing Corporation Enhancement methods for sampled and multiplexed image and video data
US8755625B2 (en) 2010-11-19 2014-06-17 Analog Devices, Inc. Component filtering for low-light noise reduction
US20120128244A1 (en) * 2010-11-19 2012-05-24 Raka Singh Divide-and-conquer filter for low-light noise reduction
JP5594841B2 (ja) * 2011-01-06 2014-09-24 Kddi株式会社 画像符号化装置及び画像復号装置
ES2562009T3 (es) 2011-03-01 2016-03-02 Telefonaktiebolaget Lm Ericsson (Publ) Control del filtrado de desbloqueo
US9313519B2 (en) 2011-03-11 2016-04-12 Google Technology Holdings LLC Interpolation filter selection using prediction unit (PU) size
US8780996B2 (en) * 2011-04-07 2014-07-15 Google, Inc. System and method for encoding and decoding video data
US8781004B1 (en) 2011-04-07 2014-07-15 Google Inc. System and method for encoding video using variable loop filter
US8780971B1 (en) * 2011-04-07 2014-07-15 Google, Inc. System and method of encoding using selectable loop filters
US9264725B2 (en) 2011-06-24 2016-02-16 Google Inc. Selection of phase offsets for interpolation filters for motion compensation
JP5886953B2 (ja) * 2011-06-28 2016-03-16 サムスン エレクトロニクス カンパニー リミテッド 非対称形の補間フィルタを利用して、映像を補間する方法及びその装置
CN113347420A (zh) * 2011-06-28 2021-09-03 索尼公司 图像处理装置和图像处理方法
JP5709996B2 (ja) * 2011-06-30 2015-04-30 三菱電機株式会社 画像復号装置及び画像復号方法
WO2013006573A1 (en) 2011-07-01 2013-01-10 General Instrument Corporation Joint sub-pixel interpolation filter for temporal prediction
US9241258B2 (en) 2011-09-15 2016-01-19 At&T Intellectual Property I, Lp Method and apparatus for managing calls
US8885706B2 (en) 2011-09-16 2014-11-11 Google Inc. Apparatus and methodology for a video codec system with noise reduction capability
DE102011119177A1 (de) * 2011-11-23 2013-05-23 Siemens Aktiengesellschaft Verfahren und Vorrichtung zum Verfahren zum Erstellen eines ersten Parametersatzes
US9131073B1 (en) 2012-03-02 2015-09-08 Google Inc. Motion estimation aided noise reduction
US8855446B2 (en) * 2012-04-19 2014-10-07 Qualcomm Incorporated Accelerated video compression multi-tap filter and bilinear interpolator
WO2014010584A1 (ja) * 2012-07-09 2014-01-16 日本電信電話株式会社 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、画像符号化プログラム、画像復号プログラム及び記録媒体
US9344729B1 (en) 2012-07-11 2016-05-17 Google Inc. Selective prediction signal filtering
WO2014042838A1 (en) * 2012-09-17 2014-03-20 Motorola Mobility Llc Selective use of chroma interpolation filters in luma interpolation process
JP6151909B2 (ja) 2012-12-12 2017-06-21 キヤノン株式会社 動画像符号化装置、方法およびプログラム
CN105308966B (zh) * 2013-04-05 2019-01-04 三星电子株式会社 视频编码方法及其设备以及视频解码方法及其设备
JP2016519898A (ja) * 2013-04-08 2016-07-07 ジーイー ビデオ コンプレッション エルエルシー コンポーネント間予測
US9148672B2 (en) * 2013-05-08 2015-09-29 Mediatek Inc. Method and apparatus for residue transform
US20140348240A1 (en) * 2013-05-22 2014-11-27 Qualcomm Incorporated Video coding using sample prediction among color components
US9225991B2 (en) * 2013-05-30 2015-12-29 Apple Inc. Adaptive color space transform coding
US9225988B2 (en) 2013-05-30 2015-12-29 Apple Inc. Adaptive color space transform coding
US9648330B2 (en) 2013-07-15 2017-05-09 Qualcomm Incorporated Inter-color component residual prediction
CN103747251B (zh) * 2013-09-30 2017-08-08 北京大学深圳研究生院 一种视频图像的插值优化方法及滤波器
CN103747269B (zh) * 2013-09-30 2017-09-19 北京大学深圳研究生院 一种滤波器插值方法及滤波器
US9648332B2 (en) 2013-10-28 2017-05-09 Qualcomm Incorporated Adaptive inter-color component residual prediction
US9215469B2 (en) 2014-01-10 2015-12-15 Sony Corporation Intra-plane and inter-plane predictive method for RGB image coding
US10102613B2 (en) 2014-09-25 2018-10-16 Google Llc Frequency-domain denoising
US20160125263A1 (en) * 2014-11-03 2016-05-05 Texas Instruments Incorporated Method to compute sliding window block sum using instruction based selective horizontal addition in vector processor
US9998742B2 (en) * 2015-01-27 2018-06-12 Qualcomm Incorporated Adaptive cross component residual prediction
CN106412579B (zh) * 2015-07-30 2019-07-16 浙江大华技术股份有限公司 一种图像的编码、解码方法和装置
WO2017016526A1 (en) 2015-07-30 2017-02-02 Zhejiang Dahua Technology Co., Ltd. Methods and systems for image compression
US10009622B1 (en) 2015-12-15 2018-06-26 Google Llc Video coding with degradation of residuals
JP2018056685A (ja) * 2016-09-27 2018-04-05 株式会社ドワンゴ 画像符号化装置、画像符号化方法、及び画像符号化プログラム、並びに、画像復号装置、画像復号方法、及び画像復号プログラム
CA3059740A1 (en) 2017-04-21 2018-10-25 Zenimax Media Inc. Systems and methods for game-generated motion vectors
CN109788290A (zh) * 2017-11-13 2019-05-21 慧荣科技股份有限公司 影像处理装置及利用帧内预测的无损影像压缩方法
US10750171B2 (en) * 2018-06-25 2020-08-18 Google Llc Deblocking filtering
BR112022004056A2 (pt) * 2019-09-06 2022-05-24 Ericsson Telefon Ab L M Método para filtrar valores de amostra associados a uma imagem, portador, e, aparelho
JP2022548521A (ja) * 2019-09-23 2022-11-21 アリババ グループ ホウルディング リミテッド 参照ダウンサンプリングありの動き補償補間のためのフィルタ

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5668646A (en) * 1990-02-06 1997-09-16 Canon Kabushiki Kaisha Apparatus and method for decoding differently encoded multi-level and binary image data, the later corresponding to a color in the original image
ATE137377T1 (de) * 1990-02-06 1996-05-15 Canon Kk Bildverarbeitungsgerät
US5513128A (en) * 1993-09-14 1996-04-30 Comsat Corporation Multispectral data compression using inter-band prediction
WO1998041029A1 (en) * 1997-03-12 1998-09-17 Matsushita Electric Industrial Co., Ltd. Upsampling filter and half-pixel generator for an hdtv downconversion system
US6539120B1 (en) * 1997-03-12 2003-03-25 Matsushita Electric Industrial Co., Ltd. MPEG decoder providing multiple standard output signals
JP3633204B2 (ja) * 1997-05-14 2005-03-30 ソニー株式会社 信号符号化装置、信号符号化方法、信号記録媒体及び信号伝送方法
US6829301B1 (en) * 1998-01-16 2004-12-07 Sarnoff Corporation Enhanced MPEG information distribution apparatus and method
KR100367831B1 (ko) * 1998-06-30 2003-01-10 주식회사 팬택앤큐리텔 영상의 색차신호 필터링 방법 및 장치
JP4051772B2 (ja) * 1998-07-23 2008-02-27 ソニー株式会社 画像復号装置及び画像復号方法
JP4026238B2 (ja) * 1998-07-23 2007-12-26 ソニー株式会社 画像復号装置及び画像復号方法
JP2000069478A (ja) 1998-08-18 2000-03-03 Canon Inc 画像処理装置及び方法並びに記憶媒体
JP2000078411A (ja) * 1998-08-28 2000-03-14 Matsushita Electric Ind Co Ltd 可逆符号化装置及び可逆符号化方法
US6611620B1 (en) * 1998-08-28 2003-08-26 Matsushita Electric Industrial Co. Ltd. Reversible coding method, reversible coding apparatus, and memory medium used therein
US20020141499A1 (en) * 1999-02-04 2002-10-03 Goertzen Kenbe D. Scalable programmable motion image system
IL129203A (en) 1999-03-28 2002-07-25 Univ Ramot System and method for compressing figures
JP4552261B2 (ja) * 2000-04-03 2010-09-29 ソニー株式会社 ディジタル情報変換装置および方法、並びに画像情報変換装置および方法
JP3717795B2 (ja) * 2000-05-26 2005-11-16 三洋電機株式会社 色分離回路及びそれを備えた色信号処理装置
KR100381204B1 (ko) 2000-12-29 2003-04-26 (주) 멀티비아 칼라 정지영상의 부호화 및 복호화 방법
US7929610B2 (en) * 2001-03-26 2011-04-19 Sharp Kabushiki Kaisha Methods and systems for reducing blocking artifacts with reduced complexity for spatially-scalable video coding
EP2096871B1 (en) * 2001-09-14 2014-11-12 NTT DoCoMo, Inc. Coding method, decoding method, coding apparatus, decoding apparatus, image processing system, coding program, and decoding program
JP4129374B2 (ja) * 2001-09-18 2008-08-06 松下電器産業株式会社 画像符号化方法および画像復号化方法
US7440504B2 (en) 2001-09-24 2008-10-21 Broadcom Corporation Method and apparatus for performing deblocking filtering with interlace capability
KR100924850B1 (ko) * 2002-01-24 2009-11-02 가부시키가이샤 히타치세이사쿠쇼 동화상 신호의 부호화 방법 및 복호화 방법
JP4120301B2 (ja) * 2002-04-25 2008-07-16 ソニー株式会社 画像処理装置およびその方法
US7271851B2 (en) * 2003-01-16 2007-09-18 Samsung Electronics Co., Ltd. Adaptive color transient improvement
US7792194B2 (en) * 2003-04-10 2010-09-07 Lefan Zhong MPEG artifacts post-processed filtering architecture
KR100624429B1 (ko) * 2003-07-16 2006-09-19 삼성전자주식회사 칼라 영상을 위한 비디오 부호화/복호화 장치 및 그 방법
US20070037169A1 (en) * 2005-08-09 2007-02-15 Combimatrix Corporation Selective Dehybridization using Electrochemically-Generated Reagent on an Electrode Microarray

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101951514B (zh) * 2005-02-28 2013-06-05 三星电子株式会社 预测图像产生方法及设备和图像视频编/解码方法及设备
CN1829328B (zh) * 2005-02-28 2011-06-15 三星电子株式会社 预测图像产生方法及设备和图像视频编/解码方法及设备
US8019001B2 (en) 2005-02-28 2011-09-13 Samsung Electronics Co., Ltd. Prediction image generating method and apparatus using single coding mode for all color components, and image and video encoding/decoding method and apparatus using the same
CN101945282B (zh) * 2005-02-28 2013-06-12 三星电子株式会社 预测图像产生方法及设备和图像视频编/解码方法及设备
US8750376B2 (en) 2005-04-13 2014-06-10 Thomson Licensing Luma and chroma decoding using a common predictor
US8718134B2 (en) 2005-04-13 2014-05-06 Thomson Licensing Luma and chroma decoding using a common predictor
US8724699B2 (en) 2005-04-13 2014-05-13 Thomson Licensing Luma and chroma encoding using a common predictor
US8761251B2 (en) 2005-04-13 2014-06-24 Thomson Licensing Luma-chroma coding with one common or three distinct spatial predictors
US8767826B2 (en) 2005-04-13 2014-07-01 Thomson Licensing Luma and chroma encoding using a common predictor
US10123046B2 (en) 2005-04-13 2018-11-06 Thomson Licensing Method and apparatus for video decoding
CN102176754B (zh) * 2005-07-22 2013-02-06 三菱电机株式会社 图像编码装置和方法、以及图像解码装置和方法
CN101401437B (zh) * 2006-03-13 2011-05-25 三星电子株式会社 通过自适应应用最优预测模式编码和/或解码运动画面方法和系统
CN105532007A (zh) * 2013-07-12 2016-04-27 高通股份有限公司 在视频译码中用于非亮度分量的自适应解块滤波
CN105532007B (zh) * 2013-07-12 2018-11-27 高通股份有限公司 在视频译码中用于非亮度分量的自适应解块滤波
US10412419B2 (en) 2013-07-12 2019-09-10 Qualcomm Incorporated Adaptive filtering in video coding
CN107580222A (zh) * 2017-08-01 2018-01-12 北京交通大学 一种基于线性模型预测的图像或视频编码方法
CN107580222B (zh) * 2017-08-01 2020-02-14 北京交通大学 一种基于线性模型预测的图像或视频编码方法

Also Published As

Publication number Publication date
JP4898103B2 (ja) 2012-03-14
US20090196351A1 (en) 2009-08-06
CN101616330A (zh) 2009-12-30
EP1507415A2 (en) 2005-02-16
US8325805B2 (en) 2012-12-04
CN101616330B (zh) 2012-07-04
JP2005039842A (ja) 2005-02-10
JP5528985B2 (ja) 2014-06-25
CN101616329B (zh) 2013-01-02
KR100624429B1 (ko) 2006-09-19
KR20050009226A (ko) 2005-01-24
JP2011045128A (ja) 2011-03-03
CN1578477B (zh) 2011-05-04
EP1507415A3 (en) 2005-05-04
JP2011019288A (ja) 2011-01-27
CN101616329A (zh) 2009-12-30
US20050013363A1 (en) 2005-01-20
US7535961B2 (en) 2009-05-19
JP5629183B2 (ja) 2014-11-19

Similar Documents

Publication Publication Date Title
CN1578477A (zh) 用于色彩图像的视频编码/解码装置和方法
CN1214647C (zh) 图像编码方法和图像编码器
CN1187988C (zh) 运动补偿装置和运动图象编码装置及方法
CN1535027A (zh) 一种用于视频编码的帧内预测方法
CN1076932C (zh) 图像信号编码和解码的方法与装置
CN1926875A (zh) 运动补偿方法
CN1225126C (zh) 用于视频编码的新型空间预测方法及其装置
CN1703096A (zh) 预测编码/解码器、预测编码/解码方法和记录介质
CN1615645A (zh) 编码动态滤波器
CN1535024A (zh) 视频编码设备、方法和程序及视频解码设备、方法和程序
CN1537384A (zh) 用于子像素值内插的方法
CN1910933A (zh) 图像信息编码装置和图像信息编码方法
CN1694537A (zh) 活动图像专家组视讯译码器可适性去区块滤波装置及方法
CN1347620A (zh) 转换mpeg-2 4:2:2-轮廓位流为主轮廓位流的方法及架构
CN1829328A (zh) 预测图像产生方法及设备和图像视频编/解码方法及设备
CN1240226C (zh) 有漂移补偿的视频代码转换器和用于补偿漂移的设备
CN1705375A (zh) 预测编码器/解码器以及预测编码/解码方法
CN1956546A (zh) 图像编码装置
CN101057506A (zh) 使用色度分量间相关性的彩色图像编码和解码方法和设备
CN1784011A (zh) 图像编码装置及图像编码方法
CN1288914C (zh) 图象编码与解码方法以及对应的装置和应用
CN1197359C (zh) 获得增强译码的降低分辨率的视频信号的设备和方法
CN1627830A (zh) 色彩空间编码框架
CN1288337A (zh) 用于自动转码编码的视频图象数据的方法和设备
CN1270541C (zh) 编码设备和方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110504

Termination date: 20180716

CF01 Termination of patent right due to non-payment of annual fee