CN101297557A - 用于确定并重建预测的图像区域的方法和装置 - Google Patents

用于确定并重建预测的图像区域的方法和装置 Download PDF

Info

Publication number
CN101297557A
CN101297557A CNA2006800400563A CN200680040056A CN101297557A CN 101297557 A CN101297557 A CN 101297557A CN A2006800400563 A CNA2006800400563 A CN A2006800400563A CN 200680040056 A CN200680040056 A CN 200680040056A CN 101297557 A CN101297557 A CN 101297557A
Authority
CN
China
Prior art keywords
image
region
prediction
pbb
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2006800400563A
Other languages
English (en)
Other versions
CN101297557B (zh
Inventor
B·阿格塞
G·巴斯
R·库特卡
N·奥尔特尔
J·潘德尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens AG
Original Assignee
Siemens AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens AG filed Critical Siemens AG
Publication of CN101297557A publication Critical patent/CN101297557A/zh
Application granted granted Critical
Publication of CN101297557B publication Critical patent/CN101297557B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/537Motion estimation other than block-based
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques

Abstract

本发明涉及用于针对图像的图像区域确定预测的图像区域的方法,其中基于相对于该图像在时间上在前的、被重建的在前图像确定用于该图像区域的时间预测器,在该图像的被重建的图像区域内确定用于该图像区域的局部预测器,其中使该图像区域与基于时间和局部预测器预测的图像区域之间的误差度最小化,预测的图像区域通过局部预测器在使用被重建的图像区域的情况下并且通过时间预测器在使用在前图像之一的情况下被确定。本发明还涉及用于执行用于确定预测的图像区域的方法的确定装置以及用于执行重建方法的重建装置。

Description

用于确定并重建预测的图像区域的方法和装置
技术领域
本发明涉及用于确定预测的图像区域的方法和装置以及用于重建预测的图像区域的方法和装置。
背景技术
在具有高分辨率和图像重复率的视频数据的数字传输中,需要具有高的压缩效率的视频编码方法。在此情况下,经常为该视频编码方法预先给定传输率,其中应该达到高的图像质量。
目前常用的视频编码方法例如被标准化为MPEG2、MPEG4、ITUH.261、H.263、H.264(MPEG-运动图像专家组,ITU-国际电信联盟)。这些视频编码方法基于由图像内容的与例如DCT或ICT(DCT-离散余弦变换,ICT-整数编码变换)的变换相联系的时间预测(=运动补偿)和在运动补偿以及变换之后剩下的误差信号的量化构成的混合措施。在这些视频编码方法中,主要传输运动模型的参数(矢量、块模式)和所得到的剩余误差信号的系数。
通过在图像质量保持不变的情况下改进压缩效率,用于传输压缩视频序列的传输数据率被降低。这例如可以通过改进预测来实现。此外可以通过将像点栅格从像素精度细化到半像素精度来改进运动估计并且因此改进运动补偿。压缩效率的进一步提高可以通过减小块大小来实现,其中在运动估计或运动补偿的范围内针对该块大小进行相应的预测。除了帧间预测(
Figure A20068004005600041
)、即对在不同的时刻所接收的图像之间的相关性的利用之外,还可以通过帧内预测()来实现压缩效率的提高。在这种帧内预测的情况下,基于当前图像的已经被编码和重建的图像内容来执行对图像区域的预测。
发明内容
本发明的任务在于,提供能够实现预测的改进的可能性。
该任务分别由独立权利要求来解决。本发明的有利的改进方案在从属权利要求中再现。
在用于针对图像的图像区域确定预测的图像区域的方法中,基于相对于该图像在时间上在前的、被重建的在前图像确定用于该图像区域的时间预测器,在该图像的被重建的图像区域内确定用于该图像区域的局部预测器,其中使该图像区域与基于时间和局部预测器预测的图像区域之间的误差度最小化,该预测的图像区域通过局部预测器在使用被重建的图像区域的情况下并且通过时间预测器在使用在前图像之一的情况下被确定。
通过本发明方法,基于通过局部和时间预测器被重建的图像区域和待预测的图像区域的预测误差(=误差度)变小。由此,可以提高压缩效率,使得能够实现用于存储或传送利用本发明方法压缩的图像区域或图像数据的减小的存储容积或更窄带的传输路径。
如果通过基于关联规则对通过时间预测器形成的第一图像区域和通过局部预测器描述的第二图像区域进行关联来产生预测的图像区域,则可以通过关联规则与待预测的图像区域的适配来实现预测误差的进一步减小。
如果有利地通过关联规则来描述第一和第二图像区域的对应的像点借助权重因子的加权关联,则可以以简单和有效的方式实现该关联规则。
此外,用于第一和/或第二图像区域的每个像点的权重因子还可以单独地被描述。由此,实现待预测的图像区域的预测的进一步改进或者预测误差的减小。
替代于此,可以有利地基于关联规则执行至少第一或第二图像区域的旋转或剪切。因此,可以进一步细化第一和/或第二图像区域的适配,使得能够实现预测精度的提高。
在该方法的优选的扩展方案中,从不同的关联规则的集合中选择使误差度最小化的那个关联规则。这具有以下优点:以小的附加的信令花费,可以将所选择的关联规则从例如具有用于执行用于确定预测的图像区域的方法的装置的发送器传输到具有用于执行用于重建预测的图像区域的方法的装置的接收器。
如果通过局部预测器来引用(referenzieren)在该图像的已经被重建的图像区域内的图像区域,则该方法的预测精度可以被进一步改进。
有利地,为了确定局部预测器,从一组能够预先给定的帧内预测模式中选择使误差度最小化的那个帧内预测模式。由此,能够实现用于确定局部预测器的简单的处理方式。此外,还可以通过重新使用已经由标准、诸如H.264已知的帧内预测模式来实现低成本的实施方案。
本发明也涉及用于重建预测的图像区域的方法,其中该预测的图像区域通过局部和时间预测器来确定,该局部和时间预测器是按照上述权利要求之一形成的,其中通过对通过时间预测器形成的第一图像区域和通过局部预测器描述的第二图像区域进行关联来产生该预测的图像区域。
由此提供一种方法,利用该方法可以使用在用于针对图像的图像区域确定预测的图像区域的方法中所确定的时间和局部预测器来进行重建。因此,该用于重建预测的图像区域的方法可以在接收器中在视频解码方法的范围内被采用。
用于针对图像的图像区域确定预测的图像区域的确定装置包括:第一模块,用于基于相对于该图像在时间上在前的、被重建的在前图像确定用于该图像的图像区域的时间预测器;第二模块,用于基于该图像的被重建的图像区域来确定用于待预测的图像区域的局部预测器,其中使该图像区域和基于该时间和局部预测器所预测的图像区域之间的误差度最小化,其中预测的图像区域通过局部预测器在使用被重建的图像区域的情况下并且通过时间预测器在使用在前图像之一的情况下被确定。借助该确定装置,可以实施并执行用于针对图像的图像区域确定预测的图像区域的方法及其扩展方案。
本发明也涉及用于重建预测的图像区域的重建装置,其中预测的图像区域通过局部和时间预测器来确定,其中局部预测器和时间预测器是基于用于确定预测的图像区域的确定装置形成的,该重建装置具有:用于基于时间预测器和相对于该图像在时间上在前的在前图像之一来形成第一图像区域的第一重建模块,用于基于已经在该图像中被重建的图像区域来形成第二图像区域的第二重建模块,用于通过第一和第二图像区域的关联来重建该预测的图像区域的第三重建模块。借助该重建装置,可以实施并执行用于重建预测的图像区域的方法及其扩展方案。
附图说明
本发明的其它细节以及优点借助附图来更详细地阐述。详细地:
图1以示意图示出用于确定预测的图像区域的方法或装置;
图2以示意图示出用于重建预测的图像区域的装置或方法;
图3示出用于基于块进行图像编码的、具有用于执行用于确定预测的图像区域的方法的扩展的常见装置的概要图;
图4示出待预测的图像区域或图像块的相邻边缘像素的布置。
在图1至4中具有相同功能和作用方式的元件配备有相同的附图标记。
具体实施方式
借助图1首先更详细地阐述用于确定预测的图像区域的方法。图像BO或相对于图像BO在时间上在前的图像RB包括多个图像区域,这些图像区域通过多个、例如8×8或4×4个像点BP构成。每个像点BP在此表示亮度值和/或颜色值。对于下面的实施例来说,针对图像区域采用正方形的形状、例如具有4×4个像点的图像块。通常,图像区域可以采用任意的形状。
在第一步骤S1中,确定用于应该被预测的图像区域BB的时间预测器ZP。该图像区域BB也被称为待预测的图像区域BB。首先,在相对于图像BO在时间上在前的图像RB之一中寻找第一图像区域BBT,该第一图像区域例如使待预测的图像区域BB中的和第一图像区域BBT中的对应像点BB的绝对差之和最小化。
如果各个图像区域BB和BBT例如分别包括4×4个像点,则所述第一步骤可以在形式上如下来描述:
SAD = Σ x = 0 3 Σ y = 0 3 | BB ( x , y ) - BBT ( x , y ) | - - - ( 1 )
其中x,y为各个图像区域BB、BBT内的像点BP的位置,|.|为绝对值。在等式(1)中确定在相对于图像BO在时间上在前的图像RB中使该等式(1)最小化(即SAD变为最小)的那个第一图像区域BBT。所确定的第一图像区域BBT的位置由时间预测器ZP来表示。第二图像区域BBT可以不仅基于图像RB的预先给定的像点而且通过图像RB的像点的内插、例如在中间像点上(英文=halfpel(半像素))被形成。本领域技术人员从例如标准H.263的运动估计足够熟悉这种方法。
在第二步骤S2中确定局部预测器OP,该局部预测器使待预测的图像区域BB和基于时间和局部预测器ZP、OP所预测的图像区域PBB之间的误差度FM最小化。该误差度FM相应于预测误差。局部预测器OP使用图像BO内的被重建的图像区域RBB,其中该图像区域已经被重建。
在本发明方法的第一变型方案中,为了确定局部预测器OP,在已经被重建的图像区域RBB中确定第二图像区域BBO,该第二图像区域连同通过时间预测器ZP所确定的第一图像区域BBT使误差度FM最小化。在此,借助关联规则(Verknüpfungsregel)VKR对第一和第二图像区域BBT、BBO进行关联或者混合。在本实施例中,该关联规则VKR描述第一和第二图像区域BBT、BBO借助所分配的权重因子的加权的、逐像点的混合。这可以在形式上如下来说明:
FM = Σ x = 0 3 Σ y = 0 3 | BB ( x , y ) - ( α · BBT ( x , y ) + β · BBO ( x , y ) α + β ) | - - - ( 2 )
其中x,y为各个图像区域BB、BBT、BBO内的像点BP的位置,|.|为绝对值,α为时间权重因子,并且β为局部权重因子。在此,可以得到α+β=1。在等式(2)中确定在已经被重建的图像区域PBB中使该等式(2)最小化(即FM变为最小)的那个第二图像区域BBO。所确定的第二图像区域BBO的位置通过局部预测器OP来表示。权重因子α和β可以根据图像内容来适配,例如在α=0.2且β=0.8时,与第一图像区域BBT相比,第二图像区域BBO被分配更大的权重,即与时间预测相比,局部预测被分配更大的权重。
在等式(2)中,项{(α·BBT(x,y)+β·BBO(x,y))/(α+β)}相应于预测图像区域PBB。因此,预测图像区域PBB通过时间预测器ZP和局部预测器OP来表示,该时间预测器ZP基于相对于图像BO在时间上在前的图像RB来描述第一图像区域BBT、即RB(ZP),该局部预测器OP在使用图像BO的被重建的图像区域RPP的情况下再现第二图像区域BBO、即RBB(OP)。
其它的函数可以代替等式(1)或(2)中的绝对值,这些函数描述待预测的图像区域BO和预测的图像区域PBB之间的相似性。因此,误差度FM也可以通过平方而不是通过绝对值来生成,例如:
FM = Σ x = 0 3 Σ y = 0 3 ( BB ( x , y ) - ( α · BBT ( x , y ) + β · BBO ( x , y ) α + β ) ) 2 - - - ( 3 )
在用于对一个或多个图像进行编码的方法的范围内可以采用步骤S1和S2。在此,局部和时间预测器OP、ZP可以被集成在数据流DS中并且从用于确定预测的图像区域的确定装置VE传输给用于重建预测的图像区域的重建装置VD。
按照等式(2)的加权的关联或混合仅仅是可能的关联规则VKR之一。因此,关联规则VKR可以根据所确定的时间和/或局部预测器ZP、OP来构成。此外,可以从预先给定的关联规则集合中选择关联规则VKR,使得所选择的关联规则使误差度FM最小化。示例性的选择可能性为:
VKR索引      α         β
0            0.2        0.8
1            0.5        0.5
2            0.8        0.2
VKR索引描述所使用的关联规则。所选择的关联规则可以在确定装置VE和重建装置VD中单独地被生成。替代地,该关联规则VKR可以借助数据流DS被传输。
借助图2更详细地阐述预测的图像区域PBB的重建,其中时间和局部预测器ZP、OP是按照用于确定预测的图像区域的本发明方法创建的。用于重建的装置VD例如接收包含局部和时间预测器OP、ZP的数据流DS。
在第一重建步骤S′1中,通过应用局部预测器OP基于图像BO的已经被重建的图像区域RBB来获得第二图像区域BBO。
在第二重建步骤S′2中,基于时间预测器ZP在使用相对于图像BO在时间上在前的图像RB的情况下生成第一图像区域BBT。
在随后的第三重建步骤S′3中,通过第一和第二图像区域BBT、BBO的混合确定预测的图像区域PBB。可以通过第一和第二图像区域的逐像点(x,y)的加权平均来产生所述混合。这可通过下列等式来表示:
PBB ( x , y ) = α · BBT ( x , y ) + β · BBO ( x , y ) α + β - - - ( 4 ) ,
其中x,y为各个图像区域BBT、BBO内的像点BP的位置,α为时间权重因子,β为局部权重因子。在此情况下所使用的权重因子的值与在确定方法和重建方法中的相同。
预测的并且因此被重建的图像区域PBB最终可以被复制到被重建的图像区域RBB内的相应的位置上。
在该方法的第二变型方案中,为了确定局部预测器OP,确定使误差度FM最小化的帧内预测模式IPM。在此,基于图像BO的被重建的图像区域RBB来确定该帧内预测模式IPM,其中例如考虑待预测的图像区域BB的直接相邻的被重建的图像区域的边缘像素。这借助图4更详细地阐述。
图4示出待预测的区域BB,其中说明了各个像点、例如BB(0,0)。如果例如图像区域从左向右并且从上向下被重建,则得到被重建的图像区域RBB,诸如在图1中可以看到的。已经被重建的图像区域RBA、RBC和RBD属于该被重建的图像区域,这些已经被重建的图像区域处于待预测的图像区域BB的上部、左上部和左边。在此情况下说明了各个像点、诸如RBA(3,3),其中这些像点直接邻接待预测的图像区域BB。
为了确定局部预测器OP,确定帧内预测模式IPM中的使误差度FM最小化的一种帧内预测模式。这种帧内预测模式IPM对于本领域技术人员来说由视频编码标准H.264已知。在那里使用八种不同的帧内预测模式,这些帧内预测模式除了直流分量预测模式外分别在预测方向上不同。因此,例如按照H.264已知下面的帧内预测模式:
模式编号       名称
0              垂直预测模式
1              水平预测模式
2              直流分量预测模式
3              对角线向左下预测模式
4              对角线向右下预测模式
5              垂直向右预测模式
6              水平向下预测模式
7              垂直向左预测模式
8              水平向上预测模式
因此,可以通过说明帧内预测模式的模式编号来说明用于构成所属的帧内预测模式的规定之一。如果例如使用模式编号2,则对于第二图像区域BBO的所有像点来说得到相同的预测值。这为:
BBO ( x , y ) = Σ i = 0 3 RBA ( i , 3 ) + Σ i = 0 3 RBD ( 3 , i ) + 4 8 - - - ( 5 )
其中用i来标识相应的像点。由等式5得到的预测值被分配给第二图像区域BBO的所有像点。
为了确定最佳的帧内预测模式IPM,例如针对所有的帧内预测模式IPM计算第二图像区域BBO并且将这些第二图像区域分别输送给等式(3)。接着,选择使误差度FM最小化的帧内预测模式IPM。所确定的帧内预测模式IPM由局部预测器OP来表示。如果例如具有模式编号5的帧内预测模式使误差度最小化,则OP=5。
在等式(3)中,执行第一和第二图像区域BBT、BBO的各个像点的加权平均,使得第一图像区域的每个像点与时间权重因子α相乘,而第二图像区域的每个像点与局部权重因子β相乘。在本发明方法的一个扩展方案中,每个像点配备有单独的时间或局部权重因子α(x,y),β(x,y)。这种单独的时间或局部权重因子可以例如具有下面的形式:
α ( x , y ) = 0.2 0.2 0.2 0.2 0.2 0.5 0.5 0.5 0.2 0.5 0.8 0.8 0.2 0.5 0.8 1.0 , β ( x , y ) = 0.8 0.8 0.8 0.8 0.8 0.5 0.5 0.5 0.8 0.5 0.2 0.2 0.8 0.5 0.2 0.0
这种单独的时间或局部权重因子α(x,y),β(x,y)的使用导致:局部预测在待预测的图像区域的左上边缘处比在右下边缘处对加权叠加的影响更大。
在为每个像点使用相同的时间或局部权重因子的情况下,等式(2)和(4)如下被扩展:
FM = Σ x = 0 3 Σ y = 0 3 | BB ( x , y ) - ( α ( x , y ) · BBT ( x , y ) + β ( x , y ) · BBO ( x , y ) α ( x , y ) + β ( x , y ) ) | - - - ( 6 )
PBB ( x , y ) = α ( x , y ) · BBT ( x , y ) + β ( x , y ) · BBO ( x , y ) α ( x , y ) + β ( x , y ) - - - ( 7 ) ,
此外,单独的局部或时间权重因子α(x,y),β(x,y)可以分别根据所选择的帧内预测模式IPM来不同地选择。
用于确定预测的图像区域的方法以及用于重建预测的图像区域的方法可以在图像编码方法中被采用。这借助图3示例性地来阐述。在图3中以详细的形式示出了用于图像编码或者用于图像解码的电路原理图形式的可能的装置,该装置可以被用在基于块的图像编码的范围内。在此,更详细地示出了该方法在视频编码方法中的使用,其中用虚线画出了集成确定或者重建方法的扩展。
在基于块的图像编码方法中,数字化的图像BO、RB被划分为大小为8×8个像点BP或16×16个像点BP的通常正方形的图像区域BB并且输送给用于图像编码的装置。
通常,编码信息、例如亮度信息(辉度值)或颜色信息(色度值)被唯一地分配给像点。
在基于块的图像编码方法中,在不同的图像编码模式之间进行区分。在所谓的帧内图像编码模式的情况下,整个图像利用被分配给该图像的像点的所有编码信息分别被编码并被传输(I图像)。在所谓的帧间图像编码模式的情况下,仅仅两个在时间上相继的图像的差分图像信息分别被编码并被传输(P图像,B图像)。
为了在帧内图像编码模式和帧间图像编码模式之间切换,设置有两个开关单元SE。为了实施帧间图像编码模式,设置有减法单元S,在该减法单元中形成两个相继的图像的图像信息的差。整个图像编码经过图像编码控制单元ST来控制。待编码的图像区域BB或差分图像区域DB分别被输送给变换编码单元DCT,在该变换编码单元中将变换编码、例如离散余弦变换(DCT)应用于被分配给像点的编码信息。
然而,一般来说,可以实施每个任意的变换编码、例如离散正弦变换或者离散傅立叶变换。
通过变换编码形成的频谱系数在量化单元Q中被量化并且被输送给例如用于信道编码和/或用于熵编码的图像编码多路复用器(未示出)。在内部的重建环中,被量化的频谱系数在反量化单元IQ中被反量化并且在反变换编码单元IDCT中经受反变换编码。
此外,在帧间图像编码的情况下在加法单元AE中各个在时间上在前的图像的图像信息被添加。以这种方式重建的图像被存储在图像存储器SP中。在图像存储器SP中,为了更简单地图示,象征性地示出了用于运动估计/运动补偿的单元MC。该用于运动补偿的单元MC产生运动矢量、即时间预测器ZP。
此外,还设置有环路滤波器(Loop filter LF),该环路滤波器与存储器SP以及减法单元S相连接。
除了待传输的图像数据之外,还向图像编码多路复用器输送模式标记P,借助该模式标记来分别说明,是否进行了帧内和/或帧间图像编码。
此外,频谱系数的量化索引q被输送给图像编码多路复用器。
时间预测器ZP、即运动矢量也分别被分配给图像区域或图像块和/或例如包括四个具有亮度信息的图像块和两个具有颜色信息的图像块的宏块并被输送给图像编码多路复用器。
此外,还设置有用于激活或者去激活环路滤波器LF的信息说明f。
待预测的图像区域BB、第一图像区域BBT和被重建的图像区域RBB是供模块MV使用的。第一图像区域BBT在使用运动估计MC的情况下并在应用环路滤波器LF之后被产生。模块MV首先例如根据等式(3)确定使误差度最小化的局部预测器OP。
模块MV然后生成暂时的图像区域TBB,其满足下面的等式:
PBB(x,y)=BBT(x,y)+TBB(x,y)(8)
借助该暂时的图像区域TBB实现,在将该暂时的图像区域TBB与第一图像区域BBT在附加的加法单元ADD中相加之后可形成能被进一步处理的预测的图像区域PBB。在使用等式(4)时,得到TBB(x,y):
TBB ( x , y ) = β α + β · ( BBO ( x , y ) - BBT ( x , y ) ) - - - ( 9 )
用于确定预测的图像区域PBB的方法可以通过确定装置VE来实现。该确定装置包括下面的单元:
-第一模块M1,用于基于相对于图像BO在时间上在前的、被重建的在前图像RB来确定用于图像BO的待预测的图像区域BB的时间预测器ZP;
-第二模块M2,用于基于图像BO的被重建的图像区域RBB来确定用于待预测的图像区域BB的局部预测器ZP,其中待预测的图像区域BB和基于时间和局部预测器ZP、OP所预测的图像区域PBB之间的误差度FM被最小化,其中预测的图像区域PBB通过局部预测器OP在使用被重建的图像区域RBB的情况下并且通过时间预测器Z)在使用在前图像RB之一的情况下被确定。
这种确定装置VE可以被集成在执行视频编码方法的装置中。
用于重建预测的图像区域RBB的方法可通过重建装置DV来实现。在此,该重建装置DV包括下面的重建模块:
-第一重建模块M′1,用于基于时间预测器ZP和相对于图像BO在时间上在前的在前图像RB之一来形成第一图像区域BBT,
-第二重建模块M′2,用于基于已经在该图像BO中被重建的图像区域RBBM来形成第二图像区域BBO,
-第三重建模块M′3,用于通过在考虑关联规则VKR的情况下第一和第二图像区域BBT、BBO的关联来重建该预测的图像区域。
这种重建装置DV可被集成在执行视频编码方法的装置中。
所述确定装置VE和重建装置DV可以被集成在例如按照GSM(GSM-全球移动通信系统)标准工作的移动无线电设备中或者被集成在固定网络设备、例如连接到LAN上的计算机中。此外,装置VD、VE可以以硬件、作为处理器上的可执行软件、或者作为软件和硬件的组合被实施和执行。

Claims (11)

1.用于针对图像(BO)的图像区域(BB)确定预测的图像区域(PBB)的方法,其中:
a)基于相对于所述图像(BO)在时间上在前的、被重建的在前图像(RB)确定用于所述图像区域(BB)的时间预测器(ZP),
b)在所述图像(BO)的被重建的图像区域(RBB)内确定用于所述图像区域(BB)的局部预测器(OP),其中使所述图像区域(BB)与基于所述时间和局部预测器(ZP,OP)预测的图像区域(PBB)之间的误差度(FM)最小化,
c)所述预测的图像区域(PBB)通过所述局部预测器(OP)在使用所述被重建的图像区域(RBB)的情况下并且通过所述时间预测器(ZP)在使用在前图像(RB)之一的情况下被确定。
2.根据权利要求1的方法,其特征在于,通过基于关联规则(VKR)对通过所述时间预测器(ZP)形成的第一图像区域(BBT)和通过所述局部预测器(OP)描述的第二图像区域(BBO)进行关联来产生所述预测的图像区域(PBB)。
3.根据权利要求2的方法,其特征在于,通过所述关联规则(VKR)来描述所述第一和第二图像区域(BBT,BBO)的对应的像点(BP)借助权重因子(α,β)的加权关联。
4.根据权利要求3的方法,其特征在于,单独地描述用于所述第一和/或所述第二图像区域(BBT,BBO)的每个像点(BP)的权重因子(α,β)。
5.根据权利要求2至4之一的方法,其特征在于,基于所述关联规则(VKR)执行至少所述第一或所述第二图像区域(BBT,BBO)的旋转或剪切。
6.根据权利要求2至5之一的方法,其特征在于,从不同关联规则的集合中选择使所述误差度(FM)最小化的那个关联规则(VKR)。
7.根据上述权利要求之一的方法,其特征在于,通过所述局部预测器(OP)来引用在所述图像(BO)的已经被重建的图像区域(RBB)内的图像区域。
8.根据上述权利要求之一的方法,其特征在于,为了确定所述局部预测器(OP),从一组能够预先给定的帧内预测模式中选择使所述误差度(FM)最小化的那个帧内预测模式(IPM)。
9.用于重建预测的图像区域(PBB)的方法,其中所述预测的图像区域(PBB)通过局部和时间预测器(OP,ZP)来确定,该局部和时间预测器是基于按照上述权利要求之一的用于确定预测的图像区域的方法形成的,其中通过对通过所述时间预测器(ZP)形成的第一图像区域(BBT)和通过所述局部预测器(OP)描述的第二图像区域(BBO)进行关联来产生所述预测的图像区域(PBB)。
10.用于针对图像(BO)的图像区域(BB)确定预测的图像区域(PBB)的确定装置(VE),具有:
-第一模块(M1),用于基于相对于所述图像(BO)在时间上在前的、被重建的在前图像(RB)确定用于所述图像(BO)的图像区域(BB)的时间预测器(ZP);
-第二模块(M2),用于基于所述图像(BO)的被重建的图像区域(RBB)来确定用于所述图像区域(BB)的局部预测器(OP),其中使所述图像区域(BB)和基于所述时间和局部预测器(ZP,OP)预测的图像区域(PBB)之间的误差度(FM)最小化,其中所述预测的图像区域(PBB)通过所述局部预测器(OP)在使用所述被重建的图像区域(RBB)的情况下并且通过所述时间预测器(ZP)在使用在前图像(RB)之一的情况下被确定。
11.用于重建预测的图像区域(PBB)的重建装置(VD),其中所述预测的图像区域(PBB)通过局部和时间预测器(OP,ZP)来确定,其中所述局部预测器(OP)和所述时间预测器(ZP)是基于按照权利要求10的用于确定预测的图像区域(PBB)的确定装置(VE)形成的,该重建装置具有:
-第一重建模块(M′1),用于基于所述时间预测器(ZP)和相对于所述图像(BO)在时间上在前的在前图像(RB)之一来形成第一图像区域(BBT),
-第二重建模块(M′2),用于基于已经在所述图像(BO)中被重建的图像区域(RBB)来形成第二图像区域(BBO),
-第三重建模块(M′3),用于通过所述第一和第二图像区域(BBT,BBO)的关联来重建所述预测的图像区域(PBB)。
CN2006800400563A 2005-10-25 2006-09-25 用于确定并重建预测的图像区域的方法和装置 Expired - Fee Related CN101297557B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102005051091.4 2005-10-25
DE102005051091A DE102005051091A1 (de) 2005-10-25 2005-10-25 Verfahren und Vorrichtungen zur Bestimmung und Rekonstruktion eines prädizierten Bildbereichs
PCT/EP2006/066683 WO2007048666A2 (de) 2005-10-25 2006-09-25 Verfahren und vorrichtungen zur bestimmung und rekonstruktion eines prädizierten bildbereichs

Publications (2)

Publication Number Publication Date
CN101297557A true CN101297557A (zh) 2008-10-29
CN101297557B CN101297557B (zh) 2012-07-04

Family

ID=37891426

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2006800400563A Expired - Fee Related CN101297557B (zh) 2005-10-25 2006-09-25 用于确定并重建预测的图像区域的方法和装置

Country Status (8)

Country Link
US (1) US8208739B2 (zh)
EP (1) EP1941744B1 (zh)
JP (1) JP2009513080A (zh)
CN (1) CN101297557B (zh)
AT (1) ATE513416T1 (zh)
DE (1) DE102005051091A1 (zh)
ES (1) ES2364079T3 (zh)
WO (1) WO2007048666A2 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107682702A (zh) * 2010-09-30 2018-02-09 太阳专利托管公司 图像解码方法、图像解码装置

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4786623B2 (ja) * 2007-09-25 2011-10-05 Kddi株式会社 動画像符号化装置および動画像復号装置
US9313495B2 (en) 2012-05-14 2016-04-12 Luca Rossato Encoding and decoding based on blending of sequences of samples along time
CN104620583A (zh) 2012-05-14 2015-05-13 卢卡·罗萨托 基于支持信息的残差数据的编码和重构
US9667965B2 (en) * 2012-06-25 2017-05-30 Industry-University Cooperation Foundation Hanyang University Video encoding and decoding method

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS57210785A (en) * 1981-06-19 1982-12-24 Kokusai Denshin Denwa Co Ltd <Kdd> Adaptive forecasting system between frames of television signal
CA1287161C (en) * 1984-09-17 1991-07-30 Akihiro Furukawa Apparatus for discriminating a moving region and a stationary region in a video signal
CA2127151A1 (en) 1993-09-21 1995-03-22 Atul Puri Spatially scalable video encoding and decoding
RU2270530C2 (ru) * 2000-04-14 2006-02-20 Сименс Акциенгезелльшафт Способ и устройство для запоминания и обработки видеоинформации следующих по времени друг за другом изображений
CN1248509C (zh) * 2001-02-13 2006-03-29 皇家菲利浦电子有限公司 运动信息编码和解码方法
US7437019B2 (en) * 2002-07-18 2008-10-14 Noritsu Koki Co., Ltd. Apparatus and method for image processing, image processing program and recording medium storing the image processing program
KR100612849B1 (ko) * 2003-07-18 2006-08-14 삼성전자주식회사 영상 부호화 및 복호화 장치 및 방법
MXPA06002210A (es) 2003-08-26 2006-05-19 Thomson Licensing Metodo y aparato para la decodificacion de bloques intra-inter codificados hibridos.
CN1224270C (zh) * 2003-09-30 2005-10-19 清华大学 用于宏块组结构的两阶段预测编码的帧内编码帧编码方法
JP4213646B2 (ja) * 2003-12-26 2009-01-21 株式会社エヌ・ティ・ティ・ドコモ 画像符号化装置、画像符号化方法、画像符号化プログラム、画像復号装置、画像復号方法、及び画像復号プログラム。
JP4763241B2 (ja) * 2004-01-29 2011-08-31 Kddi株式会社 動き予測情報検出装置
DE102004017145B4 (de) * 2004-04-07 2006-02-16 Micronas Gmbh Verfahren und Vorrichtung zur Ermittlung von Bewegungvektoren, die Bildbereichen eines Bildes zugeordnet sind
CN1585486A (zh) 2004-05-27 2005-02-23 复旦大学 基于时空自适应预测的无损视频压缩方法
US20070168370A1 (en) * 2004-11-16 2007-07-19 Hardy Mark D System and methods for provisioning geospatial data
CN100340116C (zh) * 2005-01-21 2007-09-26 浙江大学 一种复杂度可分级的运动估计方法
US7894527B2 (en) * 2005-09-16 2011-02-22 Sony Corporation Multi-stage linked process for adaptive motion vector sampling in video compression

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107682702A (zh) * 2010-09-30 2018-02-09 太阳专利托管公司 图像解码方法、图像解码装置
CN107682702B (zh) * 2010-09-30 2020-08-11 太阳专利托管公司 图像解码方法、图像解码装置

Also Published As

Publication number Publication date
EP1941744B1 (de) 2011-06-15
ATE513416T1 (de) 2011-07-15
WO2007048666A3 (de) 2007-06-28
JP2009513080A (ja) 2009-03-26
DE102005051091A1 (de) 2007-04-26
EP1941744A2 (de) 2008-07-09
ES2364079T3 (es) 2011-08-24
US20090136138A1 (en) 2009-05-28
US8208739B2 (en) 2012-06-26
WO2007048666A2 (de) 2007-05-03
CN101297557B (zh) 2012-07-04

Similar Documents

Publication Publication Date Title
CN103141100B (zh) 用于视频译码的帧内平滑滤波器
CN103004201B (zh) 运动图像编码装置、运动图像解码装置、运动图像编码方法以及运动图像解码方法
CN103004210B (zh) 用于视频编码的低复杂度帧内预测
CN102685496B (zh) 用于组合多层比特流中的层的方法和系统
CN104320666B (zh) 图像处理设备和方法
CN102870411B (zh) 用于视频处理的装置、方法和计算机程序
CN109587479A (zh) 视频图像的帧间预测方法、装置及编解码器
CN104025591A (zh) 运动图像编码装置、运动图像解码装置、运动图像编码方法以及运动图像解码方法
CN101014132B (zh) 编码数据选定设定、再编码数据生成和再编码方法及装置
ES2588154T3 (es) Método de generación automática de procedimientos de generación de valores de predicción de píxel, método de codificación de imágenes, método de descodificación de imágenes, dispositivos que usan estos métodos, programas para estos métodos y medio de grabación en el que estos programas están grabados
CN101389025A (zh) 用于根据多个子像素分辨率进行视频编码的运动细化引擎及其使用方法
CN105872566A (zh) 图像编码装置和方法、以及图像译码装置和方法
CN104185988A (zh) 用于共享候选者列表的方法和装置
CN101401440A (zh) 可伸缩视频编码中的差错恢复模式判决
CN103227923A (zh) 图像解码方法以及图像解码装置
CN106791832A (zh) 编码设备、解码设备、编码方法和解码方法
CN101641961A (zh) 使用运动补偿滤波的图像编码和解码方法及设备
CN102845063A (zh) 用于视频编码的设备、方法和计算机程序
CN104255032A (zh) 层间预测方法和使用其的编码设备和解码设备
CN101022555B (zh) 帧间预测编码的模式快速选择方法
CN101297557B (zh) 用于确定并重建预测的图像区域的方法和装置
CN103188496A (zh) 基于运动矢量分布预测的快速运动估计视频编码方法
CN103475880A (zh) 一种基于统计分析的由h264到hevc低复杂度视频转码方法
CN105340274A (zh) 深度图编码方法及其设备以及深度图解码方法及其设备
CN103416065A (zh) 用于视频编码的方法、装置和计算机程序

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120704

Termination date: 20190925