CN102640496A - 图像编码装置、图像解码装置、图像编码方法及图像解码方法 - Google Patents

图像编码装置、图像解码装置、图像编码方法及图像解码方法 Download PDF

Info

Publication number
CN102640496A
CN102640496A CN2010800537492A CN201080053749A CN102640496A CN 102640496 A CN102640496 A CN 102640496A CN 2010800537492 A CN2010800537492 A CN 2010800537492A CN 201080053749 A CN201080053749 A CN 201080053749A CN 102640496 A CN102640496 A CN 102640496A
Authority
CN
China
Prior art keywords
mentioned
offset vector
signal
picture
prediction signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2010800537492A
Other languages
English (en)
Other versions
CN102640496B (zh
Inventor
上田基晴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JVCKenwood Corp
JVCKenwood Holdings Inc
Original Assignee
JVCKenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JVCKenwood Corp filed Critical JVCKenwood Corp
Publication of CN102640496A publication Critical patent/CN102640496A/zh
Application granted granted Critical
Publication of CN102640496B publication Critical patent/CN102640496B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/88Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving rearrangement of data among different coding units, e.g. shuffling, interleaving, scrambling or permutation of pixel data or permutation of transform coefficient data among different blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H04N19/197Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters including determination of the initial value of an encoding parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Abstract

图像编码装置包括:偏移矢量检测部(103),使用已被编码的同一图像信号内的块的局部解码图像来检索与编码对象块相关性高的信号,并求出相关性高的信号与编码对象块的画面内偏移、即偏移矢量;偏移预测信号生成部(104),按照偏移矢量生成预测信号。偏移矢量检测部(103)针对在偏移矢量中指定的预测信号计算使其水平和垂直的至少一者的排列反转后的信号,检测出包括被反转后的预测信号在内的预测信号中最优的预测信号、以及构成预测信号所需要的偏移矢量及表示反转方向的信息。偏移预测信号生成部(104)按照偏移矢量及表示反转方向的信息,基于局部解码图像生成预测信号。

Description

图像编码装置、图像解码装置、图像编码方法及图像解码方法
技术领域
本发明涉及图像信号的编码及解码技术,特别涉及根据已编码信号来生成针对对象图像信号的预测信号,并使用对与预测信号的差分信号进行编码的画面内预测处理的图像编码装置、图像解码装置、图像编码方法、及图像解码方法。
背景技术
近年来,介由卫星或地面波等广播波或网络配送数字化图像、声音内容的服务已被实用化,需要用于将具有庞大信息量的图像·声音的信息高效地记录、传输的高效率编码。随着内容的高精细化、多样化,要被编码的图像的数量和数据量进一步増大,要求有一种预想到将来的内容服务的图像信号的更高效率的编码。
作为图像的高效率编码,以MPEG2、MPEG4-AVC(AdvancedVideo Coding)为代表的、利用动图像信号的同一帧内空间上相邻的像素间的相关、和时间上相邻的帧间或场间的相关来压缩信息量的方式正被使用。
在MPEG4-AVC(文献“ISO/IEC14496-10Advanced VideoCoding”)中,将图像分割成多个二维块,按块单位利用同一帧内或帧间的相关来生成预测信号,通过对与预测信号的差分信息进行编码来实现较高的编码效率。利用MPEG4-AVC中的同一帧内的相关的预测处理被称作帧内预测,如图20所示,使用与对象块相邻的已编码部分的解码图像来生成编码对象块的预测图像。在帧内预测中,从按相邻的解码图像相对于图20所示那样的一定方向预计相关较高的多个(按4×4像素块单位进行预测时有9种)预测模式所生成的预测图像中,选择与编码对象块误差最少的预测模式,同预测模式信息一起被编码。
帧内预测成为仅利用与相邻区域的相关性的预测处理,当与编码对象块的分界处的相关性较少时,预测效果会降低。
在图像信号中,在远离对象块的位置,也存在物体的形状、模样、背景等具有类似的图像成分的信号。在专利文献1中,提出一种利用与处于远离对象块的位置的图像的相关性来进行预测处理的方法。具体来说,计算出如图21所示那样从对象块在画面内移动偏移量(以下称作偏移矢量)后的位置的已编码解码图像与编码对象块的误差,将误差最少的按偏移矢量参照的参照图像作为预测图像,同偏移矢量一起进行编码。
在能生成超过传输偏移矢量的编码量的、相关性较高的预测图像的情况下,对于帧内预测能实现较高的编码效率,但若偏移矢量的传输量较大,则无法发挥足够的预测效率。
在专利文献2中,提出了一种为削减上述偏移矢量所需的编码量,不传输偏移矢量地来确定偏移矢量的方法。在专利文献2中,使用与对象块相邻的已编码的解码图像作为模板,计算移动偏移矢量后的位置的已编码解码图像同与上述对象块相邻的已编码的解码图像的误差,将误差最少的偏移矢量判断为编码对象块的偏移矢量,将按偏移矢量参照的参照图像作为预测图像。在该方式中,解码侧也同编码侧一样,使用已编码的解码图像来检测出偏移矢量,从而能够不接收偏移矢量地计算偏移矢量,故不会因附加信息而引起编码量的増大。
〔在先技术文献〕
〔专利文献〕
〔专利文献1〕特开2005-159947号公报
〔专利文献2〕特开2007-043651号公报
发明内容
〔发明所要解决的课题〕
在MPEG4-AVC中存在如下课题:对于时间上有连续性的图像信号,通过以时间方向不同帧的已解码图像信号为基准进行运动补偿预测处理,能实现较高的编码效率,但进行运动补偿预测处理的基准帧需要仅使用同一帧内的帧内预测来进行编码,当与编码对象块的分界处的相关性较低时,预测效果会降低。在动图像信号不具有时间上的连续性的情况下,由于运动补偿预测不发挥功效,帧内预测的性能界限会导致编码效率降低,也会出现此课题。
在专利文献1和专利文献2中所提出的那样的传输或自我生成与对象块的偏移矢量,利用远离对象块的位置的图像相关性的情况下,由于利用相对于图像信号非相邻区域的部分的自相似性进行预测、或者基于具有相同纹理成分的不同物体而进行预测,故受画面内存在的物体的形状变化、亮度变化等的影响,无法充分地活用图像信号具有的自相似性及纹理的相似性。
在专利文献1中,在不能计算具有超过偏移矢量的编码量的效果的预测信号的情况下,存在效率降低的课题,在专利文献2中,由于以编码对象块的相邻图像为模板计算偏移矢量,故在相邻图像与对象块之间相关性较低时、以及与按专利文献1中生成的偏移矢量所参照的参照块的相邻图像的相关性较低时等,存在无法求取精度较高的偏移矢量,不能提高效率这样的课题。
因此,本发明为大幅提高帧内的预测效率,目的在于实现能比以往方法更有效地活用相对于远离对象块的位置的图像的相关性的帧内预测方法。
〔用于解决课题的手段〕
为达成上述目的,本发明的图像编码装置是一种针对图像信号,按由多个像素构成的块单位进行分割,并按分割后的块单位进行编码的图像编码装置,包括:偏移矢量检测部,针对编码对象块,使用已被编码的同一图像信号内的块的局部解码图像来检索与编码对象块相关性高的信号,并求出上述相关性高的信号与上述编码对象块的画面内偏移、即偏移矢量;偏移预测信号生成部,按照上述偏移矢量生成预测信号;其中,上述偏移矢量检测部针对在偏移矢量中指定的预测信号计算使其水平和垂直的至少一者的排列反转后的信号,检测出包括被反转后的预测信号在内的预测信号中最优的预测信号、以及构成预测信号所需要的偏移矢量及表示反转方向的信息;上述偏移预测信号生成部按照上述偏移矢量及上述表示反转方向的信息,基于上述局部解码图像生成预测信号;对上述预测信号与上述编码对象块的差分信号、上述偏移矢量及上述表示反转方向的信息进行编码。
此外,本发明的图像编码装置是一种针对图像信号,按由多个像素构成的块单位进行分割,并按分割后的块单位进行编码的图像编码装置,包括:周边解码参照偏移矢量推定部,针对编码对象块,使用已被编码的同一图像信号内的块的局部解码图像,来求出编码对象块与基于上述局部解码图像而生成的预测信号的画面内偏移、即偏移矢量;周边解码参照偏移预测信号生成部,按照上述偏移矢量生成预测信号;其中,上述周边解码参照偏移矢量推定部通过对与编码对象块相邻的局部解码图像和按上述偏移矢量所参照的局部解码图像的相邻部分的信号进行误差评价,来生成上述预测信号和上述偏移矢量,并且,通过对与编码对象块相邻的局部解码图像,和使按上述偏移矢量所参照的局部解码图像的相邻部分的位置、以按上述偏移矢量所参照的局部解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;上述周边解码参照偏移预测信号生成部按照上述偏移矢量及上述表示反转方向的信息,基于上述局部解码图像生成预测信号;对上述预测信号与上述编码对象块的差分信号进行编码。
此外,本发明的图像编码装置是一种针对图像信号,按由多个像素构成的块单位进行分割,并按分割后的块单位进行编码的图像编码装置,包括:偏移矢量检测部,针对编码对象块,使用已被编码的同一图像信号内的块的局部解码图像来检索与编码对象块相关性高的信号,并求出上述相关性高的信号与上述编码对象块的画面内偏移、即偏移矢量;偏移预测信号生成部,按照上述偏移矢量生成预测信号;模板反转模式推定部,推定用于使预测信号的水平和垂直的至少一者的排列反转的、表示反转方向的信息;其中,上述模板反转模式推定部通过对与编码对象块相邻的局部解码图像,和使按上述偏移矢量所参照的局部解码图像的相邻部分的位置、以按上述偏移矢量所参照的局部解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;上述偏移矢量检测部根据上述表示反转方向的信息,计算出使在偏移矢量中指定的预测信号反转后的信号,针对每个偏移矢量进行预测信号与编码对象块的误差评价,由此来检测偏移矢量;上述偏移预测信号生成部按照上述偏移矢量和上述表示反转方向的信息,基于上述局部解码图像生成预测信号;对上述预测信号与上述编码对象块的差分信号、以及上述偏移矢量进行编码。
此外,本发明的图像解码装置接收针对图像信号按由多个像素构成的块单位进行分割,并按分割后的块单位施加了编码的编码流,并进行解码,包括:偏移矢量/模式解码部,针对解码对象块,从上述编码流中解码出预测信号、偏移矢量、以及表示反转方向的信息,所述预测信号是基于已被解码的同一图像信号内的块的解码图像而生成的预测信号,所述偏移矢量是与上述解码对象块的画面内偏移,所述反转方向是使在上述偏移矢量中指定的上述解码图像向水平和垂直的至少一方反转的方向;偏移预测信号生成部,按照上述偏移矢量和上述表示反转方向的信息,基于上述解码图像生成预测信号;通过使上述预测信号与被解码了的残差信号相加,来计算解码图像。
此外,本发明的图像解码装置接收针对图像信号按由多个像素构成的块单位进行分割,并按分割后的块单位施加了编码的编码流,并进行解码,包括:周边解码参照偏移矢量推定部,针对解码对象块,使用已被解码了的同一图像信号内的块的解码图像,来求出解码对象块与基于上述解码图像而生成的预测信号的画面内偏移、即偏移矢量;周边解码参照偏移预测信号生成部,按照上述偏移矢量生成预测信号;其中,上述周边解码参照偏移矢量推定部通过对与解码对象块相邻的解码图像和按上述偏移矢量所参照的解码图像的相邻部分的信号进行误差评价,来生成上述预测信号和上述偏移矢量,并且,通过对与解码对象块相邻的解码图像,和使按上述偏移矢量参照的解码图像的相邻部分的位置、以按上述偏移矢量所参照的解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;上述周边解码参照偏移预测信号生成部按照上述偏移矢量和上述表示反转方向的信息,基于上述解码图像生成预测信号;通过使上述预测信号与被解码出的残差信号相加,来计算解码图像。
此外,本发明的图像解码装置接收针对图像信号按由多个像素构成的块单位进行分割,并按分割后的块单位施加了编码的编码流,并进行解码,包括:偏移矢量/模式解码部,针对解码对象块,对基于已被解码了的同一图像信号内的块的解码图像而生成的预测信号与上述解码对象块的画面内偏移、即偏移矢量进行解码;模板反转模式推定部,推定用于使预测信号的水平和垂直的至少一者的排列反转的、表示反转方向的信息;其中,上述模板反转模式推定部通过对与解码对象块相邻的解码图像,和使按上述偏移矢量参照的解码图像的相邻部分的位置、以按上述偏移矢量参照的解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;本图像解码装置还包括偏移预测信号生成部,按照上述偏移矢量和上述表示反转方向的信息,基于上述解码图像生成预测信号;通过使上述预测信号与解码出的残差信号相加,来计算解码图像。
此外,本发明的图像编码方法是一种针对图像信号,按由多个像素构成的块单位进行分割,并按分割后的块单位进行编码的图像编码方法,包括:偏移矢量检测步骤,针对编码对象块,使用已被编码的同一图像信号内的块的局部解码图像来检索与编码对象块相关性高的信号,并求出上述相关性高的信号与上述编码对象块的画面内偏移、即偏移矢量;偏移预测信号生成步骤,按照上述偏移矢量生成预测信号;其中,在上述偏移矢量检测步骤中,针对在偏移矢量中指定的预测信号计算使其水平和垂直的至少一者的排列反转后的信号,检测出包括被反转后的预测信号在内的预测信号中最优的预测信号、以及构成预测信号所需要的偏移矢量及表示反转方向的信息;在上述偏移预测信号生成步骤中,按照上述偏移矢量及上述表示反转方向的信息,基于上述局部解码图像生成预测信号;对上述预测信号与上述编码对象块的差分信号、上述偏移矢量、以及上述表示反转方向的信息进行编码。
此外,本发明的图像编码方法是一种针对图像信号,按由多个像素构成的块单位进行分割,并按分割后的块单位进行编码的图像编码方法,包括:周边解码参照偏移矢量推定步骤,针对编码对象块,使用已被编码的同一图像信号内的块的局部解码图像,来求出编码对象块与基于上述局部解码图像而生成的预测信号的画面内偏移、即偏移矢量;周边解码参照偏移预测信号生成步骤,按照上述偏移矢量生成预测信号;其中,在上述周边解码参照偏移矢量推定步骤中,通过对与编码对象块相邻的局部解码图像和按上述偏移矢量所参照的局部解码图像的相邻部分的信号进行误差评价,来生成上述预测信号和上述偏移矢量,并且,通过对与编码对象块相邻的局部解码图像,和使按上述偏移矢量所参照的局部解码图像的相邻部分的位置、以按上述偏移矢量所参照的局部解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;在上述周边解码参照偏移预测信号生成步骤中,按照上述偏移矢量及上述表示反转方向的信息,基于上述局部解码图像生成预测信号;对上述预测信号与上述编码对象块的差分信号进行编码。
此外,本发明的图像编码方法是一种针对图像信号,按由多个像素构成的块单位进行分割,并按分割后的块单位进行编码的图像编码方法,包括:偏移矢量检测步骤,针对编码对象块,使用已被编码的同一图像信号内的块的局部解码图像来检索与编码对象块相关性高的信号,并求出上述相关性高的信号与上述编码对象块的画面内偏移、即偏移矢量;偏移预测信号生成步骤,按照上述偏移矢量生成预测信号;以及模板反转模式推定步骤,推定用于使预测信号的水平和垂直的至少一者的排列反转的、表示反转方向的信息;其中,在上述模板反转模式推定步骤中,通过对与编码对象块相邻的局部解码图像,和使按上述偏移矢量所参照的局部解码图像的相邻部分的位置、以按上述偏移矢量所参照的局部解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;在上述偏移矢量检测步骤中,根据上述表示反转方向的信息,计算出使在偏移矢量中指定的预测信号反转后的信号,针对每个偏移矢量进行预测信号与编码对象块的误差评价,由此来检测偏移矢量;在上述偏移预测信号生成步骤中,按照上述偏移矢量和上述表示反转方向的信息,基于上述局部解码图像生成预测信号;对上述预测信号与上述编码对象块的差分信号、以及上述偏移矢量进行编码。
此外,本发明的图像解码方法接收针对图像信号按由多个像素构成的块单位进行分割,并按分割后的块单位施加了编码的编码流,并进行解码,包括:偏移矢量/模式解码步骤,针对解码对象块,从上述编码流中解码出预测信号、偏移矢量、以及表示反转方向的信息,所述预测信号是基于已被解码的同一图像信号内的块的解码图像而生成的预测信号,所述偏移矢量是与上述解码对象块的画面内偏移,所述反转方向是使在上述偏移矢量中指定的上述解码图像向水平和垂直的至少一方反转的方向;偏移预测信号生成步骤,按照上述偏移矢量和上述表示反转方向的信息,基于上述解码图像生成预测信号;通过使上述预测信号与被解码了的残差信号相加,来计算解码图像。
此外,本发明的图像解码方法接收针对图像信号按由多个像素构成的块单位进行分割,并按分割后的块单位施加了编码的编码流,并进行解码,包括:周边解码参照偏移矢量推定步骤,针对解码对象块,使用已被解码了的同一图像信号内的块的解码图像,来求出解码对象块与基于上述解码图像而生成的预测信号的画面内偏移、即偏移矢量;周边解码参照偏移预测信号生成步骤,按照上述偏移矢量生成预测信号;其中,在上述周边解码参照偏移矢量推定步骤中,通过对与解码对象块相邻的解码图像和按上述偏移矢量所参照的解码图像的相邻部分的信号进行误差评价,来生成上述预测信号和上述偏移矢量,并且,通过对与解码对象块相邻的解码图像,和使按上述偏移矢量参照的解码图像的相邻部分的位置、以按上述偏移矢量所参照的解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;在上述周边解码参照偏移预测信号生成步骤中,按照上述偏移矢量和上述表示反转方向的信息,基于上述解码图像生成预测信号;通过使上述预测信号与被解码出的残差信号相加,来计算解码图像。
进而,本发明的图像解码方法接收针对图像信号按由多个像素构成的块单位进行分割,并按分割后的块单位施加了编码的编码流,并进行解码,包括:偏移矢量/模式解码步骤,针对解码对象块,对基于已被解码了的同一图像信号内的块的解码图像而生成的预测信号与上述解码对象块的画面内偏移、即偏移矢量进行解码;模板反转模式推定步骤,推定用于使预测信号的水平和垂直的至少一者的排列反转的、表示反转方向的信息;其中,在上述模板反转模式推定步骤中,通过对与解码对象块相邻的解码图像,和使按上述偏移矢量参照的解码图像的相邻部分的位置、以按上述偏移矢量参照的解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;还包括偏移预测信号生成步骤,按照上述偏移矢量和上述表示反转方向的信息,基于上述解码图像生成预测信号;通过使上述预测信号与解码出的残差信号相加,来计算解码图像。
〔发明效果〕
在本发明的图像编码装置、图像解码装置、图像编码方法及图像解码方法中,通过生成作为用于预测纹理成分的模板信号而使用的、相对于已编码解码图像上下、左右反转后的参照图像,作为预测图像使用,能够提高以往方式中的帧内的图像信号预测的精度。此外,关于反转模式,通过利用与相邻块的反转模式的相关、偏移矢量的相关来生成预测反转模式,能使附加信息较少。通过构成使用它来进行预测处理的图像编码装置、图像解码装置、图像编码方法及图像解码方法,能提高编码效率。
附图说明
图1是表示本发明第1实施例的图像编码装置的结构图。
图2是表示本发明第1实施例的图像解码装置的结构图。
图3是说明本发明的画面内偏移预测的概念图。
图4是本发明第1实施例中的偏移矢量检测部的结构图。
图5是用于说明本发明第1实施例的偏移矢量检测动作的流程图。
图6是用于说明本发明第1实施例的偏移矢量解码/预测图像生成动作的流程图。
图7是表示本发明第2实施例的图像编码装置的结构图。
图8是表示本发明第2实施例的图像解码装置的结构图。
图9是本发明第2实施例中的偏移矢量检测部的结构图。
图10是用于说明本发明第2实施例的偏移矢量检测动作的流程图。
图11是用于说明本发明第2实施例的偏移矢量解码/预测图像生成动作的流程图。
图12是表示本发明第3实施例的图像编码装置的结构图。
图13是表示本发明第3实施例的图像解码装置的结构图。
图14是说明本发明的周边解码参照偏移矢量推定的概念图。
图15是本发明第3实施例中的周边解码参照偏移矢量推定部的结构图。
图16是用于说明本发明第3实施例的周边解码参照偏移矢量推定动作的流程图。
图17是表示本发明第4实施例的图像编码装置的结构图。
图18是表示本发明第4实施例的图像解码装置的结构图。
图19是用于说明本发明第4实施例的反转模式推定动作的流程图。
图20是以往方法的帧内预测的概念图。
图21是以往方法的画面内偏移预测的概念图。
图22是表示MPEG4-AVC中的对象块和预测运动矢量计算所使用的相邻块的关系的图。
具体实施方式
接下来,参照附图说明本发明的实施方式。
〔实施例1〕
首先,说明本发明第1实施例的图像编码装置、图像解码装置。
图1是表示本发明第1实施例的图像编码装置的结构图。如图1所示,本实施例的图像编码装置由输入端子100、输入图像缓存器101、块分割部102、偏移矢量检测部103、偏移预测信号生成部104、减法器105、正交变换部106、量化部107、逆量化部108、逆正交变换部109、加法器110、帧内解码图像存储器111、偏移矢量/模式预测部112、熵编码部113、流缓存器114、输出端子115、以及编码量控制部116构成。
设有偏移矢量检测部103、偏移预测信号生成部104及偏移矢量/模式预测部112,以及这些处理块中的动作是本发明第1实施例的特征,关于其它处理块,是MPEG4-AVC等图像编码装置中的构成帧内编码处理的处理块。
从输入端子100输入的数字图像信号被存储在输入图像缓存器101中。存储在输入图像缓存器101中的数字图像信号被提供给块分割部102,按由16×16像素构成的二维微块单位被划分成编码对象块。块分割部102将划分出的编码对象块提供给偏移矢量检测部103、减法器105。减法器105计算从输入图像缓存器101提供来的编码对象块与由后述的偏移预测信号生成部104供给的预测图像块的差分,将结果作为差分块提供给正交变换部106。
正交变换部106对差分块按水平8像素×垂直8像素单位进行DCT变换,由此生成相当于被正交变换后的频率分量的DCT系数。此外,正交变换部106将所生成的DCT系数汇总成二维微块单位,输出给量化部107。量化部107通过用每频率分量都不同的值除DCT系数,来施加量化处理。量化部107将量化处理后的DCT系数提供给逆量化部108和熵编码部113。逆量化部108通过对从量化部107输入的被量化处理了的DCT系数乘以量化时所除的值,来进行逆量化,将逆量化的结果作为被解码了的DCT系数输出给逆正交变换部109。逆正交变换部109进行逆DCT处理,生成被解码了的差分块。逆正交变换部109将被解码了的差分块提供给加法器110。加法器110使从偏移预测信号生成部104提供来的预测图像块与从逆正交变换部109提供来的被解码了的差分块相加,生成局部解码块。在加法器110中生成的局部解码块以被逆块变换了的形式存储到帧内解码图像存储器111中。
偏移矢量检测部103在由块分割部102输入的编码对象块的图像信号与被存储在帧内解码图像存储器111中的解码图像信号之间计算偏移矢量和指示解码图像的反转的模式(以下称作反转模式)。偏移矢量检测部103被从偏移矢量/模式预测部112输入针对对象块的偏移矢量和反转模式的预测值,进行偏移矢量检测处理。关于偏移矢量检测部103的详细动作,将在后面叙述。
偏移矢量检测部103将检测出的偏移矢量值和反转模式值输出到偏移预测信号生成部104及偏移矢量/模式预测部112,将与偏移矢量的预测值的差分信息及与反转模式的预测值的差分信息输出到熵编码部113。偏移预测信号生成部104基于由偏移矢量检测部103输入的偏移矢量值和反转模式值,根据帧内解码图像存储器111内存储的解码图像信号而生成预测图像,输出到减法器105和加法器110。关于偏移预测信号生成部104的详细动作,将在后面叙述。
偏移矢量/模式预测部112具有存储从偏移矢量检测部103输入的偏移矢量值及反转模式值,生成接下来的编码对象块的偏移矢量及反转模式值的功能。关于偏移矢量/模式预测部112的详细动作,将在后面叙述。
熵编码部113使用从量化部107供给的量化处理后的DCT系数、和从偏移矢量检测部103供给的偏移矢量值与反转模式值的预测差分值,进行偏移矢量信息和反转模式信息、以及量化后的DCT系数的可变长度编码。施加可变长度编码后的信息被输出到流缓存器114。
存储在流缓存器114中的编码流介由输出端子115被输出到记录介质或传输路径。关于编码流的编码量控制,编码量控制部116被提供流缓存器114中所存储的比特流的编码量,与作为目标的编码量之间进行比较,为趋近于目标编码量而控制量化部107的量化细度(量化标尺)。
接下来,说明对由本发明第1实施例的图像编码装置生成的编码比特流进行解码的图像解码装置。
图2是表示本发明第1实施例的图像解码装置的结构图。如图2所示,本实施方式的图像解码装置由输入端子200、流缓存器201、熵解码部202、偏移矢量/模式解码部203、偏移预测信号生成部204、逆量化部205、逆正交变换部206、加法器207、帧内解码图像存储器208、以及输出端子209构成。
设有偏移矢量/模式解码部203和偏移预测信号生成部204这一点、以及这些处理块中的动作是本发明第1实施例的特征,至于其它处理块,是MPEG4-AVC等图像编码装置中的构成帧内解码处理的处理块。
从输入端子200输入的编码比特流被存储在流缓存器201中。存储的编码比特流被从流缓存器201提供到熵解码部202,熵解码部202从所输入的比特流中,针对被编码了的偏移矢量差分信息、反转模式差分信息、以及被量化了的DCT系数进行可变长度解码,向逆量化部205输出被量化了的DCT系数,向偏移矢量/模式解码部203输出偏移矢量差分信息和反转模式差分信息。关于逆量化部205、逆正交变换部206、加法器207、以及帧内解码图像存储器208,进行与第1实施例的动图像编码装置的局部解码处理同样的处理。帧内解码图像存储器208中所存储的解码图像介由输出端子209,作为解码图像信号而被显示在显示装置上。
偏移矢量/模式解码部203具有基于从熵解码部202输入的偏移矢量差分信息和反转模式差分信息、以及以前解码的对象块的偏移矢量值及反转模式值,计算偏移矢量预测值和反转模式预测值,通过将上述偏移矢量差分信息与反转模式差分信息相加,来对编码对象块的偏移矢量值和反转模式值进行解码,并输出到偏移预测信号生成部204的功能。偏移矢量/模式解码部203的详细动作将在后面叙述。
偏移预测信号生成部204基于从偏移矢量/模式解码部203输出的偏移矢量值和反转模式值,基于帧内解码图像存储器208中存储的解码图像信号而生成预测图像,输出到加法器207。关于偏移预测信号生成部204的详细动作,将在后面叙述。
接下来,利用图3说明本发明的画面内偏移预测的方法。第1实施例的本发明发明点在于,为比以往方法更加充分地活用图像信号所具有的自相似性及纹理的相似性,追加使参照图像上下、左右等反转后的块作为预测对象信号,并与反转模式一起编码,从而生成与编码块相关性更高的预测块。
图3上部的无反转模板是在以往的使用画面内偏移矢量计算的预测中所使用的参照图像(已编码解码图像)。与此不同,在上下反转模板、左右反转模板、上下左右反转模板中表示了以对象块的左上像素为基准配置使解码图像上下、左右、上下左右反转后的参照图像的示意图。
具体来说,基于以对象块为基准移动到偏移矢量所表示的位置的已编码解码图像而取得参照块,并使参照块上下、左右、上下左右地反转,由此能算出相对于这些参照图像的偏移矢量,生成预测图像块。图3下侧所记载的无反转模式预测块、上下反转模式预测块、左右反转模式预测块、上下左右反转模式预测块成为由偏移矢量DV参照的各个反转模式的预测块信号。
在计算偏移矢量时,通过在上下、左右、上下左右反转后的位置取得成为预测误差的评价对象的各像素,并评价预测误差,而不增加从解码图像取得的数据地、且无需增加滤波器处理等图像变换所需要的运算地、生成成为参照候选的模板。
图1中的偏移矢量检测部103具有进行图3所示的概念的偏移矢量及反转模式的计算的功能,在图4中表示其结构图并说明。
如图4所示,偏移矢量检测部103由顺序(sequence)部400、对象图像缓存器401、模式预测值·偏移矢量预测值缓存器402、存储器存取部403、偏移参照图像缓存器404、无反转模式误差计算器405、左右反转模式误差计算器406、上下反转模式误差计算器407、上下左右反转模式误差计算器408、最优偏移矢量更新部409、模式差分·偏移矢量差分计算器410、最优矢量/评价值存储部411构成。
编码对象块被从块分割部102输入到对象图像缓存器401进行存储。存储器存取部403按照顺序部400所管理的偏移矢量值从帧内解码图像存储器取得参照块,并存储在偏移参照图像缓存器404中。
对象图像缓存器401从对象块的上部向下部按顺序将水平方向的图像信号提供给无反转模式误差计算器405和左右反转模式误差计算器406。同时,对象图像缓存器401从对象块的下部向上部按顺序将水平方向的图像信号提供给上下反转模式误差计算器407和上下左右反转模式误差计算器408。
另一方面,偏移参照图像缓存器404从参照块的上部向下部按顺序将水平方向的参照图像信号提供给无反转模式误差计算器405、左右反转模式误差计算器406、上下反转模式误差计算器407、以及上下左右反转模式误差计算器408。
无反转模式误差计算器405和上下反转模式误差计算器407具有将所输入的对象图像和参照图像的水平方向的图像信号按相同水平位置计算两者的平方差,并存储其总和的功能。
左右反转模式误差计算器406和上下反转模式误差计算器407具有针对所输入的对象图像和参照图像的水平方向的图像信号,计算水平方向左右对称位置的图像彼此的平方误差,并存储其总和的功能。
由此,生成图3所示的无反转模式预测块、上下反转模式预测块、左右反转模式预测块、上下左右反转模式预测块的预测误差评价值。
无反转模式误差计算器405、左右反转模式误差计算器406、上下反转模式误差计算器407及上下左右反转模式误差计算器408分别将计算出的平方误差值的块总和输出到最优偏移矢量更新部409。
对于从模式预测值·偏移矢量预测值缓存器提供的偏移矢量预测值和反转模式预测值,在模式差分·偏移矢量差分计算器410中,按照顺序部400所管理的偏移矢量值计算针对各反转模式的预测差分值和偏移矢量差分值,输出到最优偏移矢量更新部409。
最优偏移矢量更新部409将顺序部400所管理的偏移矢量值中的各反转模式的误差评价值(平方误差总和)与针对同一编码对象块的最小的误差评价值进行比较,将具有最小的评价值的反转模式和偏移矢量作为最优偏移矢量来更新,并同评价值及针对所选择的各反转模式的预测差分值和偏移矢量差分值一起输出到最优矢量/评价值存储部411。
在针对顺序部400所管理的检索范围的偏移矢量值的误差评价结束后,最优矢量/评价值存储部411将所存储的反转模式和偏移矢量输出到偏移预测信号生成部104和偏移矢量/模式预测部112,并将针对各反转模式的预测差分值和偏移矢量差分值输出到熵编码部113。
图5中用流程图表示了上述检测处理的运算处理的步骤,下面说明在顺序部400中进行管理的处理步骤。
针对作为对象的编码块,最初将最小误差值MinErr设定为最大值(例如存储区域为32比特时是0xffffffff)(S500)。接着,输入作为对象的编码块(S501)。然后,根据编码块的画面内位置设定偏移矢量的检测范围(S502)。在此,对于所设定的偏移矢量检测范围,为不超出画面内的已编码区域而限制检测范围。基于所限制的检测范围,设定偏移矢量的初始值DVSearch(S503)。作为一例,设定在检测范围中靠近编码对象块(偏移矢量较小)的值。针对所设定的DVSearch,由从编码块移动了DVSearch的位置的解码图像存储器输入参照图像块(S504)。
使用参照图像块和编码对象块,累计相对于偏移矢量DVSearch的、编码块和参照图像块的各个像素的误差值,计算出无反转模式的误差值ErrNorm(DVSearch)、左右反转模式的误差值ErrLRinv(DVSearch)、上下反转模式的误差值ErrULinv(DVSearch)、以及上下左右反转模式的误差值ErrULLRinv(DVSearch)(S505)。
接着,计算反转模式的预测值ModePred和偏移矢量的预测值DVPred,以及与各模式值及DVSearch的差分值DiffMode、DiffDV,算出编码时的预计编码量InfoBits。将针对各个反转模式计算出的InfoBits加到ErrNorm(DVSearch)、ErrLRinv(DVSearch)、ErrULinv(DVSearch)、ErrULLRinv(DVSearch)中(S506)。
关于反转模式,为使得预测模式差1时反转的方向为一个方向,可以如下这样对应模式值。
无反转模式:0
上下反转模式:1
上下左右反转模式:2
左右反转模式:3
关于反转模式的差分,将之与预测值ModePred相加,然后取低位2比特,由此表现反转模式。例如ModePred为左右反转模式(=3)、反转模式为无反转模式时,就传输1。反转模式变小1时,实际上被传输3。预测模式被恰当地预测到时,多数会出现接近的反转模式,通过对0以较少的编码量进行编码,能以较少的信息对反转模式进行编码。例如对于反转模式差分,以下述表1那样的可变长度编码来进行编码。
〔表1〕
  反转模式差分   编码
  0   0
  1   10
  2   110
  3   111
若反转模式没有被恰当预测,则也可能以2比特的固定长度传输反转模式差分,关于反转模式的编码方法,能够以MPEG4-AVC所定义的帧或切片(slice)等预定单位判断预测的适合性来切换。按照这样定义的编码计算所需的编码量,计算InfoBits。
接着,将所生成的ErrNorm(DVSearch)、ErrLRinv(DVSearch)、ErrULinv(DVSearch)、ErrULLRinv(DVSearch)的最小值与所存储的MinErr进行比较(S507)。若最小值比MinErr小(S508:YES),则对MinErr设定最小值,将具有最小值的反转模式值存储在ModeResult中,将此时的偏移矢量值DVSearch存储在DVResult中(S509)。若最小值不比MinErr小(S508:NO),则就此进入S510。
当进行了上述误差值计算的偏移矢量值是检测范围最后的矢量时(S510:YES),输出ModeResult、DVResult、以及与该ModePred、DVPred的差分值、即DiffMode、DiffDV(S511),结束流程。若不是最后的矢量(S510:NO),则将偏移矢量值DVSearch更新为下一个检测位置(S512),移到S504。
接下来说明图1中的偏移预测信号生成部104的动作。偏移预测信号生成部104使用从偏移矢量检测部103输入的偏移矢量值DVResult和反转模式ModeResult,从帧内解码图像存储器111取得从编码对象块移动了偏移矢量值的位置的已编码解码图像作为参照图像。所取得的参照图像根据反转模式而改换水平、垂直的排列顺序,构成预测图像块。具体来说,施以向图3下部所示的像素位置的变换。所构成的预测图像块被提供给减法器105和加法器110。
接下来,说明图1中的偏移矢量/模式预测部112的详细动作。
偏移矢量/模式预测部112具有计算前述的反转模式的预测值ModePred和偏移矢量的预测值DVPred,并输出给偏移矢量检测部103的功能。
具体来说,关于反转模式和偏移矢量,当物体的形状与相邻的编码对象块之间是连续的时,利用表示同样值的倾向较强这一特点,基于周边块的已编码信息进行预测,生成ModePred和DVPred。例如关于DVPred,采用图22所示那样的在MPEG4-AVC中被用于运动矢量的预测的构成。关于相邻块,相对于对象块可选择左邻的块A、上邻的块B、右上的块C这3块。但在图像一端那样的块C无效的情况下,取代块C而使用左上的块D。若将所选择的3块的偏移矢量的水平方向分量分别记为DVAx、DVBx、DVCx,将垂直方向分量分别记为DVAy、DVBy、DVCy,则通过如下式1那样针对水平方向分量、垂直方向分量分别选择3值的中间值,来生成预测偏移矢量值PDVx、PDVy。
(式1)
DMVx=Median(DVAx、DVBx、DVCx)
DMVy=Median(DVAy、DVBy、DVCy)
在ModePred中也是一样,视相邻块的反转模式的相关性而定。当3个相邻块的反转模式中有两个以上的值相同时,将该值作为ModePred。若全都不同,则将取3个反转模式的中央值的反转模式作为ModePred。
关于ModePred,也可以基于与被检测的偏移矢量的近似性来设定。此时,若在3个相邻块中偏移矢量DVSearch是最优偏移矢量,则将具有与DVSearch误差最少的偏移矢量的相邻块的反转模式作为ModePred。
关于ModePred的预测算法,可以选择上述的1种方式而固定,也可以按帧或切片等预定单位来切换,能够设定更适合预测的预测算法。
接下来说明解码装置中的关于偏移预测的解码处理的详细动作。
图2中的偏移矢量/模式解码部203具有图1(编码装置)中的偏移矢量/模式预测部112的功能,通过将所生成的ModePred及DVSearch与从熵解码部202输入的反转模式及偏移矢量的差分值DiffMode、DiffDV相加,来解码反转模式值ModeResult及偏移矢量值DVResult。解码出的ModeResult和DVResult被从偏移矢量/模式解码部203输出到偏移预测信号生成部204。
偏移预测信号生成部204具有与图1(编码装置)中的偏移预测信号生成部104相同的功能,基于从偏移矢量/模式解码部203输入的ModeResult和DVResult,从帧内解码图像存储器208取得从编码对象块移动了偏移矢量值的位置的已编码解码图像作为参照图像。对于所取得的参照图像,同偏移预测信号生成部104一样进行与反转模式相应的像素的排列顺序改换,构成预测图像块而输出到加法器207。
在此,在图6中表示了以偏移矢量/模式解码部203和偏移预测信号生成部204的动作为处理步骤的流程图,下面说明具体的处理步骤。
一开始,从流中解码出反转模式预测差分值DiffMode和偏移矢量的预测差分值DiffDV(S600)。接着,计算反转模式的预测值ModePred和偏移矢量的预测值DVPred(S601)。利用计算出的结果,将预测差分值与预测值相加,由此来将反转模式ModeResult和偏移矢量DVResult解码(S602)。
在将前述的3个相邻块中具有与偏移矢量值误差最少的偏移矢量的相邻块的反转模式作为ModePred的情况下,计算出DVPred并与DiffDV相加而解码DVResult后,基于相邻块的偏移矢量值设定ModePred,并计算ModeResult。
接着,从自解码对象块移动了偏移矢量DVResult的位置的解码图像存储器输入参照图像(S603)。对于参照图像,根据反转模式ModeResult变换参照图像的扫描顺序,构成预测图像块(S604)。
最后,输出预测图像块,并为计算针对后续块的预测值而存储ModeResult和DVResult(S605),结束流程。
在第1实施例的图像编码装置和图像解码装置中,生成作为用于预测纹理成分的模板信号而使用的、相对于已编码解码图像上下或左右反转了的参照图像,来作为预测图像使用,由此,提高了以往方式中的帧内的图像信号预测的精度。此外,关于反转模式,通过利用与相邻块的反转模式的相关或偏移矢量的相关来生成预测反转模式能够实现较少的附加信息,提高编码效率。
进而,各种反转模式下的偏移矢量值是作为表示与反转前的编码对象块的相对位置的信息而编码的,故在编码装置中,能在一次取得参照图像后,以并列动作评价各反转模式的误差,并且在解码装置中,仅通过取得参照图像后的地址变换就能生成各反转模式的预测图像,故能既抑制处理的増加,又取得具有相关性的预测图像。
〔实施例2〕
接下来说明本发明第2实施例的图像编码装置、图像解码装置。第1实施例是仅利用帧内的相关的图像编码、解码装置的实施例,第2实施例是利用帧内的相关和帧间的相关的、能活用动图像的时间相关的图像编码、解码装置的实施例。
图7是表示本发明第2实施例的图像编码装置的结构图。如图7所示,本实施例的图像编码装置由具有与第1实施例同样功能的输入端子100、输入图像缓存器101、块分割部102、减法器105、正交变换部106、量化部107、逆量化部108、逆正交变换部109、加法器110、帧内解码图像存储器111、偏移矢量/模式预测部112、熵编码部113、流缓存器114、输出端子115、编码量控制部116,和具有对第1实施例追加了处理的偏移矢量检测部703、偏移预测信号生成部704、偏移矢量/模式预测部112,以及作为新追加的处理块的帧内预测部717、帧内预测模式预测部718、去块滤波器719、参照图像存储器720、运动矢量检测部721、运动补偿预测部722、运动矢量预测部723、模式判定部724构成。
先说明所追加的处理块的动作,帧内预测部717被从块分割部102输入编码对象块,使用帧内解码图像存储器111内的相邻已编码区域的解码图像,来施以在MPEG4-AVC中进行的帧内预测处理。帧内预测部717考虑从帧内预测模式预测部718供给的预测模式值地选择所需编码量较少的帧内预测模式,将帧内预测图像及帧内预测模式信号、误差评价值输出到模式判定部724。帧内预测模式预测部718取得由模式判定部724取得的预测处理的选择信息及帧内预测模式信息,计算文献“ISO/IEC14496-10Advanced Video Coding”中所记载的帧内预测模式的预测值。此外,从加法器110输出的局部解码图像在去块滤波器719中被施以用于除去编码处理单位的块边界的畸变的滤波处理,被存储在参照图像存储器720中。运动矢量检测部721在从块分割部102取得的编码对象块图像与参照图像存储器720所存储的参照图像之间进行运动推定。作为一般的运动推定处理,使用块匹配处理,即,切出从画面内的相同位置移动了预定移动量的位置的参照图像,一边改变移动量地一边求取出以该图像为预测块时的预测误差最少的移动量作为运动矢量值。运动矢量预测部723按文献“ISO/IEC14496-10Advanced Video Coding”所记载的方式计算运动矢量预测值,提供给运动矢量检测部721。运动矢量检测部721考虑对运动矢量预测值与运动矢量值的差分进行编码时所需要的编码量地、检测最优的运动矢量值。
运动矢量检测部721所求出的运动矢量值被提供给运动补偿预测部722。运动补偿预测部722从多个针对参照图像的预测信号中选择要编码的差分信息最少的预测信号,将所选择的运动补偿预测模式和预测信号输出给模式判定部724。关于上述的处理块,是以往方法的用于适用帧内预测及运动补偿预测的构成。
接下来说明进行本发明第2实施例中的特征动作的处理块,即偏移矢量检测部703、偏移预测信号生成部704、以及模式判定部724的动作。
偏移矢量检测部703被从偏移矢量/模式预测部112输入针对对象块的偏移矢量和反转模式的预测值,并被输入从帧内预测模式预测部供给的、针对对象块的帧内预测模式的预测值,进行偏移矢量检测处理。
偏移矢量检测部703将检测出的偏移矢量值和反转模式值及其误差评价值、以及表示施加有DC修正的信息(以下称作DC修正位)输出到偏移预测信号生成部704。偏移预测信号生成部704基于从偏移矢量检测部703输入的偏移矢量值、反转模式值、以及DC修正位,根据帧内解码图像存储器111中的解码图像信号而生成预测图像,将偏移矢量值和反转模式值及其误差评价值、以及DC修正位一并输出到模式判定部724。关于偏移矢量检测部703和偏移预测信号生成部704的详细动作,将在后面叙述。
模式判定部724基于从帧内预测部717输入的帧内预测图像、帧内预测模式及误差评价值,从运动补偿预测部722输入的运动补偿预测图像、运动补偿预测模式、运动矢量值及误差评价值,以及从偏移预测信号生成部704输入的偏移预测图像、偏移矢量值、反转模式值、DC修正位及误差评价值,选择最优的预测模式。对于仅在不具有运动补偿预测的参照图像的帧内的编码帧,基于帧内预测和偏移预测来选择最优的预测模式。
模式判定部724将针对所选择的预测模式的预测图像块输出到减法器105和加法器110,并向熵编码部113提供作为附加信息的预测模式信息和需要进行与预测模式相应的编码的信息。
此外,需要进行与预测模式相应的编码的信息还被提供给运动矢量预测部723、帧内预测模式预测部718及偏移矢量/模式预测部112,生成后续的编码对象块中的各种附加信息的预测信号。
接下来,说明对由本发明第2实施例的图像编码装置生成的编码比特流进行解码的图像解码装置。
图8是表示本发明第2实施例的图像解码装置的结构图。如图8所示,本实施方式的图像解码装置由具有与第1实施例同样功能的输入端子200、流缓存器201、熵解码部202、偏移矢量/模式解码部203、逆量化部205、逆正交变换部206、加法器207、帧内解码图像存储器208及输出端子209,对第1实施例追加了处理的偏移预测信号生成部804,以及作为新追加的处理块的预测模式解码部810、预测信号选择部811、帧内预测模式解码部812、帧内预测部813、运动矢量解码部814、去块滤波器815、参照图像存储器816及运动补偿预测部817构成。
所追加的处理块中,关于帧内预测模式解码部812、帧内预测部813、运动矢量解码部814、去块滤波器815、参照图像存储器816及运动补偿预测部817,同图7的第2实施例中的图像编码装置的说明一样,是用于对MPEG4-AVC标准下的帧内预测及运动补偿预测进行解码的结构,并非本发明特征的处理块,故省略其说明。
接下来,说明进行本发明第2实施例的特征动作的处理块,即预测模式解码部810、预测信号选择部811、及偏移预测信号生成部804的动作。
被熵解码部202可变长度解码后的预测模式信息被存储在预测模式解码部810中,作为表示解码对象块中的预测信号生成方法的信息而取得。预测模式信息被从预测模式解码部810输入到预测信号选择部811,并且,预测图像块根据预测信号生成方法而被从运动补偿预测部817、帧内预测部813及偏移预测信号生成部804的一者输入到预测信号选择部811。
预测信号选择部811将所被输入的预测图像块输出到加法器207,预测图像块被与从逆正交变换部206输入到加法器207的解码差分信号相加,生成解码图像信号。
图8的解码装置中的偏移预测信号生成部804的构成同图7的编码装置中的偏移预测信号生成部704的构成相同,故一并说明其详细动作。
首先,使用图9的结构图及图10的检测流程图来说明偏移矢量检测部703的详细动作。
图9所示的偏移矢量检测部703的结构图由作为具有与第1实施例中的偏移矢量检测部103相同功能的处理块的顺序部400、对象图像缓存器401、模式预测值·偏移矢量预测值缓存器402、存储器存取部403、偏移参照图像缓存器404、最优偏移矢量更新部409、模式差分·偏移矢量差分计算器410、最优矢量/评价值存储部411,在处理块内追加了功能的无反转模式误差计算器905、左右反转模式误差计算器906、上下反转模式误差计算器907、上下左右反转模式误差计算器908,以及作为新追加的处理块的偏移参照DC计算部913、帧内预测DC计算部914构成。
在第2实施例中,相对于第1实施例中的偏移预测处理,以预测误差评价值为基准选择作为以往技术的预测方法的帧内预测及运动补偿预测,从而实现更加效率良好的编码处理,除此之外,还具备对于偏移预测处理,修正相当于块的平均值的DC分量,直接预测作为编码对象块内的变动量的纹理成分的模式,由此实现进一步的预测效率提高。
具体来说,为了不使用附加信息地修正相当于DC分量的分量,具有计算由帧内预测的预测模式构成的预测块的DC分量,修正与从离开偏移矢量的位置取得的参照块的DC分量的误差的功能。
从帧内预测模式预测部718输入的帧内预测的预测模式被存储在帧内预测DC计算部914中。帧内预测DC计算部914按照上述预测模式,基于帧内解码图像存储器111所存储的与对象块相邻的解码图像信号,来计算帧内预测块的DC分量。
此外,偏移参照DC计算部913被从偏移参照图像缓存器404供给参照图像块,计算参照图像块的DC分量。
计算出的DC分量被从帧内预测DC计算部914和偏移参照DC计算部913提供到无反转模式误差计算器905、左右反转模式误差计算器906、上下反转模式误差计算器907、上下左右反转模式误差计算器908,被用于DC修正模式的误差评价值的生成。
无反转模式误差计算器905、左右反转模式误差计算器906、上下反转模式误差计算器907、及上下左右反转模式误差计算器908相对于第1实施例中的无反转模式误差计算器405、左右反转模式误差计算器406、上下反转模式误差计算器407、及上下左右反转模式误差计算器408被追加了使用DC修正模式时的计算预测误差值的功能,不使用DC修正模式时的误差评价值和使用了DC修正模式时的误差评价值被提供给最优偏移矢量更新部409。
接下来,使用图10的流程图,将作为上述检测处理的运算处理的步骤作为在顺序部400中管理的处理步骤来进行说明。
对于成为对象的编码块,最初将最小误差值MinErr设定为最大值(例如存储区域为32比特时是0xffffffff)(S1000)。接着,输入成为对象的编码块(S1001)。然后以帧内预测模式的预测值为基准,计算预测到对象块时的DC分量DCIpred(S1002)。接着根据编码块的画面内位置设定偏移矢量的检测范围(S1003)。基于所设定的被限制的检测范围,设定偏移矢量的初始值DVSearch(S1004)。针对所设定的DVSearch,由从编码块移动了DVSearch的位置的解码图像存储器输入参照图像块(S1005)。
接下来,计算所被输入的参照图像块的DC分量DCRef(S1006)。
然后使用参照图像块和编码对象块,累计针对偏移矢量DVSearch的、未施以DC修正时的编码块与参照图像块的每个像素的误差值,计算针对无反转模式的误差值ErrNorm(DVSearch)、针对左右反转模式的误差值ErrLRinv(DVSearch)、针对上下反转模式的误差值ErrULinv(DVSearch)、以及针对上下左右反转模式的误差值ErrULLRinv(DVSearch)(S1007)。
接下来,计算反转模式的预测值ModePred和偏移矢量的预测值DVPred、以及与各模式值及DVSearch的差分值DiffMode、DiffDV,计算编码时的预计编码量InfoBits。使针对各个反转模式所计算出的InfoBits与ErrNorm(DVSearch)、ErrLRinv(DVSearch)、ErrULinv(DVSearch)、ErrULLRinv(DVSearch)相加(S1008)。
接下来,为计算施加了DC修正时的误差值,对从针对偏移矢量DVsearch的编码块的各像素减去了DCIpred的信号、与从参照图像块的各像素减去了DCRef的信号之间的每个像素的误差值进行累计,计算无反转模式的误差值ErrNormCor(DVsearch)、左右反转模式的误差值ErrLRinvCor(DVsearch)、上下反转模式的误差值ErrULCor(DVsearch)、上下左右反转模式的误差值ErrULLRCor(DVsearch)(S1009)。
对于这些误差值,除反转模式的预测值ModePred、偏移矢量的预测值DVPred、各模式值、以及与DVsearch的差分值外,还考虑表示进行了DC修正的信息所需要的编码量地计算编码时的预计编码量InfoBits,加到ErrNormCor(DVsearch)、ErrLRinvCor(DVsearch)、ErrULinvCor(DVsearch)、ErrULLRinvCor(DVsearch)中(S1010)。
接下来,将所生成的ErrNorm(DVSearch)、ErrLRinv(DVSearch)、ErrULinv(DVSearch)、ErrULLRinv(DVSearch)、ErrNormCor(DVsearch)、ErrLRinvCor(DVsearch)、ErrULinvCor(DVsearch)、ErrULLRinvCor(DVsearch)的最小值与所存储的MinErr进行比较(S1011)。若最小值比MinErr小(S1012:YES),则对MinErr设定最小值,将具有最小值的反转模式值设定于ModeResult,将此时的偏移矢量值DVSearch设定于DVResult,将表示有无DC修正的信号设定于CorBit来进行存储(S1013)。若最小值不比MinErr小(S1012:NO),则就此进入S1014。
若进行了上述误差值计算的偏移矢量值是检测范围最后的矢量(S1014:YES),则输出误差评价值MinErr,ModeResult、DVResult及其它们与ModePred、DVPred的差分值DiffMode、DiffDV,以及CorBit(S1015)、结束する。若并非最后的矢量(S1014:NO),则将偏移矢量值DVSearch更新为下一个检测位置(S1016),转移到S1005。
接下来,使用图11的流程图说明对在上述预测算法中生成的偏移预测图像块进行解码的处理。
图11的流程图是以图8中的偏移矢量/模式解码部203及偏移预测信号生成部804的动作为处理步骤的,图7中的偏移预测信号生成部704也具有在此动作的偏移预测信号生成处理功能。
一开始,从流中解码出反转模式预测差分值DiffMode和偏移矢量的预测差分值DiffDV,以及表示是否施加了DC修正的信息CorBit(S1100)。然后,计算反转模式的预测值ModePred和偏移矢量的预测值DVPred(S1101)。利用计算出的结果,使预测差分值与预测值相加,由此解码反转模式ModeResult及偏移矢量DVResult(S1102)。
然后,由从解码对象块移动了偏移矢量DVResult的位置的解码图像存储器输入参照图像(S1103)。对于参照图像,根据反转模式ModeResult而变换参照图像的扫描顺序,构成预测图像块(S1104)。
接下来,若表示是否施加了DC修正的信息CorBit为1(S1105:YES),则经由图8中的帧内解码图像存储器208取得帧内预测模式的预测值,计算帧内预测了解码对象块时的DC分量、即DCIpred(S1106)。然后,计算参照图像块的DC分量、即DCRef(S1107)。从预测图像中减去(DCIpred-DCRef),生成施加了DC修正的预测图像(S1108)。
另一方面,若CorBit不为1(S1105:NO),则不施加DC修正,进入S1109。
最后,输出预测图像块,为计算针对后续块的预测值而存储ModeResult及DVResult,结束流程(S1109)。
在第2实施例中,除第1实施例中的使用了针对参照图像的上下、左右反转变换的偏移预测处理的效果外,还具备针对偏移预测处理修正相当于块的平均值的DC分量,直接预测作为编码对象块内的变动量的纹理成分的模式,由此,实现进一步的预测效率的提高,能够提高在画面内具有同一纹理的成分因光照情况或影子等的影响而亮度值有偏差时的偏移预测精度。
在第2实施例中,是基于帧内预测模式的预测模式信息推定编码对象块的DC分量来进行修正的,但也可以按固定的算法根据相邻的解码图像而推定DC分量,此时也可以对第1实施例的结构追加此功能。
此外,通过另行传输编码对象块的DC分量而修正准确的DC分量的情况也在上述结构的意图范围内,成为如下功能:即使传输DC分量,也能削减传输编码量,由此体现预测效率的提高,对于编码对象块是有效的。
〔实施例3〕
下面说明本发明第3实施例的图像编码装置、图像解码装置。第3实施例是对第2实施例的结构追加专利文献2中所提示的、以编码对象块的相邻图像为模板计算偏移矢量的功能,并针对该偏移矢量计算功能,具备本发明之发明点的、使参照图像上下、左右等反转后的块作为预测对象信号的实施例。
图12中表示第3实施例中的图像编码装置的结构图,图13中表示第3实施例中的图像解码装置的结构图,下面说明其动作。
如图12所示,本实施例的图像编码装置除具有与第2实施例同样功能的处理块外,还追加了周边解码参照偏移矢量推定部1225和周边解码参照偏移预测信号生成部1226,如图13所示,本实施例的图像解码装置除具有与第2实施例同样功能的处理块外,还追加了周边解码参照偏移矢量推定部1318和周边解码参照偏移预测信号生成部1319。
这些追加的处理块是以编码对象块的相邻图像为模板计算偏移矢量的功能,故编码装置内的处理块和解码装置内的处理块具有相同功能,因而一并说明其详细动作。
首先,利用图14说明本发明的周边解码参照偏移矢量推定的方法。第3实施例中的本发明发明点在于,为了比以往方法更加充分地活用图像信号所具有的自相似性及纹理的相似性,追加使参照图像上下、左右等反转后的块作为预测对象信号,以模板匹配的方法根据编码对象块的周边解码图像而一并推定反转模式和偏移矢量,从而无需追加附加信息地生成与编码块相关性更高的预测块。
图14上部的无反转模板是在使用以往的周边解码参照偏移矢量推定的预测中所使用的参照图像(已编码解码图像)。
针对编码对象块,以左上部斜线所示的区域的图像信息为对象,评价其与使已编码解码图像移动了偏移矢量后的位置处所存在的、作为预测信号而使用的参照块的左上部斜线所示的区域的图像信息(以下称作参照模板)的误差,计算出具有最小误差值的偏移矢量值作为推定偏移矢量EDV,将相对于编码对象块移动了EDV所示的偏移矢量后的位置的参照图像作为预测图像。
为使本发明发明点的利用反转后模板的预测处理在周边解码参照偏移矢量推定中发挥功能,根据反转模式而改变针对同一偏移矢量的参照模板的位置。
具体来说,如图14中央处所示那样,在将参照块上下、左右、上下左右反转时,对于位于编码对象块的左上部部分的图像信号,在相对于参照块上下反转模式的情况下使用左下部的解码图像,在左右反转模式的情况下使用右上部的解码图像,在上下左右反转模式预测块的情况下使用右下部的解码图像。
在图12和图13中的周边解码参照偏移矢量推定部1225、1318中,在进行针对某偏移矢量值的误差评价时,如图14的下部所示那样,将能以偏移矢量基准取得的参照图像块的周边图像全部取得,由此能够进行针对四种反转模式的参照周边解码的偏移矢量推定及反转模式推定。
接下来,在图15中表示周边解码参照偏移矢量推定部1225的结构图,说明其动作。
周边解码参照偏移矢量推定部1225如图15所示那样由顺序部1500、存储器存取部1501、周边解码图像缓存器1502、偏移参照图像缓存器1503、无反转模式误差计算器1504、左右反转模式误差计算器1505、上下反转模式误差计算器1506、上下左右反转模式误差计算器1507、最优推定偏移矢量更新部1508、最优推定矢量/评价值存储部1509构成。
存储器存取部1501从帧内解码图像存储器111取得与编码对象块的位置相邻的周边图像信息,提供给周边解码图像缓存器1502。此外,存储器存取部1501按照偏移矢量值从帧内解码图像存储器111取得顺序部1500管理的参照块,存储到偏移参照图像缓存器1503中。
从周边解码图像缓存器1502向无反转模式误差计算器1504、左右反转模式误差计算器1505、上下反转模式误差计算器1506及上下左右反转模式误差计算器1507提供相同的周边解码图像信号。
另一方面,如图14所示那样,从偏移参照图像缓存器1503向无反转模式误差计算器1504提供参照图像块的左上部的参照图像信号作为周边参照图像,向左右反转模式误差计算器1505提供参照图像块的右上部的参照图像信号作为周边参照图像,向上下反转模式误差计算器1506提供参照图像块的左下部的参照图像信号作为周边参照图像,向上下左右反转模式误差计算器1507提供参照图像块的右下部的参照图像信号作为周边参照图像。
无反转模式误差计算器1504、左右反转模式误差计算器1505、上下反转模式误差计算器1506及上下左右反转模式误差计算器1507具有针对所输入的周边解码图像及周边参照图像的各像素计算平方差,存储其总和的功能。
由此,生成图14所示的无反转模式预测块、上下反转模式预测块、左右反转模式预测块、上下左右反转模式预测块的预测误差评价值。
无反转模式误差计算器1504、左右反转模式误差计算器1505、上下反转模式误差计算器1506及上下左右反转模式误差计算器1507将各自计算出的平方误差值的块总和输出到最优推定偏移矢量更新部1508。
最优推定偏移矢量更新部1508将顺序部1500所管理的偏移矢量值中的各反转模式的误差评价值(平方误差总和)与针对同一编码对象块的最小的误差评价值进行比较,将具有最小的评价值的反转模式和偏移矢量更新为最优推定反转模式和最优推定偏移矢量,同评价值一起输出到最优推定矢量/评价值存储部1509。
最优推定矢量/评价值存储部1509在结束对顺序部1500管理的检索范围的偏移矢量值的误差评价后,将所存储的推定反转模式和推定偏移矢量输出到周边解码参照偏移预测信号生成部1226及偏移矢量检测部703。
图16中以流程图的形式表示出上述检测处理的运算处理的步骤,下面说明在顺序部1500中管理的处理步骤。
对于成为对象的编码块,一开始将最小误差值MinErr设定为最大值(S1600)。接着,对于成为对象的编码块,输入在左上侧相邻X像素的位置的解码图像信号(S1601)。然后根据编码块的画面内位置设定偏移矢量的检测范围(S1602)。基于被限制的检测范围设定偏移矢量的初始值DVSearch(S1603)。然后,对于所设定的DVSearch,从解码图像存储器输入以从编码块移动了DVsearch的位置为基准处于上下左右X像素的区域内的图像(S1604)。
累计针对偏移矢量DVsearch的编码块相邻图像与参照图像块相邻图像的每像素的误差值,计算无反转模式的误差值ErrNorm(DVsearch)、左右反转模式的误差值ErrLRinv(DVsearch)、上下反转模式的误差值ErrULinv(DVsearch)、上下左右反转模式的误差值ErrULLRinv(DVsearch)(S1605)。
接着,将所生成的ErrNorm(DVsearch)、ErrLRinv(DVsearch)、ErrULinv(DVsearch)、ErrULLRinv(DVsearch)的最小值与所存储的MinErr进行比较(S1606)。若最小值比MinErr小(S1607:YES),则对MinErr设定最小值,将具有最小值的推定反转模式值存储于ModeResult,将此时的推定偏移矢量值DVSearch存储于DVResult(S1608)。若最小值不比MinErr小(S1607:NO),则就此进入S1609。
若进行了上述误差值计算的偏移矢量值是检测范围最后的矢量(S1609:YES),则输出ModeResult、DVResult(S1610)并结束。若非最后的矢量(S1609:NO),则将偏移矢量值DVSearch更新为下一检测位置(S1611),移动到S1604。
按照上述处理步骤,图12中的周边解码参照偏移矢量推定部1225和图13中的周边解码参照偏移矢量推定部1318生成所推定的偏移矢量值DVResult和推定反转模式值ModeResult。
这些值可以作为偏移矢量检测部703中的预测偏移矢量值和预测反转模式值来使用,在基于相邻图像的推定有效发挥功能的情况下,能削减使用偏移矢量检测的偏移预测所需要的附加信息。
图12中的周边解码参照偏移预测信号生成部1226和图13中的周边解码参照偏移预测信号生成部1319基于从周边解码参照偏移矢量推定部1225及1318输入的偏移矢量值DVResult和推定反转模式值ModeResult,从帧内解码图像存储器111及208取得从编码对象块移动了偏移矢量值的位置的已编码解码图像作为参照图像。所取得的参照图像根据反转模式而改换水平、垂直的排列顺序,构成预测图像块。所构成的预测图像块被提供给图12中的模式判定部724、图13中的预测信号选择部811,在被选为预测模式的情况下,作为预测图像块而被使用。
与使用与编码对象块相邻的已编码的解码图像来进行按偏移矢量所参照的图像的相邻部分的误差评价的周边解码参照偏移矢量推定不同,在本发明的第3实施例中,通过进行使解码图像上下、左右反转后的相邻部分的误差评价,来推定偏移矢量和反转模式。通过利用这些推定的信息来生成预测信号,能够无需附加信息地实现相对于以往的周边解码参照偏移矢量推定的预测精度的提高。
〔实施例4〕
接下来,说明本发明第4实施例的图像编码装置、图像解码装置。第4实施例相对于第2实施例的结构,采用了通过进行以编码对象块的相邻图像为模板的评价,来不传输编码地计算反转模式的结构。
图17中表示第4实施例的图像编码装置的结构图,图18中表示第4实施例的图像解码装置的结构图,下面说明其动作。
如图17所示,本实施例的图像编码装置的结构中,除具有与第2实施例同样功能的处理块外,还被追加了模板反转模式推定部1727,如图18所示,本实施例的图像解码装置的结构中,除具有与第2实施例同样功能的处理块外,还被追加了模板反转模式推定部1820。
在模板反转模式推定部1820中,成为针对所设定的偏移矢量,以编码对象块的相邻图像为模板来计算最优的反转模式的结构。编码装置内的处理块和解码装置内的处理块具有相同功能,故一并说明其详细动作。
编码装置的情况下,模板反转模式推定部1727被从偏移矢量检测部703输入成为对象的偏移矢量,解码装置的情况下,模板反转模式推定部1820被从偏移预测信号生成部804输入已被解码了的偏移矢量。
模板反转模式推定部1727、1820具有利用偏移矢量和从帧内解码图像存储器111、208输入的解码图像来选择反转模式的功能。下面利用图19的流程图来说明反转模式推定处理的流程。
首先,输入相对于成为对象的编码块在左上侧相邻X像素的位置的解码图像信号(S1900)。然后,设定成为要求取反转模式的对象的偏移矢量值DV(S1901)。接着,针对所设定的DV,从解码图像存储器输入以从编码块移动了DV的位置为基准处于上下左右X像素区域内的图像(S1902)。
累计针对偏移矢量DV的编码块相邻图像与参照图像块相邻图像的每像素的误差值,计算无反转模式的误差值ErrNorm、左右反转模式的误差值ErrLRinv、上下反转模式的误差值ErrULinv、上下左右反转模式的误差值ErrULLRinv(S1903)。
接着,计算所生成的ErrNorm、ErrLRinv、ErrULinv、ErrULLRinv中的最小值(S1904)。若最小值为ErrNorm,则对ModeResult设定推定反转模式值0,若最小值为ErrLRinv,则对ModeResult设定推定反转模式值1,若最小值为ErrULinv,则对ModeResult设定推定反转模式值2,若最小值为ErrULLRinv,则对ModeResult设定推定反转模式值3(S1905)。
输出这样计算出的ModeResult,计算针对编码对象块的反转模式值(S1906)。
将所计算出的ModeResult就此作为反转模式值,来生成预测信号,由此,能够无附加信息地确定反转模式,通过在解码装置中也进行同样的处理,能够复原反转模式值。
所计算出的ModeResult在编码装置中也可以作为偏移矢量检测部703中的预测反转模式值来使用,在基于相邻图像的推定有效发挥功能的情况下,能削减使用了偏移矢量检测的偏移预测中的反转模式信息。
在本发明的第4实施例中,使用与编码对象块相邻的已编码的解码图像,进行使按偏移矢量所参照的解码图像的相邻部分的位置、以按偏移矢量参照的解码图像为中心上下、左右反转了的位置的相邻部分的误差评价,来推定反转模式,并利用作为推定结果的反转模式来生成预测信号,由此,能够不增加附加信息地提高利用了纹理成分的相关性的帧内偏移预测的预测效率,能提高编码效率。
此外,作为第1、第2、第3、第4实施例而提示的图像编码装置及图像解码装置在物理上能由具备CPU(中央处理装置)、存储器等记录装置、显示器等显示装置、以及针对传输路径的通信装置的计算机来实现,并能将所提示的具有各种功能的装置作为计算机上的程序来实现并执行。
〔标号说明〕
100输入端子
101输入图像缓存器
102块分割部
103偏移矢量检测部
104偏移预测信号生成部
105减法器
106正交变换部
107量化部
108逆量化部
109逆正交变换部
110加法器
111帧内解码图像存储器
112偏移矢量/模式预测部
113熵编码部
114流缓存器
115输出端子
116编码量控制部
200输入端子
201流缓存器
202熵解码部
203偏移矢量/模式解码部
204偏移预测信号生成部
205逆量化部
206逆正交变换部
207加法器
208帧内解码图像存储器
209输出端子
400顺序部
401对象图像缓存器
402模式预测值·偏移矢量预测值缓存器
403存储器存取部
404偏移参照图像缓存器
405无反转模式误差计算器
406左右反转模式误差计算器
407上下反转模式误差计算器
408上下左右反转模式误差计算器
409最优偏移矢量更新部
410模式差分·偏移矢量差分计算器
411最优矢量/评价值存储部
703偏移矢量检测部
704偏移预测信号生成部
717帧内预测部
718帧内预测模式预测部
719去块滤波器
720参照图像存储器
721运动矢量检测部
722运动补偿预测部
723运动矢量预测部
724模式判定部
804偏移预测信号生成部
810预测模式解码部
811预测信号选择部
812帧内预测模式解码部
813帧内预测部
814运动矢量解码部
815去块滤波器
816参照图像存储器
817运动补偿预测部
905无反转模式误差计算器
906左右反转模式误差计算器
907上下反转模式误差计算器
908上下左右反转模式误差计算器
913偏移参照DC计算部
914帧内预测DC计算部
1225周边解码参照偏移矢量推定部
1226周边解码参照偏移预测信号生成部
1318周边解码参照偏移矢量推定部
1319周边解码参照偏移预测信号生成部
1500顺序部
1501存储器存取部
1502周边解码图像缓存器
1503偏移参照图像缓存器
1504无反转模式误差计算器
1505左右反转模式误差计算器
1506上下反转模式误差计算器
1507上下左右反转模式误差计算器
1508最优推定偏移矢量更新部
1509最优推定矢量/评价值存储部
1727模板反转模式推定部
1820模板反转模式推定部
〔工业可利用性〕
本发明能够适用于图像信号的编码及解码技术。

Claims (16)

1.一种针对图像信号,按由多个像素构成的块单位进行分割,并按分割后的块单位进行编码的图像编码装置,其特征在于,包括:
偏移矢量检测部,针对编码对象块,使用已被编码的同一图像信号内的块的局部解码图像来检索与编码对象块相关性高的信号,并求出上述相关性高的信号与上述编码对象块的画面内偏移、即偏移矢量,和
偏移预测信号生成部,按照上述偏移矢量生成预测信号;
其中,上述偏移矢量检测部针对在偏移矢量中指定的预测信号计算使其水平和垂直的至少一者的排列反转后的信号,检测出包括被反转后的预测信号在内的预测信号中最优的预测信号、以及构成预测信号所需要的偏移矢量及表示反转方向的信息;
上述偏移预测信号生成部按照上述偏移矢量及上述表示反转方向的信息,基于上述局部解码图像生成预测信号;
本图像编码装置对上述预测信号与上述编码对象块的差分信号、上述偏移矢量及上述表示反转方向的信息进行编码。
2.如权利要求1所述的图像编码装置,其特征在于,
针对上述偏移矢量和上述表示反转方向的信息,使用在与上述编码对象块相邻的块中检测出的偏移矢量及表示反转方向的信息,来计算出相对于上述编码对象块的上述偏移矢量及针对上述表示反转方向的信息的预测信息,并对上述偏移矢量、和上述表示反转方向的信息与预测信息的差异进行编码。
3.如权利要求1所述的图像编码装置,其特征在于,
上述偏移矢量检测部包括基于周边解码图像来预测编码对象块的图像信号的直流分量的DC计算部、和计算用上述偏移矢量所表示的预测信号的直流分量的偏移参照DC计算部;
本图像编码装置对基于上述周边解码图像而预测出的直流分量与上述预测信号的直流分量的差分进行修正,将修正后的预测信号评价为上述编码对象块的预测信号的候选,并将之与表示是否进行直流分量的修正的信息一起编码。
4.一种针对图像信号,按由多个像素构成的块单位进行分割,并按分割后的块单位进行编码的图像编码装置,其特征在于,包括:
周边解码参照偏移矢量推定部,针对编码对象块,使用已被编码的同一图像信号内的块的局部解码图像,来求出编码对象块与基于上述局部解码图像而生成的预测信号的画面内偏移、即偏移矢量,和
周边解码参照偏移预测信号生成部,按照上述偏移矢量生成预测信号;
其中,上述周边解码参照偏移矢量推定部通过对与编码对象块相邻的局部解码图像和按上述偏移矢量所参照的局部解码图像的相邻部分的信号进行误差评价,来生成上述预测信号和上述偏移矢量,并且,
通过对与编码对象块相邻的局部解码图像,和使按上述偏移矢量所参照的局部解码图像的相邻部分的位置、以按上述偏移矢量所参照的局部解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;
上述周边解码参照偏移预测信号生成部按照上述偏移矢量及上述表示反转方向的信息,基于上述局部解码图像生成预测信号;
本图像编码装置对上述预测信号与上述编码对象块的差分信号进行编码。
5.一种针对图像信号,按由多个像素构成的块单位进行分割,并按分割后的块单位进行编码的图像编码装置,其特征在于,包括:
偏移矢量检测部,针对编码对象块,使用已被编码的同一图像信号内的块的局部解码图像来检索与编码对象块相关性高的信号,并求出上述相关性高的信号与上述编码对象块的画面内偏移、即偏移矢量,
偏移预测信号生成部,按照上述偏移矢量生成预测信号,以及模板反转模式推定部,推定用于使预测信号的水平和垂直的至少一者的排列反转的、表示反转方向的信息;
其中,上述模板反转模式推定部通过对与编码对象块相邻的局部解码图像,和使按上述偏移矢量所参照的局部解码图像的相邻部分的位置、以按上述偏移矢量所参照的局部解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;
上述偏移矢量检测部根据上述表示反转方向的信息,计算出使在偏移矢量中指定的预测信号反转后的信号,针对每个偏移矢量进行预测信号与编码对象块的误差评价,由此来检测偏移矢量;
上述偏移预测信号生成部按照上述偏移矢量和上述表示反转方向的信息,基于上述局部解码图像生成预测信号;
本图像编码装置对上述预测信号与上述编码对象块的差分信号、以及上述偏移矢量进行编码。
6.一种图像解码装置,接收针对图像信号按由多个像素构成的块单位进行分割,并按分割后的块单位施加了编码的编码流,并进行解码,其特征在于,包括:
偏移矢量/模式解码部,针对解码对象块,从上述编码流中解码出预测信号、偏移矢量、以及表示反转方向的信息,所述预测信号是基于已被解码的同一图像信号内的块的解码图像而生成的预测信号,所述偏移矢量是与上述解码对象块的画面内偏移,所述反转方向是使在上述偏移矢量中指定的上述解码图像向水平和垂直的至少一方反转的方向,和
偏移预测信号生成部,按照上述偏移矢量和上述表示反转方向的信息,基于上述解码图像生成预测信号;
本图像解码装置通过使上述预测信号与被解码了的残差信号相加,来计算解码图像。
7.如权利要求6所述的图像解码装置,其特征在于,
针对上述偏移矢量和上述表示反转方向的信息,使用在与上述解码对象块相邻的块中检测出的偏移矢量及表示反转方向的信息,来计算出相对于上述解码对象块的上述偏移矢量及针对上述表示反转方向的信息的预测信息,通过将上述偏移矢量及上述表示反转方向的信息与预测信息的差异进行解码并相加,来将上述偏移矢量和上述表示反转方向的信息解码。
8.如权利要求6所述的图像解码装置,其特征在于,
上述偏移预测信号生成部包括基于周边解码图像而预测解码对象块的图像信号的直流分量的DC计算部,和计算由上述偏移矢量所示的预测信号的直流分量的偏移参照DC计算部;
本图像解码装置对表示是否进行直流分量的修正的信息进行解码,基于解码出的信息,在被进行了修正的情况下,修正基于上述周边解码图像而预测出的直流分量与上述预测信号的直流分量的差分,并使用修正后的预测信号,通过与解码出的残差信号相加,来计算解码图像。
9.一种图像解码装置,接收针对图像信号按由多个像素构成的块单位进行分割,并按分割后的块单位施加了编码的编码流,并进行解码,其特征在于,包括:
周边解码参照偏移矢量推定部,针对解码对象块,使用已被解码了的同一图像信号内的块的解码图像,来求出解码对象块与基于上述解码图像而生成的预测信号的画面内偏移、即偏移矢量,和
周边解码参照偏移预测信号生成部,按照上述偏移矢量生成预测信号;
其中,上述周边解码参照偏移矢量推定部通过对与解码对象块相邻的解码图像和按上述偏移矢量所参照的解码图像的相邻部分的信号进行误差评价,来生成上述预测信号和上述偏移矢量,
并且,通过对与解码对象块相邻的解码图像,和使按上述偏移矢量参照的解码图像的相邻部分的位置、以按上述偏移矢量所参照的解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;
上述周边解码参照偏移预测信号生成部按照上述偏移矢量和上述表示反转方向的信息,基于上述解码图像生成预测信号;
通过使上述预测信号与被解码出的残差信号相加,来计算解码图像。
10.一种图像解码装置,接收针对图像信号按由多个像素构成的块单位进行分割,并按分割后的块单位施加了编码的编码流,并进行解码,其特征在于,包括:
偏移矢量/模式解码部,针对解码对象块,对基于已被解码了的同一图像信号内的块的解码图像而生成的预测信号与上述解码对象块的画面内偏移、即偏移矢量进行解码,和
模板反转模式推定部,推定用于使预测信号的水平和垂直的至少一者的排列反转的、表示反转方向的信息;
其中,上述模板反转模式推定部通过对与解码对象块相邻的解码图像,和使按上述偏移矢量参照的解码图像的相邻部分的位置、以按上述偏移矢量参照的解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;
本图像解码装置还包括偏移预测信号生成部,按照上述偏移矢量和上述表示反转方向的信息,基于上述解码图像生成预测信号;
通过使上述预测信号与解码出的残差信号相加,来计算解码图像。
11.一种针对图像信号,按由多个像素构成的块单位进行分割,并按分割后的块单位进行编码的图像编码方法,其特征在于,包括:
偏移矢量检测步骤,针对编码对象块,使用已被编码的同一图像信号内的块的局部解码图像来检索与编码对象块相关性高的信号,并求出上述相关性高的信号与上述编码对象块的画面内偏移、即偏移矢量,和
偏移预测信号生成步骤,按照上述偏移矢量生成预测信号;
其中,在上述偏移矢量检测步骤中,针对在偏移矢量中指定的预测信号计算使其水平和垂直的至少一者的排列反转后的信号,检测出包括被反转后的预测信号在内的预测信号中最优的预测信号、以及构成预测信号所需要的偏移矢量及表示反转方向的信息;
在上述偏移预测信号生成步骤中,按照上述偏移矢量及上述表示反转方向的信息,基于上述局部解码图像生成预测信号;
对上述预测信号与上述编码对象块的差分信号、上述偏移矢量、以及上述表示反转方向的信息进行编码。
12.一种针对图像信号,按由多个像素构成的块单位进行分割,并按分割后的块单位进行编码的图像编码方法,其特征在于,包括:
周边解码参照偏移矢量推定步骤,针对编码对象块,使用已被编码的同一图像信号内的块的局部解码图像,来求出编码对象块与基于上述局部解码图像而生成的预测信号的画面内偏移、即偏移矢量,和
周边解码参照偏移预测信号生成步骤,按照上述偏移矢量生成预测信号;
其中,在上述周边解码参照偏移矢量推定步骤中,通过对与编码对象块相邻的局部解码图像和按上述偏移矢量所参照的局部解码图像的相邻部分的信号进行误差评价,来生成上述预测信号和上述偏移矢量,并且,
通过对与编码对象块相邻的局部解码图像,和使按上述偏移矢量所参照的局部解码图像的相邻部分的位置、以按上述偏移矢量所参照的局部解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;
在上述周边解码参照偏移预测信号生成步骤中,按照上述偏移矢量及上述表示反转方向的信息,基于上述局部解码图像生成预测信号;
对上述预测信号与上述编码对象块的差分信号进行编码。
13.一种针对图像信号,按由多个像素构成的块单位进行分割,并按分割后的块单位进行编码的图像编码方法,其特征在于,包括:
偏移矢量检测步骤,针对编码对象块,使用已被编码的同一图像信号内的块的局部解码图像来检索与编码对象块相关性高的信号,并求出上述相关性高的信号与上述编码对象块的画面内偏移、即偏移矢量,
偏移预测信号生成步骤,按照上述偏移矢量生成预测信号,以及模板反转模式推定步骤,推定用于使预测信号的水平和垂直的至少一者的排列反转的、表示反转方向的信息;
其中,在上述模板反转模式推定步骤中,通过对与编码对象块相邻的局部解码图像,和使按上述偏移矢量所参照的局部解码图像的相邻部分的位置、以按上述偏移矢量所参照的局部解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;
在上述偏移矢量检测步骤中,根据上述表示反转方向的信息,计算出使在偏移矢量中指定的预测信号反转后的信号,针对每个偏移矢量进行预测信号与编码对象块的误差评价,由此来检测偏移矢量;
在上述偏移预测信号生成步骤中,按照上述偏移矢量和上述表示反转方向的信息,基于上述局部解码图像生成预测信号;
对上述预测信号与上述编码对象块的差分信号、以及上述偏移矢量进行编码。
14.一种图像解码方法,接收针对图像信号按由多个像素构成的块单位进行分割,并按分割后的块单位施加了编码的编码流,并进行解码,其特征在于,包括:
偏移矢量/模式解码步骤,针对解码对象块,从上述编码流中解码出预测信号、偏移矢量、以及表示反转方向的信息,所述预测信号是基于已被解码的同一图像信号内的块的解码图像而生成的预测信号,所述偏移矢量是与上述解码对象块的画面内偏移,所述反转方向是使在上述偏移矢量中指定的上述解码图像向水平和垂直的至少一方反转的方向,和
偏移预测信号生成步骤,按照上述偏移矢量和上述表示反转方向的信息,基于上述解码图像生成预测信号;
通过使上述预测信号与被解码了的残差信号相加,来计算解码图像。
15.一种图像解码方法,接收针对图像信号按由多个像素构成的块单位进行分割,并按分割后的块单位施加了编码的编码流,并进行解码,其特征在于,包括:
周边解码参照偏移矢量推定步骤,针对解码对象块,使用已被解码了的同一图像信号内的块的解码图像,来求出解码对象块与基于上述解码图像而生成的预测信号的画面内偏移、即偏移矢量,和
周边解码参照偏移预测信号生成步骤,按照上述偏移矢量生成预测信号;
其中,在上述周边解码参照偏移矢量推定步骤中,通过对与解码对象块相邻的解码图像和按上述偏移矢量所参照的解码图像的相邻部分的信号进行误差评价,来生成上述预测信号和上述偏移矢量,
并且,通过对与解码对象块相邻的解码图像,和使按上述偏移矢量参照的解码图像的相邻部分的位置、以按上述偏移矢量所参照的解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;
在上述周边解码参照偏移预测信号生成步骤中,按照上述偏移矢量和上述表示反转方向的信息,基于上述解码图像生成预测信号;
通过使上述预测信号与被解码出的残差信号相加,来计算解码图像。
16.一种图像解码方法,接收针对图像信号按由多个像素构成的块单位进行分割,并按分割后的块单位施加了编码的编码流,并进行解码,其特征在于,包括:
偏移矢量/模式解码步骤,针对解码对象块,对基于已被解码了的同一图像信号内的块的解码图像而生成的预测信号与上述解码对象块的画面内偏移、即偏移矢量进行解码,和
模板反转模式推定步骤,推定用于使预测信号的水平和垂直的至少一者的排列反转的、表示反转方向的信息;
其中,在上述模板反转模式推定步骤中,通过对与解码对象块相邻的解码图像,和使按上述偏移矢量参照的解码图像的相邻部分的位置、以按上述偏移矢量参照的解码图像为中心、将水平和垂直的至少一者的排列反转后的位置的信号进行误差评价,来生成表示反转方向的信息;
还包括偏移预测信号生成步骤,按照上述偏移矢量和上述表示反转方向的信息,基于上述解码图像生成预测信号;
通过使上述预测信号与解码出的残差信号相加,来计算解码图像。
CN201080053749.2A 2009-11-26 2010-11-24 图像编码装置、图像解码装置、图像编码方法及图像解码方法 Active CN102640496B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2009268988A JP5321426B2 (ja) 2009-11-26 2009-11-26 画像符号化装置、画像復号化装置、画像符号化方法、及び画像復号化方法
JP2009-268988 2009-11-26
PCT/JP2010/006853 WO2011064990A1 (ja) 2009-11-26 2010-11-24 画像符号化装置、画像復号化装置、画像符号化方法、及び画像復号化方法

Publications (2)

Publication Number Publication Date
CN102640496A true CN102640496A (zh) 2012-08-15
CN102640496B CN102640496B (zh) 2015-08-19

Family

ID=44066099

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080053749.2A Active CN102640496B (zh) 2009-11-26 2010-11-24 图像编码装置、图像解码装置、图像编码方法及图像解码方法

Country Status (5)

Country Link
US (1) US9100664B2 (zh)
JP (1) JP5321426B2 (zh)
CN (1) CN102640496B (zh)
DE (1) DE112010004586T5 (zh)
WO (1) WO2011064990A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104904213A (zh) * 2012-12-07 2015-09-09 高通股份有限公司 可缩放及多视角视频译码中的高级残差预测
CN108337513A (zh) * 2017-01-20 2018-07-27 浙江大学 一种帧内预测像素生成方法和装置
CN112673628A (zh) * 2018-09-19 2021-04-16 富士通株式会社 影像编码装置、影像编码方法、影像编码程序、影像解码装置、影像解码方法和影像解码程序

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9088793B2 (en) * 2011-03-09 2015-07-21 Vixs Systems, Inc. Multi-format video decoder with filter vector processing and methods for use therewith
EP3058736B1 (en) 2013-10-14 2019-02-27 Microsoft Technology Licensing, LLC Encoder-side options for intra block copy prediction mode for video and image coding
KR102170169B1 (ko) 2013-10-14 2020-10-26 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 비디오 및 이미지 코딩 및 디코딩을 위한 인트라 블록 카피 예측 모드의 피쳐
KR102318785B1 (ko) 2013-10-14 2021-10-27 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 비디오 및 영상 코딩 및 디코딩에 대한 기본 색상 인덱스 맵 모드의 특징
JP6355744B2 (ja) 2014-01-03 2018-07-11 マイクロソフト テクノロジー ライセンシング,エルエルシー ビデオ及び画像符号化/デコーディングにおけるブロックベクトル予測
US10390034B2 (en) 2014-01-03 2019-08-20 Microsoft Technology Licensing, Llc Innovations in block vector prediction and estimation of reconstructed sample values within an overlap area
US11284103B2 (en) 2014-01-17 2022-03-22 Microsoft Technology Licensing, Llc Intra block copy prediction with asymmetric partitions and encoder-side search patterns, search ranges and approaches to partitioning
US10542274B2 (en) 2014-02-21 2020-01-21 Microsoft Technology Licensing, Llc Dictionary encoding and decoding of screen content
JP2017512026A (ja) * 2014-03-04 2017-04-27 マイクロソフト テクノロジー ライセンシング,エルエルシー イントラブロックコピー予測におけるブロック反転及びスキップモード
KR102311815B1 (ko) 2014-06-19 2021-10-13 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 통합된 인트라 블록 카피 및 인터 예측 모드
CA2959682C (en) 2014-09-30 2022-12-06 Microsoft Technology Licensing, Llc Rules for intra-picture prediction modes when wavefront parallel processing is enabled
EP3308540B1 (en) 2015-06-09 2020-04-15 Microsoft Technology Licensing, LLC Robust encoding/decoding of escape-coded pixels in palette mode
US20180302629A1 (en) * 2015-10-30 2018-10-18 Sony Corporation Image processing apparatus and method
CN115278230A (zh) * 2015-11-11 2022-11-01 三星电子株式会社 对视频进行解码的设备和对视频进行编码的设备
US10009832B1 (en) 2017-08-11 2018-06-26 At&T Intellectual Property I, L.P. Facilitating compact signaling design for reserved resource configuration in wireless communication systems
US10986349B2 (en) 2017-12-29 2021-04-20 Microsoft Technology Licensing, Llc Constraints on locations of reference blocks for intra block copy prediction
US11412260B2 (en) * 2018-10-29 2022-08-09 Google Llc Geometric transforms for image compression

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09182082A (ja) * 1995-12-25 1997-07-11 Nippon Telegr & Teleph Corp <Ntt> 動画像の動き補償予測符号化方法とその装置
JP2005159947A (ja) * 2003-11-28 2005-06-16 Matsushita Electric Ind Co Ltd 予測画像生成方法、画像符号化方法および画像復号化方法
CN101218829A (zh) * 2005-07-05 2008-07-09 株式会社Ntt都科摩 动态图像编码装置、动态图像编码方法、动态图像编码程序、动态图像解码装置、动态图像解码方法以及动态图像解码程序

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06113291A (ja) * 1992-09-25 1994-04-22 Olympus Optical Co Ltd 画像符号化及び復号化装置
JP2006020095A (ja) * 2004-07-01 2006-01-19 Sharp Corp 動きベクトル検出回路、画像符号化回路、動きベクトル検出方法および画像符号化方法
JP2006148615A (ja) * 2004-11-22 2006-06-08 Hitachi Ltd 復号化装置および符号化方法をコンピュータに実行させるためのプログラム
JP2007043651A (ja) * 2005-07-05 2007-02-15 Ntt Docomo Inc 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法及び動画像復号プログラム
KR101211665B1 (ko) * 2005-08-12 2012-12-12 삼성전자주식회사 영상의 인트라 예측 부호화, 복호화 방법 및 장치
JP2007110348A (ja) * 2005-10-12 2007-04-26 Ntt Docomo Inc 動画像符号化装置、動画像復号化装置、動画像符号化方法、動画像復号化方法、動画像符号化プログラム、および動画像復号化プログラム
KR101370287B1 (ko) * 2006-11-22 2014-03-07 세종대학교산학협력단 디블록킹 필터링 방법 및 장치
WO2008084996A1 (en) * 2007-01-11 2008-07-17 Samsung Electronics Co, . Ltd. Method and apparatus for deblocking-filtering video data
KR101365574B1 (ko) * 2007-01-29 2014-02-20 삼성전자주식회사 영상 부호화 방법 및 장치, 복호화 방법 및 장치

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09182082A (ja) * 1995-12-25 1997-07-11 Nippon Telegr & Teleph Corp <Ntt> 動画像の動き補償予測符号化方法とその装置
JP2005159947A (ja) * 2003-11-28 2005-06-16 Matsushita Electric Ind Co Ltd 予測画像生成方法、画像符号化方法および画像復号化方法
CN101218829A (zh) * 2005-07-05 2008-07-09 株式会社Ntt都科摩 动态图像编码装置、动态图像编码方法、动态图像编码程序、动态图像解码装置、动态图像解码方法以及动态图像解码程序

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104904213A (zh) * 2012-12-07 2015-09-09 高通股份有限公司 可缩放及多视角视频译码中的高级残差预测
US9948939B2 (en) 2012-12-07 2018-04-17 Qualcomm Incorporated Advanced residual prediction in scalable and multi-view video coding
CN104904213B (zh) * 2012-12-07 2018-06-01 高通股份有限公司 可缩放及多视角视频译码中的高级残差预测
US10334259B2 (en) 2012-12-07 2019-06-25 Qualcomm Incorporated Advanced residual prediction in scalable and multi-view video coding
CN108337513A (zh) * 2017-01-20 2018-07-27 浙江大学 一种帧内预测像素生成方法和装置
CN112673628A (zh) * 2018-09-19 2021-04-16 富士通株式会社 影像编码装置、影像编码方法、影像编码程序、影像解码装置、影像解码方法和影像解码程序
CN112673628B (zh) * 2018-09-19 2024-03-26 富士通株式会社 影像编码装置及方法、影像解码装置及方法、记录介质

Also Published As

Publication number Publication date
DE112010004586T5 (de) 2012-11-22
US9100664B2 (en) 2015-08-04
US20120300840A1 (en) 2012-11-29
WO2011064990A1 (ja) 2011-06-03
JP2011114572A (ja) 2011-06-09
CN102640496B (zh) 2015-08-19
JP5321426B2 (ja) 2013-10-23

Similar Documents

Publication Publication Date Title
CN102640496A (zh) 图像编码装置、图像解码装置、图像编码方法及图像解码方法
KR102073638B1 (ko) 픽처 예측 방법 및 픽처 예측 장치
CN103647972B (zh) 运动图像解码方法和运动图像编码方法
CN103024382B (zh) 动态图像编码装置、方法以及动态图像解码装置、方法
US20230254508A1 (en) Intra-Prediction Mode Concept for Block-Wise Picture Coding
CN104967857B (zh) 对图像进行编码/解码的方法和设备
RU2559738C2 (ru) Способ и устройство для кодирования/декодирования вектора движения
KR102252816B1 (ko) 부호화유닛 심도 확정 방법 및 장치
CN106878741B (zh) 预测解码方法
CN101218829A (zh) 动态图像编码装置、动态图像编码方法、动态图像编码程序、动态图像解码装置、动态图像解码方法以及动态图像解码程序
CN103430545A (zh) 用于高效视频编码的内容适应性运动补偿滤波
CN102263947A (zh) 图像运动估计的方法及系统
JP7330243B2 (ja) 低減されたメモリアクセスを用いてfrucモードでビデオデータを符号化又は復号する方法及び装置
CN102714736A (zh) 基于减少的运动矢量预测候选对运动矢量进行编码和解码的方法和设备
CN102291581B (zh) 支持帧场自适应运动估计的实现方法
KR20180037042A (ko) 모션 벡터 필드 코딩 방법 및 디코딩 방법, 및 코딩 및 디코딩 장치들
CN105025298B (zh) 对图像进行编码/解码的方法和设备
TW202002638A (zh) 子塊的邊界增強
CN103430546A (zh) 视频编码装置、视频编码方法以及视频编码程序
CN114467305A (zh) 自适应分辨率管理预测重缩放
CN104380736A (zh) 动态图像预测编码装置、动态图像预测编码方法、动态图像预测编码程序、动态图像预测解码装置、动态图像预测解码方法、动态图像预测解码程序
CN105706447B (zh) 动画图像编码设备、动画图像解码设备、动画图像编码方法以及动画图像解码方法
CN113099241A (zh) 参考帧列表更新方法、装置、设备以及存储介质
CN105025299B (zh) 对图像进行编码/解码的方法和设备
CN104253997A (zh) 框内预测方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant