CN102595124A - 图像编码解码方法、处理图像数据方法及其设备 - Google Patents

图像编码解码方法、处理图像数据方法及其设备 Download PDF

Info

Publication number
CN102595124A
CN102595124A CN2011100081861A CN201110008186A CN102595124A CN 102595124 A CN102595124 A CN 102595124A CN 2011100081861 A CN2011100081861 A CN 2011100081861A CN 201110008186 A CN201110008186 A CN 201110008186A CN 102595124 A CN102595124 A CN 102595124A
Authority
CN
China
Prior art keywords
adjacent
coded
inter
intra
view data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011100081861A
Other languages
English (en)
Other versions
CN102595124B (zh
Inventor
赖昌材
林永兵
郑萧桢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to CN201410367697.6A priority Critical patent/CN104125457B/zh
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201110008186.1A priority patent/CN102595124B/zh
Priority to CN201410366452.1A priority patent/CN104113753B/zh
Priority to KR1020137019521A priority patent/KR101503763B1/ko
Priority to MYPI2013002617A priority patent/MY164248A/en
Priority to SG2013052733A priority patent/SG191905A1/en
Priority to PCT/CN2012/070404 priority patent/WO2012095036A1/zh
Priority to EP12733974.5A priority patent/EP2651131A4/en
Priority to BR112013018073-0A priority patent/BR112013018073B1/pt
Priority to RU2013137851/08A priority patent/RU2571514C2/ru
Priority to AU2012206839A priority patent/AU2012206839B2/en
Priority to JP2013548735A priority patent/JP5819985B2/ja
Priority to CA2824473A priority patent/CA2824473C/en
Priority to SG10201600286WA priority patent/SG10201600286WA/en
Publication of CN102595124A publication Critical patent/CN102595124A/zh
Priority to US13/938,853 priority patent/US9485504B2/en
Application granted granted Critical
Publication of CN102595124B publication Critical patent/CN102595124B/zh
Priority to JP2015195749A priority patent/JP6023298B2/ja
Priority to US15/278,469 priority patent/US9979965B2/en
Priority to JP2016197022A priority patent/JP6629163B2/ja
Priority to US15/958,171 priority patent/US10264254B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/107Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience

Abstract

本发明公开了一种图像编码方法、图像解码方法、处理图像数据方法及其设备。本发明的图像编码方法包括:确定当前帧间编码帧中采用约束帧内预测方式的当前帧内编码块;确定与该当前帧内编码块相邻的相邻编码块包括相邻帧间编码块;基于固定值或该相邻编码块包括的相邻帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理;基于该相邻帧间编码块中已更新的图像数据,对该当前帧内编码块进行编码。本发明的用于图像编码的设备包括:第一确定模块、第二确定模块、更新模块和编码模块。采用本发明的方法和设备能够提高帧内编码块的差错恢复能力,提高图像数据解码质量。

Description

图像编码解码方法、处理图像数据方法及其设备
技术领域
本发明涉及通信领域,特别涉及通信领域中图像编码方法、图像解码方法、处理图像数据方法及其设备。
背景技术
视频数据在有线网络和无线网络中的误码或丢包是不可避免的,特别是在无线网络中尤为突出。而经变长编码等工具高效压缩后的视频数据在语义上具有很大的相关性,由此视频数据对误码及丢包等网络差错非常敏感,一旦视频数据中有误码产生,则不仅影响当前视频数据的恢复,还会在时间和空间域上造成误码扩散,并且视频数据的预测编码也使得某一帧的差错对后续帧有差错累积的效应。因此,有必要采用相应的措施来提高视频数据的抗误码能力,特别是在一些视频帧已经发生传输差错的情况下,需要让视频内容尽快地从错误中恢复过来,从而能够给用户比较好的主观体验。
帧内刷新方法是一种比较简单而有效的差错恢复方法,例如I帧刷新法、基于随机或错误跟踪的I块刷新方法,自适应帧内宏块刷新等。I帧采用帧内(INTRA)编码方式进行编码,由此也可称为帧内编码帧,该I帧无需参考其他帧,该帧经过适度地压缩做为随机访问的参考点,也可以当成图象。由于刷新整个I帧将导致码流中突然出现码率较大的帧,这会对系统造成较强的码流冲击,因此实际中大多采用部分刷新帧中的编码块的方式对帧进行刷新。
视频帧中的P帧采用帧间(INTER)编码方式进行编码,由此该P帧也可以称为帧间编码帧。由于P帧的帧间预测需要参考之前的P帧,因此当某个P帧出现传输差错时,该错误将传递到后续的P帧中,从而造成后续P帧的解码质量严重下降。因而,为了避免解码质量下降,可以在P帧中定义帧内刷新帧(Intra Refresh Frame,简称为“IR”帧),其中该IR帧中的部分或全部编码块采用帧内编码方式进行编码,采用帧内编码的编码块也可称为帧内刷新块。由此,IR帧中的帧内编码块(帧内刷新块)将不会直接参考IR帧之前的P帧进行编码,而是参考该帧的相邻编码块,使用帧内编码方式进行编码。
但是,如果某个帧内编码块的相邻编码块是帧间编码块时,由于该帧间编码块仍然参考之前的P帧,因此该帧间编码块也可能从前面的参考帧中累积一些传输差错,并将该差错传递给用于刷新的帧内编码块,使得帧内编码块也受传输差错的不良影响,从而极大地降低了帧内刷新方法应具有的差错恢复能力,影响诸如视频等图像数据的解码质量。
发明内容
为此,本发明实施例提供一种图像编码方法、图像解码方法、处理图像数据方法及其设备,通过对相邻的帧间编码块中的图像数据进行更新处理,并采用更新后的图像数据对当前帧内编码块进行编码或解码,从而能够提高帧内编码块的差错恢复能力,提高图像数据解码质量。
一方面,本发明实施例提供了一种图像编码的方法,该方法包括:确定当前帧间编码帧中采用约束帧内预测方式的当前帧内编码块;确定与该当前帧内编码块相邻的相邻编码块包括相邻帧间编码块;基于固定值或该相邻编码块包括的相邻帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理;基于该相邻帧间编码块中已更新的图像数据,对该当前帧内编码块进行编码。
另一方面,本发明实施例还提供了一种图像解码的方法,该方法包括:确定当前帧间编码帧中采用约束帧内预测方式的当前帧内编码块;确定与该当前帧内编码块相邻的相邻编码块包括相邻帧间编码块;基于固定值或该相邻编码块包括的相邻帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理;基于该相邻帧间编码块中已更新的图像数据,对该当前帧内编码块进行解码。
再一方面,本发明实施例还提供了一种处理图像数据的方法,该方法包括:确定当前编码对象中的所有编码块采用约束帧内预测方式;在与当前帧内编码块相邻的相邻编码块中,确定与该当前帧内编码块属于不同编码对象的特定相邻编码块;确定该特定相邻编码块是采用帧间编码方式进行编码的相邻帧间编码块;基于固定值或该相邻编码块包括的相邻帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理;基于该相邻帧间编码块中已更新的图像数据,对该当前帧内编码块进行编码或解码。
再一方面,本发明实施例还提供了一种用于图像编码的设备,该设备包括:第一确定模块,用于确定当前帧间编码帧中采用约束帧内预测方式的当前帧内编码块;第二确定模块,用于确定与该当前帧内编码块相邻的相邻编码块包括相邻帧间编码块;更新模块,用于基于固定值或该相邻编码块包括的相邻帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理;编码模块,用于基于该相邻帧间编码块中已更新的图像数据,对该当前帧内编码块进行编码。
再一方面,本发明实施例还提供了一种用于图像解码的设备,该设备包括:第一确定模块,用于确定当前帧间编码帧中采用约束帧内预测方式的当前帧内编码块;第二确定模块,用于确定与该当前帧内编码块相邻的相邻编码块包括相邻帧间编码块;更新模块,用于基于固定值或该相邻编码块包括的相邻帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理;解码模块,用于基于该相邻帧间编码块中已更新的图像数据,对该当前帧内编码块进行解码。
再一方面,本发明实施例还提供了一种处理图像数据的设备,该设备包括:第一确定模块,用于确定当前编码对象中的所有编码块采用约束帧内预测方式;第二确定模块,用于在与当前帧内编码块相邻的相邻编码块中,确定与该当前帧内编码块属于不同编码对象的特定相邻编码块;第三确定模块,用于确定该特定相邻编码块是采用帧间编码方式进行编码的相邻帧间编码块;更新模块,用于基于固定值或该相邻编码块包括的相邻帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理;编码解码模块,用于基于该相邻帧间编码块中已更新的图像数据,对该当前帧内编码块进行编码或解码。
基于上述技术方案,本发明实施例的方法和设备通过对相邻的帧间编码块中的图像数据进行更新处理,并采用更新后的图像数据对当前帧内编码块进行编码或解码,使得被帧内编码块参考的帧间编码块不会将差错累积传递给该帧内编码块,从而能够提高帧内编码块的差错恢复能力,提高图像数据解码质量。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例中所需要使用的附图作简单地介绍,显而易见地,下面所描述的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例应用场景的示意图;
图2是根据本发明实施例的图像编码方法的示意图;
图3是根据本发明另一实施例的更新处理的示意图;
图4中的图(a)至图(c)是根据本发明再一实施例的更新处理的示意图;
图5是根据本发明实施例的图像解码方法的示意图;
图6是根据本发明实施例的处理图像数据方法的示意图;
图7是根据本发明实施例的用于图像编码的设备的方框图;
图8是根据本发明另一实施例的用于图像编码的设备的方框图;
图9是根据本发明实施例的用于图像解码的设备的方框图;
图10是根据本发明另一实施例的用于图像解码的设备的方框图;
图11是根据本发明实施例的用于处理图像数据设备的方框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都应属于本发明保护的范围。
图1示出了本发明实施例应用的场景。如图1所示,视频帧可以包括帧内编码帧(如图1中的I帧所示)和帧间编码帧(如图1中的P帧所示),该帧内编码帧和帧间编码帧又可以划分成多个编码块,其中帧内编码帧中的所有编码块都是帧内编码块,而帧间编码帧中的编码块既可以包括帧内编码块,又可以包括帧间编码块,其中帧内编码帧和帧内编码块采用帧内编码方式进行编码或解码,而帧间编码帧和帧间编码块采用帧间编码方式进行编码或解码。
为了避免传输差错的累积,从而保证图像数据解码质量,可以在帧间编码帧中定义一些帧内刷新帧(如图1中的IR帧所示),强制该帧内刷新帧中的一些编码块采用帧内编码方式进行编码或解码,这些编码块属于帧内编码块,同时也可以称为帧内刷新块。当帧内编码块的相邻编码块是帧间编码块时,该帧间编码块可能已经累积一些传输差错,如果直接参考这些帧间编码块,可能使得帧内编码块也受到传输差错的影响,从而难以保证帧内刷新方法应具有的差错恢复能力。如图1所示,帧内编码块E的相邻块A和B是具有传输差错的错误块,为了避免传输差错的累积,需要根据本发明实施例对该帧内编码块的参考特征进行限制。
图2示出了根据本发明实施例的图像编码方法的示意图。如图2所示,该方法包括:
在S110中,确定当前帧间编码帧中采用约束帧内预测方式的当前帧内编码块,其中该约束帧内预测方式是指:在进行帧内编码块的编码、解码或预测时,该帧内编码块的参考数据只能来自于与该帧内编码块相邻的帧内编码块的图像数据,或者默认的缺省值(或固定值),而不能来自于相邻的帧间编码块的图像数据。
在S120中,确定与该当前帧内编码块相邻的相邻编码块包括相邻帧间编码块,其中相邻编码块是与当前帧内编码块相邻或相连接的编码块,对于当前帧内编码块而言,其相邻编码块通常可以包括左相邻编码块、上相邻编码块、左下相邻编码块和右上相邻编码块。当然,本领域技术人员还可以想到该相邻编码块还可以包括右相邻编码块、下相邻编码块、左上相邻编码块和右下相邻编码块。
在S130中,基于固定值或该相邻编码块包括的相邻帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理。
在S140中,基于该相邻帧间编码块中已更新的图像数据,对该当前帧内编码块进行编码。
对于当前帧间编码帧的当前编码块,判断该当前编码块是否是采用帧内编码方式进行编码的帧内编码块,并且判断该当前编码块是否使用约束帧内预测方式进行预测、编码或解码,如果确定当前编码块是采用约束帧内预测方式的当前帧内编码块,那么进一步对该当前帧内编码块的相邻编码块的编码方式进行判断。如果该相邻编码块中包括帧间编码块,则此时该帧间编码块不能作为当前帧内编码块的参考编码块,即在帧内预测时,不能使用该帧间编码块中的图像数据对当前帧内编码块进行预测。为此,在进行帧内预测前,可以基于固定值或相邻编码块包括的相邻帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理。之后,基于该相邻帧间编码块中已更新的图像数据,可以对当前帧内编码块进行编码。
更新处理之后,该帧间编码块中的待参考图像数据可以按通常方法被参考,其中该待参考图像数据是指在对当前帧内编码块进行预测时,可能使用到的相邻块中的像素。由于该帧间编码块的图像数据经过更新处理,其中的待参考图像数据已不是帧间编码块中的可能带有传输差错的像素,由此可以作为当前帧内编码块参考的像素,从而保证当前帧内编码块不会参考相邻帧间编码块中的图像数据,由此能够阻止传输差错传递到当前帧内编码块中。
根据本发明实施例的方法,通过对相邻的帧间编码块中的图像数据进行更新处理,并采用更新后的图像数据对当前帧内编码块进行编码或解码,使得被帧内编码块参考的帧间编码块不会将差错累积传递给该帧内编码块,从而能够提高帧内编码块的差错恢复能力,提高图像数据解码质量。
在本发明实施例中,可以首先判断该当前编码块是否是帧内编码块,如果当前编码块是帧间编码块,则结束当前图像数据处理流程,对当前帧间编码帧中的下一编码块进行后续处理。当确定当前编码块是帧内编码块时,进一步判断当前帧内编码块是否使用约束帧内预测方式进行预测,如果不是则不必进行后续的更新处理,当前流程结束。可选地,也可以首先判断当前编码块是否使用约束帧内预测方式进行预测,并且在确定当前编码块采用约束帧内预测方式时,对当前编码块的编码方式进行判断。本领域技术人员还可以想到的是同时判断当前编码块的编码方式以及是否采用约束帧内预测方式进行预测、编码或解码。
在本发明实施例中,解码时可以通过码流中的标识符对当前编码帧的编码方式进行判断,以确定当前编码帧是否是帧间编码帧;编码时则可以通过编码参数和编码过程,对当前编码帧是否是帧间编码帧进行判断。类似地,对于判断编码块的编码方式而言,每个编码块可具有表示该编码块的编码方式的标识符,解码时可以根据码流中与当前编码块相应的编码方式标识符,确定当前编码块是否是采用帧内编码方式进行编码;解码时也可以通过编码参数和编码过程来确定当前编码块是否是帧内编码块。本领域技术人员可以理解的是,还可以采用本领域公知的其他方法对编码帧和编码块的编码方式进行判断。
在本发明实施例中,可以根据码流中的约束帧内预测标志(ConstrainedIntra Prediction Flag),确定当前编码块是否是采用约束帧内预测方式进行编码或解码。例如,当约束帧内预测标志为1时,则表明当前编码块采用约束帧内预测方式进行预测、编码或解码;当约束帧内预测标志为0时,则表明当前编码块没有采用约束帧内预测方式进行预测、编码或解码。本领域技术人员可以理解的是,还可以采用本领域公知的其他方法对约束帧内预测方式进行判断。
图3以高效率视频编码(High Efficiency Video Coding,简称为“HEVC”)的分层块为例,示出了根据本发明实施例的更新处理的示意图。在对相邻帧间编码块中的图像数据进行更新处理时,可以对该相邻帧间编码块中的所有图像数据进行更新,可选地,可以仅对相邻帧间编码块中与当前帧内编码块相邻的一行或一列像素数据进行更新处理。本领域技术人员可以理解的是,也可以对相邻帧间编码块中的多行或多列像素数据进行更新处理。
在本发明实施例中,在对相邻帧间编码块中的图像数据进行更新处理时,可以首先确定该相邻编码块还包括至少一个相邻帧内编码块,即当前帧内编码块的相邻编码块同时包括帧间编码块和帧内编码块。此时可以在该至少一个相邻帧内编码块中,确定与该当前相邻帧间编码块最邻近的相邻帧内编码块,并基于该最相邻的帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理。可选地,可以将该最相邻的帧内编码块中离该相邻帧间编码块最近的像素值填充到该相邻帧间编码块中。
如图4中的图(a)所示,当前帧内编码块E包括四个相邻编码块,即左上相邻编码块A、上相邻编码块B、右上相邻编码块C和左相邻编码块D,其中仅右上相邻编码块C确定为相邻的帧内编码块。以对相邻帧间编码块B中的图像数据进行更新处理为例进行说明,该四个相邻编码块中仅右上相邻编码块C是帧内编码块,此时可以将右上相邻编码块C中离该相邻帧间编码块B最近的像素值填充到该相邻帧间编码块B中。可选地,可以将该像素值填充到相邻帧间编码块B中与当前帧内编码块E相邻的一行像素中,如图4中的图(a)所示。
当相邻编码块中包括多个帧内编码块时,如图4中的图(b)所示,右上相邻编码块C以及左相邻编码块D都为相邻的帧内编码块,此时对相邻帧间编码块B中的图像数据进行更新处理时,可以确定左相邻编码块D距离相邻帧间编码块B最近,由此可以将相邻帧间编码块B中的图像数据更新为左相邻编码块D中的图像数据。
在本发明另一实施例中,在确定相邻编码块包括至少两个相邻帧内编码块时,可以基于该至少两个相邻帧内编码块中的图像数据,通过对该至少两个相邻帧内编码块与该当前帧内编码块的距离进行加权平均的方式,对该相邻帧间编码块中的图像数据进行更新处理。
以图4中的图(c)为例进行说明,相邻帧间编码块B的两侧都有相邻帧内编码块,即左上相邻编码块A以及右上相邻编码块C。假设左上相邻编码块A和右上相邻编码块C中,离该相邻帧间编码块B最近处的像素值分别为Pr和P1,并且与该相邻帧间编码块B的当前像素的最近距离分别为a和b,则可以将像素值R填充到相邻帧间编码块B内相应的当前像素中,其中该像素值R可以用公式(1)表示:
R=(Pr×a+Pl×b)/(a+b)    (1)
在本发明再一实施例中,在对相邻帧间编码块中的图像数据进行更新处理时,在确定所有相邻编码块都是帧间编码块时,可以将该相邻帧间编码块中的图像数据更新为一固定值,例如128或其他固定值。可选地,也可以在确定相邻编码块包括相邻帧间编码块之后,直接将所有相邻编码块中的图像数据都更新为一固定值,而不论该相邻编码块是否包括相邻帧内编码块。
对于经过处理后的相邻帧间编码块,由于其待参考的图像数据来自于一固定值或相邻帧内编码块,因此,经过更新处理的相邻帧间编码块可以作为当前帧内编码块的参考编码块。并且,该相邻帧间编码块可以看做是帧内编码块。另一方面,在对其它的相邻帧间编码块的图像数据进行更新处理时,该相邻帧间编码块中更新过的图像数据,可以按照上述方法填充到其他相邻帧间编码块中。
根据本发明实施例的方法,通过对相邻的帧间编码块中的图像数据进行更新处理,并采用更新后的图像数据对当前帧内编码块进行编码或解码,使得被帧内编码块参考的帧间编码块不会将差错累积传递给该帧内编码块,从而能够提高帧内编码块的差错恢复能力,提高图像数据解码质量;并且由于帧内编码块可以参考相邻编码块的图像数据,由此根据本发明实施例的方法还能够提高该帧内编码块的编码或解码效率。
图5示出了根据本发明实施例的图像解码方法的示意图。如图5所示,该方法包括:
在S210中,确定当前帧间编码帧中采用约束帧内预测方式的当前帧内编码块,其中该约束帧内预测方式是指:在进行帧内编码块的编码、解码或预测时,该帧内编码块的参考数据只能来自于与该帧内编码块相邻的帧内编码块的图像数据,或者默认的缺省值(或固定值),而不能来自于相邻的帧间编码块的图像数据。
在S220中,确定与该当前帧内编码块相邻的相邻编码块包括相邻帧间编码块,其中相邻编码块是与当前帧内编码块相邻或相连接的编码块,对于当前帧内编码块而言,其相邻编码块通常可以包括左相邻编码块、上相邻编码块、左下相邻编码块和右上相邻编码块。当然,本领域技术人员还可以想到该相邻编码块还可以包括右相邻编码块、下相邻编码块、左上相邻编码块和右下相邻编码块。
在S230中,基于固定值或该相邻编码块包括的相邻帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理。
在S240中,基于该相邻帧间编码块中已更新的图像数据,对该当前帧内编码块进行解码。
在本发明实施例中,可以根据码流中与当前帧间编码帧的当前编码块相应的编码方式标识符,确定当前编码块采用帧内编码方式进行编码。可选地,可以根据码流中的约束帧内预测标志,确定当前编码块采用约束帧内预测方式进行解码。可选地,可以仅对相邻帧间编码块中与当前帧内编码块相邻的一行或一列像素数据进行更新处理。本领域技术人员可以理解的是,也可以对相邻帧间编码块中的多行或多列像素数据进行更新处理。
在本发明实施例中,也可以采用如图3至图4的各种更新处理方法,对相邻帧间编码块中的图像数据进行更新,为了简洁不再赘述。
根据本发明实施例的方法,通过对相邻的帧间编码块中的图像数据进行更新处理,并采用更新后的图像数据对当前帧内编码块进行编码或解码,使得被帧内编码块参考的帧间编码块不会将差错累积传递给该帧内编码块,从而能够提高帧内编码块的差错恢复能力,提高图像数据解码质量和效率。
下面分别描述应用本发明实施例的方法的编码流程和解码流程。
在编码流程中,可以首先根据编码参数和编码过程,判断当前编码块的编码方式,如果当前编码块是帧间编码帧中采用帧内编码方式进行编码的帧内编码块,则例如可以根据码流中的约束帧内预测标志,判断该当前编码块是否采用约束帧内预测方式进行预测。对于使用约束帧内预测方式的当前帧内编码块,再判断其相邻编码块的编码方式。在确定相邻编码块包括相邻帧间编码块时,可以基于固定值或相邻编码块包括的相邻帧内编码块中的图像数据,对该帧间编码块中的待参考像素数据进行更新处理。接着可以对当前帧内编码块进行帧内预测并得到残差数据,然后对残差数据进行变换、量化得到量化系数,最后可以对该量化系数进行熵编码。
在解码流程中,可以首先解析码流,得到当前帧间编码帧中的解码块的预测编码方式以及量化系数,例如可以根据码流中与当前编码块相应的编码方式标识符,确定当前编码块是否采用帧内编码方式进行编码。如果当前块是帧内编码块,则判断当前帧内编码块是否使用约束帧内预测方式进行预测、编码或解码。对于使用约束帧内预测的当前帧内编码块,再判断其相邻编码块的编码类型。在确定相邻编码块包括相邻帧间编码块时,可以基于固定值或相邻编码块包括的相邻帧内编码块中的图像数据,对该帧间编码块中的待参考像素数据进行更新处理。接着对当前帧内编码块进行帧内预测,得到预测数据;并对量化系数进行反量化,以及对反量化后的系数进行反变换,得到残差数据。最后可以根据得到的残差数据以及预测数据,重构得到解码图像。
根据本发明实施例的方法不仅可以应用于现有的视频编解码标准中,例如H.264、先进视频编码(Advanced Video Coding,简称为“AVC”)标准、音视频标准(Audio Video Standard,简称为“AVS”),还可以应用于正在制定的HEVC标准中。
下面将以根据本发明实施例的图像编码方法在HEVC标准中的应用为例进行详细描述。该HEVC标准中的分层块结构可以如图3所示,在HEVC标准中,编码对象的最大单位可以达到64×64,甚至可以达到更大的单位。因此,帧内刷新块(INTRA刷新块)的左或者上相邻编码块可能包括多个相邻编码块,而在这多个相邻编码块中,可能既有帧内编码块,又有帧间编码块,与H.264/AVC标准不同。在H.264/AVC标准中,由于H.264/AVC中的编码块类型是以16×16的编码块为单位,因此帧内刷新块在某个边上的相邻编码块只有一个,该相邻编码块要么是帧内编码块,要么就是帧间编码块。
在HEVC标准中,帧内刷新可以在64×64的最大单位的编码对象内部进行,即在一个64x64的编码对象内部,可以选择一部分编码块进行帧内编码。例如,当编码对象的最大划分是64×64时,如果在当前的编码对象上进行刷新,则当前64×64编码对象中的所有编码块,都按照帧内编码方式进行编码。此时,对于64×64编码对象中的所有编码块,不需要标识当前编码块使用帧间编码方式还是帧内编码方式进行编码,而是默认为该64×64的编码对象中的所有编码块都使用帧内编码方式进行编码。由此,仅需要在64×64的编码对象中,例如用一个比特的符号来标识当前64×64的编码对象是否使用帧内刷新方式进行编码。
在对相邻编码块的参考图像数据进行处理时,仍然可以采用类似于前述实施例中的方法进行。区别仅在于,如果当前帧内编码块的相邻编码块与当前帧内编码块属于同一个编码对象,那么该相邻编码块一定也是帧内编码块,此时不需要进行参考图像数据的更新处理,该相邻编码块的像素数据可以被参考。
另一方面,如果相邻编码块与当前帧内编码块不在同一个编码对象内,并且确定该相邻编码块采用帧间编码方式进行编码或解码,那么需要对该相邻帧间编码块中的图像数据进行更新处理。
如图6所示,应用于HEVC标准的处理图像数据的方法包括:
在S310中,确定当前编码对象中的所有编码块采用约束帧内预测方式,其中可以根据码流中的约束帧内预测标志,例如该约束帧内预测标志为1,由此确定该编码对象中的所有帧内编码块采用约束帧内预测方式进行编码或解码。
在S320中,在与当前帧内编码块相邻的相邻编码块中,确定与当前帧内编码块属于不同编码对象的特定相邻编码块。
在S330中,确定该特定相邻编码块是采用帧间编码方式进行编码的相邻帧间编码块。
在S340中,基于固定值或该相邻编码块包括的相邻帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理,其中可以根据图3和4所示的方法进行图像数据的更新处理。
在S350中,基于该相邻帧间编码块中已更新的图像数据,对该当前帧内编码块进行编码或解码。
根据本发明实施例的方法,通过对相邻的帧间编码块中的图像数据进行更新处理,并采用更新后的图像数据对当前帧内编码块进行编码或解码,使得被帧内编码块参考的帧间编码块不会将差错累积传递给该帧内编码块,从而能够提高帧内编码块的差错恢复能力,提高图像数据解码质量和效率。
本领域技术人员可理解,根据图2至图5的各种替换或变型也可以应用于根据图6所示的方法,为了简洁不再赘述。
下面将结合附图描述根据本发明实施例的用于编码、解码和处理图像数据的设备。
图7示出了根据本发明实施例的用于图像编码的设备的方框图。如图7所示,用于图像解码的设备500包括第一确定模块510、第二确定模块520、更新模块530和编码模块540,其中:
第一确定模块510,用于确定当前帧间编码帧中采用约束帧内预测方式的当前帧内编码块;
第二确定模块520,用于确定与该当前帧内编码块相邻的相邻编码块包括相邻帧间编码块;
更新模块530,用于基于固定值或该相邻编码块包括的相邻帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理;
编码解码模块540,用于基于该相邻帧间编码块中已更新的图像数据,对该当前帧内编码块进行编码。
可选地,如图8所示,用于图像解码的设备600包括第一确定模块610、第二确定模块620、更新模块630和编码模块640,其中该更新模块630还可以包括下列单元或单元组合中的一种或多种:第一确定单元631和第一更新单元632;第二确定单元633和第二更新单元634;第三更新单元635;以及第四更新单元636,其中:
第一确定单元631,用于确定该相邻编码块还包括至少一个相邻帧内编码块;
第一更新单元632,用于基于与该相邻帧间编码块最相邻的该相邻帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理;
第二确定单元633,用于确定该相邻编码块还包括至少两个相邻帧内编码块;
第二更新单元634,用于基于该至少两个相邻帧内编码块中的图像数据,通过对该至少两个相邻帧内编码块与该当前帧内编码块的距离进行加权平均的方式,对该相邻帧间编码块中的图像数据进行更新处理;
第三更新单元635,用于在确定所有该相邻编码块都是帧间编码块时,将该相邻帧间编码块中的图像数据更新为一固定值;
第四更新单元636,用于将所有该相邻编码块中的图像数据更新为一固定值。
用于处理图像数据的设备600的第一确定模块610、第二确定模块620和编码模块640,与处理图像数据的设备500的第一确定模块510、第二确定模块520和编码模块540相类似,并且处理图像数据的设备500和600的上述和其他操作和/或功能都分别为了实现图2至图5中的各个方法的相应流程,为了简洁,在此不再赘述。
根据本发明实施例的用于图像解码的设备,通过对相邻的帧间编码块中的图像数据进行更新处理,并采用更新后的图像数据对当前帧内编码块进行编码或解码,使得被帧内编码块参考的帧间编码块不会将差错累积传递给该帧内编码块,从而能够提高帧内编码块的差错恢复能力,提高图像数据解码质量和效率。
图9示出了根据本发明实施例的用于解码的设备的方框图。如图9所示,用于图像解码的设备700包括第一确定模块710、第二确定模块720、更新模块730和解码模块740,其中:
第一确定模块710,用于确定当前帧间编码帧中采用约束帧内预测方式的当前帧内编码块;
第二确定模块720,用于确定与该当前帧内编码块相邻的相邻编码块包括相邻帧间编码块;
更新模块730,用于基于固定值或该相邻编码块包括的相邻帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理;
编码解码模块740,用于基于该相邻帧间编码块中已更新的图像数据,对该当前帧内编码块进行解码。
可选地,如图10所示,用于解码的设备800包括第一确定模块810、第二确定模块820、更新模块830和解码模块840,其中该更新模块830还可以包括下列单元或单元组合中的一种或多种:第一确定单元831和第一更新单元832;第二确定单元833和第二更新单元834;第三更新单元835;以及第四更新单元836,其中该更新模块830所包括的各单元与用于图像解码的设备600的更新模块630相类似,并且用于解码的设备700和800的上述和其他操作和/或功能都分别为了实现图2至图5中的各个方法的相应流程,为了简洁,在此不再赘述。
根据本发明实施例的用于解码的设备,通过对相邻的帧间编码块中的图像数据进行更新处理,并采用更新后的图像数据对当前帧内编码块进行编码或解码,使得被帧内编码块参考的帧间编码块不会将差错累积传递给该帧内编码块,从而能够提高帧内编码块的差错恢复能力,提高图像数据解码质量和效率。
图11示出了根据本发明实施例的用于处理图像数据设备的方框图。如图11所示,用于处理图像数据的设备900包括:
第一确定模块910,用于确定当前编码对象中的所有编码块采用约束帧内预测方式;
第二确定模块920,用于在与当前帧内编码块相邻的相邻编码块中,确定与当前帧内编码块属于不同编码对象的特定相邻编码块;
第三确定模块930,用于确定该特定相邻编码块是采用帧间编码方式进行编码的相邻帧间编码块;
更新模块940,用于基于固定值或该相邻编码块包括的相邻帧内编码块中的图像数据,对该相邻帧间编码块中的图像数据进行更新处理;
编码解码模块950,用于基于该相邻帧间编码块中已更新的图像数据,对该当前帧内编码块进行编码或解码。
可选地,该更新模块940还可以包括下列单元或单元组合中的一种或多种:第一确定单元941和第一更新单元942;第二确定单元943和第二更新单元944;第三更新单元945;以及第四更新单元946,这些单元与更新模块630或更新模块830的各单元相类似,并且用于处理图像数据的设备900的上述和其他操作和/或功能都分别为了实现图6中的各个更新方法的相应流程,为了简洁,在此不再赘述。
根据本发明实施例的用于处理图像数据的设备,通过对相邻的帧间编码块中的图像数据进行更新处理,并采用更新后的图像数据对当前帧内编码块进行编码或解码,使得被帧内编码块参考的帧间编码块不会将差错累积传递给该帧内编码块,从而能够提高帧内编码块的差错恢复能力,提高图像数据解码质量和效率。
本领域普通技术人员可以意识到,结合本文中所公开的实施例中描述的各方法步骤和单元,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各实施例的步骤及组成。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。本领域普通技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或步骤可以用硬件、处理器执行的软件程序,或者二者的结合来实施。软件程序可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
尽管通过参考附图并结合优选实施例的方式对本发明进行了详细描述,但本发明并不限于此。在不脱离本发明的精神和实质的前提下,本领域普通技术人员可以对本发明的实施例进行各种等效的修改或替换,而这些修改或替换都应在本发明的涵盖范围内。

Claims (37)

1.一种图像编码的方法,其特征在于,所述方法包括:
确定当前帧间编码帧中采用约束帧内预测方式的当前帧内编码块;
确定与所述当前帧内编码块相邻的相邻编码块包括相邻帧间编码块;
基于固定值或所述相邻编码块包括的相邻帧内编码块中的图像数据,对所述相邻帧间编码块中的图像数据进行更新处理;
基于所述相邻帧间编码块中已更新的图像数据,对所述当前帧内编码块进行编码。
2.根据权利要求1所述的方法,其特征在于,根据码流中的约束帧内预测标志,确定所述当前编码块采用约束帧内预测方式进行编码。
3.根据权利要求1所述的方法,其特征在于,所述对所述相邻帧间编码块中的图像数据进行更新处理,包括:
对所述相邻帧间编码块中与所述当前帧内编码块相邻的一行或一列像素数据进行更新处理。
4.根据权利要求1至3中任一项所述的方法,其特征在于,所述对所述相邻帧间编码块中的图像数据进行更新处理,包括:
确定所述相邻编码块还包括至少一个相邻帧内编码块;
基于与所述相邻帧间编码块最相邻的所述相邻帧内编码块中的图像数据,对所述相邻帧间编码块中的图像数据进行更新处理。
5.根据权利要求1至3中任一项所述的方法,其特征在于,所述对所述相邻帧间编码块中的图像数据进行更新处理,包括:
确定所述相邻编码块还包括至少两个相邻帧内编码块;
基于所述至少两个相邻帧内编码块中的图像数据,通过对所述至少两个相邻帧内编码块与所述当前帧内编码块的距离进行加权平均的方式,对所述相邻帧间编码块中的图像数据进行更新处理。
6.根据权利要求1至3中任一项所述的方法,其特征在于,所述对所述相邻帧间编码块中的图像数据进行更新处理,包括:
在确定所有所述相邻编码块都是帧间编码块时,将所述相邻帧间编码块中的图像数据更新为一固定值。
7.根据权利要求1至3中任一项所述的方法,其特征在于,所述对所述相邻帧间编码块中的图像数据进行更新处理,包括:
将所有所述相邻编码块中的图像数据更新为一固定值。
8.一种图像解码的方法,其特征在于,所述方法包括:
确定当前帧间编码帧中采用约束帧内预测方式的当前帧内编码块;
确定与所述当前帧内编码块相邻的相邻编码块包括相邻帧间编码块;
基于固定值或所述相邻编码块包括的相邻帧内编码块中的图像数据,对所述相邻帧间编码块中的图像数据进行更新处理;
基于所述相邻帧间编码块中已更新的图像数据,对所述当前帧内编码块进行解码。
9.根据权利要求8所述的方法,其特征在于,根据码流中与所述当前帧间编码帧的当前编码块相应的编码方式标识符,确定所述当前编码块采用帧内编码方式进行编码。
10.根据权利要求8所述的方法,其特征在于,根据码流中的约束帧内预测标志,确定所述当前编码块采用约束帧内预测方式进行解码。
11.根据权利要求8所述的方法,其特征在于,所述对所述相邻帧间编码块中的图像数据进行更新处理,包括:
对所述相邻帧间编码块中与所述当前帧内编码块相邻的一行或一列像素数据进行更新处理。
12.根据权利要求8至11中任一项所述的方法,其特征在于,所述对所述相邻帧间编码块中的图像数据进行更新处理,包括:
确定所述相邻编码块还包括至少一个相邻帧内编码块;
基于与所述相邻帧间编码块最相邻的所述相邻帧内编码块中的图像数据,对所述相邻帧间编码块中的图像数据进行更新处理。
13.根据权利要求8至11中任一项所述的方法,其特征在于,所述对所述相邻帧间编码块中的图像数据进行更新处理,包括:
确定所述相邻编码块还包括至少两个相邻帧内编码块;
基于所述至少两个相邻帧内编码块中的图像数据,通过对所述至少两个相邻帧内编码块与所述当前帧内编码块的距离进行加权平均的方式,对所述相邻帧间编码块中的图像数据进行更新处理。
14.根据权利要求8至11中任一项所述的方法,其特征在于,所述对所述相邻帧间编码块中的图像数据进行更新处理,包括:
在确定所有所述相邻编码块都是帧间编码块时,将所述相邻帧间编码块中的图像数据更新为一固定值。
15.根据权利要求8至11中任一项所述的方法,其特征在于,所述对所述相邻帧间编码块中的图像数据进行更新处理,包括:
将所有所述相邻编码块中的图像数据更新为一固定值。
16.一种处理图像数据的方法,其特征在于,所述方法包括:
确定当前编码对象中的所有编码块采用约束帧内预测方式;
在与当前帧内编码块相邻的相邻编码块中,确定与所述当前帧内编码块属于不同编码对象的特定相邻编码块;
确定所述特定相邻编码块是采用帧间编码方式进行编码的相邻帧间编码块;
基于固定值或所述相邻编码块包括的相邻帧内编码块中的图像数据,对所述相邻帧间编码块中的图像数据进行更新处理;
基于所述相邻帧间编码块中已更新的图像数据,对所述当前帧内编码块进行编码或解码。
17.根据权利要求16所述的方法,其特征在于,根据码流中的约束帧内预测标志,确定所述编码对象中的所有帧内编码块采用约束帧内预测方式进行编码或解码。
18.根据权利要求16所述的方法,其特征在于,所述对所述相邻帧间编码块中的图像数据进行更新处理,包括:
对所述相邻帧间编码块中与所述当前帧内编码块相邻的一行或一列像素数据进行更新处理。
19.根据权利要求16至18中任一项所述的方法,其特征在于,所述对所述相邻帧间编码块中的图像数据进行更新处理,包括:
确定所述相邻编码块还包括至少一个相邻帧内编码块;
基于与所述相邻帧间编码块最相邻的所述相邻帧内编码块中的图像数据,对所述相邻帧间编码块中的图像数据进行更新处理。
20.根据权利要求16至18中任一项所述的方法,其特征在于,所述对所述相邻帧间编码块中的图像数据进行更新处理,包括:
确定所述相邻编码块还包括至少两个相邻帧内编码块;
基于所述至少两个相邻帧内编码块中的图像数据,通过对所述至少两个相邻帧内编码块与所述当前帧内编码块的距离进行加权平均的方式,对所述相邻帧间编码块中的图像数据进行更新处理。
21.根据权利要求16至18中任一项所述的方法,其特征在于,所述对所述相邻帧间编码块中的图像数据进行更新处理,包括:
在确定所有所述相邻编码块都是帧间编码块时,将所述相邻帧间编码块中的图像数据更新为一固定值。
22.根据权利要求16至18中任一项所述的方法,其特征在于,所述对所述相邻帧间编码块中的图像数据进行更新处理,包括:
将所有所述相邻编码块中的图像数据更新为一固定值。
23.一种用于图像编码的设备,其特征在于,所述设备包括:
第一确定模块,用于确定当前帧间编码帧中采用约束帧内预测方式的当前帧内编码块;
第二确定模块,用于确定与所述当前帧内编码块相邻的相邻编码块包括相邻帧间编码块;
更新模块,用于基于固定值或所述相邻编码块包括的相邻帧内编码块中的图像数据,对所述相邻帧间编码块中的图像数据进行更新处理;
编码模块,用于基于所述相邻帧间编码块中已更新的图像数据,对所述当前帧内编码块进行编码。
24.根据权利要求23所述的设备,其特征在于,所述更新模块包括:
第一确定单元,用于确定所述相邻编码块还包括至少一个相邻帧内编码块;
第一更新单元,用于基于与所述相邻帧间编码块最相邻的所述相邻帧内编码块中的图像数据,对所述相邻帧间编码块中的图像数据进行更新处理。
25.根据权利要求23所述的设备,其特征在于,所述更新模块包括:
第二确定单元,用于确定所述相邻编码块还包括至少两个相邻帧内编码块;
第二更新单元,用于基于所述至少两个相邻帧内编码块中的图像数据,通过对所述至少两个相邻帧内编码块与所述当前帧内编码块的距离进行加权平均的方式,对所述相邻帧间编码块中的图像数据进行更新处理。
26.根据权利要求23所述的设备,其特征在于,所述更新模块包括:
第三更新单元,用于在确定所有所述相邻编码块都是帧间编码块时,将所述相邻帧间编码块中的图像数据更新为一固定值。
27.根据权利要求23所述的设备,其特征在于,所述更新模块包括:
第四更新单元,用于将所有所述相邻编码块中的图像数据更新为一固定值。
28.一种用于图像解码的设备,其特征在于,所述设备包括:
第一确定模块,用于确定当前帧间编码帧中采用约束帧内预测方式的当前帧内编码块;
第二确定模块,用于确定与所述当前帧内编码块相邻的相邻编码块包括相邻帧间编码块;
更新模块,用于基于固定值或所述相邻编码块包括的相邻帧内编码块中的图像数据,对所述相邻帧间编码块中的图像数据进行更新处理;
解码模块,用于基于所述相邻帧间编码块中已更新的图像数据,对所述当前帧内编码块进行解码。
29.根据权利要求28所述的设备,其特征在于,所述更新模块包括:
第一确定单元,用于确定所述相邻编码块还包括至少一个相邻帧内编码块;
第一更新单元,用于基于与所述相邻帧间编码块最相邻的所述相邻帧内编码块中的图像数据,对所述相邻帧间编码块中的图像数据进行更新处理。
30.根据权利要求28所述的设备,其特征在于,所述更新模块包括:
第二确定单元,用于确定所述相邻编码块还包括至少两个相邻帧内编码块;
第二更新单元,用于基于所述至少两个相邻帧内编码块中的图像数据,通过对所述至少两个相邻帧内编码块与所述当前帧内编码块的距离进行加权平均的方式,对所述相邻帧间编码块中的图像数据进行更新处理。
31.根据权利要求28所述的设备,其特征在于,所述更新模块包括:
第三更新单元,用于在确定所有所述相邻编码块都是帧间编码块时,将所述相邻帧间编码块中的图像数据更新为一固定值。
32.根据权利要求28所述的设备,其特征在于,所述更新模块包括:
第四更新单元,用于将所有所述相邻编码块中的图像数据更新为一固定值。
33.一种用于处理图像数据的设备,其特征在于,所述设备包括:
第一确定模块,用于确定当前编码对象中的所有编码块采用约束帧内预测方式;
第二确定模块,用于在与当前帧内编码块相邻的相邻编码块中,确定与所述当前帧内编码块属于不同编码对象的特定相邻编码块;
第三确定模块,用于确定所述特定相邻编码块是采用帧间编码方式进行编码的相邻帧间编码块;
更新模块,用于基于固定值或所述相邻编码块包括的相邻帧内编码块中的图像数据,对所述相邻帧间编码块中的图像数据进行更新处理;
编码解码模块,用于基于所述相邻帧间编码块中已更新的图像数据,对所述当前帧内编码块进行编码或解码。
34.根据权利要求33所述的设备,其特征在于,所述更新模块包括:
第一确定单元,用于确定所述相邻编码块还包括至少一个相邻帧内编码块;
第一更新单元,用于基于与所述相邻帧间编码块最相邻的所述相邻帧内编码块中的图像数据,对所述相邻帧间编码块中的图像数据进行更新处理。
35.根据权利要求33所述的设备,其特征在于,所述更新模块包括:
第二确定单元,用于确定所述相邻编码块还包括至少两个相邻帧内编码块;
第二更新单元,用于基于所述至少两个相邻帧内编码块中的图像数据,通过对所述至少两个相邻帧内编码块与所述当前帧内编码块的距离进行加权平均的方式,对所述相邻帧间编码块中的图像数据进行更新处理。
36.根据权利要求33所述的设备,其特征在于,所述更新模块包括:
第三更新单元,用于在确定所有所述相邻编码块都是帧间编码块时,将所述相邻帧间编码块中的图像数据更新为一固定值。
37.根据权利要求33所述的设备,其特征在于,所述更新模块包括:
第四更新单元,用于将所有所述相邻编码块中的图像数据更新为一固定值。
CN201110008186.1A 2011-01-14 2011-01-14 图像编码解码方法、处理图像数据方法及其设备 Active CN102595124B (zh)

Priority Applications (19)

Application Number Priority Date Filing Date Title
CN201110008186.1A CN102595124B (zh) 2011-01-14 2011-01-14 图像编码解码方法、处理图像数据方法及其设备
CN201410366452.1A CN104113753B (zh) 2011-01-14 2011-01-14 图像编码解码方法、处理图像数据方法及其设备
CN201410367697.6A CN104125457B (zh) 2011-01-14 2011-01-14 图像编码解码方法、处理图像数据方法及其设备
JP2013548735A JP5819985B2 (ja) 2011-01-14 2012-01-16 画像の符号化および復号の方法、画像データの処理方法、およびその装置
SG2013052733A SG191905A1 (en) 2011-01-14 2012-01-16 Image coding and decoding method, image data processing method, and devices thereof
PCT/CN2012/070404 WO2012095036A1 (zh) 2011-01-14 2012-01-16 图像编码解码方法、处理图像数据方法及其设备
EP12733974.5A EP2651131A4 (en) 2011-01-14 2012-01-16 IMAGE ENCODING AND DECODING METHODS, IMAGE DATA PROCESSING METHOD, AND CORRESPONDING APPARATUS
BR112013018073-0A BR112013018073B1 (pt) 2011-01-14 2012-01-16 métodos para codificação e decodificação de uma imagem e dispositivos dos mesmos
RU2013137851/08A RU2571514C2 (ru) 2011-01-14 2012-01-16 Способ кодирования и декодирования изображения, способ обработки данных изображения и соответствующие устройства
AU2012206839A AU2012206839B2 (en) 2011-01-14 2012-01-16 Image coding and decoding method, image data processing method and devices thereof
KR1020137019521A KR101503763B1 (ko) 2011-01-14 2012-01-16 이미지 인코딩 및 디코딩 방법, 이미지 데이터 프로세싱 방법 및 그 장치
CA2824473A CA2824473C (en) 2011-01-14 2012-01-16 Intra block video coding in video with neighbouring inter and intra blocks
SG10201600286WA SG10201600286WA (en) 2011-01-14 2012-01-16 Image coding and decoding method, image data processing method, and devices thereof
MYPI2013002617A MY164248A (en) 2011-01-14 2012-01-16 Image coding and decoding method, image data processing method, and devices thereof
US13/938,853 US9485504B2 (en) 2011-01-14 2013-07-10 Image coding and decoding method, image data processing method, and devices thereof
JP2015195749A JP6023298B2 (ja) 2011-01-14 2015-10-01 画像の符号化および復号の方法、画像データの処理方法、およびその装置
US15/278,469 US9979965B2 (en) 2011-01-14 2016-09-28 Image coding and decoding method, image data processing method, and devices thereof
JP2016197022A JP6629163B2 (ja) 2011-01-14 2016-10-05 画像の符号化および復号の方法、画像データの処理方法、およびその装置
US15/958,171 US10264254B2 (en) 2011-01-14 2018-04-20 Image coding and decoding method, image data processing method, and devices thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110008186.1A CN102595124B (zh) 2011-01-14 2011-01-14 图像编码解码方法、处理图像数据方法及其设备

Related Child Applications (2)

Application Number Title Priority Date Filing Date
CN201410366452.1A Division CN104113753B (zh) 2011-01-14 2011-01-14 图像编码解码方法、处理图像数据方法及其设备
CN201410367697.6A Division CN104125457B (zh) 2011-01-14 2011-01-14 图像编码解码方法、处理图像数据方法及其设备

Publications (2)

Publication Number Publication Date
CN102595124A true CN102595124A (zh) 2012-07-18
CN102595124B CN102595124B (zh) 2014-07-16

Family

ID=46483281

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110008186.1A Active CN102595124B (zh) 2011-01-14 2011-01-14 图像编码解码方法、处理图像数据方法及其设备

Country Status (12)

Country Link
US (3) US9485504B2 (zh)
EP (1) EP2651131A4 (zh)
JP (3) JP5819985B2 (zh)
KR (1) KR101503763B1 (zh)
CN (1) CN102595124B (zh)
AU (1) AU2012206839B2 (zh)
BR (1) BR112013018073B1 (zh)
CA (1) CA2824473C (zh)
MY (1) MY164248A (zh)
RU (1) RU2571514C2 (zh)
SG (2) SG191905A1 (zh)
WO (1) WO2012095036A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102946535A (zh) * 2012-10-09 2013-02-27 华为技术有限公司 预测块的视差矢量预测值获取的方法和装置
CN103024389A (zh) * 2012-12-24 2013-04-03 芯原微电子(北京)有限公司 一种用于hevc的解码装置和方法
CN104918052A (zh) * 2014-03-14 2015-09-16 想象技术有限公司 用于基于运动补偿的视频压缩的错误跟踪和减轻
CN107124608A (zh) * 2016-02-24 2017-09-01 北京数码视讯科技股份有限公司 一种编码方法及装置
CN112437299A (zh) * 2018-09-21 2021-03-02 华为技术有限公司 一种帧间预测方法和装置
US11647207B2 (en) 2018-09-21 2023-05-09 Huawei Technologies Co., Ltd. Inter prediction method and apparatus

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102595124B (zh) * 2011-01-14 2014-07-16 华为技术有限公司 图像编码解码方法、处理图像数据方法及其设备
US11032568B2 (en) 2013-11-27 2021-06-08 Hfi Innovation Inc. Method of video coding using prediction based on intra picture block copy
CN104796706A (zh) * 2014-01-17 2015-07-22 深圳市中瀛鑫科技股份有限公司 一种视频编码方法及装置
EP3459244A4 (en) * 2016-01-12 2020-03-04 Telefonaktiebolaget LM Ericsson (publ) VIDEO CODING WITH HYBRID INTRAPREDICTION

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0935396A2 (en) * 1998-02-09 1999-08-11 Matsushita Electric Industrial Co., Ltd. Video coding method and apparatus
US20060039475A1 (en) * 2004-08-20 2006-02-23 Polycom, Inc. Error concealment in a video decoder
CN101312536A (zh) * 2007-05-24 2008-11-26 中兴通讯股份有限公司 一种用于视频传输差错控制的视频编码方法及装置
CN101641957A (zh) * 2007-03-23 2010-02-03 高通股份有限公司 针对数字视频执行错误隐匿的方法

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6907071B2 (en) 2001-05-24 2005-06-14 Telefonaktiebolaget Lm Ericsson (Publ) Selective prediction for intra-coding video data block
US7646815B2 (en) * 2003-07-15 2010-01-12 Lsi Corporation Intra estimation chroma mode 0 sub-block dependent prediction
JP4617644B2 (ja) 2003-07-18 2011-01-26 ソニー株式会社 符号化装置及び方法
JP4213646B2 (ja) * 2003-12-26 2009-01-21 株式会社エヌ・ティ・ティ・ドコモ 画像符号化装置、画像符号化方法、画像符号化プログラム、画像復号装置、画像復号方法、及び画像復号プログラム。
JP2005349755A (ja) 2004-06-11 2005-12-22 Canon Inc カラープリンタ
US20060013320A1 (en) * 2004-07-15 2006-01-19 Oguz Seyfullah H Methods and apparatus for spatial error concealment
US8097172B2 (en) 2004-09-30 2012-01-17 Aker Kvaerner, Inc. Recovery of organic compounds using a saturator
US7751478B2 (en) 2005-01-21 2010-07-06 Seiko Epson Corporation Prediction intra-mode selection in an encoder
CN101133650B (zh) 2005-04-01 2010-05-19 松下电器产业株式会社 图像解码装置以及图像解码方法
CN101815224A (zh) 2005-07-22 2010-08-25 三菱电机株式会社 图像编码装置和方法、以及图像解码装置和方法
RU2395174C1 (ru) * 2006-03-30 2010-07-20 ЭлДжи ЭЛЕКТРОНИКС ИНК. Способ и устройство для декодирования/кодирования сигнала видео
JP2009540636A (ja) * 2006-06-09 2009-11-19 トムソン ライセンシング ビデオ・ピクチャを符号化するためにビット・バジェットを適応的に求める方法及び装置
JP2008005197A (ja) * 2006-06-22 2008-01-10 Toshiba Corp デコード装置およびデコード方法
WO2008004940A1 (en) 2006-07-07 2008-01-10 Telefonaktiebolaget Lm Ericsson (Publ) Video data management
US8254455B2 (en) 2007-06-30 2012-08-28 Microsoft Corporation Computing collocated macroblock information for direct mode macroblocks
TWI364222B (en) * 2007-09-05 2012-05-11 Via Tech Inc Method and device for generating prediction mode parameter
CN101884219B (zh) * 2007-10-16 2014-08-20 Lg电子株式会社 处理视频信号的方法和装置
EP2081386A1 (en) 2008-01-18 2009-07-22 Panasonic Corporation High precision edge prediction for intracoding
CN101505430B (zh) * 2008-09-18 2011-05-11 西南交通大学 一种用于头肩视频序列的帧内更新方法
JP5238523B2 (ja) 2009-01-13 2013-07-17 株式会社日立国際電気 動画像符号化装置、動画像復号化装置、および、動画像復号化方法
EP3125556B1 (en) 2010-08-17 2018-10-17 M&K Holdings Inc. Method for encoding an intra prediction mode
US20120163457A1 (en) 2010-12-28 2012-06-28 Viktor Wahadaniah Moving picture decoding method, moving picture coding method, moving picture decoding apparatus, moving picture coding apparatus, and moving picture coding and decoding apparatus
CN102595124B (zh) 2011-01-14 2014-07-16 华为技术有限公司 图像编码解码方法、处理图像数据方法及其设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0935396A2 (en) * 1998-02-09 1999-08-11 Matsushita Electric Industrial Co., Ltd. Video coding method and apparatus
US20060039475A1 (en) * 2004-08-20 2006-02-23 Polycom, Inc. Error concealment in a video decoder
CN101641957A (zh) * 2007-03-23 2010-02-03 高通股份有限公司 针对数字视频执行错误隐匿的方法
CN101312536A (zh) * 2007-05-24 2008-11-26 中兴通讯股份有限公司 一种用于视频传输差错控制的视频编码方法及装置

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102946535A (zh) * 2012-10-09 2013-02-27 华为技术有限公司 预测块的视差矢量预测值获取的方法和装置
WO2014056315A1 (zh) * 2012-10-09 2014-04-17 华为技术有限公司 预测块的视差矢量预测值获取的方法和装置
CN102946535B (zh) * 2012-10-09 2015-05-13 华为技术有限公司 预测块的视差矢量预测值获取的方法和装置
CN103024389A (zh) * 2012-12-24 2013-04-03 芯原微电子(北京)有限公司 一种用于hevc的解码装置和方法
CN103024389B (zh) * 2012-12-24 2015-08-12 芯原微电子(北京)有限公司 一种用于hevc的解码装置和方法
CN104918052A (zh) * 2014-03-14 2015-09-16 想象技术有限公司 用于基于运动补偿的视频压缩的错误跟踪和减轻
CN107124608A (zh) * 2016-02-24 2017-09-01 北京数码视讯科技股份有限公司 一种编码方法及装置
CN112437299A (zh) * 2018-09-21 2021-03-02 华为技术有限公司 一种帧间预测方法和装置
CN112437299B (zh) * 2018-09-21 2022-03-29 华为技术有限公司 一种帧间预测方法、装置及存储介质
US11647207B2 (en) 2018-09-21 2023-05-09 Huawei Technologies Co., Ltd. Inter prediction method and apparatus

Also Published As

Publication number Publication date
BR112013018073B1 (pt) 2020-11-10
JP2016026451A (ja) 2016-02-12
WO2012095036A1 (zh) 2012-07-19
KR101503763B1 (ko) 2015-03-18
US20130301722A1 (en) 2013-11-14
CA2824473A1 (en) 2012-07-19
JP2017073774A (ja) 2017-04-13
JP6023298B2 (ja) 2016-11-09
MY164248A (en) 2017-11-30
AU2012206839A1 (en) 2013-08-15
JP5819985B2 (ja) 2015-11-24
RU2013137851A (ru) 2015-02-20
US9485504B2 (en) 2016-11-01
US20170019667A1 (en) 2017-01-19
JP2014503156A (ja) 2014-02-06
SG191905A1 (en) 2013-08-30
US9979965B2 (en) 2018-05-22
US10264254B2 (en) 2019-04-16
KR20130105897A (ko) 2013-09-26
SG10201600286WA (en) 2016-02-26
EP2651131A4 (en) 2014-05-14
CN102595124B (zh) 2014-07-16
EP2651131A1 (en) 2013-10-16
CA2824473C (en) 2017-05-16
AU2012206839B2 (en) 2015-10-01
JP6629163B2 (ja) 2020-01-15
RU2571514C2 (ru) 2015-12-20
US20180241994A1 (en) 2018-08-23
BR112013018073A2 (pt) 2018-05-22

Similar Documents

Publication Publication Date Title
CN102595124B (zh) 图像编码解码方法、处理图像数据方法及其设备
US20180338139A1 (en) Method and apparatus of intra mode coding
TWI528791B (zh) An image predictive coding method, a video predictive coding apparatus, a computer-readable recording medium on which an image predictive coding program is recorded, a video prediction decoding method, a video prediction decoding apparatus, and a computer-readable recording medium on which a video prediction decoding program is recorded
CN103220508B (zh) 编解码方法和装置
KR100809603B1 (ko) 화소 단위 기반 영상 부호화 및 복호화 장치 및 방법
CN102984525A (zh) 一种视频码流错误隐藏方法
TWI552582B (zh) 動態影像預測編碼裝置、動態影像預測編碼方法、動態影像預測編碼程式、動態影像預測解碼裝置、動態影像預測解碼方法及動態影像預測解碼程式
TWI691201B (zh) 動態影像預測解碼方法
CN104125457A (zh) 图像编码解码方法、处理图像数据方法及其设备
AU2015268694B2 (en) Image coding and decoding method, image data processing method, and devices thereof
CN104113753A (zh) 图像编码解码方法、处理图像数据方法及其设备
KR101431463B1 (ko) 무손실 비디오 부호화/복호화 방법 및 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant