WO2016197898A1 - 图像编码及解码方法、图像处理设备、计算机存储介质 - Google Patents

图像编码及解码方法、图像处理设备、计算机存储介质 Download PDF

Info

Publication number
WO2016197898A1
WO2016197898A1 PCT/CN2016/085010 CN2016085010W WO2016197898A1 WO 2016197898 A1 WO2016197898 A1 WO 2016197898A1 CN 2016085010 W CN2016085010 W CN 2016085010W WO 2016197898 A1 WO2016197898 A1 WO 2016197898A1
Authority
WO
WIPO (PCT)
Prior art keywords
copy
parameter
pixel
bin portion
binary code
Prior art date
Application number
PCT/CN2016/085010
Other languages
English (en)
French (fr)
Inventor
林涛
李明
吴平
尚国强
吴钊
Original Assignee
同济大学
中兴通讯股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from CN201610363506.8A external-priority patent/CN106254888B/zh
Application filed by 同济大学, 中兴通讯股份有限公司 filed Critical 同济大学
Priority to US15/580,716 priority Critical patent/US10575022B2/en
Priority to EP16806796.5A priority patent/EP3310059B1/en
Publication of WO2016197898A1 publication Critical patent/WO2016197898A1/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Abstract

本发明公开了一种图像编码及解码方法、图像处理设备、计算机存储介质，包括：对当前编码块的多个复制参数，对所述复制参数按照所述调整处理后顺序进行熵编码，生成包括多个复制参数的信息的视频码流；其中，所述多个复制参数包括一种或多种类型的复制参数分量。解析解码块的包括多个复制参数的信息的视频码流；对所述多个复制参数进行熵解码，获得所述多个复制参数的二元码；对所述二元码进行调整操作，得到所述多个复制参数的取值；其中，所述多个复制参数包括一种或多种类型的复制参数分量。

Description

图像编码及解码方法、图像处理设备、计算机存储介质 技术领域
本发明涉及数字视频编码及解码技术，尤其涉及一种图像编码及解码方法、图像处理设备、计算机存储介质。
背景技术
随着电视机和显示器进入超高清(4K)和特超高清(8K)的分辨率，以及以远程桌面为典型表现形式的新一代云计算与信息处理模式及平台的发展和普及，对视频图像数据压缩的需求也走向更高分辨率和包含摄像机摄取图像和计算机屏幕图像的复合图像。对视频图像进行超高压缩比和极高质量的数据压缩成为必不可少的技术。
充分利用4K/8K图像和计算机屏幕图像的特点，对视频图像进行超高效率的压缩(HEVC，High Efficiency Video Coding)，也是正在制定中的最新国际视频压缩标准和其他若干国际标准、国内标准、行业标准的一个主要目标。
计算机屏幕图像的一个显著特点是同一帧图像内通常会有很多相似甚至完全相同的像素图样(pi×el pattern)。例如，计算机屏幕图像中常出现的中文或外文文字，都是由少数几种基本笔划所构成，同一帧图像内可以找到很多相似或相同的笔划。计算机屏幕图像中常见的菜单、图标等，也具有很多相似或相同的图样。因此，现有的图像和视频压缩技术中通常采用各种复制方式，至少包括下列复制方式：
1)帧内块复制即帧内块匹配或称帧内运动补偿或称块匹配或称块复制。
2)帧内微块复制即帧内微块匹配或称微块匹配或称微块复制。
3)帧内线条(简称条)复制即帧内条匹配或称条匹配或称条复制。
4)帧内串复制即帧内串匹配或称串匹配或称串复制或称像素串复制。
5)调色板索引串复制即调色板或称索引串复制。
6)索引串复制与像素串复制混合的融合复制方式，简称索引-像素串融合复制方式，也称调色板-像素串融合复制方式或融合像素串复制的调色板方式或融合调色板的像素串复制方式或调色板与像素串复制方式。
7)结合多种调色板与像素串复制方式的多重调色板与像素串复制方式。
在多像素段复制方式，如微块复制方式、条复制方式、像素串复制方式、调色板与像素串复制方式中，编解码块被分成多个像素段，每个像素段有一个复制参数，一个复制参数又由多种复制参数组成。在多像素段复制方式中，对复制参数按照对应的像素段在编解码块中的位置的前后顺序依次以一个复制参数为单位进行熵编码或熵解码并存在于视频码流。由于一个复制参数即有使用上下文模型(简称CM)进行熵编码的二元码(简称bit或bin)部分，又有未使用CM进行熵编码的二元码部分，以一个复制参数为单位对一个一个复制参数依次进行熵编码就会导致交织地对复制参数的使用CM的bin部分和未使用CM的bin部分进行熵编码。这种交织的做法严重影响了对复制参数的多比特位并行熵编码和熵解码处理，降低了熵编码和熵解码的吞吐量。
发明内容
为解决上述技术问题，本发明实施例提供了一种图像编码及解码方法、图像处理设备、计算机存储介质。
本发明实施例提供图像编码方法，包括：
对当前编码块的多个复制参数进行调整处理；
对所述复制参数按照所述调整处理后顺序进行熵编码，生成包括多个 复制参数的信息的视频码流；
其中，所述多个复制参数包括一种或多种类型的复制参数分量。
本发明实施例中，所述编码块是图像的编码区域，所述编码块包括以下至少一种：最大编码单元(LCU)、编码树单元(CTU)、编码单元(CU)、CU的子区域、预测单元(PU)、变换单元(TU)。
本发明实施例中，所述对当前编码块的多个复制参数进行调整处理，包括：
将所述复制参数按照预定规则分割成N个子部分，N≥2；
将所述复制参数的同一子部分归类合并后，重新排序依次进行熵编码；
其中，所述复制参数的所述N个子部分中的子部分为空或非空。
本发明实施例中，所述对当前编码块的多个复制参数进行调整处理，还包括：
将所述复制参数分割成使用上下文模型(CM)的二元码(bin)部分和未使用CM的bin部分。
本发明实施例中，所述编码块使用的复制方式为融合调色板的像素串复制方式；
将各个复制参数所包括的下列一种或多种复制参数分量分割成使用CM的bin部分和未使用CM的bin部分：
像素段的类型、像素段的复制位置分量1、像素段的复制位置分量2、像素段的复制位置分量3、像素段的复制长度。
本发明实施例中，所述编码块使用的复制方式为融合调色板的像素串复制方式；
将所述复制参数分割成使用CM的bin部分和未使用CM的bin部分时，所述使用CM的bin部分包括以下一个或多个bin：
像素段的类型t；其中，t取第一值时表示参考像素来自调色板，t取第 二值时表示参考像素不是来自调色板；
像素段的ABOVE复制位置a；其中，当t表示参考像素不是来自调色板时所述a存在；a取第三值时表示参考像素位于ABOVE位置，a取第四值时表示参考像素不是位于ABOVE位置；
像素段的位移矢量水平分量x0；其中，当a表示参考像素不是位于ABOVE位置时所述x0存在；x0取第五值时表示位移矢量水平分量为零，x0取第六值时表示位移矢量水平分量不为零；
像素段的位移矢量垂直分量y0；其中，当a表示参考像素不是位于ABOVE位置时所述y0存在；y0取第七值时表示位移矢量垂直分量为零，y0取第八值时表示位移矢量垂直分量不为零；
像素段的复制长度的二值化表示中的首位二元码b0。
本发明实施例中，所述方法还包括：
将所述复制参数分割成使用CM的bin部分和未使用CM的bin部分时，将各个复制参数的使用CM的bin部分归类至一组，将所述复制参数的未使用CM的bin部分归类至另一组；
其中，进行熵编码时，依次对所述两组进行熵编码。
本发明实施例中，所述方法还包括：
将所述复制参数分割成使用CM的bin部分和未使用CM的bin部分时，在所述使用CM的bin部分中，对同类型的复制参数分量集中进行熵编码；在所述未使用CM的bin部分中，对同类型的复制参数分量集中进行熵编码。
本发明实施例中，所述方法还包括：
将所述复制参数分割成使用CM的bin部分和未使用CM的bin部分时，在所述使用CM的bin部分中，对同类型的复制参数分量的复制参数的所有bin集中进行熵编码；在所述未使用CM的bin部分中，对同类型的复制参数分量的复制参数的所有bin集中进行熵编码。
本发明实施例提供的图像解码方法，包括：
解析解码块的包括多个复制参数的信息的视频码流；
对所述多个复制参数进行熵解码，获得所述多个复制参数的二元码；
对所述二元码进行调整操作，得到所述多个复制参数的取值；
其中，所述多个复制参数包括一种或多种类型的复制参数分量。
本发明实施例中，所述解码块是图像的解码区域，所述解码块包括以下至少一种：LCU、CTU、CU、CU的子区域、PU、TU。
本发明实施例中，所述对所述二元码进行调整操作，得到所述多个复制参数的取值，包括：
将所述二元码按照预定规则分割成N个子部分，N≥2；
将所述二元码的子部分中的二元码进行归类合并后，映射为所述多个复制参数的恢复值；
其中，所述复制参数的所述N个子部分中的子部分为空或非空。
本发明实施例中，所述方法还包括：
将所述二元码分割成使用CM进行熵解码的bin部分和未使用CM进行熵解码的bin部分；
根据所述复制参数对应的二元码在熵解码过程中使用CM的对应表，从所述使用CM进行熵解码的bin部分和/或未使用CM进行熵解码的bin部分取对应的bin，组成所述复制参数对应的二元码；
将所述复制参数对应的二元码转换成所述复制参数的取值。
本发明实施例中，所述解码块使用的复制方式为融合调色板的像素串复制方式；
下述一种或多种复制参数对应的所述二元码分割成使用CM的bin部分和未使用CM的bin部分，包括：
像素段的类型、像素段的复制位置分量1、像素段的复制位置分量2、 像素段的复制位置分量3、像素段的复制长度。
本发明实施例中，所述解码块使用的复制方式为融合调色板的像素串复制方式；
将所述复制参数对应的所述二元码分割成使用CM的bin部分和未使用CM的bin部分时，所述使用CM的bin部分包括以下一个或多个bin：
像素段的类型t；其中，t取第一值时表示参考像素来自调色板，t取第二值时表示参考像素不是来自调色板；
像素段的ABOVE复制位置a；其中，当t表示参考像素不是来自调色板时所述a存在；a取第三值时表示参考像素位于ABOVE位置，a取第四值时表示参考像素不是位于ABOVE位置；
像素段的位移矢量水平分量x0；其中，当a表示参考像素不是位于ABOVE位置时所述x0存在；x0取第五值时表示位移矢量水平分量为零，x0取第六值时表示位移矢量水平分量不为零；
像素段的位移矢量垂直分量y0；其中，当a表示参考像素不是位于ABOVE位置时所述y0存在；y0取第七值时表示位移矢量垂直分量为零，y0取第八值时表示位移矢量垂直分量不为零；
像素段的复制长度的二值化表示中的首位二元码b0。
本发明实施例中，所述方法还包括：
将所述复制参数对应的二元码对应为成使用CM的bin部分和未使用CM的bin部分时，依次对所述复制参数的使用CM的bin部分对应的视频码流进行熵解码、对所述复制参数的未使用CM的bin部分对应的视频码流进行熵解码；
根据所述复制参数对应的二元码在熵解码过程中使用CM的对应表，从所述使用CM进行熵解码的bin部分和/或未使用CM进行熵解码的bin部分取对应的bin，组成所述复制参数对应的二元码；
将所述复制参数对应的二元码转换成所述复制参数的取值。
本发明实施例中，所述方法还包括：
进行熵解码时，依次对所述复制参数对应的二元码中由使用CM的bin部分组成的一组和所述复制参数对应的二元码中有不使用CM的bin部分组成的另一组进行熵解码；
所述复制参数对应的二元码对应为使用CM的bin部分和未使用CM的bin部分时，在所述使用CM的bin部分中，对同类型复制参数分量的二元码对应的码流进行熵解码；在所述未使用CM的bin部分中，对同类型复制参数分量的二元码对应进行熵解码；
根据所述复制参数对应的二元码在熵解码过程中使用CM的对应表，从所述使用CM进行熵解码的bin部分和/或未使用CM进行熵解码的bin部分取对应的bin，组成所述复制参数对应的二元码；
将所述复制参数对应的二元码转换成所述复制参数的取值。
本发明实施例中，所述方法还包括：
所述复制参数对应的二元码分割成使用CM的bin部分和未使用CM的bin部分时，在所述使用CM的bin部分中，对同类型复制参数分量的复制参数的二元码对应的视频码流进行熵解码；在所述未使用CM的bin部分中，对同类型复制参数分量的复制参数的二元码对应的视频码流进行熵解码；
根据所述复制参数对应的二元码在熵解码过程中使用CM的对应表，从所述使用CM进行熵解码的bin部分和/或未使用CM进行熵解码的bin部分取对应的bin，组成所述复制参数对应的二元码；
将所述复制参数对应的二元码转换成所述复制参数的取值。
本发明实施例提供的图像处理设备，包括：
重组单元，配置为对当前编码块的多个复制参数进行调整处理；
熵编码单元，配置为对所述复制参数按照所述调整处理后顺序进行熵 编码，生成包括多个复制参数的信息的视频码流；
其中，所述多个复制参数包括一种或多种类型的复制参数分量。
本发明另一实施例提供的图像处理设备，包括：
解析单元，配置为解析解码块的包括多个复制参数的信息的视频码流；
熵解码单元，配置为对所述多个复制参数进行熵解码，获得所述多个复制参数的二元码；对所述二元码进行调整操作，得到所述多个复制参数的取值；
其中，所述多个复制参数包括一种或多种类型的复制参数分量。
本发明实施例提供的计算机存储介质存储有计算机程序，该计算机程序用于执行上述图像编码和/或图像解码方法。
本发明实施例的技术方案中，对图像编码包括：对当前编码块的多个复制参数进行调整处理；对所述复制参数按照所述调整处理后顺序进行熵编码，生成包括多个复制参数的信息的视频码流；其中，所述多个复制参数包括一种或多种类型的复制参数分量。对图像解码包括：解析解码块的包括多个复制参数的信息的视频码流；对所述多个复制参数进行熵解码，获得所述多个复制参数的二元码；对所述二元码进行调整操作，得到所述多个复制参数的取值；其中，所述多个复制参数包括一种或多种类型的复制参数分量。可见，本发明实施例避免了通过交织的做法而影响对复制参数的多比特位并行熵编码和熵解码处理，提高了熵编码和熵解码的吞吐量。
附图说明
在附图(其不一定是按比例绘制的)中，相似的附图标记可在不同的视图中描述相似的部件。具有不同字母后缀的相似附图标记可表示相似部件的不同示例。附图以示例而非限制的方式大体示出了本文中所讨论的各个实施例。
图1是本发明实施例中对多个复制参数按照分割归类重组后顺序进行 熵编码并放入码流的示例图；
图2为本发明实施例的图像编码方法的流程示意图一；
图3为本发明实施例的图像解码方法的流程示意图一；
图4为本发明实施例的图像编码方法的流程示意图二；
图5为本发明实施例的图像解码方法的流程示意图二；
图6为本发明实施例的图像处理设备的结构组成示意图一；
图7为本发明实施例的图像处理设备的结构组成示意图二；
图8为本发明实施例的图像处理设备的结构组成示意图三。
具体实施方式
为了能够更加详尽地了解本发明实施例的特点与技术内容，下面结合附图对本发明实施例的实现进行详细阐述，所附附图仅供参考说明之用，并非用来限定本发明实施例。
图像的数字视频信号的自然形式是图像的序列。一帧图像通常是由若干像素组成的矩形区域，而数字视频信号就是由几十帧至成千上万帧图像组成的视频图像序列，有时也简称为视频序列或序列。对数字视频信号进行编码就是对一帧一帧图像进行编码。在任一时刻，正在编码中的那一帧图像称为当前编码图像。同样，对数字视频信号的压缩后的视频码流(简称码流也称为比特流)进行解码就是对一帧一帧压缩图像的码流进行解码。在任一时刻，正在解码中的那一帧图像称为当前解码图像。当前编码图像或当前解码图像都统称为当前图像。
在几乎所有视频图像编码的国际标准如MPEG-1/2/4，H.264/AVC以及HEVC中，对一帧图像进行编码(以及相应的解码)时，把一帧图像划分成若干块M×M像素的子图像，称为编码块(从解码的角度也就是解码块，统称为编解码块)或编码单元(CU，Coding Unit)，以CU为基本编码单位，对子图像一块一块进行编码。常用的M的大小是4，8，16，32，64。因此， 对视频图像序列进行编码就是对各帧图像的各个编码单元即CU依次一个一个CU进行编码。在任一时刻，正在编码中的CU称为当前编码CU。同样，对视频图像序列的码流进行解码也是对各帧图像的各个CU依次一个一个CU进行解码，最终重构出整个视频图像序列。在任一时刻，正在解码中的CU称为当前解码CU。当前编码CU或当前解码CU统称为当前CU。
为适应一帧图像内各部分图像内容与性质的不同，有针对性地进行最有效的编码，一帧图像内各CU的大小可以是不同的，有的是8×8，有的是64×64，等等。为了使不同大小的CU能够无缝拼接起来，一帧图像通常先划分成大小完全相同具有N×N像素的最大编码单元(LCU，Largest Coding Unit)，然后每个LCU再进一步划分成树状结构的多个大小不一定相同的CU。因此，LCU也称为编码树单元(CTU，Coding Tree Unit)。例如，一帧图像先划分成大小完全相同的64×64像素的LCU(N＝64)。其中某个LCU由3个32×32像素的CU和4个16×16像素的CU构成，这样7个成树状结构的CU构成一个CTU。而另一个LCU由2个32×32像素的CU、3个16×16像素的CU和20个8×8像素的CU构成。这样25个成树状结构的CU构成另一个CTU。对一帧图像进行编码，就是依次对一个一个CTU中的一个一个CU进行编码。在HEVC国际标准中，LCU与CTU是同义词。大小等于CTU的CU称为深度为0的CU。深度为0的CU上下左右四等分得到的CU称为深度为1的CU。深度为1的CU上下左右四等分得到的CU称为深度为2的CU。深度为2的CU上下左右四等分得到的CU称为深度为3的CU。在任一时刻，正在编码中的CTU称为当前编码CTU。在任一时刻，正在解码中的CTU称为当前解码CTU。当前编码CTU或当前解码CTU统称为当前CTU。
CU也可以再进一步被划分成若干子区域。子区域包括但不限于预测单元(PU)，变换单元(TU)，不对称划分(AMP)的区域。
一个彩色像素通常有3个分量(component)组成。最常用的两种像素色彩格式(pi×el color format)是由绿色分量、蓝色分量、红色分量组成的GBR色彩格式和由一个亮度(luma)分量及两个色度(chroma)分量组成的YUV色彩格式。通称为YUV的色彩格式实际包括多种色彩格式，如YCbCr色彩格式。因此，对一个CU进行编码时，可以把一个CU分成3个分量平面(G平面、B平面、R平面或Y平面、U平面、V平面)，对3个分量平面分别进行编码；也可以把一个像素的3个分量捆绑组合成一个3元组，对由这些3元组组成的CU整体进行编码。前一种像素及其分量的排列方式称为图像(及其CU)的平面格式(planar format)，而后一种像素及其分量的排列方式称为图像(及其CU)的叠包格式(packed format)。像素的GBR色彩格式和YUV色彩格式都是像素的3分量表现格式。
除了像素的3分量表现格式，像素的另一种常用的表现格式是调色板索引表现格式。在调色板索引表现格式中，一个像素的数值也可以用调色板的索引来表现。调色板空间中存储了需要被表现的像素的颜色的3个分量的数值或近似数值，调色板的地址被称为这个地址中存储的像素的颜色的索引。一个索引可以表现像素的颜色的一个分量，一个索引也可以表现像素的颜色的3个分量。调色板可以是一个，也可以是多个。在多个调色板的情形，一个完整的索引实际上由调色板序号(表示多个调色板中的哪一个)和该序号的调色板的索引两部分组成。像素的索引表现格式就是用索引来表现这个像素。如果一个图像区域(如编码块或解码块)中的像素不能全部都用调色板颜色来表现(即对该图像区域中至少一个像素，没有3个分量的数值与该像素相等或近似相等的调色板颜色及其索引)，则调色板中通常有一个特殊的称为逃逸颜色的索引，用来表现不能用正常的调色板颜色来表现的像素。因此，如果一个像素的索引是逃逸颜色的索引，则该像素需要用另外的专用的3个分量来表现其颜色。调色板中的正常颜色和 逃逸颜色都称为调色板颜色，但逃逸颜色是一个虚拟颜色，在调色板中并没有一个物理空间来存放这个颜色，只有一个特殊的专门的虚拟的索引。逃逸颜色的索引通常是调色板的最后一个索引。像素的索引表现格式也被称为像素的索引颜色(inde×ed color)或仿颜色(pseudo color)表现格式，或者常常被直接称为索引像素(inde×ed pi×el)或仿像素(pseudo pi×el)或像素索引或索引。索引有时也被称为指数。把像素用其索引表现格式来表现也称为索引化或指数化。
其他的常用的像素表现格式包括CMYK表现格式和灰度表现格式。
YUV色彩格式又可根据是否对色度分量进行下采样再细分成若干种子格式：1个像素由1个Y分量、1个U分量、1个V分量组成的YUV4:4:4像素色彩格式；左右相邻的2个像素由2个Y分量、1个U分量、1个V分量组成的YUV4:2:2像素色彩格式；左右上下相邻按2×2空间位置排列的4个像素由4个Y分量、1个U分量、1个V分量组成的YUV4:2:0像素色彩格式。一个分量一般用1个8～16比特的数字来表示。YUV4:2:2像素色彩格式和YUV4:2:0像素色彩格式都是对YUV4:4:4像素色彩格式施行色度分量的下采样得到。一个像素分量也称为一个像素样值(pi×el sample)或简单地称为一个样值(sample)。
编码或解码时的最基本元素可以是一个像素，也可以是一个像素分量，也可以是一个像素索引(即索引像素)。作为编码或解码的最基本元素的一个像素或一个像素分量或一个索引像素统称为一个像素样值，有时也通称为一个像素值，或简单地称为一个样值。
在本发明实施例中，“像素样值”、“像素值”、“样值”、“索引像素”、“像素索引”是同义词，根据上下文，可以明确是表示“像素”还是表示“一个像素分量”还是表示“索引像素”或者同时表示三者之任一。如果从上下文不能明确，那么就是同时表示三者之任一。
在本发明实施例中，编码块或解码块(统称为编解码块)是由若干像素值组成的一个区域。编解码块的形状可以是矩形、正方形、平行四边形、梯形、多边形、圆形、椭圆形及其他各种形状。矩形也包括宽度或高度为一个像素值的退化为线(即线段或线形)的矩形。一帧图像中，各个编解码块可以具有各不相同的形状和大小。一帧图像中，某些或全部编解码块可以有互相重叠部分，也可以所有编解码块都互不重叠。一个编解码块，可以由“像素”组成，也可以由“像素的分量”组成，也可以由“索引像素”组成，也可以由这3者混合组成，也可以由这3者中之任意2种混合组成。从视频图像编码或解码的角度，编解码块是指一帧图像中对其施行编码或解码的一个区域，包括但不限于以下至少一种：最大编码单元LCU、编码树单元CTU、编码单元CU、CU的子区域、预测单元PU、变换单元TU。
计算机屏幕图像的一个显著特点是同一帧图像内通常会有很多相似甚至完全相同的像素图样(pi×el pattern)。例如，计算机屏幕图像中常出现的中文或外文文字，都是由少数几种基本笔划所构成，同一帧图像内可以找到很多相似或相同的笔划。计算机屏幕图像中常见的菜单、图标等，也具有很多相似或相同的图样。因此，图像和视频压缩技术采用的复制方式，至少包括下列复制方式：
1)帧内块复制即帧内块匹配或称帧内运动补偿或称块匹配或称块复制。块复制编码或解码的基本运算是对一个当前编码块或当前解码块(简称为当前块)，从重构参考像素样值集内复制一个与当前块同样大小(同样像素样值的数目)的参考块，并将所述参考块的数值赋值予当前块。块复制方式的复制参数包括当前块的位移矢量，表示参考块与当前块之间的相对位置。一个当前块有一个位移矢量。
2)帧内微块复制即帧内微块匹配或称微块匹配或称微块复制。在微块 复制中，把一个当前块(如8×8像素样值)分成几个微块(如4×2像素样值的微块或8×2像素样值的微块或2×4像素样值的微块或2×8像素样值的微块)，微块复制编码或解码的基本运算是对当前块中的每一个编码微块或解码微块(简称为当前微块)，从重构参考像素样值集内复制一个参考微块，并将所述参考微块的数值赋值予当前微块。微块复制方式的复制参数包括当前微块的位移矢量，表示参考微块与当前微块之间的相对位置。一个当前微块有一个位移矢量。一个当前块分成多少个微块就有多少个位移矢量。
3)帧内线条(简称条)复制即帧内条匹配或称条匹配或称条复制。条是高度为1或宽度为1的微块，如4×1或8×1或1×4或1×8像素样值的微块。条复制编码或解码的基本运算是对当前块中的每一个编码条或解码条(简称为当前条)，从重构参考像素样值集内复制一个参考条，并将所述参考条的数值赋值予当前条。显然，条复制是微块复制的一种特殊情况。条复制方式的复制参数包括当前条的位移矢量，表示参考条与当前条之间的相对位置。一个当前条有一个位移矢量。一个当前块分成多少个条就有多少个位移矢量。
4)帧内串复制即帧内串匹配或称串匹配或称串复制或称像素串复制。在像素串复制中，把一个当前编码块或一个当前解码块(简称为当前块)分成几个长度可变的像素样值串。这里的串是指把一个任意形状的二维区域内的像素样值排列成一个长度远大于宽度的串(如宽度为1个像素样值而长度为37个像素样值的串或宽度为2个像素样值而长度为111个像素样值的串，通常但不限于长度是一个独立编码或解码参数而宽度是一个预定的或由其他编码或解码参数导出的参数)。串复制编码或解码的基本运算是对当前块中的每一个编码串或解码串(简称为当前串)，从重构参考像素样值集内复制一个参考串，并将所述参考串的数值赋值予当前串。串复制方式的复制参数包括当前串的位移矢量和复制长度即复制大小，分别表示参 考串与当前串之间的相对位置和当前串的长度即像素样值的数目。当前串的长度也是参考串的长度。一个当前串有一个位移矢量和一个复制长度。一个当前块分成多少个串就有多少个位移矢量和多少个复制长度。位移矢量也称为复制位置，其表现形式有：2维坐标、线性地址、距离、指针、索引、编号、模式号等。
5)调色板索引串复制即调色板或称索引串复制。在调色板编码和对应的解码方式中，首先构造或获取一个调色板，然后将当前编码块或当前解码块(简称为当前块)的部分或全部像素用调色板中的调色板颜色的索引来表现，再对索引进行编码和解码，包括但不限于：把一个当前块的索引分成几个长度可变的索引串，即进行索引串复制编码和解码。索引串复制编码或解码的基本运算是对当前块中的每一个索引编码串或索引解码串(简称为当前索引串)，从索引化的重构参考像素样值集内复制一个参考索引串，并将所述参考索引串的索引数值赋值予当前索引串。索引串复制方式的复制参数包括当前索引串的位移矢量和复制长度即复制大小，分别表示参考索引串与当前索引串之间的相对位置和当前索引串的长度即对应的像素样值的数目。当前索引串的长度也是参考索引串的长度。一个当前索引串有一个位移矢量和一个复制长度。一个当前块分成多少个索引串就有多少个位移矢量和多少个复制长度。位移矢量也称为复制位置，其表现形式有：2维坐标、线性地址、距离、指针、索引、编号、模式号等。在调色板索引串复制方式中，复制的参考像素取自调色板。所以，索引串也称为调色板颜色串或调色板像素串或调色板串，索引串复制方式也称为调色板复制方式或调色板方式。在调色板方式中，串也称为游程或行程。因此，索引串也称为索引游程或索引行程或简称为游程或行程。当前块的调色板颜色来源于当前块的像素颜色和/或调色板颜色候选集，而调色板颜色候选集由已完成编解码的编解码块的调色板颜色的一部分累积组成。
6)索引串复制与像素串复制混合的融合复制方式，简称索引-像素串融合复制方式，也称调色板-像素串融合复制方式或融合像素串复制的调色板方式或融合调色板的像素串复制方式或调色板与像素串复制方式。对一个当前编码块或当前解码块(简称为当前块)进行编码或解码时，部分或全部像素采用像素串复制方式，部分或全部像素采用索引串复制方式即参考像素取自调色板的调色板方式。
7)结合多种调色板与像素串复制方式的多重调色板与像素串复制方式。采用至少两种不同的调色板与像素串复制方式进行编码和解码。不同的调色板与像素串复制方式采用不同的融合方案来融合调色板复制与像素串复制。在一帧图像中，部分编解码块采用融合方案I的调色板与像素串复制方式，部分编解码块采用融合方案II的调色板与像素串复制方式，部分编解码块采用融合方案III的调色板与像素串复制方式，等等。不同的融合方案主要在下列方面可能有所不同：1)串的种类的数目，2)参数的取值范围，3)一个或若干复制参数的取值范围，4)复制位置即位移矢量的取值范围，5)当前索引或当前像素的位置，6)当前样值段的位置，7)参考索引或参考像素的位置，8)参考样值段的位置；9)复制形状。
其他的复制方式还包括矩形复制方式、以及若干种复制方式混合的复制方式等。
块复制方式中的块，微块复制方式中的微块，条复制方式中的条，串复制方式中的串，矩形复制方式中的矩形，调色板索引方式中的像素索引串，统称为像素样值段，简称样值段。样值段的基本组成元素是像素或像素分量或像素索引。一个样值段有一个复制参数，用来表示当前像素样值段与参考像素样值段之间的关系。因此，一个样值段是具有同样复制关系的一次复制操作的最小单位。一个复制参数包括若干复制参数分量，复制参数分量至少包括：位移矢量水平分量、位移矢量垂直分量、1维位移矢量、 线性地址、相对线性地址、索引、调色板线性地址、相对索引、调色板相对线性地址、复制长度、复制宽度、复制高度、矩形宽度、矩形长度、未匹配像素(又称无参考像素，即不是从其他地方复制过来的非复制像素)。
在各种复制方式中，像素样值或索引需要按照一定顺序排列。排列方式也称为扫描方式。扫描方式根据其路径形状，可分为下列几种：
A)水平Z形扫描方式又称水平光栅扫描方式。一个编码块或解码块(统称为编解码块)的像素样值或索引，一行一行排列，在所有的行内都按照同一方向(全部从左向右或者全部从右向左)排列。行与行之间可以从上向下排列，也可以从下向上排列。
B)垂直Z形扫描方式又称垂直光栅扫描方式。一个编码块或解码块(统称为编解码块)的像素样值或索引，一列一列排列，在所有的列内都按照同一方向(全部从上向下或者全部从下向上)排列。列与列之间可以从左向右排列，也可以从右向左排列。
C)水平弓形扫描方式。一个编码块或解码块(统称为编解码块)的像素样值或索引，一行一行排列，在奇数行内按照一个方向(如：从左向右)排列而在偶数行内按照另一个(相反)方向(如：从右向左)排列。行与行之间可以从上向下排列，也可以从下向上排列。
D)垂直弓形扫描方式。一个编码块或解码块(统称为编解码块)的像素样值或索引，一列一列排列，在奇数列内按照一个方向(如：从上向下)排列而在偶数列内按照另一个(相反)方向(如：从下向上)排列。列与列之间可以从左向右排列，也可以从右向左排列。
串复制(索引串复制或像素串复制或索引串-像素串融合复制)方式中，基本复制形状有下列2种：
I)一维线性复制形状。当前串和参考串都是在各个编解码块内按照预定的扫描方式的顺序排列形成的一维样值串，具有相等的长度，但这两个 串各自形成的二维区域不一定有相同的二维形状。
II)二维保形复制形状。当前串在当前编解码块内按照预定的扫描方式的顺序排列。参考串与当前串保持完全相同的二维形状，具有相等的长度。
以上每种基本复制形状又可根据具体的扫描方式细分为多种复制形状，如垂直弓形一维线性复制形状、水平Z形二维保形复制形状等。
需要说明的是，“复制”是重构和解码的操作，对应的编码操作是“匹配”。因此，各种复制方式如块匹配方式、微块复制方式、线条复制方式、像素串复制方式、索引串复制方式等也称为块匹配方式、微块匹配方式、线条匹配方式、像素串匹配方式、索引串匹配方式等。
在多像素段复制方式，如微块复制方式、条复制方式、像素串复制方式、调色板与像素串复制方式中，编解码块被分成多个像素段，每个像素段有一个复制参数，一个复制参数又由多种复制参数组成。在多像素段复制方式中，对复制参数按照对应的像素段在编解码块中的位置的前后顺序依次以一个复制参数为单位进行熵编码或熵解码并存在于视频码流。由于一个复制参数即有使用上下文模型(简称CM)进行熵编码的二元码(简称bit或bin)部分，又有未使用CM进行熵编码的二元码部分，以一个复制参数为单位对一个一个复制参数依次进行熵编码就会导致交织地对复制参数的使用CM的bin部分和未使用CM的bin部分进行熵编码。这种交织的做法严重影响了对复制参数的多比特位并行熵编码和熵解码处理，降低了熵编码和熵解码的吞吐量。
基于此，本发明实施例提供了一种图像编码及解码方法、图像处理设备。在对编解码块的一种或多种复制参数进行编解码时，首先把每个复制参数按照预定的规则分割成若干部分，把各个复制参数的同一部分归类合并后重新排序依次进行熵编码或熵解码。
本发明实施例中，把每个复制参数分割成使用CM的bin部分和未使用 CM的bin部分。
本发明实施例中，将各个复制参数的使用CM的bin部分归类至一组，将各个复制参数的未使用CM的bin部分归类至另一组，先对一组进行熵编码或熵解码，再对另一组进行熵编码或熵解码，如图1(a)所示。
本发明实施例中，在归类合并后的复制参数的使用CM的bin部分中，同一种复制参数集中在一起进行熵编码或熵解码并存在于视频码流中，在归类合并后的复制参数的未使用CM的bin部分中，同一种复制参数集中在一起进行熵编码或熵解码并存在于视频码流中，如图1(b)所示，第一种复制参数即复制参数A(如：位移矢量水平分量)的使用CM的bin部分集中在一起进行熵编码或熵解码并存在于视频码流中，第二种复制参数即复制参数B(如：位移矢量垂直分量)的使用CM的bin部分集中在一起进行熵编码或熵解码并存在于视频码流中，第三种复制参数即复制参数C(如：复制长度)的使用CM的bin部分集中在一起进行熵编码或熵解码并存在于视频码流中，等等；接下来，第一种复制参数即复制参数A(如：位移矢量水平分量)的未使用CM的bin部分集中在一起进行熵编码或熵解码并存在于视频码流中，第二种复制参数即复制参数B(如：位移矢量垂直分量)的未使用CM的bin部分集中在一起进行熵编码或熵解码并存在于视频码流中，第三种复制参数即复制参数C(如：复制长度)的未使用CM的bin部分集中在一起进行熵编码或熵解码并存在于视频码流中，等等。
本发明实施例中，在归类合并后的复制参数的使用CM的bin部分中，同一种复制参数的一个复制参数的所有比特位集中在一起进行熵编码或熵解码并存在于视频码流中，在归类合并后的复制参数的未使用CM的bin部分中，同一种复制参数的一个复制参数的所有比特位集中在一起进行熵编码或熵解码并存在于视频码流中，如图1(c)所示，在归类合并后的复制参数的使用CM的bin部分中，第一种复制参数即复制参数A的第一个 复制参数的所有比特位A11,A12,…A1i(共有i位，这里Apq表示复制参数A的第p个复制参数的第q个比特位)集中在一起进行熵编码或熵解码并存在于视频码流中，紧接着，复制参数A的第二个复制参数的所有比特位A21,A22,…A2i集中在一起进行熵编码或熵解码并存在于视频码流中，……，复制参数A的第k个复制参数的所有比特位Ak1,Ak2,…Aki集中在一起进行熵编码或熵解码并存在于视频码流中，一直到复制参数A的最后一个复制参数的所有比特位，接着，第二种复制参数即复制参数B的第一个复制参数的所有比特位B11,B12,…B1m(共有m位，这里Bpq表示复制参数B的第p个复制参数的第q个比特位)集中在一起进行熵编码或熵解码并存在于视频码流中，紧接着，复制参数B第二个复制参数的所有比特位B21,B22,…B2m集中在一起进行熵编码或熵解码并存在于视频码流中，……，复制参数B的第k个复制参数的所有比特位Bk1,Bk2,…Bkm集中在一起进行熵编码或熵解码并存在于视频码流中，一直到复制参数B的最后一个复制参数的所有比特位，等等；在归类合并后的复制参数的未使用CM的bin部分中，第一种复制参数即复制参数A的第一个复制参数的所有比特位A1(i+1),A1(i+2),…A1j(共有j-i位，这里Apq表示复制参数A的第p个复制参数的第q个比特位)集中在一起进行熵编码或熵解码并存在于视频码流中，紧接着，复制参数A的第二个复制参数的所有比特位A2(i+1),A2(i+2),…A2j集中在一起进行熵编码或熵解码并存在于视频码流中，……，复制参数A的第k个复制参数的所有比特位Ak(i+1),Ak(i+2),…Akj集中在一起进行熵编码或熵解码并存在于视频码流中，一直到复制参数A的最后一个复制参数的所有比特位，接着，第二种复制参数即复制参数B的第一个复制参数的所有比特位B1(m+1),B1(m+2),…B1n(共有n-m位，这里Bpq表示复制参数B的第p个复制参数的第q个比特位)集中在一起进行熵编码或熵解码并存在于视频码流中，紧接着，复制参数B第二个复制参数的所有比特位B2(m+1), B2(m+2),…B2n集中在一起进行熵编码或熵解码并存在于视频码流中，……，复制参数B的第k个复制参数的所有比特位Bk(m+1),Bk(m+2),…Bkn集中在一起进行熵编码或熵解码并存在于视频码流中，一直到复制参数B的最后一个复制参数的所有比特位，等等。
本发明实施例中，在归类合并后的复制参数的使用CM的bin部分中，同一种复制参数的全体复制参数的一个比特位集中在一起进行熵编码或熵解码并存在于视频码流中，在归类合并后的复制参数的未使用CM的bin部分中，同一种复制参数的全体复制参数的一个比特位集中在一起进行熵编码或熵解码并存在于视频码流中，如图1(d)所示，在归类合并后的复制参数的使用CM的bin部分中，第一种复制参数即复制参数A的全体复制参数的第一个比特位A11,A21,…Ak1,……(这里Apq表示复制参数A的第p个复制参数的第q个比特位)集中在一起进行熵编码或熵解码并存在于视频码流中，紧接着，复制参数A的全体复制参数的第二个比特位A12,A22,…Ak2,……集中在一起进行熵编码或熵解码并存在于视频码流中，……，一直到复制参数A的全体复制参数的最后一个比特位即第i个比特位A1i,A2i,…Aki,……集中在一起进行熵编码或熵解码并存在于视频码流中，接着，第二种复制参数即复制参数B的全体复制参数的第一个比特位B11,B21,…Bk1,……(这里Bpq表示复制参数B的第p个复制参数的第q个比特位)集中在一起进行熵编码或熵解码并存在于视频码流中，紧接着，复制参数B的全体复制参数的第二个比特位B12,B22,…Bk2,……集中在一起进行熵编码或熵解码并存在于视频码流中，……，一直到复制参数B的全体复制参数的最后一个比特位即第m个比特位B1m,B2m,…Bkm,……集中在一起进行熵编码或熵解码并存在于视频码流中，等等；在归类合并后的复制参数的未使用CM的bin部分中，第一种复制参数即复制参数A的全体复制参数的第i+1个比特位A1(i+1),A2(i+1),…Ak(i+1),……(这 里Apq表示复制参数A的第p个复制参数的第q个比特位)集中在一起进行熵编码或熵解码并存在于视频码流中，紧接着，复制参数A的全体复制参数的第i+2个比特位A1(i+2),A2(i+2),…Ak(i+2),……集中在一起进行熵编码或熵解码并存在于视频码流中，……，一直到复制参数A的全体复制参数的最后一个比特位即第j个比特位A1j,A2j,…Akj,……集中在一起进行熵编码或熵解码并存在于视频码流中，接着，第二种复制参数即复制参数B的全体复制参数的第m+1个比特位B1(m+1),B2(m+1),…Bk(m+1),……(这里Bpq表示复制参数B的第p个复制参数的第q个比特位)集中在一起进行熵编码或熵解码并存在于视频码流中，紧接着，复制参数B的全体复制参数的第m+2个比特位B1(m+2),B2(m+2),…Bk(m+1),……集中在一起进行熵编码或熵解码并存在于视频码流中，……，一直到复制参数B的全体复制参数的最后一个比特位即第n个比特位B1n,B2n,…Bkn,……集中在一起进行熵编码或熵解码并存在于视频码流中，等等。
本发明实施例的技术方案，对复制参数不是按照对应的像素段在编解码块中的位置的前后顺序依次以一个复制参数为单位进行熵编码或熵解码并存在于视频码流，而是把一种或几种复制参数的每个复制参数都分割成若干部分(个别复制参数的个别部分也可以为空)，把各个复制参数的同一部分归类合并后重新排序，再依次进行熵编码或熵解码并存在于视频码流。
本发明实施例的技术方案，是对一种或多种复制参数的分割，归类、重组，包括对复制参数的个体的分割，对分割后的个体部分的归类，重组成新的排列顺序，按照新的排列顺序依次进行熵编码或熵解码并存在于视频码流。本发明实施例适用于叠包格式图像的编码和解码，本发明实施例也同样适用于分量平面格式图像的编码和解码。
图2为本发明实施例的图像编码方法的流程示意图一，本发明实施例中，对一个当前编码块的一种或多种复制参数的多个复制参数按照分割归 类重组后顺序进行熵编码并产生至少含多个复制参数的信息的视频码流；如图2所示，所述图像编码方法包括以下步骤：
步骤201：对当前编码块的多个复制参数进行调整处理；其中，所述多个复制参数包括一种或多种类型的复制参数分量。
步骤202：对所述复制参数按照所述调整处理后顺序进行熵编码，生成包括多个复制参数的信息的视频码流。
本发明实施例的上述方案中，所述编码块是图像的编码区域，所述编码块包括以下至少一种：LCU、CTU、CU、CU的子区域、PU、TU。
本发明实施例的上述方案中，所述对当前编码块的多个复制参数进行调整处理，包括：
将所述复制参数按照预定规则分割成N个子部分，N≥2；将所述复制参数的同一子部分归类合并后，重新排序依次进行熵编码；其中，所述复制参数的所述N个子部分中的子部分为空或非空。
本发明实施例的上述方案中，所述对当前编码块的多个复制参数进行调整处理，还包括：将所述复制参数分割成使用CM的bin部分和未使用CM的bin部分。
在一实施方式中，所述编码块使用的复制方式为融合调色板的像素串复制方式；
将各个复制参数所包括的下列一种或多种复制参数分量分割成使用CM的bin部分和未使用CM的bin部分：
像素段的类型、像素段的复制位置分量1、像素段的复制位置分量2、像素段的复制位置分量3、像素段的复制长度。
其中，像素段的类型：参考像素是否来自调色板；
像素段的复制位置分量1：参考像素不是来自调色板时，参考像素是否位于ABOVE位置(即水平扫描时当前像素的正上方位置或垂直扫描时当 前像素的正左方位置)；
像素段的复制位置分量2：参考像素不是来自调色板并且不是位于ABOVE位置时的位移矢量水平分量；
像素段的复制位置分量3：参考像素不是来自调色板并且不是位于ABOVE位置时的位移矢量垂直分量。
在一实施方式中，所述编码块使用的复制方式为融合调色板的像素串复制方式；
将所述复制参数分割成使用CM的bin部分和未使用CM的bin部分时，所述使用CM的bin部分包括以下一个或多个bit：
像素段的类型t；其中，t取第一值时表示参考像素来自调色板，t取第二值时表示参考像素不是来自调色板；
像素段的ABOVE复制位置a；其中，当t表示参考像素不是来自调色板时所述a存在；a取第三值时表示参考像素位于ABOVE位置，a取第四值时表示参考像素不是位于ABOVE位置；
像素段的位移矢量水平分量x0；其中，当a表示参考像素不是位于ABOVE位置时所述x0存在；x0取第五值时表示位移矢量水平分量为零，x0取第六值时表示位移矢量水平分量不为零；
像素段的位移矢量垂直分量y0；其中，当a表示参考像素不是位于ABOVE位置时所述y0存在；y0取第七值时表示位移矢量垂直分量为零，y0取第八值时表示位移矢量垂直分量不为零；
像素段的复制长度的二值化表示中的首位二元码b0。这里，像素段的复制长度的二值化表示b0b1b2……，首位二元码b0；而其他比特位b1b2……都在未使用CM的bin部分。
在一实施方式中，将所述复制参数分割成使用CM的bin部分和未使用CM的bin部分时，将各个复制参数的使用CM的bin部分归类至一组，将 各个复制参数的未使用CM的bin部分归类至另一组；其中，进行熵编码时，依次对所述两组进行熵编码。
在一实施方式中，将复制参数分割成使用CM的bin部分和未使用CM的bin部分时，在所述使用CM的bin部分中，对同类型的复制参数分量集中进行熵编码；在所述未使用CM的bin部分中，对同类型的复制参数分量集中进行熵编码。
在一实施方式中，将所述复制参数分割成使用CM的bin部分和未使用CM的bin部分时，在所述使用CM的bin部分中，对同类型的复制参数分量的复制参数的所有bin集中进行熵编码；在所述未使用CM的bin部分中，对同类型的复制参数分量的复制参数的所有bin集中进行熵编码。
图3为本发明实施例的图像解码方法的流程示意图一，本发明实施例中，解析一个当前解码块的至少含多个复制参数的信息的视频码流，对一种或多种复制参数的多个复制参数按照分割归类重组后顺序进行熵解码；如图3所示，所述图像解码方法包括以下步骤：
步骤301：解析解码块的包括多个复制参数的信息的视频码流，其中，所述多个复制参数包括一种或多种类型的复制参数分量。
步骤302：对所述多个复制参数进行熵解码，获得所述多个复制参数的二元码；对所述二元码进行调整操作，得到所述多个复制参数的取值。
本发明实施例的上述方案中，所述解码块是图像的解码区域，所述解码块包括以下至少一种：LCU、CTU、CU、CU的子区域、PU、TU。
本发明实施例的上述方案中，所述对所述二元码进行调整操作，得到所述多个复制参数的取值，包括：
将所述二元码按照预定规则分割成N个子部分，N≥2；
将所述二元码的子部分中的二元码进行归类合并后，映射为所述多个复制参数的恢复值；
其中，所述复制参数的所述N个子部分中的子部分为空或非空。
本发明实施例的上述方案中，将所述二元码分割成使用CM进行熵解码的bin部分和未使用CM进行熵解码的bin部分；
根据所述复制参数对应的二元码在熵解码过程中使用CM的对应表，从所述使用CM进行熵解码的bin部分和/或未使用CM进行熵解码的bin部分取对应的bin，组成所述复制参数对应的二元码；
将所述复制参数对应的二元码转换成所述复制参数的取值。
在一实施方式中，所述编码块使用的复制方式为融合调色板的像素串复制方式；
下述一种或多种复制参数对应的所述二元码分割成使用CM的bin部分和未使用CM的bin部分，包括：
像素段的类型、像素段的复制位置分量1、像素段的复制位置分量2、像素段的复制位置分量3、像素段的复制长度。
在一实施方式中，所述编码块使用的复制方式为融合调色板的像素串复制方式；
将所述复制参数对应的所述二元码分割成使用CM的bin部分和未使用CM的bin部分时，所述使用CM的bin部分包括以下一个或多个bin：
像素段的类型t；其中，t取第一值时表示参考像素来自调色板，t取第二值时表示参考像素不是来自调色板；
像素段的ABOVE复制位置a；其中，当t表示参考像素不是来自调色板时所述a存在；a取第三值时表示参考像素位于ABOVE位置，a取第四值时表示参考像素不是位于ABOVE位置；
像素段的位移矢量水平分量x0；其中，当a表示参考像素不是位于ABOVE位置时所述x0存在；x0取第五值时表示位移矢量水平分量为零，x0取第六值时表示位移矢量水平分量不为零；
像素段的位移矢量垂直分量y0；其中，当a表示参考像素不是位于ABOVE位置时所述y0存在；y0取第七值时表示位移矢量垂直分量为零，y0取第八值时表示位移矢量垂直分量不为零；
像素段的复制长度的二值化表示中的首位二元码b0。
在一实施方式中，将所述复制参数对应的二元码对应为成使用CM的bin部分和未使用CM的bin部分时，依次对所述复制参数的使用CM的bin部分对应的视频码流进行熵解码、对所述复制参数的未使用CM的bin部分对应的视频码流进行熵解码；
根据所述复制参数对应的二元码在熵解码过程中使用CM的对应表，从所述使用CM进行熵解码的bin部分和/或未使用CM进行熵解码的bin部分取对应的bin，组成所述复制参数对应的二元码；
将所述复制参数对应的二元码转换成所述复制参数的取值。
在一实施方式中，进行熵解码时，依次对所述复制参数对应的二元码中由使用CM的bin部分组成的一组和所述复制参数对应的二元码中有不使用CM的bin部分组成的另一组进行熵解码；
所述复制参数对应的二元码对应为使用CM的bin部分和未使用CM的bin部分时，在所述使用CM的bin部分中，对同类型复制参数分量的二元码对应的码流进行熵解码；在所述未使用CM的bin部分中，对同类型复制参数分量的二元码对应进行熵解码；
根据所述复制参数对应的二元码在熵解码过程中使用CM的对应表，从所述使用CM进行熵解码的bin部分和/或未使用CM进行熵解码的bin部分取对应的bin，组成所述复制参数对应的二元码；
将所述复制参数对应的二元码转换成所述复制参数的取值。
在一实施方式中，所述复制参数对应的二元码分割成使用CM的bin部分和未使用CM的bin部分时，在所述使用CM的bin部分中，对同类型 复制参数分量的复制参数的二元码对应的视频码流进行熵解码；在所述未使用CM的bin部分中，对同类型复制参数分量的复制参数的二元码对应的视频码流进行熵解码；
根据所述复制参数对应的二元码在熵解码过程中使用CM的对应表，从所述使用CM进行熵解码的bin部分和/或未使用CM进行熵解码的bin部分取对应的bin，组成所述复制参数对应的二元码；
将所述复制参数对应的二元码转换成所述复制参数的取值。
图4为本发明实施例的图像编码方法的流程示意图二，如图4所示，所述流程中：
对当前编码块的一种或多种复制参数的多个复制参数按照分割归类重组后顺序进行熵编码并产生至少含多个复制参数的信息的视频码流。
图5为本发明实施例的图像解码方法的流程示意图二，如图5所示，所述流程中：
解析当前解码块的至少含多个复制参数的信息的视频码流，对一种或多种复制参数的多个复制参数按照分割归类重组后顺序进行熵解码。
图6为本发明实施例的图像处理设备的结构组成示意图一，所述图像处理设备能够对图像进行编码，如图6所示，所述图像处理设备包括：
重组单元61，配置为对当前编码块的多个复制参数进行调整处理；
熵编码单元62，配置为对所述复制参数按照所述调整处理后顺序进行熵编码，生成包括多个复制参数的信息的视频码流；
其中，所述多个复制参数包括一种或多种类型的复制参数分量。
本领域技术人员应当理解，图6所示的图像处理设备中的各单元的实现功能可参照前述图像编码方法的相关描述而理解。图6所示的图像处理设备中的各单元的功能可通过运行于处理器上的程序而实现，也可通过具体的逻辑电路而实现。
在实际应用中，所述图像处理设备中的各个单元所实现的功能，均可由位于图像处理设备中的中央处理器(Central Processing Unit，CPU)、或微处理器(Micro Processor Unit，MPU)、或数字信号处理器(Digital Signal Processor，DSP)、或现场可编程门阵列(Field Programmable Gate Array，FPGA)等实现。
图7为本发明实施例的图像处理设备的结构组成示意图二，所述图像处理设备能够对图像进行解码，如图7所示，所述图像处理设备包括：
解析单元71，配置为解析解码块的包括多个复制参数的信息的视频码流；
熵解码单元72，配置为对所述多个复制参数进行熵解码，获得所述多个复制参数的二元码；对所述二元码进行调整操作，得到所述多个复制参数的取值；
其中，所述多个复制参数包括一种或多种类型的复制参数分量。
本领域技术人员应当理解，图7所示的图像处理设备中的各单元的实现功能可参照前述图像解码方法的相关描述而理解。图7所示的图像处理设备中的各单元的功能可通过运行于处理器上的程序而实现，也可通过具体的逻辑电路而实现。
在实际应用中，所述图像处理设备中的各个单元所实现的功能，均可由位于图像处理设备中的中央处理器(Central Processing Unit，CPU)、或微处理器(Micro Processor Unit，MPU)、或数字信号处理器(Digital Signal Processor，DSP)、或现场可编程门阵列(Field Programmable Gate Array，FPGA)等实现。
图8为本发明实施例的图像处理设备的结构组成示意图三，所述图像处理设备能够对图像进行编码及解码，如图8所示，所述图像处理设备包括：
重组单元81，配置为对当前编码块的多个复制参数进行调整处理；
熵编码单元82，配置为对所述复制参数按照所述调整处理后顺序进行熵编码，生成包括多个复制参数的信息的视频码流；
其中，所述多个复制参数包括一种或多种类型的复制参数分量。
解析单元83，配置为解析解码块的包括多个复制参数的信息的视频码流；
熵解码单元84，配置为对所述多个复制参数进行熵解码，获得所述多个复制参数的二元码；对所述二元码进行调整操作，得到所述多个复制参数的取值；
其中，所述多个复制参数包括一种或多种类型的复制参数分量。
在实际应用中，所述图像处理设备中的各个单元所实现的功能，均可由位于图像处理设备中的中央处理器(Central Processing Unit，CPU)、或微处理器(Micro Processor Unit，MPU)、或数字信号处理器(Digital Signal Processor，DSP)、或现场可编程门阵列(Field Programmable Gate Array，FPGA)等实现。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明实施例上述图像处理设备如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算 机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read Only Memory)、磁碟或者光盘等各种可以存储程序代码的介质。这样，本发明实施例不限制于任何特定的硬件和软件结合。
相应地，本发明实施例还提供一种计算机存储介质，其中存储有计算机程序，该计算机程序用于执行本发明实施例的图像编码方法和/或图像解码方法。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保 护范围。
工业实用性
本发明实施例的技术方案，对当前编码块的多个复制参数进行调整处理；对所述复制参数按照所述调整处理后顺序进行熵编码，生成包括多个复制参数的信息的视频码流；其中，所述多个复制参数包括一种或多种类型的复制参数分量。解析解码块的包括多个复制参数的信息的视频码流；对所述多个复制参数进行熵解码，获得所述多个复制参数的二元码；对所述二元码进行调整操作，得到所述多个复制参数的取值；其中，所述多个复制参数包括一种或多种类型的复制参数分量。避免了通过交织的做法而影响对复制参数的多比特位并行熵编码和熵解码处理，提高了熵编码和熵解码的吞吐量。

Claims (21)

  1. 一种图像编码方法，所述方法包括：
    对当前编码块的多个复制参数进行调整处理；
    对所述复制参数按照所述调整处理后顺序进行熵编码，生成包括多个复制参数的信息的视频码流；
    其中，所述多个复制参数包括一种或多种类型的复制参数分量。
  2. 根据权利要求1所述的图像编码方法，其中，所述编码块是图像的编码区域，所述编码块包括以下至少一种：最大编码单元LCU、编码树单元CTU、编码单元CU、CU的子区域、预测单元PU、变换单元TU。
  3. 根据权利要求1所述的图像编码方法，其中，所述对当前编码块的多个复制参数进行调整处理，包括：
    将所述复制参数按照预定规则分割成N个子部分，N≥2；
    将所述复制参数的同一子部分归类合并后，重新排序依次进行熵编码；
    其中，所述复制参数的所述N个子部分中的子部分为空或非空。
  4. 根据权利要求1或3所述的图像编码方法，其中，所述对当前编码块的多个复制参数进行调整处理，还包括：
    将所述复制参数分割成使用上下文模型CM的二元码bin部分和未使用CM的bin部分。
  5. 根据权利要求4所述的图像编码方法，其中，所述编码块使用的复制方式为融合调色板的像素串复制方式；
    将各个复制参数所包括的下列一种或多种复制参数分量分割成使用CM的bin部分和未使用CM的bin部分：
    像素段的类型、像素段的复制位置分量1、像素段的复制位置分量2、像素段的复制位置分量3、像素段的复制长度。
  6. 根据权利要求4所述的图像编码方法，其中，所述编码块使用的复 制方式为融合调色板的像素串复制方式；
    将所述复制参数分割成使用CM的bin部分和未使用CM的bin部分时，所述使用CM的bin部分包括以下一个或多个bin：
    像素段的类型t；其中，t取第一值时表示参考像素来自调色板，t取第二值时表示参考像素不是来自调色板；
    像素段的ABOVE复制位置a；其中，当t表示参考像素不是来自调色板时所述a存在；a取第三值时表示参考像素位于ABOVE位置，a取第四值时表示参考像素不是位于ABOVE位置；
    像素段的位移矢量水平分量x0；其中，当a表示参考像素不是位于ABOVE位置时所述x0存在；x0取第五值时表示位移矢量水平分量为零，x0取第六值时表示位移矢量水平分量不为零；
    像素段的位移矢量垂直分量y0；其中，当a表示参考像素不是位于ABOVE位置时所述y0存在；y0取第七值时表示位移矢量垂直分量为零，y0取第八值时表示位移矢量垂直分量不为零；
    像素段的复制长度的二值化表示中的首位二元码b0。
  7. 根据权利要求4所述的图像编码方法，其中，所述方法还包括：
    将所述复制参数分割成使用CM的bin部分和未使用CM的bin部分时，将各个复制参数的使用CM的bin部分归类至一组，将所述复制参数的未使用CM的bin部分归类至另一组；
    其中，进行熵编码时，依次对所述两组进行熵编码。
  8. 根据权利要求4所述的图像编码方法，其中，所述方法还包括：
    将所述复制参数分割成使用CM的bin部分和未使用CM的bin部分时，在所述使用CM的bin部分中，对同类型的复制参数分量集中进行熵编码；在所述未使用CM的bin部分中，对同类型的复制参数分量集中进行熵编码。
  9. 根据权利要求4所述的图像编码方法，其中，所述方法还包括：
    将所述复制参数分割成使用CM的bin部分和未使用CM的bin部分时，在所述使用CM的bin部分中，对同类型的复制参数分量的复制参数的所有bin集中进行熵编码；在所述未使用CM的bin部分中，对同类型的复制参数分量的复制参数的所有bin集中进行熵编码。
  10. 一种图像解码方法，所述方法包括：
    解析解码块的包括多个复制参数的信息的视频码流；
    对所述多个复制参数进行熵解码，获得所述多个复制参数的二元码；
    对所述二元码进行调整操作，得到所述多个复制参数的取值；
    其中，所述多个复制参数包括一种或多种类型的复制参数分量。
  11. 根据权利要求10所述的图像解码方法，其中，所述解码块是图像的解码区域，所述解码块包括以下至少一种：LCU、CTU、CU、CU的子区域、PU、TU。
  12. 根据权利要求10所述的图像解码方法，其中，所述对所述二元码进行调整操作，得到所述多个复制参数的取值，包括：
    将所述二元码按照预定规则分割成N个子部分，N≥2；
    将所述二元码的子部分中的二元码进行归类合并后，映射为所述多个复制参数的恢复值；
    其中，所述复制参数的所述N个子部分中的子部分为空或非空。
  13. 根据权利要求12所述的图像解码方法，其中，所述方法还包括：
    将所述二元码分割成使用CM进行熵解码的bin部分和未使用CM进行熵解码的bin部分；
    根据所述复制参数对应的二元码在熵解码过程中使用CM的对应表，从所述使用CM进行熵解码的bin部分和/或未使用CM进行熵解码的bin部分取对应的bin，组成所述复制参数对应的二元码；
    将所述复制参数对应的二元码转换成所述复制参数的取值。
  14. 根据权利要求13所述的图像解码方法，其中，所述解码块使用的复制方式为融合调色板的像素串复制方式；
    下述一种或多种复制参数对应的所述二元码分割成使用CM的bin部分和未使用CM的bin部分，包括：
    像素段的类型、像素段的复制位置分量1、像素段的复制位置分量2、像素段的复制位置分量3、像素段的复制长度。
  15. 根据权利要求13所述的图像解码方法，其中，所述解码块使用的复制方式为融合调色板的像素串复制方式；
    将所述复制参数对应的所述二元码分割成使用CM的bin部分和未使用CM的bin部分时，所述使用CM的bin部分包括以下一个或多个bin：
    像素段的类型t；其中，t取第一值时表示参考像素来自调色板，t取第二值时表示参考像素不是来自调色板；
    像素段的ABOVE复制位置a；其中，当t表示参考像素不是来自调色板时所述a存在；a取第三值时表示参考像素位于ABOVE位置，a取第四值时表示参考像素不是位于ABOVE位置；
    像素段的位移矢量水平分量x0；其中，当a表示参考像素不是位于ABOVE位置时所述x0存在；x0取第五值时表示位移矢量水平分量为零，x0取第六值时表示位移矢量水平分量不为零；
    像素段的位移矢量垂直分量y0；其中，当a表示参考像素不是位于ABOVE位置时所述y0存在；y0取第七值时表示位移矢量垂直分量为零，y0取第八值时表示位移矢量垂直分量不为零；
    像素段的复制长度的二值化表示中的首位二元码b0。
  16. 根据权利要求13所述的图像解码方法，其中，所述方法还包括：
    将所述复制参数对应的二元码对应为成使用CM的bin部分和未使用CM的bin部分时，依次对所述复制参数的使用CM的bin部分对应的视频 码流进行熵解码、对所述复制参数的未使用CM的bin部分对应的视频码流进行熵解码；
    根据所述复制参数对应的二元码在熵解码过程中使用CM的对应表，从所述使用CM进行熵解码的bin部分和/或未使用CM进行熵解码的bin部分取对应的bin，组成所述复制参数对应的二元码；
    将所述复制参数对应的二元码转换成所述复制参数的取值。
  17. 根据权利要求13所述的图像解码方法，其中，所述方法还包括：
    进行熵解码时，依次对所述复制参数对应的二元码中由使用CM的bin部分组成的一组和所述复制参数对应的二元码中有不使用CM的bin部分组成的另一组进行熵解码；
    所述复制参数对应的二元码对应为使用CM的bin部分和未使用CM的bin部分时，在所述使用CM的bin部分中，对同类型复制参数分量的二元码对应的码流进行熵解码；在所述未使用CM的bin部分中，对同类型复制参数分量的二元码对应进行熵解码；
    根据所述复制参数对应的二元码在熵解码过程中使用CM的对应表，从所述使用CM进行熵解码的bin部分和/或未使用CM进行熵解码的bin部分取对应的bin，组成所述复制参数对应的二元码；
    将所述复制参数对应的二元码转换成所述复制参数的取值。
  18. 根据权利要求13所述的图像解码方法，其中，所述方法还包括：
    所述复制参数对应的二元码分割成使用CM的bin部分和未使用CM的bin部分时，在所述使用CM的bin部分中，对同类型复制参数分量的复制参数的二元码对应的视频码流进行熵解码；在所述未使用CM的bin部分中，对同类型复制参数分量的复制参数的二元码对应的视频码流进行熵解码；
    根据所述复制参数对应的二元码在熵解码过程中使用CM的对应表，从所述使用CM进行熵解码的bin部分和/或未使用CM进行熵解码的bin 部分取对应的bin，组成所述复制参数对应的二元码；
    将所述复制参数对应的二元码转换成所述复制参数的取值。
  19. 一种图像处理设备，所述设备包括：
    重组单元，配置为对当前编码块的多个复制参数进行调整处理；
    熵编码单元，配置为对所述复制参数按照所述调整处理后顺序进行熵编码，生成包括多个复制参数的信息的视频码流；
    其中，所述多个复制参数包括一种或多种类型的复制参数分量。
  20. 一种图像处理设备，所述设备包括：
    解析单元，配置为解析解码块的包括多个复制参数的信息的视频码流；
    熵解码单元，配置为对所述多个复制参数进行熵解码，获得所述多个复制参数的二元码；对所述二元码进行调整操作，得到所述多个复制参数的取值；
    其中，所述多个复制参数包括一种或多种类型的复制参数分量。
  21. 一种计算机存储介质，所述计算机存储介质中存储有计算机可执行指令，该计算机可执行指令配置为执行权利要求1-18任一项所述的图像编码方法和/或图像解码方法。
PCT/CN2016/085010 2015-06-09 2016-06-06 图像编码及解码方法、图像处理设备、计算机存储介质 WO2016197898A1 (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US15/580,716 US10575022B2 (en) 2015-06-09 2016-06-06 Image encoding and decoding method, image processing device and computer storage medium
EP16806796.5A EP3310059B1 (en) 2015-06-09 2016-06-06 Image encoding and decoding method, image processing device, and computer storage medium

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
CN201510310951 2015-06-09
CN201510310951.3 2015-06-09
CN201610363506.8 2016-05-27
CN201610363506.8A CN106254888B (zh) 2015-06-09 2016-05-27 一种图像编码及解码方法、图像处理设备

Publications (1)

Publication Number Publication Date
WO2016197898A1 true WO2016197898A1 (zh) 2016-12-15

Family

ID=57502881

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2016/085010 WO2016197898A1 (zh) 2015-06-09 2016-06-06 图像编码及解码方法、图像处理设备、计算机存储介质

Country Status (1)

Country Link
WO (1) WO2016197898A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112672160A (zh) * 2020-12-17 2021-04-16 绍兴文理学院 融合帧内块复制和串复制编码参数的编码解码方法和装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101511024A (zh) * 2009-04-01 2009-08-19 北京航空航天大学 实时电子稳像中基于运动状态识别的运动补偿方法
US20100111162A1 (en) * 2008-10-30 2010-05-06 Vixs Systems, Inc. Video transcoding system with drastic scene change detection and method for use therewith
CN101888556A (zh) * 2008-03-19 2010-11-17 华为技术有限公司 编码、解码方法和编码、解码装置
CN104378644A (zh) * 2013-08-16 2015-02-25 上海天荷电子信息有限公司 定宽度变长度像素样值串匹配增强的图像压缩方法和装置
CN104683805A (zh) * 2013-11-30 2015-06-03 同济大学 图像编码、解码方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101888556A (zh) * 2008-03-19 2010-11-17 华为技术有限公司 编码、解码方法和编码、解码装置
US20100111162A1 (en) * 2008-10-30 2010-05-06 Vixs Systems, Inc. Video transcoding system with drastic scene change detection and method for use therewith
CN101511024A (zh) * 2009-04-01 2009-08-19 北京航空航天大学 实时电子稳像中基于运动状态识别的运动补偿方法
CN104378644A (zh) * 2013-08-16 2015-02-25 上海天荷电子信息有限公司 定宽度变长度像素样值串匹配增强的图像压缩方法和装置
CN104683805A (zh) * 2013-11-30 2015-06-03 同济大学 图像编码、解码方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3310059A4 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112672160A (zh) * 2020-12-17 2021-04-16 绍兴文理学院 融合帧内块复制和串复制编码参数的编码解码方法和装置
CN112672160B (zh) * 2020-12-17 2023-10-10 绍兴文理学院 融合帧内块复制和串复制编码参数的编码解码方法和装置

Similar Documents

Publication Publication Date Title
CN106254888B (zh) 一种图像编码及解码方法、图像处理设备
CN112383780B (zh) 点匹配参考集和索引来回扫描串匹配的编解码方法和装置
CN105704491B (zh) 图像编码方法、解码方法、编码装置和解码装置
CN105491376B (zh) 图像编码、解码方法及装置
CN111800640B (zh) 方向交替变换来回扫描串匹配的图像编码解码方法和装置
WO2015120823A1 (zh) 使用多种形式的参考像素存储空间的图像压缩方法和装置
WO2015032350A1 (zh) 一种使用块匹配的图像压缩方法和装置
CN104754362B (zh) 使用精细划分块匹配的图像压缩方法
CN105847842B (zh) 图像编码方法及装置、图像解码方法及装置
KR102532391B1 (ko) 영상 부호화 방법과 장치 및 영상 복호화 방법과 장치
US20180167623A1 (en) Image encoding and decoding methods, image processing device, and computer storage medium
WO2016202189A1 (zh) 图像编码及解码方法、图像处理设备、计算机存储介质
CN106254878B (zh) 一种图像编码及解码方法、图像处理设备
CN107770540B (zh) 融合多种具有不同参考关系的基元的数据压缩方法和装置
CN105992003B (zh) 依据排序或频度对调色板颜色编号的图像压缩方法和装置
CN110505488B (zh) 扩展预测像素数组的图像编码或解码方法
CN106303534B (zh) 多种索引串与像素串融合复制方式的图像压缩方法和装置
WO2016197898A1 (zh) 图像编码及解码方法、图像处理设备、计算机存储介质
WO2016197893A1 (zh) 图像编码及解码方法、图像处理设备、计算机存储介质
CN106303535B (zh) 参考像素取自不同程度重构像素的图像压缩方法和装置
WO2016119746A1 (zh) 图像编码方法及装置、图像解码方法及装置
WO2016124154A1 (zh) 图像编码方法和装置及图像解码方法和装置
CN105828079B (zh) 图像处理方法及装置
CN105828080B (zh) 图像编解码方法及装置
CN107770544A (zh) 采用多类匹配参数及前参数缓冲区的数据压缩方法和装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16806796

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15580716

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2016806796

Country of ref document: EP