CN111586416A - 视频编码方法、装置、编码器及存储装置 - Google Patents
视频编码方法、装置、编码器及存储装置 Download PDFInfo
- Publication number
- CN111586416A CN111586416A CN202010491225.7A CN202010491225A CN111586416A CN 111586416 A CN111586416 A CN 111586416A CN 202010491225 A CN202010491225 A CN 202010491225A CN 111586416 A CN111586416 A CN 111586416A
- Authority
- CN
- China
- Prior art keywords
- block
- intra
- image
- coding
- blocks
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 69
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 claims abstract description 42
- 108091026890 Coding region Proteins 0.000 claims abstract description 35
- 239000013598 vector Substances 0.000 description 22
- 238000010586 diagram Methods 0.000 description 10
- 230000005540 biological transmission Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 239000010755 BS 2869 Class G Substances 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000010187 selection method Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000003064 k means clustering Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
Abstract
本申请公开了一种视频编码方法、装置、编码器及存储装置。该视频编码方法包括：获取待编码视频的多帧图像；将多帧图像中的一帧或多帧图像进行块分类，获取若干图像块类；基于预设编码顺序在每一图像块类中选择至少一个像素块进行帧内编码，得到帧内编码块；获取每一图像块类中的剩余块与所在图像块类的帧内编码块的参考关系；基于参考关系对剩余块进行编码。通过上述方式，本申请先将图像进行块分类，在相似的块之间设置帧内编码块和参考帧内编码块的剩余块，有利于提升编码效率，减少帧内编码帧的码流。
Description
技术领域
本申请涉及视频编解码领域，特别是涉及一种视频编码方法、装置、编码器及存储装置。
背景技术
因为视频图像的数据量比较大，在进行视频图像交互时，需要对视频图像进行编解码，视频编码的主要作用是将视频像素数据(RGB,YUV等)压缩成为视频码流，从而降低视频的数据量，实现降低传输过程中的网络带宽和减少存储空间的目的。
视频编码系统主要分为视频采集、预测、变换量化和熵编码几大部分，其中，预测分为帧内预测和帧间预测两部分，分别是为了去除视频图像在空间和时间上的冗余。
现有的传统帧内预测方法，在获取当前块的参考像素时，只是选取紧邻当前块上侧和左侧的像素值，而没有考虑视频图像的内容，在这种情况下，如果当前块和参考像素块的差异比较大，产生的残差也会很大，导致残差编码的比特开销较大，从而影响帧内编码的压缩率。
发明内容
本申请至少提供一种视频编码方法、装置、编码器及存储装置。
本申请第一方面提供了一种视频编码方法，包括：获取待编码视频的多帧图像；
将所述多帧图像中的一帧或多帧图像进行块分类，获取若干图像块类；
基于预设编码顺序在每一所述图像块类中选择至少一个像素块进行帧内编码，得到帧内编码块；
获取每一所述图像块类中的剩余块与所在图像块类的帧内编码块的参考关系；
基于所述参考关系对所述剩余块进行编码。
本申请第二方面提供了一种视频编码装置，包括：获取模块，用于获取待编码视频中的多帧图像；
分类模块，用于将所述多帧图像中的一帧或多帧图像进行块分类，获取若干图像块类；
所述分类模块，还用于基于预设编码顺序在每一所述图像块类中选择至少一个像素块进行帧内编码，得到帧内编码块；
计算模块，用于获取每一所述图像块类中的剩余块与所在图像块类的帧内编码块的参考关系；
编码模块，用于基于所述参考关系对所述剩余块进行编码。
本申请第三方面提供了一种编码器，该编码器包括处理器、与处理器耦接的存储器，其中，存储器存储有用于实现上述第一方面所述方法的程序指令；处理器用于执行存储器存储的程序指令以对待编码视频进行编码。
本申请第四方面采用的一个技术方案是：提供一种存储装置，存储有能够实现上述第一方面所述方法的程序指令。
上述方案，视频编码装置获取待编码视频的多帧图像；将多帧图像中的一帧或多帧图像进行块分类，获取若干图像块类；基于预设编码顺序在每一图像块类中选择至少一个像素块进行帧内编码，得到帧内编码块；获取每一图像块类中的剩余块与所在图像块类的帧内编码块的参考关系；基于参考关系对剩余块进行编码。通过上述方式，本申请先将图像进行块分类，在相似的块之间设置帧内编码块和参考帧内编码块的剩余块，有利于提升编码效率，减少帧内编码帧的码流。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，这些附图示出了符合本申请的实施例，并与说明书一起用于说明本申请的技术方案。
图1是本申请提供的视频编码方法一实施例的流程示意图；
图2是图1中步骤S12具体实施例的流程示意图；
图3是本申请提供的帧内编码帧一实施例的框架示意图；
图4是本申请提供的图像块类一实施例的框架示意图；
图5是本申请提供的视频编码装置一实施例的结构示意图；
图6是本申请提供的编码器一实施例的结构示意图；
图7是本申请提供的存储装置一实施例的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本申请的一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
本申请中的术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”、“第三”的特征可以明示或者隐含地包括至少一个该特征。本申请的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。本申请实施例中所有方向性指示(诸如上、下、左、右、前、后……)仅用于解释在某一特定姿态(如附图所示)下各部件之间的相对位置关系、运动情况等，如果该特定姿态发生改变时，则该方向性指示也相应地随之改变。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。需注意的是，对于下述方法实施例，若有实质上相同的结果，本申请的方法并不以图示的流程顺序为限。
下面对本申请各实施例进行说明。
请参阅图1，图1是本申请提供的视频编码方法一实施例的流程示意图。如图1所示，该视频编码方法包括以下步骤：
S11：获取待编码视频的多帧图像。
其中，在本公开实施例中，视频编码装置可以每隔n帧图像将一帧图像进行块分类操作，也可以从待编码视频中随机抽取一帧或多帧图像进行块分类操作，还可以只选取固定的帧，例如帧内编码帧进行块分类操作。
S12：将多帧图像中的一帧或多帧图像进行块分类，获取若干图像块类。
其中，视频编码装置对帧内编码帧进行像素块分类，像素块的分类可以在LCU(large coding unit，最大编码单元)级进行，也可以在CU(coding unit，编码单元)级进行。像素块分类操作即对组成帧内编码帧的所有像素块进行块匹配分类操作，匹配分类方法可以采用k-means聚类算法、HASH匹配算法，或者计算不同像素块之间的搜索代价值，搜索代价值越小，说明对应的两个像素块之间的相似度越高，可以根据搜索代价值对应的相似度对相似的像素块匹配到同一图像块类中。
例如，视频编码装置可以采用SAD(绝对误差和)，SATD(hadamard变换后再绝对值求和)和SSE(差值的平方和)等方法计算两个像素块之间的像素值差异，从而得到两个像素块之间的相似度。其中，两个像素块之间的像素值差异越少，两个像素块之间的相似度越高，对应的搜索代价值越小。
具体地，对帧内编码帧图像进行块分类的方法具体请参阅图2，图2是图1中步骤S12具体实施例的流程示意图。如图2所示，对帧内编码帧图像进行块分类的方法包括以下步骤：
S21：将多帧图像中的一帧图像划分为多个像素块。
其中，视频编码装置将帧内编码帧按照LCU级或CU级划分为多个像素块。
S22：建立匹配分类表。
S23：对若干图像块类分别设置索引标识，并将索引标识和对应的图像块类的坐标和大小存储在匹配分类表。
其中，视频编码装置采用上述的任一匹配分类方法对帧内编码帧的所有像素块进行匹配分类，将相似的像素块划分为同一图像块类中，以获取若干图像块类。
视频编码装置对每一个图像块类都设置一个索引标识，并以此为基础建立一个匹配分类表，匹配分类表中记录各个索引标识，以及每个索引标识对应的图像块类中所有像素块的位置坐标和尺寸大小。
需要说明的是，每一个图像块类中各个像素块的空域位置可能是连续的，也可能是非连续的，即同一个图像块类中的多个像素块可以分布在帧内编码帧中不同的位置。
例如，请参阅图3，图3是本申请提供的帧内编码帧一实施例的框架示意图。如图3所示，同一索引标识的像素块属于同一图像块类；像素块A设置的索引标识为index0，像素块B设置的索引标识为index1，像素块C设置的索引标识为index2，像素块D设置的索引标识为index3。其中，索引标识index2对应的图像块类在空域位置上不是连续的。
S24：基于匹配分类表对多帧图像中其他图像进行视频编码。
其中，当前帧内编码帧的匹配分类表可以用于后续帧内编码帧或帧间编码帧的编码，即其他帧内编码帧或帧间编码帧可以复用该匹配分类表，或对该匹配分类表进行更新，以进行视频编码。
S13：基于预设编码顺序在每一图像块类中选择至少一个像素块进行帧内编码，得到帧内编码块。
其中，本步骤S13提供多种在帧内编码帧中选取帧内编码块的方法。一般而言，帧内编码块越多，该帧内编码帧总体的编码质量越好，但对应的码率开销也越大；相反地，帧内编码块越少，该帧内编码帧总体的编码质量越差，但对应的码率开销也会越小。
对此，视频编码装置可以根据工作需求选取一种或多种选取帧内编码块的组合方法，在每一个图像块类中选取一个或数个像素块进行帧内编码，其余像素块按就近原则参考已帧内编码的像素块进行编码。具体地，选取帧内编码块的方法包括但不限于如下几种方式：
(1)按固定的编码顺序先选择第一个像素块作为帧内编码块，其中，以固定的编码顺序为从下到上且从左到右的顺序为例，则最下方一行中最左边的像素块为第一个像素块，然后按照固定的编码顺序将每隔N(N＞＝0)个像素块选取为帧内编码块。
(2)直接指定N个像素块或随机选择N个像素块作为帧内编码块。
(3)对图像块类再次进行块分类，块分类方法可以为上述任一匹配分类方法，匹配分类规则标准为：将像素值相同的像素块分类到同一图像子类。同样地，每个图像子类也需要分配对应的索引标识，并输入匹配分类表中。对于图像子类以外的其余像素块可以按照方式(1)或方式(2)选取帧内编码块；对于图像子类，需要在图像子类中选取一个像素块作为帧内编码块，该图像子类中其余像素块在编码时无需进行预测信息的编码，在重构时只需要直接拷贝该帧内编码块的重构值，可以有效减少码率开销。
具体地，在图像子类中选取帧内编码块的方法包括但不限于如下几种方式：
(a)随机指定图像子类中的一个像素块作为帧内编码块。
(b)在图像子类中选择中心像素块作为帧内编码块，其中，相对于图像子类中的其他像素块，中心像素块到图像子类中其余像素块的距离之和最短。
(c)在图像子类中选择一个角落像素块作为帧内编码块，其中，角落像素块可以为如下任一像素块：图像子类区域中位于第一行的最左边或最右边的像素块；或者图像子类区域中最后一行的最左边或最右边的像素块；或者图像子类区域中第一列的最上边或最下边的像素块；或者图像子类区域中最后一列的最上边或最下边的像素块。
需要说明的是，匹配分类获得图像块类，在图像块类中的像素块的块数量小于等于预设数量阈值k(k＞＝1)的情况下，视频编码装置可以直接对该图像块类中所有像素块进行帧内编码，其他情况可以选用上述任一选取帧内编码块的方式确定帧内编码块。
S14：获取每一图像块类中的剩余块与所在图像块类的帧内编码块的参考关系。
其中，通过上述步骤S13确定帧内编码块后，视频编码装置需要进一步获取剩余块与帧内编码块之间的参考关系，即剩余块与帧内编码块之间的偏移矢量。在获取剩余块的偏移矢量之前，视频编码装置需要先确定编码顺序。本公开实施例预设的编码顺序包括串行编码顺序和并行编码顺序；其中，串行编码顺序即按照固定的编码顺序对图像块类中的剩余块依次进行编码，并行编码顺序即对若干剩余块同时进行编码并写入码流中。并行编码顺序较于串行编码顺序的编码速度较快，但并不清楚编码块写入码流的顺序。
在编码的顺序上，本公开实施例的编码顺序可以不局限于传统编码顺序中的按编码块位置从上到下，从左到右的顺序，还可以先选取部分像素块作为帧内编码块进行编码，再根据帧内编码块对剩余块进行编码。需要说明的是，上述方式需要保证剩余块所要参考的帧内编码块要先于该剩余块进行编码。
首先，视频编码装置需要确定若干图像块类之间的编码顺序，若干图像块类之间相互独立，可以并行编码，也可以串行编码。选择并行编码顺序时，需要将所有像素块的坐标传输给解码端；选择串行编码顺序时，需要按照编码顺序对不同图像块类做不同的处理。
具体地，基于不同的编码顺序，本公开实施例提出以下参考关系的确定方案。
在不选择上述方式(3)选取帧内编码块的方法时，对应的确定方案为：
a.编码顺序上不被图像块类的类别限制，整个帧内编码帧的每一个像素块按照固定的编码顺序(例如从上到下，从左到右的编码顺序或其他编码顺序)进行编码。此时，每一个图像块类中按该编码顺序上的第一个起始像素块必须设置为帧内编码块，以防止编码到某一类的起始像素块时无法获取参考像素块的情况。总体的编码方案为：先编码第一个帧内编码块，再按照编码顺序编码后一个相邻位置的像素块，所有剩余块都参考编码顺序在自身之前已经编码过的1个或数个帧内编码块。
b.将一个图像块类中所有像素块划分为n(n＞＝0，n＝0时代表整个图像块类就是一个图像子区域)个图像子区域，即至少两个图像子区域，同一图像块类中的图像子区域相互独立。每个图像子区域中包含若干帧内编码块以及需要参考这些帧内编码块的剩余块，每个图像块类中的若干图像子区域之间可以并行编码。进一步地，每个图像子区域的像素块编码顺序可以是先并行或串行编码所有帧内编码块，在并行或串行编码剩余块；也可以直接按照固定的编码顺序串行编码帧内编码块和剩余块。
在选择上述方式(3)选取帧内编码块的方法时，图像子类中包括像素值相同的若干像素块，对应的确定方案为：
c.首先对图像子类中选取的唯一一个帧内编码块进行编码，然后图像子类中剩余块可以同时参考该帧内编码块并行编码，提高编码效率。若通过上述方式(c)选取帧内编码块的方法确定帧内编码块，则可以按照固定的编码顺序串行编码，即除了帧内编码块外的每一个像素块都可以参考编码顺序之前最相近的已编码块。同一图像子类中除了帧内编码块之外的像素块需要获取偏移矢量，并将偏移矢量传输给解码端；或者不需要获取偏移矢量，即将除了帧内编码块之外的像素块的偏移矢量直接置为(0,0)，但此时为了让解码端能够知道当前块是图像子类中的像素块，则需要将该图像子类的索引标识以及该图像子类所属图像块类的索引标识传输给解码端。需要说明的是，对于图像块类中其余未能划分到图像子类的像素块，可以选用上述方式a或方式b进行编码。
上述方式中，方式a的优势是串行预测编码的准确度会更高，因为每编码后一个像素块，都有前面像素块的重构像素可参考，但劣势是剩余块只能参考前面的帧内编码块，因为在它之后的帧内编码块都还未编码。而方式b和方式c的优势是可以并行运算，并行效率高，但是有些像素块在进行预测时周围并没有可参考的重构像素，所以准确度会降低，优势是可参考前后四周的帧内编码块。
在本公开实施例中，若每个图像块类之间需要按照固定顺序进行编码，则帧内编码块选取方式中选择上述方式(1)或方式(2)，且每个图像块类中编码顺序的第一个起始块必须为帧内编码块，编码顺序方法选择方式a，则不需要传输每个像素块的坐标，否则需要传输每个像素块的坐标。
在一些可能的实施方式中，若每个图像块类之间需要同时编码，即并行编码时，则帧内编码块选取方式可选择上述方式(1)～(3)中任一种方式，编码顺序方法选择方式b或方式c。
因此，本公开实施例提出的关于帧内编码块选取方式和编码顺序方式的多种实现方式，工作人员可以根据工作需要选取其中不同帧内编码块选取方式和编码顺序方式的组合方式，以实现最佳的编码效果，在此不再赘述。
进一步地，本公开实施例还提供了参考块的确定方式，即参考关系。除了帧内编码块选取方式(3)中图像子类内部的像素块的参考关系，以及编码顺序方式a中的参考关系已经固定外，其余情况除帧内编码块外的剩余块的参考块的确定方式具体如下：
需要说明的是，本公开实施例用帧内编码块的左上角像素位置代表帧内编码块的位置，用当前剩余块的左上角像素代表当前剩余块的位置，在此基础上，参考块相对于当前剩余块的位置关系包括但不限于如下四种：
A.参考块在剩余块的左侧，即参考块的横坐标小于剩余块的横坐标。
B.参考块在剩余块的右侧，即参考块的横坐标大于剩余块的横坐标。
C.参考块在剩余块的上侧，即参考块的纵坐标小于剩余块的纵坐标。
D.参考块在剩余块的下侧，即参考块的纵坐标大于剩余块的纵坐标。
在确定位置关系后，可以从上述的四种位置关系中任选其中的M种1＜＝M＜＝4)进行“和”与“或”以及参考块个数的组合。例如，“在同时满足上述条件A和条件C的帧内编码块中选择距离最近的1个，或在满足条件B的帧内编码块中选择最近的2个”，那么当前块对应最多有3个参考块，1个参考块位于当前块的左上位置，2个参考块位于当前块的右侧位置。
需要说明的是，当前剩余块所参考的帧内编码块必须是已经完成编码后的，若当前剩余块的某一侧没有已编码后的帧内编码块可参考，则不参考该侧的帧内编码块。
例如，请参阅图4，图4是本申请提供的图像块类一实施例的框架示意图。图4中所有像素块组合一个图像块类，其中，视频编码装置根据上述方式(3)标注出两个图像子类，分别为图像子类G和图像子类H。然后根据方式(3)中的方式(b)确定帧内编码块，即图4中箭头所指向的像素块为图像子类中的帧内编码块，如图像子类G的帧内编码块g，图像子类H的帧内编码块h，其中，箭头表示图像子类中剩余块的偏移矢量。
S15：基于参考关系对剩余块进行编码。
其中，视频编码装置根据步骤S14确定的参考关系对剩余块进行编码，以得到编码后的视频流。
在将编码后的视频流传输给解码端时，视频编码装置还需要以本公开实施例的视频编码方案为基础设置句法元素。其中，需要传输到解码端的句法元素主要作用是告诉解码端两个信息：当前块的位置，以及当前块的预测方式。
具体地，当前块的位置的句法元素包括但不限于以下方式：
(I)若各个图像块类之间并行编码；或者各个图像块类之间按固定顺序串行编码，但在在某一个图像块类内部有并行编码操作时，则需要进一步传输该图像块类中每个像素块的坐标信息。
(II)若整帧图像都用一个固定顺序串行编码，则无需传输像素块的坐标信息。
当前块的预测方式的句法元素包括但不限于以下方式：
(i)一般情况下都需要将像素块的偏移矢量传输到解码端，使得解码端可以根据偏移矢量找到当前块的参考块。
(ii)若采用上述帧内编码块选取方式(3)，对于图像子类中的像素块，可以采用不传输偏移矢量，但传输图像块类的索引标识以及图像子类的索引标识的方式，以使解码端可以找到当前图像子类中的帧内编码块。
进一步地，处于上述列举的句法元素外，由于本申请提出的视频编码模式作为一种独立于帧内预测模式和帧间预测模式等模式之外的一个新模式存在，因此需要在视频流的数据头设置一个独立的句法元素，用于本申请的视频编码模式的开关，该句法元素需要与视频流一同传输到解码端。
另外，在偏移矢量的传输方式上，可以直接编码完整的偏移矢量，或者编码偏移矢量残差。如果编码的是偏移矢量残差，可以在临近当前块的已经用新模式编码的像素块中选取至少一个像素块的偏移矢量或者几个像素块偏移矢量的均值作为当前块的预测偏移矢量，当前块的偏移矢量减去预测偏移矢量就是偏移矢量残差。解码端通过解码视频码流中的偏移矢量或偏移矢量残差来获取到当前块的预测块。
请参阅图5，图5是本申请提供的视频编码装置一实施例的结构示意图。如图5所示，该视频编码装置50包括：
获取模块51，用于获取待编码视频中的多帧图像。
分类模块52，用于将多帧图像中的一帧或多帧图像进行块分类，获取若干图像块类。
分类模块52，还用于基于预设编码顺序在每一图像块类中选择至少一个像素块进行帧内编码，得到帧内编码块。
计算模块53，用于获取每一图像块类中的剩余块与所在图像块类的帧内编码块的参考关系。
编码模块54，用于基于参考关系对剩余块进行编码。
请参阅图6，图6是本申请提供的编码器一实施例的结构示意图。如图6所示，该编码器60包括处理器61及和处理器61耦接的存储器62。
存储器62存储有用于实现上述任一实施例所述的视频编码方法或编码方法的程序指令。处理器61用于执行存储器62存储的程序指令以对待编码视频进行编码。
其中，处理器61还可以称为CPU(Central Processing Unit，中央处理单元)。处理器61可能是一种集成电路芯片，具有信号的处理能力。处理器61还可以是通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
参阅图7，图7是本申请提供的存储装置一实施例的结构示意图。本申请实施例的存储装置存储有能够实现上述所有方法的程序指令71，其中，该程序指令71可以以软件产品的形式存储在上述存储装置中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本申请各个实施方式所述方法的全部或部分步骤。而前述的存储装置包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质，或者是计算机、服务器、手机、平板等终端设备。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。以上仅为本申请的实施方式，并非因此限制本申请的专利范围，凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本申请的专利保护范围内。
Claims (14)
1.一种视频编码方法，其特征在于，所述视频编码方法包括：
获取待编码视频的多帧图像；
将所述多帧图像中的一帧或多帧图像进行块分类，获取若干图像块类；
基于预设编码顺序在每一所述图像块类中选择至少一个像素块进行帧内编码，得到帧内编码块；
获取每一所述图像块类中的剩余块与所在图像块类的帧内编码块的参考关系；
基于所述参考关系对所述剩余块进行编码。
2.根据权利要求1所述的视频编码方法，其特征在于，
所述预设编码顺序为串行编码顺序，所述视频编码方法还包括：
基于所述串行编码顺序选择至少第一个像素块作为所述帧内编码块。
3.根据权利要求2所述的视频编码方法，其特征在于，
所述基于所述串行编码顺序选择至少第一个像素块作为所述帧内编码块的步骤，包括：
基于所述串行编码顺序选择第一个像素块作为第一帧内编码块；
按照预设像素块间隔选择所述图像块类中其余像素块作为第二帧内编码块，或者，在所述图像块类中其余像素块随机选择若干像素块作为所述第二帧内编码块。
4.根据权利要求1所述的视频编码方法，其特征在于，
所述获取每一所述图像块类中的剩余块与所在图像块类的帧内编码块的参考关系的步骤，包括：
将所述第一帧内编码块和/或所述第二帧内编码块设置为所在图像块类中其他像素块的参考块。
5.根据权利要求1所述的视频编码方法，其特征在于，
所述预设编码顺序为串行编码顺序或并行编码顺序，所述视频编码方法还包括：
在所述图像块类中划分至少一个图像子块类，其中，每个所述图像子块类包括若干帧内编码块和参考所述帧内编码块的剩余块；
基于所述串行编码顺序对所述图像子块类进行编码；
或者，基于所述并行编码顺序对所述若有帧内编码块进行编码后，基于所述并行编码顺序对所述剩余块进行编码。
6.根据权利要求1所述的视频编码方法，其特征在于，
所述基于预设编码顺序在每一所述图像块类中选择至少一个像素块进行帧内编码，得到帧内编码块的步骤，包括：
对所述图像块类再次进行块分类，获取由若干相同像素块组成的图像子类；
在所述图像子类中选择其中一个像素块进行帧内编码，作为所述帧内编码块；
获取所述图像子类中其余像素块的重构值时，将所述帧内编码块的重构值拷贝到所述图像子类中的其余像素块。
7.根据权利要求6所述的视频编码方法，其特征在于，
所述在所述图像子类中选择其中一个像素块进行帧内编码，作为所述帧内编码块的步骤，包括：
在所述图像子类中随机选择其中一个像素块作为所述帧内编码块；
或者，在所述图像子类中选择中心像素块作为所述帧内编码块；
或者，在所述图像子类中选择一个角落像素块作为所述帧内编码块。
8.根据权利要求1所述的视频编码方法，其特征在于，
所述将所述多帧图像中的一帧图像进行块分类，获取若干图像块类的步骤，包括：
在所述图像块类中像素块的数量小于等于预设数量阈值的情况下，对该图像块类中的所有像素块进行帧内编码。
9.根据权利要求1所述的视频编码方法，其特征在于，
所述将所述多帧图像中的一帧图像进行块分类，获取若干图像块类的步骤，包括：
将所述多帧图像中的一帧图像划分为多个像素块；
采用预设聚类算法将所述多个像素块分类到所述若干图像块类，其中，所述图像块类中的像素块的像素值差距在预设像素值范围内。
10.根据权利要求9所述的视频编码方法，其特征在于，
所述采用预设聚类算法将所述多个像素块分类到所述若干图像块类的步骤之后，所述视频编码方法还包括：
建立匹配分类表；
对所述若干图像块类分别设置索引标识，并将所述索引标识和对应的图像块类的坐标和大小存储在所述匹配分类表；
基于所述匹配分类表对所述多帧图像中其他图像进行视频编码。
11.根据权利要求1所述的视频编码方法，其特征在于，
所述基于所述参考关系对所述剩余块进行编码的步骤之后，所述视频编码方法还包括：
基于所述参考关系和所述预设编码顺序设置句法元素，其中，所述句法元素包括当前块的位置信息和所述当前块的预测方式。
12.一种视频编码装置，其特征在于，包括：
获取模块，用于获取待编码视频中的多帧图像；
分类模块，用于将所述多帧图像中的一帧或多帧图像进行块分类，获取若干图像块类；
所述分类模块，还用于基于预设编码顺序在每一所述图像块类中选择至少一个像素块进行帧内编码，得到帧内编码块；
计算模块，用于获取每一所述图像块类中的剩余块与所在图像块类的帧内编码块的参考关系；
编码模块，用于基于所述参考关系对所述剩余块进行编码。
13.一种编码器，其特征在于，所述编码器包括处理器、与所述处理器耦接的存储器，其中，
所述存储器存储有用于实现如权利要求1-11中任一项所述方法的程序指令；
所述处理器用于执行所述存储器存储的所述程序指令以对待编码视频进行编码。
14.一种存储装置，其特征在于，存储有能够被处理器运行以实现如权利要求1-11中任一项所述方法的程序指令。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010491225.7A CN111586416A (zh) | 2020-06-02 | 2020-06-02 | 视频编码方法、装置、编码器及存储装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010491225.7A CN111586416A (zh) | 2020-06-02 | 2020-06-02 | 视频编码方法、装置、编码器及存储装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111586416A true CN111586416A (zh) | 2020-08-25 |
Family
ID=72111189
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010491225.7A Pending CN111586416A (zh) | 2020-06-02 | 2020-06-02 | 视频编码方法、装置、编码器及存储装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111586416A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112565760A (zh) * | 2020-12-06 | 2021-03-26 | 浙江大华技术股份有限公司 | 串编码技术的编码方法、设备及存储介质 |
Citations (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020044693A1 (en) * | 2000-10-17 | 2002-04-18 | Nobuhiro Ogawa | Image encoder and method of encoding images according to weight of portions of image |
| CN1819658A (zh) * | 2005-02-10 | 2006-08-16 | 汤姆森许可贸易公司 | 用于以帧间或帧内模式编码视频图像的方法和设备 |
| CN101064849A (zh) * | 2006-04-29 | 2007-10-31 | 鲁海宁 | 动态图像编码方法、装置和计算机可读记录介质 |
| US20120106646A1 (en) * | 2009-06-23 | 2012-05-03 | France Telecom | Method for encoding and decoding images, encoding and decoding devices, corresponding data streams and computer program |
| CN102656887A (zh) * | 2009-12-16 | 2012-09-05 | 韩国电子通信研究院 | 自适应图像编码装置和方法 |
| CN103118250A (zh) * | 2011-11-16 | 2013-05-22 | 中兴通讯股份有限公司 | 一种帧内划分标志的编解码方法及装置 |
| KR20160143588A (ko) * | 2015-06-05 | 2016-12-14 | 인텔렉추얼디스커버리 주식회사 | 화면 내 예측 모드에 대한 부호화/복호화 방법 및 장치 |
| CN106385585A (zh) * | 2016-09-14 | 2017-02-08 | 苏睿 | 帧编解码的方法、装置和系统 |
| CN106851298A (zh) * | 2017-03-22 | 2017-06-13 | 腾讯科技（深圳）有限公司 | 一种高效视频编码方法及装置 |
| CN107454403A (zh) * | 2016-05-31 | 2017-12-08 | 谷歌公司 | 块尺寸可调整的方向性帧内预测 |
| CN107566842A (zh) * | 2017-08-31 | 2018-01-09 | 西安万像电子科技有限公司 | 图像编解码压缩的方法、装置和系统 |
| CN107623850A (zh) * | 2017-09-26 | 2018-01-23 | 杭州电子科技大学 | 一种基于时空相关性的快速屏幕内容编码方法 |
| US20180109811A1 (en) * | 2016-10-19 | 2018-04-19 | Google Inc. | Guided offset correction for loop restoration in video coding |
| CN108353166A (zh) * | 2015-11-19 | 2018-07-31 | 韩国电子通信研究院 | 用于图像编码/解码的方法和装置 |
| CN108777794A (zh) * | 2018-06-25 | 2018-11-09 | 腾讯科技（深圳）有限公司 | 图像的编码方法和装置、存储介质、电子装置 |
| CN108881913A (zh) * | 2018-08-03 | 2018-11-23 | 西安万像电子科技有限公司 | 图像编码的方法和装置 |
| CN110087075A (zh) * | 2019-04-22 | 2019-08-02 | 浙江大华技术股份有限公司 | 一种图像的编码方法、编码装置以及计算机存储介质 |
| CN110291791A (zh) * | 2018-04-02 | 2019-09-27 | 北京大学 | 用于视频编解码的方法和设备 |
| CN110290388A (zh) * | 2019-06-17 | 2019-09-27 | 浙江大华技术股份有限公司 | 帧内预测方法、视频编码方法、计算机设备及存储装置 |
| CN110603811A (zh) * | 2017-02-23 | 2019-12-20 | 真实网络公司 | 视频编码系统和方法中的残差变换和逆向变换 |
| CN110677676A (zh) * | 2019-09-27 | 2020-01-10 | 腾讯科技（深圳）有限公司 | 视频编码方法和装置、视频解码方法和装置及存储介质 |
| GB202000822D0 (en) * | 2019-03-21 | 2020-03-04 | Adobe Inc | Generation of a sequence of textures for video delivery |
-
2020
- 2020-06-02 CN CN202010491225.7A patent/CN111586416A/zh active Pending
Patent Citations (23)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20020044693A1 (en) * | 2000-10-17 | 2002-04-18 | Nobuhiro Ogawa | Image encoder and method of encoding images according to weight of portions of image |
| CN1819658A (zh) * | 2005-02-10 | 2006-08-16 | 汤姆森许可贸易公司 | 用于以帧间或帧内模式编码视频图像的方法和设备 |
| CN101064849A (zh) * | 2006-04-29 | 2007-10-31 | 鲁海宁 | 动态图像编码方法、装置和计算机可读记录介质 |
| US20120106646A1 (en) * | 2009-06-23 | 2012-05-03 | France Telecom | Method for encoding and decoding images, encoding and decoding devices, corresponding data streams and computer program |
| CN102656887A (zh) * | 2009-12-16 | 2012-09-05 | 韩国电子通信研究院 | 自适应图像编码装置和方法 |
| CN103118250A (zh) * | 2011-11-16 | 2013-05-22 | 中兴通讯股份有限公司 | 一种帧内划分标志的编解码方法及装置 |
| KR20160143588A (ko) * | 2015-06-05 | 2016-12-14 | 인텔렉추얼디스커버리 주식회사 | 화면 내 예측 모드에 대한 부호화/복호화 방법 및 장치 |
| CN108353166A (zh) * | 2015-11-19 | 2018-07-31 | 韩国电子通信研究院 | 用于图像编码/解码的方法和装置 |
| CN107454403A (zh) * | 2016-05-31 | 2017-12-08 | 谷歌公司 | 块尺寸可调整的方向性帧内预测 |
| CN106385585A (zh) * | 2016-09-14 | 2017-02-08 | 苏睿 | 帧编解码的方法、装置和系统 |
| CN109891885A (zh) * | 2016-10-19 | 2019-06-14 | 谷歌有限责任公司 | 视频编译中用于环路恢复的引导偏移校正 |
| US20180109811A1 (en) * | 2016-10-19 | 2018-04-19 | Google Inc. | Guided offset correction for loop restoration in video coding |
| CN110603811A (zh) * | 2017-02-23 | 2019-12-20 | 真实网络公司 | 视频编码系统和方法中的残差变换和逆向变换 |
| CN106851298A (zh) * | 2017-03-22 | 2017-06-13 | 腾讯科技（深圳）有限公司 | 一种高效视频编码方法及装置 |
| CN107566842A (zh) * | 2017-08-31 | 2018-01-09 | 西安万像电子科技有限公司 | 图像编解码压缩的方法、装置和系统 |
| CN107623850A (zh) * | 2017-09-26 | 2018-01-23 | 杭州电子科技大学 | 一种基于时空相关性的快速屏幕内容编码方法 |
| CN110291791A (zh) * | 2018-04-02 | 2019-09-27 | 北京大学 | 用于视频编解码的方法和设备 |
| CN108777794A (zh) * | 2018-06-25 | 2018-11-09 | 腾讯科技（深圳）有限公司 | 图像的编码方法和装置、存储介质、电子装置 |
| CN108881913A (zh) * | 2018-08-03 | 2018-11-23 | 西安万像电子科技有限公司 | 图像编码的方法和装置 |
| GB202000822D0 (en) * | 2019-03-21 | 2020-03-04 | Adobe Inc | Generation of a sequence of textures for video delivery |
| CN110087075A (zh) * | 2019-04-22 | 2019-08-02 | 浙江大华技术股份有限公司 | 一种图像的编码方法、编码装置以及计算机存储介质 |
| CN110290388A (zh) * | 2019-06-17 | 2019-09-27 | 浙江大华技术股份有限公司 | 帧内预测方法、视频编码方法、计算机设备及存储装置 |
| CN110677676A (zh) * | 2019-09-27 | 2020-01-10 | 腾讯科技（深圳）有限公司 | 视频编码方法和装置、视频解码方法和装置及存储介质 |
Non-Patent Citations (2)
| Title |
|---|
| 凌波;顾伟康;杜歆;: "H264整帧丢失下的错误隐藏机制", 浙江大学学报(工学版), no. 09, 15 September 2009 (2009-09-15) * |
| 赵利平;林涛;龚迅炜;朱蓉;: "帧内微块复制的屏幕图像编码算法", 计算机应用, no. 07, 10 July 2016 (2016-07-10) * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112565760A (zh) * | 2020-12-06 | 2021-03-26 | 浙江大华技术股份有限公司 | 串编码技术的编码方法、设备及存储介质 |
| CN112565760B (zh) * | 2020-12-06 | 2022-07-15 | 浙江大华技术股份有限公司 | 串编码技术的编码方法、设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9743080B2 (en) | Encoding or decoding method and apparatus | |
| US8977066B2 (en) | Image compression using sub-resolution images | |
| JP6073405B2 (ja) | 映像復号化方法及び装置 | |
| KR102114715B1 (ko) | 이미지 코딩/디코딩 방법 및 관련 장치 | |
| CN108243339B (zh) | 图像编解码方法及装置 | |
| KR20200064153A (ko) | 영상 코딩 시스템에서 인터 예측에 따른 영상 디코딩 방법 및 장치 | |
| CN111971960B (zh) | 用于基于帧间预测模式处理图像的方法及其装置 | |
| CN101350929B (zh) | 表示图像帧的非帧边缘区块时的增强的压缩方法 | |
| CN110087083B (zh) | 帧内色度预测模式的选择方法、图像处理设备及存储设备 | |
| CN107852500B (zh) | 运动矢量场编码方法和解码方法、编码和解码装置 | |
| JP2010516158A (ja) | 多視点映像の符号化、復号化方法及び装置 | |
| US9326011B2 (en) | Method and apparatus for generating bitstream based on syntax element | |
| CN109640089B (zh) | 图像编解码方法及装置 | |
| US20140301446A1 (en) | Motion vector coding apparatus, method and program for coding motion vector, motion vector decoding apparatus, and method and program for decoding motion vector | |
| JP2023025271A (ja) | 映像コーディングにおけるマトリクスベースのイントラ予測のための変換 | |
| CN110166775B (zh) | 帧内预测方法、编码器及存储装置 | |
| CN112740696A (zh) | 视频编码和解码 | |
| US20150063439A1 (en) | Encoding apparatus and method | |
| CN111586416A (zh) | 视频编码方法、装置、编码器及存储装置 | |
| CN111586415B (zh) | 视频编码方法、装置、编码器及存储装置 | |
| CN116016929A (zh) | 帧内预测编码解码方法、电子设备及计算机可读存储介质 | |
| TW201338553A (zh) | 用於評估要轉換成被跳過巨集區塊的巨集區塊候選者的方法、系統和電腦程式產品 | |
| CN111108749A (zh) | 编码方法、解码方法、编码设备和解码设备 | |
| KR102127860B1 (ko) | 적응적인 인트라 예측 모드 부호화 방법 및 장치, 그리고 복호화 방법 및 장치 | |
| CN112004099B (zh) | 一种帧内块复制预测方法、装置及计算机可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |