CN107659823A - 一种帧内深度图像块编码、解码的方法及装置 - Google Patents
一种帧内深度图像块编码、解码的方法及装置 Download PDFInfo
- Publication number
- CN107659823A CN107659823A CN201710884970.6A CN201710884970A CN107659823A CN 107659823 A CN107659823 A CN 107659823A CN 201710884970 A CN201710884970 A CN 201710884970A CN 107659823 A CN107659823 A CN 107659823A
- Authority
- CN
- China
- Prior art keywords
- block
- depth image
- pixel
- coding
- image sub
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/96—Tree coding, e.g. quad-tree coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明公开了一种帧内深度图像块编码的方法,包括:获取待编码的深度图像块,当将深度建模模型DMM应用在递归四叉树RQT或简化深度图编码SDC中对所述深度图像块进行编码时,分别使用所述DMM中的DMM1模式和DMM4模式对所述深度图像块进行检测,得到所述DMM1和DMM4模式下所述深度图像块的率失真结果,将所述DMM1和所述DMM4中率失真结果最小的DMM模式确定为编码时所使用的DMM模式,将所述所使用的模式应用在所述RQT或所述SDC中对所述深度图像块进行编码,并将所述所使用的DMM模式,写入码流。本发明实施例提供的编码方法,可以减少编码过程中的检测模式,从而降低了编码的复杂度。
Description
技术领域
本发明涉及编码解码技术领域,具体涉及一种帧内深度图像块编码、解码的方法及装置。
背景技术
目前图像编码的过程就是编码端获得编码图像和编码图像的预测信息,进而得到编码图像的残差,在解码端,解码端根据图像的预测信息和残差,解码出编码前的图像。
目前在3D编解码技术中有多种编解码技术,如:递归四叉树编码(Recur IntraCoding Quart Tree,RQT)技术等,3D编解码中为了能够反映出图像深度信息,需要对深度图进行编解码。因此较传统纹理图编解码增加了深度建模模型(Depth modeling modes,DMM)的图像块分割方法。DMM有两种模式,一种是DMM1模式,一种是DMM4模式。其中DMM1(Depth modeling mode1)是采用了楔形方式对图像块进行分割,DMM4(Depth modelingmode4)则是根据对应的纹理参考块进行预测分割。
DMM技术可以结合RQT技术进行实现。根据深度图特点,在DMM应用于RQT过程中,DMM可以通过四种模式进行实现,四种模式可以通过数字进行标记。这样,在对深度图像块进行编解码时,就需要对这四种模式进行检测,解码时也需要对两种模式进行检测,导致编解码的复杂度高,编解码效率低。
发明内容
本发明实施例提供本发明提出一种帧内深度图像块编码、解码的方法,可以减少编解码过程中的检测模式,从而降低了编解码的复杂度,提高了编解码的效率。本发明实施例还提供了相应的装置。
本发明第一方面提供一种帧内深度图像块编码的方法,包括:
获取待编码的深度图像块;
当将深度建模模型DMM应用在递归四叉树RQT或简化深度图编码SDC中对所述深度图像块进行编码时,分别使用所述DMM中的DMM1模式和DMM4模式对所述深度图像块进行检测,得到所述DMM1模式下所述深度图像块的率失真结果,以及所述DMM4模式下所述深度图像块的率失真结果;
将所述DMM1和所述DMM4中率失真结果最小的DMM模式确定为编码时所使用的DMM模式,将所述所使用的模式应用在所述RQT或所述SDC中对所述深度图像块进行编码,并将所述所使用的DMM模式,写入码流。
结合第一方面,在第一种可能的实现方式中,所述将所述所使用的DMM模式,写入码流时,所述方法还包括:
将用于指示所述RQT或所述SDC的编码标识写入所述码流,所述编码标识用于指示解码端按照所述编码标识所指示的所述RQT或所述SDC进行解码。
结合第一方面或第一方面第一种可能的实现方式,在第二种可能的实现方式中,所述将所述所使用的模式应用在所述RQT或所述SDC中对所述深度图像块进行编码,包括:
根据所述所使用的DMM模式,获得所述所使用的DMM模式下分割得到的深度图像子块的块预测值、块偏移值和所述深度图像子块中各像素点的残差信息;
其中,所述块预测值为按照预先定义的预测规则从与所述深度图像子块相邻的一个深度图像块得到的,所述块偏移值为所述深度图像块的块原始像素值与所述块预测值的差值,再按照预设的映射关系进行映射得到的,所述深度图像子块中各像素点的残差信息为所述深度图像子块中各像素点的原始像素值与所述块预测值和所述块偏移值的和的差值。
结合第一方面第二种可能的实现方式,在第三种可能的实现方式中,所述获得所述深度图像子块中各像素点的残差信息之前,所述方法还包括:
将所述同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值;
将所述同一个深度图像子块中各像素点的原始像素值与所述区域常数值做差,得到所述深度图像子块中各像素点的残差信息。
结合第一方面第三种可能的实现方式,在第四种可能的实现方式中,所述将所述同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值,包括:
当至少一个所述深度图像子块中的块偏移值为0时,将所述块偏移值为0的深度图像子块的预测值作为所述块偏移值为0的深度图像子块的区域常数值。
本发明第二方面提供一种帧内深度图像块解码的方法,包括:
从码流中获取解码待解码的深度图像块在编码时所使用的DMM的模式;
将所述在编码时所使用的DMM的模式应用在递归四叉树RQT或简化深度图编码SDC中对所述深度图像块进行解码;
获得解码后的深度图像块。
结合第二方面,在第一种可能的实现方式中,所述从码流中获取解码待解码的深度图像块在编码时所使用的DMM的模式时,所述方法还包括:
从所述码流中获取用于指示编码时使用所述RQT或所述SDC的标识;
所述将所述在编码时所使用的DMM的模式应用在递归四叉树RQT或简化深度图编码SDC中对所述深度图像块进行解码,包括:
根据所述编码时使用所述RQT或所述SDC的标识,将所述在编码时所使用的DMM的模式应用在所述标识所指示的所述RQT或所述SDC中对所述深度图像块进行解码。
结合第二方面或第二方面第一种可能的实现方式,在第二种可能的实现方式中,所述将所述在编码时所使用的DMM的模式应用在递归四叉树RQT或简化深度图编码SDC中对所述深度图像块进行解码,包括:
根据所述在编码时所使用的DMM的模式,获得所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值、块偏移值和所述深度图像子块中各像素点的残差信息;
其中,所述块预测值为按照预先定义的预测规则从与所述深度图像子块相邻的一个深度图像块得到的,所述块偏移值为所述深度图像块的块原始像素值与所述块预测值的差值,再按照预设的映射关系进行映射得到的,所述深度图像子块中各像素点的残差信息为所述深度图像子块中各像素点的原始像素值与所述块预测值和所述块偏移值的和的差值。
结合第二方面第二种可能的实现方式,在第三种可能的实现方式中,所述获得所述深度图像子块中各像素点的残差信息之前,所述方法还包括:
将所述同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值;
将所述同一个深度图像子块中各像素点的原始像素值与所述区域常数值做差,得到所述深度图像子块中各像素点的残差信息。
结合第二方面第二种可能的实现方式,在第四种可能的实现方式中,所述将所述同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值,包括:
当至少一个所述深度图像子块中的块偏移值为0时,将所述块偏移值为0的深度图像子块的预测值作为所述块偏移值为0的深度图像子块的区域常数值。
本发明第三方面提供一种编码装置,包括:
获取单元,用于获取待编码的深度图像块;
检测单元,用于当将深度建模模型DMM应用在递归四叉树RQT或简化深度图编码SDC中对所述获取单元获取的所述深度图像块进行编码时,分别使用所述DMM中的DMM1模式和DMM4模式对所述深度图像块进行检测,得到所述DMM1模式下所述深度图像块的率失真结果,以及所述DMM4模式下所述深度图像块的率失真结果;
编码单元,用于将所述检测单元检测得到的所述DMM1和所述DMM4中率失真结果最小的DMM模式确定为编码时所使用的DMM模式,将所述所使用的模式应用在所述RQT或所述SDC中对所述深度图像块进行编码,并将所述所使用的DMM模式,写入码流。
结合第三方面,在第一种可能的实现方式中,
所述编码单元,还用于将用于指示所述RQT或所述SDC的编码标识写入所述码流,所述编码标识用于指示解码端按照所述编码标识所指示的所述RQT或所述SDC进行解码。
结合第三方面或第三方面第一种可能的实现方式,在第二种可能的实现方式中,
所述编码单元,具体用于根据所述所使用的DMM模式,获得所述所使用的DMM模式下分割得到的深度图像子块的块预测值、块偏移值和所述深度图像子块中各像素点的残差信息;
其中,所述块预测值为按照预先定义的预测规则从与所述深度图像子块相邻的一个深度图像块得到的,所述块偏移值为所述深度图像块的块原始像素值与所述块预测值的差值,再按照预设的映射关系进行映射得到的,所述深度图像子块中各像素点的残差信息为所述深度图像子块中各像素点的原始像素值与所述块预测值和所述块偏移值的和的差值。
结合第三方面第二种可能的实现方式,在第三种可能的实现方式中,
所述编码单元,具体用于将所述同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值,将所述同一个深度图像子块中各像素点的原始像素值与所述区域常数值做差,得到所述深度图像子块中各像素点的残差信息。
结合第三方面第三种可能的实现方式,在第四种可能的实现方式中,
所述编码单元,具体用于当至少一个所述深度图像子块中的块偏移值为0时,将所述块偏移值为0的深度图像子块的预测值作为所述块偏移值为0的深度图像子块的区域常数值。
本发明第四方面提供一种解码装置,包括:
获取单元,用于从码流中获取解码待解码的深度图像块在编码时所使用的DMM的模式;
解码单元,用于将所述在编码时所使用的DMM的模式应用在递归四叉树RQT或简化深度图编码SDC中对所述获取单元获取的所述深度图像块进行解码;
获得单元,用于获得所述解码单元解码后的深度图像块。
结合第四方面,在第一种可能的实现方式中,
所述获取单元,还用于从所述码流中获取用于指示编码时使用所述RQT或所述SDC的标识;
所述解码单元,具体用于根据所述编码时使用所述RQT或所述SDC的标识,将所述在编码时所使用的DMM的模式应用在所述标识所指示的所述RQT或所述SDC中对所述深度图像块进行解码。
结合第四方面或第四方面第一种可能的实现方式,在第二种可能的实现方式中,
所述解码单元,具体用于根据所述在编码时所使用的DMM的模式,获得所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值、块偏移值和所述深度图像子块中各像素点的残差信息;
其中,所述块预测值为按照预先定义的预测规则从与所述深度图像子块相邻的一个深度图像块得到的,所述块偏移值为所述深度图像块的块原始像素值与所述块预测值的差值,再按照预设的映射关系进行映射得到的,所述深度图像子块中各像素点的残差信息为所述深度图像子块中各像素点的原始像素值与所述块预测值和所述块偏移值的和的差值。
结合第四方面第二种可能的实现方式,在第三种可能的实现方式中,
所述解码单元,具体用于将所述同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值,将所述同一个深度图像子块中各像素点的原始像素值与所述区域常数值做差,得到所述深度图像子块中各像素点的残差信息。
结合第四方面第三种可能的实现方式,在第四种可能的实现方式中,
所述解码单元,具体用于当至少一个所述深度图像子块中的块偏移值为0时,将所述块偏移值为0的深度图像子块的预测值作为所述块偏移值为0的深度图像子块的区域常数值。本发明实施例采用获取待编码的深度图像块;当将深度建模模型DMM应用在递归四叉树RQT或简化深度图编码SDC中对所述深度图像块进行编码时,分别使用所述DMM中的DMM1模式和DMM4模式对所述深度图像块进行检测,得到所述DMM1模式下所述深度图像块的率失真结果,以及所述DMM4模式下所述深度图像块的率失真结果;将所述DMM1和所述DMM4中率失真结果最小的DMM模式确定为编码时所使用的DMM模式,将所述所使用的模式应用在所述RQT或所述SDC中对所述深度图像块进行编码,并将所述所使用的DMM模式,写入码流。与现有技术中编解码时需要对四种模式进行检测相比,本发明实施例提供的编码方法,只需要检测两种模式,从而降低了编码的复杂度,提高了编码的效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例中的编码方法的一实施例示意图;
图2是本发明实施例中的DMM1的示意图;
图3是本发明实施例中的DMM4的示意图;
图4是本发明实施例中解码方法的一实施例示意图;
图5是本发明实施例中编解码的一过程描述示意图;
图6是本发明实施例中编解码的另一过程描述示意图;
图7是本发明实施例中编解码的另一过程描述示意图;
图8是本发明实施例中解码的另一过程描述示意图;
图9是本发明实施例中解码的另一过程描述示意图;
图10是本发明实施例中编码装置的一实施例示意图;
图11是本发明实施例中解码装置的一实施例示意图;
图12是本发明实施例中编码装置的一实施例示意图;
图13是本发明实施例中解码装置的一实施例示意图。
具体实施方式
本发明实施例提供本发明实施例提供一种帧内深度图像块编码、解码的方法,可以减少编解码过程中的检测模式,从而降低了编解码的复杂度,提高了编解码的效率。本发明实施例还提供了相应的装置。以下分别进行详细说明。
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
参阅图1,本发明实施例提供的一种帧内深度图像块编码的方法的一实施例包括:
101、获取待编码的深度图像块。
102、当将深度建模模型DMM应用在递归四叉树(Recur Intra Coding QuartTree,RQT)或简化深度图编码(Simplify Depth Coding,SDC)中对所述深度图像块进行编码时,分别使用所述DMM中的DMM1模式和DMM4模式对所述深度图像块进行检测,得到所述DMM1模式下所述深度图像块的率失真结果,以及所述DMM4模式下所述深度图像块的率失真结果。
深度建模模型(Depth modeling modes,DMM)是一种图像的分割方法,DMM有DMM1和DMM4两种模式,其中DMM1(Depth modeling mode1)是采用了楔形方式对图像块进行分割,DMM4(Depth modeling mode4)则是根据对应的纹理参考块进行预测分割。关于DMM1可以参阅图2进行理解,DMM4可以参阅图3进行理解。
深度图像块在DMM1模式会有一个率失真结果,在DMM4会有一个率失真结果,率失真结果的计算过程为现有技术,本申请中不做过多赘述。
103、将所述DMM1和所述DMM4中率失真结果最小的DMM模式确定为编码时所使用的DMM模式,将所述所使用的模式应用在所述RQT或所述SDC中对所述深度图像块进行编码,并将所述所使用的DMM模式,写入码流。
在DMM1和DMM4的率失真结果都计算出来后,选择率失真结果小的DMM模式结合于预置的编码技术中。
当DMM1的率失真结果较小时,编码时使用RQT技术进行编码时,将DMM1结合于RQT技术。
当使用DMM1时,采用RQT编码时,将DMM1结合于RQT中对深度图像块进行编码,并在码流中写入DMM1这种DMM的模式。
对于在编码信息中DMM的模式的表示方式可以有多种,例如:用0表示DMM1,用1表示DMM4。当然,也可以有其他的表示方式。
本发明实施例采用获取待编码的深度图像块;当将深度建模模型DMM应用在递归四叉树RQT或简化深度图编码SDC中对所述深度图像块进行编码时,分别使用所述DMM中的DMM1模式和DMM4模式对所述深度图像块进行检测,得到所述DMM1模式下所述深度图像块的率失真结果,以及所述DMM4模式下所述深度图像块的率失真结果;将所述DMM1和所述DMM4中率失真结果最小的DMM模式确定为编码时所使用的DMM模式,将所述所使用的模式应用在所述RQT或所述SDC中对所述深度图像块进行编码,并将所述所使用的DMM模式,写入码流。与现有技术中编解码时需要对四种模式进行检测相比,本发明实施例提供的编码方法,只需要检测两种模式,从而降低了编码的复杂度,提高了编码的效率。
可选地,在上述图1对应的实施例的基础上,本发明实施例提供的帧内深度图像块编码的方法的第一个可选实施例中,所述将所述所使用的DMM模式,写入码流时,所述方法还包括:
将用于指示所述RQT或所述SDC的编码标识写入所述码流,所述编码标识用于指示解码端按照所述编码标识所指示的所述RQT或所述SDC进行解码。
本发明实施例中,当编码器中预置有RQT和SD编码技术时,DMM结合于SDC时,会有两种模式,两种模式分别对应DMM1和DMM4。而现有技术中针对SDC通过默认偏移标识位为0或者没有该偏移标识位来标记DMM1或DMM4模式,DMM结合于RQT时根据第一偏移标识位为0或者没有第一偏移标识位,以及第二偏移标识位为1或者没有第二偏移标识位来标记DMM1或DMM4模式,共有四种模式。而本发明实施例中只设置有DMM1和DMM4两种模式,无论在编解码过程中使用RQT技术还是使用SDC技术,在结合DMM时,都只结合DMM1和DMM4两种模式,进一步降低了编码的复杂度,提高了编码的效率。
虽然RQT或SDC都可以在编解码过程中使用,但在编码端具体使用了那种编码技术,需要通知解码端,以便解码端根据该编码技术进行解码,因此,需要在码流中写入RQT或者SDC的标识。
例如:可以设置一个标识位,当该标识位标识位为0时表示使用RQT,当该标识位为1时表示使用SDC。
可选地,在上述图1对应的实施例或第一个可选实施例的基础上,本发明实施例提供的帧内深度图像块编码的方法的第二个可选实施例中,所述将所述所使用的模式应用在所述RQT或所述SDC中对所述深度图像块进行编码,可以包括:
根据所述所使用的DMM模式,获得所述所使用的DMM模式下分割得到的深度图像子块的块预测值、块偏移值和所述深度图像子块中各像素点的残差信息;
其中,所述块预测值为按照预先定义的预测规则从与所述深度图像子块相邻的一个深度图像块得到的,所述块偏移值为所述深度图像块的块原始像素值与所述块预测值的差值,再按照预设的映射关系进行映射得到的,所述深度图像子块中各像素点的残差信息为所述深度图像子块中各像素点的原始像素值与所述块预测值和所述块偏移值的和的差值。
本发明实施例中,参阅图2和图3可知,深度图像块按照DMM1进行分割或者按照DMM4进行分割会得到相应的深度图像子块,然后可以分别对所述深度图像子块进行编码。
预先定义的预测规则可以有多种,例如:选择深度图像子块左上角的相邻的深度图像块的中各像素点的像素值的平均值,或者选择深度图像子块左方的相邻的深度图像块的中各像素点的像素值的平均值,还可以有很多种预测规则,本处不一一枚举。
深度图像块的块原始像素值为每个像素点的像素值的平均值。
预设的映射关系Y=X+1,其中,x为所述块原始像素值与所述块预测值的差值,Y为映射得到的块偏移值。
所述深度图像子块中各像素点的残差信息为所述深度图像子块中各像素点的原始像素值与所述块预测值和所述块偏移值的和的差值。用公式可以表示为:
Z=M-(A+Y)其中,Z为像素点的残差信息,M为像素点的原始像素值,A为块的预测值,Y为块的偏移值。
可选地,在上述第二个可选实施例的基础上,本发明实施例提供的帧内深度图像块编码的方法的第三个可选实施例中,所述获得所述深度图像子块中各像素点的残差信息之前,所述方法还可以包括:
将所述同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值;
将所述同一个深度图像子块中各像素点的原始像素值与所述区域常数值做差,得到所述深度图像子块中各像素点的残差信息。
块预测值和块偏移值的和即为区域常数(DC)值。
可选地,在上述第三个可选实施例的基础上,本发明实施例提供的帧内深度图像块编码的方法的第四个可选实施例中,所述将所述同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值,可以包括:
当至少一个所述深度图像子块中的块偏移值为0时,将所述块偏移值为0的深度图像子块的预测值作为所述块偏移值为0的深度图像子块的区域常数值。
当一个深度图像子块的块偏移值为0时,将所述偏移值为0的深度图像子块的预测值作为所述偏移值为0的深度图像子块区域DC值。
可以是只有一个深度图像子块的块偏移值为0时,就可以这样就算深度图像子块区域DC值,也可以时必须所有深度图像子块的块偏移值都为0时,才可以这样就算深度图像子块区域DC值。
参阅图4,本发明实施例提供的帧内深度图像块解码的方法的一实施例包括:
201、从码流中获取解码待解码的深度图像块在编码时所使用的DMM的模式。
深度建模模型DMM的模式为与编码端对应的DMM1和DMM4两种模式中的一种。
202、将所述在编码时所使用的DMM的模式应用在递归四叉树RQT或简化深度图编码SDC中对所述深度图像块进行解码。
203、获得解码后的深度图像块。
本发明实施例中,从码流中获取解码待解码的深度图像块在编码时所使用的DMM的模式;将所述在编码时所使用的DMM的模式应用在递归四叉树RQT或简化深度图编码SDC中对所述深度图像块进行解码;获得解码后的深度图像块。与现有技术中解码时需要对两种模式进行检测相比,本发明实施例提供的解码方法不需要检测偏移标识位以及对RQT中偏移标识位为0的情况进行解码处理,从而降低了解码的复杂度,提高了解码的效率。
可选地,在上述图4对应的实施例的基础上,本发明实施例提供的帧内深度图像块解码的方法的第一个可选实施例中,所述从码流中获取解码待解码的深度图像块在编码时所使用的DMM的模式时,所述方法还可以包括:
从所述码流中获取用于指示编码时使用所述RQT或所述SDC的标识;
所述将所述在编码时所使用的DMM的模式应用在递归四叉树RQT或简化深度图编码SDC中对所述深度图像块进行解码,可以包括:
根据所述编码时使用所述RQT或所述SDC的标识,将所述在编码时所使用的DMM的模式应用在所述标识所指示的所述RQT或所述SDC中对所述深度图像块进行解码。
本发明实施例中,编码端可以使用RQT技术或者SDC技术进行编码,解码端需要确定编码端采用的哪种编码技术进行编码,以便确定与编码技术对应的解码技术。
确定编码时所使用的编码技术可以通过编码信息中的标识位来确定,例如:当该标识位标识位为0时确定编码时使用的是RQT编码技术,当该标识位为1时表示编码时使用的是SDC编码技术。这样,当标识位为0时就可以使用RQT技术进行解码,当标识位为1时就可以使用SDC技术进行解码。
可选地,在上述图4对应的实施例或以图4为基础的第一个可选实施例的基础上,本发明实施例提供的帧内深度图像块解码的方法的第二个可选实施例中,
所述将所述在编码时所使用的DMM的模式应用在递归四叉树RQT或简化深度图编码SDC中对所述深度图像块进行解码,包括:
根据所述在编码时所使用的DMM的模式,获得所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值、块偏移值和所述深度图像子块中各像素点的残差信息;
其中,所述块预测值为按照预先定义的预测规则从与所述深度图像子块相邻的一个深度图像块得到的,所述块偏移值为所述深度图像块的块原始像素值与所述块预测值的差值,再按照预设的映射关系进行映射得到的,所述深度图像子块中各像素点的残差信息为所述深度图像子块中各像素点的原始像素值与所述块预测值和所述块偏移值的和的差值。
本发明实施例中,在解码端,块预测值的获取方式与编码端相同,解码端根据已解码的相邻深度图像块的像素值,可以得到当前所述深度图像的预测值。
块偏移值和深度图像块中各像素点的残差信息都是解码时从码流中获取到的。
可选地,在第二个可选实施例的基础上,本发明实施例提供的帧内深度图像块解码的方法的第三个可选实施例中,
所述获得所述深度图像子块中各像素点的残差信息之前,所述方法还可以包括:
将所述同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值;
将所述同一个深度图像子块中各像素点的原始像素值与所述区域常数值做差,得到所述深度图像子块中各像素点的残差信息。
可选地,在解码端的第三个可选实施例的基础上,本发明实施例提供的深度图像块解码的方法的第四个可选实施例中,所述对所述深度图像子块中像素点的预测值和偏移值求和,得到所述深度图像子块中像素点的区域DC值,可以包括:
当一个深度图像子块中的每个像素点的偏移值都为0时,将所述一个深度图像子块中所述每个像素点的预测值作为所述每个像素点的区域DC值。
可选地,在解码端的第三个可选实施例的基础上,本发明实施例提供的帧内深度图像块解码的方法的第三个可选实施例中,所述将所述同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值,包括:
当至少一个所述深度图像子块中的块偏移值为0时,将所述块偏移值为0的深度图像子块的预测值作为所述块偏移值为0的深度图像子块的区域常数值。
为了便于理解,下面以几个应用场景为例,说明本发明实施例中编码和解码的过程:
参阅图5,图5为RQT和SDC中DMM的合并实现示意图。
将SDC编码过程中DMM实现的两种方式与RQT编码过程中DMM实现的四种方式合并为DMM1和DMM4两种模式,具体请参阅图5中S305中的过程。
S300、深度图像块开始编码过程。
S305、无论是采用SDC编码还是采用RQT编码,根据深度图像块在DMM1和DMM4的率失真结果,确定在编码过程中采用DMM1还是采用DMM4。
S310、确定SDC Flag标识位和DMM Flag标识位的标识。
深度图像块在编码过程中,如果使用SDC编码,则在SDC flag标识位可以设置为1,如果使用RQT编码,则在SDC flag标识位可以设置为0。无论是SDC编码,还是RQT编码,当编码时所使用的是DMM1时,则在DMM的标识位可以设置为0,如果编码时所使用的是DMM4,则在DMM的标识位可以设置为1。
S315、计算深度图像块的预测值、偏移值和残差信息。
其中,所述块预测值为按照预先定义的预测规则从与所述深度图像子块相邻的一个深度图像块得到的,所述块偏移值为所述深度图像块的块原始像素值与所述块预测值的差值,再按照预设的映射关系进行映射得到的,所述深度图像子块中各像素点的残差信息为所述深度图像子块中各像素点的原始像素值与所述块预测值和所述块偏移值的和的差值。
预先定义的预测规则可以有多种,例如:选择深度图像子块左上角的相邻的深度图像块的中各像素点的像素值的平均值,或者选择深度图像子块左方的相邻的深度图像块的中各像素点的像素值的平均值,还可以有很多种预测规则,本处不一一枚举。
深度图像块的块原始像素值为每个像素点的像素值的平均值。
预设的映射关系Y=X+1,其中,x为所述块原始像素值与所述块预测值的差值,Y为映射得到的块偏移值。
所述深度图像子块中各像素点的残差信息为所述深度图像子块中各像素点的原始像素值与所述块预测值和所述块偏移值的和的差值。用公式可以表示为:
Z=M-(A+Y)其中,Z为像素点的残差信息,M为像素点的原始像素值,A为块的预测值,Y为块的偏移值。
块预测值和块偏移值的和即为区域常数(DC)值。
深度图像子块中各像素点的的残差信息则进一步根据深度图像字块中每个像素点的原始像素值和对应的区域常数DC值的差值得到。
S316、在编码信息中设置S310中确定的SDC Flag标识位和DMM Flag标识位的标识。
S320、在解码过程中,解码端获取待解码的编码信息后,提取出SDC Flag标识位和DMM Flag标识位上的标识,根据表示确定采用的解码技术和DMM的模式。
S325、根据所述编码时所使用的DMM的模式和所述深度图像块编码时所RQT或者SDC,获取编码时所述深度图像子块中的块预测值和块偏移值,以及所述深度图像块中各像素点的残差信息。
S330、实现深度图像块的重建。
实现深度图像块重建的具体过程可以是:
根据所述编码时所使用的DMM的模式,确定所述深度图像块的深度图像子块块预测值;
从所述码流中获取所述深度图像子块的块偏移值,以及所述深度图像子块中各像素点的残差信息;
对所述深度图像子块的块预测值和块偏移值求和,得到所述深度图像子块的区域常数DC值;
根据所述深度图像子块的区域常数DC值和所述深度图像子块中各像素点的残差信息,得到所述深度图像子块中各像素点的重建值,最终得到深度图像块的重建图像。
参阅图6,假设当对深度图像块进行帧内编解码,当对4×4大小深度图像块像块进行帧内编码,假设选择了RQT中的DMM1模式进行编码实现,根据DMM1对深度图像块进行分割得到两个深度图像子块,计算得到第一深度图像子的块预测值PredDC0=5,块偏移值DeltaDC0=8,计算得到第二深度图像子块的块预测值PredDC1=6,块偏移值DeltaDC1=13,PredDC0=5与DeltaDC0=8的和即为的第一深度图像子的块的区域常数DC值,则可以计算出第一个深度图像子块的区域常数DC值为13,第二个深度图像子块的区域常数DC值为19,再用深度图像块中像素点的原始像素值与对应的区域常数DC值做差值,即可得等得到图6中所示的深度图像块中每个像素点的残差信息。DMM模式使用标识位(isDimMode)为1,表示使用了DMM模式,且DMM模式标识位(DimType)为0,表示使用的是DMM1。进一步对DeltaDC0、DeltaDC1和残差信息进行编码。解码端解码DMM模式,通过标识位(isDimMode)为1,可知编码时使用了DMM模式,进一步对DMM模式标识位(DimType)解码,解码为0,表示编码时使用的是DMM1,后对DeltaDC0和DeltaDC1进行解码,得到对应值8和13,最后再对残差信息进行解码。解码端可以采用与编码端相同的策略,计算的到第一个深度图像子块的块预测值PredDC0=5,第二个深度图像子块的块预测值PredDC1=6,用PredDC0和DeltaDC0求和得到第一个深度图像子块的区域常数DC0=13,PredDC1和DeltaDC1求和得到第二个深度图像子块的区域常数区域DC1=19,再根据图6所示的残差信息,用区域常数DC0=13和区域常数DC1=19与对应像素点的像素值做求和运算,得到深度图像块中每个像素点的重建值,实现对该4×4大小深度图像块进行重构。
参阅图7,假设当对深度图像块帧内编解码,当对8×8大小深度图像块像块进行帧内编码,假设选择了RQT中的DMM1模式进行编码实现,根据DMM1对深度图像块进行分割得到两个深度图像子块,计算得第一个深度图像子块中每个像素点的块预测值PredDC0=13,块偏移值DeltaDC0=3,计算得到第二个深度图像子块中每个像素点的块预测值PredDC1=7,块偏移值DeltaDC1=0,PredDC0=13与DeltaDC0=3的和即为第一个深度图像子块的区域常数DC值,则可以计算出第一个深度图像子块的区域常数DC0=16,第二个深度图像子块的区域常数DC1=19,再用深度图像块中哥各像素点的原始像素值与对应的的区域常数DC值做差值,即可得等得到图7中所示的深度图像块中每个像素点的残差信息。DMM模式使用标识位(isDimMode)为1,表示使用了DMM模式,且DMM模式标识位(DimType)为0,表示使用的是DMM1。进一步对DeltaDC0,DeltaDC1和残差信息进行编码。解码端解码DMM模式,通过标识位(isDimMode)为1,可知编码时使用了DMM模式,进一步对DMM模式标识位(DimType)解码,解码为0,表示编码时使用的是DMM1,后对DeltaDC0和DeltaDC1进行解码,得到对应值3和0,最后再对残差信息进行解码,得到图7所示的深度图像块的残差信息。解码端可以采用与编码端相同的策略,计算的到第一个深度图像子块的块预测值PredDC0=13,第二个深度图像子块的块预测值PredDC1=7,用PredDC0和DeltaDC0求和得到第一个深度图像子块的区域常数DC0=16,PredDC1和DeltaDC1求和得到第二个深度图像子块的区域常数DC1=7,因DeltaDC1=0,所以可以直接将PredDC1=7赋值给区域常数DC1=7。再根据图7所示的残差信息,用区域DC0=16和区域DC1=7与对应像素点的残差信息做求和运算,得到深度图像块中每个像素点的重建值,实现对该8×8大小深度图像块进行重构。
参阅图8,假设当对深度图像块帧内编解码,当对4×4大小深度图像块进行帧内编码,假设选择了RQT中的DMM1模式进行编码实现,计算得到PredDC0=5,PredDC1=6,DeltaDC0=0,DeltaDC1=13。由于DeltaDC0=0,则对于区域DC0则可以通过PredDC0直接赋值可得出为DC0=5,对于区域DC1则按照图6或图7所描述的步骤计算得出。
参阅图9,假设当对深度图像块帧内编解码,当对4×4大小深度图像块像块进行帧内编码,假设选择了RQT中的DMM1模式进行编码实现,计算得到PredDC0=5,PredDC1=6,DeltaDC0=0,DeltaDC1=0。由于DeltaDC0=DeltaDC1=0,则对于区域DC0和区域DC1均可以通过PredDC0和PredDC1直接赋值可得出分别为5和6。
参阅图10,本发明实施例提供的编码装置30的一实施例包括:
获取单元301,用于获取待编码的深度图像块;
检测单元302,用于当将深度建模模型DMM应用在递归四叉树RQT或简化深度图编码SDC中对所述获取单元301获取的所述深度图像块进行编码时,分别使用所述DMM中的DMM1模式和DMM4模式对所述深度图像块进行检测,得到所述DMM1模式下所述深度图像块的率失真结果,以及所述DMM4模式下所述深度图像块的率失真结果;
编码单元303,用于将所述检测单元302检测得到的所述DMM1和所述DMM4中率失真结果最小的DMM模式确定为编码时所使用的DMM模式,将所述所使用的模式应用在所述RQT或所述SDC中对所述深度图像块进行编码,并将所述所使用的DMM模式,写入码流。
本发明实施例中,获取单元301获取待编码的深度图像块,检测单元302当将深度建模模型DMM应用在递归四叉树RQT或简化深度图编码SDC中对所述获取单元301获取的所述深度图像块进行编码时,分别使用所述DMM中的DMM1模式和DMM4模式对所述深度图像块进行检测,得到所述DMM1模式下所述深度图像块的率失真结果,以及所述DMM4模式下所述深度图像块的率失真结果;编码单元303将所述检测单元302检测得到的所述DMM1和所述DMM4中率失真结果最小的DMM模式确定为编码时所使用的DMM模式,将所述所使用的模式应用在所述RQT或所述SDC中对所述深度图像块进行编码,并将所述所使用的DMM模式,写入码流。与现有技术中编解码时需要对四种模式进行检测相比,本发明实施例提供的编码方法,只需要检测两种模式,从而降低了编码的复杂度,提高了编码的效率。
可选地,在上述图10对应的实施例的基础上,本发明实施例提供的编码装置的另一实施例中,
所述编码单元303,还用于将用于指示所述RQT或所述SDC的编码标识写入所述码流,所述编码标识用于指示解码端按照所述编码标识所指示的所述RQT或所述SDC进行解码。
可选地,在上述图10对应的实施例的基础上,本发明实施例提供的编码装置的另一实施例中,
所述编码单元303,具体用于根据所述所使用的DMM模式,获得所述所使用的DMM模式下分割得到的深度图像子块的块预测值、块偏移值和所述深度图像子块中各像素点的残差信息;
其中,所述块预测值为按照预先定义的预测规则从与所述深度图像子块相邻的一个深度图像块得到的,所述块偏移值为所述深度图像块的块原始像素值与所述块预测值的差值,再按照预设的映射关系进行映射得到的,所述深度图像子块中各像素点的残差信息为所述深度图像子块中各像素点的原始像素值与所述块预测值和所述块偏移值的和的差值。
可选地,在上述图10对应的实施例的基础上,本发明实施例提供的编码装置的另一实施例中,
所述编码单元303,具体用于将所述同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值,将所述同一个深度图像子块中各像素点的原始像素值与所述区域常数值做差,得到所述深度图像子块中各像素点的残差信息。
可选地,在上述图10对应的实施例的基础上,本发明实施例提供的编码装置的另一实施例中,
所述编码单元303,具体用于当至少一个所述深度图像子块中的块偏移值为0时,将所述块偏移值为0的深度图像子块的预测值作为所述块偏移值为0的深度图像子块的区域常数值。
参阅图11,本发明实施例提供的解码装置40的一实施例包括:
获取单元401,用于从码流中获取解码待解码的深度图像块在编码时所使用的DMM的模式;
解码单元402,用于将所述在编码时所使用的DMM的模式应用在递归四叉树RQT或简化深度图编码SDC中对所述获取单元401获取的所述深度图像块进行解码;
获得单元403,用于获得所述解码单元402解码后的深度图像块。
本发明实施例中,获取单元401从码流中获取解码待解码的深度图像块在编码时所使用的DMM的模式;解码单元402将所述在编码时所使用的DMM的模式应用在递归四叉树RQT或简化深度图编码SDC中对所述获取单元401获取的所述深度图像块进行解码;获得单元403,获得所述解码单元402解码后的深度图像块。与现有技术中解码时需要对两种模式进行检测相比,本发明实施例提供的解码方法不需要检测偏移标识位以及对RQT中偏移标识位为0的情况进行解码处理,从而降低了解码的复杂度,提高了解码的效率。
可选地,在上述图11对应的实施例的基础上,本发明实施例提供的解码装置的另一实施例中,
所述获取单元401,还用于从所述码流中获取用于指示编码时使用所述RQT或所述SDC的标识;
所述解码单元402,具体用于根据所述编码时使用所述RQT或所述SDC的标识,将所述在编码时所使用的DMM的模式应用在所述标识所指示的所述RQT或所述SDC中对所述深度图像块进行解码。
可选地,在上述图11对应的实施例的基础上,本发明实施例提供的解码装置的另一实施例中,
所述解码单元402,具体用于根据所述在编码时所使用的DMM的模式,获得所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值、块偏移值和所述深度图像子块中各像素点的残差信息;
其中,所述块预测值为按照预先定义的预测规则从与所述深度图像子块相邻的一个深度图像块得到的,所述块偏移值为所述深度图像块的块原始像素值与所述块预测值的差值,再按照预设的映射关系进行映射得到的,所述深度图像子块中各像素点的残差信息为所述深度图像子块中各像素点的原
可选地,在上述图11对应的实施例的基础上,本发明实施例提供的解码装置的另一实施例中,
所述解码单元402,具体用于将所述同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值,将所述同一个深度图像子块中各像素点的原始像素值与所述区域常数值做差,得到所述深度图像子块中各像素点的残差信息。
可选地,在上述图11对应的实施例的基础上,本发明实施例提供的解码装置的另一实施例中,
所述解码单元402,具体用于当至少一个所述深度图像子块中的块偏移值为0时,将所述块偏移值为0的深度图像子块的预测值作为所述块偏移值为0的深度图像子块的区域常数值。
图12是本发明实施例编码装置30的结构示意图。编码装置30可包括输入设备310、输出设备320、处理器330和存储器340。
存储器340可以包括只读存储器和随机存取存储器,并向处理器330提供指令和数据。存储器340的一部分还可以包括非易失性随机存取存储器(NVRAM)。
存储器340存储了如下的元素,可执行模块或者数据结构,或者它们的子集,或者它们的扩展集:
操作指令:包括各种操作指令,用于实现各种操作。
操作系统:包括各种系统程序,用于实现各种基础业务以及处理基于硬件的任务。
在本发明实施例中,处理器330通过调用存储器340存储的操作指令(该操作指令可存储在操作系统中),执行如下操作:
获取待编码的深度图像块;
当将深度建模模型DMM应用在递归四叉树RQT或简化深度图编码SDC中对所述深度图像块进行编码时,分别使用所述DMM中的DMM1模式和DMM4模式对所述深度图像块进行检测,得到所述DMM1模式下所述深度图像块的率失真结果,以及所述DMM4模式下所述深度图像块的率失真结果;
将所述DMM1和所述DMM4中率失真结果最小的DMM模式确定为编码时所使用的DMM模式,将所述所使用的模式应用在所述RQT或所述SDC中对所述深度图像块进行编码,并将所述所使用的DMM模式,写入码流。
本发明实施例中,编码装置30在编码时只需要检测两种模式,从而降低了编码的复杂度,提高了编码的效率。
处理器330控制编码装置30的操作,处理器330还可以称为CPU(CentralProcessing Unit,中央处理单元)。存储器340可以包括只读存储器和随机存取存储器,并向处理器330提供指令和数据。存储器340的一部分还可以包括非易失性随机存取存储器(NVRAM)。具体的应用中,编码装置30的各个组件通过总线系统350耦合在一起,其中总线系统350除包括数据总线之外,还可以包括电源总线、控制总线和状态信号总线等。但是为了清楚说明起见,在图中将各种总线都标为总线系统350。
上述本发明实施例揭示的方法可以应用于处理器330中,或者由处理器330实现。处理器330可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器330中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器330可以是通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器340,处理器330读取存储器340中的信息,结合其硬件完成上述方法的步骤。
可选地,处理器330还可:将用于指示所述RQT或所述SDC的编码标识写入所述码流,所述编码标识用于指示解码端按照所述编码标识所指示的所述RQT或所述SDC进行解码。
可选地,处理器330具体可:根据所述所使用的DMM模式,获得所述所使用的DMM模式下分割得到的深度图像子块的块预测值、块偏移值和所述深度图像子块中各像素点的残差信息;
其中,所述块预测值为按照预先定义的预测规则从与所述深度图像子块相邻的一个深度图像块得到的,所述块偏移值为所述深度图像块的块原始像素值与所述块预测值的差值,再按照预设的映射关系进行映射得到的,所述深度图像子块中各像素点的残差信息为所述深度图像子块中各像素点的原始像素值与所述块预测值和所述块偏移值的和的差值。
可选地,处理器330具体可:
将所述同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值;
将所述同一个深度图像子块中各像素点的原始像素值与所述区域常数值做差,得到所述深度图像子块中各像素点的残差信息。
可选地,处理器330具体可:
当至少一个所述深度图像子块中的块偏移值为0时,将所述块偏移值为0的深度图像子块的预测值作为所述块偏移值为0的深度图像子块的区域常数值。
图13是本发明实施例解码装置40的结构示意图。解码装置40可包括输入设备410、输出设备420、处理器430和存储器440。
存储器440可以包括只读存储器和随机存取存储器,并向处理器430提供指令和数据。存储器440的一部分还可以包括非易失性随机存取存储器(NVRAM)。
存储器440存储了如下的元素,可执行模块或者数据结构,或者它们的子集,或者它们的扩展集:
操作指令:包括各种操作指令,用于实现各种操作。
操作系统:包括各种系统程序,用于实现各种基础业务以及处理基于硬件的任务。
在本发明实施例中,处理器430通过调用存储器440存储的操作指令(该操作指令可存储在操作系统中),执行如下操作:
从码流中获取解码待解码的深度图像块在编码时所使用的DMM的模式;
将所述在编码时所使用的DMM的模式应用在递归四叉树RQT或简化深度图编码SDC中对所述深度图像块进行解码;
获得解码后的深度图像块。
本发明实施例中,解码装置40不需要检测偏移标识位以及对RQT中偏移标识位为0的情况进行解码处理,从而降低了解码的复杂度,提高了解码的效率
处理器430控制解码装置40的操作,处理器430还可以称为CPU(CentralProcessing Unit,中央处理单元)。存储器440可以包括只读存储器和随机存取存储器,并向处理器430提供指令和数据。存储器440的一部分还可以包括非易失性随机存取存储器(NVRAM)。具体的应用中,解码装置40的各个组件通过总线系统450耦合在一起,其中总线系统450除包括数据总线之外,还可以包括电源总线、控制总线和状态信号总线等。但是为了清楚说明起见,在图中将各种总线都标为总线系统450。
上述本发明实施例揭示的方法可以应用于处理器430中,或者由处理器430实现。处理器430可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器430中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器430可以是通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器440,处理器430读取存储器440中的信息,结合其硬件完成上述方法的步骤。
可选地,所述处理器430还可从所述码流中获取用于指示编码时使用所述RQT或所述SDC的标识;
所述处理器具体可:根据所述编码时使用所述RQT或所述SDC的标识,将所述在编码时所使用的DMM的模式应用在所述标识所指示的所述RQT或所述SDC中对所述深度图像块进行解码。
可选地,所述处理器430具体可:
根据所述在编码时所使用的DMM的模式,获得所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值、块偏移值和所述深度图像子块中各像素点的残差信息;
其中,所述块预测值为按照预先定义的预测规则从与所述深度图像子块相邻的一个深度图像块得到的,所述块偏移值为所述深度图像块的块原始像素值与所述块预测值的差值,再按照预设的映射关系进行映射得到的,所述深度图像子块中各像素点的残差信息为所述深度图像子块中各像素点的。
可选地,所述处理器430具体可:
将所述同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值;
将所述同一个深度图像子块中各像素点的原始像素值与所述区域常数值做差,得到所述深度图像子块中各像素点的残差信息。
可选地,所述处理器430具体可:
当至少一个所述深度图像子块中的块偏移值为0时,将所述块偏移值为0的深度图像子块的预测值作为所述块偏移值为0的深度图像子块的区域常数值。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件(例如处理器)来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:ROM、RAM、磁盘或光盘等。
以上对本发明实施例所提供的确定非连续性接收周期的方法、用户设备以及系统进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种帧内深度图像块解码的方法,其特征在于,包括:
从码流中获取待解码的深度图像块在编码时所使用的深度建模模型DMM的模式,所述所使用的DMM的模式在解码时应用于递归四叉树RQT或简化深度图编码SDC中;
根据所述在编码时所使用的DMM的模式,获得所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值,所述块预测值为按照预先定义的预测规则从与所述深度图像子块相邻的一个深度图像块得到的;
从所述码流中获取所述深度图像子块的块偏移值和所述深度图像子块中各像素点的残差信息;
根据所述块预测值、所述块偏移值和所述深度图像子块中各像素点的残差信息,重建所述深度图像块中各像素点的像素值,以获得解码后的深度图像块。
2.根据权利要求1所述的方法,其特征在于,在所述从码流中获取待解码的深度图像块在编码时所使用的深度建模模型DMM的模式之后,所述方法还包括:
从所述码流中获取用于指示编码时使用简化深度图编码SDC的标识;
对应的,所述根据所述在编码时所使用的DMM的模式,获得所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值,具体包括:
根据所述在编码时所使用的DMM的模式,获得与所述SDC对应的所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值;
对应的,所述根据所述块预测值、所述块偏移值和所述深度图像子块中各像素点的残差信息,重建所述深度图像块中各像素点的像素值,以获得解码后的深度图像块,包括:
根据所述SDC对应的所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值、所述块偏移值和所述深度图像子块中各像素点的残差信息,重建所述深度图像块中各像素点的像素值,以获得解码后的深度图像块。
3.根据权利要求1所述的方法,其特征在于,在所述从码流中获取待解码的深度图像块在编码时所使用的深度建模模型DMM的模式之后,所述方法还包括:
从所述码流中获取用于指示编码时使用递归四叉树RQT的标识;
对应的,所述根据所述在编码时所使用的DMM的模式,获得所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值,具体包括:
根据所述在编码时所使用的DMM的模式,获得与RQT对应的所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值;
对应的,所述根据所述块预测值、所述块偏移值和所述深度图像子块中各像素点的残差信息,重建所述深度图像块中各像素点的像素值,以获得解码后的深度图像块,包括:
根据所述RQT对应的所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值、所述块偏移值和所述深度图像子块中各像素点的残差信息,重建所述深度图像块中各像素点的像素值,以获得解码后的深度图像块。
4.根据权利要求1-3任一所述的方法,其特征在于,所述根据所述块预测值、所述块偏移值和所述深度图像子块中各像素点的残差信息,重建所述深度图像块中各像素点的像素值,包括:
将编码时分割得到的至少一个深度图像子块中同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值;
根据所述同一个深度图像子块的区域常数值和所述同一个深度图像子块中各像素点的残差信息,得到所述同一个深度图像子块中各像素点的像素值。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
当所述至少一个所述深度图像子块中的块偏移值为0时,将所述块偏移值为0的深度图像子块的预测值作为所述块偏移值为0的深度图像子块的区域常数值。
6.一种帧内深度图像块解码的装置,其特征在于,包括:
处理器和存储器;
所述存储器存储操作指令;
所述处理器通过调用所述指令用于执行以下步骤:
从码流中获取待解码的深度图像块在编码时所使用的深度建模模型DMM的模式,所述所使用的DMM的模式在解码时应用于递归四叉树RQT或简化深度图编码SDC中;
根据所述在编码时所使用的DMM的模式,获得所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值,所述块预测值为按照预先定义的预测规则从与所述深度图像子块相邻的一个深度图像块得到的;
从所述码流中获取所述深度图像子块的块偏移值和所述深度图像子块中各像素点的残差信息;
根据所述块预测值、所述块偏移值和所述深度图像子块中各像素点的残差信息,重建所述深度图像块中各像素点的像素值,以获得解码后的深度图像块。
7.根据权利要求6所述的装置,其特征在于,在所述从码流中获取待解码的深度图像块在编码时所使用的深度建模模型DMM的模式之后,所述处理器还用于执行:
从所述码流中获取用于指示编码时使用简化深度图编码SDC的标识;
对应的,所述根据所述在编码时所使用的DMM的模式,获得所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值,具体包括:
根据所述在编码时所使用的DMM的模式,获得与所述SDC对应的所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值;
对应的,所述根据所述块预测值、所述块偏移值和所述深度图像子块中各像素点的残差信息,重建所述深度图像块中各像素点的像素值,以获得解码后的深度图像块,包括:
根据所述SDC对应的所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值、所述块偏移值和所述深度图像子块中各像素点的残差信息,重建所述深度图像块中各像素点的像素值,以获得解码后的深度图像块。
8.根据权利要求6所述的装置,其特征在于,在从码流中获取待解码的深度图像块在编码时所使用的深度建模模型DMM的模式之后,所述处理器还用于执行:
从所述码流中获取用于指示编码时使用递归四叉树RQT的标识;
对应的,所述根据所述在编码时所使用的DMM的模式,获得所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值,具体包括:
根据所述在编码时所使用的DMM的模式,获得与RQT对应的所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值;
对应的,所述根据所述块预测值、所述块偏移值和所述深度图像子块中各像素点的残差信息,重建所述深度图像块中各像素点的像素值,以获得解码后的深度图像块,包括:
根据所述RQT对应的所述在编码时所使用的DMM的模式下分割得到的深度图像子块的块预测值、所述块偏移值和所述深度图像子块中各像素点的残差信息,重建所述深度图像块中各像素点的像素值,以获得解码后的深度图像块。
9.根据权利要求6-8任一所述的装置,其特征在于,所述根据所述块预测值、所述块偏移值和所述深度图像子块中各像素点的残差信息,重建所述深度图像块中各像素点的像素值,包括:
将编码时分割得到的至少一个深度图像子块中同一个深度图像子块的块预测值和所述块偏移值相加,得到所述同一个深度图像子块的区域常数值;
根据所述同一个深度图像子块的区域常数值和所述同一个深度图像子块中各像素点的残差信息,得到所述同一个深度图像子块中各像素点的像素值。
10.根据权利要求9所述的装置,其特征在于,所述处理器还用于执行:
当所述至少一个所述深度图像子块中的块偏移值为0时,将所述块偏移值为0的深度图像子块的预测值作为所述块偏移值为0的深度图像子块的区域常数值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710884970.6A CN107659823B (zh) | 2014-06-26 | 2014-06-26 | 一种帧内深度图像块解码的方法及装置 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710884970.6A CN107659823B (zh) | 2014-06-26 | 2014-06-26 | 一种帧内深度图像块解码的方法及装置 |
CN201410300985.XA CN104079943B (zh) | 2014-06-26 | 2014-06-26 | 一种帧内深度图像块编码、解码的方法及装置 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410300985.XA Division CN104079943B (zh) | 2014-06-26 | 2014-06-26 | 一种帧内深度图像块编码、解码的方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107659823A true CN107659823A (zh) | 2018-02-02 |
CN107659823B CN107659823B (zh) | 2020-07-14 |
Family
ID=51600951
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410300985.XA Active CN104079943B (zh) | 2014-06-26 | 2014-06-26 | 一种帧内深度图像块编码、解码的方法及装置 |
CN201710884970.6A Active CN107659823B (zh) | 2014-06-26 | 2014-06-26 | 一种帧内深度图像块解码的方法及装置 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410300985.XA Active CN104079943B (zh) | 2014-06-26 | 2014-06-26 | 一种帧内深度图像块编码、解码的方法及装置 |
Country Status (3)
Country | Link |
---|---|
US (2) | US10218985B2 (zh) |
CN (2) | CN104079943B (zh) |
WO (1) | WO2015196929A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116582688A (zh) * | 2023-05-04 | 2023-08-11 | 光线云(杭州)科技有限公司 | 一种适配云绘制系统的深度图压缩方法和装置 |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104079943B (zh) * | 2014-06-26 | 2017-11-28 | 华为技术有限公司 | 一种帧内深度图像块编码、解码的方法及装置 |
EP3664333B1 (en) * | 2018-12-06 | 2023-12-13 | Institut Mines Telecom | Devices and methods for parallelized recursive block decoding |
CN110363212B (zh) * | 2019-03-28 | 2022-02-15 | 西南石油大学 | 基于边界扫描的多wedgelet图像近似方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110310976A1 (en) * | 2010-06-17 | 2011-12-22 | Qualcomm Incorporated | Joint Coding of Partition Information in Video Coding |
US20120128067A1 (en) * | 2010-11-22 | 2012-05-24 | Mediatek Singapore Pte. Ltd. | Apparatus and Method of Constrained Partition Size for High Efficiency Video Coding |
US20120140813A1 (en) * | 2010-12-03 | 2012-06-07 | Qualcomm Incorporated | Separately coding the position of a last significant coefficient of a video block in video coding |
CN103237216A (zh) * | 2013-04-12 | 2013-08-07 | 华为技术有限公司 | 深度图像的编解码方法和编解码装置 |
WO2014005248A1 (en) * | 2012-07-02 | 2014-01-09 | Qualcomm Incorporated | Intra-coding of depth maps for 3d video coding |
CN103748882A (zh) * | 2011-07-22 | 2014-04-23 | 高通股份有限公司 | 支持内侧视图运动预测模式的以多重视图译码为基础的三维视频译码编解码器 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103686165B (zh) * | 2012-09-05 | 2018-01-09 | 乐金电子(中国)研究开发中心有限公司 | 深度图像帧内编解码方法及视频编解码器 |
US20150229957A1 (en) * | 2012-09-24 | 2015-08-13 | Qualcomm Incorporated | Depth map coding |
CN103067715B (zh) * | 2013-01-10 | 2016-12-28 | 华为技术有限公司 | 深度图像的编解码方法和编解码装置 |
US9369708B2 (en) * | 2013-03-27 | 2016-06-14 | Qualcomm Incorporated | Depth coding modes signaling of depth data for 3D-HEVC |
CN103237214B (zh) * | 2013-04-12 | 2016-06-08 | 华为技术有限公司 | 深度图像的编解码方法和编解码装置 |
CN103281541B (zh) * | 2013-05-10 | 2016-02-17 | 北方工业大学 | 基于深度图像的帧内预测楔形分块方法 |
CN104079943B (zh) * | 2014-06-26 | 2017-11-28 | 华为技术有限公司 | 一种帧内深度图像块编码、解码的方法及装置 |
-
2014
- 2014-06-26 CN CN201410300985.XA patent/CN104079943B/zh active Active
- 2014-06-26 CN CN201710884970.6A patent/CN107659823B/zh active Active
-
2015
- 2015-06-09 WO PCT/CN2015/081078 patent/WO2015196929A1/zh active Application Filing
-
2016
- 2016-12-22 US US15/389,196 patent/US10218985B2/en active Active
-
2019
- 2019-01-29 US US16/261,097 patent/US10951901B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110310976A1 (en) * | 2010-06-17 | 2011-12-22 | Qualcomm Incorporated | Joint Coding of Partition Information in Video Coding |
US20120128067A1 (en) * | 2010-11-22 | 2012-05-24 | Mediatek Singapore Pte. Ltd. | Apparatus and Method of Constrained Partition Size for High Efficiency Video Coding |
US20120140813A1 (en) * | 2010-12-03 | 2012-06-07 | Qualcomm Incorporated | Separately coding the position of a last significant coefficient of a video block in video coding |
CN103748882A (zh) * | 2011-07-22 | 2014-04-23 | 高通股份有限公司 | 支持内侧视图运动预测模式的以多重视图译码为基础的三维视频译码编解码器 |
WO2014005248A1 (en) * | 2012-07-02 | 2014-01-09 | Qualcomm Incorporated | Intra-coding of depth maps for 3d video coding |
CN103237216A (zh) * | 2013-04-12 | 2013-08-07 | 华为技术有限公司 | 深度图像的编解码方法和编解码装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116582688A (zh) * | 2023-05-04 | 2023-08-11 | 光线云(杭州)科技有限公司 | 一种适配云绘制系统的深度图压缩方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
US20190158852A1 (en) | 2019-05-23 |
CN107659823B (zh) | 2020-07-14 |
CN104079943B (zh) | 2017-11-28 |
WO2015196929A1 (zh) | 2015-12-30 |
CN104079943A (zh) | 2014-10-01 |
US10951901B2 (en) | 2021-03-16 |
US20170105008A1 (en) | 2017-04-13 |
US10218985B2 (en) | 2019-02-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104079943B (zh) | 一种帧内深度图像块编码、解码的方法及装置 | |
CN109889840B (zh) | 点云编码和解码的方法、编码设备和解码设备 | |
CN103067715B (zh) | 深度图像的编解码方法和编解码装置 | |
TW201710957A (zh) | 二維碼的產生方法、解碼方法以及裝置 | |
CN110516577A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
JP4808771B2 (ja) | 3次元メッシュ情報の符号化及び復号化装置ならびにその方法 | |
CN105373823B (zh) | 动态二维码的生成、读取方法及其装置 | |
JP2010516154A (ja) | スティチング情報を含む3dメッシュ情報を符号化/復号する方法及び装置 | |
JP2008527787A (ja) | 効果的なテクスチャマッピングのための3次元メッシュ情報のテクスチャ座標符号化及び復号化方法 | |
CN107300519B (zh) | 致密砂岩导电分析方法及系统 | |
CN109726786A (zh) | 二维码信息读取、生成方法和装置 | |
CN113486638B (zh) | 表格的重构方法和装置、存储介质及电子装置 | |
CN108133485B (zh) | Gis栅格化连片问题区域识别方法、装置、终端和介质 | |
CN109146766B (zh) | 对象选择方法及装置 | |
KR20210072950A (ko) | 3d 메시 분할 기반 3d 모델 압축 및 압축해제 시스템 및 방법 | |
CN116228923A (zh) | 基于Geohash算法的热力图绘制方法与系统 | |
CN114238239B (zh) | 一种基于python的勘测定界报告生成方法及系统 | |
CN109977707A (zh) | 点阵编码处理系统 | |
CN103826115B (zh) | 图像分割方式的编解码处理方法和装置 | |
CN109936372A (zh) | 压缩和解压缩经纬度数据的方法、装置和存储介质 | |
KR101610086B1 (ko) | 연속 데이터 압축 방법 | |
CN110223388B (zh) | 基于空间结构光的三维重建方法、装置、终端设备及存储介质 | |
KR20200028019A (ko) | 모드 정보를 코딩 및 디코딩하기 위한 방법 및 장치, 그리고 전자 디바이스 | |
CN105551496B (zh) | 一种对语音编解码技术的评判方法、装置及终端 | |
CN103139555B (zh) | 一种视频序列参数编码方法、解码方法、对应的装置及码流 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |