CN104581184B - 深度图像的编码、解码处理方法及装置 - Google Patents

深度图像的编码、解码处理方法及装置 Download PDF

Info

Publication number
CN104581184B
CN104581184B CN201410538418.8A CN201410538418A CN104581184B CN 104581184 B CN104581184 B CN 104581184B CN 201410538418 A CN201410538418 A CN 201410538418A CN 104581184 B CN104581184 B CN 104581184B
Authority
CN
China
Prior art keywords
depth
depth image
sequence number
look
flag bit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410538418.8A
Other languages
English (en)
Other versions
CN104581184A (zh
Inventor
虞露
吕鹏
李明
尚国强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Zhejiang University ZJU
Original Assignee
ZTE Corp
Zhejiang University ZJU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp, Zhejiang University ZJU filed Critical ZTE Corp
Priority to CN201410538418.8A priority Critical patent/CN104581184B/zh
Priority to PCT/CN2014/088860 priority patent/WO2015055146A1/zh
Publication of CN104581184A publication Critical patent/CN104581184A/zh
Application granted granted Critical
Publication of CN104581184B publication Critical patent/CN104581184B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种深度图像的编码、解码处理方法及装置,其中,该编码方法包括:确定在对深度图像进行编码过程中所采用的编码方式的标志位,编码方式包括:使用深度查找表对深度图像在所述深度查找表序号域进行编码和/或直接对深度图像在深度值域进行编码;将标志位写入码流中的以下之一位置:深度图像对应引用的视频参数集、深度图像对应引用的序列参数集、深度图像对应引用的图像参数集、深度图像对应的条带头。通过本发明解决了现有技术中在每一个块中都传输一个标识位导致的开销较大,编解码效率较低的问题,进而减少了传输标志位的开销,提高了深度图像的编解码效率。

Description

深度图像的编码、解码处理方法及装置
技术领域
本发明涉及通信领域,具体而言,涉及一种深度图像的编码、解码处理方法及装置。
背景技术
现有技术中视频编码分层结构:
采用H.264/AVC以及最新的HEVC等编码标准时,一帧图像可以划分为多个条带(slice),对每个条带分别进行编码和解码。编码条带产生条带码流,条带码流中同时包含了这个条带的一些编码参数,如该条带所引用的参数集序号等。在H.264/AVC中的分层结构中,使用了图像参数集和序列参数集两级参数集来描述视频序列的一些参数。序列参数集可以被图像参数集引用,图像参数集可以被条带引用,通过此机制,条带可以根据其含有的图像参数集序号,找到对应序号的图像参数集,进而找到其对应的图像参数集对应的序列参数集,从图像参数集或者序列参数集中获取参数。例如,条带能够根据其含有的图像参数集序号,在对应序号的图像参数集中获取该条带的帧序号等信息;条带能够根据其对应的图像参数集所含有的序列参数集序号,在对应序号的序列参数集中获取该条带所使用的编码档次(Profile)和编码级别(Level)等参数。在HEVC编码标准中,新加入了视频参数集的概念,视频参数集可以被序列参数集引用,序列参数集可以被图像参数集引用,图像参数集可以被条带引用,通过此机制,条带可以根据其含有的图像参数集序号,逐层向上引用,从图像参数集、序列参数集或者视频参数集中获取参数。
条带类型,视频序列中的条带有着不同的类型,常见的有以下三种类型:
帧内预测条带:该条带不可以使用其他条带中的像素来进行预测,只能使用该条带中已经编码过的像素来进行预测。
单向帧间预测条带:该条带可以使用其他条带中的像素来进行单向预测。
双向帧间预测条带:该条带可以使用其他条带中的像素来进行预测,并且可以使用多个其他条带中的像素进行加权预测。
基于块的视频编解码,现有视频编解码技术中,基于块的视频编解码是最常见的。
在基于块的视频编码技术中,视频图像或者是视频图像的每一个条带被分为若干个矩形图像块(又称为编码单元),对于每一个图像块,通过预测得到其预测图像块,将其原始图像块与预测图像块相减得到残差图像块,然后对残差图像块进行编码。残差图像块的编码一般包括:对残差图像块进行变换操作得到变换系数块、对变换系数块进行量化得到量化后的变换系数块,之后编码量化后的变换系数块。对残差图像块进行编码后,需要将残差图像进行编码后的信息写入码流中,这部分信息一般包括量化后的变换系数信息、预测模式信息和运动矢量信息等边信息。其中预测模式信息表示了对该图像块进行预测时究竟使用了哪一种预测模式。一般来讲,一个图像块可以使用的预测模式有若干种,如HEVC帧内预测模式有35种,编码器一般会选择一部分预测模式或是全部可选的预测模式进行一次预测,选出预测效果最好的预测模式作为该图像块的预测模式,并将该预测模式信息写入码流中。
在基于块的视频解码技术中,视频图像或者是视频图像的每一个条带也会被分为若干个矩形图像块(又称为编码单元),对于视频图像的每一个块,解码端通过码流中的预测模式信息和运动矢量信息等边信息解码得到其预测图像块,通过码流中的量化后的变换系数信息解码得到其残差图像块。残差图像块的解码一般包括:对量化后的变换系数信息进行反量化得到重建的变换系数信息,对重建的变换系数信息进行反变换得到残差图像块。最后将预测图像块与残差图像块相加得到最终的重建图像块。
深度图像与深度查找表:
深度图像是三维视频编解码中的一类图像,深度图像中的每个像素值表示的是对应位置的物体距离摄像机的远近,利用深度图像,可以进行虚拟视点合成等后处理工作。深度图像在三维视频中有着重要的意义,如何高效编解码深度图像是一个值得研究的问题。
深度查找表利用了深度图像的稀疏性来提高深度图像的编码效率。具体说来,假设一副深度图像每个像素可以取值的范围为0值255,即对于深度图像的每一个像素点,其像素值可能的取值种类为256种。但是由于深度图像自身的性质,一副深度图像中所有出现过的像素值往往只有256种中的一小部分。如对于一副深度图像,其中出现过的像素值只有{20,23,50,57,100,111}六个值,那么就可以根据这六个值建立一张深度查找表,如下表所示:
深度查找表序号 深度值
0 20
1 23
2 50
3 57
4 100
5 111
根据这张表,就可以建立深度查找表序号域向深度值域的映射。如深度查找表序号0被映射为深度值20,深度查找表序号1被映射为深度值23……深度查找表序号5被映射为深度值111。
同样,也可以建立深度值域向深度查找表序号域的映射,这个映射是多对一的,一般可以根据误差最小法则来建立映射,例如深度值0-21可以被映射为深度查找表序号0,深度值22-36可以被映射为深度查找表序号1,深度值37-53可以被映射为深度查找表序号2,深度值54-78可以被映射为深度查找表序号3,深度值79-105可以被映射为深度查找表序号,4,深度值106-255可以被映射为深度查找表序号5。当然也有其他的建立方法,只要保证一个深度值只被映射到一个深度查找表序号即可,在此不一一赘述。
深度查找表会被编码在参数集中,解码端可以从参数集中获取到深度查找表,从而也可以建立起深度查找表序号域向深度值域的映射以及深度值域向深度查找表序号域的映射。
可见,通过深度查找表,就可以在深度查找表序号域上进行编码和解码了。具体说来,在上文介绍的基于块的视频编码技术中,如果预测图像块和原始图像块中的每个值表示是深度值的大小,则将原始图像块与预测图像块相减得到的残差图像块中的每个值表示的是预测图像块和原始图像块的深度值的差值,此时可称预测图像块和原始图像块等数据为深度值域上的数据,相应的编码称为在深度值域上对深度图像进行编码;如果通过深度查找表序号域向深度值域的映射,将预测图像块和原始图像块中的每个深度值映射为深度查找表的序号,则将原始图像块与预测图像块相减得到的残差图像块中的每个值表示的是预测图像块深度值对应的深度查找表序号和原始图像块深度值对应的深度查找表序号的差值,此时可称预测图像块和原始图像块等数据为深度查找表序号域上的数据,相应的编码称为在深度查找表序号域上对深度图像进行编码。
同理,在上文介绍的基于块的视频解码技术中,如果预测图像块中的每个值表示是深度值的大小,残差图像块中的每个值表示是深度值的差值,则通过将预测图像块与残差图像块相加得到的重建图像块中的每个值也表示的是深度值的大小,此时可称预测图像块和残差图像块等数据为深度值域上的数据,相应的解码称为在深度值域上对深度图像进行解码;如果通过深度查找表序号域向深度值域的映射,将预测图像块中的每个深度值映射为深度查找表的序号,同时残差图像块中的每个值表示是深度查找表序号的差值,则通过将预测图像块与残差图像块相加得到的重建图像块中的每个值也表示的是深度查找表的序号(最终可以通过深度查找表序号域向深度值域的映射将重建图像块中的每个值映射为深度值),此时可称预测图像块和残差图像块等数据为深度查找表序号域上的数据,相应的解码称为在深度查找表序号域上对深度图像进行解码。
深度查找表通过将深度值域映射到深度查找表序号域,从而减小了变量取值范围和变量的方差,提高了深度图像的压缩效率。不过,由于一般来讲深度查找表是每隔若干帧编码一次,并且深度查找表是通过分析这若干帧中的前几帧产生的,那么这若干帧中的有些帧中出现的深度值会不在深度查找表中。
目前,深度查找表只被使用在了少数深度图像特有的预测模式中,有人提出对于其他深度图像可以使用的预测模式也都既可以在深度值域上进行编码,也可以在深度查找表序号域上进行编码,并且对于每一个块,传输一个标志位,来表示是否在深度查找表序号域上进行编码。这种方法虽然进一步利用了深度查找表,但是由于判断和传输标志位都是在块级进行的,因此也有一定的缺陷:
首先,在每一个块中都传输一个标志位造成了相当大的开销,影响了编码效率。
其次,预测模式多种多样,且不同的预测模式具有不同的特点,有些预测模式较为适合在深度查找表序号域上进行编码,而有些预测模式并不适合在深度查找表序号域上进行编码。因此,对于所有其他深度图像可以使用的预测模式也都在深度查找表序号域上进行编码并没有太大的意义,可以只对某些特定的模式在深度查找表序号域上进行编码。
最后,对于编码端来讲,在进行预测模式选择的时候,要想达到最好的编码性能,需要将所有的可用的预测模式都在使用或者在深度值域上进行编码这两种情况下都尝试一遍,相当于可选择的预测模式数加倍了,也就是说,要想达到现有技术所能够达到的最好的编码性能,编码的复杂度会大大提高。
针对相关技术中,在对深度图像进行编解码的过程中,在每一个块中都传输一个标识位导致的开销较大,编解码效率较低的问题,以及无法对预测模块进行选择的问题,还未提出有效的解决方案。
发明内容
本发明提供了一种深度图像的编码、解码处理方法及装置,以至少解决以上问题之一。
根据本发明的一个方面,提供了一种深度图像的编码处理方法,包括:确定在对深度图像进行编码过程中用于指示所述编码过程所采用的编码方式的标志位,该编码方式包括:使用深度查找表对所述深度图像在所述深度查找表序号域进行编码和/或直接对所述深度图像在深度值域进行编码;将所述标志位写入码流中的以下之一位置:所述深度图像对应引用的视频参数集、所述深度图像对应引用的序列参数集、所述深度图像对应引用的图像参数集、所述深度图像对应的条带头。
优选地,确定用于指示对所述深度图像进行编码所采用的编码方式的所述标志位包括:判断所述编码过程所采用的编码方式;如果判断结果指示在所述深度查找表序号域上对所述深度图像进行编码,则产生用于指示在所述深度查找表序号域上对所述深度图像进行编码的标志位,并且选择对所述深度查找表序号域数据进行编码;如果判断结果指示在所述深度值域上对所述深度图像进行编码,则产生用于指示在所述深度值域上对所述深度图像进行编码的标志位,并且选择对所述深度值域数据进行编码。
优选地,选择对所述深度查找表序号域数据进行编码,包括:选择使用所述深度查找表序号域数据构造所述深度图像中的编码块的预测值。
优选地,选择对所述深度值域数据进行编码,包括:选择使用所述深度值域数据构造所述深度图像中编码块的预测值。
优选地,选择对所述深度查找表序号域数据进行编码还包括:对于所述深度图像中的所述编码块,判断所述编码块的预测模式是否在预设预测模式集中,在判断结果为是时,选择对所述编码块的深度查找表序号域数据进行编码;否则,选择对所述编码块的深度值域数据进行编码,其中,所述预设预测模式集包括:允许使用所述深度查找表序号域数据进行编码的预测模式。
优选地,将所述标志位写入所述深度图像对应的条带头中,包括:判断所述条带的条带类型是否在预设条带类型集中,其中,该预设条带类型集包括:需要传输标志位的条带类型;其中,在判断结果为是时,将所述标志位写入所述条带头中;否则,不写入所述条带头中。
根据本发明的另一个方面,还提供了一种深度图像的解码处理方法,包括:解析码流,从码流中的以下之一位置获取用于指示解码过程所采用的解码方式的标志位:所述深度图像对应引用的视频参数集、所述深度图像对应引用的序列参数集、所述深度图像对应引用的图像参数集、所述深度图像对应的条带头,其中,所述解码方式包括:使用深度查找表对所述深度图像在所述深度查找表序号域进行解码和/或直接对所述深度图像在深度值域进行解码;按照所述标志位指示的解码方式对所述深度图像进行解码。
优选地,在所述深度查找表序号域进行解码和/或在所述深度值域进行解码包括:判断所述解码过程所采用的解码方式;如果判断结果指示在所述深度查找表序号域上对所述深度图像进行解码,则产生用于指示在所述深度查找表序号域上对所述深度图像进行解码的标志位,并且选择对所述深度查找表序号域数据进行解码;如果判断结果指示在所述深度值域上对所述深度图像进行解码,则产生用于指示在所述深度值域上对所述深度图像进行解码的标志位,并且选择对所述深度值域数据进行解码。
优选地,选择对所述深度查找表序号域数据进行解码,包括:选择使用所述深度查找表序号域数据构造所述深度图像中的解码块的预测值。
优选地,选择对所述深度值域数据进行解码,包括:选择使用所述深度值域数据构造所述深度图像中解码块的预测值。
优选地,选择对所述深度查找表序号域数据进行解码还包括:对于所述深度图像中的所述解码块,判断所述解码块的预测模式是否在预设预测模式集中,在判断结果为是时,选择使用所述深度查找表序号域数据构造所述解码块的预测值;否则,选择使用所述深度值域数据构造所述解码块的预测值,其中,所述预设预测模式集包括:允许使用所述深度查找表序号域数据进行解码的预测模式。
优选地,所述标志位在所述深度图像的条带头中包括:判断所述条带头所指示的条带类型是否在预设条带类型集中,其中,该预设条带类型集包括:包含有所述标志位对应比特字段的条带类型;其中,在判断结果为是时,从所述条带头中获取所述标识位;否则,将所述标志位设置为默认值。
根据本发明的一个方面,提供了一种深度图像的编码处理装置,包括:确定模块,用于确定在对深度图像进行编码过程中用于指示所述编码过程所采用的编码方式的标志位,该编码方式包括:使用深度查找表对所述深度图像在所述深度查找表序号域进行编码和/或不使用深度查找表而直接对所述深度图像在深度值域进行编码;写入模块,用于将所述标志位写入码流中的以下之一位置:所述深度图像对应引用的视频参数集、所述深度图像对应引用的序列参数集、所述深度图像对应引用的图像参数集、所述深度图像对应的条带头。
优选地,所述装置还包括:第一判断模块,用于判断所述编码过程所采用的编码方式;第一编码模块,用于如果判断结果指示在所述深度查找表序号域上对所述深度图像进行编码,则产生用于指示在所述深度查找表序号域上对所述深度图像进行编码的标志位,并且选择对所述深度查找表序号域数据进行编码;第二编码模块,用于如果判断结果指示在所述深度值域上对所述深度图像进行编码,则产生用于指示在所述深度值域上对所述深度图像进行编码的标志位,并且选择对所述深度值域数据进行编码。
优选地,所述第一编码模块还用于选择使用所述深度查找表序号域数据构造所述深度图像中的编码块的预测值。
优选地,所述第二编码模块还用于选择使用所述深度值域数据构造所述深度图像中编码块的预测值。
优选地,所述装置还包括:第二判断模块,用于对于所述深度图像中的所述编码块,判断所述编码块的预测模式是否在预设预测模式集中,在判断结果为是时,选择对所述编码块的深度查找表序号域数据进行编码;否则,选择对所述编码块的深度值域数据进行编码,其中,所述预设预测模式集包括:允许使用所述深度查找表序号域数据进行编码的预测模式。
优选地,所述装置还包括:第三判断模块,用于判断所述条带的条带类型是否在预设条带类型集中,其中,该预设条带类型集包括:需要传输标志位的条带类型;其中,在判断结果为是时,将所述标志位写入所述条带头中;否则,不写入所述条带头。
根据本发明的另一个方面,还提供了一种深度图像的解码处理装置,包括:获取模块,用于从码流中的以下之一位置获取用于指示解码过程所采用的解码方式的标志位:所述深度图像对应引用的视频参数集、所述深度图像对应引用的序列参数集、所述深度图像对应引用的图像参数集、所述深度图像对应的条带头,其中,所述解码方式包括:使用深度查找表对所述深度图像在所述深度查找表序号域进行解码和/或直接对所述深度图像在深度值域进行解码;解码模块,用于按照所述标志位指示的解码方式对所述深度图像进行解码。
优选地,所述装置还包括:第一判断模块,用于判断所述解码过程所采用的解码方式;第一解码模块,用于如果判断结果指示在所述深度查找表序号域上对所述深度图像进行解码,则产生用于指示在所述深度查找表序号域上对所述深度图像进行解码的标志位,并且选择对所述深度查找表序号域数据进行解码;第二解码模块,用于如果判断结果指示在所述深度值域上对所述深度图像进行解码,则产生用于指示在所述深度值域上对所述深度图像进行解码的标志位,并且选择对所述深度值域数据进行解码。
优选地,所述第一解码模块还用于选择使用所述深度查找表序号域数据构造所述深度图像中的解码块的预测值。
优选地,所述第二解码模块还用于选择使用所述深度值域数据构造所述深度图像中解码块的预测值。
优选地,所述装置还包括:第二判断模块,用于对于所述深度图像中的所述解码块,判断所述解码块的预测模式是否在预设预测模式集中,在判断结果为是时,选择对所述深度查找表序号域数据据构造所述解码块的预测值;否则,选择对所述深度值域数据构造所述解码块的预测值,其中,所述预设预测模式集包括:允许使用所述深度查找表序号域数据进行解码的预测模式。
优选地,所述装置还包括:第三判断模块,用于判断所述条带头所指示的条带类型是否在预设条带类型集中,其中,该预设条带类型集包括:包含有所述标志位对应比特字段的条带类型;其中,在判断结果为是时,从所述条带头中获取所述标识位;否则,将所述标志位设置为默认值。
本发明优选实施例针对现有技术的不足,提出了一种基于深度查找表的深度图像的编解码方法及装置。
本发明优选实施例通过分析深度查找表的特性,发现对于同一帧图像来讲,若图像中出现的大多数深度值都被包含在深度查找表中,那么深度查找表可以较好的提高该帧编码效率,反之,若图像中出现的深度值中有很多不在深度查找表中,那么深度查找表对于提高该帧编码效率并没有太大的作用。
本发明优选实施例的主要思想是对于每个序列、每个帧或者每个条带,只需要传输一个标志位来表示是否在深度查找表序号域上进行编码即可,这样既减少了传输标志位的开销,提高了编码效率,又使得编码端只需要在序列级、帧级或者条带级决定是否对当前序列、当前帧或者当前条带在深度查找表序号域上进行编码即可,减少了编码端的复杂度。
本发明优选实施例还通过对可以在深度查找表序号域上进行编码的预测模式进行了限制,通过只允许某些更适合在深度查找表序号域上进行编码的预测模式在深度查找表序号域上进行编码,提高了编码效率。
本发明优选实施例的第一目的在于提供一种基于深度查找表的深度图像编码方法,其包括以下步骤:
步骤1、判断是在深度查找表序号域上还是在深度值域上对所述深度图像进行编码;
步骤2、若在深度查找表序号域上对所述深度图像进行编码,则产生表示在深度查找表序号域上对所述深度图像进行编码的标志位F,并且选择深度查找表序号域数据送入编码模块;若在深度值域上对所述深度图像进行编码,则产生表示在深度值域上对所述深度图像进行编码的标志位F,并且选择深度值域数据送入编码模块;
步骤3、将所述标志位F写入码流;所述标志位F在码流中的位置为以下之一种:
(1)深度图像对应的视频参数集中;
(2)深度图像对应的序列参数集中;
(3)深度图像对应的图像参数集中;
(4)深度图像对应的条带头中。
作为优选,所述步骤2中,若在深度查找表序号域上对所述深度图像进行编码,则对于深度图像的每个块,若该块的预测模式在编解码端事先约定好的允许在深度查找表序号域上进行编码的预测模式集中,则选择深度查找表序号域数据送入编码模块,否则选择深度值域数据送入编码模块。
作为优选,所述步骤3中,若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在编解码端事先约定好的需要传输标志位F的条带类型集中时,才在码流中写入所述标志位F,否则不在码流中写入所述标志位F。
本发明优选实施例第二目的在于提供一种基于深度查找表的深度图像解码方法,其包括以下步骤:
步骤1、从码流中获取表示是在深度查找表序号域上还是在深度值域上对所述深度图像进行解码的标志位F;所述标志位F在码流中的位置为以下之一种:
(1)深度图像对应的视频参数集中;
(2)深度图像对应的序列参数集中;
(3)深度图像对应的图像参数集中;
(4)深度图像对应的条带头中;
步骤2、若所述标志位F表示在深度查找表序号域上对所述深度图像进行解码,则选择深度查找表序号域数据送入解码模块;若所述标志位F表示在深度值域上对所述深度图像进行解码,则选择深度值域数据送入解码模块。
作为优选,所述步骤2中,若标志位F表示在深度查找表序号域上对所述深度图像进行解码,则对于深度图像的每一个块,若该块的预测模式在编解码端事先约定好的允许在深度查找表序号域上进行解码的预测模式集中,则选择深度查找表序号域数据送入解码模块,否则选择深度值域数据送入解码模块。
作为优选,所述步骤1中,若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在编解码端事先约定好的需要传输标志位F的条带类型集中时,才从码流中获取所述标志位F,否则将所述标志位F设置为约定好的默认值。
本发明优选实施例第三目的在于提供一种基于深度查找表的深度图像码流,包括表示是在深度查找表序号域上还是在深度值域上对所述深度图像进行编码的标志位F,所述标志位F在码流中的位置为以下之一种:
(1)深度图像对应的视频参数集中;
(2)深度图像对应的序列参数集中;
(3)深度图像对应的图像参数集中;
(4)深度图像对应的条带头中。
作为优选,若所述标志位F在码流中的位置为在深度图像对应的条带头中,则只有当该条带类型在编解码端事先约定好的需要传输标志位F的条带类型集中时,该条带的码流中才包含所述标志位F,否则不包含所述标志位F。
本发明优选实施例第四目的在于提供一种基于深度查找表的深度图像的编码装置,它包括:
模式判断模块:判断是在深度查找表序号域上还是在深度值域上对所述深度图像进行编码;
标志位产生模块:若在深度查找表序号域上对所述深度图像进行编码,则产生表示在深度查找表序号域上对所述深度图像进行编码的标志位F;若在深度值域上对所述深度图像进行编码,则产生表示在深度值域上对所述深度图像进行编码的标志位F;
数据选择模块:若在深度查找表序号域上对所述深度图像进行编码,则选择深度查找表序号域数据送入编码模块;若在深度值域上对所述深度图像进行编码,则选择深度值域数据送入编码模块;
码流写入模块:将所述标志位F写入码流,其中所述标志位F在码流中的位置为以下之一种:
(1)深度图像对应的视频参数集中;
(2)深度图像对应的序列参数集中;
(3)深度图像对应的图像参数集中;
(4)深度图像对应的条带头中。
作为优选,所述数据选择模块中,若在深度查找表序号域上对所述深度图像进行编码,则对于深度图像的每个块,若该块的预测模式在编解码端事先约定好的允许在深度查找表序号域上进行编码的预测模式集中,则选择深度查找表序号域数据送入编码模块,否则选择深度值域数据送入编码模块。
作为优选,所述码流写入模块中,若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在编解码端事先约定好的需要传输标志位F的条带类型集中时,才在码流中写入所述标志位F,否则不在码流中写入所述标志位F。
本发明优选实施例第五目的在于提供一种基于深度查找表的深度图像的解码装置,它包括:
标志位获取模块:从码流中获取表示是在深度查找表序号域上还是在深度值域上对所述深度图像进行解码的标志位F;所述标志位F在码流中的位置包括以下几种:
(1)深度图像对应的视频参数集中;
(2)深度图像对应的序列参数集中;
(3)深度图像对应的图像参数集中;
(4)深度图像对应的条带头中;
数据选择模块:若所述标志位F表示在深度查找表序号域上对所述深度图像进行解码,则选择深度查找表序号域数据送入解码模块;若所述标志位F表示在深度值域上对所述深度图像进行解码,则选择深度值域数据送入解码模块。
作为优选,所述数据选择模块中,若标志位F表示在深度查找表序号域上对所述深度图像进行解码,则对于深度图像的每一个块,若该块的预测模式在编解码端事先约定好的允许在深度查找表序号域上进行解码的预测模式集中,则选择深度查找表序号域数据送入解码模块,否则选择深度值域数据送入解码模块。
作为优选,所述标志位获取模块中,若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在编解码端事先约定好的需要传输标志位F的条带类型集中时,才从码流中获取所述标志位F,否则将所述标志位F设置为约定好的默认值。
本发明优选实施例的有益效果如下:
(1)本发明优选实施例通过对于每个序列、每个帧或者每个条带传输一个标志位来表示是否在深度查找表序号域上进行编码,既减少了传输标志位的开销,又在深度查找表可以提高编码效率时更多地利用了深度查找表,从而提高了编码效率。
(2)通过本发明优选实施例的提出的编码方法和装置,编码端只需要在序列级、帧级或者条带级决定是否对当前序列、当前帧或者当前条带在深度查找表序号域上进行编码即可,减少了编码端的复杂度。
(3)本发明优选实施例通过对可以在深度查找表序号域上进行编码的预测模式进行了限制,通过只允许某些预测模式在深度查找表序号域上进行编码,提高了编码效率。
通过本发明,确定在对深度图像进行编码过程中所采用的编码方式的标志位,编码方式包括:使用深度查找表对深度图像在所述深度查找表序号域进行编码和/或不使用深度查找表而直接对深度图像在深度值域进行编码;将标志位写入码流中的以下之一位置:深度图像对应引用的视频参数集、深度图像对应引用的序列参数集、深度图像对应引用的图像参数集、深度图像对应的条带头。。解决了现有技术中在每一个块中都传输一个标识位导致的开销较大,编解码效率较低的问题,进而减少了传输标志位的开销,提高了编解码效率。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的深度图像的编码处理方法的流程图;
图2是根据本发明实施例的深度图像的编码处理装置的结构框图;
图3是根据本发明实施例的深度图像的编码处理装置的结构框图一;
图4是根据本发明实施例的深度图像的编码处理装置的结构框图二;
图5是根据本发明实施例的深度图像的编码处理装置的结构框图三;
图6是根据本发明实施例的深度图像的解码处理方法的流程图;
图7是根据本发明实施例的深度图像的解码处理装置的结构框图;
图8是根据本发明实施例的深度图像的解码处理装置的结构框图一;
图9是根据本发明实施例的深度图像的解码处理装置的结构框图二;
图10是根据本发明实施例的深度图像的解码处理装置的结构框图三;
图11为基于深度查找表的深度图像的编码装置的一种优选结构示意图;
图12为基于深度查找表的深度图像的编码装置的一种优选结构示意图一;
图13为本实施例基于深度查找表的深度图像的解码装置的一种优选结构示意图;
图14为本实施例基于深度查找表的深度图像的解码装置的一种优选结构示意图一。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
在本实施例中提供了一种深度图像的编码处理方法,图1是根据本发明实施例的深度图像的编码处理方法的流程图,如图1所示,该流程包括如下步骤:
步骤S102,确定在对深度图像进行编码过程中所采用的编码方式的标志位,该编码方式包括:使用深度查找表对深度图像在深度查找表序号域进行编码和/或直接对深度图像在深度值域进行编码(即不使用深度查找表进行编码而对深度图像在深度值域进行编码);
步骤S104,将标志位写入码流中的以下之一位置:深度图像对应引用的视频参数集、深度图像对应引用的序列参数集、深度图像对应引用的图像参数集、深度图像对应的条带头。
通过上述步骤,将选择在深度查找表序号域进行编码和/或在深度值域进行编码的编码方式的标志位写入深度图像对应引用的视频参数集、深度图像对应引用的序列参数集、深度图像对应引用的图像参数集、深度图像对应的条带头之一中,相对于现有技术中在每一个块中都传输一个标识位导致的开销较大,编码效率较低的问题,通过上述步骤,减少了传输标志位的开销,提高了编码效率。
上述步骤S102中涉及到获取标识位,需要说明的是获取标识位的方式可以有很多种,在一个优选实施例中,获取用于指示对深度图像进行编码所采用的编码方式的标志位包括:判断编码过程所采用的编码方式,如果判断结果指示在该深度查找表序号域上对深度图像进行编码,则产生用于指示在深度查找表序号域上对深度图像进行编码的标志位,并且选择对深度查找表序号域数据进行编码,在另一优选实施例中,如果判断结果指示在深度值域上对深度图像进行编码,则产生用于指示在深度值域上对深度图像进行编码的标志位,并且选择对深度值域数据进行编码。从而通过对标识位的设置,可以灵活选择是对深度查找表序号域数据进行编码还是对深度值域数据进行编码。
在一个优选实施例中,当选择对深度查找表序号域数据进行编码时,选择使用深度查找表序号域数据构造深度图像中的编码块的预测值。在另一个优选实施例中,可以采用以下方式选择对深度值域数据进行编码,包括:选择使用深度值域数据构造深度图像中编码块的预测值。从而通过构造的预测值对深度查找表序号域数据进行编码或者对深度值域数据进行编码。
为了提高深度图像的编码速率,在一个优选实施例中,选择对深度查找表序号域数据进行编码之前,对于深度图像的编码块,判断编码块的预测模式是否在预设预测模式集中,在判断结果为是时,选择对深度查找表序号域数据进行编码,否则,选择对深度值域数据进行编码,其中,预设预测模式集包括:允许使用深度查找表序号域数据进行编码的预测模式。由于有些预测模块并不适合在深度查找表序号域上进行编码,通过该优选实施例,降低了对深度图像的编码复杂度。其中,图像块简称为块或者编码单元。
在一个优选实施例中,将标志位写入深度图像的条带头中之前,判断条带头所指示的条带类型是否在预设条带类型集中,其中,预设条带类型集包括:需要传输标志位的条带类型;其中,在判断结果为是时,将标志位写入该条带头中;否则,不写入条带头。
在本实施例中还提供了一种深度图像的编码处理装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图2是根据本发明实施例的深度图像的编码处理装置的结构框图,如图2所示,该装置包括:确定模块22,用于确定在对深度图像进行编码过程中用于指示编码过程所采用的编码方式的标志位,该编码方式包括:使用深度查找表对深度图像在深度查找表序号域进行编码和/或不使用深度查找表而直接对所述深度图像在深度值域进行编码;写入模块24,用于将标志位写入码流中的以下之一位置:深度图像对应引用的视频参数集、深度图像对应引用的序列参数集、深度图像对应引用的图像参数集、深度图像对应的条带头。
图3是根据本发明实施例的深度图像的编码处理装置的结构框图一,如图3所示,该装置还包括:第一判断模块26,用于判断该编码过程所采用的编码方式;第一编码模块28,用于如果判断结果指示在深度查找表序号域上对深度图像进行编码,则产生用于指示在深度查找表序号域上对深度图像进行编码的标志位,并且选择对深度查找表序号域数据进行编码;第二编码模块30,用于如果判断结果指示在深度值域上对深度图像进行编码,则产生用于指示在深度值域上对深度图像进行编码的标志位,并且选择对深度值域数据进行编码。
优选地,第一编码模块28还用于选择使用深度查找表序号域数据构造深度图像中的编码块的预测值。
优选地,第二编码模块30还用于选择使用深度值域数据构造深度图像中编码块的预测值。
图4是根据本发明实施例的深度图像的编码处理装置的结构框图二,如图4所示,该装置还包括:第二判断模块32,用于对于深度图像的编码块,判断编码块的预测模式是否在预设预测模式集中,在判断结果为是时,选择对深度查找表序号域数据进行编码;否则,选择对深度值域数据进行编码,其中,预设预测模式集包括:允许使用深度查找表序号域上进行编码的预测模式。
图5是根据本发明实施例的深度图像的编码处理装置的结构框图三,如图5所示,该装置还包括:第三判断模块34,用于判断条带头所指示的条带类型是否在预设条带类型集中,其中,预设条带类型集包括:需要传输标志位的条带类型;其中,在判断结果为是时,将标志位写入该条带头中;否则,不写入条带头。
在另一个实施例中提供了一种深度图像的解码处理方法,图6是根据本发明实施例的深度图像的解码处理方法的流程图,如图6所示,该流程包括如下步骤:
步骤S602,解析码流,从码流中的以下之一位置获取用于指示解码过程所采用的解码方式的标志位:深度图像对应引用的视频参数集、深度图像对应引用的序列参数集、深度图像对应引用的图像参数集、深度图像对应的条带头,其中,解码方式包括:使用深度查找表对深度图像在深度查找表序号域进行解码和/或不使用深度查找表而直接对深度图像在深度值域进行解码;步骤S604,按照标志位指示的解码方式对深度图像进行解码。
通过上述步骤,解码端在深度图像对应引用的视频参数集、深度图像对应引用的序列参数集、深度图像对应引用的图像参数集、深度图像对应的条带头之一的深度图像码流中获取表示解码方式的标识位,相对于现有技术中在每一个块中都传输一个标识位导致的开销较大,解码效率较低的问题,通过上述步骤,减少了传输标志位的开销,提高了解码效率。
上述步骤S604涉及到对深度图像进行解码,需要说明的是,对深度图像进行解码的方式可以有很多种,在一个优选实施例中,在深度查找表序号域进行解码和/或在深度值域进行解码包括:判断解码过程所采用的解码方式,如果判断结果指示在深度查找表序号域上对该深度图像进行解码,则产生用于指示在深度查找表序号域上对深度图像进行解码的标志位,并且选择对深度查找表序号域数据进行解码;如果判断结果指示在深度值域上对深度图像进行解码,则产生用于指示在深度值域上对深度图像进行解码的标志位,并且选择对深度值域数据进行解码。从而通过标识位,可以灵活选择是对深度查找表序号域数据进行解码还是对深度值域数据进行解码。
在一个优选实施例中,选择对深度查找表序号域数据进行解码时,选择使用深度查找表序号域数据构造所述深度图像中的解码块的预测值。在另一个优选实施例中,选择对深度值域数据进行解码时,选择使用深度值域数据构造深度图像中解码块的预测值。从而通过构造的预测值对深度查找表序号域数据进行解码或者对深度值域数据进行解码。
为了提高深度图像的解码速率,在一个优选实施例中,选择对深度查找表序号域数据进行解码之前,对于深度图像的解码块,判断解码块的预测模式是否在预设预测模式集中,在判断结果为是时,选择使用深度查找表序号域数据构造解码块的预测值;否则,选择使用深度值域数据构造解码块的预测值,其中,预设预测模式集包括:允许使用深度查找表序号域数据进行解码的预测模式。
在另一优选实施例中,标志位在深度图像的条带头中包括:判断条带头所指示的条带类型是否在预设条带类型集中,其中,预设条带类型集包括:需要传输标志位的条带类型;其中,在判断结果为是时,从条带头中获取该标识位;否则,将标志位设置为默认值。
在本实施例中还提供了一种深度图像的解码处理装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图7是根据本发明实施例的深度图像的解码处理装置的结构框图,如图7所示,该装置包括:获取模块72,用于从码流中的以下之一位置获取用于指示解码过程所采用的解码方式的标志位:深度图像对应引用的视频参数集、深度图像对应引用的序列参数集、深度图像对应引用的图像参数集、深度图像对应的条带头,其中,解码方式包括:使用深度查找表对深度图像在深度查找表序号域进行解码和/或不使用深度查找表而直接对深度图像在深度值域进行解码;解码模块74,用于按照该标志位指示的解码方式对该深度图像进行解码。
图8是根据本发明实施例的深度图像的解码处理装置的结构框图一,如图8所示,该装置还包括:第一判断模块76,用于判断解码过程所采用的解码方式;第一解码模块78,用于如果判断结果指示在深度查找表序号域上对该深度图像进行解码,则产生用于指示在深度查找表序号域上对深度图像进行解码的标志位,并且选择对深度查找表序号域数据进行解码;第二解码模块80,用于如果判断结果指示在深度值域上对深度图像进行解码,则产生用于指示在深度值域上对深度图像进行解码的标志位,并且选择对深度值域数据进行解码。
优选地,第一解码模块78还用于选择使用深度查找表序号域数据构造深度图像中的解码块的预测值。
优选地,第二解码模块80还用于选择使用深度值域数据构造深度图像中解码块的预测值。
图9是根据本发明实施例的深度图像的解码处理装置的结构框图二,如图9所示,该装置还包括:第二判断模块82,用于对于该深度图像的解码块,判断解码块的预测模式是否在预设预测模式集中,在判断结果为是时,选择对深度查找表序号域数据据构造解码块的预测值;否则,选择对深度值域数据构造解码块的预测值,其中,预设预测模式集包括:允许使用深度查找表序号域数据进行解码的预测模式。
图10是根据本发明实施例的深度图像的解码处理装置的结构框图三,如图10所示,该装置还包括:第三判断模块84,用于判断条带头所指示的条带类型是否在预设条带类型集中,其中,该预设条带类型集包括:包含有标志位对应比特字段的条带类型;其中,在判断结果为是时,从条带头中获取所述标识位;否则,将标志位设置为默认值。
针对相关技术中所存在的上述问题,下面结合优选实施例进行说明,本优选实施例结合了上述实施例及其优选实施方式。
本发明具体实施方式中,深度查找表举例为下表所示的情况:
深度查找表序号 深度值
0 20
1 23
2 50
3 57
4 100
5 111
深度查找表还有很多的其他的可能,如序号的总个数可以在0-255之间,对应的深度值也可以有所不同,在此不一一赘述。
实施例1
本发明实施例提供了一种优选的基于深度查找表的深度图像编码方法。
本实施例提供的基于深度查找表的深度图像编码方法至少包括以下步骤:
步骤1、判断是在深度查找表序号域上还是在深度值域上对所述深度图像进行编码;
编码时,判断是否在深度查找表序号域上对所述深度图像进行编码,可以对于每个序列只进行一次,也可以对于序列的每一帧或者每一个条带进行一次。判断的准则也可以有很多,如可以根据深度图像中出现的不同的深度值的数量来判断,如果数量小于一个阈值,则在深度查找表序号域上对所述深度图像进行编码,否则在深度值域上对所述深度图像进行编码;又如可以根据深度图像中出现的所有深度值的种类在深度查找表中的数量与深度图像中出现的所有深度值的种类数之比来判断,如果这个比例大于一个阈值则在深度查找表序号域上对所述深度图像进行编码,否则在深度值域上对所述深度图像进行编码;又如可以根据深度图像中所有像素点的深度值中在深度查找表中的数量与深度图像中所有像素点的数量的比例来判断,如果比例大于一个阈值则在深度查找表序号域上对所述深度图像进行编码,否则在深度值域上对所述深度图像进行编码。也可以根据条带类型来判断,如条带类型为帧内预测条带时在深度查找表序号域上对所述深度图像进行编码,否则在深度值域上对所述深度图像进行编码。甚至可以根据应用场景的不同来判断。
由于步骤2中根据步骤1中的判断结果产生的标志位F会在码流中进行传输,因此编解码端无需统一判断标准,编码时可以任意选择判断标准。
步骤2、若在深度查找表序号域上对所述深度图像进行编码,则产生表示在深度查找表序号域上对所述深度图像进行编码的标志位F,并且选择深度查找表序号域数据送入编码模块;若在深度值域上对所述深度图像进行编码,则产生表示在深度值域上对所述深度图像进行编码的标志位F,并且选择深度值域数据送入编码模块;
下面将对一个深度图像块的操作进行详细说明,对其他深度块,操作是相同的。并且假设该图像块大小为4*4,即该块宽和高均为4个像素,对其他大小的图像块,操作是相同的。
下面的说明中,R表示所述深度图像的残差图像块,X表示所述深度图像的原始图像块,P表示深度图像的预测图像块,DLT()为从像素值域向深度查找表序号域的映射。
假设原始图像块X的深度值为:
23 23 50 57
23 50 50 57
23 50 50 57
23 50 57 57
且该图像块的预测图像块P的深度值为:
50 50 50 57
50 50 50 57
50 50 50 57
50 50 50 57
将原始图像块中的每一个像素值映射到查找表序号域上,则得到深度查找表序号域上的原始图像块DLT(X)为:
1 1 2 3
1 2 2 3
1 2 2 3
1 2 3 3
同理将预测图像块中的每一个像素值映射到查找表序号域上,得到深度查找表序号域上的预测图像块DLT(P)为:
2 2 2 3
2 2 2 3
2 2 2 3
2 2 2 3
则深度值域上的原始图像块X和预测图像块P称为深度值域数据,深度查找表序号域上的原始图像块DLT(X)和深度查找表序号域上的预测图像块DLT(P)称为深度查找表序号域数据。
因此,若在深度查找表序号域上对所述深度图像进行编码,则产生表示在深度查找表序号域上对所述深度图像进行编码的标志位F,例如产生F=1,并且选择深度查找表序号域数据,即深度查找表序号域上的原始图像块DLT(X)和深度查找表序号域上的预测图像块DLT(P),送入编码模块;若在深度值域上对所述深度图像进行编码,则产生表示在深度值域上对所述深度图像进行编码的标志位F,例如产生F=0,并且选择深度值域数据,即原始图像块X和预测图像块P,送入编码模块。
编码模块中根据原始图像块和预测图像块产生残差图像块并进行变化操作、量化操作从而进行编码的方法在背景技术中已有介绍,在此不再重复。
步骤3、将所述标志位F写入码流;所述标志位F在码流中的位置为以下之一种:
(1)深度图像对应的视频参数集中;
(2)深度图像对应的序列参数集中;
(3)深度图像对应的图像参数集中;
(4)深度图像对应的条带头中。
优选的,所述步骤2中,若在深度查找表序号域上对所述深度图像进行编码,则对于深度图像的每个块,若该块的预测模式在编解码端事先约定好的允许在深度查找表序号域上进行编码的预测模式集中,则选择深度查找表序号域数据送入编码模块,否则选择深度值域数据送入编码模块。
例如,假设所有预测模式构成了一个预测模式集合,称该预测模式集合为U,可以将预测模式集合U分为两个预测模式子集,其中一个预测模式子集为允许在深度查找表序号域上进行编码的预测模式集,记为A,另一个子集为不允许在深度查找表序号域上进行编码的预测模式集,记为B,且A和B的并集就是预测模式集合U。若在深度查找表序号域上对所述深度图像进行编码,则对于深度图像的每个块,若该块的预测模式在预测模式集A中,则选择深度查找表序号域数据送入编码模块,否则选择深度值域数据送入编码模块。
举一个更详细的例子:例如,假设可选的预测模式共有50种,分别编号为模式1至模式50,则模式1至模式50构成了预测模式集合U。假设规定只允许模式1至模式40这40种模式在深度查找表序号域上对所述深度图像块进行编码,那么模式1至模式40这40种模式构成的集合就是允许在深度查找表序号域上进行编码的预测模式集,记为A,模式41至模式50构成的集合就是不允许在深度查找表序号域上进行编码的预测模式集,记为B。若在深度查找表序号域上对所述深度图像进行编码,则对于深度图像的每个块,若该块的预测模式在预测模式集A中,即该块的预测模式为模式1至模式40这40种模式中的一个,则选择深度查找表序号域数据送入编码模块,否则选择深度值域数据送入编码模块。
允许在深度查找表序号域上进行编码的预测模式集应该事先约定好。
允许哪些预测模式在深度查找表序号域上进行编码可以通过统计分析得到,如进行大量的统计分析,统计每一种模式下,在深度查找表序号域上进行编码与在深度值域上进行编码的编码效率,若该模式在深度查找表序号域上进行编码时编码效率较高,则允许该模式在深度查找表序号域上进行编码。
允许哪些预测模式在深度查找表序号域上进行编码也可以通过数学推导得到,如对于每一种模式,推导其残差图像在深度查找表序号域上进行编码时与在深度值域上进行编码时的信息量,若该模式在深度查找表序号域上进行编码时信息量较少,则允许该模式在深度查找表序号域上进行编码。
除去统计分析和数学推导外,还可以有其他方法,在此不一一列举。
优选的,所述步骤3中,若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在编解码端事先约定好的需要传输标志位F的条带类型集中时,才在码流中写入所述标志位F,否则不在码流中写入所述标志位F。
例如,假设所有条带类型构成了一个条带类型集合,称该条带类型集合为V,可以将条带类型集合V分为两个条带类型子集,其中一个条带类型子集为需要传输标志位F的条带类型集,记为C,另一个条带类型子集为不需要传输标志位F的条带类型集,记为D,且C和D的并集就是条带类型集合V。若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在条带类型集C中,才在码流中写入所述标志位F,否则不在码流中写入所述标志位F。
举一个更详细的例子:例如,假设所有条带类型总共有三种:帧内预测条带、单向帧间预测条带和双向帧间预测条带,这三种条带构成了条带类型集合V。假设规定只有当条带类型为帧内预测条带或单向帧间预测条带时,才需要在码流中传输标志位F,则帧内预测条带和单向帧间预测条带构成的集合就是需要传输标志位F的条带类型集,记为C;双向帧间预测条带构成的集合就是不需要传输标志位F的条带类型集,记为D。若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在条带类型集C中,即该条带类型为帧内预测条带或单向帧间预测条带时,才在码流中写入所述标志位F,否则不在码流中写入所述标志位F。
需要传输标志位F的条带类型集应该事先约定好。
优选的,对于深度图像的每个块,若在深度查找表序号域上对所述深度图像块进行编码,则在编码所述深度图像块的残差图像块时,不对所述残差图像块进行变换操作。
实施例2
本发明实施例提供了一种优选的基于深度查找表的深度图像解码方法。
本实施例提供的基于深度查找表的深度图像解码方法过程至少包括以下步骤:
步骤1、从码流中获取表示是在深度查找表序号域上还是在深度值域上对所述深度图像进行解码的标志位F;所述标志位F在码流中的位置为以下之一种:
(1)深度图像对应的视频参数集中;
(2)深度图像对应的序列参数集中;
(3)深度图像对应的图像参数集中;
(4)深度图像对应的条带头中;
步骤2、若所述标志位F表示在深度查找表序号域上对所述深度图像进行解码,则选择深度查找表序号域数据送入解码模块;若所述标志位F表示在深度值域上对所述深度图像进行解码,则选择深度值域数据送入解码模块。
下面将对一个深度图像块的操作进行详细说明,对其他深度块,操作是相同的。并且假设该图像块大小为4*4,即该块宽和高均为4个像素,对其他大小的图像块,操作是相同的。
下面的说明中,R表示所述深度图像的残差图像块,R-1表示解码得到的残差图像R块经过变换、量化后的系数矩阵,P表示深度图像的预测图像块,DLT()为从像素值域向深度查找表序号域的映射。
假设预测图像块P的深度值为:
50 50 50 57
50 50 50 57
50 50 50 57
50 50 50 57
将预测图像块中的每一个像素值映射到查找表序号域上,得到深度查找表序号域上的预测图像块DLT(P)为:
2 2 2 3
2 2 2 3
2 2 2 3
2 2 2 3
同时假设解码得到的残差图像块R经过变换、量化后的系数矩阵为R-1。
则预测图像块P称为深度值域数据,深度查找表序号域上的预测图像块DLT(P)称为深度查找表序号域数据。R-1既可以为深度值域数据也可以为深度查找表序号域数据,这取决于所述标志位F的含义:若所述标志位F表示在深度查找表序号域上对所述深度图像进行解码,则R-1为深度查找表序号域数据,R-1表示的是深度查找表序号的差值经过变换、量化后的系数矩阵;若所述标志位F表示在深度值域上对所述深度图像进行解码,则R-1为深度值域数据,R-1表示的是深度值的差值经过变换、量化后的系数矩阵。
因此,若所述标志位F表示在深度查找表序号域上对所述深度图像进行解码,则选择深度查找表序号域数据,即深度查找表序号域上的预测图像块DLT(P)和系数矩阵R-1,送入解码模块;若所述标志位F表示在深度值域上对所述深度图像进行解码,则选择深度值域数据,即预测图像块P和系数矩阵R-1,送入解码模块。
解码模块中根据系数矩阵R-1进行反量化、反变换从而解码得到残差图像块,进而与预测图像块相加产生重建图像块,从而解码的方法在背景技术中已有介绍,在此不再重复。
优选的,所述步骤2中,若标志位F表示在深度查找表序号域上对所述深度图像进行解码,则对于深度图像的每一个块,若该块的预测模式在编解码端事先约定好的允许在深度查找表序号域上进行解码的预测模式集中,则选择深度查找表序号域数据送入解码模块,否则选择深度值域数据送入解码模块。
例如,假设所有预测模式构成了一个预测模式集合,称该预测模式集合为U,可以将预测模式集合U,分为两个预测模式子集,其中一个预测模式子集为允许在深度查找表序号域上进行解码的预测模式集,记为A,另一个子集为不允许在深度查找表序号域上进行解码的预测模式集,记为B,且A和B的并集就是预测模式集合U。若标志位F表示在深度查找表序号域上对所述深度图像进行解码,则对于深度图像的每个块,若该块的预测模式在预测模式集A中,则选择深度查找表序号域数据送入解码模块,否则选择深度值域数据送入解码模块。
举一个更详细的例子:假设将所有帧内预测模式作为模式集合U,且允许在深度查找表序号域上进行解码的预测模式为帧内预测模式中所有的方向性帧内预测模式,其余非方向性帧内预测模式不允许在深度查找表序号域上进行解码,即所有的方向性帧内预测模式构成了预测模式集A,其余非方向性帧内预测模式构成了预测模式集B,且A和B的并集就是模式集合U。则对于深度图像的每个块,若该块的预测模式在预测模式集A中,即该块的预测模式为方向性帧内预测模式,则选择深度查找表序号域数据送入解码模块,否则选择深度值域数据送入解码模块。
允许在深度查找表序号域上进行解码的预测模式集应该事先约定好。
允许哪些预测模式在深度查找表序号域上进行解码可以通过统计分析得到,也可以通过数学推导得到,在此不一一列举。
优选的,所述步骤1中,若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在编解码端事先约定好的需要传输标志位F的条带类型集中时,才从码流中获取所述标志位F,否则将所述标志位F设置为约定好的默认值。
例如,假设所有条带类型构成了一个条带类型集合,称该条带类型集合为V,可以将条带类型集合V分为两个条带类型子集,其中一个条带类型子集为需要传输标志位F的条带类型集,记为C,另一个条带类型子集为不需要传输标志位F的条带类型集,记为D,且C和D的并集就是条带类型集合V。若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在编解码端事先约定好的需要传输标志位F的条带类型集中时,才从码流中获取所述标志位F,否则将所述标志位F设置为约定好的默认值,可以默认为在深度查找表序号域上进行解码,也可以默认为在深度值域上进行解码,并且对不同的条带类型可以有不同的默认值,只要事先约定好即可。
举一个更详细的例子:例如,假设所有条带类型总共有三种:帧内预测条带、单向帧间预测条带和双向帧间预测条带,这三种条带构成了条带类型集合V。假设规定只有当条带类型为帧内预测条带时,才需要在码流中传输标志位F,则帧内预测条带构成的集合就是需要传输标志位F的条带类型集,记为C;单向帧间预测条带和双向帧间预测条带构成的集合就是不需要传输标志位F的条带类型集,记为D。若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在条带类型集C中,即该条带类型为帧内预测条带时,才从码流中获取所述标志位F,否则将所述标志位F设置为约定好的默认值,例如可以约定单向帧间预测条带的默认值为在深度查找表序号域上进行解码,约定双向帧间预测条带的默认值为在深度值域上进行解码。
需要传输标志位F的条带类型集和不需要传输标志位F的条带类型集对应的默认值应该事先约定好。
优选的,对于深度图像的每个块,若所述标志位F表示在深度查找表序号域上对所述深度图像块进行解码,则在解码得到所述深度图像块的残差图像块时,不进行反变换操作。
实施例3
本发明实施例提供了一种优选的基于深度查找表的深度图像码流。
所述视频序列码流包括:表示是在深度查找表序号域上还是在深度值域上对所述深度图像进行编码的标志位F,所述标志位F在码流中的位置包括以下几种:
(1)深度图像对应的视频参数集中;
(2)深度图像对应的序列参数集中;
(3)深度图像对应的图像参数集中;
(4)深度图像对应的条带头中。
优选的,若所述标志位F在码流中的位置为在深度图像对应的条带头中,则只有当该条带在编解码端事先约定好的需要传输标志位F的条带类型集中时,该条带的码流中才包含所述标志位F,否则不包含所述标志位F。
实施例4
本发明实施例提供了一种优选的基于深度查找表的深度图像的编码装置。图11为基于深度查找表的深度图像的编码装置的一种优选结构示意图。该装置包括四个模块:
1)模式判断模块:输入为所述深度图像和深度查找表,输出为判断结果,其完成的功能和实施方式与上述一种基于深度查找表的深度图像的编码方法中判断是在深度查找表序号域上还是在深度值域上对所述深度图像进行编码的功能和实施方式相同。
2)标志位产生模块,输入为所述模式判断模块输出的判断结果,输出为表示是否在深度查找表序号域上对所述深度图像进行编码的标志位F,其完成的功能和实施方式与上述一种基于深度查找表的深度图像的编码方法中产生标志位F的功能和实施方式相同。
3)数据选择模块,输入为所述深度图像的深度值域数据和深度查找表序号域数据、所述模式判断模块输出的判断结果,输出为所述深度图像的深度值域数据或是所述深度图像的深度查找表序号域数据,其完成的功能和实施方式与上述一种基于深度查找表的深度图像的编码方法中根据判断结果选择深度查找表序号域数据或深度值域数据送入编码模块的功能和实施方式相同。
4)码流写入模块:输入为所述标志位F,其完成的功能和实施方式与上述一种基于深度查找表的深度图像的编码方法中将所述标志位F写入码流的功能和实施方式相同。
优选的,所述码流写入模块中,若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在编解码端事先约定好的需要传输标志位F的条带类型集中时,才在码流中写入所述标志位F,否则不在码流中写入所述标志位F。
实施例5
本发明实施例提供了一种优选的基于深度查找表的深度图像的编码装置。图12为基于深度查找表的深度图像的编码装置的一种优选结构示意图一。该装置包括如下模块:
1)模式判断模块:输入为所述深度图像和深度查找表,输出为判断结果,其完成的功能和实施方式与上述一种基于深度查找表的深度图像的编码方法中判断是在深度查找表序号域上还是在深度值域上对所述深度图像进行编码的功能和实施方式相同。
2)标志位产生模块,输入为所述模式判断模块输出的判断结果,输出为表示是否在深度查找表序号域上对所述深度图像进行编码的标志位F,其完成的功能和实施方式与上述一种基于深度查找表的深度图像的编码方法中产生标志位F的功能和实施方式相同。
3)数据选择模块,输入为所述深度图像的深度值域数据和深度查找表序号域数据、所述模式判断模块输出的判断结果和图像块的预测模式信息,输出为所述深度图像的深度值域数据或是所述深度图像的深度查找表序号域数据,其完成的功能和实施方式与上述一种基于深度查找表的深度图像的编码方法中根据判断结果和图像块的预测模式信息选择深度查找表序号域数据或深度值域数据送入编码模块的功能和实施方式相同。
4)码流写入模块:输入为所述标志位F,其完成的功能和实施方式与上述一种基于深度查找表的深度图像的编码方法中将所述标志位F写入码流的功能和实施方式相同。
实施例6
本发明实施例提供了一种优选的基于深度查找表的深度图像的解码装置。图13为本实施例基于深度查找表的深度图像的解码装置的一种优选结构示意图。该装置包括三个模块:
1)标志位获取模块,输入为视频序列码流,输出为表示是在深度查找表序号域上还是在深度值域上对所述深度图像进行解码的标志位F,其完成的功能和实施方式与上述一种基于深度查找表的深度图像解码方法中从码流中获取表示是在深度查找表序号域上还是在深度值域上对所述深度图像进行解码的标志位F的功能和实施方式相同。
2)数据选择模块,输入为所述深度图像的深度值域数据和深度查找表序号域数据、所述标志位F,输出为所述深度图像的深度值域数据或是所述深度图像的深度查找表序号域数据,其完成的功能和实施方式与上述一种基于深度查找表的深度图像解码方法中根据所述标志位F选择深度查找表序号域数据或深度值域数据送入解码模块的功能和实施方式相同。
优选的,所述标志位获取模块中,若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在编解码端事先约定好的需要传输标志位F的条带类型集中时,才从码流中获取所述标志位F,否则将所述标志位F设置为约定好的默认值。
实施例7
本发明实施例提供了一种优选的基于深度查找表的深度图像的解码装置。图14为本实施例基于深度查找表的深度图像的解码装置的一种优选结构示意图一。该装置包括三个模块:
1)标志位获取模块,输入为视频序列码流,输出为表示是在深度查找表序号域上还是在深度值域上对所述深度图像进行解码的标志位F,其完成的功能和实施方式与上述一种基于深度查找表的深度图像解码方法中从码流中获取表示是在深度查找表序号域上还是在深度值域上对所述深度图像进行解码的标志位F的功能和实施方式相同。
2)数据选择模块,输入为所述深度图像的深度值域数据和深度查找表序号域数据、所述标志位F和图像块的预测模式信息,输出为所述深度图像的深度值域数据或是所述深度图像的深度查找表序号域数据,其完成的功能和实施方式与上述一种基于深度查找表的深度图像解码方法中根据所述标志位F和图像块的预测模式信息选择深度查找表序号域数据或深度值域数据送入解码模块的功能和实施方式相同。
值得注意的是,上述的基于深度查找表的深度图像的编码装置和解码装置可以由多种方式实现,例如:
方法一:以电子计算机为硬件附加与所述基于深度查找表的深度图像的编码方法和解码方法功能相同的软件程序来实现。
方法二:以单片机为硬件附加与所述基于深度查找表的深度图像的编码方法和解码方法功能相同的软件程序来实现。
方法三:以数字信号处理器为硬件附加与基于深度查找表的深度图像的编码方法和解码方法功能相同的软件程序来实现。
方法四:设计与所述基于深度查找表的深度图像的编码方法和解码方法功能相同的电路来实现。
上述四种实现所述的基于深度查找表的深度图像的编码装置和解码装置的方法仅是作为优选的实施方式进行说明,本发明不限于此。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (30)

1.一种深度图像的编码方法,其特征在于,包括:
确定在对深度图像进行编码过程中所采用的编码方式的标志位,所述编码方式包括:使用深度查找表对所述深度图像在所述深度查找表序号域进行编码和/或直接对所述深度图像在深度值域进行编码;
将所述标志位写入码流中的以下之一位置:所述深度图像对应引用的视频参数集、所述深度图像对应引用的序列参数集、所述深度图像对应引用的图像参数集、所述深度图像对应的条带头;
其中,确定用于指示对所述深度图像进行编码所采用的编码方式的所述标志位包括:判断所述编码过程所采用的编码方式;在判断结果指示在所述深度查找表序号域上对所述深度图像进行编码的情况下,产生用于指示在所述深度查找表序号域上对所述深度图像进行编码的标志位,并且选择对所述深度查找表序号域数据进行编码;
在选择对所述深度查找表序号域数据进行编码之前,还包括:判断所述深度图像的编码块的预测模式是否在预设预测模式集中,其中,所述预设预测模式集包括:允许使用所述深度查找表序号域数据进行编码的预测模式;在判断结果为在预设预测模式集中的情况下,选择对所述编码块的深度查找表序号域数据进行编码;在判断结果为不在所述预设预测模式集中的情况下,选择对所述编码块的深度值域数据进行编码。
2.根据权利要求1所述的方法,其特征在于,在判断结果指示在所述深度值域上对所述深度图像进行编码的情况下,产生用于指示在所述深度值域上对所述深度图像进行编码的标志位,并且选择对所述深度值域数据进行编码。
3.根据权利要求2所述的方法,其特征在于,选择对所述深度查找表序号域数据进行编码,包括:选择使用所述深度查找表序号域数据构造所述深度图像中的编码块的预测值。
4.根据权利要求2所述的方法,其特征在于,选择对所述深度值域数据进行编码,包括:选择使用所述深度值域数据构造所述深度图像中编码块的预测值。
5.根据权利要求1所述的方法,其特征在于,将所述标志位写入所述深度图像对应的条带头中,包括:
判断所述条带的条带类型是否在预设条带类型集中,其中,该预设条带类型集包括:需要传输标志位的条带类型;其中,在判断结果为是时,将所述标志位写入所述条带头中;否则,不写入所述条带头中。
6.一种深度图像的解码方法,其特征在于,包括:
解析码流,从码流中的以下之一位置获取用于指示解码过程所采用的解码方式的标志位:所述深度图像对应引用的视频参数集、所述深度图像对应引用的序列参数集、所述深度图像对应引用的图像参数集、所述深度图像对应的条带头,其中,所述解码方式包括:使用深度查找表对所述深度图像在所述深度查找表序号域进行解码和/或直接对所述深度图像在深度值域进行解码;
按照所述标志位指示的解码方式对所述深度图像进行解码;
其中,在所述深度查找表序号域进行解码和/或在所述深度值域进行解码,包括:判断所述解码过程所采用的解码方式;在判断结果指示在所述深度查找表序号域上对所述深度图像进行解码的情况下,产生用于指示在所述深度查找表序号域上对所述深度图像进行解码的标志位,并且选择对所述深度查找表序号域数据进行解码;
在选择对所述深度查找表序号域数据进行解码之前,还包括:判断所述解码块的预测模式是否在预设预测模式集中,其中,所述预设预测模式集包括:允许使用所述深度查找表序号域数据进行解码的预测模式;在判断结果为在所述预设预测模式集中的情况下,选择对所述深度查找表序号域数据进行解码;在判断结果为不在所述预设预测模式集中的情况下,选择使用所述深度值域数据进行解码。
7.根据权利要求6所述的方法,其特征在于,在判断结果指示在所述深度值域上对所述深度图像进行解码的情况下,则产生用于指示在所述深度值域上对所述深度图像进行解码的标志位,并且选择对所述深度值域数据进行解码。
8.根据权利要求7所述的方法,其特征在于,选择对所述深度查找表序号域数据进行解码,包括:选择使用所述深度查找表序号域数据构造所述深度图像中的解码块的预测值。
9.根据权利要求6所述的方法,其特征在于,选择使用所述深度值域数据进行解码包括:选择使用所述深度值域数据构造所述解码块的预测值。
10.根据权利要求7所述的方法,其特征在于,选择对所述深度值域数据进行解码,包括:选择使用所述深度值域数据构造所述深度图像中解码块的预测值。
11.根据权利要求6所述的方法,其特征在于,从码流中的所述条带头获取用于指示解码过程所采用的解码方式的标志位包括:
判断所述条带头所指示的条带类型是否在预设条带类型集中,其中,该预设条带类型集包括:包含有所述标志位对应比特字段的条带类型;其中,在判断结果为是时,从所述条带头中获取所述标识位;否则,将所述标志位设置为默认值。
12.一种深度图像的编码装置,其特征在于,包括:
第一判断模块,用于判断对深度图像进行编码过程中所采用的编码方式,其中,所述编码方式包括:使用深度查找表对所述深度图像在所述深度查找表序号域进行编码和/或不使用深度查找表而直接对所述深度图像在深度值域进行编码;
第一编码模块,用于在所述第一判断模块输出的判断结果指示在所述深度查找表序号域上对所述深度图像进行编码,则产生用于指示在所述深度查找表序号域上对所述深度图像进行编码的标志位,并且选择对所述深度查找表序号域数据进行编码;
第二判断模块,用于在选择对所述深度查找表序号域数据进行编码之前,对于所述深度图像中的所述编码块,判断所述编码块的预测模式是否在预设预测模式集中,其中,所述预设预测模式集包括:允许使用所述深度查找表序号域数据进行编码的预测模式,在判断结果为在所述预设预测模式集中的情况下,选择对所述编码块的深度查找表序号域数据进行编码;在判断结果为不在所述预设预测模式集中的情况下,选择对所述编码块的深度值域数据进行编码;
确定模块,用于确定所采用的编码方式的所述标志位;
写入模块,用于将所述标志位写入码流中的以下之一位置:所述深度图像对应引用的视频参数集、所述深度图像对应引用的序列参数集、所述深度图像对应引用的图像参数集、所述深度图像对应的条带头。
13.根据权利要求12所述的装置,其特征在于,所述装置还包括:
第二编码模块,用于在所述第一判断模块输出的判断结果指示在所述深度值域上对所述深度图像进行编码,则产生用于指示在所述深度值域上对所述深度图像进行编码的标志位,并且选择对所述深度值域数据进行编码。
14.根据权利要求12所述的装置,其特征在于,所述第一编码模块还用于选择使用所述深度查找表序号域数据构造所述深度图像中的编码块的预测值。
15.根据权利要求13所述的装置,其特征在于,所述第二编码模块还用于选择使用所述深度值域数据构造所述深度图像中编码块的预测值。
16.根据权利要求12所述的装置,其特征在于,所述装置还包括:
第三判断模块,用于判断所述条带的条带类型是否在预设条带类型集中,其中,该预设条带类型集包括:需要传输标志位的条带类型;其中,在判断结果为是时,将所述标志位写入所述条带头中;否则,不写入所述条带头。
17.一种深度图像的解码装置,其特征在于,包括:
获取模块,用于从码流中的以下之一位置获取用于指示解码过程所采用的解码方式的标志位:所述深度图像对应引用的视频参数集、所述深度图像对应引用的序列参数集、所述深度图像对应引用的图像参数集、所述深度图像对应的条带头,其中,所述解码方式包括:使用深度查找表对所述深度图像在所述深度查找表序号域进行解码和/或不使用深度查找表而直接对所述深度图像在深度值域进行解码;
解码模块,用于按照所述标志位指示的解码方式对所述深度图像进行解码;
第一判断模块,用于判断所述解码过程所采用的解码方式;
第一解码模块,用于在所述第一判断模块输出的判断结果指示在所述深度查找表序号域上对所述深度图像进行解码时,产生用于指示在所述深度查找表序号域上对所述深度图像进行解码的标志位,并且选择对所述深度查找表序号域数据进行解码;
第二判断模块,用于在选择对所述深度查找表序号域数据进行解码之前,对于所述深度图像中的所述解码块,判断所述解码块的预测模式是否在预设预测模式集中,其中,所述预设预测模式集包括:允许使用所述深度查找表序号域数据进行解码的预测模式,在判断结果为在所述预设预测模式集中的情况下,选择对所述深度查找表序号域数据进行解码;在判断结果为不在所述预设预测模式集中的情况下,选择对所述深度值域数据进行解码。
18.根据权利要求17所述的装置,其特征在于,所述装置还包括:
第二解码模块,用于在所述第一判断模块输出的判断结果指示在所述深度值域上对所述深度图像进行解码,则产生用于指示在所述深度值域上对所述深度图像进行解码的标志位,并且选择对所述深度值域数据进行解码。
19.根据权利要求18所述的装置,其特征在于,所述第一解码模块还用于选择使用所述深度查找表序号域数据构造所述深度图像中的解码块的预测值。
20.根据权利要求18所述的装置,其特征在于,所述第二解码模块还用于选择使用所述深度值域数据构造所述深度图像中解码块的预测值。
21.根据权利要求19所述的装置,其特征在于,所述装置还包括:
第二判断模块,还用于在判断结果为否的情况下,选择对所述深度值域数据构造所述解码块的预测值。
22.根据权利要求17所述的装置,其特征在于,所述装置还包括:
第三判断模块,用于判断所述条带头所指示的条带类型是否在预设条带类型集中,其中,该预设条带类型集包括:包含有标志位对应比特字段的条带类型;其中,在判断结果为是时,从所述条带头中获取所述标识位;否则,将所述标志位设置为默认值。
23.一种基于深度查找表的深度图像编码方法,其特征在于,包括以下步骤:
步骤1、判断是在深度查找表序号域上还是在深度值域上对所述深度图像进行编码;
步骤2、若在深度查找表序号域上对所述深度图像进行编码,则产生表示在深度查找表序号域上对所述深度图像进行编码的标志位F,并且选择深度查找表序号域数据送入编码模块;若在深度值域上对所述深度图像进行编码,则产生表示在深度值域上对所述深度图像进行编码的标志位F,并且选择深度值域数据送入编码模块;
步骤3、将所述标志位F写入码流;所述标志位F在码流中的位置为以下之一种:
(1)深度图像对应的视频参数集中;
(2)深度图像对应的序列参数集中;
(3)深度图像对应的图像参数集中;
(4)深度图像对应的条带头中;
其中,所述步骤2中,若在深度查找表序号域上对所述深度图像进行编码,则对于深度图像的每个块,若该块的预测模式在编解码端事先约定好的允许在深度查找表序号域上进行编码的预测模式集中,则选择深度查找表序号域数据送入编码模块,否则选择深度值域数据送入编码模块。
24.根据权利要求23的编码方法,其特征在于,所述步骤3中,若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在编解码端事先约定好的需要传输标志位F的条带类型集中时,才在码流中写入所述标志位F,否则不在码流中写入所述标志位F。
25.一种基于深度查找表的深度图像解码方法,其特征在于,包括以下步骤:
步骤1、从码流中获取表示是在深度查找表序号域上还是在深度值域上对所述深度图像进行解码的标志位F;所述标志位F在码流中的位置为以下之一种:
(1)深度图像对应的视频参数集中;
(2)深度图像对应的序列参数集中;
(3)深度图像对应的图像参数集中;
(4)深度图像对应的条带头中;
步骤2、若所述标志位F表示在深度查找表序号域上对所述深度图像进行解码,则选择深度查找表序号域数据送入解码模块;若所述标志位F表示在深度值域上对所述深度图像进行解码,则选择深度值域数据送入解码模块;
其中,所述步骤2中,若标志位F表示在深度查找表序号域上对所述深度图像进行解码,则对于深度图像的每一个块,若该块的预测模式在编解码端事先约定好的允许在深度查找表序号域上进行解码的预测模式集中,则选择深度查找表序号域数据送入解码模块,否则选择深度值域数据送入解码模块。
26.根据权利要求25的解码方法,其特征在于,所述步骤1中,若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在编解码端事先约定好的需要传输标志位F的条带类型集中时,才从码流中获取所述标志位F,否则将所述标志位F设置为约定好的默认值。
27.一种基于深度查找表的深度图像的编码装置,其特征在于,包括:
模式判断模块:判断是在深度查找表序号域上还是在深度值域上对所述深度图像进行编码;
标志位产生模块:若在深度查找表序号域上对所述深度图像进行编码,则产生表示在深度查找表序号域上对所述深度图像进行编码的标志位F;若在深度值域上对所述深度图像进行编码,则产生表示在深度值域上对所述深度图像进行编码的标志位F;
数据选择模块:若在深度查找表序号域上对所述深度图像进行编码,则选择深度查找表序号域数据送入编码模块;若在深度值域上对所述深度图像进行编码,则选择深度值域数据送入编码模块;
码流写入模块:将所述标志位F写入码流,其中所述标志位F在码流中的位置为以下之一种:
(1)深度图像对应的视频参数集中;
(2)深度图像对应的序列参数集中;
(3)深度图像对应的图像参数集中;
(4)深度图像对应的条带头中;
其中,所述数据选择模块中,若在深度查找表序号域上对所述深度图像进行编码,则对于深度图像的每个块,若该块的预测模式在编解码端事先约定好的允许在深度查找表序号域上进行编码的预测模式集中,则选择深度查找表序号域数据送入编码模块,否则选择深度值域数据送入编码模块。
28.根据权利要求27的编码装置,其特征在于,所述码流写入模块中,若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在编解码端事先约定好的需要传输标志位F的条带类型集中时,才在码流中写入所述标志位F,否则不在码流中写入所述标志位F。
29.一种基于深度查找表的深度图像的解码装置,其特征在于,它包括:
标志位获取模块:从码流中获取表示是在深度查找表序号域上还是在深度值域上对所述深度图像进行解码的标志位F;所述标志位F在码流中的位置包括以下几种:
(1)深度图像对应的视频参数集中;
(2)深度图像对应的序列参数集中;
(3)深度图像对应的图像参数集中;
(4)深度图像对应的条带头中;
数据选择模块:若所述标志位F表示在深度查找表序号域上对所述深度图像进行解码,则选择深度查找表序号域数据送入解码模块;若所述标志位F表示在深度值域上对所述深度图像进行解码,则选择深度值域数据送入解码模块;
其中,若标志位F表示在深度查找表序号域上对所述深度图像进行解码,则对于深度图像的每一个块,若该块的预测模式在编解码端事先约定好的允许在深度查找表序号域上进行解码的预测模式集中,则选择深度查找表序号域数据送入解码模块,否则选择深度值域数据送入解码模块。
30.根据权利要求29的解码装置,其特征在于,所述标志位获取模块中,若所述标志位F在码流中的位置为深度图像对应的条带头中,则只有当该条带类型在编解码端事先约定好的需要传输标志位F的条带类型集中时,才从码流中获取所述标志位F,否则将所述标志位F设置为约定好的默认值。
CN201410538418.8A 2013-10-18 2014-10-13 深度图像的编码、解码处理方法及装置 Active CN104581184B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201410538418.8A CN104581184B (zh) 2013-10-18 2014-10-13 深度图像的编码、解码处理方法及装置
PCT/CN2014/088860 WO2015055146A1 (zh) 2013-10-18 2014-10-17 深度图像的编码、解码处理方法及装置

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN2013104951603 2013-10-18
CN201310495160 2013-10-18
CN201410538418.8A CN104581184B (zh) 2013-10-18 2014-10-13 深度图像的编码、解码处理方法及装置

Publications (2)

Publication Number Publication Date
CN104581184A CN104581184A (zh) 2015-04-29
CN104581184B true CN104581184B (zh) 2018-05-01

Family

ID=52827685

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410538418.8A Active CN104581184B (zh) 2013-10-18 2014-10-13 深度图像的编码、解码处理方法及装置

Country Status (2)

Country Link
CN (1) CN104581184B (zh)
WO (1) WO2015055146A1 (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101605255A (zh) * 2008-06-12 2009-12-16 华为技术有限公司 一种视频编解码的方法及装置
CN103237214A (zh) * 2013-04-12 2013-08-07 华为技术有限公司 深度图像的编解码方法和编解码装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5270592B2 (ja) * 2010-02-23 2013-08-21 日本電信電話株式会社 画像符号化装置,画像符号化方法および画像符号化プログラム
CN103237216B (zh) * 2013-04-12 2017-09-12 华为技术有限公司 深度图像的编解码方法和编解码装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101605255A (zh) * 2008-06-12 2009-12-16 华为技术有限公司 一种视频编解码的方法及装置
CN103237214A (zh) * 2013-04-12 2013-08-07 华为技术有限公司 深度图像的编解码方法和编解码装置

Also Published As

Publication number Publication date
CN104581184A (zh) 2015-04-29
WO2015055146A1 (zh) 2015-04-23

Similar Documents

Publication Publication Date Title
CN106105228B (zh) 一种处理视频数据的方法、装置及计算机可读介质
CN106105229B (zh) 使用调色板编码来编码视频数据的块的方法及装置
CN106658019B (zh) 参考帧编解码的方法与装置
CN103797800B (zh) 推导参考模式值以及编码和解码表示预测模式的信息
CN110024392A (zh) 用于视频译码的低复杂度符号预测
CN103688543B (zh) 进行图像编码和解码的设备和方法
CN110024398A (zh) 针对屏幕远程处理场景的局部的基于散列的运动估计
CN105981389B (zh) 图像编码装置、图像解码装置、编码流变换装置、图像编码方法以及图像解码方法
CN106412579B (zh) 一种图像的编码、解码方法和装置
CN107925763A (zh) 等级分割中的块级别变换选择和隐式信令的编码变换方法和设备
CN108353177A (zh) 在显示流压缩dsc中用于降低切片边界视觉假象的系统及方法
CN107211139A (zh) 用于调色板译码的译码转义像素
CN108141605A (zh) 帧内块复制合并模式及不可用帧内块复制参考区域的填充
CN104429067B (zh) 通过预测当前块的划分进行视频编码的方法、解码方法、编码和解码装置及其相应的介质
CN102598663A (zh) 通过使用旋转变换对图像编码和解码的方法和设备
CN108028926A (zh) 图像编码装置、图像解码装置、和其程序
CN103067704B (zh) 一种基于编码单元层次提前跳过的视频编码方法和系统
CN106170092A (zh) 用于无损编码的快速编码方法
CN108028945A (zh) 通过使用单例系数更新执行变换的设备和方法
CN106454351B (zh) 解码装置和解码方法
CN110024405A (zh) 图像处理方法及其装置
CN102685500B (zh) 基于信息变长分组结构的h.264大容量信息隐藏方法
CN105684443B (zh) 屏幕图像编码方法及其装置和屏幕图像解码方法及其装置
CN103957421B (zh) 一种基于纹理复杂度的hevc编码尺寸快速判定方法
CN109510987A (zh) 编码树节点划分方式的确定方法、装置及编码设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant