CN112565734A - 基于混合编码的点云属性编解码方法及装置 - Google Patents

基于混合编码的点云属性编解码方法及装置 Download PDF

Info

Publication number
CN112565734A
CN112565734A CN202011396401.5A CN202011396401A CN112565734A CN 112565734 A CN112565734 A CN 112565734A CN 202011396401 A CN202011396401 A CN 202011396401A CN 112565734 A CN112565734 A CN 112565734A
Authority
CN
China
Prior art keywords
attribute
coding
information
point cloud
residual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011396401.5A
Other languages
English (en)
Other versions
CN112565734B (zh
Inventor
张伟
杨付正
代娜
孙泽星
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xidian University
Original Assignee
Xidian University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xidian University filed Critical Xidian University
Priority to CN202011396401.5A priority Critical patent/CN112565734B/zh
Publication of CN112565734A publication Critical patent/CN112565734A/zh
Application granted granted Critical
Publication of CN112565734B publication Critical patent/CN112565734B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/808—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the composite colour video-signal
    • H04N9/8081—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the composite colour video-signal involving data reduction
    • H04N9/8082—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the composite colour video-signal involving data reduction using predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种基于混合编码的点云属性编解码方法及装置，所述编码方法包括：获取原始点云数据；基于重建几何信息对原始点云数据的属性信息进行空间变换和属性插值预测，得到重构点云属性信息；对重构点云属性信息进行处理，得到待编码信息；根据待编码信息的分布特性，采用不同的编码方式对其进行编码处理，得到属性码流信息。本发明提供的基于混合编码的点云属性编码方法降低了码流大小，提升了编码性能。

Description

基于混合编码的点云属性编解码方法及装置
技术领域
本发明属于三维重建技术领域，具体涉及一种基于混合编码的点云属性编解码方法及装置。
背景技术
点云是空间中一组无规则分布的、表达三维物体或场景的空间结构及表面属性的离散点集。点云中的每个点至少具有三维位置信息，根据应用场景的不同，还可能具有色彩、材质或其他信息。通常，点云中的每个点都具有相同数量的附加属性。
点云可以灵活方便地表达三维物体或场景的空间结构及表面属性，因而应用广泛。现有的一些点云数据应用场景，根据数据使用和处理特点的不同，目前主要可归为两大类别：类别一是机器感知点云，例如自主导航系统、实时巡检系统、地理信息系统、视觉分拣机器人、抢险救灾机器人；类别二是人眼感知点云，例如数字文化遗产、自由视点广播、三维沉浸通信、三维沉浸交互等应用场景。针对以上不同的点云应用场景，其相应的点云表示和压缩的需求也进行了进一步细化。
目前，我国数字音视频编解码标准工作组(AVS,Audio Video coding StandardWorkgroup of China)正在制订面向点云的压缩编码标准。在AVS提供的平台上，点云的几何信息和属性信息是分开进行编解码的。现阶段，属性编码主要针对颜色信息和反射率信息进行，其主要是对输入点云的属性信息经过预测得到预测残差，并对预测残差进行量化后，直接进行熵编码以得到属性码流信息的。
然而，上述方法在进行熵编码时没有考虑到属性预测残差的分布特性，比如对于残差连续为零的状况，若直接进行熵编码，会使编码码流较大，编码效率较低，影响编码性能。
发明内容
为了解决现有技术中存在的上述问题，本发明提供了一种基于混合编码的点云属性编解码方法及装置。本发明要解决的技术问题通过以下技术方案实现：
一种基于混合编码的点云属性编码方法，包括：
获取原始点云数据；
基于重建几何信息对所述原始点云数据的属性信息进行空间变换和属性插值预测，得到重构点云属性信息；
对所述重构点云属性信息进行处理，得到待编码信息；
根据所述待编码信息的分布特性，采用不同的编码方式对其进行编码处理，得到属性码流信息。
在本发明的一个实施例中，对所述重构点云属性信息进行处理，得到待编码信息，包括：
对所述重构点云属性信息进行属性预测处理，得到预测残差；
对所述预测残差进行量化处理，得到量化残差，并将该量化残差作为待编码信息。
在本发明的一个实施例中，根据所述待编码信息的分布特性，采用不同的编码方式对其进行编码处理，得到属性码流信息，包括：
遍历每个点的量化残差，统计所述量化残差连续为零的数目；其中，所述量化残差包括至少一个分量；
若判断该点的当前量化残差不为零，则对所述量化残差连续为零的数目进行熵编码，并在编码后清零该数目，重新进行计数；
对所述当前量化残差进行熵编码；
重复上述步骤，直至完成所有点的量化残差编码，得到属性码流信息。
在本发明的一个实施例中，对所述量化残差连续为零的数目进行熵编码，包括：
根据量化参数确定第一预设值；
若判断所述量化残差连续为零的数目小于第一预设值，则利用第一标志位和第二标志位分别表示该数目的值是否为0或者1，并在该数目为0或者1时，对所述第一标志位和所述第二标志位分别分配第一数量个上下文进行算术编码；
若所述量化残差连续为零的数目小于所述第一预设值，且该数目不为0和1时，对该数目值减去2，并对该数目值减去2之后的值分配第二数量个上下文进行算术编码；
若判断所述量化残差连续为零的数目大于或等于所述第一预设值时，对该数目值减去该第一预设值，并对该数目值减去第一预设值之后的值分配第三数量个上下文进行算术编码。
在本发明的一个实施例中，对所述当前量化残差进行熵编码，包括：
对所述当前量化残差的每个分量依次进行编码，若判断当前量化残差分量为0，则利用上下文对其进行熵编码；
若判断所述当前量化残差分量不为0，则对所述当前量化残差的符号进行旁路编码，并在所述当前量化残差分量的绝对值为1或者2时，利用上下文对其进行熵编码；
若判断所述当前量化残差分量的绝对值大于等于3，则对该分量绝对值减去3，并利用指数哥伦布码对该分量绝对值减去3之后的值进行编码。
在本发明的一个实施例中，所述利用指数哥伦布码对该分量值减去3之后的值进行编码，包括：
若判断当前量化残差为反射率属性信息，则采用K1阶指数哥伦布码对其进行编码；
若判断当前量化残差为颜色属性信息，则采用K2阶指数哥伦布码对其进行编码。
在本发明的一个实施例中，对所述重构点云属性信息进行处理，得到待编码信息，还包括：
对所述重构点云属性信息进行属性变换，得到变换系数，并将量化后的变换系数作为待编码信息；或者
对所述重构点云属性信息进行属性预测处理，得到预测残差，并对所述预测残差进行属性变换，得到变换系数，将量化后的变换系数作为待编码信息。
本发明的另一个实施例还提供了一种基于混合编码的点云属性编码装置，包括：
第一信息获取模块，用于获取原始点云数据；
点云属性重构模块，用于基于重建几何信息对所述原始点云数据的属性信息进行空间变换和属性插值预测，得到重构点云属性信息；
数据处理模块，用于对所述重构点云属性信息进行处理，得到待编码信息；
混合编码模块，用于根据所述待编码信息的分布特性，采用不同的编码方式对其进行编码处理，得到属性码流信息。
本发明的又一个实施例还提供了一种基于混合编码的点云属性解码方法，包括：
获取属性码流信息；
根据不同解码方式对所述属性码流信息依次进行解码，得到解码数据；其中，所述解码数据包括量化后的预测残差或者变换系数；
根据所述解码数据对点云数据进行属性重建，得到重建属性信息；
对所述重建属性信息进行逆空间变换，得到解码的点云属性信息。
本发明的再一个实施例还提供了一种基于混合编码的点云属性解码装置，包括：
第二信息获取模块，用于获取属性码流信息；
混合解码模块，用于根据不同解码方式对所述属性码流信息依次进行解码，得到解码数据；其中，所述解码数据包括量化后的预测残差或者变换系数；
属性重建模块，用于根据所述解码数据对点云数据进行属性重建，得到重建属性信息；
逆空间变换模块，用于对所述重建属性信息进行逆空间变换，得到解码的点云属性信息。
与现有技术相比，本发明的有益效果：
1、本发明提供的点云属性编码方法在进行编码操作时，充分考虑了待编码信息的分布特性，根据不同的分布情况，采用不同的编码方式，在不增加编码复杂度的前提下降低编码码流大小，提升了编码性能；
2、本发明在对预测残差进行编码时，通过统计量化后的预测残差连续为零的数目并对其采用游程编码这种高效编码方法，同时对非零属性残差进行熵编码，从而实现对预测残差的混合编码，整体上提升了编码效率；
3、本发明在对量化后的预测残差连续为零的数目进行编码时，以量化参数作为依据，自适应的设置第一预设值，并据此选择不同的编码方式，使得编码结果与系统参数相适应，从而取得更好的编码效果。
附图说明
图1为本发明实施例提供的一种基于混合编码的点云属性编码方法的流程示意图；
图2为本发明实施例提供的另一种基于混合编码的点云属性编码方法的流程示意图；
图3为本发明实施例提供的一种基于混合编码的点云属性编码装置的结构示意图；
图4为本发明实施例提供的一种基于混合编码的点云属性解码方法的流程示意图；
图5为本发明实施例提供的一种基于混合编码的点云属性解码装置的结构示意图。
具体实施方式
下面结合具体实施例对本发明做进一步详细的描述，但本发明的实施方式不限于此。
实施例一
请参见图1，图1为本发明实施例提供的一种基于混合编码的点云属性编码方法的流程示意图，包括：
步骤1：获取原始点云数据；
在本实施例中，设获取到的原始点云包含N个点，记为P(i)(i＝0,1…N-1)，每点对应的原始属性值为An,n＝0,1,...N-1。
步骤2：基于重建几何信息对所述原始点云数据的属性信息进行空间变换和属性插值预测，得到重构点云属性信息。
一般而言，在进行属性编码时，通常采用有损编码模式，也即有损压缩。因此，需要将点云数据的颜色信息从RGB颜色空间转换到亮度和色度颜色空间。
具体地，基于重建几何信息将原始点云数据的属性信息中的颜色信息从RGB颜色空间转换到亮度和色度(例如YUV)颜色空间。
然后，对点云数据进行属性插值处理，使得未编码的属性信息与重建的几何信息对应起来，得到重构点云属性信息。
步骤3：对重构点云属性信息进行处理，得到待编码信息。
进一步地，本实施例可以通过对重构点云属性信息进行属性预测处理，得到预测残差；然后对预测残差进行量化处理，得到量化残差，并将该量化残差作为待编码信息。
具体地，设通过属性预测后得到的预测属性值为Bn,n＝0,1,…,N-1，将原始属性值An,n＝0,1,...N-1与预测属性值进行差分后得到预测残差Xn,n＝0,1,…,N-1，然后根据预设的量化参数QP对该预测残差进行量化，并将量化后得到的量化残差作为待编码信息进行熵编码。
步骤4：根据待编码信息的分布特性，采用不同的编码方式对其进行编码处理，得到属性码流信息。
本实施例提供的点云属性编码方法在进行编码操作时，充分考虑了待编码信息的分布特性，根据不同的分布情况，采用不同的编码方式，在不增加编码复杂度的前提下降低编码码流大小，提升了编码性能。
下面以量化后的预测残差，也即量化残差作为待编码信息进行详细说明。请参见图2，图2为本发明实施例提供的另一种基于混合编码的点云属性编码方法的流程示意图，其中，run_length表示量化残差连续为零的数目，residual表示量化残差，delta表示残差分量。
具体地，步骤4包括：
41)遍历每个点的量化残差，统计量化残差连续为零的数目；其中，所述量化残差包括至少一个分量。
由于现有的点云属性编码主要是针对反射率信息和颜色进行的，因此，对于量化残差，其可以是反射率的量化残差，也可以是颜色属性的量化残差。对于反射率的量化残差，其包括一个分量，对于颜色属性的量化残差，其可能包括三个分量，例如Y、U、V分量。
需要说明的是，对于具有多个分量的颜色属性残差，其多个分量均为零，才视为该量化残差为零。
遍历每个点的量化残差，判断其是否为零，并通过变量run_length统计其数目。
42)若判断该点的当前量化残差不为零，则对量化残差连续为零的数目进行熵编码，并在编码后清零该数目，重新进行计数。
在本实施例中，若碰到当前量化残差不为零时，也即至少有一个量化残差的分量不为零，则对当前的数目run_length进行编码，具体编码方式如下：
a)根据量化参数确定第一预设值。
具体地，由于采用不同的量化参数QP进行量化得到的残差其连续为零的数目分布有所不同。若采用较小的量化参数，则得到的残差连续为零的数目也会较小。相应的，则需要选择较小的第一预设值M作为数目run_length编码方式的选择依据。其中，M大于等于2。
例如，本实施例可在量化参数QP小于32时，设置M为2。在量化参数大于32时，相应的增大M的值。
b)若判断量化残差连续为零的数目小于第一预设值，则利用第一标志位和第二标志位分别表示该数目的值是否为0或者1，并在该数目为0或者1时，对第一标志位和第二标志位分别分配第一数量个上下文进行算术编码。
具体地，本实施例采用isZero和isOne分别表示第一标志位和第二标志位，其分别指示run_length的值是否为0或者1，第一数量可以设置为2。当run_length的值为0或者1时，对isZero和isOne分别分配2个上下文进行算术编码。
c)若量化残差连续为零的数目小于所述第一预设值，且该数目不为0和1时，对该数目值减去2，并对该数目值减去2之后的值分配第二数量个上下文进行算术编码。
具体地，第二数量值可以设置为3，即当run_length的值小于M，且其值不是0，也不是1，则对run_length减去2，然后对(run_length-2)分配3个上下文进行算术编码。
d)若判断量化残差连续为零的数目大于或等于所述第一预设值时，对该数目值减去该第一预设值，并对该数目值减去第一预设值之后的值分配第三数量个上下文进行算术编码。
具体地，第三数量值可以设置为3，即当run_length的值大于M，则对run_length减去M，然后对(run_length-M)分配3个上下文进行算术编码。
对数目run_length编码完成后，将其值置为0，以便重新开始计数。
本实施例在对连续值为零的量化残差数目进行编码时，以量化参数作为依据，自适应的设置第一预设值，并据此选择不同的编码方式，使得编码结果与系统参数相适应，从而取得更好的编码效果。
43)对当前量化残差进行熵编码。
在步骤42)进行run_length熵编码后，还需要对当前不为零的量化残差进行编码，具体如下：
43-1)对当前量化残差的每个分量依次进行编码，若判断当前量化残差分量为0，则利用上下文对其进行熵编码。
43-2)若判断当前量化残差分量不为0，则对当前量化残差的符号进行旁路编码，并在当前量化残差分量的绝对值为1或者2时，利用上下文对其进行熵编码。
具体地，由于预测残差是由原始属性值与预测属性值进行差分后得到的，所以量化残差的值可能为正数、负数或者零。因此，在进行编码前首先要求对其符号进行判断并编码。
优选的，本实施例采用bypass coding(旁路编码)对量化残差的符号进行编码。
在对符号进行编码后，分配一个上下文对残差绝对值是否为1进行熵编码，在属性残差绝对值大于1的情况下同样分配一个上下文对属性残差绝对值是否等于2进行熵编码。
43-3)若判断当前量化残差分量的绝对值大于等于3，则对该分量绝对值减去3，并利用指数哥伦布码对该分量绝对值减去3之后的值进行编码。
具体地，若判断当前量化残差为反射率属性信息，则采用K1阶指数哥伦布码对其进行编码。
可选地，本实施例采用3-阶指数哥伦布码对当前量化残差进行编码。
若判断当前量化残差为颜色属性信息，则采用K2阶指数哥伦布码对其进行编码。
可选地，本实施例采用1-阶指数哥伦布码对当前量化残差进行编码。
44)重复上述步骤41)-43)，直至完成所有点的量化残差编码，得到属性码流信息。
需要说明是，在对反射率进行编码时，当对反射率采用的预测方式为自适应选择预测时，由于该方法是将当前待预测点的前N个点的重建属性值存入一个Buffer，然后在这N个点中选择重建属性值与当前待预测点的真实属性值残差最小的点作为预测点，所以需要对预测点在该Buffer中的索引min_idx进行编码，则此时的编码次序为：首先判断量化残差delta是否为0，若delta＝0，则对run_length进行累加计数，同时将每一个预测点的索引存储起来。当遇到量化残差非零时，首先对run_length进行编码，然后对被存储的每一个min_idx进行编码，最后对该非零delta进行编码，将run_length置为0重新开始计数。
本实施例在对量化后的预测残差进行编码时，充分考虑了预测残差的分布特性，结合有效的游程编码和K阶指数哥伦布编码方式，具体通过统计预测残差连续为零的数目并对其采用游程编码这种高效编码方法，同时对非零属性残差进行熵编码，从而实现对量化后的预测残差的混合编码，整体上提升了编码效率。
在本发明的另一个实施例中，对所述重构点云属性信息进行处理，得到待编码信息，还包括：
对重构点云属性信息进行属性变换，得到变换系数，并将量化后的变换系数作为待编码信息；或者
对重构点云属性信息进行属性预测处理，得到预测残差，并对预测残差进行属性变换，得到变换系数，将量化后的变换系数作为待编码信息。
在该实施例中，待编码信息为变换系数经过量化后的信息，该变换系数可以是DCT变换或RAHT变换得到的变换系数，具体地编码过程同量化后的预测残差的编码过程，在此不再赘述。
实施例二
在上述实施例一的基础上，本实施例还提供了一种基于混合编码的点云属性编码装置，请参见图3，图3为本发明实施例提供的一种基于混合编码的点云属性编码装置的结构示意图，其包括：
第一信息获取模块11，用于获取原始点云数据；
点云属性重构模块12，用于基于重建几何信息对所述原始点云数据的属性信息进行空间变换和属性插值预测，得到重构点云属性信息；
数据处理模块13，用于对所述重构点云属性信息进行处理，得到待编码信息；
混合编码模块14，用于根据所述待编码信息的分布特性，采用不同的编码方式对其进行编码处理，得到属性码流信息。
本实施例提供的基于混合编码的点云属性编码装置可实现上述实施例一所述的基于混合编码的点云属性编码方法，具体实现过程在此不再赘述。
实施例三
本实施例还提供的了一种基于混合编码的点云属性解码方法，请参见图4，图4为本发明实施例提供的一种基于混合编码的点云属性解码方法的流程示意图，包括：
步骤一：获取属性码流信息。
具体地，由于在编码阶段，其先对预测残差连续为零的数目run_length进行编码，然后对当前不为0的预测残差进行判断并依次编码的，也即编码得到的属性码流信息是按照run_length和预测残差间隔排列的。因此，相应的在解码阶段，获得的待解码的属性码流信息也是按照此方式进行排列的。
步骤二：根据不同解码方式对属性码流信息依次进行解码，得到解码数据；其中，所述解码数据包括量化后的预测残差或者变换系数。
具体地，当获取到属性码流信息之后，即可根据码流顺序判断出某一段二进制码是run_length编码还是量化后的预测残差编码，从而进一步得到不同的编码方式以及相应的解码方式。
例如，对于量化后的预测残差编码，若某位编码为0、1或者2，说明在编码阶段是采用算术编码直接进行编码的，则对应的直接采用算数解码方式，即直接返回残差0、1或者2。若某位编码不为0、1或者2，则说明其编码阶段采用的是指数哥伦布编码方式，然后根据头信息具体得到该编码是对颜色属性进行编码的还是对反射率进行编码的，若是对颜色属性进行编码的，则采取与编码阶段对应的1-阶指数哥伦布码进行解码，若是对反射率属性，则采取对应的3-阶指数哥伦布码进行解码。然后根据不同的解码方式，对属性码流信息分段进行解码，直至完成整个属性码流信息解码操作，得到解码数据。
由于在编码阶段采用的待编码信息可以是量化后的预测残差或者变换系数，相应的，在解码阶段，得到的解码数据也可以是量化后的预测残差及其残差连续为零的数目run_length或者变换系数及其对应的run_length。
步骤三：根据解码数据对点云数据进行属性重建，得到重建属性信息。
首先，对解码得到的量化后的预测残差或者变换系数进行反量化处理，得到预测残差或者变换系数。
然后根据预测残差或者变换系数对点云数据进行属性预测，或者属性变换，得到重建的属性信息。
步骤四：对重建属性信息进行逆空间变换，得到解码的点云属性信息。
对重建的属性信息进行逆空间变换，将其从YUV空间转换至RGB空间，至此，完成点云属性解码。
实施例四
在上述实施例三的基础上，本实施例还提供了一种基于混合编码的点云属性解码装置，请参见图5，图5为本发明实施例提供的一种基于混合编码的点云属性解码装置的结构示意图，其包括：
第二信息获取模块21，用于获取属性码流信息；
混合解码模块22，用于根据不同解码方式对所述属性码流信息依次进行解码，得到解码数据；其中，所述解码数据包括量化后的预测残差或者变换系数；
属性重建模块23，用于根据所述解码数据对点云数据进行属性重建，得到重建属性信息；
逆空间变换模块24，用于对所述重建属性信息进行逆空间变换，得到解码的点云属性信息。
本实施例提供的基于混合编码的点云属性解码装置可实现上述实施例一所述的基于混合编码的点云属性解码方法，具体实现过程在此不再赘述。
实施例五
为了进一步说明上述实施例一的有益效果，本实施例将上述实施例一提供的基于混合编码的点云属性编码方法在在AVS平台上对部分属性信息为颜色的序列在C2(几何无损，属性有损)条件下进行测试，其结果如下表所示：
Figure BDA0002815468160000151
其中，Luma表示明亮度，Chroma Cb和Chroma Cr表示色度，参数BD-rate表示性能。
从上表可以看出，所有序列的BD-rate均为负值，而BD-rate为负时表示性能变好，在此基础上BD-rate的绝对值越大，则性能的增益越大。由此说明本发明提供的基于混合编码的点云属性编码方法的BD-rate有较为明显的提升，说明其编码性能得到了提升。
以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明，不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干简单推演或替换，都应当视为属于本发明的保护范围。

Claims (10)

1.一种基于混合编码的点云属性编码方法，其特征在于，包括：
获取原始点云数据；
基于重建几何信息对所述原始点云数据的属性信息进行空间变换和属性插值预测，得到重构点云属性信息；
对所述重构点云属性信息进行处理，得到待编码信息；
根据所述待编码信息的分布特性，采用不同的编码方式对其进行编码处理，得到属性码流信息。
2.根据权利要求1所述的基于混合编码的点云属性编码方法，其特征在于，对所述重构点云属性信息进行处理，得到待编码信息，包括：
对所述重构点云属性信息进行属性预测处理，得到预测残差；
对所述预测残差进行量化处理，得到量化残差，并将该量化残差作为待编码信息。
3.根据权利要求2所述的基于混合编码的点云属性编码方法，其特征在于，根据所述待编码信息的分布特性，采用不同的编码方式对其进行编码处理，得到属性码流信息，包括：
遍历每个点的量化残差，统计所述量化残差连续为零的数目；其中，所述量化残差包括至少一个分量；
若判断该点的当前量化残差不为零，则对所述量化残差连续为零的数目进行熵编码，并在编码后清零该数目，重新进行计数；
对所述当前量化残差进行熵编码；
重复上述步骤，直至完成所有点的量化残差编码，得到属性码流信息。
4.根据权利要求3所述的基于混合编码的点云属性编码方法，其特征在于，对所述量化残差连续为零的数目进行熵编码，包括：
根据量化参数确定第一预设值；
若判断所述量化残差连续为零的数目小于第一预设值，则利用第一标志位和第二标志位分别表示该数目的值是否为0或者1，并在该数目为0或者1时，对所述第一标志位和所述第二标志位分别分配第一数量个上下文进行算术编码；
若所述量化残差连续为零的数目小于所述第一预设值，且该数目不为0和1时，对该数目值减去2，并对该数目值减去2之后的值分配第二数量个上下文进行算术编码；
若判断所述量化残差连续为零的数目大于或等于所述第一预设值时，对该数目值减去该第一预设值，并对该数目值减去第一预设值之后的值分配第三数量个上下文进行算术编码。
5.根据权利要求3所述的基于混合编码的点云属性编码方法，其特征在于，对所述当前量化残差进行熵编码，包括：
对所述当前量化残差的每个分量依次进行编码，若判断当前量化残差分量为0，则利用上下文对其进行熵编码；
若判断所述当前量化残差分量不为0，则对所述当前量化残差的符号进行旁路编码，并在所述当前量化残差分量的绝对值为1或者2时，利用上下文对其进行熵编码；
若判断所述当前量化残差分量的绝对值大于等于3，则对该分量绝对值减去3，并利用指数哥伦布码对该分量绝对值减去3之后的值进行编码。
6.根据权利要求5所述的基于混合编码的点云属性编码方法，其特征在于，所述利用指数哥伦布码对该分量值减去3之后的值进行编码，包括：
若判断当前量化残差为反射率属性信息，则采用K1阶指数哥伦布码对其进行编码；
若判断当前量化残差为颜色属性信息，则采用K2阶指数哥伦布码对其进行编码。
7.根据权利要求1所述的基于混合编码的点云属性编码方法，其特征在于，对所述重构点云属性信息进行处理，得到待编码信息，还包括：
对所述重构点云属性信息进行属性变换，得到变换系数，并将量化后的变换系数作为待编码信息；或者
对所述重构点云属性信息进行属性预测处理，得到预测残差，并对所述预测残差进行属性变换，得到变换系数，将量化后的变换系数作为待编码信息。
8.一种基于混合编码的点云属性编码装置，其特征在于，包括：
第一信息获取模块(11)，用于获取原始点云数据；
点云属性重构模块(12)，用于基于重建几何信息对所述原始点云数据的属性信息进行空间变换和属性插值预测，得到重构点云属性信息；
数据处理模块(13)，用于对所述重构点云属性信息进行处理，得到待编码信息；
混合编码模块(14)，用于根据所述待编码信息的分布特性，采用不同的编码方式对其进行编码处理，得到属性码流信息。
9.一种基于混合编码的点云属性解码方法，其特征在于，包括：
获取属性码流信息；
根据不同解码方式对所述属性码流信息依次进行解码，得到解码数据；其中，所述解码数据包括量化后的预测残差或者变换系数；
根据所述解码数据对点云数据进行属性重建，得到重建属性信息；
对所述重建属性信息进行逆空间变换，得到解码的点云属性信息。
10.一种基于混合编码的点云属性解码装置，其特征在于，包括：
第二信息获取模块(21)，用于获取属性码流信息；
混合解码模块(22)，用于根据不同解码方式对所述属性码流信息依次进行解码，得到解码数据；其中，所述解码数据包括量化后的预测残差或者变换系数；
属性重建模块(23)，用于根据所述解码数据对点云数据进行属性重建，得到重建属性信息；
逆空间变换模块(24)，用于对所述重建属性信息进行逆空间变换，得到解码的点云属性信息。
CN202011396401.5A 2020-12-03 2020-12-03 基于混合编码的点云属性编解码方法及装置 Active CN112565734B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011396401.5A CN112565734B (zh) 2020-12-03 2020-12-03 基于混合编码的点云属性编解码方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011396401.5A CN112565734B (zh) 2020-12-03 2020-12-03 基于混合编码的点云属性编解码方法及装置

Publications (2)

Publication Number Publication Date
CN112565734A true CN112565734A (zh) 2021-03-26
CN112565734B CN112565734B (zh) 2022-04-19

Family

ID=75047574

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011396401.5A Active CN112565734B (zh) 2020-12-03 2020-12-03 基于混合编码的点云属性编解码方法及装置

Country Status (1)

Country Link
CN (1) CN112565734B (zh)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113192148A (zh) * 2021-04-12 2021-07-30 中山大学 基于调色盘的属性预测方法、装置、设备及介质
CN113284248A (zh) * 2021-06-10 2021-08-20 上海交通大学 一种点云有损压缩的编解码方法、装置和系统
CN113840150A (zh) * 2021-09-17 2021-12-24 中山大学 一种点云反射率属性熵编码方法
CN115102934A (zh) * 2022-06-17 2022-09-23 腾讯科技（深圳）有限公司 点云数据的解码方法、编码方法、装置、设备及存储介质
CN115412716A (zh) * 2021-05-26 2022-11-29 荣耀终端有限公司 一种点云坐标转换残差的编解码方法及装置
CN115412713A (zh) * 2021-05-26 2022-11-29 荣耀终端有限公司 一种点云深度信息的预测编解码方法及装置
CN115412715A (zh) * 2021-05-26 2022-11-29 荣耀终端有限公司 一种点云属性信息的预测编解码方法及装置
CN115412717A (zh) * 2021-05-26 2022-11-29 荣耀终端有限公司 一种点云方位角信息的预测编解码方法及装置
WO2022246724A1 (zh) * 2021-05-27 2022-12-01 Oppo广东移动通信有限公司 点云解码、上采样及模型训练方法与装置
WO2022262546A1 (zh) * 2021-06-15 2022-12-22 中兴通讯股份有限公司 一种数据处理方法、装置、电子设备和存储介质
WO2023024842A1 (zh) * 2021-08-25 2023-03-02 腾讯科技（深圳）有限公司 点云编解码方法、装置、设备及存储介质
WO2023098917A1 (zh) * 2021-12-03 2023-06-08 咪咕文化科技有限公司 点云熵编码方法、解码方法、装置、设备及计算机可读存储介质
WO2023098820A1 (zh) * 2021-12-03 2023-06-08 维沃移动通信有限公司 点云编码、解码方法、装置及通信设备
WO2023098803A1 (zh) * 2021-12-03 2023-06-08 维沃移动通信有限公司 点云编码处理方法、点云解码处理方法及相关设备
WO2023116443A1 (zh) * 2021-12-24 2023-06-29 中兴通讯股份有限公司 点云编码方法、点云解码方法、通信节点及存储介质
WO2023168712A1 (zh) * 2022-03-11 2023-09-14 Oppo广东移动通信有限公司 零游程值编解码方法及视频编解码方法、装置和系统
WO2023240660A1 (zh) * 2022-06-17 2023-12-21 Oppo广东移动通信有限公司 解码方法、编码方法、解码器以及编码器
WO2023241107A1 (zh) * 2022-06-18 2023-12-21 腾讯科技（深圳）有限公司 点云处理方法、装置及计算机设备、存储介质
WO2024007253A1 (zh) * 2022-07-07 2024-01-11 Oppo广东移动通信有限公司 点云率失真优化方法及属性压缩方法、装置和存储介质
WO2024119420A1 (zh) * 2022-12-07 2024-06-13 Oppo广东移动通信有限公司 编解码方法、码流、编码器、解码器以及存储介质
WO2024124901A1 (zh) * 2022-12-12 2024-06-20 腾讯科技（深圳）有限公司 点云处理方法、装置、设备、介质和程序产品

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170347122A1 (en) * 2016-05-28 2017-11-30 Microsoft Technology Licensing, Llc Scalable point cloud compression with transform, and corresponding decompression
US20200021856A1 (en) * 2018-07-10 2020-01-16 Apple Inc. Hierarchical point cloud compression
CN111405281A (zh) * 2020-03-30 2020-07-10 北京大学深圳研究生院 一种点云属性信息的编码方法、解码方法、存储介质及终端设备
WO2020189943A1 (ko) * 2019-03-15 2020-09-24 엘지전자 주식회사 포인트 클라우드 데이터 송신 장치, 포인트 클라우드 데이터 송신 방법, 포인트 클라우드 데이터 수신 장치 및 포인트 클라우드 데이터 수신 방법
CN111953998A (zh) * 2020-08-16 2020-11-17 西安电子科技大学 基于dct变换的点云属性编码及解码方法、装置及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170347122A1 (en) * 2016-05-28 2017-11-30 Microsoft Technology Licensing, Llc Scalable point cloud compression with transform, and corresponding decompression
US20200021856A1 (en) * 2018-07-10 2020-01-16 Apple Inc. Hierarchical point cloud compression
WO2020189943A1 (ko) * 2019-03-15 2020-09-24 엘지전자 주식회사 포인트 클라우드 데이터 송신 장치, 포인트 클라우드 데이터 송신 방법, 포인트 클라우드 데이터 수신 장치 및 포인트 클라우드 데이터 수신 방법
CN111405281A (zh) * 2020-03-30 2020-07-10 北京大学深圳研究生院 一种点云属性信息的编码方法、解码方法、存储介质及终端设备
CN111953998A (zh) * 2020-08-16 2020-11-17 西安电子科技大学 基于dct变换的点云属性编码及解码方法、装置及系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
K. MATSUZAKI AND K. TASAKA: "《Binary Representation for 3D Point Cloud Compression based on Deep Auto-Encoder》", 《2019 IEEE 8TH GLOBAL CONFERENCE ON CONSUMER ELECTRONICS (GCCE), 2019, PP. 489-490, DOI: 10.1109/GCCE46687.2019.9015550.》 *
S. ZHANG, W. ZHANG, F. YANG AND J. HUO: "《A 3D Haar Wavelet Transform for Point Cloud Attribute Compression Based on Local Surface Analysis》", 《2019 PICTURE CODING SYMPOSIUM (PCS), 2019, PP. 1-5, DOI: 10.1109/PCS48520.2019.8954557》 *
谷帅: "《3D点云高效压缩算法研究》", 《中国优秀硕士学位论文全文数据库-信息科技辑》 *

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113192148B (zh) * 2021-04-12 2023-01-03 中山大学 基于调色盘的属性预测方法、装置、设备及介质
CN113192148A (zh) * 2021-04-12 2021-07-30 中山大学 基于调色盘的属性预测方法、装置、设备及介质
WO2022247715A1 (zh) * 2021-05-26 2022-12-01 荣耀终端有限公司 一种点云坐标转换残差的编解码方法及装置
CN115412717B (zh) * 2021-05-26 2024-05-17 荣耀终端有限公司 一种点云方位角信息的预测编解码方法及装置
CN115412716A (zh) * 2021-05-26 2022-11-29 荣耀终端有限公司 一种点云坐标转换残差的编解码方法及装置
CN115412713A (zh) * 2021-05-26 2022-11-29 荣耀终端有限公司 一种点云深度信息的预测编解码方法及装置
CN115412715A (zh) * 2021-05-26 2022-11-29 荣耀终端有限公司 一种点云属性信息的预测编解码方法及装置
CN115412717A (zh) * 2021-05-26 2022-11-29 荣耀终端有限公司 一种点云方位角信息的预测编解码方法及装置
CN115412715B (zh) * 2021-05-26 2024-03-26 荣耀终端有限公司 一种点云属性信息的预测编解码方法及装置
CN115412716B (zh) * 2021-05-26 2024-06-04 荣耀终端有限公司 一种点云坐标转换残差的编解码方法及装置
WO2022246724A1 (zh) * 2021-05-27 2022-12-01 Oppo广东移动通信有限公司 点云解码、上采样及模型训练方法与装置
CN113284248A (zh) * 2021-06-10 2021-08-20 上海交通大学 一种点云有损压缩的编解码方法、装置和系统
WO2022262546A1 (zh) * 2021-06-15 2022-12-22 中兴通讯股份有限公司 一种数据处理方法、装置、电子设备和存储介质
WO2023024842A1 (zh) * 2021-08-25 2023-03-02 腾讯科技（深圳）有限公司 点云编解码方法、装置、设备及存储介质
CN113840150A (zh) * 2021-09-17 2021-12-24 中山大学 一种点云反射率属性熵编码方法
CN113840150B (zh) * 2021-09-17 2023-09-26 中山大学 一种点云反射率属性熵编解码方法
WO2023098820A1 (zh) * 2021-12-03 2023-06-08 维沃移动通信有限公司 点云编码、解码方法、装置及通信设备
WO2023098803A1 (zh) * 2021-12-03 2023-06-08 维沃移动通信有限公司 点云编码处理方法、点云解码处理方法及相关设备
WO2023098917A1 (zh) * 2021-12-03 2023-06-08 咪咕文化科技有限公司 点云熵编码方法、解码方法、装置、设备及计算机可读存储介质
WO2023116443A1 (zh) * 2021-12-24 2023-06-29 中兴通讯股份有限公司 点云编码方法、点云解码方法、通信节点及存储介质
WO2023168712A1 (zh) * 2022-03-11 2023-09-14 Oppo广东移动通信有限公司 零游程值编解码方法及视频编解码方法、装置和系统
CN115102934B (zh) * 2022-06-17 2023-09-19 腾讯科技（深圳）有限公司 点云数据的解码方法、编码方法、装置、设备及存储介质
WO2023240660A1 (zh) * 2022-06-17 2023-12-21 Oppo广东移动通信有限公司 解码方法、编码方法、解码器以及编码器
CN115102934A (zh) * 2022-06-17 2022-09-23 腾讯科技（深圳）有限公司 点云数据的解码方法、编码方法、装置、设备及存储介质
WO2023241107A1 (zh) * 2022-06-18 2023-12-21 腾讯科技（深圳）有限公司 点云处理方法、装置及计算机设备、存储介质
WO2024007253A1 (zh) * 2022-07-07 2024-01-11 Oppo广东移动通信有限公司 点云率失真优化方法及属性压缩方法、装置和存储介质
WO2024119420A1 (zh) * 2022-12-07 2024-06-13 Oppo广东移动通信有限公司 编解码方法、码流、编码器、解码器以及存储介质
WO2024124901A1 (zh) * 2022-12-12 2024-06-20 腾讯科技（深圳）有限公司 点云处理方法、装置、设备、介质和程序产品

Also Published As

Publication number Publication date
CN112565734B (zh) 2022-04-19

Similar Documents

Publication Publication Date Title
CN112565734B (zh) 基于混合编码的点云属性编解码方法及装置
US11750841B2 (en) Methods and apparatuses for coding transform blocks
US10893273B2 (en) Data encoding and decoding
KR101356733B1 (ko) 컨텍스트 기반 적응적 이진 산술 부호화, 복호화 방법 및장치
US20240121420A1 (en) Method of coding and decoding images, coding and decoding device and computer programs corresponding thereto
US11178429B2 (en) Method for producing video coding and programme-product
CN112565757B (zh) 基于通道差异化的点云属性编码及解码方法、装置及系统
US20200404276A1 (en) Context modeling for low-frequency non-separable transformation signaling for video coding
CN104041040A (zh) 用于无损视频编码的预测残差编码
CN112995662B (zh) 一种点云的属性熵编码和熵解码的方法及设备
JP6873930B2 (ja) デジタル画像のコーディング方法、デコーディング方法、装置、および関連するコンピュータプログラム
US20140010278A1 (en) Method and apparatus for coding adaptive-loop filter coefficients
CN115379241A (zh) 用于对最后有效系数标志进行代码化的方法和设备
GB2496201A (en) Context adaptive data encoding and decoding
CN110944179B (zh) 一种视频数据解码方法及装置
CN113489980B (zh) 一种点云属性变换系数的熵编码和熵解码的方法及设备
KR20120071253A (ko) 무손실 부호화를 위한 엔트로피 부호화 방법 및 엔트로피 부호화기
WO2022256451A1 (en) Quantization level binarization in video coding
JP3359086B2 (ja) 符号量制御装置及びその方法
CN116233427A (zh) 一种点云属性编码方法、解码方法、编码设备及解码设备
GB2496193A (en) Context adaptive data encoding and decoding

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant