CN114667728B - 点云编解码方法、装置及系统 - Google Patents

点云编解码方法、装置及系统 Download PDF

Info

Publication number
CN114667728B
CN114667728B CN202080078252.XA CN202080078252A CN114667728B CN 114667728 B CN114667728 B CN 114667728B CN 202080078252 A CN202080078252 A CN 202080078252A CN 114667728 B CN114667728 B CN 114667728B
Authority
CN
China
Prior art keywords
point cloud
information
cloud data
points
monotonicity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202080078252.XA
Other languages
English (en)
Other versions
CN114667728A (zh
Inventor
李璞
郑萧桢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SZ DJI Technology Co Ltd
Original Assignee
SZ DJI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SZ DJI Technology Co Ltd filed Critical SZ DJI Technology Co Ltd
Publication of CN114667728A publication Critical patent/CN114667728A/zh
Application granted granted Critical
Publication of CN114667728B publication Critical patent/CN114667728B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/161Encoding, multiplexing or demultiplexing different image signal components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一种点云编码方法及装置、点云解码方法及装置、编解码系统。编码端获取待编码点云中的点云点的位置坐标,基于所述位置坐标对所述点云点进行分组处理,得到一组或多组点云点,其中,所述一组或多组点云点中的每组点云点的所述位置坐标在目标方向上单调递增或单调递减;分别对所述每组点云点进行编码处理,以得到所述待编码点云的码流。解码端在接收到点云码流后,可以对其解码,得到一组或多组点云点,然后针对每组点云点,按照其位置坐标在目标方向上的单调性对点云点进行排序,得到解码后的点云。通过这种编解码方式,在点云编解码的过程中可以很好的保留点云的原始采集顺序,便于点云数据的后续应用。

Description

点云编解码方法、装置及系统
技术领域
本申请涉及编解码技术领域,具体而言,涉及一种点云编码方法及装置、点云解码方法及装置、以及编解码系统。
背景技术
点云是三维物体或场景的一种表现形式,由三维空间中分布的用于表征三维物体或场景的空间结构或表面属性的多个离散点集构成。为了准确地表征三维物体或场景,通常点云中含有的点云点的数量非常巨大。所以,在传输点云数据时,需先对其进行压缩编码处理。激光雷达在采集点云数据时,是一个个点云点依次采集的,目前的点云压缩编码技术无法保留激光雷达采集点云点时的采集顺序,而点云中各点云点的采集顺序在点云的后续应用中往往起着比较重要的作用。因此,有必要提供一种压缩编码技术,可以保留点云的原始采集顺序。
发明内容
有鉴于此,本申请提供一种点云编码方法及装置、点云解码方法及装置、编解码系统。
根据本申请的第一方面,提供一种点云编码方法,所述方法包括:
获取待编码点云中的点云点的位置坐标;
基于所述位置坐标对所述点云点进行分组处理,得到一组或多组点云点,其中,所述一组或多组点云点中的每组点云点的所述位置坐标在目标方向上单调递增或单调递减;
分别对所述每组点云点进行编码处理,以得到所述待编码点云的码流。
根据本申请的第二方面,提供一种点云解码方法,所述方法包括:
对待解码的点云码流进行解码处理,得到一组或多组重建点云数据,其中,所述点云码流通过对一组或多组点云点编码得到,所述一组或多组点云点中的每组点云点的位置坐标在目标方向上单调递增或单调递减;
针对每组重建点云数据中的位置坐标,基于所述位置坐标在所述目标方向上的单调性对所述每组重建点云数据中的点云点进行排序处理,得到解码后的一组或多组点云点。
根据本申请的第三方面,提供一种编码装置,所述编码装置包括处理器、存储器、存储于所述存储器可供所述处理器执行的计算程序,所述处理器执行所述计算机程序时实现以下步骤:
获取待编码点云中的点云点的位置坐标;
基于所述位置坐标对所述点云点进行分组处理,得到一组或多组点云点,其中,所述一组或多组点云点中的每组点云点的所述位置坐标在目标方向上单调递增或单调递减;
分别对所述每组点云点进行编码处理,以得到所述待编码点云的码流。
根据本申请的第四方面,提供一种解码装置,所述解码装置包括处理器、存储器、存储于所述存储器可供所述处理器执行的计算程序,所述处理器执行所述计算机程序时实现以下步骤:
对待解码的点云码流进行解码处理,得到一组或多组重建点云数据,其中,所述点云码流通过对一组或多组点云点编码得到,所述一组或多组点云点中的每组点云点的位置坐标在目标方向上单调递增或单调递减;
针对每组重建点云数据中的位置坐标,基于所述位置坐标在所述目标方向上的单调性对所述每组重建点云数据中的点云点进行排序处理,得到解码后的一组或多组点云点。
根据本申请的第五方面,提供一种编解码系统,所述编解码系统包括编码装置和解码装置,所述编码装置用于获取待编码点云中的点云点的位置坐标,基于所述位置坐标对所述点云点进行分组处理,得到一组或多组点云点,其中,所述一组或多组点云点中的每组点云点的所述位置坐标在目标方向上单调递增或单调递减;分别对所述每组点云点进行编码处理,以得到所述待编码点云的码流;
所述解码装置用于对所述码流进行解码处理,得到一组或多组重建点云数据,针对每组重建点云数据中点云点的位置坐标,基于所述位置坐标在所述目标方向上的单调性对所述每组重建点云数据中的点云点进行排序处理,得到解码后的一组或多组点云点。
应用本申请提供的方案,在对点云编码之前,可以基于点云点的位置坐标在目标方向上的单调性对点云进行分组处理,得到一组或多组点云点,每组点云点的位置坐标在目标方向上单调递增或单调递减,因而,可以根据位置坐标在目标方向的单调性确定每组点云点的采集顺序,然后分别对每个组内的点云点进行编码,得到点云码流。解码端在接收到点云码流后,可以对其解码,得到一组或多组点云点,然后针对每组点云点,按照其位置坐标在目标方向上的单调性对点云点进行排序,将各组中排序后的点云点合并,即得到解码后的点云。通过这种编解码方式,在点云编解码的过程中可以很好的保留点云的原始采集顺序,便于点云数据的后续应用。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本申请一个实施例一种点云编码方法的流程图。
图2是本申请一个实施例三维空间点在球坐标系下的坐标示意图。
图3(a)-3(c)是本申请一个实施例的码流结构示意图。
图4是本申请一个实施例的一种点云解码方法流程图。
图5是本申请一个实施例的激光雷达扫描轨迹示意图。
图6是本申请一个实施例的码流结构示意图。
图7是本申请一个实施例的编码装置的逻辑结构示意图。
图8是本申请一个实施例的解码装置的逻辑结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
点云可以用于表征三维物体和场景的空间结构和表面属性,点云中的每个点的数据通常包括位置信息和以及该位置对应的属性信息,属性信息可以是颜色、反射率等。由于点云中点云点的数量非常巨大,因而需要对其压缩编码后再进行传输或存储。通常激光雷达在采集点云数据时,都是一个一个点按顺序依次采集的,点云中各点云点的采集顺序对后续的应用会产生一定的影响。比如,点云数据在用于即时定位与地图构建(SLAM)的场景,其采集顺序会对SLAM算法产生影响。而目前的编解码技术中,编码端对点云压缩编码后的码流传输至解码端后,解码端对码流进行解码得到的点云数据无法还原点云中各点云点的采集顺序,无法满足点云在后续应用中的需求。
基于此,本申请实施例提供一种点云编解码方法,在对点云进行编码之前,可以根据点云中各点云点的位置坐标在目标方向上的单调特性对点云点进行分组处理,每个分组内的点云点的位置坐标在目标方向上单调递增或单调递减,在分组后,分别对每个分组内的点云点进行编码处理,得到点云码流,发送给解码端。解码端获取到点云码流后,可以先对点云码流进行解码处理,得到每个分组的点云点,然后针对每个分组的点云点,依据其位置坐标在目标方向上的单调特性对点云点进行排序,然后将排序处理后的各组点云点合并,即可以得到保留原始采集顺序的点云数据。通过依据点云点在采集过程中位置坐标在目标方向上的单调性对点云点进行分组处理后再编码,可以保留点云的采集顺序,满足点云数据在后续应用中对于是采集顺序的需求。
以下分别从编码端和解码端的处理过程对本申请实施例提供的点云编解码方案进行介绍。
图1为本申请实施例提供的点云编码方法的处理流程,具体包括以下步骤:
S102、获取待编码点云中的点云点的位置坐标;
S104、基于所述位置坐标对所述点云点进行分组处理,得到一组或多组点云点,其中,所述一组或多组点云点中的每组点云点的所述位置坐标在目标方向上单调递增或单调递减;
S106、分别对所述每组点云点进行编码处理,以得到所述待编码点云的码流。
本申请实施例提供的点云编码方法可以用于点云编码装置,点云编码装置可以是一个独立的产品,也可以集成在激光雷达或者其他设备上。
本申请实施例的点云可以是由各种点云采集设备采集得到,比如激光雷达,以下以激光雷达为例进行说明。
由于激光雷达在对三维场景进行扫描以采集点云数据时,其扫描轨迹通常会呈现一定的规律。因此,激光雷达在一段时间内采集的连续多个点云点的位置坐标通常在某个方向上会呈现出单调特性。比如,激光雷达在连续一段时间内采集的点云点在天顶角方向上的坐标可能依次增大,或者方位角方向上的坐标依次减小,或者可以是点云点在其他坐标系下的坐标在某个方向上依次增大或减小等,点云点在特定方向上的单调性可以依据激光雷达的扫描轨迹确定。基于激光雷达一段时间内连续采集的点云点的位置坐标在特定方向上的单调性对点云点分组后再进行编码,这样每个组内的点云点的采集顺序可以根据其位置坐标在特定方向上的单调性确定,从而可以保留点云点的原始采集顺序。
在对待编码点云进行编码处理之前,可以先获取待编码点云中各点云点的位置坐标,其中,点云点的位置坐标可以是描述点云点在三维空间中的位置信息的各种形式的坐标,比如,可以是点云点在世界坐标系下的坐标,也可以是点云点在球坐标系下的坐标,当然,也可以是其他形式的坐标。其中,具体的位置坐标形式可以根据激光雷达扫描轨迹以及点云位置坐标的单调特性确定。
举个例子,点云点P在世界坐标系下的坐标为(x,y,z),点云点在球坐标系下的坐标为点云点P在球坐标系下的示意图如图2所示,其中,r表示径向距离,指从原点到点P的直线距离,θ表示天顶角,指从原点到点P的连线与z轴正半轴的夹角值,/>表示方位角,指从原点到点P的连线在XOY平面的投影线与X轴正半轴的夹角值。不同坐标系下的点云坐标可以相互转换,可以根据实际需求将激光雷达采集的点云的位置数据进行转换处理。
在获取到点云点的位置坐标后,可以根据点云点的位置坐标在目标方向上的单调性对点云点进行分组处理,得到一组或多组点云点。目标方向可以是点云点位置坐标的某个方向,比如,可以是世界坐标系下的X,Y,Z方向,或者是球坐标系下的天顶角、方位角方向,也可以是其他坐标系下的坐标方向,本申请实施例不作限制。分组后得到的每个组内的点云点的位置坐标在目标方向上单调递增或者单调递减,从而可以根据位置坐标的单调性恢复每个分组内的点云点的原始采集顺序。
以下以目标方向为天顶角θ方向为例进行举例说明。假设第N个点云点的坐标为(xN,yN,zN),对应球坐标系坐标为若当前点为当前包内的第一个点,则第N+1个点云点的坐标对应球坐标系下的坐标/>在天顶角方向的变化情况即为θN+1N,若大于零即当前包在天顶角方向上变化率为增加的,若小于零即当前包在天顶角方向上变化率为减少的。则对后面的连续的每个点,均计算当前点和前一个点在天顶角方向的变化情况,若变化情况与当前组相同,则将当前点划入当前的组内,若变化情况与当前组不相同,则将当前点划到下一个新的组内,当前点为新的组的第一个点云点。按照这样的方法将输入的点云数据划分为若干个组,每个组内的变化情况是相同的。
在对点云点进行分组后,即可以分别对每组点云点进行编码处理,得到待编码点云编码后的码流。其中,待编码点云编码后得到的点云码流结构中可以包括层级、序列、帧、条带、片等不同的单元,每个组的点云点编码后得到的码流可以作为点云码流中的一个序列、一个帧、一个片或者一个条带,具体可以根据实际需求设置。码流结构可参考图3(a)-3(c),比如,在一些场景中,如图3(a)所示,点云码流可以由多个层级组成,每个层级包括一个多个序列,每个序列包括一个或多个帧,每个帧中包括一个或多个条带、每个条带包括一个或多个片,在这种情况下,每个组的点云点编码后得到的码流可以作为点云码流中的一个片,在一些场景中每个条带也可以不包括片,在这种情况下,每个组的点云点编码后得到的码流可以作为点云码流中的一个条带。在一些场景中,如图3(b)所示,点云码流可以由一个或多个层级组成,每个层级包括一个多个序列,每个序列包括一个或多个帧,每个帧中包括一个或多个片、每个片包括一个或多个条带,在在这种情况下,每个组的点云点编码后得到的码流可以作为点云码流中的一个条带。在一些场景中每个片也可以不包括条带,在这种情况下,每个组的点云点编码后得到的码流可以作为点云码流中的一个片。在一些场景中,如图3(c)所示,每个帧下面也可以不包括条带也不包括片,即帧为最小单元,在这种情况下,每个组的点云点编码后得到的码流可以作为
点云码流中的一个帧。
对点云进行编码处理可以包括对各点云点的位置信息和属性信息进行编码,位置信息和属性信息的编码可以分开进行。对位置信息进行编码时可以采用八叉树或者多叉树的编码方式进行编码,也可以采用其他方式,本申请实施例不作限制。
对点云点分组后编码得到的点云码流可以传输至解码端,解码端可以对点云码流进行解码处理。如图4所示,为本申请实施例提供的解码方法的处理流程示意图,包括以下步骤:
S402、对待解码的点云码流进行解码处理,得到一组或多组点云重建数据,其中,所述点云码流通过对一组或多组点云点编码得到,所述一组或多组点云点中的每组点云点的位置坐标在目标方向上单调递增或单调递减;
S404、针对每组点云重建数据中的点云点的位置坐标,基于所述位置坐标在所述目标方向上的单调性对所述每组点云重建数据中的点云点进行排序处理,得到解码后的一组或多组点云点。
其中,本申请实施例提供的点云解码方法可以用于点云解码装置,该点云解码装置可以是一个独立的设备,也可以集成在对点云数据进行后续处理的设备上,比如、服务器、笔记本电脑、台式电脑等。
在获取到待解码的点云码流后,可以基于点云的编码方式对点云进行解码处理,得到重建后的点云的位置坐标和属性信息。由于点云码流中包括一组或者多组点云点对应的码流,因而,解码后可以得到一组或多组点云重建数据,比如,如果码流中一帧数据对应于一组点云点的码流,则可以将每一帧数据作为一组重建数据,每组点云重建数据中的点云点的位置坐标在目标方向上单调递增或单调递减。针对每组点云重建数据中的点云点的位置坐标,可以根据其在目标方向的单调性对该组中的点云点进行排序处理,以恢复解码后的点云点的原始采集顺序,得到解码后的一组或多组点云点。
本申请实施例在对点云编码之前,可以基于激光雷达在一段时间内连续采集的点云点的位置坐标在特定方向上的单调性对点云进行分组处理,然后分别对每个组内的点云进行编码,得到点云码流。解码端在接收到点云码流后,可以对其解码,得到一组或多组点云点,然后针对每组点云点,按照其位置坐标在特定方向上的单调性对点云点进行排序,将各组中排序后的点云点合并,即得到解码后的点云。通过这种方式,在点云编解码前后不会改变点云数据的顺序,即解码得到的点云可以恢复其原始的采集顺序,便于后续的应用。
由于每个组内的点云点的位置坐标在目标方向上的单调性存在两种情况,单调递增或单调递减。在一些实施例,编码端和解码端可以预先约定好单调性,比如,两端约定好每个组内的点云点的位置坐标在目标方向上均为单调递增或均为单调递减,或者奇数组的点云点的位置坐标在目标方向上单调递增,偶数组的点云点的位置坐标在目标方向上单调递减。这样,编码端编码后的码流中无需包含指示单调性的信息,可以尽量减小编码后的点云码流的数据量。
相应的,解码端在对点云码流解码处理得到一组或多组点云点后,可以根据约定的单调性对每个组内的点云点进行排序处理,以恢复点云的采集顺序。比如,如果约定的单调性为单调递增,则根据点云点的位置坐标在目标方向上依次增大的顺序对点云点进行排序,如果约定的单调性为单调递减,则根据点云点的位置坐标在目标方向上依次减小的顺序对点云点进行排序。
在一些实施例中,每个组内的点云点的位置坐标的单调性可能不相同,或者无规律,这时,为了方便解码端知道每个分组中点云点位置坐标的单调性,编码后的码流中也可以包括第一编码信息,用于指示分组得到的一组或多组点云点的位置坐标在目标方向上是单调递增还是单调递减。比如,可以在码流头部信息中加一个比特位用于标识单调性,用1表示单调递增,0表示单调递减,或者0表示单调递增,1表示单调递减。
相应的,解码端在对点云码流解码处理得到一组或多组点云点后,可以先获取码流中的第一编码信息,对第一编码信息进行解码处理,以确定每组点云点的位置坐标在目标方向上的单调性,然后根据确定的单调性对每组点云点进行排序处理。
在一些实施例中,分组得到的一组或多组点云点在目标方向上的单调性可能无规律,因而,可以对每组点云点的位置坐标在所述目标方向上的单调性进行编码。所以,第一编码信息可以包括分组得到的一组或多组点云点中各个分组对应的单调性的编码信息。
相应的,在解码端对码流解码时,可以对各个分组的单调性的编码信息进行进性解码,以确定重建点云数据中各个分组的点云点的位置坐标在目标方向的单调性,并根据单调性对组内的点云点进行排序。
在一些实施例中,分组得到的一组或多组点云点可能存在一定的规律,比如,在同一个目标方向上一直都呈现先单调递增,后单调递减的规律,在这种情况下,只要划分每个分组所依据的目标方向一致,那么连续两个分组的单调性必然相反,比如前一个分组的为单调递增,后一个分组必然是单调递减。因而,可以依照各分组单调性的规律对其中的特定的分组的单调性进行编码,其余分组可以依据单调性规律确定。所以,第一编码信息可以包括分组得到的一组或多组点云点中指定分组对应的单调性的编码信息。
相应的,在解码端对码流解码时,可以对仅对指定分组的单调性的编码信息进行进性解码,以确定重建点云数据中指定分组的点云点的位置坐标在目标方向的单调性,并根据各个分组的单调性规律和解码得到的指定分组的单调性确定其余分组的单调性。
在一些实施例中,为了区分每个分组中点云点对应的单调性的编码信息,每个分组对应的单调性的编码信息记录于该分组的码流的头部信息中。举个例子,如果一组点云点的码流对应点云码流的一帧数据,如果需标识该组的单调性,则将该组的单调性编码信息记录于帧头。从而解码端可以从该分组的码流的头部信息获取该组对应的单调性编码信息,并解码得到该分组点云重建数据对应的单调性。
在一些实施例中,划分分组所依据的目标方向相同的连续两个分组的单调性相反。比如,如图5所示,为一种激光雷达采集点云数据时的扫描轨迹,此种情况下,只要目标方向一致,那么连续两个分组的单调性必然是相反的。
在一些实施例中,如果划分每个分组所依据的目标方向一致,那么连续两个分组的单调性相反,因而,如果所有分组划分方向都一样,则只需对第一个分组的单调性进行编码,因此,指定分组可以是一组或多组点云中的第一个分组。
相应的,解码端在对点云码流进行解码时,可以先从第一组点云点对应码流的头部信息获取第一编码信息,然后对第一编码信息进行解码,得到第一组重建点云数据对应的单调性。其余各组重建点云数据对应的单调性则与前一组重建点云数据对应的单调性相反,从而可以得到各组点云重建数据的单调性。
在一些实施例中,如果所有分组划分方向不完全一样,则只需对目标方向相同的连续几个分组中的第一个分组的单调性进行编码。在这种情况下,指定分组可以是该目标方向相同的连续一个或多个分组中的第一组。举个例子,点云分组后得到1-6个分组,其中,前三个分组依据的目标方向为天顶角方向,后三个分组依据的目标方向为方位角方向,因此,可以仅对1组和3组的单调性编码,其余分组则根据前一个分组的单调性确定,即与前一个分组的单调性相反。
相应的,解码端在进行解码时,可以先从目标方向相同的连续一个或多个分组的码流的头部信息获取第一编码信息,然后对第一编码信息进行解码,以确定目标方向相同的连续一个或多个分组中第一组对应的单调性,目标方向相同的连续一个或多个分组中的其余分组的单调性则根据前一个分组的单调性确定,即与前一个分组相反。
在一些实施例中,编码端和解码端可以预先约定对点云点分组时所参考的目标方向,因此,编码端的码流中无需标识该方向。相应的,解码端也可以直接依据约定的方向对每个组内的点云点进行排序处理。
在一些实施例中,点云分组时所依据的方向可以变动,比如,在一些场景,可以以位置坐标在天顶角方向上的单调性进行分组,在另一些场景,则可以以位置坐标在方位角方向上的单调性进行分组。此时,为了让解码端知道每个分组所参考的目标方向,因而可以在点云的码流中标识出目标方向。所以,在一些实施例中,待编码点云的码流中包括第二编码信息,第二编码信息可以用于指示该目标方向。比如,可以在码流头部信息中添加一个比特位,用1表示天顶角方向,0表示方位角方向。
在一些实施例中,目标方向可以依据点云点的位置坐标实时确定。可以根据点云点的位置坐标确定至少两个待选方向,比如,位置坐标为世界坐标系下的坐标,那么待选方向可以是X、Y、Z三个方向,位置坐标为球坐标系下的坐标,那么待选方向可以是天顶角方向以及方位角方向。针对每个待选方向,可以根据待编码点云中各点云点在该待选方向上的单调性对点云进行分组,并且可以确定第一个分组中点云点的数量,选第一个分组中点云点数量最多待选方向作为目标方向。
举个例子,假设当前点云点的位置坐标为球坐标下的坐标,可以分别按照点云点位置坐标在天顶角方向和方位角方向的单调性对其分组。假设第N个点云点的坐标为(xN,yN,zN),对应球坐标系坐标为若当前点为当前组内的第一个点,则第N+1个点云点的坐标对应球坐标系下的坐标/> 在天顶角方向的变化情况即为θN+1N,在方位角的变化情况即为/>记录两个方向的变化情况,接着计算第N+2个点云点在两个方向的变化情况,直到某个点云点时该点和前一个点在一个方向的变化情况发生了变化,则该组选择按照另一个方向进行划分,接着计算接下来的点云点与前一个点的变化情况,直到选定方向的变化情况发生了变化。这里有一个特殊情况,即两个方向的变化情况在某个点处同时发生了变化,此时选定两个方向均可以,并且当前点即为新的一个组的第一个点,前一个点为上一个组的最后一个点云点。
相应的,解码端在获取到待解码码流后,可以先获取码流中的第二编码信息,然后对第二编码信息进行解码处理,以确定目标方向具体为哪个方向。然后再根据目标方向对每组重建点云数据中的点云点进行排序处理。比如,如果解码得到的目标方向为天顶角方向,则按照点云点的位置坐标在天顶角方向的单调性对点云点进行排序处理。
在一些实施例中,每组点云点分组时所依据的目标方向可能各不一样,因此,可以在每组点云点所对应的码流的头部信息中记录第二编码信息,用于指示该组点云点位置坐标呈现单调性的目标方向。当然,在一些实施例中,每组点云点分组所依据的目标方向一致,因而也可以在整个点云的码流的头部信息记录第二编码信息。举个例子,假设待编码点云对应的码流为一个序列,每个组的点云点对应的编码码流为序列中的一帧,如果每个组的点云点分组时所依据的方向均不一样,因此,可以在每个帧的帧头记录第二编码信息。如果每个组点云点分组是所依据的方向一样,因而,可以在序列头中记录第二编码信息,避免每帧中重复记录。
相应的,解码端在对解码后的各组点云重建数据中的点云点进行排序处理时,可以先从对应的头部信息获取第二编码信息。比如,可以从码流中每一帧的帧头中获取每个组点云点对应的第二编码信息,对第二编码信息解码,以确定每个组点云点对应的目标方向。
目前,针对一些非重复扫描的激光雷达,其在采集三维场景中的点云数据时,其扫描轨迹如图5所示,其中,图中(a)、(b)、(c)分别表示激光雷达在0.2s、0.4s、0.6s的扫描轨迹示意图,在这种情况下,激光雷达在一段时间内扫描得到的多个点云点在球坐标系下的位置坐标在特定方向上才具备单调性。所以,在一些实施例中,点云点的位置坐标可以是点云点在球坐标系下的位置坐标。在一些实施例中,目标方向也可以是球坐标系下的天顶角方向和/或方位角方向。
相应的,解码端在对每组点云点进行排序处理时,也可以先确定每组重建点云数据中的点云点在球坐标系下的位置坐标,然后根据位置坐标在天顶角方向和/或方位角方向的单调性对其排序。
在一些场景中,激光雷达采集的点云数据是按一个个数据包的形式输出,比如,激光雷达将每1ms内采集的点云数据打包成一个数据包,然后输出给编码端,以便编码端进行编码处理。因此,在一些实施例中,编码端可以先将点云采集端输出的至少两个原始点云数据包按照采集顺序合并,得到待编码点云,然后再进行分组以及编码处理。
相应的,解码端可以对各组重建点云数据内的点云点进行排序处理,并将各组排序处理后的一组或多组点云点合并,然后可以进一步对点云点进行分包处理,得到一个或多个点云数据包,从而可以恢复激光雷达输出的原始点云数据包。
当然,为了让解码端在对码流进行解码得到各组内的点云点对应的数据后,可以将其进行分包处理,恢复激光雷达输出的原始点云数据包。因而解码端需知道激光雷达输出的各原始点云数据包中点云点的数量。通常激光雷达在一段时间内采集的多个原始点云数据包可以称为激光雷达的一帧数据,其中,一帧数据里面的多个原始点云数据包中的点云点数量可以相同,也可以不同。在一些场景中,激光雷达采集的每个原始点云数据包中点云点的数量都一致,因而,编码端和解码端可以预先约定每个数据包中的点云点的数量,解码端可以按照约定的数量将解码排序后的点云点进行分包处理。
在一些实施例中,编码得到的点云码流中也可以包括第三编码信息,第三编码信息用于指示点云采集端输出的各原始点云数据包中点云点的数量,以便解码端可以根据第三编码信息对解码排序后的点云点进行分包处理。
相应的,解码端在得到点云码流后,可以从码流中获取第三编码信息,并对第三编码信息进行解码处理,得到点云采集端输出的各原始点云数据包中点云点的数量,在将各组重建点云数据中的点云点排序并合并后,可以根据解码得到数量将合并后的点云重建数据中的点云点分成一个或多个点云数据包。
在一些实施例中,如果每个原始点云数据包的数量相同,则第三编码信息包括一个数量对应的编码信息。比如,每个原始点云数据包中点云点的数量为100个,则第三编码信息通过对数量“100”进行编码得到。
相应的,解码端获取到第三编码信息后,可以解码得到一个数量,然后可以将重建点云数据中的点云点按照该数量进行分包处理,分包处理后的每个点云数据包中点云点的数量与该数量一致。比如,解码端对第三编码信息解码处理,确定数量为100,因而,可以对重建点云数据中的点云点分包处理,每个点云数据包中点云点数量为100。
在一些实施例中,如果每个原始点云数据包包括的点云点的数量不完全相同,则第三编码信息包括多个数量对应的编码信息。比如,激光雷达采集的原始点云数据有5个,各原始点云数据包中点云点的数量分别为100、150、200、250、300,则第三编码信息通过对数量“100、150、200、250、300”编码得到。
相应的,解码端获取到第三编码信息后,可以解码得到多个数量,然后可以将重建点云数据中的点云点按照该数量进行分包处理,分包处理后的每个点云数据包中点云点的数量与该多个数量一致。
在一些实施例中,为了尽可能减小第三编码信息的数据量,节约传输带宽或存储空间,第三编码信息中编码的数量比原始点云数据包的数量少1。举个例子,假设有N个原始点云数据包,那么可以只对前N-1个原始点云数据包的数量进行编码,剩余的点云点则默认为最后一个原始点云数据包中的点云点。
相应的,解码端在获取第三解码信息后,可以解码得到N-1个数量,其中N为原始点云数据包的数量,然后根据这N-1个数量对重建点云数据中的点云点分包处理,得到点云点数量与这N-1个数量相对应的N-1个原始点云数据包,然后剩余的点云点则作为第N个原始点云数据包的点云点。
在一些实施例中,如果每个原始点云数据包括的点云点数量不完全相同,即存在多个数量,这种情况下,在编码端也可以对原始点云数据包的数量进行编码,得到第四编码信息,在编码得到的点云码流中可以包括第四编码信息,以便解码端在进行分包时,可以知道原始点云数据包的数量,然后根据于是点云数据包的数量对重建点云数据中的点云点进行分包处理。
相应的,解码端可以从码流中获取第四解码信息,然后可以解码得到原始点云数据包的数量,然后根据原始点云数据包的数量以及每个原始点云数据包中点云点的数量对重建点云数据中的点云点进行分包处理。
在一些实施例中,如果原始点云数据包中的点云点数量不同,则需要对多个数量进行编码处理,为了减小编码后的数量的数据量,节省存储空间和传输带宽,针对这多个数量,可以采用基准值和残差的方式表示,其中,基准值可以通过这多个原始点云数据包中点云点数量的均值确定,或者基准值也可以基于点云采集端的采集情况设置,残差可以是每个原始点云数据包中点云点的数量与基准值的差值。举个例子,通常激光雷达输出的每个原始点云数据包的数量相差不大,可能在一个数值上下浮动,举个例子,假设激光雷达输出4个原始点云数据包,每个数据包内的点云点数量分别为102、98、99、101,这时,基准值可以设为100,各数量与基准值的残差分别为2、-2、-1、1。这时在对点云数量进行编码时,可以先对原始点云数据包的数量“4”进行编码,然后可以对基准值“100”进行编码,接下来可以编码各数量与基准值的残差“2、-2、-1、1”。其中,基准值和残差可以采用定长码、变长码、截断莱斯码、指数哥伦布码等任一种进行编码,可以根据实际需求选择。
相应的,解码端在获取码流后,可以对第三编码信息进行解码处理,得到基准值和多个残差,然后可以根据基准值和多个残差确定多个数量,即为多个原始点云数据包中对应的数量。
在一些实施例中,可以采用前项差分的方式对该多个数量进行编码,其中,该多个数量中的首个数量对应的编码信息通过对首个数量与设定值的差值编码得到,其余数量对应的编码信息通过对其余数量与其余数量的前一个数量的差值编码得到。举个例子,假设激光雷达输出4个原始点云数据包,每个数据包内的点云点数量分别为102、98、99、101,假设设定值为100,当然设定值可以根据具体需求设置,那么该4个原始点云数据包的数量可以通过对100、2、-4、1、2编码得到,即先编码设定值100,然后对2、-4、1、2进行编码。
相应的,解码端在进行解码时,可以对第三编码信息进行解码处理,得到设定值、首个原始点云数据包的数量与设定值的第一差值、其余的原始点云数据包的数量与所述其余原始点云数据包的前一个点云数包的数量的第二差值;
然后根据设定值和第一差值确定首个原始点云数据包的数量,并根据首个原始点云数据包的数量和第二差值确定其余每个原始点云数据包中的点云点数量。
在一些实施例中,该多个数量中的首个数量对应的编码信息通过对首个数量编码得到,其余数量对应的编码信息通过对其余数量与所述其余数量的前一个数量的差值编码得到。举个例子,假设激光雷达输出4个原始点云数据包,每个数据包内的点云点数量分别为102、98、99、101,那么该4个原始点云数据包的数量可以通过对102、-4、1、2编码得到。
相应的,解码端在进行解码时,对可以先对第三编码信息进行解码处理,得首个原始点云数据包的数量、其余的原始点云数据包的数量与所述其余原始点云数据包的前一个点云数包的数量的第三差值,然后根据首个点云数据包的数量和第三差值确定所述每个点云数据包中的点云点数量。
其中,对原始点云数据包的数量和点云数据包中点云点的数量进行编码的方式很多,比如,可以采用定长码、变长码、截断莱斯码、指数哥伦布码等,具体可以根据实际需求确定本申请实施例不作限制。比如,编码可以采用如下方案:
1.先编码原始点云数据包的数目N,接着编码每个原始点云数据包中点云点的数目的比特数,定长码编码N个值。
2.先编码原始点云数据包的数目N,接着变长码编码每个原始点云数据包中点云点的数目(截断莱斯码,指数哥伦布码)。
3.先编码原始点云数据包的数目N,接着编码定长码所用比特数,接着定长码编码第一个原始点云数据包所含有点云点的数目,后面的N-1个原始点云数据包所含的点云点数先进行前项差分,对差分值利用有符号指数哥伦布进行编码。
4.先编码原始点云数据包的数目N,对每个原始点云数据包中点云点的数量都使用前项差分,对应第一个原始点云数据包中点云点数量则与一个设定的默认值进行前项差分,默认值由编解码端约定好,可以设定为0,或者某个特殊值,不做约束。
5.先编码原始点云数据包的数目N,接着编码定长码所用比特数,接着定长码编码一个基准值,该基准值可以为各原始点云数据包中点云点数量的平均值,或者为根据采集端反馈的数值来进行设定,接着对N个原始点云数据包的中含有点云点的数目依次与设定的基准值进行差分,对差分值利用有符号指数哥伦布进行编码。
在一些实施例中,第三编码信息或第四编码信息可以记录在待编码点云的码流中的每一序列的头部信息中、每一帧的头部信息中、每一条带的头部信息中和/或每一片的头部信息中。举个例子,通常激光雷达在一段时间内采集的多个原始点云数包称为一帧数据,在一些场景,在对激光雷达采集的点云数据进行编码时,如果激光雷达采集的一帧数据对应编码码流中的一个序列,则可以在每个序列的头部信息中记录原始点云数据包的数量和每个原始点云数据包中点云点的数量,这种情况下,基于单调性对点云进行分组得到的每组点云点的码流可以对应编码码流的一帧。在一些场景,在对激光雷达采集的点云数据进行编码时,如果激光雷达采集的一帧数据对应编码码流中的一个帧,那么如果激光雷达中每帧数据中的原始点云数据包中点云点的数量一致,则可以在码流的序列头中记录原始点云数据包的数量以及原始点云数据包中点云点的数量,如果激光雷达中每帧数据中的原始点云数据包中点云点的数量不一致,则可以在码流的帧头中记录原始点云数据包的数量以及原始点云数据包中点云点的数量,这种情况下,基于单调性对点云进行分组得到的每组点云点的码流可以对应编码码流的一个条带。在一些场景,在对激光雷达采集的点云数据进行编码时,如果激光雷达采集的一帧数据对应编码码流中的一个条带,那么如果激光雷达中每帧数据中的原始点云数据包中点云点的数量一致,则可以在码流的帧头中记录原始点云数据包的数量以及原始点云数据包中点云点的数量,如果激光雷达中每帧数据中的原始点云数据包中点云点的数量不一致,则可以在码流的条带头中记录原始点云数据包的数量以及原始点云数据包中点云点的数量。以此类推,在一些场景中,也可以在码流的片头中记录原始点云数据包的数量以及原始点云数据包中点云点的数量。
相应的,解码端在获取到码流后,可以从对应的序列头、帧头、条带头或者片头中获取第三编码信息或第四编码信息,然后对第三编码信息或第四编码信息进行解码,得到原始点云数据包的数量以及各原始点云数据包中点云的数量。
在一些实施例中,待编码点云对应的码流信息中还可以包括用于指示码流中是否包含点云点的数量的信息。比如,可以在码流头部信息中增加一个比特位,用1表示码流中包含点云点数量,接下来则是原始点云数据包的数量以及各原始点云数据包中点云点的数量。用0表示码流中不包含点云点数量的信息。
相应的,解码端也可以对用于指示码流中是否点云点的数量的编码信息进行解码,确定码流是否包括点云点的数量对应的编码信息,然后进一步解码得到原始点云数据包的数量以及各原始点云数据包中点云点的数量。
为了进一步解释本申请实施例提供的编解码方法,以下结合一个具体的实施例加以解释。
非重复扫描激光雷达的扫描轨迹如图5所示,基于其扫描轨迹可知,激光雷达在一段时间内的采集的点云点的位置坐标在球坐标系下的天顶角方向或方位角方向是呈现一定的单调性的。为了在编码过程可以保留点云中点云点的原始采集顺序,以下提供了一种编解码方法,具体如下:
通常激光雷达在一段时间内采集的多个点云数据包称为一帧数据,其中,由于采集过程中的波动,一帧数据中的多个点云数据包的数量通常并不相同。其中,激光雷达采集的一帧数据可以作为编码后的码流中的一个序列。在对点云数据编码之前,可以先将一帧数据内的多个点云数据包中的点云点按照采集先后顺序合并处理,得到待编码点云。然后可以将待编码点云中各点云点在世界坐标系下的坐标转化为在球坐标系下的坐标,并根据点云点在球坐标系下的坐标在天顶角方向或方位角方向对其进行分组处理。
分组之前,可以先确定分组依据的方向,其中,分组依据的方向可以采用贪心算法确定。即分别依据点云点在这两个方向上的单调性对其进行分组,然后取第一组中点云点数量更多的方向作为分组依据的方向。确定分组依据的方向后,即可以进行分组处理,分组得到的每组点云点的坐标在该方向上都是单调递增或单调递减。分组后,即可以对每组点云点进行编码处理。其中,每组点云点编码后得到的码流对应于点云码流中的一帧,在每帧的帧头中可以增加2个比特位,1个比特位用于标识该组点云点分组时依据的方向,比如,用1表示天顶角方向,0表示方位角。1个比特位用于标识改组点云点在该方向上单调递增还是单调递减,比如,用1表示单调递增,0表示单调递减。其中,在码流的每个序列中,可以编码激光雷达原始输出的一帧数据中的多个点云数据包中点云点的数量信息。首先,可以在序列头用1个比特位标识是否码流是否包含点云数量信息,比如,用1表示包含,0表示不包含。然后可以编码点云数据包的数量,比如有5个点云数据包,则对数量“5”进行编码。接着编码多个点云数据包中点云点的数量,在编码前,可以先对多个点云数据包中点云点的数量求平均,得到基准值,然后计算每个点云数据包与基准值的残差,然后分别对基准值和残差进行编码。确定头部信息后,即可以对各组的点云点的位置信息和属性信息进行编码,其中,可以采用多叉树(例如、八叉树,或者八叉树结合二叉树或者四叉树)的编码方式先对点云的位置信息编码,然后再对属性信息编码,其中编码后的码流结构如图6所示。
解码端在接收到码流后,可以从对码流进行解码处理,解码时可以对每个序列的头部信息进行解码,确定该序列中点云数据包的数量,以及各点云数据包中点云点的数量,然后对序列中的每一帧的头部信息进行解码,确定每组点云点的分组时所参考的方向为天顶角方向还是方位角方向,然后确定每组点云点的位置坐标在该方向上是单调递增还是单调递减,然后将解码得到的点云点的位置坐标转换成球坐标系下的坐标,并按照解码得到的方向和单调性对每组点云点进行排序处理,将各组点云点排序后,即合并得到解码后的点云。然后根据解码确定的点云数据包的数量和各点云数据包中点云点的数量对点云点进行分包处理,从而可以还原激光雷达原始输出的点云数据包。
相应地,本申请实施例还提供一种编码装置,如图7所示,所述编码装置70包括处理器71、存储器72、存储于所述存储器72可供所述处理器71执行的计算程序,所述处理器71执行所述计算机程序时实现以下步骤:
获取待编码点云中的点云点的位置坐标;
基于所述位置坐标对所述点云点进行分组处理,得到一组或多组点云点,其中,所述一组或多组点云点中的每组点云点的所述位置坐标在目标方向上单调递增或单调递减;
分别对所述每组点云点进行编码处理,以得到所述待编码点云的码流。
在一些实施例中,所述待编码点云的码流包括第一编码信息,所述第一编码信息用于指示所述一组或多组点云点的位置坐标在所述目标方向上的单调性。
在一些实施例中,所述第一编码信息包括所述一组或多组点云点中各分组对应的所述单调性的编码信息;或
所述第一编码信息仅包括所述一组或多组点云点中指定分组对应的所述单调性的编码信息。
在一些实施例中,每个分组对应的所述单调性的编码信息记录于所述每个分组的码流的头部信息中。
在一些实施例中,所述目标方向相同的连续两个分组的所述单调性相反。
在一些实施例中,若所述一组或多组点云点对应的所述目标方向均相同,则所述指定分组为所述一组或多组点云点中的第一组。
在一些实施例中,若所述一组或多组点云点对应的所述目标方向不完全相同,则所述指定分组为所述目标方向相同的连续一个或多个分组中的第一组。
在一些实施例中,所述待编码点云的码流包括第二编码信息,所述第二编码信息用于指示所述目标方向。
在一些实施例中,所述目标方向基于以下方式确定:
基于所述位置坐标确定至少两个待选方向;
针对每个所述待选方向,基于所述点云点的位置坐标在所述待选方向上的单调性对所述点云点进行分组处理,并确定分组得到的第一组点云点的数量;
将所述第一组点云点的数量最多的待选方向确定为所述目标方向。
在一些实施例中,所述第二编码信息记录于所述每组点云点的码流的头部信息中。
在一些实施例中,所述位置坐标包括所述点云点在球坐标系下的位置坐标。
在一些实施例中,所述目标方向包括天顶角方向和/或方位角方向。
在一些实施例中,所述处理器用于还包括:
获取点云采集端采集的至少两个原始点云数据包;
将所述至少两个原始点云数据包中的点云点按照采集顺序进行合并处理,得到所述待编码点云。
在一些实施例中,所述待编码点云的码流中包括第三编码信息,所述第三编码信息用于指示所述至少两个原始点云数据包中的每个原始点云数据包的点云点的数量。
在一些实施例中,所述每个原始点云数据包的点云点的数量相同,所述第三编码信息包括一个数量对应的编码信息。
在一些实施例中,所述每个原始点云数据包的点云点的数量不完全相同,所述第三编码信息包括多个数量对应的编码信息。
在一些实施例中,所述多个数量比所述至少两个原始点云数据包的数量少1。
在一些实施例中,所述待编码点云的码流中还包括第四编码信息,所述第四编码信息用于指示所述至少两个原始点云数据包的数量。
在一些实施例中,所述多个数量对应的编码信息通过分别对基准值和残差编码得到,所述基准值基于所述至少两个原始点云数据包中点云点的数量的均值确定;
所述残差为每个原始点云数据包中点云点的数量与所述基准值的差值。
在一些实施例中,所述多个数量中的首个数量对应的编码信息通过对所述首个数量与设定值的差值编码得到,其余数量对应的编码信息通过对所述其余数量与所述其余数量的前一个数量的差值编码得到。
在一些实施例中,所述多个数量中的首个数量对应的编码信息通过对所述首个数量编码得到,其余数量对应的编码信息通过对所述其余数量与所述其余数量的前一个数量的差值编码得到。
在一些实施例中,所述第三编码信息或所述第四编码信息记录在所述待编码点云的码流中的以下一个或者多个位置:每一序列的头部信息中、每一帧的头部信息中、每一条带的头部信息中和/或每一片的头部信息中。
相应地,本申请实施例还提供一种解码装置,如图8所示,所述解码装置80包括处理器81、存储器82、存储于所述存储器82可供所述处理器81执行的计算程序,所述处理器81执行所述计算机程序时实现以下步骤:
对待解码的点云码流进行解码处理,得到一组或多组重建点云数据,其中,所述点云码流通过对一组或多组点云点编码得到,所述一组或多组点云点中的每组点云点的位置坐标在目标方向上单调递增或单调递减;
针对每组重建点云数据中的位置坐标,基于所述位置坐标在所述目标方向上的单调性对所述每组重建点云数据中的点云点进行排序处理,得到解码后的一组或多组点云点。
在一些实施例中,所述位置坐标在所述目标方向上的单调性基于与编码端约定的单调性确定;或
所述位置坐标在所述目标方向上的单调性基于所述点云码流中的第一编码信息确定,所述第一编码信息用于指示所述一组或多组点云点的位置坐标在所述目标方向上的单调性。
在一些实施例中,所述第一编码信息包括所述一组或多组重建点云数据中各分组对应的所述单调性的编码信息;或
所述第一编码信息仅包括所述一组或多组重建点云数据中指定分组对应的所述单调性的编码信息。
在一些实施例中,每个分组对应的所述单调性的编码信息记录于所述每个分组的码流的头部信息中。
在一些实施例中,所述目标方向相同的连续两个分组的所述单调性相反。
在一些实施例中,若所述一组或多组点云点对应的所述目标方向均相同,则所述指定分组为所述一组或多组点云中的第一组,基于所述第一编码信息确定所述位置坐标在所述目标方向上的单调性,包括:
对所述第一编码信息解码,以得到所述一组或多组重建点云数据中第一组重建点云数据对应的所述单调性;
根据第一组重建点云数据对应的所述单调性确定其余各组重建点云数据对应的所述单调性。
在一些实施例中,若所述一组或多组点云点对应的所述目标方向不完全相同,则所述指定分组为所述目标方向相同的连续一个或多个分组中的第一组,基于所述第一编码信息确定所述位置坐标在所述目标方向上的单调性,包括:
对所述第一编码信息进行解码,以得到目标方向相同的连续一个或多个分组中的第一组对应的所述单调性;
根据所述目标方向相同的连续一个或多个分组中的第一组对应的单调性确定其余分组的单调性。
在一些实施例中,所述目标方向基于与编码端约定的方向确定;或
所述目标方向基于所述点云码流中的第二编码信息确定,所述第二编码信息用于指示所述目标方向。
在一些实施例中,所述第二编码信息记录于所述每组点云重建数据的码流的头部信息中。
在一些实施例中,所述位置坐标包括所述点云点在球坐标系下的位置坐标。
在一些实施例中,所述目标方向包括天顶角方向和/或方位角方向。
在一些实施例中,所述处理器还用于:
将所述解码后的一组或多组点云点先合并后再分包处理,得到一个或多个点云数据包。
在一些实施例中,所述处理器用于对所述解码后的一组或多组点云点进行分包处理时,具体用于:
确定所述一个或多个点云数据包中的每个点云数据包的点云点的数量;
基于所述数量对所述解码后的点云进行分包处理。
在一些实施例中,所述每个点云数据包的点云点数量基于与编码端约定的数量确定;或者
所述每个点云数据包的点云点数量基于所述点云码流中的第三编码信息确定,所述第三编码信息用于指示点云采集端采集的每个原始点云数据包的点云点数量,编码前的一组或多组点云点通过对所述原始点云数据包合并后再分组得到。
在一些实施例中,所述第三编码信息包括一个数量对应的编码信息,每个所述原始点云数据包的点云点数量相同。
在一些实施例中,所述第三编码信息包括多个数量的编码信息,每个所述原始点云数据包的点云点数量与所述多个数量相对应。
在一些实施例中,所述处理器用于基于所述点云码流中的第三编码信息确定所述每个原始点云数据包中的点云点数量时,具体用于:
对所述第三编码信息进行解码处理,得到基准值和残差;
根据所述基准值和所述残差确定所述每个原始点云数据包中点云点的数量。
在一些实施例中,所述处理器用于基于所述点云码流中的第三编码信息确定所述每个原始点云数据包中的点云点数量时,具体用于:
对所述第三编码信息进行解码处理,得到设定值、首个原始点云数据包的数量与所述设定值的第一差值、其余的原始点云数据包的数量与所述其余原始点云数据包的前一个点云数包的数量的第二差值;
基于所述设定值、所述第一差值和所述第二差值确定所述每个原始点云数据包中的点云点数量。
在一些实施例中,所述处理器用于基于所述点云码流中的第三编码信息确定所述每个点云数据包中的点云点数量时,具体用于:
对所述第三编码信息进行解码处理,得首个原始点云数据包的数量、其余原始点云数据包的数量与所述其余原始点云数据包的前一个点云数包的数量的第三差值;
基于所述首个原始点云数据包的数量以及所述第三差值确定所述每个点云数据包中的点云点数量。
在一些实施例中,所述点云码流中还包括第四编码信息,所述处理器用于将所述解码后的一组或多组点云点进行合并后再分包处理时,具体用于:
对所述第四编码信息进行解码处理,得到所述原始点云数据包的数量;
基于所述原始点云数据包的数量将所述解码后的一组或多组点云合并后再进行分包处理。
在一些实施例中,所述第三编码信息或所述第四编码信息记录在所述点云码流中的以下一个或者多个位置:每一序列的头部信息中、每一帧的头部信息中、每一条带的头部信息中和/或每一片的头部信息中。
此外,本申请实施例还提供一种编解码系统,所述编解码系统包括编码装置和解码装置,所述编码装置用于获取待编码点云中的点云点的位置坐标,基于所述位置坐标对所述点云点进行分组处理,得到一组或多组点云点,其中,所述一组或多组点云点中的每组点云点的所述位置坐标在目标方向上单调递增或单调递减;分别对所述每组点云点进行编码处理,以得到所述待编码点云的码流;
所述解码装置用于对所述码流进行解码处理,得到一组或多组重建点云数据,针对每组重建点云数据中点云点的位置坐标,基于所述位置坐标在所述目标方向上的单调性对所述每组重建点云数据中的点云点进行排序处理,得到解码后的一组或多组点云点。
相应地,本说明书实施例还提供一种计算机存储介质,所述存储介质中存储有程序,所述程序被处理器执行时实现上述任一实施例中的点云编码方法和点云解码方法。
本说明书实施例可采用在一个或多个其中包含有程序代码的存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。计算机可用存储介质包括永久性和非永久性、可移动和非可移动媒体,可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括但不限于:相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上对本发明实施例所提供的方法和装置进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (87)

1.一种点云编码方法,其特征在于,所述方法包括:
获取待编码点云中的点云点的位置坐标;
基于所述位置坐标对所述点云点进行分组处理,得到一组或多组点云点,其中,所述一组或多组点云点中的每组点云点的所述位置坐标在目标方向上单调递增或单调递减;
分别对所述每组点云点进行编码处理,以得到所述待编码点云的码流。
2.根据权利要求1所述的方法,其特征在于,所述待编码点云的码流包括第一编码信息,所述第一编码信息用于指示所述一组或多组点云点的位置坐标在所述目标方向上的单调性。
3.根据权利要求2所述的方法,其特征在于,所述第一编码信息包括所述一组或多组点云点中各分组对应的所述单调性的编码信息;或
所述第一编码信息仅包括所述一组或多组点云点中指定分组对应的所述单调性的编码信息。
4.根据权利要求3所述的方法,其特征在于,每个分组对应的所述单调性的编码信息记录于所述每个分组的码流的头部信息中。
5.根据权利要求4所述的方法,其特征在于,所述目标方向相同的连续两个分组的所述单调性相反。
6.根据权利要求5所述的方法,其特征在于,若所述一组或多组点云点对应的所述目标方向均相同,则所述指定分组为所述一组或多组点云点中的第一组。
7.根据权利要求5所述的方法,其特征在于,若所述一组或多组点云点对应的所述目标方向不完全相同,则所述指定分组为所述目标方向相同的连续一个或多个分组中的第一组。
8.根据权利要求1所述的方法,其特征在于,所述待编码点云的码流包括第二编码信息,所述第二编码信息用于指示所述目标方向。
9.根据权利要求1所述的方法,其特征在于,所述目标方向基于以下方式确定:
基于所述位置坐标确定至少两个待选方向;
针对每个所述待选方向,基于所述点云点的位置坐标在所述待选方向上的单调性对所述点云点进行分组处理,并确定分组得到的第一组点云点的数量;
将所述第一组点云点的数量最多的待选方向确定为所述目标方向。
10.根据权利要求8所述的方法,其特征在于,所述第二编码信息记录于所述每组点云点的码流的头部信息中。
11.根据权利要求1-10任一项所述的方法,其特征在于,所述位置坐标包括所述点云点在球坐标系下的位置坐标。
12.根据权利要求11所述的方法,其特征在于,所述目标方向包括天顶角方向和/或方位角方向。
13.根据权利要求1-10任一项所述的方法,其特征在于,所述方法还包括:
获取点云采集端采集的至少两个原始点云数据包;
将所述至少两个原始点云数据包中的点云点按照采集顺序进行合并处理,得到所述待编码点云。
14.根据权利要求13所述的方法,其特征在于,所述待编码点云的码流中包括第三编码信息,所述第三编码信息用于指示所述至少两个原始点云数据包中的每个原始点云数据包的点云点的数量。
15.根据权利要求14所述的方法,其特征在于,所述每个原始点云数据包的点云点的数量相同,所述第三编码信息包括一个数量对应的编码信息。
16.根据权利要求14所述的方法,其特征在于,所述每个原始点云数据包的点云点的数量不完全相同,所述第三编码信息包括多个数量对应的编码信息。
17.根据权利要求14所述的方法,其特征在于,所述多个数量比所述至少两个原始点云数据包的数量少1。
18.根据权利要求13所述的方法,其特征在于,所述待编码点云的码流中还包括第四编码信息,所述第四编码信息用于指示所述至少两个原始点云数据包的数量。
19.根据权利要求16-18任一项所述的方法,其特征在于,所述多个数量对应的编码信息通过分别对基准值和残差编码得到,所述基准值基于所述至少两个原始点云数据包中点云点的数量的均值确定;
所述残差为每个原始点云数据包中点云点的数量与所述基准值的差值。
20.根据权利要求16-18任一项所述的方法,其特征在于,所述多个数量中的首个数量对应的编码信息通过对所述首个数量与设定值的差值编码得到,其余数量对应的编码信息通过对所述其余数量与所述其余数量的前一个数量的差值编码得到;或
所述多个数量中的首个数量对应的编码信息通过对所述首个数量编码得到,其余数量对应的编码信息通过对所述其余数量与所述其余数量的前一个数量的差值编码得到。
21.根据权利要求14所述的方法,其特征在于,所述第三编码信息记录在所述待编码点云的码流中的以下一个或者多个位置:每一序列的头部信息中、每一帧的头部信息中、每一条带的头部信息中和/或每一片的头部信息中。
22.根据权利要求18所述的方法,其特征在于,所述第四编码信息记录在所述待编码点云的码流中的以下一个或者多个位置:每一序列的头部信息中、每一帧的头部信息中、每一条带的头部信息中和/或每一片的头部信息中。
23.一种点云解码方法,其特征在于,所述方法包括:
对待解码的点云码流进行解码处理,得到一组或多组重建点云数据,其中,所述点云码流通过对一组或多组点云点编码得到,所述一组或多组点云点中的每组点云点的位置坐标在目标方向上单调递增或单调递减;
针对每组重建点云数据中的位置坐标,基于所述位置坐标在所述目标方向上的单调性对所述每组重建点云数据中的点云点进行排序处理,得到解码后的一组或多组点云点。
24.根据权利要求23所述的方法,其特征在于,所述位置坐标在所述目标方向上的单调性基于与编码端约定的单调性确定;或
所述位置坐标在所述目标方向上的单调性基于所述点云码流中的第一编码信息确定,所述第一编码信息用于指示所述一组或多组点云点的位置坐标在所述目标方向上的单调性。
25.根据权利要求24所述的方法,其特征在于,所述第一编码信息包括所述一组或多组重建点云数据中各分组对应的所述单调性的编码信息;或
所述第一编码信息仅包括所述一组或多组重建点云数据中指定分组对应的所述单调性的编码信息。
26.根据权利要求25所述的方法,其特征在于,每个分组对应的所述单调性的编码信息记录于所述每个分组的码流的头部信息中。
27.根据权利要求26所述的方法,其特征在于,所述目标方向相同的连续两个分组的所述单调性相反。
28.根据权利要求27所述的方法,其特征在于,若所述一组或多组点云点对应的所述目标方向均相同,则所述指定分组为所述一组或多组点云中的第一组,基于所述第一编码信息确定所述位置坐标在所述目标方向上的单调性,包括:
对所述第一编码信息解码,以得到所述一组或多组重建点云数据中第一组重建点云数据对应的所述单调性;
根据第一组重建点云数据对应的所述单调性确定其余各组重建点云数据对应的所述单调性。
29.根据权利要求27所述的方法,其特征在于,若所述一组或多组点云点对应的所述目标方向不完全相同,则所述指定分组为所述目标方向相同的连续一个或多个分组中的第一组,基于所述第一编码信息确定所述位置坐标在所述目标方向上的单调性,包括:
对所述第一编码信息进行解码,以得到目标方向相同的连续一个或多个分组中的第一组对应的所述单调性;
根据所述目标方向相同的连续一个或多个分组中的第一组对应的单调性确定其余分组的单调性。
30.根据权利要求23所述的方法,其特征在于,所述目标方向基于与编码端约定的方向确定;或
所述目标方向基于所述点云码流中的第二编码信息确定,所述第二编码信息用于指示所述目标方向。
31.根据权利要求30所述的方法,其特征在于,所述第二编码信息记录于所述每组重建点云数据的码流的头部信息中。
32.根据权利要求23-31任一项所述的方法,其特征在于,所述位置坐标包括所述点云点在球坐标系下的位置坐标。
33.根据权利要求32所述的方法,其特征在于,所述目标方向包括天顶角方向和/或方位角方向。
34.根据权利要求23-31任一项所述的方法,其特征在于,还包括:
将所述解码后的一组或多组点云点先合并后再分包处理,得到一个或多个点云数据包。
35.根据权利要求34所述的方法,其特征在于,对所述解码后的一组或多组点云点进行分包处理,包括:
确定所述一个或多个点云数据包中的每个点云数据包的点云点的数量;
基于所述数量对所述解码后的一组或多组点云进行分包处理。
36.根据权利要求35所述的方法,其特征在于,
所述每个点云数据包的点云点数量基于与编码端约定的数量确定;或者
所述每个点云数据包的点云点数量基于所述点云码流中的第三编码信息确定,所述第三编码信息用于指示点云采集端采集的每个原始点云数据包的点云点数量,编码前的一组或多组点云点通过对所述原始点云数据包合并后再分组得到。
37.根据权利要求36所述的方法,其特征在于,所述第三编码信息包括一个数量对应的编码信息,每个所述原始点云数据包的点云点数量相同。
38.根据权利要求36所述的方法,其特征在于,所述第三编码信息包括多个数量的编码信息,每个所述原始点云数据包的点云点数量与所述多个数量相对应。
39.根据权利要求38所述的方法,其特征在于,基于所述点云码流中的第三编码信息确定所述每个原始点云数据包中的点云点数量,包括:
对所述第三编码信息进行解码处理,得到基准值和残差;根据所述基准值和所述残差确定所述每个原始点云数据包中点云点的数量;或
对所述第三编码信息进行解码处理,得到设定值、首个原始点云数据包的数量与所述设定值的第一差值、其余的原始点云数据包的数量与所述其余原始点云数据包的前一个点云数包的数量的第二差值;基于所述设定值、所述第一差值和所述第二差值确定所述每个原始点云数据包中的点云点数量。
40.根据权利要求38所述的方法,其特征在于,基于所述点云码流中的第三编码信息确定所述每个点云数据包中的点云点数量,包括:
对所述第三编码信息进行解码处理,得首个原始点云数据包的数量、其余原始点云数据包的数量与所述其余原始点云数据包的前一个点云数包的数量的第三差值;
基于所述首个原始点云数据包的数量以及所述第三差值确定所述每个点云数据包中的点云点数量。
41.根据权利要求36所述的方法,其特征在于,所述点云码流中还包括第四编码信息,将所述解码后的一组或多组点云点进行合并后再分包处理,包括:
对所述第四编码信息进行解码处理,得到所述原始点云数据包的数量;
基于所述原始点云数据包的数量将所述解码后的一组或多组点云合并后再进行分包处理。
42.根据权利要求36所述的方法,其特征在于,所述第三编码信息记录在所述点云码流中的以下一个或者多个位置:每一序列的头部信息中、每一帧的头部信息中、每一条带的头部信息中和/或每一片的头部信息中。
43.根据权利要求41所述的方法,其特征在于,所述第四编码信息记录在所述点云码流中的以下一个或者多个位置:每一序列的头部信息中、每一帧的头部信息中、每一条带的头部信息中和/或每一片的头部信息中。
44.一种编码装置,其特征在于,所述编码装置包括处理器、存储器、存储于所述存储器可供所述处理器执行的计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
获取待编码点云中的点云点的位置坐标;
基于所述位置坐标对所述点云点进行分组处理,得到一组或多组点云点,其中,所述一组或多组点云点中的每组点云点的所述位置坐标在目标方向上单调递增或单调递减;
分别对所述每组点云点进行编码处理,以得到所述待编码点云的码流。
45.根据权利要求44所述的装置,其特征在于,所述待编码点云的码流包括第一编码信息,所述第一编码信息用于指示所述一组或多组点云点的位置坐标在所述目标方向上的单调性。
46.根据权利要求45所述的装置,其特征在于,所述第一编码信息包括所述一组或多组点云点中各分组对应的所述单调性的编码信息;或
所述第一编码信息仅包括所述一组或多组点云点中指定分组对应的所述单调性的编码信息。
47.根据权利要求46所述的装置,其特征在于,每个分组对应的所述单调性的编码信息记录于所述每个分组的码流的头部信息中。
48.根据权利要求47所述的装置,其特征在于,所述目标方向相同的连续两个分组的所述单调性相反。
49.根据权利要求48所述的装置,其特征在于,若所述一组或多组点云点对应的所述目标方向均相同,则所述指定分组为所述一组或多组点云点中的第一组。
50.根据权利要求48所述的装置,其特征在于,若所述一组或多组点云点对应的所述目标方向不完全相同,则所述指定分组为所述目标方向相同的连续一个或多个分组中的第一组。
51.根据权利要求44所述的装置,其特征在于,所述待编码点云的码流包括第二编码信息,所述第二编码信息用于指示所述目标方向。
52.根据权利要求44所述的装置,其特征在于,所述目标方向基于以下方式确定:
基于所述位置坐标确定至少两个待选方向;
针对每个所述待选方向,基于所述点云点的位置坐标在所述待选方向上的单调性对所述点云点进行分组处理,并确定分组得到的第一组点云点的数量;
将所述第一组点云点的数量最多的待选方向确定为所述目标方向。
53.根据权利要求51所述的装置,其特征在于,所述第二编码信息记录于所述每组点云点的码流的头部信息中。
54.根据权利要求44-53任一项所述的装置,其特征在于,所述位置坐标包括所述点云点在球坐标系下的位置坐标。
55.根据权利要求54所述的装置,其特征在于,所述目标方向包括天顶角方向和/或方位角方向。
56.根据权利要求44-53任一项所述的装置,其特征在于,所述处理器用于还包括:
获取点云采集端采集的至少两个原始点云数据包;
将所述至少两个原始点云数据包中的点云点按照采集顺序进行合并处理,得到所述待编码点云。
57.根据权利要求56所述的装置,其特征在于,所述待编码点云的码流中包括第三编码信息,所述第三编码信息用于指示所述至少两个原始点云数据包中的每个原始点云数据包的点云点的数量。
58.根据权利要求57所述的装置,其特征在于,所述每个原始点云数据包的点云点的数量相同,所述第三编码信息包括一个数量对应的编码信息。
59.根据权利要求57所述的装置,其特征在于,所述每个原始点云数据包的点云点的数量不完全相同,所述第三编码信息包括多个数量对应的编码信息。
60.根据权利要求59所述的装置,其特征在于,所述多个数量比所述至少两个原始点云数据包的数量少1。
61.根据权利要求56所述的装置,其特征在于,所述待编码点云的码流中还包括第四编码信息,所述第四编码信息用于指示所述至少两个原始点云数据包的数量。
62.根据权利要求59-61任一项所述的装置,其特征在于,所述多个数量对应的编码信息通过分别对基准值和残差编码得到,所述基准值基于所述至少两个原始点云数据包中点云点的数量的均值确定;
所述残差为每个原始点云数据包中点云点的数量与所述基准值的差值。
63.根据权利要求59-61任一项所述的装置,其特征在于,所述多个数量中的首个数量对应的编码信息通过对所述首个数量与设定值的差值编码得到,其余数量对应的编码信息通过对所述其余数量与所述其余数量的前一个数量的差值编码得到;或
所述多个数量中的首个数量对应的编码信息通过对所述首个数量编码得到,其余数量对应的编码信息通过对所述其余数量与所述其余数量的前一个数量的差值编码得到。
64.根据权利要求57所述的装置,其特征在于,所述第三编码信息记录在所述待编码点云的码流中的以下一个或者多个位置:每一序列的头部信息中、每一帧的头部信息中、每一条带的头部信息中和/或每一片的头部信息中。
65.根据权利要求61所述的装置,其特征在于,所述第四编码信息记录在所述待编码点云的码流中的以下一个或者多个位置:每一序列的头部信息中、每一帧的头部信息中、每一条带的头部信息中和/或每一片的头部信息中。
66.一种解码装置,其特征在于,所述解码装置包括处理器、存储器、存储于所述存储器可供所述处理器执行的计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
对待解码的点云码流进行解码处理,得到一组或多组重建点云数据,其中,所述点云码流通过对一组或多组点云点编码得到,所述一组或多组点云点中的每组点云点的位置坐标在目标方向上单调递增或单调递减;
针对每组重建点云数据中的位置坐标,基于所述位置坐标在所述目标方向上的单调性对所述每组重建点云数据中的点云点进行排序处理,得到解码后的一组或多组点云点。
67.根据权利要求66所述的装置,其特征在于,所述位置坐标在所述目标方向上的单调性基于与编码端约定的单调性确定;或
所述位置坐标在所述目标方向上的单调性基于所述点云码流中的第一编码信息确定,所述第一编码信息用于指示所述一组或多组点云点的位置坐标在所述目标方向上的单调性。
68.根据权利要求67所述的装置,其特征在于,所述第一编码信息包括所述一组或多组重建点云数据中各分组对应的所述单调性的编码信息;或
所述第一编码信息仅包括所述一组或多组重建点云数据中指定分组对应的所述单调性的编码信息。
69.根据权利要求68所述的装置,其特征在于,每个分组对应的所述单调性的编码信息记录于所述每个分组的码流的头部信息中。
70.根据权利要求68所述的装置,其特征在于,所述目标方向相同的连续两个分组的所述单调性相反。
71.根据权利要求70所述的装置,其特征在于,若所述一组或多组点云点对应的所述目标方向均相同,则所述指定分组为所述一组或多组点云中的第一组,基于所述第一编码信息确定所述位置坐标在所述目标方向上的单调性,包括:
对所述第一编码信息解码,以得到所述一组或多组重建点云数据中第一组重建点云数据对应的所述单调性;
根据第一组重建点云数据对应的所述单调性确定其余各组重建点云数据对应的所述单调性。
72.根据权利要求70所述的装置,其特征在于,若所述一组或多组点云点对应的所述目标方向不完全相同,则所述指定分组为所述目标方向相同的连续一个或多个分组中的第一组,基于所述第一编码信息确定所述位置坐标在所述目标方向上的单调性,包括:
对所述第一编码信息进行解码,以得到目标方向相同的连续一个或多个分组中的第一组对应的所述单调性;
根据所述目标方向相同的连续一个或多个分组中的第一组对应的单调性确定其余分组的单调性。
73.根据权利要求66所述的装置,其特征在于,所述目标方向基于与编码端约定的方向确定;或
所述目标方向基于所述点云码流中的第二编码信息确定,所述第二编码信息用于指示所述目标方向。
74.根据权利要求73所述的装置,其特征在于,所述第二编码信息记录于所述每组重建点云数据的码流的头部信息中。
75.根据权利要求66-74任一项所述的装置,其特征在于,所述位置坐标包括所述点云点在球坐标系下的位置坐标。
76.根据权利要求75所述的装置,其特征在于,所述目标方向包括天顶角方向和/或方位角方向。
77.根据权利要求66-74任一项所述的装置,其特征在于,所述处理器还用于:
将所述解码后的一组或多组点云点先合并后再分包处理,得到一个或多个点云数据包。
78.根据权利要求77所述的装置,其特征在于,所述处理器用于对所述解码后的一组或多组点云点进行分包处理时,具体用于:
确定所述一个或多个点云数据包中的每个点云数据包的点云点的数量;
基于所述数量对所述解码后的点云进行分包处理。
79.根据权利要求78所述的装置,其特征在于,
所述每个点云数据包的点云点数量基于与编码端约定的数量确定;或者
所述每个点云数据包的点云点数量基于所述点云码流中的第三编码信息确定,所述第三编码信息用于指示点云采集端采集的每个原始点云数据包的点云点数量,编码前的一组或多组点云点通过对所述原始点云数据包合并后再分组得到。
80.根据权利要求79所述的装置,其特征在于,所述第三编码信息包括一个数量对应的编码信息,每个所述原始点云数据包的点云点数量相同。
81.根据权利要求79所述的装置,其特征在于,所述第三编码信息包括多个数量的编码信息,每个所述原始点云数据包的点云点数量与所述多个数量相对应。
82.根据权利要求79所述的装置,其特征在于,所述处理器用于基于所述点云码流中的第三编码信息确定所述每个原始点云数据包中的点云点数量时,具体用于:
对所述第三编码信息进行解码处理,得到基准值和残差;
根据所述基准值和所述残差确定所述每个原始点云数据包中点云点的数量。
83.根据权利要求79所述的装置,其特征在于,所述处理器用于基于所述点云码流中的第三编码信息确定所述每个原始点云数据包中的点云点数量时,具体用于:
对所述第三编码信息进行解码处理,得到设定值、首个原始点云数据包的数量与所述设定值的第一差值、其余的原始点云数据包的数量与所述其余原始点云数据包的前一个点云数包的数量的第二差值;基于所述设定值、所述第一差值和所述第二差值确定所述每个原始点云数据包中的点云点数量;或
对所述第三编码信息进行解码处理,得首个原始点云数据包的数量、其余原始点云数据包的数量与所述其余原始点云数据包的前一个点云数包的数量的第三差值;基于所述首个原始点云数据包的数量以及所述第三差值确定所述每个点云数据包中的点云点数量。
84.根据权利要求79所述的装置,其特征在于,所述点云码流中还包括第四编码信息,所述处理器用于将所述解码后的一组或多组点云点进行合并后再分包处理时,具体用于:
对所述第四编码信息进行解码处理,得到所述原始点云数据包的数量;
基于所述原始点云数据包的数量将所述解码后的一组或多组点云合并后再进行分包处理。
85.根据权利要求79所述的装置,其特征在于,所述第三编码信息记录在所述点云码流中的以下一个或者多个位置:每一序列的头部信息中、每一帧的头部信息中、每一条带的头部信息中和/或每一片的头部信息中。
86.根据权利要求84所述的装置,其特征在于,所述第四编码信息记录在所述点云码流中的以下一个或者多个位置:每一序列的头部信息中、每一帧的头部信息中、每一条带的头部信息中和/或每一片的头部信息中。
87.一种编解码系统,其特征在于,所述编解码系统包括编码装置和解码装置,所述编码装置用于获取待编码点云中的点云点的位置坐标,基于所述位置坐标对所述点云点进行分组处理,得到一组或多组点云点,其中,所述一组或多组点云点中的每组点云点的所述位置坐标在目标方向上单调递增或单调递减;分别对所述每组点云点进行编码处理,以得到所述待编码点云的码流;
所述解码装置用于对所述码流进行解码处理,得到一组或多组重建点云数据,针对每组重建点云数据中点云点的位置坐标,基于所述位置坐标在所述目标方向上的单调性对所述每组重建点云数据中的点云点进行排序处理,得到解码后的一组或多组点云点。
CN202080078252.XA 2020-12-31 2020-12-31 点云编解码方法、装置及系统 Active CN114667728B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2020/142283 WO2022141453A1 (zh) 2020-12-31 2020-12-31 点云编解码方法、装置及系统

Publications (2)

Publication Number Publication Date
CN114667728A CN114667728A (zh) 2022-06-24
CN114667728B true CN114667728B (zh) 2023-10-13

Family

ID=82026280

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080078252.XA Active CN114667728B (zh) 2020-12-31 2020-12-31 点云编解码方法、装置及系统

Country Status (2)

Country Link
CN (1) CN114667728B (zh)
WO (1) WO2022141453A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116233468A (zh) * 2021-12-06 2023-06-06 腾讯科技(深圳)有限公司 点云解码方法、点云编码方法、装置、设备、介质及产品

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111028279A (zh) * 2019-12-12 2020-04-17 商汤集团有限公司 点云数据处理方法及装置、电子设备和存储介质
CN111340766A (zh) * 2020-02-21 2020-06-26 北京市商汤科技开发有限公司 目标对象的检测方法、装置、设备和存储介质
WO2020151496A1 (zh) * 2019-01-23 2020-07-30 华为技术有限公司 点云的编解码方法及装置
CN111602176A (zh) * 2019-06-03 2020-08-28 深圳市大疆创新科技有限公司 点云数据的位置坐标的编解码方法、系统和存储介质
CN111699683A (zh) * 2019-06-13 2020-09-22 深圳市大疆创新科技有限公司 一种点云编码方法、点云解码方法及相关设备
WO2020206669A1 (zh) * 2019-04-09 2020-10-15 北京大学深圳研究生院 一种自适应的点云条带划分方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108632621B (zh) * 2018-05-09 2019-07-02 北京大学深圳研究生院 一种基于层次划分的点云属性压缩方法
CN110662087B (zh) * 2018-06-30 2021-05-11 华为技术有限公司 点云编解码方法和编解码器
EP3595181B1 (en) * 2018-07-11 2023-09-06 BlackBerry Limited Predictor-copy coding mode for coding of point clouds
US11218715B2 (en) * 2019-06-14 2022-01-04 Mediatek Singapore Pte. Ltd. Methods and apparatus for spatial grouping and coordinate signaling for immersive media data tracks

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020151496A1 (zh) * 2019-01-23 2020-07-30 华为技术有限公司 点云的编解码方法及装置
WO2020206669A1 (zh) * 2019-04-09 2020-10-15 北京大学深圳研究生院 一种自适应的点云条带划分方法
CN111602176A (zh) * 2019-06-03 2020-08-28 深圳市大疆创新科技有限公司 点云数据的位置坐标的编解码方法、系统和存储介质
CN111699683A (zh) * 2019-06-13 2020-09-22 深圳市大疆创新科技有限公司 一种点云编码方法、点云解码方法及相关设备
CN111028279A (zh) * 2019-12-12 2020-04-17 商汤集团有限公司 点云数据处理方法及装置、电子设备和存储介质
CN111340766A (zh) * 2020-02-21 2020-06-26 北京市商汤科技开发有限公司 目标对象的检测方法、装置、设备和存储介质

Also Published As

Publication number Publication date
CN114667728A (zh) 2022-06-24
WO2022141453A1 (zh) 2022-07-07

Similar Documents

Publication Publication Date Title
CN111699683B (zh) 一种点云编码方法、点云解码方法及相关设备
CN111615791B (zh) 在点云压缩中使用直接编码的方法和设备
JP7330306B2 (ja) 変換方法、逆変換方法、エンコーダ、デコーダ及び記憶媒体
CN109257604A (zh) 一种基于tmc3点云编码器的颜色属性编码方法
JP5033261B2 (ja) 共有頂点情報を用いた低複雑度3次元メッシュ圧縮装置及び方法
CN113179410B (zh) 一种点云属性的编解码方法、装置和系统
CN114616592A (zh) 用于云压缩的方位角先验和树表示的方法和系统
KR20140133817A (ko) 옥트리 분해에 기초한 3d 모델의 효율적인 압축
CN104243958A (zh) 三维网格数据的编码、解码方法以及编码、解码装置
KR100747489B1 (ko) 3차원 메쉬 정보의 부호화/복호화 방법 및 장치
KR102014309B1 (ko) 종결가능한 공간 트리-기반의 위치 코딩 및 디코딩
CN113812164A (zh) 用于处理点云的方法和装置
US20140324914A1 (en) Position coding based on spatial tree with duplicate points
CN112385236A (zh) 点云的编码和解码方法
CN114667728B (zh) 点云编解码方法、装置及系统
CN114731161A (zh) 用于点云压缩中的树切换的方法和设备
EP1869642A1 (en) Method and apparatus for encoding/decoding 3d mesh information
CN114402621A (zh) 变换方法、逆变换方法、编码器、解码器及存储介质
EP4156108A1 (en) Point cloud data frames compression
US20220327744A1 (en) Apparatus and method for processing point cloud data
US20170230690A1 (en) Error-resilient coder of image sequences and video
CN114730474A (zh) 点云处理方法、编码器、解码器及存储介质
CN117176301B (zh) 中波智能发射机数字化循环取样编码方法及系统
WO2023197122A1 (en) Method for encoding and decoding for trisoup vertex positions
WO2022155929A1 (zh) 点云几何解码方法、装置、计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant