CN114266874A - 一种三维数据生成方法、装置、设备和存储介质 - Google Patents

一种三维数据生成方法、装置、设备和存储介质 Download PDF

Info

Publication number
CN114266874A
CN114266874A CN202111555407.7A CN202111555407A CN114266874A CN 114266874 A CN114266874 A CN 114266874A CN 202111555407 A CN202111555407 A CN 202111555407A CN 114266874 A CN114266874 A CN 114266874A
Authority
CN
China
Prior art keywords
data
vertex
global
array
index
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111555407.7A
Other languages
English (en)
Inventor
陈锦明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shining 3D Technology Co Ltd
Original Assignee
Shining 3D Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shining 3D Technology Co Ltd filed Critical Shining 3D Technology Co Ltd
Priority to CN202111555407.7A priority Critical patent/CN114266874A/zh
Publication of CN114266874A publication Critical patent/CN114266874A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Image Generation (AREA)

Abstract

本公开涉及一种三维数据生成方法、装置、设备和存储介质。三维数据生成方法包括:获取待扫描物体的每帧图像,确定每帧图像对应的网格数据,基于每帧图像对应的网格数据和每帧图像的上一帧图像对应的网格数据,生成增量数据,增量数据包括顶点更新数据和索引更新数据,将增量数据发送至图形处理器,以使图形处理器基于增量数据更新全局顶点数组和全局索引数组,并基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据。本公开的方法生成每帧图像对应的、包括顶点更新数据和索引更新数据的增量数据,并将增量数据传输至图形处理器,可以降低传输带宽以及传输量,并加快渲染待扫描物体的三维数据的速度。

Description

一种三维数据生成方法、装置、设备和存储介质
技术领域
本公开涉及数据技术领域,尤其涉及一种三维数据生成方法、装置、设备和存储介质。
背景技术
目前,三维扫描仪在扫描阶段多是以重建三维点云数据为主,三维点云数据实际上是离散的点,缺乏拓扑信息,显示效果比较差。三维扫描仪在扫描阶段还可以重建三角网格,三角网格的显示效果比较好,但是数据量比较大,增加了传输带宽,且传输速度慢,对扫描的帧率也会有影响。
综上所述,三维扫描仪在扫描阶段重建不同数据时,会出现显示效果差,或者数据量大、传输速度慢以及扫描帧率低的问题。
发明内容
为了解决上述技术问题,本公开提供了一种三维数据生成方法、装置、设备和存储介质,生成每帧图像对应的增量数据,降低传输带宽以及传输量,并加快渲染速度。
第一方面,本公开实施例提供了一种三维数据生成方法,方法包括:
获取待扫描物体的每帧图像;
确定每帧图像对应的网格数据;
基于每帧图像对应的网格数据和每帧图像的上帧图像对应的网格数据,生成增量数据;增量数据包括顶点更新数据和索引更新数据;
将增量数据发送至图形处理器,以使图形处理器基于增量数据更新全局顶点数组和全局索引数组,并基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据。
第二方面,本公开实施例提供了一种三维数据生成方法,方法包括:
接收待扫描物体对应的增量数据,增量数据包括顶点更新数据和索引更新数据;
根据增量数据更新全局顶点数组和全局索引数组;
基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据。
第三方面,本公开实施例提供了一种三维数据生成装置,装置包括:
获取单元,用于获取待扫描物体的每帧图像;
确定单元,用于确定每帧图像对应的网格数据;
生成单元,用于基于每帧图像对应的网格数据和每帧图像的上帧图像对应的网格数据,生成增量数据;增量数据包括顶点更新数据和索引更新数据;
发送单元,用于将增量数据发送至图形处理器,以使图形处理器基于增量数据更新全局顶点数组和全局索引数组,并基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据。
第四方面,本公开实施例提供了一种三维数据生成装置,装置包括:
接收单元,用于接收待扫描物体对应的增量数据,增量数据包括顶点更新数据和索引更新数据;
更新单元,用于根据增量数据更新全局顶点数组和全局索引数组;
渲染单元,用于基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据。
第五方面,本公开实施例提供了一种电子设备,包括:
存储器;
处理器;以及
计算机程序;
其中,计算机程序存储在存储器中,并被配置为由处理器执行以实现如上述的三维数据生成方法。
第六方面,本公开实施例提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现如上述的三维数据生成方法的步骤。
本公开涉及一种三维数据生成方法、装置、设备和存储介质。三维数据生成方法包括:获取待扫描物体的每帧图像,确定每帧图像对应的网格数据,基于每帧图像对应的网格数据和每帧图像的上一帧图像对应的网格数据,生成增量数据,增量数据包括顶点更新数据和索引更新数据,将增量数据发送至图形处理器,以使图形处理器基于增量数据更新全局顶点数组和全局索引数组,并基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据。本公开的方法生成每帧图像对应的、包括顶点更新数据和索引更新数据的增量数据,并将增量数据传输至图形处理器,可以降低传输带宽以及传输量,并加快渲染待扫描物体的三维数据的速度。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的一种三维数据生成方法的流程示意图;
图2为本公开实施例提供的一种应用场景的示意图;
图3为本公开实施例提供的另一种三维数据生成方法的流程示意图;
图4为本公开实施例提供的另一种三维数据生成方法的流程示意图;
图5为本公开实施例提供的另一种三维数据生成方法的流程示意图;
图6为本公开实施例提供的一种三维数据生成装置的结构示意图;
图7为本公开实施例提供的另一种三维数据生成装置的结构示意图;
图8为本公开实施例提供的一种电子设备的结构示意图。
具体实施方式
为了能够更清楚地理解本公开的上述目的、特征和优点,下面将对本公开的方案进行进一步描述。需要说明的是,在不冲突的情况下,本公开的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本公开,但本公开还可以采用其他不同于在此描述的方式来实施;显然,说明书中的实施例只是本公开的一部分实施例,而不是全部的实施例。
具体的,扫描仪在扫描过程中,传统的数据流为:扫描仪通过摄像头采集图片,然后通过三维重建算法获得单帧图片的点云数据,再通过跟踪融合算法获得全局点云数据,最后通过封装全局点云数据获得三角网格,其中,中央处理器(central processing unit,CPU)将点云数据传输至图形处理器(graphics processing unit,GPU),随后图形处理器对三角网格进行渲染,但是该种方法显示效果比较差;其中,点云数据具体包括:坐标值、顶点颜色、顶点法向和其他属性,坐标值包括3个浮点型数据类型,共12个字节,顶点颜色包括3个浮点型数据类型,共12个字节,顶点法向也包括3个浮点型数据类型,共12个字节,其他属性包括1个字节。还有一种数据流为:扫描仪通过摄像头采集图片,然后通过三维重建算法获得单帧图片的三角网格,随后传输单帧图片的三角网格,再通过跟踪融合算法获得全局三角网格,最后通过后处理对三角网格进行优化,得到最终的三角网格,其中,中央处理器端会将每帧三角网格组合成完整的三角网格,将组合后的完整三角网格传输至图形处理器端进行渲染,但是每帧需要渲染的三角网格的数据传输量非常大,而且随着扫描的进行,三角网格的规模可能达到几千万个三角形,例如6000万个三角形的模型,三角网格中的顶点索引数据量就可能有700兆(M),三角网格中的顶点数据大约也有1个第一代移动通信技术(1G)的存储容量,要传输的单帧数据就有1.7G,几乎达到无法渲染的程度,也极大影响渲染帧率。综上,上述两种数据流中传输的单帧图片的三角网格的数据量比较大,传输速度慢,且单帧图片的三角网格从中央处理器端传输到图形处理器端需要的带宽也大幅增加,操作不灵活。
针对上述技术问题,本公开实施例提供了一种三维数据生成方法,具体通过下述一个或多个实施例进行详细说明。
图1为本公开实施例提供的一种三维数据生成方法的流程示意图,应用于中央处理器,也就是中央处理器端执行的操作,具体包括如图1所示的如下步骤S110至S140:
S110、获取待扫描物体的每帧图像。
可理解的,图2为本公开实施例提供的一种应用场景的示意图,三维数据生成方法可以应用在终端21或服务器22上。一种可能的应用场景为,三维扫描仪扫描待扫描物体的过程中得到多帧图像,将多帧图像传输至终端21,终端21中的中央处理器根据多帧图像中的每帧图像生成对应的增量数据,随后将增量数据传输至终端21中的图形处理器进行渲染,得到待扫描物体对应的三维数据,三维数据可以是待测物体的三维模型。另一种可能的实现方式,终端21接收三维扫描仪传输的多帧图像,随后终端21中的中央处理器根据多帧图像中的每帧图像生成对应的增量数据,并将增量数据传输至服务器22,服务器22对增量数据进行渲染,得到待扫描物体对应的三维数据。还有一种可以能的实现方式,扫描仪直接将扫描得到的多帧图像传输至服务器22,服务器22中的中央处理器根据多帧图像中的每帧图像生成对应的增量数据,随后将增量数据传输至服务器22中的图形处理器进行渲染,得到待扫描物体对应的三维数据。下面以终端21实现三维数据生成方法为例,进行详细说明。
可理解的,扫描仪扫描待扫描物体生成多帧图像,并将多帧图像传输至终端,终端获取传输的多帧图像,扫描仪可以一次向终端传输多帧图像,也可以每次只传输一帧图像。
S120、确定每帧图像对应的网格数据。
可理解的,在上述S110的基础上,终端获取到一帧图像后,终端中的中央处理器通过三维重建算法对该帧图像进行处理,得到该帧图像对应的三角网格数据,三角网格数据中包括顶点数组和索引数据,顶点数组包括上述的坐标值、顶点颜色、顶点法向和其他属性,索引数组中的每个三角形包括3个整型类型,共12个字节。
S130、基于每帧图像对应的网格数据和每帧图像的上帧图像对应的网格数据,生成增量数据;增量数据包括顶点更新数据和索引更新数据。
可理解的,在上述S120的基础上,终端获取该帧图像的上一帧图像对应的三角网格数据,终端中的中央处理器根据该帧图像对应的三角网格数据和上一帧图像对应的三角网格数据进行比对分析,生成增量数据,增量数据中包括顶点更新数据和索引更新数据进行处理的标识和数据,例如包括增加标识、删除标识和修改标识。可理解的是,增量数据的数据量要小于全量数据,也就是增量数据的数据量要小于通常方法中央处理器要传输至图形处理器的三角网格数据的数据量,增量数据可以理解为对顶点数组和索引数据进行修改的数据,增量数据可以用来删除、增加或修改顶点数组和索引数据中的数据。
S140、将增量数据发送至图形处理器,以使图形处理器基于增量数据更新全局顶点数组和全局索引数组,并基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据。
可理解的,在上述S130的基础上,终端中的中央处理器得到增量数据后,将增量数据传输至终端中的图形处理器,图形处理器基于增量数据对存储空间存储的全局顶点数据和全局索引数组进行更新,更新具体包括对全局顶点数据和全局索引数组中的数据(顶点数据或者三角形数据)进行删除、修改以及增加操作。
可选的,生成增量数据之前,方法还包括:获取待扫描物体的第一帧图像;确定第一帧图像对应的网格数据,并将第一帧图像对应的网格数据发送至图形处理器,以使图形处理器根据第一帧图像对应的网格数据构建全局顶点数组和全局索引数组。
可理解的,终端获取扫描仪生成的第一帧图像,随后中央处理器确定第一帧图像对应的三角网格数据,并根据该三角网格数据生成具有增加标识的增量数据,并将该增量数据传输至图形处理器,图形处理器根据增量数据中的增加标识构建并在存储空间存储全局顶点数据和全局索引数据。
可选的,根据第一帧图像对应的网格数据构建全局顶点数组和全局索引数组,具体包括:确定第一帧图像对应的网格数据中网格的顶点数量和面数量;根据顶点数量和面数量构建全局顶点数组和全局索引数组。
可理解的,图形处理器获取到第一帧图像对应的增量数据后,确定增量数据中总的顶点的数量,并根据总的顶点的数量确定三角形面的数量,随后根据当前总的顶点数量和面数量分别创建并存储全局顶点数组和全局索引数组。可理解的是,第一帧图像生成的增量数据中只包括增加标识,第一帧图像之后的其他帧图像生成的增量数据中可能包括增加标识、删除标识和修改标识中的至少一种标识。例如第二帧图像对应的增量数据中包括删除标识,那么图形处理器就会根据该删除标识,删除上述根据第一帧图像对应的增量数据所构建的全局顶点数组和全局索引数组中删除标识对应的数据,可能会删除全局顶点数组和全局索引数组中的顶点、三角形和/或索引数据等。
本公开实施例提供的一种三维数据生成方法,通过获取待扫描物体的每帧图像,确定每帧图像对应的网格数据,基于每帧图像对应的网格数据和每帧图像的上一帧图像对应的网格数据,生成增量数据,增量数据包括顶点更新数据和索引更新数据,将增量数据发送至图形处理器,以使图形处理器基于增量数据更新全局顶点数组和全局索引数组,并基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据。本公开的方法生成每帧图像对应的、包括顶点更新数据和索引更新数据的增量数据,并将增量数据传输至图形处理器,可以降低传输带宽以及传输量,并加快渲染待扫描物体的三维数据的速度。
在上述实施例的基础上,图3为本公开实施例提供的另一种三维数据生成方法的流程示意图,应用于图像处理器,也就是终端中的图形处理器执行三维数据生成方法,具体包括如图3所示的如下步骤S310至S330:
S310、接收待扫描物体对应的增量数据,增量数据包括顶点更新数据和索引更新数据。
可理解的,终端中的图形处理器接收中央处理器传输的待扫描物体对应的增量数据,增量数据中具体包括顶点更新数据和索引更新数据,顶点更新数据用于对存储的全局顶点数据进行更新,索引更新数据用于对存储的全局索引数组进行更新。
可选的,顶点更新数据包括顶点类别和顶点索引,顶点类别用于标识顶点更新数据的类型,顶点索引用于索引顶点更新数据在全局顶点数组中的位置。
可理解的,顶点更新数据包括顶点数据、顶点类别和顶点索引,顶点类别用于标识顶点数据的类型,也就是标识该顶点数据是坐标值、顶点颜色还是顶点法向,其中,顶点类别具体包括0、1、2,顶点类别为0表示该顶点数据中包括的数据为位置信息,顶点类别为1表示该顶点数据中包括的数据为法向信息,顶点类别为2表示该顶点数据中包括的数据为颜色信息。顶点索引用于索引顶点数据在全局顶点数组中的位置以及要执行的操作,执行的操作可以是删除操作,若顶点索引中的索引值为负整数,例如索引值为-1时,表示将顶点数据删除,若顶点索引中的索引值为非负整数,索引值就表示全局顶点数组中的具体索引位置,也就是确定该顶点数据需要作用到全局顶点数组中哪个顶点。
可选的,索引更新数据包括多边形面索引和多边形顶点索引,多边形面索引用于索引索引更新数据在全局索引数组中的位置,多边形顶点索引用于索引索引更新数据中多边形的顶点在全局索引数组中的位置。
可理解的,索引更新数据包括多边形面索引和多边形顶点索引,多边形面索引用于索引该索引更新数据在全局索引数组中的位置,多边形面索引具体可以是三角形面索引,当三角形面索引的索引值为-1时,表示在全局索引数组中删除该索引更新数据中的三角形,当三角形面索引的索引值为非负整数时,表示该索引更新数据在全局索引数组中的具体位置,也就是该索引更新数据需要作用到全局索引数组中哪个三角形。多边形顶点索引用于索引该索引更新数据中多边形的顶点在全局索引数组中的位置,多边形顶点索引也就是三角形三个顶点的索引值,表明三角形的三个顶点在全局索引数组中的位置,多边形顶点索引可以是3个无符号整型数据。
S320、根据增量数据更新全局顶点数组和全局索引数组。
可理解的,在上述S310的基础上,图形处理器根据增量数据中的顶点更新数据和索引更新数据分别对存储的全局顶点数组和全局索引数组进行更新,可以根据顶点更新数据在全局顶点数组中增加顶点、删除顶点或者修改顶点数据等,可以根据索引更新数据删除全局索引数组中的三角形。
可选的,上述S320中具体包括:在计算队列中以大于预设阈值的帧率对增量数据进行解析。
可理解的,图形处理器接收到增量数据后会执行解析和渲染两个步骤,对增量数据进行解析,并对解析后的增量数据进行渲染。图形处理器内包括计算队列和渲染队列,可以在计算队列中以大于预设阈值的帧率对增量数据进行解析,预设阈值可以是60,可理解的是,终端屏幕的刷新率为60帧,也就是需要解析的速度要高于屏幕刷新的速度,避免后续不能及时提供渲染数据,进而影响屏幕刷新。
S330、基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据。
可选的,上述S330中具体包括:将更新后的全局索引数组和更新后的全局顶点数组中的顶点数据进行变换处理;对变换处理后的顶点数据中的至少部分多边形进行剔除,生成片元;将片元进行渲染,得到待扫描物体的三维数据。
可理解的,在上述S320的基础上,图形处理器基于上述更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据,渲染的步骤具体包括:将更新后的全局索引数组和更新后的全局顶点数组中的顶点数据进行变换处理,随后对变换处理后的顶点数据中标记为删除的三角形进行剔除,生成片元,也就是删除顶点数据中被标记为删除的三角形后生成片元,最后将生成的片元进行渲染,得到待扫描物体的三维模型,渲染的步骤可以参见图形处理器进行渲染的步骤,具体说明在此不作赘述。
可选的,上述S330中具体包括:在渲染队列中以预设阈值的帧率基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据。
可理解的,在图形处理器的渲染队列中以预设阈值的帧率,基于更新后的全局顶点数组和更新后的全局索引数组进行渲染,得到待扫描物体的三维数据,终端屏幕刷新率为60帧,因此渲染的帧率也可以是以60帧的速度进行渲染,以使渲染和屏幕刷新保持合理的刷新帧率。可理解的是,图形处理器中的渲染队列和计算队列分别对应中央处理器的一个线程,渲染可以基于中央处理器的主线程和渲染队列实现,解析可以基于中央处理器中除主线程之外的其他线程以及计算队列实现,实现多线程的并行计算架构,能加快生成三维数据的速度,让增量更新保持和三维重建算法同样的帧率(大于60的帧率),而让渲染保持和屏幕刷新保持一样的帧率(等于60的帧率),能够有效的减少不必要的渲染刷新次数,减少消耗。
本公开实施例提供的一种三维数据生成方法,通过接收待扫描物体对应的增量数据,增量数据包括顶点更新数据和索引更新数据,根据增量数据更新全局顶点数组和全局索引数组,基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据,提供了一种基于增量数据更新全局顶点数组和全局索引数组的方法,有效减少了中央处理器端到图形处理器端的传输带宽,加快了渲染速度。
在上述实施例的基础上,图4为本公开实施例提供的另一种三维数据生成方法的流程示意图,可选的,上述根据增量数据更新全局顶点数组和全局索引数组,具体包括如图4所示的如下步骤S410至S430:
S410、解析增量数据,解析后的增量数据中包括解析后的顶点更新数据和解析后的索引更新数据。
可理解的,图形处理器接收到增量数据后,基于中央处理器的某一线程和图形处理器中的计算队列,对增量数据进行解析,具体的,图形处理器的计算着色器(Computeshader)执行解析操作,得到解析后的顶点更新数据和解析后的索引更新数据。
S420、根据解析后的顶点更新数据更新全局顶点数组。
可选的,根据解析后的顶点更新数据更新全局顶点数组,包括:根据解析后的顶点更新数据中的顶点索引,在全局顶点数组中确定目标顶点;根据解析后的顶点更新数据中的顶点类别对应的数据更新目标顶点对应的数据。
可理解的,在上述S410的基础上,基于中央处理器中的主线程和图形处理器中渲染队列,根据解析后的顶点更新数据更新全局顶点数组,具体的,根据解析后的顶点更新数据中的顶点索引,在全局顶点中确定要修改的目标顶点,随后根据顶点类别对应的信息更新全局顶点数组目标顶点位置处的数据。例如,在全局顶点数组中目标顶点的位置处增加顶点数据,当顶点类别为0时,在全局顶点数组中目标顶点的位置处增加位置信息,还可以在全局顶点数组中目标顶点位置处删除顶点更新数据中涉及到的顶点数据,还可以在全局顶点数组中目标顶点位置处修改顶点更新数据中涉及到的顶点数据。
S430、根据解析后的索引更新数据更新全局索引数组。
可选的,根据解析后的索引更新数据更新全局索引数组,包括:根据解析后的索引更新数据中的多边形面索引,在全局索引数组中确定目标多边形;根据解析后的索引更新数据中的多边形顶点索引对应的数据更新目标多边形的顶点对应的数据。
可理解的,在上述S420的基础上,根据解析后的索引更新数据中的多边形面索引中的索引值,在全局索引数组中确定目标多边形,也就是确定待更新的目标三角形,随后根据解析后的索引更新数据中的多边形顶点索引对应的数据,更新目标多边形的顶点对应的数据,上述确定目标三角形后,也可以更新三角形三个顶点的至少一个顶点。
本公开实施例提供的一种三维数据生成方法,通过解析增量数据,解析后的增量数据中包括解析后的顶点更新数据和解析后的索引更新数据,根据解析后的顶点更新数据更新全局顶点数组,根据解析后的索引更新数据更新全局索引数组,在中央处理器的不同线程以及图形处理器的不同队列中,执行解析操作和更新操作,能够快速的完成增量数据的解析,以及更新全局顶点数组和更新全局索引数组等操作,也能加快后续的渲染操作。
在上述实施例的基础上,图5为本公开实施例提供的另一种三维数据生成方法的流程示意图,三维数据生成方法还包括如图5所示的如下步骤S510至S530:
S510、若存储全局顶点数组和全局索引数组的第一存储空间满时,获取第二存储空间。
可理解的,随着增量数据的陆续生成,增量数据从中央处理器不断传到图形处理器,图形处理器也会不断的通过增量数据更新全局顶点数组和全局索引数组,导致终端存储全局顶点数组和全局索引数组的第一存储空间存储满了时,获取第二存储空间,第二存储空间用于存储后续全局顶点数组和全局索引数组更新后的至少部分数据。可理解的,当存储空间满了需要扩容时,通常情况下会分三步执行,具体包括:申请更大的新空间,将旧空间的数据拷贝到新空间内,释放旧空间,并使用新空间进行后续的根据增量数据更新全局顶点数组和全局索引数组操作,但是该种方法,在扩容的那一帧会出现明显的卡顿现象,且从旧空间拷贝到新空间也比较费时,极易影响后续的全局顶点数组和全局索引数组的更新。
S520、将第二存储空间和第一存储空间进行绑定。
可理解的,在上述S510的基础上,将第二存储空间(新空间)和第一存储空间(旧空间)进行绑定,也就是获取新空间后,不需要执行将旧空间数据拷贝到新空间以及释放旧空间的操作,具体的可以通过使用离散绑定(sparse binding)技术,将第二存储空间和第一存储空间进行绑定,绑定后的第二存储空间和第一存储空间在图形处理器进行更新时会理解为一个新的空间,能够从第二存储空间和第一存储空间内直接读取需要的全局顶点数组和全局索引数组,也能够存储全局顶点数组和全局索引数组中更新后的数据,也就是第二存储空间和第一存储空间都处于可使用状态。例如,第一存储空间存储的是0-20G的数据,第二存储空间会存储20-40G的数据,第一存储空间和第二存储空间在使用上是连续的,但是第一存储空间和第二存储空间在物理上可能是分开的,也就是在终端上可能看到第一存储空间和第二存储空间分为两个区域的情况。
S530、根据增量数据更新第二存储空间和/或第一存储空间内的全局顶点数组以及全局索引数组。
可理解的,在上述S520的基础上,完成存储空间的绑定和扩容后,图形处理器获取新的增量数据,随后图形处理器就可以根据增量数据直接读取、更新第二存储空间和/或第一存储空间内存储的全局顶点数组以及全局索引数组。
本公开实施例提供的一种三维数据生成方法,在存储全局顶点数组和全局索引数组的第一存储空间满时,获取新的第二存储空间,并将新的第二存储空间和旧的第一存储空间进行绑定,随后图形处理器获取新的增量数据后,就可以根据增量数据直接读取、更新第二存储空间和/或第一存储空间按内存储的全局顶点数组以及全局索引数组。本公开提供的方法,在进行存储空间扩容时不会出现明显的卡顿现象,将新空间和旧空间进行绑定作为一个完整的新空间进行使用,也就是新空间和旧空间是连续的,不需要将旧空间的内容拷贝到新空间,也不需要释放旧空间。
图6为本公开实施例提供的三维数据生成装置的结构示意图。本公开实施例提供的三维数据生成装置可以执行上述三维数据生成方法实施例提供的处理流程,如图6所示,三维数据生成装置600包括:
获取单元610,用于获取待扫描物体的每帧图像;
确定单元620,用于确定每帧图像对应的网格数据;
生成单元630,用于基于每帧图像对应的网格数据和每帧图像的上帧图像对应的网格数据,生成增量数据;增量数据包括顶点更新数据和索引更新数据;
发送单元640,用于将增量数据发送至图形处理器,以使图形处理器基于增量数据更新全局顶点数组和全局索引数组,并基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据。
可选的,装置600中还包括处理单元,处理单元用于生成增量数据之前,具体用于:
获取待扫描物体的第一帧图像;
确定第一帧图像对应的网格数据,并将第一帧图像对应的网格数据发送至图形处理器,以使图形处理器根据第一帧图像对应的网格数据构建全局顶点数组和全局索引数组。
可选的,处理单元中根据第一帧图像对应的网格数据构建全局顶点数组和全局索引数组,具体用于:
确定第一帧图像对应的网格数据中网格的顶点数量和面数量;
根据顶点数量和面数量构建全局顶点数组和全局索引数组。
图6所示实施例的三维数据生成装置可用于执行上述方法实施例的技术方案,其实现原理和技术效果类似,此处不再赘述。
图7为本公开实施例提供的三维数据生成装置的结构示意图。本公开实施例提供的三维数据生成装置可以执行上述三维数据生成方法实施例提供的处理流程,如图7所示,三维数据生成装置700包括:
接收单元710,用于接收待扫描物体对应的增量数据,增量数据包括顶点更新数据和索引更新数据;
更新单元720,用于根据增量数据更新全局顶点数组和全局索引数组;
渲染单元730,用于基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据。
可选的,装置700中顶点更新数据包括顶点类别和顶点索引,顶点类别用于标识顶点更新数据的类型,顶点索引用于索引顶点更新数据在全局顶点数组中的位置;
索引更新数据包括多边形面索引和多边形顶点索引,多边形面索引用于索引索引更新数据在全局索引数组中的位置,多边形顶点索引用于索引索引更新数据中多边形的顶点在全局索引数组中的位置。
可选的,更新单元720中根据增量数据更新全局顶点数组和全局索引数组,具体用于:
解析增量数据,解析后的增量数据中包括解析后的顶点更新数据和解析后的索引更新数据;
根据解析后的顶点更新数据更新全局顶点数组;
根据解析后的索引更新数据更新全局索引数组。
可选的,更新单元720中根据解析后的顶点更新数据更新全局顶点数组,具体用于:
根据解析后的顶点更新数据中的顶点索引,在全局顶点数组中确定目标顶点;
根据解析后的顶点更新数据中的顶点类别对应的数据更新目标顶点对应的数据。
可选的,更新单元720中,根据解析后的索引更新数据更新全局索引数组,具体用于:
根据解析后的索引更新数据中的多边形面索引,在全局索引数组中确定目标多边形;
根据解析后的索引更新数据中的多边形顶点索引对应的数据更新目标多边形的顶点对应的数据。
可选的,渲染单元730中基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据,具体用于:
将更新后的全局索引数组和更新后的全局顶点数组中的顶点数据进行变换处理;
对变换处理后的顶点数据中的至少部分多边形进行剔除,生成片元;
将片元进行渲染,得到待扫描物体的三维数据。
可选的,装置700中还包括存储单元,存储单元具体用于:
若存储增量数据的第一存储空间满时,获取第二存储空间;
将第二存储空间和第一存储空间进行绑定;
根据增量数据更新全局顶点数组和全局索引数组,包括:
根据增量数据更新第二存储空间和/或第一存储空间内的全局顶点数组以及全局索引数组。
可选的,更新数据720中根据增量数据更新全局顶点数组和全局索引数组,具体用于:
在计算队列中以大于预设阈值的帧率对增量数据进行解析。
可选的,渲染单元730中基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据,具体用于:
在渲染队列中以预设阈值的帧率基于更新后的全局顶点数组和更新后的全局索引数组渲染待扫描物体的三维数据。
图7所示实施例的三维数据生成装置可用于执行上述方法实施例的技术方案,其实现原理和技术效果类似,此处不再赘述。
图8为本公开实施例提供的一种电子设备的结构示意图。本公开实施例提供的电子设备可以执行上述实施例提供的处理流程,如图8所示,电子设备800包括:处理器810、通讯接口820和存储器830;其中,计算机程序存储在存储器830中,并被配置为由处理器810执行如上述的三维数据生成方法。
另外,本公开实施例还提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行以实现上述实施例所述的三维数据生成方法。
此外,本公开实施例还提供了一种计算机程序产品,该计算机程序产品包括计算机程序或指令,该计算机程序或指令被处理器执行时实现如上所述的三维数据生成方法。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本公开的具体实施方式,使本领域技术人员能够理解或实现本公开。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本公开的精神或范围的情况下,在其它实施例中实现。因此,本公开将不会被限制于本文所述的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (13)

1.一种三维数据生成方法,其特征在于,所述方法包括:
获取待扫描物体的每帧图像;
确定所述每帧图像对应的网格数据;
基于所述每帧图像对应的网格数据和所述每帧图像的上帧图像对应的网格数据,生成增量数据;所述增量数据包括顶点更新数据和索引更新数据;
将所述增量数据发送至图形处理器,以使所述图形处理器基于所述增量数据更新全局顶点数组和全局索引数组,并基于更新后的全局顶点数组和更新后的全局索引数组渲染所述待扫描物体的三维数据。
2.根据权利要求1所述的方法,其特征在于,所述生成增量数据之前,所述方法还包括:
获取所述待扫描物体的第一帧图像;
确定所述第一帧图像对应的网格数据,并将所述第一帧图像对应的网格数据发送至所述图形处理器,以使所述图形处理器根据所述第一帧图像对应的网格数据构建全局顶点数组和全局索引数组。
3.根据权利要求2所述的方法,其特征在于,所述根据所述第一帧图像对应的网格数据构建全局顶点数组和全局索引数组,包括:
确定所述第一帧图像对应的网格数据中网格的顶点数量和面数量;
根据所述顶点数量和面数量构建所述全局顶点数组和所述全局索引数组。
4.一种三维数据生成方法,其特征在于,所述方法包括:
接收待扫描物体对应的增量数据,所述增量数据包括顶点更新数据和索引更新数据;
根据所述增量数据更新全局顶点数组和全局索引数组;
基于更新后的全局顶点数组和更新后的全局索引数组渲染所述待扫描物体的三维数据。
5.根据权利要求4所述的方法,其特征在于,所述顶点更新数据包括顶点类别和顶点索引,所述顶点类别用于标识所述顶点更新数据的类型,所述顶点索引用于索引所述顶点更新数据在所述全局顶点数组中的位置;
所述索引更新数据包括多边形面索引和多边形顶点索引,所述多边形面索引用于索引所述索引更新数据在所述全局索引数组中的位置,所述多边形顶点索引用于索引所述索引更新数据中多边形的顶点在所述全局索引数组中的位置。
6.根据权利要求5所述的方法,其特征在于,所述根据所述增量数据更新全局顶点数组和全局索引数组,包括:
解析所述增量数据,解析后的增量数据中包括解析后的顶点更新数据和解析后的索引更新数据;
根据所述解析后的顶点更新数据更新全局顶点数组;
根据所述解析后的索引更新数据更新全局索引数组。
7.根据权利要求6所述的方法,其特征在于,所述根据所述解析后的顶点更新数据更新全局顶点数组,包括:
根据所述解析后的顶点更新数据中的顶点索引,在所述全局顶点数组中确定目标顶点;
根据所述解析后的顶点更新数据中的顶点类别对应的数据更新所述目标顶点对应的数据。
8.根据权利要求6所述的方法,其特征在于,所述根据所述解析后的索引更新数据更新全局索引数组,包括:
根据所述解析后的索引更新数据中的多边形面索引,在所述全局索引数组中确定目标多边形;
根据所述解析后的索引更新数据中的多边形顶点索引对应的数据更新所述目标多边形的顶点对应的数据。
9.根据权利要求4所述的方法,其特征在于,所述基于更新后的全局顶点数组和更新后的全局索引数组渲染所述待扫描物体的三维数据,包括:
将更新后的全局索引数组和更新后的全局顶点数组中的顶点数据进行变换处理;
对变换处理后的顶点数据中的至少部分多边形进行剔除,生成片元;
将所述片元进行渲染,得到所述待扫描物体的三维数据。
10.根据权利要求4所述的方法,其特征在于,所述方法还包括:
若存储所述全局顶点数组和全局索引数组的第一存储空间满时,获取第二存储空间;
将所述第二存储空间和所述第一存储空间进行绑定;
所述根据所述增量数据更新全局顶点数组和全局索引数组,包括:
根据所述增量数据更新所述第二存储空间和/或所述第一存储空间内的全局顶点数组以及全局索引数组。
11.根据权利要求4所述的方法,其特征在于,所述根据所述增量数据更新全局顶点数组和全局索引数组,包括:
在计算队列中以大于预设阈值的帧率对所述增量数据进行解析;
所述基于更新后的全局顶点数组和更新后的全局索引数组渲染所述待扫描物体的三维数据,包括:
在渲染队列中以所述预设阈值的帧率基于更新后的全局顶点数组和更新后的全局索引数组渲染所述待扫描物体的三维数据。
12.一种三维数据生成装置,其特征在于,所述装置包括:
获取单元,用于获取待扫描物体的每帧图像;
确定单元,用于确定所述每帧图像对应的网格数据;
生成单元,用于基于所述每帧图像对应的网格数据和所述每帧图像的上帧图像对应的网格数据,生成增量数据;所述增量数据包括顶点更新数据和索引更新数据;
发送单元,用于将所述增量数据发送至图形处理器,以使所述图形处理器基于所述增量数据更新全局顶点数组和全局索引数组,并基于更新后的全局顶点数组和更新后的全局索引数组渲染所述待扫描物体的三维数据。
13.一种三维数据生成装置,其特征在于,所述装置包括:
接收单元,用于接收待扫描物体对应的增量数据,所述增量数据包括顶点更新数据和索引更新数据;
更新单元,用于根据所述增量数据更新全局顶点数组和全局索引数组;
渲染单元,用于基于更新后的全局顶点数组和更新后的全局索引数组渲染所述待扫描物体的三维数据。
CN202111555407.7A 2021-12-17 2021-12-17 一种三维数据生成方法、装置、设备和存储介质 Pending CN114266874A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111555407.7A CN114266874A (zh) 2021-12-17 2021-12-17 一种三维数据生成方法、装置、设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111555407.7A CN114266874A (zh) 2021-12-17 2021-12-17 一种三维数据生成方法、装置、设备和存储介质

Publications (1)

Publication Number Publication Date
CN114266874A true CN114266874A (zh) 2022-04-01

Family

ID=80827878

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111555407.7A Pending CN114266874A (zh) 2021-12-17 2021-12-17 一种三维数据生成方法、装置、设备和存储介质

Country Status (1)

Country Link
CN (1) CN114266874A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023197762A1 (zh) * 2022-04-13 2023-10-19 腾讯科技(深圳)有限公司 图像渲染方法、装置、电子设备、计算机可读存储介质及计算机程序产品

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023197762A1 (zh) * 2022-04-13 2023-10-19 腾讯科技(深圳)有限公司 图像渲染方法、装置、电子设备、计算机可读存储介质及计算机程序产品

Similar Documents

Publication Publication Date Title
EP2458872B1 (en) Adaptive method and system for encoding digital images for the internet
CN109260708A (zh) 地图渲染方法、装置以及计算机设备
CN110059143A (zh) 一种基于遥感影像瓦片数据的地图绘制方法
CN110751696A (zh) 将BIM模型数据转化为glTF数据的方法、装置、设备及介质
CN114297206B (zh) 精细化高效动态瓦片地图服务发布方法、介质及电子设备
CN111346378B (zh) 游戏画面传输方法、装置、存储介质和设备
EP3864627A1 (en) Conversion of infrastructure model geometry to a tile format
CN110297924A (zh) 点云数据的处理及渲染方法、装置、设备及存储介质
KR102516008B1 (ko) 포인트 클라우드 데이터를 이용한 복셀 다운 샘플링 방법 및 이를 실행하는 장치
CN114494024B (zh) 图像渲染方法、装置、设备及存储介质
CN114266874A (zh) 一种三维数据生成方法、装置、设备和存储介质
US8379037B1 (en) Multi-resolution texture aggregation
KR20150106846A (ko) 표시 장치에서의 그래픽 렌더링 및 그와 관련된 개선
CN106503171B (zh) 一种矢量数据的处理方法及装置
US20230343021A1 (en) Visible element determination method and apparatus, storage medium, and electronic device
CN111402369A (zh) 互动广告的处理方法、装置、终端设备及存储介质
CA2567631A1 (en) Displaying graphical textures
CN113240786B (zh) 一种视频点云渲染方法、装置、电子设备及存储介质
CN115797522A (zh) 数字内容创作的实时可视化方法及装置
CN115238345A (zh) Bim模型处理方法、装置、存储介质及电子装置
CN110136235B (zh) 三维bim模型外壳提取方法、装置及计算机设备
CN111383312B (zh) 一种基于粒子系统的大规模知识图谱可视化方法
CN116737852A (zh) 一种基于矢量瓦片数据的矢量绘图方法、装置和电子设备
JPH10198823A (ja) 映像生成装置
CN114219697A (zh) 一种基于cuda的运动目标实时热力图生成方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination