CN110874864A

CN110874864A - 获取对象三维模型的方法、装置、电子设备及系统

Info

Publication number: CN110874864A
Application number: CN201911025166.8A
Authority: CN
Inventors: 王琳; 郭宇隆; 林跃宇; 王琛; 李国花; 张遥; 李竹; 张吉
Original assignee: Shenzhen Orbbec Co Ltd
Current assignee: Shenzhen Orbbec Co Ltd
Priority date: 2019-10-25
Filing date: 2019-10-25
Publication date: 2020-03-10
Anticipated expiration: 2039-10-25
Also published as: WO2021077720A1; CN110874864B

Abstract

本申请适用于计算机视觉技术领域，提供了一种获取对象三维模型的方法、装置、电子设备、系统及可读存储介质，所述方法包括：获取包括待建模对象各个局部的深度图像序列；对所述深度图像序列中第一帧深度图像进行处理，获得初始的三维网络结构以及局部的截断有向距离函数TSDF值；将所述深度图像序列中其余帧深度图像配准融合到所述三维网络结构，并更新所述TSDF值；根据更新后的所述TSDF值对融合后的所述三维网络结构进行优化与重建，获得所述待建模对象的三维模型。本申请提供了一种准确性高且计算量小的重建三维模型的方案。

Description

获取对象三维模型的方法、装置、电子设备及系统

技术领域

本发明涉及计算机视觉技术领域，尤其涉及一种获取对象三维模型的方法、装置、电子设备、系统及可读存储介质。

背景技术

三维重建是计算机视觉发展的未来核心基础技术，目前在开发应用的是针对诸如人体这种有特定形貌和特征的群体，在影视娱乐和生活方面的应用。现有的人体三维重建技术主要有4种：1.人体静止不动，通过多个视点静态采集RGB或者深度图，然后融合来重建人体三维模型，该方法的缺点是使用设备多，且需要相互标点，优点是计算过程简单；2.人体保持姿势不动，站在不同的角度，由单一深度相机拍摄，然后将3D点云数据融合成人体三维模型，该方法操作简单，计算简单，缺点是融合后的三维模型粗糙，不能用于测量；3.人体姿势不再受限，站在不同的角度，由单一深度相机拍摄，采用动态融合方法进行融合，这种方法较为实用，但准确性不高，实际使用中会遇到网络无法准确闭合的问题；4.人体姿势不再受限，站在不同的角度，由单一深度相机拍摄，采用基于先验模型的动态融合方法进行融合，该方法准确性高，但是计算量较大，不适合实时三维重建和测量。

发明内容

本申请实施例提供了一种获取对象三维模型的方法、装置、电子设备、系统及可读存储介质，提供了一种准确性高且计算量小的重建三维模型的方案。

第一方面，本申请实施例提供了一种获取对象三维模型的方法，包括：

获取包括待建模对象各个局部的深度图像序列；

对所述深度图像序列中第一帧深度图像进行处理，获得初始的三维网络结构以及局部的截断有向距离函数TSDF值；

将所述深度图像序列中其余帧深度图像配准后融合到所述三维网络结构，并更新所述TSDF值；

根据更新后的所述TSDF值对融合后的所述三维网络结构进行重建与优化，获得所述待建模对象的三维模型。

通过先对深度图像序列中第一帧深度图像进行处理，再融合其余帧深度图像的信息完成对象的三维重建，一方面，先只需对一帧深度图像进行处理得到初始三维网络，减少了数据计算量，从而节省了算力成本，减少了系统资源占用；另一方面，将多帧深度图像的信息融合到初始的三维网络，提高了模型重建的精度。

第二方面，本申请实施例提供了一种获取对象三维模型的装置，包括：

获取模块，用于获取包括待建模对象各个局部的深度图像；

初始模块，用于对所述深度图像序列中第一帧深度图像进行处理，获得初始的三维网络结构以及局部的截断有向距离函数TSDF值；

更新模块，用于将所述深度图像序列中其余帧深度图像配准后融合到所述三维网络结构，并更新所述TSDF值；

建模模块，用于根据更新后的所述TSDF值对融合后的所述三维网络结构进行重建与优化，获得所述待建模对象的三维模型。

第三方面，本申请实施例提供了一种电子设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如第一方面所述的方法。

第四方面，本申请实施例提供了一种电子设备，所述电子设备配置如第二方面所述的装置。

第五方面，本申请实施例提供了一种获取对象三维模型的系统，包括深度相机和第三方面或第四方面所述的电子设备，所述深度相机用于采集包括待建模对象各个局部的深度图像。

第六方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面所述的方法。

第七方面，本申请实施例提供了一种计算机程序产品，当计算机程序产品在电子设备上运行时，使得电子设备执行上述第一方面所述的方法。

可以理解的是，上述第二方面至第七方面的有益效果可以参见上述第一方面中的相关描述，在此不再赘述。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1是本申请一实施例提供的获取对象三维模型的系统的示意图；

图2是本申请一实施例提供的获取对象三维模型的方法的流程示意图；

图3是本申请另一实施例提供的获取对象三维模型的方法的流程示意图；

图4是本申请一实施例提供的获取对象三维模型的装置的结构示意图；

图5是本申请一实施例提供的电子设备的结构示意图。

具体实施方式

为了说明本发明所述的技术方案，下面将参考附图并结合实施例来进行说明。

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚，完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，所获得的所有其他实施例，都应当属于本发明保护的范围。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。

以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本发明实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中，省略对众所周知的系统、装置、电路以及方法的详细说明，以免不必要的细节妨碍本发明的描述。

需要说明的是，当元件被称为“固定于”或“设置于”另一个元件，它可以直接在另一个元件上或者间接在该另一个元件上。当一个元件被称为是“连接于”另一个元件，它可以是有线连接到另一个元件或无线连接至该另一个元件上，连接用于数据传输作用。

此外，在本发明的说明书、权利要求书及附图中的术语中涉及“第一”或“第二”等的描述仅用于区别类似的对象，而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量，也就是说，这些描述不必用于描述特定的顺序或先后次序。此外，应该理解这些描述在适当情况下可以互换，以便描述本发明的实施例。

请参考图1，图1示出了本申请提供的一种获取对象三维模型的系统，该系统包括深度相机101，电子设备102(图1中所示为手机)，以及服务器103(图1中所示为云服务器)。

深度相机101与电子设备102通过有线或无线网络进行通信连接，实现数据传输；深度相机101与服务器103通过有线或无线网络进行通信连接，实现数据传输；电子设备102与服务器103通过有线或无线网络进行通信连接，实现数据传输。

图1所示的系统中，电子设备102向深度相机101发起拍照指令；深度相机101接收该拍照指令之后，对人体104进行拍照以采集包括人体各个局部的深度图像序列，并将其上传给服务器103；服务器103接收深度图像序列，对深度图像序列处理以获取重建的人体三维(3D)模型。

可选地，在本申请一些实施例中，还可以在服务器103获得人体3D模型后，根据人体3D模型进行三维数据测量，并进一步将测量得到的三维数据推送给电子设备102。

在图1所示的系统中仅示出了一台深度相机，利用一台深度相机101对人体104进行360度拍摄，拍摄完成后可以获得包括人体104各个局部的深度图像序列，深度图像序列包括多帧深度图像。需要说明的是为了提高重建人体模型的精度多帧深度图像组成的深度图像序列应尽可能地包括人体各个局部。

可以理解地，人体104为需要进行三维建模的对象，人体104可以为完整的人体，也可以为部分人体，例如人头，或腰以上的上半身，或腰以下的下半身等。此外，在本申请其他实施例中，人体104可以替换为任何需要进行三维建模的对象，本申请对该对象不做具体限定。

图1中仅示出了深度相机101、电子设备102与服务器103分开部署的情况，如此，在该系统中，数据采集、数据处理、数据显示分别在三个不同的设备中进行，可提升三维数据测量的速度与精度。

在本申请实施例中，深度相机101可以为基于结构光、双目、或飞行时间(Time OfFlight，TOF)技术的深度相机。此外，深度相机101还可以为包括彩色相机模组的深度相机，例如包括RGB相机模组的深度相机，如此，既可以获取包含深度信息的深度图像，又可获取包含丰富纹理信息的彩色图像。

在本申请实施例中，电子设备102可以为可以手机、平板电脑、可穿戴设备、车载设备、增强现实(augmented reality，AR)/虚拟现实(virtual reality，VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本、个人数字助理(personal digital assistant，PDA)等终端设备，本申请实施例对电子设备的具体类型不作任何限制。

在本申请实施例中，所述服务器103包括但不限于：单独的服务器、服务器集群、分布式服务器和云服务器等，本申请实施例对服务器的具体类型不作任何限制。

可以理解地，本领域技术人员可以根据实际需要进行部署，本申请实施例中的图示和与图示对应的阐述不构成对其具体部署形式的限定。

图2示出了本发明一实施例提供的一种获取对象三维模型的方法的实现流程图，该方法包括步骤S110至S140。该方法适用于需要对人体进行三维重建的情形。该方法可以应用于图1所示的服务器。各步骤的具体实现原理如下。

S110，获取包括待建模对象各个局部的深度图像序列。

S120，对所述深度图像序列中第一帧深度图像进行处理，获得初始的三维网络结构以及局部的截断有向距离函数TSDF值。

S130，将所述深度图像序列中其余帧深度图像配准后融合到所述三维网络结构，并更新所述TSDF值。

S140，根据更新后的所述TSDF值对融合后的所述三维网络结构进行重建与优化，获得所述待建模对象的三维模型。

为了更方便地描述本申请实施例，以待建模对象为人体，对本申请实施例进行说明。

在本申请实施例中，利用深度相机对待建模对象进行拍摄以获取一组深度图像序列。如前所述，深度图像序列包括多帧不同角度的人体图像，以尽可能包括人体各个部位的信息，进而提升后续步骤中重建人体三维模型的精度。

为了获取从不同角度拍摄的深度图像序列，在一个实施例中，可通过一个位置固定的深度相机对旋转的人体进行拍摄，例如，受测者保持A-pose站立并以预设角度进行自转，自转期间，深度相机不断对其进行拍摄以获取多帧(例如300帧)不同角度的深度图像。

在另一个实施例中，受测者的位置固定，可转动深度相机对受测者进行360°拍摄，例如将深度相机固定在圆台或环形导轨上，通过控制圆台或环形导轨的旋转来带动深度相机。需要说明的是，上述深度图像都是通过一个深度相机对受测者进行拍摄获得，在另一个实施例中，也可通过多个位置和/或朝向不同的深度相机对受测者进行多方位的拍摄。可以理解的是，任何可以实现深度相机对人体进行360度拍摄的方案都适用于本申请。

一般来说，采集设备在采集或传输图像过程中，由于受传感器材料属性、工作环境、电子元器件和电路结构等影响，会引入各种噪声。可以理解的是，上述利用深度相机采集的深度图像可能含有一定的噪声和空洞，如果直接将原始深度图像用于后续步骤中，可能会对三维重建的精度有不利的影响，因此需要对原始采集的深度图像进行滤波处理，例如对其进行双边滤波处理、或高斯滤波处理等以达到平滑去噪的效果。

深度图像与灰度图像中像素点存储亮度值不同，其像素点存储的是该点到相机的距离，即深度值，但是深度图像本质上也属于二维图像，要进行三维重建，还需要根据深度图像信息计算出各点的三维坐标与法向量，即将各角度拍摄所得深度信息转换为三维点云(将深度数据由图像坐标系转换到相机坐标系，得到当前视角下的点云数据)，并将其进一步转化到世界坐标系下融合生成完整的三维模型。

应该注意的是，采集到的深度图像中并不是每一个像素点都需要转换成点云，这是因为受测者在自转过程中，深度相机会同时拍摄到前景人体和背景信息，而背景信息不属于关注对象，需将其去除，如此可减小后续步骤计算量的同时，也提升了计算精度。具体地，可根据深度相机到受测者的距离估计一个合理的阈值，大于此阈值的深度图像像素点视为背景点，将其去除。应该明白的是，任何可去除背景的算法都可应用于本实施例中，在此不做具体限制。

还需要注意的是，在进行三维重建之前要预先定义一个全局数据立方体(volume)，并按照一定精度将其均匀划分为n×n×n个体素(voxel)，可将体素理解为三维空间的基本单元。建立全局数据立方体的意义是，将多帧不同角度的深度图像对应的点云数据在此融合。需要说明的是，根据一帧深度图像计算得到的一帧点云中的任一点都可映射到数据立方体中的相应体素。一个体素相对于一帧深度图像可以计算出一个截断有向距离函数(Truncated Signed Distance Function，TSDF)值，其中TSDF值定义为：体素相对于深度相机的深度值(该体素与相机光心的距离在光轴方向的投影)与体素在该深度图像中对应点的深度值的有向距离经截断后的结果。截断的意义在于，将具有TSDF值的体素的范围进一步缩小，通过控制截断的阈值，仅对距离重建表面较近的体素进行记录与保存，对距离重建表面较远的体素进行舍弃，如此不仅可减少计算量与内存还可以提高计算速度与精度。

由于深度相机在采集深度图像的时候，获取的是对象表面的信息，因此可以理解的是，深度图像上的每一点都是重建对象表面的点，由此可知TSDF值表明的是该体素到重建表面的最小有向距离值。当TSDF值小于0时，表明该体素在重建物体的外部，即在重建表面的前面；当TSDF值等于0时，表明该体素与对象表面上的该点重合，也即该体素是重建对象表面上的点；当TSDF值大于0时，表明该体素在重建物体的内部，即在重建表面的后面。可以理解的是，越接近重建表面的体素，其TSDF值越接近0。理论上，TSDF值为0的所有体素点构成了对象的表面。

在本申请实施例中，需要对第一帧采集的深度图像数据初始化，示例性地，需要受测者保持A-Pose站立，通过特征点提取算法检测第一帧深度图像的关键点(例如人体的头、腰、和双脚底等)以提取人体骨骼数据，并结合先验模型和边缘约束，计算出初始状态下的模板体型和姿态参数，以及初始的局部的TSDF值，同时得到初始三维网络结构。需要说明的是，上述初始三维网络结构是将第一帧深度图像数据转换成三维点云，并将其进一步转化到世界坐标系下融合生成的三维模型。初始局部TSDF值是将上述三维点云映射到预定义的全局数据立方体的相关体素中并进一步根据TSDF函数求得的。可以理解的是，与直接使用多帧点云数据融合重建受测者三维模型相比，使用先验模型可以让重建的效果更加接近真实人体表面，过滤掉大的噪点，而使用边缘约束可以可以快速准确的得到人体的基本尺寸信息。

需要说明的是，受测者在自转过程中，深度相机拍摄的一帧深度图像仅拍摄到人体的部分信息，多帧通过不同角度拍摄的深度图像，各帧之间包含一定的公共部分，因此要生成完整的三维模型，还需要对深度图像进行配准，具体地是以公共部分为基准，把不同时间、角度、照度等拍照参数下获取的多帧深度图像叠加匹配到统一的坐标系中。在本申请实施例中，图像配准求解的主要参数为模板的姿态参数和重建模型的节点变换参数，其中，姿态参数用来表征人体动作姿态的参数，即用来表示人体的各个关节所对应的角度信息，节点变换参数用来表征上述各个关节的位置移动。在本申请一非限制性示例中，建立能量函数来求解上述参数，并通过ICP算法来求解优化问题以不断迭代上述参数。其中，能量函数主要为数据项E＝E_data，

数据项用于约束重建出的表面和当前帧的深度数据之间的对应关系，其中P为对应点对集合，(v_c,u)即为当前帧深度图数据恢复的三维点u和重建模型上最近点v_c所形成的点对，

为通过重建模型对应的顶点法向，v_c定义为满足距离最小化条件的最近点。通过ICP方法来求解该优化问题，具体是根据上一帧的求解结果建立数据对应关系，然后使用高斯牛顿法求解最小二乘优化问题。

需要明白的是，经过配准后的深度信息仍为空间中散乱无序的点云数据，仅能展现景物的部分信息。因此必须对点云数据进行融合处理，以获得更加精细的重建模型。具体地，使用经过数据配准的数据更新TSDF体数据，方法是将每个有效体素的中心投影到当前帧的深度图像的像平面，并与对应的深度数据求差，然后使用更新公式更新TSDF体数据，更新公式为：

W_i(x)＝W_i-1(x)+w_i(x)

更新的意义是从不同角度去计算TSDF值，增加准确度，其中，TSDF_i(x)为更新后全局数据立体中体素到物体表面的距离，W_i(x)为更新后当前帧全局数据立体中体素的权重，W_i-1(x)为更新后上一帧全局数据立方体中体素的权重，TSDF_i-1(x)为更新后上一帧全局数据立体中体素到物体表面的距离，tsdf_i(x)为根据当前帧深度数据计算得到的全局数据立方体中体素到物体表面的距离，w_i(x)为当前帧全局数据立体中体素的权重。

可以理解的是，经过截断后的体素并不是都有初始局部TSDF值的，没有初始局部TSDF值的体素将会被舍弃，因此对于在步骤S120中计算得到初始局部TSDF值的体素(即有效体素)才会在后续的步骤继续进行处理。可以理解的是，一个体素相对于多个深度图像可求出多个TSDF值，因此在融合过程中来自不同点云中的点可能映射到数据立方体中的同一个体素中，经过加权平均能使体素的值更为准确。由此可知，全局数据立方体中每个体素存储的是加权TSDF值和权重。通过求解优化问题使得深度数据表示的人体和先验模板表示的人体在姿态和体型上一致，并通过求解的结果更新TSDF来重建真实的人体。

进一步地，对每个被处理过的有效体素，采用光线投影法进行遍历，进而重构出物体的三维模型。具体地，从像平面的每一个像素点从视线方向发出一条射线(射线的源点为深度相机的光心)，在光线与体素空间的交点之间等距采样，通过插值计算求出每个采样点，并对采样点颜色采用从前往后的方式混合，将混合后的颜色作为该像素的最终颜色值，从而实现三维重建。

在本申请一个实施例中，还可以通过建立优化的目标函数来对重建的人体三维模型的体型进行优化，优化的目标函数为：E_shape＝E_sdata+E_sreg，其中E_sdata为误差数据项，E_sreg为时间上的正则项。误差数据项的定义为：

其中

为TSDF的线性插值函数，而且仅当采样点的k近邻均为重建体数据时返回有效值，否则返回0。W(v；J(β,θ),θ)为根据深度数据实时变换过的模板参数，并且忽略了姿态相关的形变分量。时间正则项用于约束时间上的一致性，并定义为

本申请实施例中，通过先对深度图像序列中第一帧深度图像进行处理，再融合其余帧深度图像的信息完成对象的三维重建，一方面，先只需对一帧深度图像进行处理得到初始三维网络，减少了数据计算量，从而节省了算力成本，减少了系统资源占用；另一方面，将多帧深度图像的信息融合到初始的三维网络，提高了三维模型重建的精度。

图3示出了本申请一实施例提供的另一种获取对象三维模型的方法，该方法在图2所示实施例的基础上做了进一步限定。如图3所示，该方法包括步骤S110至S150。图3所示实施例中与图2所示实施例的相同步骤，此处不再赘述，请参见图2所示实施例的相应描述。

S110，获取包括待建模对象各个局部的深度图像序列。

S150，对所述三维模型进行测量，获得所述待建模对象的三维数据。

在本申请实施例中，对获得对象的三维模型后，可以对三维模型进行测量，获得对象的三维测量数据。可选地，对三维模型的围长、宽度、或高度等三维数据进行测量。

示例性地，在获取了重建的人体三维模型后，可以根据提取的骨骼数据，使用平面与重建模型具体部位相交的方法的提取测量曲线。计算测量曲线的凸包用以模拟手工皮尺测量，并计算该凸包周长作为测量结果。测量部位包括但不限于：胸围、腰围、臀围、上臂围、下臂围、大腿围、小腿围等。例如，可截取胸部、腰部、或臀部等部位相应高度的二维TSDF图，筛选轮廓点，计算围长。

可选地，在图2或图3所示实施例的基础上，在本申请一些实施例中，在获得待建模对象的三维模型之后，也就是说重建了对象的三维模型后，还可以对三维模型进行进一步地优化处理以获得精度更高的建模结果。

具体地，优化处理包括但不限于：使用泊松重建进行平滑、补洞并简化三维模型；寻找最大连通域保留待建模对象模型并剔除噪声等。

应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限定。

对应于上文实施例所述的获取对象三维模型的方法，图4示出了本申请实施例提供的获取对象三维模型的装置的结构框图，为了便于说明，仅示出了与本申请实施例相关的部分。

参照图4，该装置包括：

获取模块41，用于获取包括待建模对象各个局部的深度图像。

初始模块42，用于对所述深度图像序列中第一帧深度图像进行处理，获得初始的三维网络结构以及局部的截断有向距离函数TSDF值。

更新模块43，用于将所述深度图像序列中其余帧深度图像配准后融合到所述三维网络结构，并更新所述TSDF值。

建模模块44，用于根据更新后的所述TSDF值对融合后的所述三维网络结构进行重建与优化，获得所述待建模对象的三维模型。

需要说明的是，上述装置/单元之间的信息交互、执行过程等内容，由于与本申请方法实施例基于同一构思，其具体功能及带来的技术效果，具体可参见方法实施例部分，此处不再赘述。

所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

本申请实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现可实现上述各个方法实施例中的步骤。

本申请实施例提供了一种计算机程序产品，当计算机程序产品在电子设备上运行时，使得电子设备执行时实现可实现上述各个方法实施例中的步骤。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实现上述实施例方法中的全部或部分流程，可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质至少可以包括：能够将计算机程序代码携带到拍照装置/终端设备的任何实体或装置、记录介质、计算机存储器、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random AccessMemory，RAM)、电载波信号、电信信号以及软件分发介质。例如U盘、移动硬盘、磁碟或者光盘等。在某些司法管辖区，根据立法和专利实践，计算机可读介质不可以是电载波信号和电信信号。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

在本申请所提供的实施例中，应该理解到，所揭露的装置/网络设备和方法，可以通过其它的方式实现。例如，以上所描述的装置/网络设备实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

以上所述实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围，均应包含在本申请的保护范围之内。

Claims

1.一种获取对象三维模型的方法，其特征在于，包括：

获取包括待建模对象各个局部的深度图像序列；

2.如权利要求1所述的方法，其特征在于，所述待建模对象为人体。

3.如权利要求2所述的方法，其特征在于，所述对所述深度图像序列中第一帧深度图像进行处理，获得初始的三维网络结构以及初始的局部的截断有向距离函数TSDF值，包括：

检测所述深度图像序列中第一帧深度图像的关键点以提取所述人体的骨骼数据，将所述骨骼数据结合先验模型和边缘约束，获得初始的三维网络结构以及初始的局部的TSDF值。

4.如权利要求1所述的方法，其特征在于，所述将所述深度图像序列中其余帧深度图像配准，包括：建立能量函数来求解深度图像配准的参数；

所述能量函数为数据项E＝E_data，

数据项用于约束重建出的表面和当前帧深度图像的深度数据之间的对应关系，其中P为对应点对集合，(v_c,u)即为当前帧深度图像的深度数据恢复的三维点u和重建模型上最近点v_c所形成的点对，

为通过重建模型对应的顶点法向，v_c为满足距离最小化条件的最近点。

5.如权利要求1所述的方法，其特征在于：通过建立优化的目标函数来进行所述优化；所述优化的目标函数为：E_shape＝E_sdata+E_sreg，其中，E_sdata为误差数据项，E_sreg为时间上的正则项。

6.如权利要求2所述的方法，其特征在于，还包括：

对所述三维模型进行测量，获得所述待建模对象的三维数据。

7.如权利要求1所述的方法，其特征在于，所述获取包括待建模对象各个局部的深度图像序列之后，还包括：

对所述深度图像序列中的每帧深度图像进行滤波处理，得到滤波后的所述深度图像序列。

8.一种获取对象三维模型的装置，其特征在于，包括：

获取模块，用于获取包括待建模对象各个局部的深度图像；

9.一种获取对象三维模型的系统，其特征在于，包括深度相机和电子设备，所述深度相机用于采集包括待建模对象各个局部的深度图像；所述电子设备配置有如权利要求8所述的装置。

10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的方法。