CN114255244A - 一种牙颌三维模型分割方法和系统 - Google Patents

一种牙颌三维模型分割方法和系统 Download PDF

Info

Publication number
CN114255244A
CN114255244A CN202111549844.8A CN202111549844A CN114255244A CN 114255244 A CN114255244 A CN 114255244A CN 202111549844 A CN202111549844 A CN 202111549844A CN 114255244 A CN114255244 A CN 114255244A
Authority
CN
China
Prior art keywords
vertex
dental
ith
dimensional model
features
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111549844.8A
Other languages
English (en)
Inventor
廖文和
申鑫泽
张长东
刘婷婷
贾修一
李大伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Science and Technology
Original Assignee
Nanjing University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Science and Technology filed Critical Nanjing University of Science and Technology
Priority to CN202111549844.8A priority Critical patent/CN114255244A/zh
Publication of CN114255244A publication Critical patent/CN114255244A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/20Design optimisation, verification or simulation
    • G06F30/27Design optimisation, verification or simulation using machine learning, e.g. artificial intelligence, neural networks, support vector machines [SVM] or training a model
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Geometry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Molecular Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Computer Hardware Design (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Graphics (AREA)
  • Dental Tools And Instruments Or Auxiliary Dental Instruments (AREA)

Abstract

本发明提供一种牙颌三维模型分割方法和系统,其中方法包括获取牙颌三维模型中每个顶点的手工特征;将每个顶点的手工特征与笛卡尔坐标拼接,得到每个顶点输入特征;将每个顶点输入特征依次输入深度学习点云分割网络,得到每个顶点的牙位标签;将每个顶点的牙位标签依次映射至牙颌三维模型,得到相邻两个牙齿的以及牙齿和牙龈的边界线。本发明融合使用了多种轻量级的手工特征,相比于仅使用法向和曲率信息的算法,能够更好的捕获牙颌模型多尺度、多层次的局部特征,对牙颌分割任务的精度提升可以起到显著作用;在手工特征的基础上用深度学习进一步提取三维牙颌模型特征,降低了网络学习成本,减少了深度网络对训练样本数量以及训练周期的依赖性。

Description

一种牙颌三维模型分割方法和系统
技术领域
本发明属于计算机视觉技术领域,尤其涉及一种牙颌三维模型分割方法和系统。
背景技术
计算机辅助设计(CAD)现已广泛应用于齿科领域,如正畸诊断、牙体修复、牙齿重排等。对牙颌三维模型的分割是齿科CAD的基础,精确的牙齿分割结果对后续分析与设计起着关键作用。目前牙颌三维模型分割算法可根据是否使用纯手工特征分为传统分割算法以及基于深度学习的分割算法。
传统牙颌模型分割算法一般依赖手工构造的特征,如法向量、曲率等。典型算法包括基于曲率的算法、基于轮廓线的算法、基于投影的算法、基于调和场的算法等。手工特征的设计对最终分割精度有较大影响,在曲率不明显的边界区域,传统分割算法往往由于手工特征的相似性而表现出较差的分割精度。此外,对操作者专业经验要求高以及高维特征计算耗时严重也是目前传统分割算法普遍存在的问题,其整体分割效果要低于后来兴起的基于深度学习的方法。
目前基于深度学习的牙颌三维模型分割算法倾向于使用原始的点云坐标以及法向特征。区别于传统分割算法所依赖的手工构造特征,基于深度学习的方法一般通过多层邻域建立以及特征聚合的方式实现局部特征的提取,典型的特征提取算法为PointNet++,后续多项研究均在此基础上进行。基于深度学习的方法在特征提取能力上显著强于人工设计的特征,在分割精度上通常可以达到更高的指标值。但目前该类方法的效果通常依赖于人工标注数据集的规模,而三维图像数据获取难度大、标注成本高,往往难以达到深度学习的数据集规模要求。与之相对的,传统分割算法所使用的基于规则构造的人工特征具有天然普适性,并不依赖于大规模的数据集,且相对于深度学习提取的特征具有更清晰的几何意义和更好的可解释性。现有的基于人工特征以及深度学习的算法各有优缺点,且尚未很好的结合。
发明内容
本发明针对现有技术中的不足,提供一种牙颌三维模型分割方法和系统。
第一方面,本发明提供一种牙颌三维模型分割方法,包括:
获取牙颌三维模型中每个顶点的手工特征;
将每个顶点的手工特征与笛卡尔坐标拼接,得到每个顶点的输入特征;
将每个顶点的输入特征依次输入深度学习点云分割网络,得到每个顶点的牙位标签;
将每个顶点的牙位标签依次映射至牙颌三维模型,得到相邻两个牙齿的以及牙齿和牙龈的边界线。
进一步地,所述获取牙颌三维模型中每个顶点的手工特征,包括:
根据以下公式计算每个顶点的拉普拉斯坐标:
Figure BDA0003416860360000021
其中,δi为牙颌三维模型中第i个顶点的拉普拉斯坐标;vi为牙颌三维模型中第i个顶点;di为与第i个顶点直接相连的顶点的数量;vj为牙颌三维模型中第j个顶点;Ni={j(i,j)∈K},为顶点i的领域顶点集合,K为邻域内所有顶点的集合;
获取每个顶点的法向量;
获取顶点主曲率、高斯曲率和平均曲率;
获取每个顶点的RSD特征;
获取每个顶点的FPFH特征。
进一步地,所述将每个顶点的手工特征与笛卡尔坐标拼接,得到每个顶点的输入特征,包括:
根据以下公式计算每个顶点的输入特征:
Figure BDA0003416860360000022
其中,Fin为第i个顶点的输入特征;vi牙颌三维模型中第i个顶点;δi为牙颌三维模型中第i个顶点的拉普拉斯坐标;Mi为第i个顶点的法向量;k1i、k2i均为第i个顶点的主曲率;Ki为第i个顶点的高斯曲率;Hi为第i个顶点的平均曲率;FRSDi为第i个顶点的RSD特征;FFPFHi为第i个顶点的FPFH特征。
进一步地,所述将每个顶点的输入特征依次输入深度学习点云分割网络,得到每个顶点的牙位标签,包括:
将每个顶点的输入特征依次输入至深度学习点云分割网络的三个特征提取层,在每个特征提取层中使用最远点采样算法进行降采样,利用不同半径参数的球形查询算法确定降采样点的邻域,对每个邻域内的点使用PointNet算法进行局部特征提取,将提取自不同半径邻域内点的特征拼接作为当前特征提取层的第一输出特征;
将每个顶点的第一输出特征依次输入至深度学习点云分割网络的三个特征传播层,第m个特征传播层将前一层的输出以及第4-m个特征提取层的输入拼接起来作为当前特征传播层的输入,在每个特征传播层中,通过三线性插值将特征由下采样点向周围点扩散,并用MLP算法对特征降维作为当前特征传播层的第二输出特征;
将每个顶点的第二输出特征输入至两个MLP网络,使输出特征通道数等于语义类别的数目,将上下牙龈分别视作两个语义类别,将降维后的特征输入至Softmax函数得到当前点归属于不同语义类别的概率,取概率最大值对应的类别为牙位标签。
第二方面,本发明提供一种牙颌三维模型分割系统,包括:
获取模块,用于获取牙颌三维模型中每个顶点的手工特征;
拼接模块,用于将每个顶点的手工特征与笛卡尔坐标拼接,得到每个顶点的输入特征;
输入模块,用于将每个顶点的输入特征依次输入深度学习点云分割网络,得到每个顶点的牙位标签;
映射模块,用于将每个顶点的牙位标签依次映射至牙颌三维模型,得到相邻两个牙齿的以及牙齿和牙龈的边界线。
进一步地,所述获取模块包括:
第一计算单元,用于根据以下公式计算每个顶点的拉普拉斯坐标:
Figure BDA0003416860360000031
其中,δi为牙颌三维模型中第i个顶点的拉普拉斯坐标;vi为牙颌三维模型中第i个顶点;di为与第i个顶点直接相连的顶点的数量;vj为牙颌三维模型中第j个顶点;Ni={j(i,j)∈K},为顶点i的领域顶点集合,K为邻域内所有顶点的集合;
第一获取单元,用于获取每个顶点的法向量;
第二获取单元,用于获取顶点主曲率、高斯曲率和平均曲率;
第三获取单元,用于获取每个顶点的RSD特征;
第四获取单元,用于获取每个顶点的FPFH特征。
进一步地,所述拼接模块包括:
第二计算单元,用于根据以下公式计算每个顶点的输入特征:
Figure BDA0003416860360000032
其中,Fin为第i个顶点的输入特征;vi牙颌三维模型中第i个顶点;δi为牙颌三维模型中第i个顶点的拉普拉斯坐标;Mi为第i个顶点的法向量;k1i、k2i均为第i个顶点的主曲率;Ki为第i个顶点的高斯曲率;Hi为第i个顶点的平均曲率;FRSDi为第i个顶点的RSD特征;FFPFHi为第i个顶点的FPFH特征。
本发明提供一种牙颌三维模型分割方法和系统,其中方法包括获取牙颌三维模型中每个顶点的手工特征;将每个顶点的手工特征与笛卡尔坐标拼接,得到每个顶点的输入特征;将每个顶点的输入特征依次输入深度学习点云分割网络,得到每个顶点的牙位标签;将每个顶点的牙位标签依次映射至牙颌三维模型,得到相邻两个牙齿的以及牙齿和牙龈的边界线。本发明采用上述方案,融合使用了多种轻量级的手工特征,相比于仅使用法向和曲率信息的算法,能够更好的捕获牙颌模型多尺度、多层次的局部特征,对牙颌分割任务的精度提升可以起到显著作用;将几类手工特征直接引入深度学习框架,在手工特征的基础上用深度学习进一步提取三维牙颌模型特征,降低了网络的学习成本,减少了深度网络对训练样本数量以及训练周期的依赖性。
附图说明
为了更清楚地说明本发明的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种牙颌三维模型分割方法的工作流程图;
图2为本发明实施例提供的一种牙颌三维模型分割系统的结构示意图;
图3为本发明实施例提供的一种牙颌三维模型分割方法的结构示意图;
图4为本发明实施例提供的一种牙颌三维模型分割方法中基于深度学习的分割网络框架图;
图5为本发明实施例提供的一种牙颌三维模型分割方法中上下颌模型图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整的描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如背景技术中所述,现有的基于人工特征以及深度学习的算法各有优缺点,且尚未很好的结合。因此为了解决上述问题,本发明实施例提供一种牙颌三维模型分割方法,如图3所示,图3为牙颌三维模型分割方法的结构示意图。
具体的,如图1所示,所述分割方法包括:
步骤S101,获取牙颌三维模型中每个顶点的手工特征。
本步骤中,牙颌三维模型中通常包含数万到数十万顶点及三角面片根据模型中包含的顶点坐标以及三角面片提供的邻接信息可提取各种手工特征来对模型局部或全局信息进行表征。
根据以下公式计算每个顶点的拉普拉斯坐标:
Figure BDA0003416860360000051
其中,δi为牙颌三维模型中第i个顶点的拉普拉斯坐标;vi为牙颌三维模型中第i个顶点;di为与第i个顶点直接相连的顶点的数量;vj为牙颌三维模型中第j个顶点;Ni={j(i,j)∈K},为顶点i的领域顶点集合,K为邻域内所有顶点的集合。
获取每个顶点的法向量,可通过三角面片任意两边向量叉乘并归一化的方法计算得到。再依次遍历所有顶点,找出所有与目标顶点相邻的三角面片,将所有与目标顶点相邻的三角面片平均法向量作为目标顶点的法向量。
获取顶点主曲率、高斯曲率和平均曲率。假设Ni为以三角面片为最小单元组成的模型中,顶点vi的邻域,A(vi)表示顶点vi局部平均区域的面积,f(vi)为由三角面片为最小单元组成的模型定义的函数在顶点vi处的值。则Laplace-Beltrami算子的余切离散化形式为:
Figure BDA0003416860360000052
其中,vj∈Ni(vi)表示顶点vi领域的所有顶点;αij和βij分别为邻域三角面片中以vj-vi为公共边的两个三角面片中与vj-vi相对的两个角。
第i个顶点的平均曲率计算式为:
Figure BDA0003416860360000053
假设θj为顶点vi邻域三角面片中以顶点vi为顶点的角,则第i个顶点高斯曲率为:
Figure BDA0003416860360000054
两个主曲率可由平均曲率和高斯曲率计算得到:
Figure BDA0003416860360000055
其中,k1i、k2i均为第i个顶点的主曲率;Ki为第i个顶点的高斯曲率;Hi为第i个顶点的平均曲率。
获取每个顶点的RSD特征。遍历邻域内所有点,计算邻域内所有点两两之间的距离d和点与点之间法向量之间的差α,可依据余弦定理的Taylor展开式估计两点所处圆的半径r,简化计算式为
Figure BDA0003416860360000061
顶点vi的RSD特征为顶点vi邻域所有点对中半径r的最大值和最小值,即FRSDi=[rmax,rmin]。
获取每个顶点的FPFH特征。先计算所有点法向量,然后定义点pt和点ps构成的点对局部坐标系(u,v,w)如下:
Figure BDA0003416860360000062
其中,×表示外积;ns为点ps的法向量;u,v,w分别为点对局部坐标系的基向量。
基于点对局部坐标系,构建特征向量α,φ,θ:
Figure BDA0003416860360000063
其中,·为内积;nt为点pt的法向量;d为点pt和点ps的欧式距离。
定义SPFH(Simplified Point Feature Histogram)特征为:将邻域内点对的<α,φ,θ>特征集合放在三个对应的直方图中,统计投票数量,直方图区间段数为n,则SPFH特征矢量有3n维,如此处n取11,则对应的SPFH特征矢量有33维。
定义顶点vi的邻域包括两个部分:一部分是顶点vi与周围k个点组成的点对,另一部分是顶点vi的每个邻点vk与周围k个点组成的点对。第二部分的统计量取加权平均,则可得到最终FFPFHi计算方法:
Figure BDA0003416860360000064
其中,权重ωk表示顶点与邻点vk的距离。
步骤S102,将每个顶点的手工特征与笛卡尔坐标拼接,得到每个顶点的输入特征。
本步骤中,根据以下公式计算每个顶点的输入特征:
Figure BDA0003416860360000071
其中,Fin为第i个顶点的输入特征;vi牙颌三维模型中第i个顶点;δi为牙颌三维模型中第i个顶点的拉普拉斯坐标;Mi为第i个顶点的法向量;k1i、k2i均为第i个顶点的主曲率;Ki为第i个顶点的高斯曲率;Hi为第i个顶点的平均曲率;FRSDi为第i个顶点的RSD特征;FFPFHi为第i个顶点的FPFH特征。
其中笛卡尔坐标vi有3维特征,拉普拉斯坐标δi有3维特征,法向量Mi有3维特征,主曲率k1i和k2i、高斯曲率Ki和平均曲率Hi均为1维特征,RSD特征FRSDi有2维,FPFH特征FFPFHi有33维,故Fin共48维特征。
步骤S103,将每个顶点的输入特征依次输入深度学习点云分割网络,得到每个顶点的牙位标签。
本步骤中,将每个顶点的输入特征依次输入至深度学习点云分割网络的三个特征提取层,在每个特征提取层中使用最远点采样算法进行降采样,利用不同半径参数的球形查询算法确定降采样点的邻域,对每个邻域内的点使用PointNet算法进行局部特征提取,将提取自不同半径邻域内点的特征拼接作为当前特征提取层的第一输出特征;
将每个顶点的第一输出特征依次输入至深度学习点云分割网络的三个特征传播层,第m个特征传播层将前一层的输出以及第4-m个特征提取层的输入拼接起来作为当前特征传播层的输入,在每个特征传播层中,通过三线性插值将特征由下采样点向周围点扩散,并用MLP算法对特征降维作为当前特征传播层的第二输出特征;
将每个顶点的第二输出特征输入至两个MLP网络,使输出特征通道数等于语义类别的数目,将上下牙龈分别视作两个语义类别,将降维后的特征输入至Softmax函数得到当前点归属于不同语义类别的概率,取概率最大值对应的类别为牙位标签。
如图4中12所示,因模型共含N个节点,每个节点有48维特征,故可组成网络输入为N×48的矩阵。对输入的所有点,将计算得到的节点特征Fin依次输入至三个特征提取层SA1-SA3,即图4中的6-8。
具体的,在每个特征提取层SA中包含以下步骤:
使用最远点采样算法将输入点降采样至npoint个点,如图4中20所示,SA1中降采样至512个点。利用不同半径参数的球形查询算法确定降采样点的邻域,如图4中14-15所示,R=0.1表示球形邻域半径为0.1,S=32表示在球形邻域内查找32个点。
进一步的,对每个邻域内的点使用PointNet算法进行局部特征提取,具体包括多层级联的MLP-BatchNorm-ReLU层。图4中17表示MLP层,其作用是将输入特征进行维度变换,如图4中13所示,该层将输入特征维度变为32,其它MLP层以此类推。图4中18表示BatchNorm,图4中19表示激活函数ReLU。
进一步的,将提取自不同半径邻域内点的特征拼接作为当前特征提取层的第一输出特征,第一输出特征维度由当前邻域内特征提取分支最后一个MLP层决定。
具体的,在每个特征传播层FP中包含以下步骤:
第m个特征传播层将前1层的输出以及第4-m个特征提取层的输入拼接起来作为当前特征传播层的输入,如图4中的16所示。
进一步的,在每个特征传播层中,通过三线性插值将特征由下采样点向周围点扩散,即上采样至npoint个点。
进一步的,用多层级联的MLP-BatchNorm-ReLU层对特征降维,作为当前特征传播层的第二输出特征。
将每个顶点的第二输出特征依次输入至两层MLP网络,使输出特征通道数等于语义类别的数目,此处不考虑上下颌的第三磨牙,同时将上下牙龈分别视作两个语义类别,故语义类别总数为30,具体包括上颌牙龈区域,即图5中的22,对应语义编号为0;右上区11-17号牙,即图5中的23-29,对应语义编号为1-7;左上区21-27号牙,即图5中的30-36,对应语义编号为8-14;下颌牙龈区域,即图5中的37,对应语义编号为15;左下区31-37号牙,即图5中的38-44,对应语义编号为16-22;右下区41-47号牙,即图5中的45-51,对应语义编号为23-29。
进一步的,将降维后的特征送入Softmax函数得到当前点归属于不同语义类别的概率,即图4中的21,取概率最大值对应的类别为当前点所属语义类别,即牙位标签。
步骤S104,将每个顶点的牙位标签依次映射至牙颌三维模型,得到相邻两个牙齿的以及牙齿和牙龈的边界线。如图3中5所示。
本发明融合使用了多种轻量级的手工特征,相比于仅使用法向和曲率信息的算法,能够更好的捕获牙颌模型多尺度、多层次的局部特征,对牙颌分割任务的精度提升可以起到显著作用;将几类手工特征直接引入深度学习框架,在手工特征的基础上用深度学习进一步提取三维牙颌模型特征,降低了网络的学习成本,减少了深度网络对训练样本数量以及训练周期的依赖性。
如图2所示,本发明实施例部分还提供一种牙颌三维模型分割系统,包括:
获取模块,用于获取牙颌三维模型中每个顶点的手工特征;
拼接模块,用于将每个顶点的手工特征与笛卡尔坐标拼接,得到每个顶点的输入特征;
输入模块,用于将每个顶点的输入特征依次输入深度学习点云分割网络,得到每个顶点的牙位标签;
映射模块,用于将每个顶点的牙位标签依次映射至牙颌三维模型,得到相邻两个牙齿的以及牙齿和牙龈的边界线。
进一步地,所述获取模块包括:
第一计算单元,用于根据以下公式计算每个顶点的拉普拉斯坐标:
Figure BDA0003416860360000091
其中,δi为牙颌三维模型中第i个顶点的拉普拉斯坐标;vi为牙颌三维模型中第i个顶点;di为与第i个顶点直接相连的顶点的数量;vj为牙颌三维模型中第j个顶点;Ni={j(i,j)∈K},为顶点i的领域顶点集合,K为邻域内所有顶点的集合;
第一获取单元,用于获取每个顶点的法向量;
第二获取单元,用于获取顶点主曲率、高斯曲率和平均曲率;
第三获取单元,用于获取每个顶点的RSD特征;
第四获取单元,用于获取每个顶点的FPFH特征。
可选的,所述拼接模块包括:
第二计算单元,用于根据以下公式计算每个顶点的输入特征:
Figure BDA0003416860360000092
其中,Fin为第i个顶点的输入特征;vi牙颌三维模型中第i个顶点;δi为牙颌三维模型中第i个顶点的拉普拉斯坐标;Mi为第i个顶点的法向量;k1i、k2i均为第i个顶点的主曲率;Ki为第i个顶点的高斯曲率;Hi为第i个顶点的平均曲率;FRSDi为第i个顶点的RSD特征;FFPFHi为第i个顶点的FPFH特征。
本说明书中各个实施例之间相同相似的部分互相参见即可。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例中的说明即可。
以上结合具体实施方式和范例性实例对本发明进行了详细说明,不过这些说明并不能理解为对本发明的限制。本领域技术人员理解,在不偏离本发明精神和范围的情况下,可以对本发明技术方案及其实施方式进行多种等价替换、修饰或改进,这些均落入本发明的范围内。本发明的保护范围以所附权利要求为准。

Claims (7)

1.一种牙颌三维模型分割方法,其特征在于,包括:
获取牙颌三维模型中每个顶点的手工特征;
将每个顶点的手工特征与笛卡尔坐标拼接,得到每个顶点的输入特征;
将每个顶点的输入特征依次输入深度学习点云分割网络,得到每个顶点的牙位标签;
将每个顶点的牙位标签依次映射至牙颌三维模型,得到相邻两个牙齿的以及牙齿和牙龈的边界线。
2.根据权利要求1所述的牙颌三维模型分割方法,其特征在于,所述获取牙颌三维模型中每个顶点的手工特征,包括:
根据以下公式计算每个顶点的拉普拉斯坐标:
Figure FDA0003416860350000011
其中,δi为牙颌三维模型中第i个顶点的拉普拉斯坐标;vi为牙颌三维模型中第i个顶点;di为与第i个顶点直接相连的顶点的数量;vj为牙颌三维模型中第j个顶点;Ni={j|(i,j)∈K},为顶点i的领域顶点集合,K为邻域内所有顶点的集合;
获取每个顶点的法向量;
获取顶点主曲率、高斯曲率和平均曲率;
获取每个顶点的RSD特征;
获取每个顶点的FPFH特征。
3.根据权利要求2所述的牙颌三维模型分割方法,其特征在于,所述将每个顶点的手工特征与笛卡尔坐标拼接,得到每个顶点的输入特征,包括:
根据以下公式计算每个顶点的输入特征:
Figure FDA0003416860350000012
其中,Fin为第i个顶点的输入特征;vi牙颌三维模型中第i个顶点;δi为牙颌三维模型中第i个顶点的拉普拉斯坐标;Mi为第i个顶点的法向量;k1i、k2i均为第i个顶点的主曲率;Ki为第i个顶点的高斯曲率;Hi为第i个顶点的平均曲率;FRSDi为第i个顶点的RSD特征;FFPFHi为第i个顶点的FPFH特征。
4.根据权利要求3所述的牙颌三维模型分割方法,其特征在于,所述将每个顶点的输入特征依次输入深度学习点云分割网络,得到每个顶点的牙位标签,包括:
将每个顶点的输入特征依次输入至深度学习点云分割网络的三个特征提取层,在每个特征提取层中使用最远点采样算法进行降采样,利用不同半径参数的球形查询算法确定降采样点的邻域,对每个邻域内的点使用PointNet算法进行局部特征提取,将提取自不同半径邻域内点的特征拼接作为当前特征提取层的第一输出特征;
将每个顶点的第一输出特征依次输入至深度学习点云分割网络的三个特征传播层,第m个特征传播层将前一层的输出以及第4-m个特征提取层的输入拼接起来作为当前特征传播层的输入,在每个特征传播层中,通过三线性插值将特征由下采样点向周围点扩散,并用MLP算法对特征降维作为当前特征传播层的第二输出特征;
将每个顶点的第二输出特征输入至两个MLP网络,使输出特征通道数等于语义类别的数目,将上下牙龈分别视作两个语义类别,将降维后的特征输入至Softmax函数得到当前点归属于不同语义类别的概率,取概率最大值对应的类别为牙位标签。
5.一种牙颌三维模型分割系统,其特征在于,包括:
获取模块,用于获取牙颌三维模型中每个顶点的手工特征;
拼接模块,用于将每个顶点的手工特征与笛卡尔坐标拼接,得到每个顶点的输入特征;
输入模块,用于将每个顶点的输入特征依次输入深度学习点云分割网络,得到每个顶点的牙位标签;
映射模块,用于将每个顶点的牙位标签依次映射至牙颌三维模型,得到相邻两个牙齿的以及牙齿和牙龈的边界线。
6.根据权利要求5所述的牙颌三维模型分割系统,其特征在于,所述获取模块包括:
第一计算单元,用于根据以下公式计算每个顶点的拉普拉斯坐标:
Figure FDA0003416860350000021
其中,δi为牙颌三维模型中第i个顶点的拉普拉斯坐标;vi为牙颌三维模型中第i个顶点;di为与第i个顶点直接相连的顶点的数量;vj为牙颌三维模型中第j个顶点;Ni={j|(i,j)∈K},为顶点i的领域顶点集合,K为邻域内所有顶点的集合;
第一获取单元,用于获取每个顶点的法向量;
第二获取单元,用于获取顶点主曲率、高斯曲率和平均曲率;
第三获取单元,用于获取每个顶点的RSD特征;
第四获取单元,用于获取每个顶点的FPFH特征。
7.根据权利要求6所述的牙颌三维模型分割系统,其特征在于,所述拼接模块包括:
第二计算单元,用于根据以下公式计算每个顶点的输入特征:
Figure FDA0003416860350000031
其中,Fin为第i个顶点的输入特征;vi牙颌三维模型中第i个顶点;δi为牙颌三维模型中第i个顶点的拉普拉斯坐标;Mi为第i个顶点的法向量;k1i、k2i均为第i个顶点的主曲率;Ki为第i个顶点的高斯曲率;Hi为第i个顶点的平均曲率;FRSDi为第i个顶点的RSD特征;FFPFHi为第i个顶点的FPFH特征。
CN202111549844.8A 2021-12-17 2021-12-17 一种牙颌三维模型分割方法和系统 Pending CN114255244A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111549844.8A CN114255244A (zh) 2021-12-17 2021-12-17 一种牙颌三维模型分割方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111549844.8A CN114255244A (zh) 2021-12-17 2021-12-17 一种牙颌三维模型分割方法和系统

Publications (1)

Publication Number Publication Date
CN114255244A true CN114255244A (zh) 2022-03-29

Family

ID=80795526

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111549844.8A Pending CN114255244A (zh) 2021-12-17 2021-12-17 一种牙颌三维模型分割方法和系统

Country Status (1)

Country Link
CN (1) CN114255244A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115482466A (zh) * 2022-09-28 2022-12-16 广西壮族自治区自然资源遥感院 一种基于深度学习的三维模型植被区域轻量化处理方法
CN116385474A (zh) * 2023-02-27 2023-07-04 雅客智慧(北京)科技有限公司 基于深度学习的牙齿扫描模型分割方法、装置、电子设备
CN116492082A (zh) * 2023-06-21 2023-07-28 先临三维科技股份有限公司 基于三维模型的数据处理方法、装置、设备及介质
CN116631634A (zh) * 2023-07-19 2023-08-22 南京铖联激光科技有限公司 一种基于点云深度学习的可摘全口义齿的智能设计方法
CN116385474B (zh) * 2023-02-27 2024-06-04 雅客智慧(北京)科技有限公司 基于深度学习的牙齿扫描模型分割方法、装置、电子设备

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115482466A (zh) * 2022-09-28 2022-12-16 广西壮族自治区自然资源遥感院 一种基于深度学习的三维模型植被区域轻量化处理方法
CN116385474A (zh) * 2023-02-27 2023-07-04 雅客智慧(北京)科技有限公司 基于深度学习的牙齿扫描模型分割方法、装置、电子设备
CN116385474B (zh) * 2023-02-27 2024-06-04 雅客智慧(北京)科技有限公司 基于深度学习的牙齿扫描模型分割方法、装置、电子设备
CN116492082A (zh) * 2023-06-21 2023-07-28 先临三维科技股份有限公司 基于三维模型的数据处理方法、装置、设备及介质
CN116492082B (zh) * 2023-06-21 2023-09-26 先临三维科技股份有限公司 基于三维模型的数据处理方法、装置、设备及介质
CN116631634A (zh) * 2023-07-19 2023-08-22 南京铖联激光科技有限公司 一种基于点云深度学习的可摘全口义齿的智能设计方法
CN116631634B (zh) * 2023-07-19 2023-09-19 南京铖联激光科技有限公司 一种基于点云深度学习的可摘全口义齿的智能设计方法

Similar Documents

Publication Publication Date Title
CN114255244A (zh) 一种牙颌三维模型分割方法和系统
Wang et al. Automatic analysis of lateral cephalograms based on multiresolution decision tree regression voting
WO2018218988A1 (zh) 牙颌三维数字模型的分割方法
US20170311873A1 (en) Estimating and predicting tooth wear using intra-oral 3d scans
CN110599528A (zh) 一种基于神经网络的无监督三维医学图像配准方法及系统
CN109859184B (zh) 一种连续扫描乳腺超声图像的实时检测与决策融合方法
WO2021057316A1 (zh) 一种人体完整度数据标注方法、装置及终端设备
CN112991273B (zh) 三维牙齿模型的正畸特征自动检测方法及系统
CN112989954B (zh) 基于深度学习的三维牙齿点云模型数据分类方法及系统
CN112183541B (zh) 一种轮廓提取方法及装置、电子设备、存储介质
US20230196570A1 (en) Computer-implemented method and system for predicting orthodontic results based on landmark detection
Kong et al. Automated maxillofacial segmentation in panoramic dental x-ray images using an efficient encoder-decoder network
CN113011509B (zh) 肺部支气管的分类方法、装置、电子设备和存储介质
Sun et al. Automatic tooth segmentation and dense correspondence of 3D dental model
CN111968146A (zh) 三维牙颌网格模型分割方法
WO2023044605A1 (zh) 极端环境下脑结构的三维重建方法、装置及可读存储介质
Zhong et al. 3D dental biometrics: Alignment and matching of dental casts for human identification
CN110570394A (zh) 医学图像分割方法、装置、设备及存储介质
CN115619773A (zh) 一种三维牙齿多模态数据配准方法及系统
CN110223331B (zh) 一种大脑mr医学图像配准方法
CN109035311B (zh) 一种弯骨骨折自动配准及内固定钢板预弯建模方法
CN113554607B (zh) 一种牙体检测模型、模型生成方法及牙体分割方法
CN107610121A (zh) 一种肝脏统计形状模型初始位姿设定方法
Ben-Hamadou et al. 3DTeethSeg'22: 3D Teeth Scan Segmentation and Labeling Challenge
CN114240809A (zh) 图像处理方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination