CN117649494B - 一种基于点云像素匹配的三维舌体的重建方法及系统 - Google Patents
一种基于点云像素匹配的三维舌体的重建方法及系统 Download PDFInfo
- Publication number
- CN117649494B CN117649494B CN202410118475.4A CN202410118475A CN117649494B CN 117649494 B CN117649494 B CN 117649494B CN 202410118475 A CN202410118475 A CN 202410118475A CN 117649494 B CN117649494 B CN 117649494B
- Authority
- CN
- China
- Prior art keywords
- tongue
- point cloud
- image
- loss
- representing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 44
- 238000012549 training Methods 0.000 claims abstract description 32
- 239000013598 vector Substances 0.000 claims description 56
- 239000011159 matrix material Substances 0.000 claims description 36
- 238000004364 calculation method Methods 0.000 claims description 19
- 238000013519 translation Methods 0.000 claims description 18
- 238000013145 classification model Methods 0.000 claims description 12
- 238000000605 extraction Methods 0.000 claims description 6
- 238000009499 grossing Methods 0.000 claims description 6
- 238000013507 mapping Methods 0.000 claims description 6
- 230000000877 morphologic effect Effects 0.000 claims description 6
- 238000007781 pre-processing Methods 0.000 claims description 6
- 238000000513 principal component analysis Methods 0.000 claims description 6
- 230000009466 transformation Effects 0.000 claims description 6
- 230000001815 facial effect Effects 0.000 abstract description 2
- 238000003745 diagnosis Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 6
- 239000003814 drug Substances 0.000 description 4
- 238000013136 deep learning model Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 239000011248 coating agent Substances 0.000 description 1
- 238000000576 coating method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
Landscapes
- Image Processing (AREA)
Abstract
本发明公开了一种基于点云像素匹配的三维舌体的重建方法及系统，所述方法包括以下步骤：（1）将位置和方向与参考坐标系对齐，利用激光雷达测量舌体的距离和位置，形成点云图像；（2）利用摄像头拍摄舌体，获取舌体图像；（3）将得到点云图像进行特征提取；（4）构建舌体重构模型，对模型进行训练，获取最优的三维图像数据，完成重构；本发明针对舌头设计了模型训练的损失函数，使得模型收敛速度快，鲁棒性较强，易于调整训练参数从而提升模型准确率，避免了牙齿轮廓影响面部特征的情况。
Description
技术领域
本发明涉及医疗卫生技术领域，具体涉及一种基于点云像素匹配的三维舌体的重建方法及系统。
背景技术
舌诊是中医观察病人舌质和舌苔的变化以诊察疾病的一种方法，属于望诊的一种，十分有效。随着通信物联网，人工智能等新一代信息技术的快速发展，使得利用AI进行舌象的辅助诊断成为可能。通过AI技术自动分析舌头能够提供提供快速、准确的诊断结果，但目前舌象的辅助诊断研究都是集中利用二维图像进行数据训练，二维图像所能提取的舌头特征有限，模型准确率受到很大限制。
舌头的三维重建方法可以被广泛用于中医诊所、医院和中医药研究机构等场所，为中医医生提供舌头的三维模型，帮助病情的诊断。同时利用舌头的三维模型提取更多舌头特征（如二维图像中难以观察到的舌头侧面齿痕），训练深度学习模型，相比于普通二维图像模型能够得到更准确的诊断结果。
发明内容
发明目的：本发明的目的是提供一种基于深度学习的三维人体舌头的重建方法及系统，为中医医生提供舌头的三维模型，帮助病情的诊断，提升诊断效率，同时利用舌头的三维模型提取更多舌头特征训练深度学习模型，得到更准确的诊断结果。
技术方案：本发明所述的一种基于点云像素匹配的三维舌体的重建方法，包括以下步骤：
（1）将位置和方向与参考坐标系对齐，利用激光雷达测量舌体的距离和位置，形成点云图像；
（2）利用摄像头拍摄舌体，获取舌体图像；
（3）将得到点云图像进行特征提取；
（4）构建舌体重构模型，对模型进行训练，获取最优的三维图像数据，完成重构。
进一步的，所述步骤（1）中，对齐方法如下:
（11）根据张正友标定法对激光雷达设备进行外部标定，获取旋转矩阵与平移向量/>；其中，
；/>；
是矩阵中的元素；/>、/>、/>表示x、y、z轴上的平移量；
（12）根据旋转矩阵与平移向量/>计算组合变换矩阵M;;
(13)计算对齐后的点云图像，其中/>，/>表示原始点云数据。
进一步的，所述步骤（3）包括：自动编码器和解码器两个部分组成，包括以下步骤：
（31）自动编码器训练：设点云坐标为3列坐标向量组成的矩阵，将其映射为低维的点云特征向量，公式如下：
；
其中，y表示点云特征向量即为所需生成的标签，E表示编码器映射函数，R表示实数，256表示y的列数；
（32）图像重建：利用解码器D将y映射回原始空间，公式如下：
；
其中，表示解码后的图像，用于评估利用解码器得到的点云特征向量。
进一步的，所述步骤（4）包括以下步骤：
（41）对舌体图像进行预处理，调整图像大小、归一化像素值，并输入到经过预训练的分类模型中，将预训练的分类模型最后一层修改为输出一个长度为256的特征向量x，其中，x表示为图像参数；与目标点云特征参数向量y进行匹配；
（42）根据图像参数，点云特征参数计算形状参数a，公式如下：
；
（43）利用回归模型，将生成的图像参数x转化成编码参数p，，其中，R表示实数，110表示编码参数p向量的大小；
（44）利用主成分分析PCA模型作为形态解码器，将编码参数p转化成三维模型的坐标矩阵，公式如下：
；
（45）对模型进行训练，获取最优的三维图像坐标数据，完成重构。
进一步的，所述步骤（45）具体如下：训练模型的舌损公式如下：
；
其中，到/>表示舌像重构模型的超参数；/>表示平滑舌损，/>表示方向舌损，表示范围舌损，/>表示齿痕舌损，/>表示差距舌损；
平滑舌损公式如下：
；
其中，i 和 j 分别表示源点云点集和目标点云点集/>中的点，/>表示点i到点j之间的欧式距离；
方向舌损公式如下：
；
其中，表示计算从原点到点i与点j的两个向量之间的余弦值；
范围舌损公式如下：
；
表示与去除点j的集合，l表示该集合中的点；
齿痕舌损公式如下：
;
M表示提取标准舌头点云数据集中舌头轮廓特征的等间距的24个点，与采集到的点云数据相对应，计算欧式距离损失;
差距舌损公式如下：
；
其中，a表示运算模块计算出形状参数。
本发明所述的一种基于点云像素匹配的三维舌体的重建系统，包括：
雷达采集模块：用于将位置和方向与参考坐标系对齐，利用激光雷达测量舌体的距离和位置，形成点云图像；
舌像采集模块：用于利用摄像头拍摄舌体，获取舌体图像；
点云特征提取模块：用于将得到点云图像进行特征提取；
舌像重构模块：用于构建舌体重构模型，对模型进行训练，获取最优的三维图像数据，完成重构。
进一步的，所述雷达采集模块中，对齐方法如下:
（11）根据张正友标定法对激光雷达设备进行外部标定，获取旋转矩阵与平移向量/>；其中，
；/>；
是矩阵中的元素；/>、/>、/>表示x、y、z轴上的平移量；
（12）根据旋转矩阵与平移向量/>计算组合变换矩阵M;;
(13)计算对齐后的点云图像，其中/>，/>表示原始点云数据。
进一步的，所述点云特征提取模块包括：自动编码器和解码器两个部分组成，包括以下步骤：
（31）自动编码器训练：设点云坐标为3列坐标向量组成的矩阵，将其映射为低维的点云特征向量，公式如下：
；
其中，y表示点云特征向量即为所需生成的标签，E表示编码器映射函数，R表示实数，256表示y的列数；
（32）图像重建：利用解码器D将y映射回原始空间，公式如下：
；
其中，表示解码后的图像。
进一步的，所述舌像重构模块中，包括以下步骤：
（41）对舌体图像进行预处理，调整图像大小、归一化像素值，并输入到经过预训练的分类模型中，将预训练的分类模型最后一层修改为输出一个长度为256的特征向量x，其中，x表示为图像参数；与目标点云特征参数向量y进行匹配；
（42）根据图像参数，点云特征参数计算形状参数a，公式如下：
；
（43）利用回归模型，将生成的图像参数x转化成编码参数p，，其中，R表示实数，110表示编码参数p向量的大小；
（44）利用主成分分析PCA模型作为形态解码器，将编码参数p转化成三维模型的坐标矩阵，公式如下：
；
（45）对模型进行训练，获取最优的三维图像坐标数据，完成重构。
进一步的，舌像重构模块中，对模型进行训练，获取最优的三维图像坐标数据，完成重构具体如下：用于训练模型的舌损公式如下：
；
其中，到/>表示舌像重构模型的超参数；/>表示平滑舌损，/>表示方向舌损，表示范围舌损，/>表示齿痕舌损，/>表示差距舌损；
平滑舌损公式如下：
；
其中，i 和 j 分别表示源点云点集和目标点云点集/>中的点，/>表示点i到点j之间的欧式距离；
方向舌损公式如下：
；
其中，表示计算从原点到点i与点j的两个向量之间的余弦值；
范围舌损公式如下：
；
表示与去除点j的集合，l表示该集合中的点；
齿痕舌损公式如下：
;
M表示提取标准舌头点云数据集中舌头轮廓特征的等间距的24个点，与采集到的点云数据相对应，计算欧式距离损失;
差距舌损公式如下：
；
其中，a表示运算模块计算出形状参数。
有益效果：与现有技术相比，本发明具有如下显著优点：针对舌头设计了模型训练的损失函数，使得模型收敛速度快，鲁棒性较强，易于调整训练参数从而提升模型准确率，避免了牙齿轮廓影响面部特征的情况。
附图说明
图1是本发明的3D舌模型重建模块及流程图；
图2是本发明的点云特征提取模型图；
图3是本发明的舌像重建模型图；
图4是本发明的损失函数计算图；
图5 本发明的舌头点云轮廓点。
具体实施方式
下面结合附图对本发明的技术方案作进一步说明。
如图1所示，本发明实施例提供一种基于点云像素匹配的三维舌体的重建方法，包括以下步骤：
（1）将位置和方向与参考坐标系对齐，利用激光雷达测量舌体的距离和位置，形成点云图像；对齐方法如下:
（11）根据张正友标定法对激光雷达设备进行外部标定，获取旋转矩阵与平移向量/>；其中，
；/>；
是矩阵中的元素；/>、/>、/>表示x、y、z轴上的平移量；
（12）根据旋转矩阵与平移向量/>计算组合变换矩阵M;;
(13)计算对齐后的点云图像，其中/>，/>表示原始点云数据。
（2）利用摄像头拍摄舌体，获取舌体图像；
（3）将得到点云图像进行特征提取；如图2所示，包括：自动编码器和解码器两个部分组成，包括以下步骤：
（31）自动编码器训练：设点云坐标为3列坐标向量组成的矩阵，将其映射为低维的点云特征向量，公式如下：
；
其中，y表示点云特征向量即为所需生成的标签，E表示编码器映射函数，R表示实数，256表示y的列数；
（32）图像重建：利用解码器D将y映射回原始空间，公式如下：
；
其中，表示解码后的图像，用于评估利用解码器得到的点云特征向量。
（4）构建舌体重构模型，对模型进行训练，获取最优的三维图像数据，完成重构。如图3-图5所示，包括以下步骤：
（41）对舌体图像进行预处理，调整图像大小、归一化像素值，并输入到经过预训练的分类模型中，将预训练的分类模型最后一层修改为输出一个长度为256的特征向量x，其中，x表示为图像参数；与目标点云特征参数向量y进行匹配；
（42）根据图像参数，点云特征参数计算形状参数a，公式如下：
；
（43）利用回归模型，将生成的图像参数x转化成编码参数p，，其中，R表示实数，110表示编码参数p向量的大小；
（44）利用主成分分析PCA模型作为形态解码器，将编码参数p转化成三维模型的坐标矩阵，公式如下：
；
（45）对模型进行训练，获取最优的三维图像坐标数据，完成重构。具体如下：训练模型的舌损公式如下：
；
其中，到/>表示舌像重构模型的超参数；/>表示平滑舌损，/>表示方向舌损，表示范围舌损，/>表示齿痕舌损，/>表示差距舌损；
平滑舌损公式如下：
；
其中，i 和 j 分别表示源点云点集和目标点云点集/>中的点，/>表示点i到点j之间的欧式距离；
方向舌损公式如下：
；
其中，表示计算从原点到点i与点j的两个向量之间的余弦值；
范围舌损公式如下：
；
表示与去除点j的集合，l表示该集合中的点；
齿痕舌损公式如下：
;
M表示提取标准舌头点云数据集中舌头轮廓特征的等间距的24个点，与采集到的点云数据相对应，计算欧式距离损失;
差距舌损公式如下：
；
其中，a表示运算模块计算出形状参数。
本发明实施例还提供一种基于点云像素匹配的三维舌体的重建系统，包括：
雷达采集模块：用于将位置和方向与参考坐标系对齐，利用激光雷达测量舌体的距离和位置，形成点云图像；对齐方法如下:
（11）根据张正友标定法对激光雷达设备进行外部标定，获取旋转矩阵与平移向量/>；其中，
；/>；
是矩阵中的元素；/>、/>、/>表示x、y、z轴上的平移量；
（12）根据旋转矩阵与平移向量/>计算组合变换矩阵M;;
(13)计算对齐后的点云图像，其中/>，/>表示原始点云数据。
舌像采集模块：用于利用摄像头拍摄舌体，获取舌体图像；
点云特征提取模块：用于将得到点云图像进行特征提取；包括：自动编码器和解码器两个部分组成，包括以下步骤：
（31）自动编码器训练：设点云坐标为3列坐标向量组成的矩阵，将其映射为低维的点云特征向量，公式如下：
；
其中，y表示点云特征向量即为所需生成的标签，E表示编码器映射函数，R表示实数，256表示y的列数；
（32）图像重建：利用解码器D将y映射回原始空间，公式如下：
；
其中，表示解码后的图像。
舌像重构模块：用于构建舌体重构模型，对模型进行训练，获取最优的三维图像数据，完成重构。包括以下步骤：
（41）对舌体图像进行预处理，调整图像大小、归一化像素值，并输入到经过预训练的分类模型中，将预训练的分类模型最后一层修改为输出一个长度为256的特征向量x，其中，x表示为图像参数；与目标点云特征参数向量y进行匹配；
（42）根据图像参数，点云特征参数计算形状参数a，公式如下：
；
（43）利用回归模型，将生成的图像参数x转化成编码参数p，，其中，R表示实数，110表示编码参数p向量的大小；
（44）利用主成分分析PCA模型作为形态解码器，将编码参数p转化成三维模型的坐标矩阵，公式如下：
；
（45）对模型进行训练，获取最优的三维图像坐标数据，完成重构。具体如下：用于训练模型的舌损公式如下：
；
其中，到/>表示舌像重构模型的超参数；/>表示平滑舌损，/>表示方向舌损，表示范围舌损，/>表示齿痕舌损，/>表示差距舌损；
平滑舌损公式如下：
；
其中，i 和 j 分别表示源点云点集和目标点云点集/>中的点，/>表示点i到点j之间的欧式距离；
方向舌损公式如下：
；
其中，表示计算从原点到点i与点j的两个向量之间的余弦值；
范围舌损公式如下：
；
表示与去除点j的集合，l表示该集合中的点；
齿痕舌损公式如下：
;
M表示提取标准舌头点云数据集中舌头轮廓特征的等间距的24个点，与采集到的点云数据相对应，计算欧式距离损失;
差距舌损公式如下：
；
其中，a表示运算模块计算出形状参数。
Claims (6)
1.一种基于点云像素匹配的三维舌体的重建方法，其特征在于，包括以下步骤：
（1）将位置和方向与参考坐标系对齐，利用激光雷达测量舌体的距离和位置，形成点云图像；
（2）利用摄像头拍摄舌体，获取舌体图像；
（3）将得到点云图像进行特征提取；
（4）构建舌体重构模型，对模型进行训练，获取最优的三维图像数据，完成重构；包括以下步骤：
（41）对舌体图像进行预处理，调整图像大小、归一化像素值，并输入到经过预训练的分类模型中，将预训练的分类模型最后一层修改为输出一个长度为256的特征向量x，其中，x表示为图像参数；与目标点云特征参数向量y进行匹配；
（42）根据图像参数，点云特征参数计算形状参数a，公式如下：
；
（43）利用回归模型，将生成的图像参数x转化成编码参数p，，其中，R表示实数，110表示编码参数p向量的大小；
（44）利用主成分分析PCA模型作为形态解码器，将编码参数p转化成三维模型的坐标矩阵，公式如下：
；
（45）对模型进行训练，获取最优的三维图像坐标数据，完成重构；具体如下：训练模型的舌损公式如下：
；
其中，到/>表示舌像重构模型的超参数；/>表示平滑舌损，/>表示方向舌损，/>表示范围舌损，/>表示齿痕舌损，/>表示差距舌损；
平滑舌损公式如下：
；
其中，i 和 j 分别表示源点云点集和目标点云点集/>中的点，/>表示点i到点j之间的欧式距离；
方向舌损公式如下：
；
其中，表示计算从原点到点i与点j的两个向量之间的余弦值；
范围舌损公式如下：
；
表示与去除点j的集合，l表示该集合中的点；
齿痕舌损公式如下：
;
M表示提取标准舌头点云数据集中舌头轮廓特征的等间距的24个点，与采集到的点云数据相对应，计算欧式距离损失;
差距舌损公式如下：
；
其中，a表示运算模块计算出形状参数。
2.根据权利要求1所述的一种基于点云像素匹配的三维舌体的重建方法，其特征在于，所述步骤（1）中，对齐方法如下:
（11）根据张正友标定法对激光雷达设备进行外部标定，获取旋转矩阵与平移向量；其中，
；/>；
是矩阵中的元素；/>、/>、/>表示x、y、z轴上的平移量；
（12）根据旋转矩阵与平移向量/>计算组合变换矩阵M;;
(13)计算对齐后的点云图像，其中/>，/>表示原始点云数据。
3.根据权利要求1所述的一种基于点云像素匹配的三维舌体的重建方法，其特征在于，所述步骤（3）包括：自动编码器和解码器两个部分组成，包括以下步骤：
（31）自动编码器训练：设点云坐标为3列坐标向量组成的矩阵，将其映射为低维的点云特征向量，公式如下：
；
其中，y表示点云特征向量即为所需生成的标签，E表示编码器映射函数，R表示实数，256表示y的列数；
（32）图像重建：利用解码器D将y映射回原始空间，公式如下：
；
其中，表示解码后的图像。
4.一种基于点云像素匹配的三维舌体的重建系统，其特征在于，包括：
雷达采集模块：用于将位置和方向与参考坐标系对齐，利用激光雷达测量舌体的距离和位置，形成点云图像；
舌像采集模块：用于利用摄像头拍摄舌体，获取舌体图像；
点云特征提取模块：用于将得到点云图像进行特征提取；
舌像重构模块：用于构建舌体重构模型，对模型进行训练，获取最优的三维图像数据，完成重构；包括以下步骤：
（41）对舌体图像进行预处理，调整图像大小、归一化像素值，并输入到经过预训练的分类模型中，将预训练的分类模型最后一层修改为输出一个长度为256的特征向量x，其中，x表示为图像参数；与目标点云特征参数向量y进行匹配；
（42）根据图像参数，点云特征参数计算形状参数a，公式如下：
；
（43）利用回归模型，将生成的图像参数x转化成编码参数p，，其中，R表示实数，110表示编码参数p向量的大小；
（44）利用主成分分析PCA模型作为形态解码器，将编码参数p转化成三维模型的坐标矩阵，公式如下：
；
（45）对模型进行训练，获取最优的三维图像坐标数据，完成重构；具体如下：用于训练模型的舌损公式如下：
；
其中，到/>表示舌像重构模型的超参数；/>表示平滑舌损，/>表示方向舌损，/>表示范围舌损，/>表示齿痕舌损，/>表示差距舌损；
平滑舌损公式如下：
；
其中，i 和 j 分别表示源点云点集和目标点云点集/>中的点，/>表示点i到点j之间的欧式距离；
方向舌损公式如下：
；
其中，表示计算从原点到点i与点j的两个向量之间的余弦值；
范围舌损公式如下：
；
表示与去除点j的集合，l表示该集合中的点；
齿痕舌损公式如下：
;
M表示提取标准舌头点云数据集中舌头轮廓特征的等间距的24个点，与采集到的点云数据相对应，计算欧式距离损失;
差距舌损公式如下：
；
其中，a表示运算模块计算出形状参数。
5.根据权利要求4所述的一种基于点云像素匹配的三维舌体的重建系统，其特征在于，所述雷达采集模块中，对齐方法如下:
（11）根据张正友标定法对激光雷达设备进行外部标定，获取旋转矩阵与平移向量；其中，
；/>；
是矩阵中的元素；/>、/>、/>表示x、y、z轴上的平移量；
（12）根据旋转矩阵与平移向量/>计算组合变换矩阵M;;
(13)计算对齐后的点云图像，其中/>，/>表示原始点云数据。
6.根据权利要求4所述的一种基于点云像素匹配的三维舌体的重建系统，其特征在于，所述点云特征提取模块包括：自动编码器和解码器两个部分组成，包括以下步骤：
（31）自动编码器训练：设点云坐标为3列坐标向量组成的矩阵，将其映射为低维的点云特征向量，公式如下：
；
其中，y表示点云特征向量即为所需生成的标签，E表示编码器映射函数，R表示实数，256表示y的列数；
（32）图像重建：利用解码器D将y映射回原始空间，公式如下：
；
其中，表示解码后的图像。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202410118475.4A CN117649494B (zh) | 2024-01-29 | 2024-01-29 | 一种基于点云像素匹配的三维舌体的重建方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202410118475.4A CN117649494B (zh) | 2024-01-29 | 2024-01-29 | 一种基于点云像素匹配的三维舌体的重建方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN117649494A CN117649494A (zh) | 2024-03-05 |
| CN117649494B true CN117649494B (zh) | 2024-04-19 |
Family
ID=90043715
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202410118475.4A Active CN117649494B (zh) | 2024-01-29 | 2024-01-29 | 一种基于点云像素匹配的三维舌体的重建方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117649494B (zh) |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107221029A (zh) * | 2017-04-07 | 2017-09-29 | 天津大学 | 一种三维图像重建方法 |
| CN107256575A (zh) * | 2017-04-07 | 2017-10-17 | 天津市天中依脉科技开发有限公司 | 一种基于双目立体视觉的三维舌像重建方法 |
| WO2018219800A1 (en) * | 2017-05-27 | 2018-12-06 | Medicim Nv | Method for intraoral scanning |
| CN211674190U (zh) * | 2020-01-18 | 2020-10-16 | 深圳中科智美科技有限公司 | 一种三维面诊舌诊设备 |
| WO2022096105A1 (en) * | 2020-11-05 | 2022-05-12 | Huawei Technologies Co., Ltd. | 3d tongue reconstruction from single images |
| CN115578523A (zh) * | 2022-11-21 | 2023-01-06 | 慧医谷中医药科技(天津)股份有限公司 | 一种多角度图像融合的舌部三维建模方法及系统 |
| CN115719352A (zh) * | 2022-11-15 | 2023-02-28 | 电子科技大学 | 基于改进UNet++的特征对齐舌像分割方法及系统 |
| CN116051747A (zh) * | 2023-01-31 | 2023-05-02 | 武汉大学 | 一种基于缺失点云数据的房屋三维模型重建方法及设备、介质 |
| CN116152439A (zh) * | 2023-03-02 | 2023-05-23 | 南京大学 | 一种基于多视角人体图像的人体三维姿态重建方法及系统 |
| CN117274756A (zh) * | 2023-08-30 | 2023-12-22 | 国网山东省电力公司电力科学研究院 | 基于多维特征配准的二维图像与点云的融合方法及装置 |
-
2024
- 2024-01-29 CN CN202410118475.4A patent/CN117649494B/zh active Active
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107221029A (zh) * | 2017-04-07 | 2017-09-29 | 天津大学 | 一种三维图像重建方法 |
| CN107256575A (zh) * | 2017-04-07 | 2017-10-17 | 天津市天中依脉科技开发有限公司 | 一种基于双目立体视觉的三维舌像重建方法 |
| WO2018219800A1 (en) * | 2017-05-27 | 2018-12-06 | Medicim Nv | Method for intraoral scanning |
| CN211674190U (zh) * | 2020-01-18 | 2020-10-16 | 深圳中科智美科技有限公司 | 一种三维面诊舌诊设备 |
| WO2022096105A1 (en) * | 2020-11-05 | 2022-05-12 | Huawei Technologies Co., Ltd. | 3d tongue reconstruction from single images |
| CN115719352A (zh) * | 2022-11-15 | 2023-02-28 | 电子科技大学 | 基于改进UNet++的特征对齐舌像分割方法及系统 |
| CN115578523A (zh) * | 2022-11-21 | 2023-01-06 | 慧医谷中医药科技(天津)股份有限公司 | 一种多角度图像融合的舌部三维建模方法及系统 |
| CN116051747A (zh) * | 2023-01-31 | 2023-05-02 | 武汉大学 | 一种基于缺失点云数据的房屋三维模型重建方法及设备、介质 |
| CN116152439A (zh) * | 2023-03-02 | 2023-05-23 | 南京大学 | 一种基于多视角人体图像的人体三维姿态重建方法及系统 |
| CN117274756A (zh) * | 2023-08-30 | 2023-12-22 | 国网山东省电力公司电力科学研究院 | 基于多维特征配准的二维图像与点云的融合方法及装置 |
Non-Patent Citations (5)
| Title |
|---|
| 3D human tongue reconstruction from single" in-the-wild" images;Stylianos Ploumpis 等;CVF Conference on Computer Vision and Pattern Recognition (CVPR);20221230;全文 * |
| 中医四诊智能化现状及关键技术探讨;李红岩;中医杂志;20221230;第63卷(第12期);全文 * |
| 双目视觉的三维重建技术研究;汤哲君;;信息通信;20200615(第06期);全文 * |
| 基于立体视觉的三维舌象重建算法的研究与实现;刘磊磊;中国优秀硕士学位论文全文数据库医药卫生科技辑;20171115(第(2017)11期);E056-2 * |
| 基于结构光的三维点云重建方法研究;孙庆科;何云涛;陈瑞强;江月松;;计算机应用研究;20160930(第09期);全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN117649494A (zh) | 2024-03-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112200843A (zh) | 一种基于超体素的cbct与激光扫描点云数据牙齿配准方法 | |
| WO2020172783A1 (zh) | 一种用于经颅磁刺激诊疗的人头姿态跟踪系统 | |
| CN114119549B (zh) | 一种多模态医学图像三维点云配准优化方法 | |
| Tian et al. | DCPR-GAN: dental crown prosthesis restoration using two-stage generative adversarial networks | |
| CN112419479B (zh) | 一种基于体重身高及身体影像的体型数据计算方法 | |
| CN111539956A (zh) | 基于脑部辅助图像的脑出血自动检测方法及电子介质 | |
| CN113052902A (zh) | 牙齿治疗监测方法 | |
| Wang et al. | ViT-P: Classification of genitourinary syndrome of menopause from OCT images based on vision transformer models | |
| CN114792326A (zh) | 一种基于结构光的手术导航点云分割与配准方法 | |
| CN111080676B (zh) | 一种通过在线分类跟踪内窥镜图像序列特征点的方法 | |
| Jia et al. | Improving intraoperative liver registration in image-guided surgery with learning-based reconstruction | |
| CN111466952B (zh) | 一种超声内镜与ct三维图像实时转化方法和系统 | |
| CN117649494B (zh) | 一种基于点云像素匹配的三维舌体的重建方法及系统 | |
| CN113780250B (zh) | 一种针对小样本的端到端面部腧穴定位方法及电子设备 | |
| TW200807309A (en) | Method and system for reconstructing 3-D endoscopic images | |
| WO2022183851A1 (zh) | 一种基于数字人技术的肺叶分割方法 | |
| Wang et al. | Tooth alignment network based on landmark constraints and hierarchical graph structure | |
| CN112330603B (zh) | 基于软组织表面形变估计组织内部目标运动的系统与方法 | |
| CN114708404A (zh) | 基于机器学习的端到端手术穿刺路径自动规划方法及系统 | |
| Yu et al. | A three-dimensional measurement method for binocular endoscopes based on deep learning | |
| CN117745978B (zh) | 一种基于人体三维重建算法的仿真质控方法、设备和介质 | |
| CN116012526B (zh) | 一种基于二维影像的三维ct影像病灶重建方法 | |
| CN112330723B (zh) | 一种物理到图像/图像到物理的自动配准方法 | |
| CN114820730B (zh) | 一种基于伪ct的ct与cbct配准方法 | |
| CN110837751A (zh) | 基于rgbd深度摄像头的人体运动捕捉与步态分析方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |