CN108597004A - 基于局部优化算法的牙齿咬合面全景图像拼接方法 - Google Patents

基于局部优化算法的牙齿咬合面全景图像拼接方法 Download PDF

Info

Publication number
CN108597004A
CN108597004A CN201810428969.7A CN201810428969A CN108597004A CN 108597004 A CN108597004 A CN 108597004A CN 201810428969 A CN201810428969 A CN 201810428969A CN 108597004 A CN108597004 A CN 108597004A
Authority
CN
China
Prior art keywords
teeth
image
occlusal surfaces
occlusal
occlusal surface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810428969.7A
Other languages
English (en)
Inventor
何睿清
桂林卿
薛文
李俊
余海
姚军
孔文宣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Science And Technology Co Rhinoceros Tooth Shell
Original Assignee
Nanjing Science And Technology Co Rhinoceros Tooth Shell
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Science And Technology Co Rhinoceros Tooth Shell filed Critical Nanjing Science And Technology Co Rhinoceros Tooth Shell
Priority to CN201810428969.7A priority Critical patent/CN108597004A/zh
Publication of CN108597004A publication Critical patent/CN108597004A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Dental Tools And Instruments Or Auxiliary Dental Instruments (AREA)

Abstract

本发明公开了基于局部优化算法的牙齿咬合面全景图像拼接方法，首先通过架设在轨道上的摄像机对牙齿咬合面进行扫描式拍摄并获取牙齿咬合面的扫描视频。对扫描视频进行帧间筛选，剔除重复或冗余信息较多的图像。将筛选后的图片输入拼接算法，提取所有图像特征点并进行两两之间的优化计算，从而获得拼接所需参数。最后依据获得参数，对图像序列进行顺序拼接，进而得到牙齿咬合面的拼接图像。本发明的有益效果是方法简单，易于操作，稳定性高。

Description

基于局部优化算法的牙齿咬合面全景图像拼接方法
技术领域
本发明属于图像处理和口腔医学技术领域，涉及一种基于牙齿咬合面的全景图的生成方法。
背景技术
传统的牙齿检查需要用户前往诊所。牙科医生需要用口腔内窥镜观察每一刻牙齿。另一种方式为，在护士的协助下完成对患者口腔全景图的拍摄。这种拍摄方法成本高(时间成本和费用成本)，效率较低，患者体验不好。对于牙齿的拍摄通常也分为咬合面，唇(颊)面和舌(腭)面三个部分。咬合面作为窝沟存在较多的位置，是最易藏留细菌的地方。因此，对咬合面全景图像的拍摄对于牙科医生具有重要的实用价值。
发明内容
本发明的目的在于提供基于局部优化算法的牙齿咬合面全景图像拼接方法，本发明的有益效果是方法简单，易于操作，稳定性高。对于牙齿窝沟等口腔疾病多发区域，有良好色彩和形态的保真度，利于牙医的口腔检查。
本发明所采用的技术方案是按照以下步骤进行：
1.咬合面的全景图像是由微距摄像头进行采集。摄像头固定在预设于咬合面上方的轨道上，拍摄时摄像头沿轨道滑动。在拍摄过程中，摄像头光轴与牙齿咬合面所在平面所成角度保持近似稳定。
2.所获取的牙齿咬合面视频按照其帧率保存为离散图片。在平面直角坐标系和平面极坐标系中对离散图片进行筛选。筛选原则是，设立关联性阈值，删除关联度高于所设阈值的图像。
3.利用自适应sift算法，计算相邻两张咬合面图像的特征点坐标，及其对应描述子。并根据这些信息进行特征点匹配。匹配过程中，利用特征点坐标信息剔除靠的过近的匹配特征点对。
4.在两张咬合面图像之间，根据其特征点的匹配情况，利用局部(两张图间)光束平差法进行图像变换参数的计算(透视变换参数)。
5.将得到得到两张牙齿咬合面图像按照计算得到的参数拼接为一张图像。
6.以得到的这张局部咬合面为基础，重复步骤3，4，依次将后续图像拼接到局部图上，直到所有图像都完成拼接。最后形成牙齿咬合面的全景图。
进一步，阈值选取通过以下过程实现:a.给定一组连续拍摄咬合面图像，任意选择某一图片作为基准图片，计算相邻图像与它的关联值大小；b.从按照关联值的大小，由高到低将对应的图像与基准图像两两拼接，直到拼接图像发生明显畸变或错误为止，这时对应的关联值标记为待选阈值；c.重复以上过程若干次，得到若干个待选阈值，选择最大值作为算法的阈值。
附图说明
图1是本发明方法流程示意图。
具体实施方式
下面结合具体实施方式对本发明进行详细说明。
如图1所示，第一步：咬合面的全景图像是微距摄像头采集。摄像头固定在预设于咬合面上方的轨道上，拍摄时摄像头沿轨道滑动。在滑动过程中，应保证摄像头稳定，不出现剧烈的视场变化。稳定拍摄是指：摄像头光轴与牙齿咬合面所在平面所成角度近似不变。如出现不稳定抖动(例如：因为患者牙齿形态畸形而造成的不稳定抖动)，其抖动数据应被惯性传感器捕获，并反馈至算法中。
第二步：所获取的牙齿咬合面视频按照其帧率保存为离散图片。在平面直角坐标系和平面极坐标系中，对离散图片进行筛选。具体做法是：事先设定好在这两个坐标系下设定阈值。利用相位关联算法计算这两张图在平面直角坐标系和平面极坐标系中相位关联的最大值。在相同坐标系中，将得到的相位关联最大值与其阈值相比。当有任意一个值大于阈值时，则删除序号更大的图片。
第三步：利用自适应SIFT算法，计算相邻两张咬合面图像(分别标记为第i张和第i+1张)的特征点坐标及其对应描述子。并根据这些信息进行特征点匹配。匹配的原则是，计算每一个特征点与其它特征点之间在描述子对应向量的欧式距离，选择距离最小的一个作为匹配的特征点。此外，当匹配完毕，还需要筛除同一张咬合面图像中空间位置靠的比较近的特征点匹配对。这一过程通过设定距离阈值来完成，距离阈值通常为8个像素。
第四步：在两张咬合面图像之间，根据其特征点的匹配情况，利用局部(两张图间)光束平差法进行图像变换参数的计算(透视变换参数)。具体可以分成两个步骤：第一、利用RANSAC算法获取一个粗匹配参数，与此同时获得这个参数对应的具有相似几何一致性的特征点集；第二、根据这些筛选出来的点，利用光束平差法完成两张图像间的精匹配过程。
第五步：利用第四步得到的匹配参数对两张咬合面图像进行拼接。拼接的流程是：首先，生成与图像尺寸等大的拼接模版，模版中每个像素的大小由这个像素的位置距离中心位置的距离决定；其次，将第i+1张图及其对应的模版按照第四步中得到的变换参数映射到将i张图及其对应的坐标空间中；比较两幅模版中每个像素的数值大小，保留大的那一个。最后，按照模版的数值对咬合面图像中像素进行加权求和，得到到将i张和到将i+1张的全景图Mi，i+1。
第六步：对第i+1和i+2张图重复以上第3，4步。将i+2张图映射到全景图Mi，i+1中，并进行粘合，获得到全景图Mi，i+2.重复这一过程获得所有图像的全景图。
本发明提出的基于口腔全景图像的牙检报告生成方法能有效简化咬合面拍摄的过程，让患者在家中可以完成咬合面全景图像的拍摄和拼接。这简化了获得咬合面全景图的获取成本，同时也提高了牙医的诊断效率。
以上所述仅是对本发明的较佳实施方式而已，并非对本发明作任何形式上的限制，凡是依据本发明的技术实质对以上实施方式所做的任何简单修改，等同变化与修饰，均属于本发明技术方案的范围内。

Claims (4)

1.基于局部优化算法的牙齿咬合面全景图像拼接方法，其特征在于按照以下步骤进行：
1)咬合面的全景图像由微距摄像头进行采集，摄像头固定在预设于咬合面上方的轨道上，拍摄时摄像头沿轨道滑动，在拍摄过程中，摄像头光轴与牙齿咬合面所在平面所成角度保持近似稳定。
2)所获取的牙齿咬合面视频按照其帧率保存为离散图片，在平面直角坐标系和平面极坐标系中对离散图片进行筛选；
3)计算相邻两张咬合面图像的特征点坐标，及其对应描述子，并根据这些信息进行特征点匹配，匹配过程中，利用特征点坐标信息剔除靠的过近的匹配特征点对；
4)在两张咬合面图像之间，根据其特征点的匹配情况，利用局部光束平差法进行图像变换参数的计算；
5)将得到得到两张牙齿咬合面图像按照计算得到的参数拼接为一张图像；
6)以得到的这张局部咬合面为基础，重复步骤3)和4)，依次将后续图像拼接到局部图上，直到所有图像都完成拼接，最后形成牙齿咬合面的全景图。
2.按照权利要求1所述基于局部优化算法的牙齿咬合面全景图像拼接方法，其特征在于：所述步骤2)中筛选原则是，设立关联性阈值，删除关联度高于所设阈值的图像。
3.按照权利要求1所述基于局部优化算法的牙齿咬合面全景图像拼接方法，其特征在于：所述步骤4)中，局部是指两张图间。
4.按照权利要求2所述基于局部优化算法的牙齿咬合面全景图像拼接方法，其特征在于：所述阈值选取通过以下过程实现:a.给定一组连续拍摄咬合面图像，任意选择某一图片作为基准图片，计算相邻图像与它的关联值大小；b.从按照关联值的大小，由高到低将对应的图像与基准图像两两拼接，直到拼接图像发生明显畸变或错误为止，这时对应的关联值标记为待选阈值；c.重复以上过程若干次，得到若干个待选阈值，选择最大值作为算法的阈值。
CN201810428969.7A 2018-05-08 2018-05-08 基于局部优化算法的牙齿咬合面全景图像拼接方法 Pending CN108597004A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810428969.7A CN108597004A (zh) 2018-05-08 2018-05-08 基于局部优化算法的牙齿咬合面全景图像拼接方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810428969.7A CN108597004A (zh) 2018-05-08 2018-05-08 基于局部优化算法的牙齿咬合面全景图像拼接方法

Publications (1)

Publication Number Publication Date
CN108597004A true CN108597004A (zh) 2018-09-28

Family

ID=63635689

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810428969.7A Pending CN108597004A (zh) 2018-05-08 2018-05-08 基于局部优化算法的牙齿咬合面全景图像拼接方法

Country Status (1)

Country Link
CN (1) CN108597004A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111970537A (zh) * 2020-08-04 2020-11-20 威海精讯畅通电子科技有限公司 一种根系扫描图像处理方法及系统
CN114681091A (zh) * 2022-04-18 2022-07-01 四川大学 一种牙修复体咬合情况的评估方法和设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103198501A (zh) * 2013-04-09 2013-07-10 上海理工大学 一种牙齿全景图像自动重构方法
CN103347436A (zh) * 2011-01-11 2013-10-09 爱德芳世株式会社 口腔内拍摄显示系统
CN106504321A (zh) * 2016-11-07 2017-03-15 达理 使用照片或视频重建三维牙模的方法及使用rgbd图像重建三维牙模的方法
CN107301622A (zh) * 2017-06-20 2017-10-27 广州华端科技有限公司 口腔cbct图像的全景图像获取方法和系统
US20170340197A1 (en) * 2016-05-26 2017-11-30 Dental Smartmirror, Inc. Using an Intraoral Mirror with an Integrated Camera to Record Dental Status, and Applications Thereof
CN107798656A (zh) * 2017-11-09 2018-03-13 南京齿贝犀科技有限公司 一种基于距离传感器和陀螺仪的口腔全景图像拼接方法
US20180122089A1 (en) * 2016-11-01 2018-05-03 Korea Institute Of Science And Technology Method, apparatus and program for selective registration three-dimensional tooth image data to optical scanning tooth model

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103347436A (zh) * 2011-01-11 2013-10-09 爱德芳世株式会社 口腔内拍摄显示系统
US20130286174A1 (en) * 2011-01-11 2013-10-31 Kabushiki Kaisya Advance Intraoral video camera and display system
CN103198501A (zh) * 2013-04-09 2013-07-10 上海理工大学 一种牙齿全景图像自动重构方法
US20170340197A1 (en) * 2016-05-26 2017-11-30 Dental Smartmirror, Inc. Using an Intraoral Mirror with an Integrated Camera to Record Dental Status, and Applications Thereof
US20180122089A1 (en) * 2016-11-01 2018-05-03 Korea Institute Of Science And Technology Method, apparatus and program for selective registration three-dimensional tooth image data to optical scanning tooth model
CN106504321A (zh) * 2016-11-07 2017-03-15 达理 使用照片或视频重建三维牙模的方法及使用rgbd图像重建三维牙模的方法
CN107301622A (zh) * 2017-06-20 2017-10-27 广州华端科技有限公司 口腔cbct图像的全景图像获取方法和系统
CN107798656A (zh) * 2017-11-09 2018-03-13 南京齿贝犀科技有限公司 一种基于距离传感器和陀螺仪的口腔全景图像拼接方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
余清洲: "航拍序列图像自动拼接技术的研究", 《中国优秀硕士学位论文全文数据库（硕士）信息科技辑（月刊）》 *
姜超等: "基于尺度不变特征的影像自动拼接", 《遥感信息》 *
李慧敏等: "基于模板迭代更新的图像配准算法", 《电子测量技术》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111970537A (zh) * 2020-08-04 2020-11-20 威海精讯畅通电子科技有限公司 一种根系扫描图像处理方法及系统
CN111970537B (zh) * 2020-08-04 2023-02-28 威海精讯畅通电子科技有限公司 一种根系扫描图像处理方法及系统
CN114681091A (zh) * 2022-04-18 2022-07-01 四川大学 一种牙修复体咬合情况的评估方法和设备
CN114681091B (zh) * 2022-04-18 2023-03-14 四川大学 一种牙修复体咬合情况的评估方法和设备

Similar Documents

Publication Publication Date Title
US20240087097A1 (en) Domain specific image quality assessment
KR101238608B1 (ko) 이미지 프로세싱을 기반으로 한 3ｄ 공간 차원용 시스템 및 방법
CN102316247B (zh) 图像处理装置
JP4585048B2 (ja) 内視鏡システム
TWI691933B (zh) 一種圖像處理方法及裝置
CN111784754B (zh) 基于计算机视觉的牙齿正畸方法、装置、设备及存储介质
CN112087985A (zh) 经由实时增强可视化的模拟正畸处理
CN108055452A (zh) 图像处理方法、装置及设备
JPH05108819A (ja) 画像処理装置
CN113902657A (zh) 图像拼接方法、装置和电子设备
CN107798656B (zh) 一种基于距离传感器和陀螺仪的口腔全景图像拼接方法
CN107507230A (zh) 应用于全景图像的目标跟踪方法及全景相机
CN113989928B (zh) 一种动作捕捉和重定向方法
D'Apuzzo Surface measurement and tracking of human body parts from multi station video sequences
CN104883948A (zh) 图像处理装置、程序以及图像处理方法
CN110910449B (zh) 识别物体三维位置的方法和系统
JP2003179800A (ja) 多視点画像生成装置、画像処理装置、および方法、並びにコンピュータ・プログラム
CN108597004A (zh) 基于局部优化算法的牙齿咬合面全景图像拼接方法
CN110035687B (zh) 对使用胶囊相机所撷取的图像进行图像拼接的方法及装置
CN108615223A (zh) 基于局部优化算法的牙齿唇颊侧全景图像拼接方法
JPWO2019203006A1 (ja) 内視鏡装置、内視鏡プロセッサ装置及び内視鏡画像表示方法
CN114283236A (zh) 一种用智能手机进行口腔扫描的方法、装置和存储介质
CN108648146A (zh) 基于局部优化算法的牙齿舌腭侧全景图像拼接方法
CN114786614A (zh) 确定上牙和下牙之间的空间关系
Ahmad et al. 3D reconstruction of gastrointestinal regions using shape-from-focus

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180928

RJ01 Rejection of invention patent application after publication