CN111227933B - 一种下颌角截骨术的预测和实时渲染系统 - Google Patents

一种下颌角截骨术的预测和实时渲染系统 Download PDF

Info

Publication number
CN111227933B
CN111227933B CN202010209824.5A CN202010209824A CN111227933B CN 111227933 B CN111227933 B CN 111227933B CN 202010209824 A CN202010209824 A CN 202010209824A CN 111227933 B CN111227933 B CN 111227933B
Authority
CN
China
Prior art keywords
osteotomy
patient
prediction
preoperative
reference plane
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010209824.5A
Other languages
English (en)
Other versions
CN111227933A (zh
Inventor
薛红宇
张颂
蔡辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Peking University Third Hospital Peking University Third Clinical Medical College
Original Assignee
Peking University Third Hospital Peking University Third Clinical Medical College
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Peking University Third Hospital Peking University Third Clinical Medical College filed Critical Peking University Third Hospital Peking University Third Clinical Medical College
Publication of CN111227933A publication Critical patent/CN111227933A/zh
Application granted granted Critical
Publication of CN111227933B publication Critical patent/CN111227933B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/101Computer-aided simulation of surgical operations
    • A61B2034/105Modelling of the patient, e.g. for ligaments or bones
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2065Tracking using image or pattern recognition

Landscapes

  • Health & Medical Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biomedical Technology (AREA)
  • Robotics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Dental Tools And Instruments Or Auxiliary Dental Instruments (AREA)

Abstract

本发明公开了一种下颌角截骨术的预测和实时渲染系统,系统包括标定子系统、预测子系统、渲染子系统:标定子系统用于根据下颌角截骨手术患者的术前CT图像,获得下颌角截骨手术患者的下齿列铆钉点、危险区,并标定最大去骨范围;预测子系统用于将下颌角截骨手术患者的术前CT图像、术前照片、预测术后照片、最大去骨范围,输入截骨面预测模型,预测出实际患者的截除线、去骨面,渲染子系统用于结合AR设备,实时渲染术野截除线、去骨面、危险区。本发明根据实际患者的术前CT、术前照片与截骨面预测模型,对实际患者的术野进行实时渲染,提高手术精度,降低手术风险,缩短手术时间,减少手术并发症。

Description

一种下颌角截骨术的预测和实时渲染系统
技术领域
本发明涉及下颌角截骨术技术领域,尤其是涉及一种下颌角截骨术的预测和实时渲染系统。
背景技术
由于下颌角截骨术后患者面部外观的变化,除与下颌骨截骨量相关外,与局部软组织张力改变导致的软组织体积量的变化也有一部分关联。因此,下颌角截骨术的去骨量并不是术前患者面部外观与术后预测效果间做减法,既往单纯借助于三维CT及面部3D扫描照相系统来进行手术效果的3D设计,并不能准确预测在下颌角截骨术中为达到术后预测效果时下颌角的去骨量及截骨面形态位置。
现有的针对下颌角截骨术的手术导航系统,通过对患者进行螺旋CT扫描,并将影像数据进行重建及处理,凭借既往临床经验设计截骨线,并将其标注在下颌骨的三维数据模型上,机器人辅助手术系统将截骨线细分为多个钻点,通过在骨面上沿截骨线进行多处钻点钻孔以实现截骨。同时,该系统通过在下颌角区钻孔连接标记模块形成标记复合体,或根据患者下齿列形态定制牙套模,并将标记模块连接在牙套模上,术中通过患者配戴连有标记模块的牙套模来判断下颌骨的相对位置。术中,系统借助增强现实技术通过识辨标记模块判断下颌骨相对位置,并确定截骨线位置,以实现通过RAS行下颌角截骨术。该手术导航系统经过临床实际应用,平均误差较小,可以保证手术的安全性,同时在辅助医生经验积累等方面有较强的优势。但该系统目前存在三个不足之处:(1)需额外固定标志点:通过嘱患者佩带连有标记模块的牙套模用以确定截骨线,由于连接方式为非刚性连接,在术中标记模块与下颌骨之间存在较高的相对移位的风险,从而导致截骨线判断存在误差,降低了手术安全性;或将标记模块通过钻孔方式连接在下颌角区,虽极大地提高了标记模块与下颌骨体间相对位置关系的稳定性,但是由于口内入路的下颌角截骨术实际手术操作空间窄且深,固定标记模块的操作本身难度较高,同时标记模块相对术野过于庞大,能够实现妥善放置标记模块的适用病例受到了极大的限制。(2)该手术导航系统对于截骨方式的处理为采用机械间断打孔的模式,由于打孔形成的经骨组织的孔道为直线型的,因此此模式对于同时需要进行下颌骨外板去除术的病例并不适用,其形成的截骨面为一平面而非曲面,在很大程度上限制了该手术导航系统的应用范围。(3)该手术导航系统并未对下颌角截骨术后的软组织改变予以考虑,截骨线的设计完全凭借术者的既往经验,而无量化的指标,该系统虽然提高了手术的安全性,但对于准确预测患者术后效果及提高患者满意度等方面并无优势。
因此,设计一种基于人工智能技术及增强现实技术的针对下颌角截骨术的手术导航系统,全程协助医生手术进行下颌角截骨术的截骨量预测,是目前亟待解决的问题。
发明内容
本发明的目的是提供一种下颌角截骨术的截骨量预测系统,通过在截骨面预测模型中输入下颌角截骨手术患者的术前CT图像数据集、术前照片数据集、术后模拟照片数据集,获得下颌角截骨手术患者的截骨面,结合AR设备,协助医生完成对患者进行下颌角截骨术的截骨量预测。
本发明的上述发明目的通过以下技术方案得以实现:
一种下颌角截骨术的预测和实时渲染系统,包括标定子系统、预测子系统、渲染子系统:
标定子系统用于根据下颌角截骨手术患者的术前CT图像,获得下颌角截骨手术患者的下齿列铆钉点、危险区,并标定最大去骨范围;
预测子系统用于将下颌角截骨手术患者的术前CT图像、术前照片、预测术后照片、最大去骨范围,输入截骨面预测模型,预测出实际患者的截除线、去骨面;结合AR设备,实时渲染术野截除线、去骨面、危险区。
本发明进一步设置为:标定子系统中,根据下颌角截骨手术患者的术前CT图像,抓取下齿列铆钉点,获得下齿列铆钉点参考平面γ;标记其下齿槽神经走形区及颏神经走形区为危险区1,标记面动脉及面后静脉走形区为危险区2;对各危险区进行量化评估,构建危险区数据集。
本发明进一步设置为:对各危险区进行量化评估,用参数表示各危险区分别与参考平面γ之间的关系,其中,用参数35表示危险区1几何中心距离参考平面γ几何中心的距离,用参数36表示危险区1与参考平面γ的偏转角;用参数37表示危险区2几何中心距离参考平面γ几何中心的距离,用参数38表示危险区2与参考平面γ的偏转角。
本发明进一步设置为:根据术前CT图像,避开危险区,得到下颌角截骨手术患者的最大去骨范围。
本发明进一步设置为:标定子系统中,对下颌角截骨手术患者的最大去骨范围进行量化,包括对最大去骨范围进行拆分、标注;所述拆分是把最大去骨范围拆分为下颌骨截除线与下颌骨外板去除平面两部分,在术前CT图像直接标注下颌骨截除线α与下颌骨外板去除平面β,同时在下齿列上,标注多个铆钉点,并根据所述铆钉点标定参考平面γ;所述标注是量化估计下颌骨截除线α、下颌骨外板去除平面β分别与参考平面γ之间的关系。
本发明进一步设置为:所述标注包括:用参数31表示下颌骨截除线α几何中心距离参考平面γ几何中心的距离;用参数32表示下颌骨截除线α与参考平面γ的偏转角;用参数33表示下颌骨外板去除平面β几何中心距离参考平面γ几何中心的距离;用参数34表示下颌骨外板去除平面β与参考平面γ的偏转角。
本发明进一步设置为:预测子系统用于将术前CT、术前照片、预测术后照片、最大去骨范围输入截骨面预测模型,预测出截除线、去骨面;对不同视角的截除线、去骨面、危险区进行实时绘制;实现实时渲染术野截除线、去骨面、危险区。
本发明进一步设置为:渲染子系统用于结合AR系统,实时渲染术野截除线、去骨面、危险区,将可视化三维模型通过AR系统与实际术野叠加后投射于镜片屏幕。
本发明的上述发明目的通过以下技术方案得以实现:
一种下颌角截骨术的预测和实时渲染装置,包括存储器、处理器,所述存储器用于存储有能够被处理器加载并执行下颌角截骨术的预测和实时渲染系统的计算机程度。
与现有技术相比,本发明的有益技术效果为:
1.本申请根据实际患者的术前CT,得到最大去骨范围、危险区,结合截骨面预测模型,实现对术后面部效果图改变范围的预测,获得术后面部3D效果最大改变图,确保术后效果。
2.进一步地,根据实际患者的术前CT、术前照片与截骨面预测模型,对实际患者的术后效果进行预测,实现对术后效果的精准的个性化设计。
3. 进一步地,结合AR设备,实现术野的实时渲染,提高手术精度,降低手术风险,缩短手术时间,减少手术并发症。
附图说明
图1是本发明的一个具体实施例的手术导航系统总结构示意图。
图2是本发明的一个具体实施例的手术导航系统示意图。
图3是本发明的一个具体实施例的预测模型建立示意图。
图4是本发明的一个具体实施例的截骨面预测示意图。
具体实施方式
以下结合附图对本发明作进一步详细说明。
图1为本手术导航系统的总结构图。
具体地,一种下颌角截骨术的手术导航系统,如图2所示,包括以下子系统:
S1、标定子系统:根据既往下颌角截骨手术患者的相关资料,建立截骨面预测模型学习版,用新入组下颌角截骨手术患者的相关资料,对截骨面预测模型学习版进行测试,得到稳定的截骨面预测模型;
具体地,如图3所示,包括如下单元:
A1、根据既往患者下颌角截骨手术患者术前CT图像、术后CT图像获得第一截骨面参数,结合既往患者的术前照片、术后照片,基于多任务卷积神经网络,获得截骨面预测模型学习版,得到手术导航系统1.0版;
A2、收集新入组患者术前CT图像、术后CT图像,获得第二截骨面参数,结合术前照片、术后照片,构建测试集,对截骨面预测模型进行测试,得到稳定的截骨面预测模型,再结合既往患者的危险区、新入组患者的危险区,得到截骨面预测模型稳定版,完成手术导航系统2.0版。
以下详细说明:
将既往下颌角截骨手术患者的术前CT图像、术后CT图像进行像素级别的对齐,进行比较,得到的差值即为既往患者的最终截骨面,即第一最终截骨面,对第一最终截骨面进行拆分与标定。
首先,将第一最终截骨面分为第一下颌骨截除线α1与第一下颌骨外板去除平面β1两个组成部分,在术前CT上直接获得第一下颌骨截除线α1与第一下颌骨外板去除平面β1、第一下齿铆钉点的标注信息,第一下齿铆钉点包括多个点,多个下齿铆钉点决定了第一下齿列铆钉点参考平面γ1。
然后,对第一最终截骨面进行量化处理,用参数分别表示第一下颌骨截除线α1、第一下颌骨外板去除平面β1与第一下齿列铆钉点参考平面γ1之间的位置关系,即,以第一下齿列铆钉点参考平面γ1为基准,用参数分别表示第一下颌骨截除线α1、第一下颌骨外板去除平面β1的位置关系,具体地,用参数11表示第一下颌骨截除线α1几何中心距离第一下齿列铆钉点参考平面γ1几何中心的距离;用参数12表示第一下颌骨截除线α1与第一下齿列铆钉点参考平面γ1的偏转角;用参数13表示第一下颌骨外板去除平面β1几何中心距离第一下齿列铆钉点参考平面γ1几何中心的距离;用参数14表示第一下颌骨外板去除平面β1与第一下齿列铆钉点参考平面γ1的偏转角。
因最终截骨面为三维结构,因而同一视角的参数构成一个数据集,不同视角的参数组成不同的数据集。
既往患者术前CT的多个视角数据集、术前照片多个视角数据集、术后照片多个视角数据集、最终截骨面数据集,构成训练集,输入多任务卷积神经网络进行训练,获得截骨面预测模型学习版,即手术导航系统1.0版。
本子系统中,学习软组织变量对最终术后效果的非线性影响并进行建模,实现基于术前CT数据、术前照片和模拟术后效果对截骨面的精确估计。
对于截骨面预测模型学习版,需要进行稳定性测试。
采集新入组下颌角截骨术患者的数据,组成测试集。
同样的,将新入组患者的术前CT图像、术后CT图像进行像素级别的对齐,进行比较,得到的差值即为新入组患者的最终截骨面,即第二最终截骨面。对第二最终截骨面进行拆分与标定。
首先,将第二最终截骨面分为第二下颌骨截除线α2与第二下颌骨外板去除平面β2两个组成部分,在术前CT上直接获得第二下颌骨截除线α2与第二下颌骨外板去除平面β2、第二下齿铆钉点的标注信息,第二下齿铆钉点包括多个点,多个下齿铆钉点决定了第二下齿列铆钉点参考平面γ2。
然后,对第二最终截骨面进行量化处理,用参数分别表示第二下颌骨截除线α2、第二下颌骨外板去除平面β2与第二下齿列铆钉点参考平面γ2之间的相互关系,即,以第二下齿列铆钉点参考平面γ2为基准,用参数分别表示第二下颌骨截除线α2、第二下颌骨外板去除平面β2的位置关系,具体地,用参数21表示第二下颌骨截除线α2几何中心距离第二下齿列铆钉点参考平面γ2几何中心的距离;用参数22表示第二下颌骨截除线α2与第二下齿列铆钉点参考平面γ2的偏转角;用参数23表示第二下颌骨外板去除平面β2几何中心距离第二下齿列铆钉点参考平面γ2几何中心的距离;用参数24表示第二下颌骨外板去除平面β2与第二下齿列铆钉点参考平面γ2的偏转角。
由不同视角的以上参数的数据集,构成新入组患者的第二最终截骨面的数据集。
由第二最终截骨面的数据集、术前CT、结合新入组患者的术前照片、术后照片,构成测试集,新入组患者为已经完成了手术的患者。
将测试集数据输入截骨面预测模型学习版进行测试,得到稳定的截骨面预测模型,提高手术导航系统的准确性和稳定性。
根据既往患者的术前CT,标记既往患者的下齿槽神经走形区及颏神经走形区为第一危险区1,标记面动脉及面后静脉走形区为第一危险区2;对各危险区进行量化评估,构建第一危险区数据集。
对第一危险区进行量化,用参数表示各危险区分别与第一下齿列铆钉点参考平面γ1之间的关系,具体地,用参数15表示第一危险区1几何中心距离第一参考平面γ1几何中心的距离,用参数16表示第一危险区1与第一参考平面γ1的偏转角;用参数17表示第一危险区2几何中心距离第一参考平面γ1几何中心的距离,用参数18表示第一危险区2与第一参考平面γ1的偏转角。
根据新入组患者的术前CT,标记既往患者的下齿槽神经走形区及颏神经走形区为第二危险区1,标记面动脉及面后静脉走形区为第二危险区2;对各危险区进行量化评估,构建第二危险数据集。
同样地,对第二危险区进行量化,用参数表示各危险区分别与第二下齿列铆钉点参考平面γ2之间的关系,具体地,用参数25表示第二危险区1几何中心距离第一参考平面γ2几何中心的距离,用参数26表示第二危险区1与第一参考平面γ2的偏转角;用参数27表示第二危险区2几何中心距离第一参考平面γ2几何中心的距离,用参数28表示第二危险区2与第一参考平面γ2的偏转角。
将第一危险区数据集、第二危险区数据集叠加到稳定的截骨面预测模型,得到截骨面预测模型稳定版,完成构建手术导航系统2.0版。
S2、预测子系统:将下颌角截骨术患者的相关信息输入截骨面预测模型,预测术后面部3D效果最大改变范围。
对即将进行下颌角截骨术的患者,即实际患者,根据其术前CT,标记为其下齿槽神经走形区及颏神经走形区为第三危险区1,标记其面动脉及面后静脉走形区为第三危险区2;对各危险区进行量化评估,构建第三危险区数据集。
根据下颌角截骨手术患者的术前CT图像,抓取下齿列铆钉点,获得下颌角截骨术的患者的下齿列铆钉点第三参考平面γ3。
根据下颌角截骨手术患者的术前CT图像,避开第三危险区1、第三危险区2,得到下颌角截骨手术患者的最大去骨范围。
对下颌角截骨手术患者的最大去骨范围进行量化,包括对最大去骨范围进行拆分、标注;把最大去骨范围拆分为第三下颌骨截除线α3与第三下颌骨外板去除平面β3两部分,在术前CT图像直接标注第三下颌骨截除线α3与第三下颌骨外板去除平面β3。
量化估计第三下颌骨截除线α3、第三下颌骨外板去除平面β3分别与第三参考平面γ3之间的关系。具体地,用参数31表示第三下颌骨截除线α3几何中心距离第三参考平面γ3几何中心的距离;用参数32表示第三下颌骨截除线α3与第三参考平面γ3的偏转角;用参数33表示第三下颌骨外板去除平面β3几何中心距离第三参考平面γ3几何中心的距离;用参数34表示第三下颌骨外板去除平面β3与第三参考平面γ3的偏转角。
对各危险区进行量化评估,用参数表示各危险区分别与参考平面γ3之间的关系,其中,用参数35表示第三危险区1几何中心距离第三参考平面γ3几何中心的距离,用参数36表示第三危险区1与参考平面γ3的偏转角;用参数37表示第三危险区2几何中心距离第三参考平面γ3几何中心的距离,用参数38表示第三危险区2与第三参考平面γ3的偏转角。
最大去骨范围并不代表为最终手术截骨面。
将下颌角截骨手术患者的术前CT、术前照片、最大去骨范围输入截骨面预测模型稳定版,获得术后面部最大改变量3D效果预测,即预测术后面部效果图改变范围。
S3、渲染子系统根据下颌角截骨术患者的术前CT、截除线、去骨面,结合AR设备,在镜片屏幕上绘制投射出可透视的、与术野实时影像拟合的三维图像。
具体地,如图4所示,包括如下单元:
B1、根据下颌角截骨手术患者的术前CT图像,获得下颌角截骨手术患者的下齿列铆钉点、危险区,并标定最大去骨范围;
B2、将下颌角截骨手术患者的术前CT图像、术前照片、预测术后照片、最大去骨范围,输入截骨面预测模型,预测出实际患者的截除线、去骨面,结合AR设备,实时渲染术野截除线、去骨面、危险区。
以下详细说明:
根据设备重量、性能稳定程度、穿戴模式稳固程度、是否符合手术无菌原则等条件,测试、选择、购置适宜的可穿戴增强现实设备及可其用于二次开发的软件平台,选择适宜的AR(Augmented Reality)设备,也称可穿戴增强现实设备。
利用增强现实技术,实现术野下截骨面及危险区的实时绘制及拟合,改善下颌角截骨手术的截骨精度,实现对术者的预警作用,避免触碰危险区域。
将下颌角截骨手术患者的术前CT、术前照片、预测术后照片、最大去骨范围输入截骨面预测模型稳定版,预测出实际患者的截除线、去骨面;再根据不同视角的截除线、去骨面、危险区,结合AR设备,实时渲染术野截除线、去骨面、第三危险区1、第三危险区2,将可视化三维模型通过AR系统与实际术野叠加后投射于镜片屏幕,完成手术导航系统3.0版。
具体地,基于AR设备,建立一套针对下颌角截骨术中截骨面的可视化三维模型,并结合三维CT图像,标记术侧多颗下齿,并据此设定多个铆钉点,根据术前CT图像,标记危险区,并在三维模式下,确定可能铆钉点、危险区与截骨面三维模型的空间关系。
在实际手术过程中,通过术者穿戴的AR设备自带的摄像头,对术野进行拍摄并抓取预设铆钉点,根据已构建好的三维空间位置关系,在AR设备屏幕上投射出可透视的、与术野实时影像拟合后的截骨面、危险区1、危险区2图像,实现术野中截除线、去骨面、危险区1、危险区2的实时渲染。根据大量的实际术中影像,筛选出易于抓取、且不影响空间位置关系构建稳定性的3个左右铆钉点。基于AR设备的影像自动化识别技术,构建出实时对术野影像分析识别、自动抓取预设铆钉点的系统功能,并使该系统功能与预先构建好的铆钉点、危险区1、危险区2及截骨面的三维影像相结合,使术者在实际手术中通过穿戴AR设备并在其辅助下,实现截骨面的三维模型可透视地投影与AR设备屏幕上,并与从佩戴者视角中透过AR设备屏幕观察到的患者术野里的下颌骨部分拟合的功能,同时在AR设备屏幕上可透视地投影出第三危险区1、第三危险区2图像,以对应下齿槽神经和颏神经走形区及面动脉和面后静脉走形区,实现对术者的预警作用。
同时,实际手术过程中,对手术导航系统进行测试并进行调整,达到系统定位准确并能稳定投射,从而实现手术导航系统在下颌角截骨手术中的导航作用。
S4、对截骨面预测模型不断进行功能叠加,并不断测试改进,完善手术导航系统。
将子系统S2中的术后面部3D效果预测叠加到子系统S3中的手术导航系统2.0版,完善改进系统,完成手术导航系统4.0版,进一步完善预测与渲染效果;
对手术导航系统4.0版的反复调试后,将其应用于临床实际工作中,根据实际情况的需要进一步进行升级,增加系统的稳定性,提高术后效果预期及手术过程中的精准度,完成手术导航系统5.0版。
对于患者来说,本申请根据实际患者术前CT及危险区1、2标定最大去骨范围,通过输入术前照片、术前CT及最大去骨量,借助人工智能技术获得术后面部3D效果最大改变图,对患者术后预测面部轮廓可调整范围实现预估,完成对患者术后效果的可实现的高精准度的个性化设计,缩短术前沟通成本,提高患者满意度。
对于医生来说,本申请通过标记危险区,手术导航系统自动预判患者的最大去骨范围,逆推术后预测面部轮廓可调整范围,实现基于3D照相及处理系统的、对术后效果可实现的、精准的个性化设计,结合AR设备,对截除线、去骨面进行术野投影,提高手术精度,在术野下标注危险区,对医生起到提示作用,降低手术风险,缩短手术时间,减少手术并发症。
本申请的一种下颌角截骨术的预测和实时渲染系统,包括存储器、处理器,所述存储器用于存储有能够被处理器加载并执行本系统的计算机程度。
本具体实施方式的实施例均为本发明的较佳实施例,并非依此限制本发明的保护范围,故:凡依本发明的结构、形状、原理所做的等效变化,均应涵盖于本发明的保护范围之内。

Claims (9)

1.一种下颌角截骨术的预测和实时渲染系统,其特征在于:包括标定子系统、预测子系统、渲染子系统;
标定子系统用于根据下颌角截骨手术患者的术前CT图像,获得下颌角截骨手术患者的下齿列铆钉点、危险区,并标定最大去骨范围;
预测子系统用于将下颌角截骨手术患者的术前CT图像、术前照片、预测术后照片、最大去骨范围输入截骨面预测模型,预测出实际患者的截除线、去骨面;所述截骨面预测模型是:根据既往下颌角截骨手术患者的相关资料,建立截骨面预测模型学习版,用新入组下颌角截骨手术患者的相关资料,对截骨面预测模型学习版进行测试,得到稳定的截骨面预测模型,再结合既往患者的危险区、新入组患者的危险区,得到截骨面预测模型稳定版;
渲染子系统用于结合AR设备,实时渲染术野截除线、去骨面、危险区。
2.根据权利要求1所述的预测和实时渲染系统,其特征在于:标定子系统中,根据下颌角截骨手术患者的术前CT图像,抓取下齿列铆钉点,获得下齿列铆钉点参考平面γ;标记其下齿槽神经走形区及颏神经走形区为危险区1,标记面动脉及面后静脉走形区为危险区2;对各危险区进行量化评估,构建危险区数据集。
3.根据权利要求2所述的预测和实时渲染系统,其特征在于:对各危险区进行量化评估,用参数表示各危险区分别与参考平面γ之间的关系,其中,用参数35表示危险区1几何中心距离参考平面γ几何中心的距离,用参数36表示危险区1与参考平面γ的偏转角;用参数37表示危险区2几何中心距离参考平面γ几何中心的距离,用参数38表示危险区2与参考平面γ的偏转角。
4.根据权利要求2所述的预测和实时渲染系统,其特征在于:根据术前CT图像,避开危险区,得到下颌角截骨手术患者的最大去骨范围。
5.根据权利要求1所述的预测和实时渲染系统,其特征在于:标定子系统中,对下颌角截骨手术患者的最大去骨范围进行量化,包括对最大去骨范围进行拆分、标注;所述拆分是把最大去骨范围拆分为下颌骨截除线与下颌骨外板去除平面两部分,在术前CT图像直接标注下颌骨截除线α与下颌骨外板去除平面β,同时在下齿列上,标注多个铆钉点,并根据所述铆钉点标定参考平面γ;所述标注是量化估计下颌骨截除线α、下颌骨外板去除平面β分别与参考平面γ之间的关系。
6.根据权利要求5所述的预测和实时渲染系统,其特征在于:所述标注包括:用参数31表示下颌骨截除线α几何中心距离参考平面γ几何中心的距离;用参数32表示下颌骨截除线α与参考平面γ的偏转角;用参数33表示下颌骨外板去除平面β几何中心距离参考平面γ几何中心的距离;用参数34表示下颌骨外板去除平面β与参考平面γ的偏转角。
7.根据权利要求1所述的预测和实时渲染系统,其特征在于:预测子系统用于将术前CT图像、术前照片、预测术后照片、最大去骨范围输入截骨面预测模型,预测出截除线、去骨面;对不同视角的截除线、去骨面、危险区进行实时绘制。
8.根据权利要求7所述的预测和实时渲染系统,其特征在于:渲染子系统用于结合AR设备,实时渲染术野截除线、去骨面、危险区,将可视化三维模型通过AR设备与实际术野叠加后投射于镜片屏幕。
9.根据权利要求1所述的预测和实时渲染系统,其特征在于:包括存储器、处理器。
CN202010209824.5A 2019-04-16 2020-03-23 一种下颌角截骨术的预测和实时渲染系统 Active CN111227933B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN2019103058948 2019-04-16
CN201910305894.8A CN109875684A (zh) 2019-04-16 2019-04-16 一种下颌角截骨术的预测和实时渲染方法

Publications (2)

Publication Number Publication Date
CN111227933A CN111227933A (zh) 2020-06-05
CN111227933B true CN111227933B (zh) 2021-02-19

Family

ID=66937688

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201910305894.8A Pending CN109875684A (zh) 2019-04-16 2019-04-16 一种下颌角截骨术的预测和实时渲染方法
CN202010209824.5A Active CN111227933B (zh) 2019-04-16 2020-03-23 一种下颌角截骨术的预测和实时渲染系统

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201910305894.8A Pending CN109875684A (zh) 2019-04-16 2019-04-16 一种下颌角截骨术的预测和实时渲染方法

Country Status (1)

Country Link
CN (2) CN109875684A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113133802B (zh) * 2021-04-20 2022-12-23 四川大学 一种基于机器学习的骨手术线自动定点方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101396291A (zh) * 2007-09-24 2009-04-01 上海交通大学医学院附属第九人民医院 一种个性化下颌角肥大手术导航实体的制造方法
CN103106348A (zh) * 2013-03-08 2013-05-15 上海交通大学医学院附属第九人民医院 虚拟外科手术模拟方法及其装置
WO2015081232A1 (en) * 2013-11-29 2015-06-04 The Johns Hopkins University Computer-assisted planning and execution system
CN104720877A (zh) * 2013-12-18 2015-06-24 王旭东 一种数字化技术在口内进路下颌骨髁突病变外科切除术中的应用
CN105608741A (zh) * 2015-12-17 2016-05-25 四川大学 预测颌面骨整形术后软组织容貌变化的计算机仿真方法
CN108324378A (zh) * 2018-02-11 2018-07-27 浙江工业大学 基于主副机器人相互协作的颅面骨畸形整复全程精确手术系统及其手术操作方法
CN109061892A (zh) * 2018-09-27 2018-12-21 广州狄卡视觉科技有限公司 整形外科医学影像模型重建互动裸眼立体显示系统及方法
CN109464193A (zh) * 2018-12-27 2019-03-15 北京爱康宜诚医疗器材有限公司 数据预测方法、装置及系统

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090115884A (ko) * 2001-10-31 2009-11-09 이마그노시스 가부시키가이샤 의료용 시뮬레이션장치
JP5171193B2 (ja) * 2007-09-28 2013-03-27 株式会社 レキシー 人工膝関節置換手術の術前計画用プログラム
US20100305435A1 (en) * 2009-05-27 2010-12-02 Magill John C Bone Marking System and Method
CA2795668C (en) * 2010-04-29 2017-05-16 Synthes Usa, Llc Orthognathic implant and methods of use
US8683669B2 (en) * 2011-05-13 2014-04-01 I-Shou University Bone plate manufacturing method
JP2015523871A (ja) * 2012-05-17 2015-08-20 デピュイ・シンセス・プロダクツ・エルエルシーDePuy Synthes Products, LLC 外科手術計画の方法
CN106901834A (zh) * 2016-12-29 2017-06-30 陕西联邦义齿有限公司 微创心脏外科手术的术前规划及手术虚拟现实模拟方法
CN107049475A (zh) * 2017-04-19 2017-08-18 纪建松 肝癌局部消融方法及系统
CN109171958A (zh) * 2018-10-12 2019-01-11 杭州电子科技大学 个性化脊椎外科手术导板的制作方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101396291A (zh) * 2007-09-24 2009-04-01 上海交通大学医学院附属第九人民医院 一种个性化下颌角肥大手术导航实体的制造方法
CN103106348A (zh) * 2013-03-08 2013-05-15 上海交通大学医学院附属第九人民医院 虚拟外科手术模拟方法及其装置
WO2015081232A1 (en) * 2013-11-29 2015-06-04 The Johns Hopkins University Computer-assisted planning and execution system
CN104720877A (zh) * 2013-12-18 2015-06-24 王旭东 一种数字化技术在口内进路下颌骨髁突病变外科切除术中的应用
CN105608741A (zh) * 2015-12-17 2016-05-25 四川大学 预测颌面骨整形术后软组织容貌变化的计算机仿真方法
CN108324378A (zh) * 2018-02-11 2018-07-27 浙江工业大学 基于主副机器人相互协作的颅面骨畸形整复全程精确手术系统及其手术操作方法
CN109061892A (zh) * 2018-09-27 2018-12-21 广州狄卡视觉科技有限公司 整形外科医学影像模型重建互动裸眼立体显示系统及方法
CN109464193A (zh) * 2018-12-27 2019-03-15 北京爱康宜诚医疗器材有限公司 数据预测方法、装置及系统

Also Published As

Publication number Publication date
CN111227933A (zh) 2020-06-05
CN109875684A (zh) 2019-06-14

Similar Documents

Publication Publication Date Title
CN109907827B (zh) 一种下颌角截骨术的手术导航系统
CN109069097B (zh) 牙科用三维数据处理装置及其方法
US11275249B2 (en) Augmented visualization during surgery
JP5476036B2 (ja) 網膜投影型ヘッドマウントディスプレイ装置を用いた手術ナビゲーションシステムおよびシミュレーションイメージの重ね合わせ方法
CN108744306A (zh) 被检体定位装置、被检体定位方法、被检体定位程序和放射线治疗系统
WO2013163800A2 (zh) 口腔内手术中辅助导引的方法
JP2003144454A (ja) 関節手術支援情報算出方法、関節手術支援情報算出プログラム、及び関節手術支援情報算出システム
JP2017507689A (ja) 少なくとも1つの解剖学的構造の3d参照コンピュータモデルを生成するための方法
KR20050055599A (ko) 자기공명 단층촬영기를 조작하는 방법 및 제어 장치
EP3900617A1 (en) A method and apparatus based on 3d camera for automated measurement preparation in mri system
CN109875683B (zh) 一种下颌角截骨术中建立截骨面预测模型的方法
KR20100092753A (ko) 악교정시 수술용 웨이퍼 제작방법
CN111227933B (zh) 一种下颌角截骨术的预测和实时渲染系统
JP3625064B2 (ja) 眼底の立体表示および座標計測装置
Jeon et al. Quantitative analysis of the mouth opening movement of temporomandibular joint disorder patients according to disc position using computer vision: a pilot study
JP2006061196A (ja) 3次元眼底画像の構築・表示装置
CN107802276B (zh) 头颅影像的描迹图绘制装置和方法
CN113077499A (zh) 骨盆配准方法、骨盆配准装置和骨盆配准系统
CN110478042B (zh) 一种基于人工智能技术的介入手术导航装置
KR101801376B1 (ko) 3차원 위상 기술자를 이용한 두개골 이형 자동판단시스템 및 이를 이용한 두개골 이형 자동판단방법
KR20160057024A (ko) 마커리스 3차원 객체추적 장치 및 그 방법
KR101796111B1 (ko) 3차원 형태 기술자를 이용한 두개골 이형 자동판단시스템 및 이를 이용한 두개골 이형 자동판단방법
CN115105062A (zh) 髋膝关节协调性评估方法、装置、系统和存储介质
Comlekciler et al. Artificial 3-D contactless measurement in orthognathic surgery with binocular stereo vision
TWI552729B (zh) A system and method for image correction design of jaw jaw surgery

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant