CN110458941B - 一种基于虚拟现实的无射线牙齿x光根尖片虚拟成像方法 - Google Patents

一种基于虚拟现实的无射线牙齿x光根尖片虚拟成像方法 Download PDF

Info

Publication number
CN110458941B
CN110458941B CN201910687262.2A CN201910687262A CN110458941B CN 110458941 B CN110458941 B CN 110458941B CN 201910687262 A CN201910687262 A CN 201910687262A CN 110458941 B CN110458941 B CN 110458941B
Authority
CN
China
Prior art keywords
ray
tooth
virtual
tracker
model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910687262.2A
Other languages
English (en)
Other versions
CN110458941A (zh
Inventor
曹汛
张艺迪
朱昊
廖倬逸
孙卫斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University
Original Assignee
Nanjing University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University filed Critical Nanjing University
Priority to CN201910687262.2A priority Critical patent/CN110458941B/zh
Publication of CN110458941A publication Critical patent/CN110458941A/zh
Priority to PCT/CN2020/101916 priority patent/WO2021017819A1/zh
Priority to US17/628,694 priority patent/US20220265356A1/en
Application granted granted Critical
Publication of CN110458941B publication Critical patent/CN110458941B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
    • A61B6/51—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for dentistry
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0605—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements for spatially modulated illumination
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03—Computed tomography [CT]
    • A61B6/032—Transmission computed tomography [CT]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61C—DENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C9/00—Impression cups, i.e. impression trays; Impression methods
    • A61C9/004—Means or methods for taking digitized impressions
    • A61C9/0046—Data acquisition means or methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B23/00—Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes
    • G09B23/28—Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes for medicine
    • G09B23/283—Models for scientific, medical, or mathematical purposes, e.g. full-sized devices for demonstration purposes for medicine for dentistry or oral hygiene
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/101—Computer-aided simulation of surgical operations
    • A61B2034/102—Modelling of surgical devices, implants or prosthesis
    • A61B2034/104—Modelling the effect of the tool, e.g. the effect of an implanted prosthesis or for predicting the effect of ablation or burring
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/101—Computer-aided simulation of surgical operations
    • A61B2034/105—Modelling of the patient, e.g. for ligaments or bones
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107—Visualisation of planned trajectories or target regions
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2055—Optical tracking systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/41—Medical
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20—Indexing scheme for editing of 3D models
    • G06T2219/2016—Rotation, translation, scaling

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biomedical Technology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Theoretical Computer Science (AREA)
  • Biophysics (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Computer Graphics (AREA)
  • Dentistry (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Pulmonology (AREA)
  • Epidemiology (AREA)
  • Robotics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Pure & Applied Mathematics (AREA)
  • Medicinal Chemistry (AREA)
  • Algebra (AREA)
  • Chemical & Material Sciences (AREA)
  • Educational Administration (AREA)
  • Business, Economics & Management (AREA)
  • Educational Technology (AREA)
  • Mathematical Physics (AREA)

Abstract

本发明公开了一种基于虚拟现实的无射线牙齿X光根尖片虚拟成像方法。该方法包括：搭建VR定位系统，实时追踪与牙片机球管绑定的跟踪器的位置和空间姿态矩阵；扫描并重建牙列的数字化三维模型；为牙齿模型的外壳和内部髓腔分别设置不同的材质和透明度；搭建模拟口腔的虚拟环境；通过网络通信模块将跟踪器的姿态和位置赋值给虚拟摄像机，操纵虚拟摄像机运动；将跟踪器摆放于特定位置和朝向，标定得到虚拟环境中牙列模型位置坐标；将球管对准牙齿，渲染出虚拟根尖片。本发明的方法能够在无放射线发出的情况下，模拟牙齿X光根尖片拍摄过程并渲染出对应图像，提高了牙齿X光根尖片考核中的安全性、可视性和准确性。

Description

一种基于虚拟现实的无射线牙齿X光根尖片虚拟成像方法
技术领域
本发明属于虚拟现实领域，具体涉及一种基于虚拟现实的无射线牙齿X光根尖片虚拟成像方法。
背景技术
虚拟现实(Virtual Reality)是以计算机技术为核心，结合传感器系统与图形、图像识别和生成系统、网络通信系统，生成与一定范围真实环境在视、听、触感等方面高度近似的数字化环境，用户借助必要的装备产生亲临真实环境的感受和体验。随着计算机技术的发展，虚拟现实技术开始在多个领域发挥作用，如虚拟仿真领域。目前，许多技能的实训练习如电子电工、消防安全、灾害管理、建筑、医学护理等，面临以下缺点：成本高昂；步骤复杂；不易重复；可能有生命健康威胁，而虚拟现实技术能够通过建模来模拟真实环境，使上述过程能够安全、高效、无损耗、可重复。VR技术在医疗方面的应用主要是虚拟手术、远程医疗系统、虚拟人、医学教育等方面。
在传统口腔根尖片考核中，由于设备无射线发出，学生只能根据外部标记点将射线发射器摆放于估计的位置，并且无X光图像产生，教师只能根据设备的摆放位置和个人经验来确定学生是否能拍得正确的根尖片，学生的学习效率和考核可靠度不高。
目前，与虚拟现实结合的口腔诊疗仿真系统主要分为以下几类：
第一类是用于牙周病诊疗的系统，如美国伊利诺斯大学开发的模拟器PerioSim，该系统同时兼顾软硬组织的模拟，牙周操作以触觉和力觉反馈来完成，教师能在可视化下对学生的操作进行评分。
第二类是用于口腔种植的系统，如瑞典Nobel Bioeare公司开发的Nobel Guide系统，比利时Kusumoto N等人开发的Simplant系统等，该类系统用于训练学生感知种植机备洞的手感，掌握种植体在三维方向上的位置与角度。对基于CT扫描数据生成的患者颌骨三维重建模型进行全方位旋转甚至任意截面的细致观察，以选取最适宜种植体植入的位置，决定种植体的类型、数目、规格以及植入深度和方向。
第三类是用于口腔颌面外科领域的仿真系统，如比利时Materials公司开发的Simplant系统，包括颅颌面骨的三维结构和软组织结构，能在虚拟环境下进行部分手术操作。现有的大部分外科手术模拟器采用与前文所提到的相似的触觉模拟原理，可模拟切骨、截骨以及骨块位移和术后预测。
第四类是用于口腔牙体牙髓病诊疗的仿真系统，如美国穆格公司所开发的Simodont数字化虚拟仿真口腔医师培训系统，其操作同样涉及仿真力觉渲染和交互。虚拟工具和牙均由三角形网络数据结构组成，当工具切割端的三角片与牙面的三角片相交时，根据工具的嵌入深度计算出组织的去除量，实现牙体组织去除的形变模拟。
但是上述几类方法至少存在以下缺陷：集中于触觉和力觉的模拟，重建的三维结构都是物体的表面信息，不涉及牙齿X光片的模拟，不能解决传统口腔根尖片考核中无法渲染牙齿X光图像的问题。
发明内容
为了在无射线发出的情况下生成牙齿X光根尖片，本发明提供了一种基于虚拟现实的无射线牙齿X光根尖片虚拟成像方法。
为了实现上述发明目的，本发明方法采用的技术方案如下：
一种基于虚拟现实的无射线牙齿X光根尖片虚拟成像方法，包括如下步骤：
S1：使用VR硬件搭建空间定位系统，定位系统包括基站和跟踪器，牙片机置于定位系统可见范围内，跟踪器固定在牙片机的球管上，跟踪器在无头显情况下可实现追踪功能；获取跟踪器的姿态矩阵和位置数据；
S2：扫描多个牙齿，重建出牙列的3D数字化模型；将3D数字化模型进行分割处理，分别获取牙齿外壳模型和髓腔模型，之后将这两个模型制作为预制体，并根据实际牙齿结构特征分别为两个模型设置对应的半透明材质；
S3：搭建牙齿根尖片拍摄的虚拟成像环境，在牙齿周围添加多个平面和柱体模拟牙齿X光片中的背景，并测量牙列的3D数字化模型的包围盒尺寸和真实世界的牙列模型包围盒尺寸，计算二者比例；调整虚拟成像环境中牙齿外壳模型和髓腔模型的大小，并为灯光和虚拟摄像机设置合理的位置与朝向；
S4：对于步骤S1中获取的跟踪器的姿态矩阵和位置数据，先将姿态矩阵转换为欧拉角后，与位置数据一起通过网络通信模块实时分发给虚拟摄像机，以跟踪器替代虚拟摄像机；
S5：将球管摆放至牙齿正前方，对准牙齿，测量牙列的中间牙齿与跟踪器的物理距离，根据此时跟踪器位置标定牙列的3D数字化模型在虚拟环境中的位置，与真实世界对齐；
S6：调整球管的位置和朝向，渲染对应的虚拟牙齿X光根尖片。
进一步地，所述步骤S1中，定位系统采用两台基站，两台基站相向摆放且前方屏幕平行，其中一个基站作为定位系统的世界坐标系原点；牙片机放置于两台基站之间，牙片机中的头模面向作为世界坐标系原点的基站，跟踪器的Y轴与球管长轴平行且指向头模。
进一步地，所述步骤S2中，利用Micro-CT或者CBCT技术扫描牙齿。
进一步地，所述步骤S2中，牙齿模型中包括牙髓和牙釉质两部分，将牙齿外壳模型的材质设置为白色，将髓腔模型的材质设置为黑色。
进一步地，所述步骤S3中，在牙齿周围添加多个平面将牙齿包围起来，只留前方开口，以模拟出口腔的环境。
进一步地，所述步骤S4中，获取的跟踪器的姿态矩阵和位置数据通过发布订阅模型完成分发过程，其中，获取跟踪器的姿态矩阵和位置数据所在端口作为发布端，虚拟摄像机所在端口作为订阅端。
本发明与现有技术相比，具有显著优点：通过将VR硬件与牙片机结合，建立了与真实世界对应的虚拟成像环境，能够实时获取牙片机球管的位置和姿态，标定虚拟世界三维模型的位置，并通过高效的网络通信控制虚拟世界的摄像机运动，使牙片机能够在无放射线的情况下渲染出对应的虚拟牙齿X光根尖片，解决了传统口腔根尖片训练和考核中无图像产生和难以判断位置的问题，为无放射线的根尖片考核提供了判断证据，提高了该过程的可视性和准确性，使之能够安全、高效、无损耗、可重复。
附图说明
图1为本发明实施例提供的虚拟成像方法的流程图。
图2为本发明实施例中搭建虚拟环境的流程图。
图3为本发明实施例中的网络通信流程图。
图4为本发明实施例中渲染的结果图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方法进行清楚、完整地描述。
如图1所示，本实施例的一种基于虚拟现实的无射线牙齿X光根尖片虚拟成像方法，具体过程如下：
(1)使用Micro-CT技术扫描由多个离体牙构成的牙列模型，重建出牙列的3D数字化模型。Micro-CT专门用于扫描重建体积较小的物体，规模小、分辨率高。样品的成像像素尺寸可小至100纳米，物体可扫描直径达200毫米。重建的牙列模型除外壳外，还包含内部髓腔结构，便于后续的透视渲染。
这里获取数字牙列3D模型也可用传统CBCT扫描，传统CBCT体素可达0.125mm，分辨率最高可达到2.0lp/mm的重建速度，重建时间低于15s，成像范围合理，可以一次扫描即可获得全口腔双牙列三维立体影像。传统CBCT扫描分辨率比Micro-CT略低，在虚拟成像质量要求不高的情况下，可以使用其替代Micro-CT。
(2)使用HTC Vive的基站和跟踪器搭建定位系统。定位系统包括两台基站和一台跟踪器，两台基站架设于三脚架上，相向摆放，高度在2m，相距4m左右，基站A的channel设为“b”，基站B的channel设为“c”，基站B作为定位系统的世界坐标系的原点。牙片机摆放在两台基站中间，头模面向基站B，HTC Vive跟踪器固定于球管上表面，跟踪器Y轴平行于球管，Y轴正方向指向头模。将steamVR软件默认配置文件中的requireHmd选项由true改为false，使用openVR读取HTC Vive跟踪器的姿态和坐标。
这里基站的距离和高度也可根据情况灵活调整，只要保证跟踪器处于基站的视场内即可。
(3)将步骤(1)中得到的3D数字化牙列模型导入三维动画建模软件Blender进行分割处理，分别得到牙齿外壳模型和髓腔模型，导出为.fbx模型，之后在Unity中将模型制作为预制体。牙体由釉质、牙本质、牙髓和牙骨质构成，每一种组织的颜色均不相同，本实施例将牙齿模型简化为牙髓和牙釉质两部分，因牙齿X光片中的髓腔为黑色，其他部分为白色，所以为髓腔和外壳分别设置不同的材质，其中髓腔材质为黑色，外壳材质为白色，黑色材质透明度低于白色材质透明度，能够较合理地模拟出根尖片的透视效果。
(4)在Unity中搭建牙齿根尖片拍摄的虚拟成像环境，在牙齿周围添加多个黑色不透明平面作为牙齿X光片背景，在牙列中间添加黑色不透明柱体，避免拍摄后牙时由于牙弓走向而同时拍摄到另一侧后牙，测量数字牙列模型的包围盒尺寸和真实世界的牙列模型包围盒尺寸，调节比例为1:1，灯光采用directional light模拟日光，设置流程如图2所示。
此处在不添加背景黑色平面时，仅仅将虚拟摄像机的Clear Flags设置为SolidColor模式也可达到同样的渲染效果，但是在保存图像时背景会呈现透明状态，因此添加黑色平面作为背景。
(5)将步骤(2)中读取的HTC Vive跟踪器的姿态矩阵转换为欧拉角，采用ZeroMQ的发布者(publisher)-订阅者(subscriber)模式完成数据分发过程，将步骤(2)获取的数据作为发布端，Unity作为订阅端，发布端单向分发数据，且不关心是否把全部信息发送给订阅端。如果发布端开始发布信息时，订阅端尚未连接上来，则这些信息会被直接丢弃。订阅端只负责接收，而不能反馈，且在订阅端消费速度慢于发布端的情况下，会在订阅端堆积数据，因此发布端运行时会不断地传输数据，此时订阅端不接收数据，只有Unity程序运行时，订阅端才开始接收数据。使用Python的zmq模块完成通信的发布端，在发布端绑定一个本地端口，将跟踪器的欧拉角和位置数据不断通过端口发送，使用C#的NetMQ模块完成通信的订阅端，在订阅端连接并监听端口，接收消息后赋值给摄像机，具体通信流程如图3所示。
(6)将球管摆放至头模的牙齿正前方，指向牙列的中间，且水平对准牙齿，牙齿与球管的X,Y坐标相同，仅Z轴坐标值不同。测量中间牙齿与跟踪器的物理距离L，一般为25～35cm，根据此时跟踪器位置(a,b,c)(cm)标定牙齿在Unity中的位置为(a,b,-c-L)，与真实世界对齐。与此同时，牙列模型的周围环境(包括各种平面和柱体)也要做相同的变换，以保证渲染和保存图像时有正确的背景。VR定位系统的坐标单位为m，将其同样转换为cm，并根据牙片机摆放朝向和定位器摆放朝向转换到Unity坐标系。
(7)调整摄像机视角大小，使视图中显示的牙齿数量小于6颗，与真实的牙齿X光片保持一致，将牙片机球管摆放到合适的位置，对准牙齿，按键刷新画面，渲染出对应的虚拟牙齿X光根尖片，渲染结果如图4所示。
因此，本实施例通过建立数字化牙齿的虚拟环境和成像条件，使用VR定位系统，能够在无放射线发出的情况下，模拟牙齿X光根尖片拍摄过程，并渲染出对应图像，提高了牙齿X光根尖片考核中的安全性、可视性和准确性。

Claims (6)

1.一种基于虚拟现实的无射线牙齿X光根尖片虚拟成像方法，其特征在于，包括如下步骤：
S1：使用VR硬件搭建空间定位系统，定位系统包括基站和跟踪器，牙片机置于定位系统可见范围内，跟踪器固定在牙片机的球管上，跟踪器在无头显情况下可实现追踪功能；获取跟踪器的姿态矩阵和位置数据；
S2：扫描多个牙齿，重建出牙列的3D数字化模型；将3D数字化模型进行分割处理，分别获取牙齿外壳模型和髓腔模型，之后将牙齿外壳模型和髓腔模型制作为预制体，并根据实际牙齿结构特征分别为牙齿外壳模型和髓腔模型设置对应的半透明材质；
S3：搭建牙齿根尖片拍摄的虚拟成像环境，在牙齿周围添加多个平面和柱体模拟牙齿X光片中的背景，并测量牙列的3D数字化模型的包围盒尺寸和真实世界的牙列模型包围盒尺寸，计算二者比例；调整虚拟成像环境中牙齿外壳模型和髓腔模型的大小，并为灯光和虚拟摄像机设置合理的位置与朝向；
S4：对于步骤S1中获取的跟踪器的姿态矩阵和位置数据，先将姿态矩阵转换为欧拉角后，与位置数据一起通过网络通信模块实时分发给虚拟摄像机，以跟踪器替代虚拟摄像机；
S5：将球管摆放至牙齿正前方，对准牙齿，测量牙列的中间牙齿与跟踪器的物理距离，根据此时跟踪器位置标定牙列的3D数字化模型在虚拟环境中的位置，与真实世界对齐；
S6：调整球管的位置和朝向，渲染对应的虚拟牙齿X光根尖片。
2.根据权利要求1所述的一种基于虚拟现实的无射线牙齿X光根尖片虚拟成像方法，其特征在于，所述步骤S1中，定位系统采用两台基站，两台基站相向摆放且与前方屏幕平行，其中一个基站作为定位系统的世界坐标系原点；牙片机放置于两台基站之间，牙片机中的头模面向作为世界坐标系原点的基站，跟踪器的Y轴与球管长轴平行且指向头模。
3.根据权利要求1所述的一种基于虚拟现实的无射线牙齿X光根尖片虚拟成像方法，其特征在于，所述步骤S2中，利用Micro-CT或者CBCT技术扫描牙齿。
4.根据权利要求1所述的一种基于虚拟现实的无射线牙齿X光根尖片虚拟成像方法，其特征在于，所述步骤S2中，牙齿模型中包括牙髓和牙釉质两部分，将牙齿外壳模型的材质设置为白色，将髓腔模型的材质设置为黑色。
5.根据权利要求1所述的一种基于虚拟现实的无射线牙齿X光根尖片虚拟成像方法，其特征在于，所述步骤S3中，在牙齿周围添加多个平面将牙齿包围起来，只留前方开口，以模拟出口腔的环境。
6.根据权利要求1所述的一种基于虚拟现实的无射线牙齿X光根尖片虚拟成像方法，其特征在于，所述步骤S4中，获取的跟踪器的姿态矩阵和位置数据通过发布订阅模型完成分发过程，其中，获取跟踪器的姿态矩阵和位置数据所在端口作为发布端，虚拟摄像机所在端口作为订阅端。
CN201910687262.2A 2019-07-29 2019-07-29 一种基于虚拟现实的无射线牙齿x光根尖片虚拟成像方法 Active CN110458941B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201910687262.2A CN110458941B (zh) 2019-07-29 2019-07-29 一种基于虚拟现实的无射线牙齿x光根尖片虚拟成像方法
PCT/CN2020/101916 WO2021017819A1 (zh) 2019-07-29 2020-07-14 一种基于虚拟现实的无射线牙齿x光根尖片虚拟成像方法
US17/628,694 US20220265356A1 (en) 2019-07-29 2020-07-14 Ray-free dental x-ray periapical film virtual imaging method based on virtual reality

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910687262.2A CN110458941B (zh) 2019-07-29 2019-07-29 一种基于虚拟现实的无射线牙齿x光根尖片虚拟成像方法

Publications (2)

Publication Number Publication Date
CN110458941A CN110458941A (zh) 2019-11-15
CN110458941B true CN110458941B (zh) 2021-05-28

Family

ID=68483876

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910687262.2A Active CN110458941B (zh) 2019-07-29 2019-07-29 一种基于虚拟现实的无射线牙齿x光根尖片虚拟成像方法

Country Status (3)

Country Link
US (1) US20220265356A1 (zh)
CN (1) CN110458941B (zh)
WO (1) WO2021017819A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110458941B (zh) * 2019-07-29 2021-05-28 南京大学 一种基于虚拟现实的无射线牙齿x光根尖片虚拟成像方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101944156A (zh) * 2010-08-03 2011-01-12 西安科技大学 一种单颗牙齿包容体的确定方法
CN108389488A (zh) * 2018-03-05 2018-08-10 泉州医学高等专科学校 一种互动式口腔模拟系统
CN108665533A (zh) * 2018-05-09 2018-10-16 西安增材制造国家研究院有限公司 一种通过牙齿ct图像和三维扫描数据重建牙列的方法
CN109035386A (zh) * 2018-06-22 2018-12-18 泰康保险集团股份有限公司 一种齿科vr成像方法及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018036853A1 (de) * 2016-08-26 2018-03-01 Vita Zahnfabrik H. Rauter Gmbh & Co. Kg Zahneinheit sowie verfahren zur herstellung einer prothesenbasis
US10888399B2 (en) * 2016-12-16 2021-01-12 Align Technology, Inc. Augmented reality enhancements for dental practitioners
CN110458941B (zh) * 2019-07-29 2021-05-28 南京大学 一种基于虚拟现实的无射线牙齿x光根尖片虚拟成像方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101944156A (zh) * 2010-08-03 2011-01-12 西安科技大学 一种单颗牙齿包容体的确定方法
CN108389488A (zh) * 2018-03-05 2018-08-10 泉州医学高等专科学校 一种互动式口腔模拟系统
CN108665533A (zh) * 2018-05-09 2018-10-16 西安增材制造国家研究院有限公司 一种通过牙齿ct图像和三维扫描数据重建牙列的方法
CN109035386A (zh) * 2018-06-22 2018-12-18 泰康保险集团股份有限公司 一种齿科vr成像方法及装置

Also Published As

Publication number Publication date
CN110458941A (zh) 2019-11-15
WO2021017819A1 (zh) 2021-02-04
US20220265356A1 (en) 2022-08-25

Similar Documents

Publication Publication Date Title
Luciano et al. Haptics-based virtual reality periodontal training simulator
CN110366746B (zh) 基于虚拟现实的影像诊断练习装置和方法
Rhienmora et al. Augmented reality haptics system for dental surgical skills training
Xia et al. Three-dimensional virtual-reality surgical planning and soft-tissue prediction for orthognathic surgery
US20210236241A1 (en) Face tracking and reproduction with post-treatment smile
TWI578964B (zh) 產生假體影像之方法與系統
JP6974879B2 (ja) 歯科シミュレーション用のモデル生成
CN103903487A (zh) 一种基于3d力反馈技术的内窥镜微创手术三维仿真系统
CN105869201A (zh) 在全景漫游中实现全景视图平滑切换的方法及装置
Joda et al. Virtual dental patient: how long until it’s here?
CN110458941B (zh) 一种基于虚拟现实的无射线牙齿x光根尖片虚拟成像方法
Xiaojun et al. An integrated surgical planning and virtual training system using a force feedback haptic device for dental implant surgery
US20230222940A1 (en) Virtual teaching system for dental periapical x-ray film, method for acquiring virtual periapical x-ray film, computer readable storage medium and electronic device
US20220309953A1 (en) Automated Measurement Apparatus and Method for Quantifying Dimensions of Dental Preparation
RU80111U1 (ru) Программно-аппаратная система функционального анализа окклюзии и артикуляции
CN113633376B (zh) 一种全髋关节裸眼三维虚拟置换方法
Noborio et al. Development of Human Interface Software in Our Dental Surgical System Based on Mixed Reality
CN111563967A (zh) 一种人标准牙列虚拟平面投影图像的实时渲染方法
CN116800945A (zh) 一种集成成像三维医学显示装置
Lin et al. The development of optical see-through display based on augmented reality for oral implant surgery simulation
CN114998521A (zh) 一种虚拟现实3d牙体动态模型教学系统及方法
CN115798291A (zh) 虚拟现实种植牙力反馈磨钻计算装置与方法
Kuroiwa et al. A visualization system of scaler stroke motion
de Moraes¹ et al. 42 Medicine Meets Virtual Reality 11 JD Westwood et al.(Eds.) IOS Press, 2003
TW201312500A (zh) 一種動物模型的影像處理系統及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant