CN111768491A - 基于虚拟现实技术的医学影像显示方法及系统 - Google Patents
基于虚拟现实技术的医学影像显示方法及系统 Download PDFInfo
- Publication number
- CN111768491A CN111768491A CN202010494407.XA CN202010494407A CN111768491A CN 111768491 A CN111768491 A CN 111768491A CN 202010494407 A CN202010494407 A CN 202010494407A CN 111768491 A CN111768491 A CN 111768491A
- Authority
- CN
- China
- Prior art keywords
- dimensional geometric
- geometric model
- equipment
- medical image
- virtual reality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 63
- 238000005516 engineering process Methods 0.000 title claims abstract description 39
- 230000009466 transformation Effects 0.000 claims abstract description 31
- 238000012545 processing Methods 0.000 claims abstract description 25
- 230000003993 interaction Effects 0.000 claims abstract description 20
- 230000005540 biological transmission Effects 0.000 claims abstract description 17
- 230000009133 cooperative interaction Effects 0.000 claims abstract description 16
- 230000001131 transforming effect Effects 0.000 claims abstract description 15
- 238000004891 communication Methods 0.000 claims abstract description 5
- 230000011218 segmentation Effects 0.000 claims description 34
- 230000002452 interceptive effect Effects 0.000 claims description 17
- 230000001360 synchronised effect Effects 0.000 claims description 15
- 238000007781 pre-processing Methods 0.000 claims description 4
- 230000008569 process Effects 0.000 description 10
- 230000000694 effects Effects 0.000 description 6
- 238000013519 translation Methods 0.000 description 6
- 238000003672 processing method Methods 0.000 description 4
- 238000011160 research Methods 0.000 description 4
- 238000002591 computed tomography Methods 0.000 description 3
- 238000002059 diagnostic imaging Methods 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 210000000056 organ Anatomy 0.000 description 2
- 210000001519 tissue Anatomy 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 240000004282 Grewia occidentalis Species 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 239000010410 layer Substances 0.000 description 1
- 210000004185 liver Anatomy 0.000 description 1
- 210000004072 lung Anatomy 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 230000002980 postoperative effect Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 239000002356 single layer Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 238000012285 ultrasound imaging Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Software Systems (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Geometry (AREA)
- Computer Graphics (AREA)
- Radiology & Medical Imaging (AREA)
- Epidemiology (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Primary Health Care (AREA)
- Public Health (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明提供一种基于虚拟现实技术的医学影像显示方法、医学影像处理系统及多人协同交互方法。医学影像显示方法包括如下步骤：共享三维几何模型数据，使得VR设备自动加载并在其中渲染显示三维几何模型；根据用户交互命令，对VR设备显示场景中的三维几何模型进行变换，得到变换参数；VR设备根据变换参数，同步变换操作三维几何模型并进行显示。医学影像处理系统包括相互通讯连接的控制单元、数据处理单元、显示单元、交互单元和传输单元。
Description
技术领域
本发明涉及虚拟现实技术领域，尤其涉及一种基于虚拟现实技术的医学影像显示方法、医学影像处理系统及多人协同交互方法。
背景技术
人机交互技术是目前用户界面技术中发展迅速的领域之一，现已获得大量研究成果。虚拟现实作为一门新兴人机交互技术，具有更广阔的应用前景。虚拟现实 (VirtualReality，简称VR)技术是80年代随着计算机图形仿真技术的深入研究而发展起来的一个新的研究领域，其可以模拟产生一个多源信息融合、交互式的三维空间的虚拟环境，给体验者提供身临其境的模拟真实体验感。现有的虚拟现实技术在医学领域中的应用，主要是利用X射线计算机断层成像 (CT)、核磁共振(MRI)等医学影像技术，对人体活体或尸体进行全方位的扫描，从而获取人体组织器官信息，再通过三维重建直接建立扫描的人体模型，应用虚拟现实技术和设备将虚拟模型呈现在场景之中，使用户在场景中看到一个三维还原的扫描人体结构
虽然目前关于视觉合成的研究较多，但用于医疗医学领域的产品相对较少，且目前大多虚拟现实系统均只有单一的视觉立体或触觉立体，无法实现视觉与触觉的同步匹配，代入感不强。尤其是可以由多人参与的虚拟场景下，如何可以独立地进行体验，又可以与其他体验者之间互不影响，甚至交互协作，是现在亟需解决的技术难题。
因此，确有必要提供一种基于虚拟现实技术的医学影像显示方法及其使用方法，以克服现有技术中存在的缺陷。
发明内容
本发明的目的在于提供一种基于虚拟现实技术的医学影像处理方法、装置及相应设备，能够实现三维几何模型重建，虚拟现实场景显示和虚拟现实场景同步。
为实现上述目的，本发明提供了一种基于虚拟现实技术的医学影像处理系统，包括相互通讯连接的控制单元、数据处理单元、显示单元、交互单元和传输单元，所述控制单元指令显示单元在VR设备中显示三维几何模型数据；所述交互单元通过实时获取交互命令，对VR设备中的三维几何模型进行变换；所述传输单元通过传输三维几何模型的变换参数，实现交互同步变换。
进一步地，所述数据处理单元包括采集单元、分割单元和重建单元，所述采集单元用于获取医学影像数据；所述分割单元用于对医学图像数据中的目标区域进行分割，得到分割结果；所述重建单元用于对分割结果进行三维重建，生成三维几何模型数据。
进一步地，所述显示单元包括用于显示医学图像的第一子单元、用于显示三维模型的第二子单元和用于VR设备显示的第三子单元。
为实现上述目的，本发明提供了一种基于虚拟现实技术的医学影像显示方法，其特征在于：包括如下步骤：
S1.共享三维几何模型数据，使得VR设备自动加载并在其中渲染显示三维几何模型；
S2.根据用户交互命令，对VR设备显示场景中的三维几何模型进行变换，得到变换参数；
S3.VR设备根据变换参数，同步变换操作三维几何模型并进行显示。
进一步地，所述医学影像显示方法还包括如下步骤：S4. 多个VR设备同时连接，下载同步重建网格数据，进入协同交互会话，并同步显示三维几何模型。
进一步地，所述医学影像显示方法还包括如下步骤：S5.对三维几何模型进行同步交互，通过当前VR设备对三维几何模型进行变换处理，处理后的参数同步发送至其他VR设备，其他VR设备将对应的三维几何模型变换处理后进行显示。
进一步地，在步骤S5中，包括步骤S51.在协同交互会话过程中，当前VR设备对三维几何模型进行拾取选中后，该三维几何模型被锁定，使得其他VR设备不能对该三维几何模型进行操作；当前VR设备对三维几何模型取消选中后，该三维几何模型解除锁定，并将解锁信息传送至其他VR设备。
进一步地，在步骤S5中，包括步骤S53.在协同交互会话过程中，新增加的VR设备通过连接，下载同步重建网格数据，进入会话，并同步显示三维几何模型。
进一步地，在步骤S5中，包括步骤S54.在协同交互会话过程中， VR设备通过断开连接而随时退出会话，所有VR设备退出会话后，该会话关闭。
进一步地，还包括如下步骤，S0.获取医学影像及数据，并进行预处理；进行三维重建，得到三维几何模型数据。
为实现上述目的，本发明提供了一种基于虚拟现实技术的多人协同交互方法，包括以下步骤：
S1.启动服务器，并连接多个VR设备；
S2.启动各个VR设备向服务器验证信息；
S3.下载同步重建网格数据，开始协同交互会话；
S4.对三维几何模型进行同步交互，通过当前VR设备对三维几何模型进行变换处理，处理的参数通过服务器同步发给其他VR设备，其他VR设备会将对应的三维几何模型进行变换处理后进行显示。
进一步地，在步骤S4中，包括步骤S41.在协同交互会话过程中，当前VR设备对三维几何模型进行拾取选中后，该三维几何模型被锁定，使得其他VR设备不能对该三维几何模型进行操作；当前VR设备对三维几何模型取消选中后，该三维几何模型解除锁定，并将解锁信息传送至其他VR设备。
进一步地，在步骤S4中，包括步骤S42.在协同交互会话过程中，新增加的VR设备通过连接，下载同步重建网格数据，进入会话，并同步显示三维几何模型；VR设备通过断开连接而随时退出会话，所有VR设备退出会话后，该会话关闭。
本发明的实施例在获取医学影像数据后，进行三维几何重建，然后启动多个VR设备，在多个VR设备中显示医学影像数据和三维几何模型，通过用户交互命令对医学图像数据和重建模型数据进行变换，可以在虚拟现实场景中观察医学影像数据和重建模型数据，使显示结果更加立体逼真，可以更准确的观察和诊断病情。本方法采用的参数传输区别于传统的模型数据传输，可以减少传输的数据量，消除延时，能够达到实时、即时的效果，并使得VR显示效果连续、平滑、无顿挫感。尤其是在与多个VR设备连接的状态下，能够实现多个VR设备显示内容的同步，多人同时观察一个病例，有助于术前术后的讨论交流。
附图说明
图1为本发明的基于虚拟现实技术的医学影像处理系统与VR设备和服务器连接的示意图。
图2为本发明的基于虚拟现实技术的医学影像显示方法的流程图。
图3为本发明的基于虚拟现实技术的医学影像处理系统的示意图。
具体实施方式
为使本发明的上述目的、特征和优点能够更为明显易懂，下面结合本发明实施例中的附图，对本发明实施例中的技术方案进行清除、完整的描述，显然，所描述的实施例仅仅是本发明的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域的技术人员在没有做出创造性的劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请结合图1至图3所示，本发明基于虚拟现实技术的医学影像系统，用于在医疗医学场景配合虚拟现实系统进行操作、显示、观看。所述医学影像处理装置可以集成在网络设备中，该网络设备可以是服务器1，也可以是终端2等设备；其中终端2可以包括笔记本电脑和个人计算机等设备。
本发明的虚拟现实系统包括VR设备3、定位器、手柄，其中VR设备3是其主要显示装置，定位器用来在交互过程中辅助定位，手柄用于用户的交互。参照图1所示，通过服务器1可将数据传输至其他终端2，并通过VR设备3进行显示。
VR设备是一种将人的外界的视觉、听觉封闭，引导用户产生一种身在虚拟环境中感觉。其原理是左右屏幕分别显示左右眼的图像，人眼获取这种有差异的信息后再脑海中产生立体感。实际应用中，本发明的VR设备3可以是VR显示头盔、VR眼镜等头戴式电子设备，其中，VR设备3还可以配备手套、手环、贴片等检测设备，在本发明中不做限定。
理论上，本发明基于虚拟现实技术的医学影像系统也与AR配合统使用，区别仅在于显示的内容是全部由人工虚拟的，还是在现实场景上叠加的。这个问题，本领域技术人员很容易理解而无需纠结任何具体的概念。当然，上述AR也包括MR，目前在技术上两者并没有严格的区分。
所述基于虚拟现实技术的医学影像处理系统包括相互通讯连接的控制单元、数据处理单元、显示单元、交互单元和传输单元，所述控制单元指令显示单元在VR设备中显示三维几何模型数据；所述交互单元通过实时获取交互命令，对VR设备中的三维几何模型进行变换；所述传输单元通过传输三维几何模型的变换参数，实现交互同步变换。
所述数据处理单元进一步包括采集单元、分割单元和重建单元。所述采集单元用于获取医学影像数据，并对读取的医学影像序列进行分组筛选。所述分割单元用于对医学图像数据中的目标区域进行分割，得到分割结果。所述重建单元用于对分割结果进行三维重建，生成三维几何模型数据。
在本发明中，上述分割单元的分割方法包括手动分割方法、半自动分割方法和对分割结果的其他处理方法。分割结果显示在医学影像对应的位置，用不同的颜色标记。手动分割方法包括单层图像编辑，多层图像编辑，套索编辑等手动分割方法。半自动分割包括区域生长分割、分水岭分割、水平集分割和图割分割方法。分割结果的其他处理方法包括形态学操作、空洞填充、平滑和布尔运算等处理方法。
所述显示单元进一步包括用于显示医学图像的第一子单元、用于显示三维模型的第二子单元和用于VR设备显示的第三子单元。
所述第一子单元显示医学影像和分割结果，用特定的颜色在医学影像对应得位置标记分割结果。所述第二子单元显示三维几何模型时，用特定的颜色标记不同的三维几何模型。
所述传输单元传输的变换参数包括平移变换参数、旋转变换参数、缩放变换参数、切割变换参数和重置变换参数。
本发明基于虚拟现实技术的医学影像系统采用的参数传输方法，区别于传统的模型数据传输方法，可以减少传输的数据量，消除延时，达到实时的效果，并使得VR显示效果连续、平滑、无顿挫感。尤其是在与多个VR设备连接的状态下，能够实现多个VR设备显示内容的同步。
上述医学影像处理系统用于实现基于虚拟现实技术的医学影像显示方法，该医学影像显示方法包括如下步骤：
S0.获取医学影像及数据，并进行预处理；进行三维重建，得到三维几何模型数据；
S1.共享三维几何模型数据，使得VR设备自动加载并在其中渲染显示三维几何模型；
S2.根据用户交互命令，对VR设备显示场景中的三维几何模型进行变换，得到变换参数；
S3.VR设备根据变换参数，同步变换操作三维几何模型并进行显示。
在步骤S0中，可通过CT、MRI或者超声成像设备进行医学影像采集，然后进行影像预处理。
进一步，对步骤S0中获取的医学影像数据的目标区域进行分割。
在本发明中，分割方法不局限于一种，可以包括纯手工分割方法，也可以包括阈值分割、区域生长、水平集、分水岭和人工智能分割方法，还可以包括多种分割方法以不同顺序组合形成的处理方法。
目标区域可以是医学影像数据中的人体组织器官，例如骨骼、心脏、肝脏、肺等，也可以是用户想要得到的任意不规则形状区域。
在步骤S0中，将分割结果重新生成为三维几何模型数据。该三维几何模型数据可以由三角面片组成，亦可以由四角面片、四面体、六面体等组成。
在步骤S1中，共享三维几何模型数据通过医学影像处理系统的传输单元实现，当启动VR设备时，自动加载三维几何模型数据，在VR设备中渲染显示，在VR设备中可以显示多个三维几何模型。
在步骤S2中，用户通过手柄与三维几何模型进行交互，用户可以选取某一个三维几何模型，实现对选取模型的变换，变换包括：平移、旋转、缩放和复位，也可以选择隐藏选取的三维几何模型。
在本发明中，平移变换是在平移过程中计算变换模型X轴、Y轴和Z轴三个方向上的平移量。旋转变换是在旋转过程中通过四叉树计算变换模型的旋转矩阵。缩放变换是在缩放过程中计算变换模型的缩放比例。重置变换是将所有模型的显示状态恢复到初始显示状态。
在步骤S3中，通过医学影像处理系统将当前VR设备传输变换的参数传输给其他VR设备，包括平移量，变换矩阵，缩放比例和旋转矩阵，同时对其他VR设备进行变换，实现多个VR设备显示内容的同步。这种方法可以减少传输的数据量，消除了延时，能够达到实时的效果，以使得VR显示效果连续、平滑、无顿挫感。
本发明为了实现了多个VR设备之间模型变换的实时同步，提供了一种基于虚拟现实技术的多人协同交互方法。所述多人协同交互方法包括以下步骤：
S1.启动服务器，并连接多个VR设备；
S2.启动各个VR设备向服务器验证信息；
S3.下载同步重建网格数据，开始协同交互会话；
S4.对三维几何模型进行同步交互，通过当前VR设备对三维几何模型进行变换处理，处理的参数通过服务器同步发给其他VR设备，其他VR设备会将对应的三维几何模型进行变换处理后进行显示。
在步骤S2中，各个VR设备需要向服务器验证当前启动用户的项目文件信息，验证信息包括病例中包括的会话ID号、病人姓名、扫描时间等信息。
步骤S4进一步包括步骤S41.在协同交互会话过程中，当前VR设备对三维几何模型进行拾取选中后，该三维几何模型被锁定，使得其他VR设备不能对该三维几何模型进行操作；当前VR设备对三维几何模型取消选中后，该三维几何模型解除锁定，并将解锁信息传送至其他VR设备。
步骤S4进一步包括步骤S42.在协同交互会话过程中，新增加的VR设备通过连接，下载同步重建网格数据，进入会话，并同步显示三维几何模型；VR设备通过断开连接而随时退出会话，所有VR设备退出会话后，该会话关闭。
上述步骤S41和S42并无先后顺序，数字仅做区分标识。
具体来说，在交互会话过程中，每个VR设备对应的用户都可以对三维几何模型进行拾取选中，三维几何模型被选中之后，该三维几何模型通过服务器通知其他VR设备该模型被选中锁定，锁定的三维几何模型只能被该用户操作，直到该用户取消选中模型，服务器通知其他用户，被锁定模型解除锁定，可以被拾取选中。
在交互会话过程中，一个用户锁定三维几何模型后，可以对通过手柄对三维几何模型进行旋转、平移、缩放、切割处理，每次处理的参数会通过服务器同步发给其他VR设备，其他VR设备将对应的三维几何模型进行变换处理并进行显示。
在交互会话过程中，每个用户可以随时退出会话，也可以有用户随时加入会话，直到所有的用户退出会话后，服务器会关闭该会话。
该场景常见应用于多个医生对同一病例进行的会诊，可以在虚拟现实场景中观察医学影像数据和重建模型数据，使显示结果更加立体逼真，并且可以更准确的观察和诊断病情。多个VR设备连接并同步交互，使得多人同时观察一个病例，有助于术前术后的讨论交流。
综上，以上仅为本发明的较佳实施例而已，不应以此限制本发明的范围，即凡是依本发明的权利要求书及本发明说明书内容所作的简单的等效变化与修饰，均应仍属本发明专利涵盖的范围内。
Claims (13)
1.一种基于虚拟现实技术的医学影像处理系统，其特征在于：包括相互通讯连接的控制单元、数据处理单元、显示单元、交互单元和传输单元，所述控制单元指令显示单元在VR设备中显示三维几何模型数据；所述交互单元通过实时获取交互命令，对VR设备中的三维几何模型进行变换；所述传输单元通过传输三维几何模型的变换参数，实现交互同步变换。
2.如权利要求1所述的基于虚拟现实技术的医学影像处理系统，用于与VR设备配合显示，其特征在于：所述数据处理单元包括采集单元、分割单元和重建单元，所述采集单元用于获取医学影像数据；所述分割单元用于对医学图像数据中的目标区域进行分割，得到分割结果；所述重建单元用于对分割结果进行三维重建，生成三维几何模型数据。
3.如权利要求1所述的基于虚拟现实技术的医学影像处理系统，其特征在于：所述显示单元包括用于显示医学图像的第一子单元、用于显示三维模型的第二子单元和用于VR设备显示的第三子单元。
4.一种基于虚拟现实技术的医学影像显示方法，其特征在于：包括如下步骤：
S1.共享三维几何模型数据，使得VR设备自动加载并在其中渲染显示三维几何模型；
S2.根据用户交互命令，对VR设备显示场景中的三维几何模型进行变换，得到变换参数；
S3.VR设备根据变换参数，同步变换操作三维几何模型并进行显示。
5.如权利要求4所述的基于虚拟现实技术的医学影像显示方法，其特征在于：还包括如下步骤：S4. 多个VR设备同时连接，下载同步重建网格数据，进入协同交互会话，并同步显示三维几何模型。
6.如权利要求5所述的基于虚拟现实技术的医学影像显示方法，其特征在于：还包括如下步骤：S5.对三维几何模型进行同步交互，通过当前VR设备对三维几何模型进行变换处理，处理后的参数同步发送至其他VR设备，其他VR设备将对应的三维几何模型变换处理后进行显示。
7.如权利要求6所述的基于虚拟现实技术的医学影像显示方法，其特征在于：在步骤S5中，包括步骤S51.在协同交互会话过程中，当前VR设备对三维几何模型进行拾取选中后，该三维几何模型被锁定，使得其他VR设备不能对该三维几何模型进行操作；当前VR设备对三维几何模型取消选中后，该三维几何模型解除锁定，并将解锁信息传送至其他VR设备。
8.如权利要求6所述的基于虚拟现实技术的医学影像显示方法，其特征在于：在步骤S5中，包括步骤S53.在协同交互会话过程中，新增加的VR设备通过连接，下载同步重建网格数据，进入会话，并同步显示三维几何模型。
9.如权利要求6所述的基于虚拟现实技术的医学影像显示方法，其特征在于：在步骤S5中，包括步骤S54.在协同交互会话过程中， VR设备通过断开连接而随时退出会话，所有VR设备退出会话后，该会话关闭。
10.如权利要求4所述的基于虚拟现实技术的医学影像显示方法，其特征在于：还包括如下步骤，S0.获取医学影像及数据，并进行预处理；进行三维重建，得到三维几何模型数据。
11.一种基于虚拟现实技术的多人协同交互方法，其特征在于：包括以下步骤：
S1.启动服务器，并连接多个VR设备；
S2.启动各个VR设备向服务器验证信息；
S3.下载同步重建网格数据，开始协同交互会话；
S4.对三维几何模型进行同步交互，通过当前VR设备对三维几何模型进行变换处理，处理的参数通过服务器同步发给其他VR设备，其他VR设备会将对应的三维几何模型进行变换处理后进行显示。
12.如权利要求11所述的基于虚拟现实技术的多人协同交互方法，其特征在于：在步骤S4中，包括步骤S41.在协同交互会话过程中，当前VR设备对三维几何模型进行拾取选中后，该三维几何模型被锁定，使得其他VR设备不能对该三维几何模型进行操作；当前VR设备对三维几何模型取消选中后，该三维几何模型解除锁定，并将解锁信息传送至其他VR设备。
13.如权利要求11所述的基于虚拟现实技术的多人协同交互方法，其特征在于：在步骤S4中，包括步骤S42.在协同交互会话过程中，新增加的VR设备通过连接，下载同步重建网格数据，进入会话，并同步显示三维几何模型；VR设备通过断开连接而随时退出会话，所有VR设备退出会话后，该会话关闭。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010494407.XA CN111768491A (zh) | 2020-06-03 | 2020-06-03 | 基于虚拟现实技术的医学影像显示方法及系统 |
| PCT/CN2021/077839 WO2021244074A1 (zh) | 2020-06-03 | 2021-02-25 | 基于虚拟现实技术的医学影像显示方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010494407.XA CN111768491A (zh) | 2020-06-03 | 2020-06-03 | 基于虚拟现实技术的医学影像显示方法及系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111768491A true CN111768491A (zh) | 2020-10-13 |
Family
ID=72720075
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010494407.XA Pending CN111768491A (zh) | 2020-06-03 | 2020-06-03 | 基于虚拟现实技术的医学影像显示方法及系统 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN111768491A (zh) |
| WO (1) | WO2021244074A1 (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2021244074A1 (zh) * | 2020-06-03 | 2021-12-09 | 上海昕健医疗技术有限公司 | 基于虚拟现实技术的医学影像显示方法及系统 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN202306552U (zh) * | 2011-06-24 | 2012-07-04 | 海纳医信（北京）软件科技有限责任公司 | 远程实时会诊系统 |
| CN103106348A (zh) * | 2013-03-08 | 2013-05-15 | 上海交通大学医学院附属第九人民医院 | 虚拟外科手术模拟方法及其装置 |
| CN104112384A (zh) * | 2013-04-22 | 2014-10-22 | 天津市天堰医教科技开发有限公司 | 一种神经外科虚拟手术训练系统 |
| US20160191887A1 (en) * | 2014-12-30 | 2016-06-30 | Carlos Quiles Casas | Image-guided surgery with surface reconstruction and augmented reality visualization |
| CN107296650A (zh) * | 2017-06-01 | 2017-10-27 | 西安电子科技大学 | 基于虚拟现实和增强现实的智能手术辅助系统 |
| CN108280871A (zh) * | 2017-01-03 | 2018-07-13 | 杭州英库医疗科技有限公司 | 医学影像三维重建系统 |
| CN108694726A (zh) * | 2017-04-05 | 2018-10-23 | 贵州利体数字医学科技有限公司 | 医学影像三维重建系统 |
| CN109247985A (zh) * | 2018-09-05 | 2019-01-22 | 北京数医科技有限公司 | 一种基于3d人体的手术辅助系统及方法 |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106806021A (zh) * | 2016-11-21 | 2017-06-09 | 厦门强本宇康科技有限公司 | 一种基于人体器官3d模型的vr手术模拟系统及方法 |
| US11139070B2 (en) * | 2017-01-25 | 2021-10-05 | Holoeyes, Inc. | Medical information virtual reality server system, medical information virtual reality program, medical information virtual reality system, method of creating medical information virtual reality data, and medical information virtual reality data |
| KR101891704B1 (ko) * | 2017-02-28 | 2018-08-24 | 메디컬아이피 주식회사 | 3차원 의료영상 제어 방법 및 그 장치 |
| CN106898044B (zh) * | 2017-02-28 | 2020-08-04 | 成都金盘电子科大多媒体技术有限公司 | 一种基于医学影像并利用vr技术的器官拆分和操作方法及系统 |
| CN109599025A (zh) * | 2019-02-14 | 2019-04-09 | 西南石油大学 | 一种基于vr的多人协同钻井模拟系统 |
| CN111768491A (zh) * | 2020-06-03 | 2020-10-13 | 上海昕健医疗技术有限公司 | 基于虚拟现实技术的医学影像显示方法及系统 |
-
2020
- 2020-06-03 CN CN202010494407.XA patent/CN111768491A/zh active Pending
-
2021
- 2021-02-25 WO PCT/CN2021/077839 patent/WO2021244074A1/zh active Application Filing
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN202306552U (zh) * | 2011-06-24 | 2012-07-04 | 海纳医信（北京）软件科技有限责任公司 | 远程实时会诊系统 |
| CN103106348A (zh) * | 2013-03-08 | 2013-05-15 | 上海交通大学医学院附属第九人民医院 | 虚拟外科手术模拟方法及其装置 |
| CN104112384A (zh) * | 2013-04-22 | 2014-10-22 | 天津市天堰医教科技开发有限公司 | 一种神经外科虚拟手术训练系统 |
| US20160191887A1 (en) * | 2014-12-30 | 2016-06-30 | Carlos Quiles Casas | Image-guided surgery with surface reconstruction and augmented reality visualization |
| CN108280871A (zh) * | 2017-01-03 | 2018-07-13 | 杭州英库医疗科技有限公司 | 医学影像三维重建系统 |
| CN108694726A (zh) * | 2017-04-05 | 2018-10-23 | 贵州利体数字医学科技有限公司 | 医学影像三维重建系统 |
| CN107296650A (zh) * | 2017-06-01 | 2017-10-27 | 西安电子科技大学 | 基于虚拟现实和增强现实的智能手术辅助系统 |
| CN109247985A (zh) * | 2018-09-05 | 2019-01-22 | 北京数医科技有限公司 | 一种基于3d人体的手术辅助系统及方法 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2021244074A1 (zh) * | 2020-06-03 | 2021-12-09 | 上海昕健医疗技术有限公司 | 基于虚拟现实技术的医学影像显示方法及系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2021244074A1 (zh) | 2021-12-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6677758B2 (ja) | ハイブリッド画像／ハンズフリー制御によるシーンレンダラー | |
| US6608628B1 (en) | Method and apparatus for virtual interactive medical imaging by multiple remotely-located users | |
| CN107296650A (zh) | 基于虚拟现实和增强现实的智能手术辅助系统 | |
| CN106874700A (zh) | 基于Web的手术模拟方法、手术模拟装置及电子设备 | |
| CN109564471A (zh) | 具有主/次交互特征的分布式交互医学可视化系统 | |
| CN106569673A (zh) | 多媒体病历报告的显示方法及多媒体病历报告的显示设备 | |
| CN109036548A (zh) | 基于混合现实三维可视化的辅助诊疗系统 | |
| CN109157284A (zh) | 一种脑肿瘤医学影像三维重建显示交互方法及系统 | |
| CN110021445A (zh) | 一种基于vr模型的医疗系统 | |
| CN110517238A (zh) | Ct医学影像ai三维重建与人机交互可视化网络系统 | |
| Abou El-Seoud et al. | An interactive mixed reality ray tracing rendering mobile application of medical data in minimally invasive surgeries | |
| CN114711962A (zh) | 一种增强现实手术规划导航系统及方法 | |
| WO2021244074A1 (zh) | 基于虚拟现实技术的医学影像显示方法及系统 | |
| CA3152809A1 (en) | Method for analysing medical image data in a virtual multi-user collaboration, a computer program, a user interface and a system | |
| US20230054394A1 (en) | Device and system for multidimensional data visualization and interaction in an augmented reality virtual reality or mixed reality image guided surgery | |
| Scharver et al. | Pre-surgical cranial implant design using the PARIS/spl trade/prototype | |
| CN112950774A (zh) | 一种三维建模装置、手术规划系统及教学系统 | |
| Torner Ribé et al. | Virtual reality application applied to biomedical models reconstructed from CT scanning | |
| Chen et al. | A system design for virtual reality visualization of medical image | |
| US20230230321A1 (en) | Extended reality-based user interface add-on, system and method for reviewing 3d or 4d medical image data | |
| EP4369352A1 (en) | System for virtual reality-based preoperative surgical planning | |
| CN115841776B (zh) | 基于vr/ar的先天性心脏病血流动力学仿真教学方法及系统 | |
| Zhang et al. | Development of a virtual training system for master-slave hip replacement surgery | |
| Tahmasebi et al. | Software structure design for a haptic-based medical examination system | |
| KR20240022746A (ko) | 수술 시뮬레이션을 제공하는 방법 및 장치 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |