CN106344151B - 一种手术定位系统 - Google Patents

一种手术定位系统 Download PDF

Info

Publication number
CN106344151B
CN106344151B CN201610800165.6A CN201610800165A CN106344151B CN 106344151 B CN106344151 B CN 106344151B CN 201610800165 A CN201610800165 A CN 201610800165A CN 106344151 B CN106344151 B CN 106344151B
Authority
CN
China
Prior art keywords
organ
virtual
image
virtual organ
projection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610800165.6A
Other languages
English (en)
Other versions
CN106344151A (zh
Inventor
季红
沈涛
刘晓晖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BEJING COMPUTING CENTER
Original Assignee
BEJING COMPUTING CENTER
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BEJING COMPUTING CENTER filed Critical BEJING COMPUTING CENTER
Priority to CN201610800165.6A priority Critical patent/CN106344151B/zh
Publication of CN106344151A publication Critical patent/CN106344151A/zh
Application granted granted Critical
Publication of CN106344151B publication Critical patent/CN106344151B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Apparatus For Radiation Diagnosis (AREA)
  • Image Generation (AREA)

Abstract

本发明实施例提供一种手术定位方法及系统,该方法包括:根据预先采集的器官信息,拟合虚拟器官图像;将所述虚拟器官图像投影到待手术器官的上方;根据所述虚拟器官图像的投影,对与所述虚拟器官图像匹配的待手术器官进行靶点或病灶定位,辅助医生快速定位靶点或病灶进而确定手术切割点。该方法通过拟合虚拟器官图像,并将虚拟器官图像投影到待手术器官的上方,使得手术医生直接可以根据投影,对与所述虚拟器官图像匹配的待手术器官进行靶点或病灶定位,无需额外的显示器显示虚拟的导航图,简化了手术的难度。

Description

一种手术定位系统
技术领域
本发明涉及增强现实投影技术领域,尤其涉及一种手术定位方法及系统。
背景技术
手术导航系统用于对患者手术中所使用的手术器械进行导航,为医生手术提供了便利。现有的导航系统公开了患者处于第一坐标系统中,手术导航系统包含:影像系统,用以撷取患者的影像,影像系统具有影像增强器,影像增强器上配置标记件;定位模块,用以识别标记件并获取第二坐标系统,第二坐标系统为影像增强器中的影像的坐标系统;影像传输服务模块,耦接于影像系统,用以传输患者的影像;以及导航模块,耦接于定位模块及影像传输服务模块,用以接收影像传输服务模块所传输的患者的影像,并基于第二坐标系统与第一坐标系统的坐标变换将手术器械的位置变换至第二坐标系统并实时显示在患者的影像中。
目前的手术导航系统所有的导航信息均显示在另外的显示器中,医师在手术中不得不一边看虚拟的导航图,一边将三维显示与患者真实的解剖组织进行对照,术者需要在不同视野中转换,增加了手术的难度。
发明内容
本发明实施例提供一种手术定位方法及系统,无需额外的显示器显示虚拟的导航图,简化了手术的难度。
第一方面,本发明实施例提供了一种手术定位方法,包括:
根据预先采集的器官信息,拟合虚拟器官图像;
将所述虚拟器官图像投影到待手术器官的上方;
根据所述虚拟器官图像的投影,对与所述虚拟器官图像匹配的待手术器官进行靶点或病灶定位。
可选的,所述根据预先采集的器官信息,拟合虚拟器官图像,包括:
根据预先采集的待手术器官的CT/MRI扫描原始数据和/或造影材料影像数据构建虚拟器官模型;
通过预设评价函数,得到虚拟器官的边界与特征,并获取虚拟器官图像。
可选的,在将所述虚拟器官图像投影到待手术器官的上方之前,所述方法还包括:
对所述虚拟器官图像的三维坐标进行转换。
可选的,所述方法还包括:
实时跟踪观察者在手术场景中的位置,根据所述位置调整投影到待手术器官的上方的所述虚拟器官图像。
可选的,所述虚拟器官图像投影的亮度及变焦可调。
第二方面,本发明实施例还提供了一种手术定位系统,包括:
拟合模块,用于根据预先采集的器官信息,拟合虚拟器官图像;
投影模块,用于将所述虚拟器官图像投影到待手术器官的上方;
定位模块,用于根据所述虚拟器官图像的投影,对与所述虚拟器官图像匹配的待手术器官进行靶点或病灶定位。
可选的,所述拟合模块,用于:
根据预先采集的待手术器官的CT/MRI扫描原始数据和/或造影影像数据构建虚拟器官模型;
通过预设评价函数,得到虚拟器官的边界与特征,并获取虚拟器官图像。
可选的,所述系统还包括:
坐标转换模块,用于对所述虚拟器官图像的三维坐标进行转换。
可选的,所述虚拟器官图像投影的亮度及变焦可调。
本发明实施例提供一种手术定位方法及系统,该方法通过拟合虚拟器官图像,并将虚拟器官图像投影到待手术器官的上方,是的手术医生直接可以根据投影,对与所述虚拟器官图像匹配的待手术器官进行定位,无需额外的显示器显示虚拟的导航图,简化了手术的难度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一实施例提供的手术定位方法的流程图;
图2为本发明一实施例提供的手术定位系统的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明实施例保护的范围。
图1为本发明一种实施例提供的一种手术定位方法的流程示意图,如图 1所示,该方法包括以下步骤:
101、根据预先采集的器官信息,拟合虚拟器官图像;
具体的,可以通过CT/MRI扫描原始数据,结合三维建模软件,进行虚拟器官与三维影像数据器官拟合,结合造影影像数据,构建及拟合冠状动脉虚拟器官模型。
102、将所述虚拟器官图像投影到待手术器官的上方;
103、根据所述虚拟器官图像的投影,对与所述虚拟器官图像匹配的待手术器官进行靶点或病灶定位。
具体的,在步骤103之前,需要设置虚拟器官图像的角度及显示方式(靶点或病灶突出显示,其余部分削弱或透明)。
上述方法通过拟合虚拟器官图像,并将虚拟器官图像投影到待手术器官的上方,是的手术医生直接可以根据投影,对与所述虚拟器官图像匹配的待手术器官进行靶点或病灶定位,辅助医生快速定位靶点或病灶进而确定手术切割点,无需额外的显示器显示虚拟的导航图,简化了手术的难度。
下面通过具体的实施例对上述方法进行详细说明。
本发明实施例的方法主要是基于虚拟和显示物体的结合,要实现虚拟和现实物体的完美结合,必须将虚拟物体合并到现实世界中的准确位置,本实施例以心脏手术为例进行说明,实现具体包括如下步骤:
第一步,上述步骤101中所述根据预先采集的器官信息,拟合虚拟器官图像,包括:
根据预先采集的待手术器官的CT/MRI扫描原始数据和/或造影影像数据构建虚拟器官模型;
通过预设评价函数,得到虚拟器官的边界与特征,并获取虚拟器官图像。
可理解的是,通过CT/MRI扫描原始数据,结合三维建模软件,进行虚拟器官与三维影像数据器官拟合,结合造影影像数据,构建及拟合冠状动脉虚拟器官模型。
第二步,在上述步骤102将所述虚拟器官图像投影到待手术器官的上方之前,所述方法还包括:
对所述虚拟器官图像的三维坐标进行转换。
具体可以通过跟踪设备将三维虚拟器官坐标系统转换到手术室坐标系中。
第三步,将所述虚拟器官图像投影到待手术器官的上方;
一般的,在手术台的正上方有一台投影机,该投影机将虚拟器官图像投影到实际人体器官上方,同时保证投影的亮度及变焦的可调。通过图像配准及抠像投影技术使用投影影像显示在指定手术区域内部。
具体的,投影匹配可以通过如下方式来实现,通过在心脏周围人工标记点一条由n个控制点组成的连续闭合曲线作为snake模型,再用一个能量函数作为匹配度的评价函数,首先将虚拟投影在目标对象预估位置的周围,再通过不断迭代使能量函数最小化,当内外能量达到平衡时即得到目标对象的边界与特征。第四步,设置虚拟器官图像的角度及显示方式,调节靶点或病灶突出显示,其余部分削弱或透明,得到清晰和准确的投影图像。
第五步,根据所述虚拟器官图像的投影,对与所述虚拟器官图像匹配的待手术器官进行靶点和病灶定位。
第六步,实时跟踪观察者在手术场景中的位置,根据所述位置调整投影到待手术器官的上方的所述虚拟器官图像。
通过AR跟踪定位系统能够实时地跟踪观察者在场景中的位置,观察者头部的角度,以便用来帮助系统决定显示虚拟器官的角度和位置,实现了投影和待手术器官的同步。
上述方法中通过CT/MRI扫描原始数据,结合三维建模软件,进行虚拟器官与三维影像数据器官拟合,结合造影影像数据,构建及拟合冠状动脉虚拟器官模型;通过空间坐标变换将三维虚拟器官坐标系统转换到手术室坐标系中;通过投影机将虚拟器官图像投影到实际人体器官上方,同时保证投影的亮度及变焦的可调。通过图像配准及抠像投影技术使用投影影像显示在指定手术区域内部;设置虚拟器官图像的角度及显示方式(靶点或病灶突出显示,其余部分削弱或透明),以便用来帮助系统显示虚拟器官的准确角度及靶点或病灶的位置。
与现有技术相比,本发明提出的技术方案使虚拟的器官模型与真实的手术场景融合显示,可以辅助医生通更方便、快捷的找到参考靶点或病灶的位置,缩短手术时间,减少盲目寻找对病人造成的伤害和痛苦。辅助系统对经验不够丰富的医师提供直观学习的机会和模拟训练的机会,帮助医生快速提升技术。
图2示出了本发明实施例提供的一种手术定位系统的结构示意图,如图 2所示,该系统包括:
拟合模块21,用于根据预先采集的器官信息,拟合虚拟器官图像;
投影模块22,用于将所述虚拟器官图像投影到待手术器官的上方;
优选的,该投影模块可以通过投影机来实现。
定位模块23,用于根据所述虚拟器官图像的投影,对与所述虚拟器官图像匹配的待手术器官进行靶点或病灶定位。
优选的,可以通过AR跟踪定位系统来实现,当然也可以通过在手术定位系统中设置软件来实现,本实施例不对其进行限定。
在本发明实施例的一个优选的实施方式中,所述拟合模块,用于:
根据预先采集的待手术器官的CT/MRI扫描原始数据和/或造影影像数据构建虚拟器官模型;
通过预设评价函数,得到虚拟器官的边界与特征,并获取虚拟器官图像。
在本发明实施例的一个优选的实施方式中,所述系统还包括:
坐标转换模块,用于对所述虚拟器官图像的三维坐标进行转换。
在本发明实施例的一个优选的实施方式中,所述系统还包括:
图像调整模块,用于实时跟踪观察者在手术场景中的位置,根据所述位置调整投影到待手术器官的上方的所述虚拟器官图像。
在本发明实施例的一个优选的实施方式中,所述虚拟器官图像投影的亮度及变焦可调。
应当理解的是,上述系统与上述方法是一一对应的关系,上述方法的实施细节同样适用于上述系统,本发明实施例不再对上述系统的具体实施细节进行详细说明。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本发明实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如U盘、硬盘、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明实施例的技术方案,而非对其限制;尽管参照前述实施例对本发明实施例进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (4)

1.一种手术定位系统,其特征在于,包括:
拟合模块,用于根据预先采集的器官信息,拟合虚拟器官图像;其中,所述预先采集的器官信息包括预先采集的待手术器官的CT/MRI扫描原始数据和/或造影影像数据;
投影模块,用于将所述虚拟器官图像投影到待手术器官的上方;
定位模块,用于根据所述虚拟器官图像的投影,对与所述虚拟器官图像匹配的待手术器官进行靶点或病灶定位;
其中,所述拟合模块,用于:
根据预先采集的待手术器官的CT/MRI扫描原始数据和/或造影影像数据构建虚拟器官模型;
通过预设评价函数,得到虚拟器官的边界与特征,并获取虚拟器官图像。
2.根据权利要求1所述的系统,其特征在于,所述系统还包括:
坐标转换模块,用于对所述虚拟器官图像的三维坐标进行转换。
3.根据权利要求1所述的系统,其特征在于,所述系统还包括:
图像调整模块,用于实时跟踪观察者在手术场景中的位置,根据所述位置调整投影到待手术器官的上方的所述虚拟器官图像。
4.根据权利要求1-3中任一项所述的系统,其特征在于,所述虚拟器官图像投影的亮度及变焦可调。
CN201610800165.6A 2016-08-31 2016-08-31 一种手术定位系统 Active CN106344151B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610800165.6A CN106344151B (zh) 2016-08-31 2016-08-31 一种手术定位系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610800165.6A CN106344151B (zh) 2016-08-31 2016-08-31 一种手术定位系统

Publications (2)

Publication Number Publication Date
CN106344151A CN106344151A (zh) 2017-01-25
CN106344151B true CN106344151B (zh) 2019-05-03

Family

ID=57858916

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610800165.6A Active CN106344151B (zh) 2016-08-31 2016-08-31 一种手术定位系统

Country Status (1)

Country Link
CN (1) CN106344151B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107789072B (zh) * 2017-09-25 2020-06-16 北京缙铖医疗科技有限公司 一种基于头戴式增强现实设备的颅内病变体表全息投影定位系统
CN107773311A (zh) * 2017-09-25 2018-03-09 北京缙铖智联高科技有限公司 一种基于投影设备的手术定位系统
US20210228276A1 (en) * 2018-04-27 2021-07-29 Crisalix S.A. Medical Platform
CN110537983B (zh) * 2019-09-26 2021-05-14 重庆博仕康科技有限公司 光磁一体穿刺手术导航平台
CN110584783B (zh) * 2019-10-14 2021-03-09 中国科学技术大学 外科手术导航系统
CN111462912A (zh) * 2020-05-11 2020-07-28 清华大学天津高端装备研究院 脊柱骨断裂模拟手术方法和3d投影系统及方法
CN114601564B (zh) * 2020-10-08 2023-08-22 深圳市精锋医疗科技股份有限公司 手术机器人及其图形化控制装置、图形化显示方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9668745B2 (en) * 2011-12-19 2017-06-06 Depuy Ireland Unlimited Company Anatomical concentric spheres THA
JP2014111083A (ja) * 2012-11-09 2014-06-19 Toshiba Corp 穿刺支援装置
KR102117273B1 (ko) * 2013-03-21 2020-06-01 삼성전자주식회사 수술 로봇 시스템 및 그 제어 방법
RU2678080C2 (ru) * 2013-09-24 2019-01-22 Конинклейке Филипс Н.В. Способ вычисления плана хирургической операции
US20150366628A1 (en) * 2014-06-18 2015-12-24 Covidien Lp Augmented surgical reality environment system

Also Published As

Publication number Publication date
CN106344151A (zh) 2017-01-25

Similar Documents

Publication Publication Date Title
CN106344151B (zh) 一种手术定位系统
Gavaghan et al. A portable image overlay projection device for computer-aided open liver surgery
CN106687046B (zh) 用于定位进行医学成像的患者的引导系统
RU2740259C2 (ru) Позиционирование датчика ультразвуковой визуализации
Birlo et al. Utility of optical see-through head mounted displays in augmented reality-assisted surgery: A systematic review
US7774044B2 (en) System and method for augmented reality navigation in a medical intervention procedure
KR20190100009A (ko) 수술영상 제공 방법 및 장치
US10055848B2 (en) Three-dimensional image segmentation based on a two-dimensional image information
RU2707369C1 (ru) Способ подготовки и выполнения хирургической операции с использованием дополненной реальности и комплекс оборудования для её осуществления
Gsaxner et al. The HoloLens in medicine: A systematic review and taxonomy
TW201717837A (zh) 強化實境之外科導航
KR20160090757A (ko) X-선 레코딩 시스템
US11672603B2 (en) System for patient-specific intervention planning
CN107016685A (zh) 一种实时匹配的手术场景增强现实投射方法
CN111770735B (zh) 手术仿真信息生成方法及程序
US11937968B2 (en) Positioning a medical X-ray imaging apparatus
CN106097294A (zh) 基于自动对应进行骨重定位
Bichlmeier et al. Stepping into the operating theater: ARAV—augmented reality aided vertebroplasty
Jiang et al. User's image perception improved strategy and application of augmented reality systems in smart medical care: A review
US20170243522A1 (en) Radiation-free simulator systems and methods for simulating fluoroscopic or other procedures
Liu et al. Augmented reality system training for minimally invasive spine surgery
CN112053346A (zh) 一种操作引导信息的确定方法和系统
Chen et al. Video-guided calibration of an augmented reality mobile C-arm
CN114334096A (zh) 基于医学影像的术中辅助显示方法、装置及存储介质
Chang et al. Interactive medical augmented reality system for remote surgical assistance

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant