CN106580477A - 一种腹部外科精准手术系统及方法 - Google Patents

一种腹部外科精准手术系统及方法 Download PDF

Info

Publication number
CN106580477A
CN106580477A CN201710064456.8A CN201710064456A CN106580477A CN 106580477 A CN106580477 A CN 106580477A CN 201710064456 A CN201710064456 A CN 201710064456A CN 106580477 A CN106580477 A CN 106580477A
Authority
CN
China
Prior art keywords
image
laparoscope
file
surgery
body surface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710064456.8A
Other languages
English (en)
Inventor
赵松凌
张小文
邹浩
李越华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201710064456.8A priority Critical patent/CN106580477A/zh
Publication of CN106580477A publication Critical patent/CN106580477A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Endoscopes (AREA)

Abstract

本发明涉及一种腹部外科精准手术系统及方法。包含腹腔镜主机、高分辨影像采集卡、影像处理计算机、显示屏。与腹腔镜主机高清视频输出端子相连接的高分辨影像采集卡将病患腹部器官影像输出到影像处理计算机中,通过本发明的方法,经由MRI断层扫描影像重建的病患腹部器官的三维实体影像的视点方位、比例大小,受腹腔镜视点以及方位参数驱动,当实体三维影像体表关键点与腹腔镜影像体表关键点重合时,实体三维影像叠加显示于腹腔镜影像上。用本发明的系统,可实现增强现实虚拟环境下腹部器官内部各类影像的实时显示,引导外科医生实施精准手术。与现有技术相比,可以有效降低出血、缩短手术时间,最大限度地保留残存器官。

Description

一种腹部外科精准手术系统及方法
技术领域
本发明涉及腹部外科手术,具体涉及一种腹部外科精准手术系统及方法。
背景技术
腹部外科手术,特别是针对肝胆胰的腹部外科手术多年来已经取得了极大的发展,从早期的开腹手术发展到了腹腔镜手术以及最新的达芬奇机器人手术。然而,即使是最新的达芬奇机器人手术,也仅仅是在腹腔镜手术上做了视野、手术微量运动等精确控制方面的提升,这类改进的优越性充分体现在以下几个方面:利用电子信息的特点,可以实现远程控制和远程操作;利用机械手臂来执行人手的操作可以避免术者手部颤动带来的负面影响;利用双视野摄像镜头扩大了术者视野,实现了初步的裸眼三维显示,使之更逼近开腹手术的视野。
以上提升虽然极大地提高了术者实施微小动作的精确性和稳定性,但是并没有彻底地改变外科医生手术的基本现状:术者能看到的病患器官仍然仅仅是器官体表,无法利用断层扫描影像来准确定位器官内部的各类关键组织以及器官内部的病灶点。由此,并没有从实质上对术者的手术提升根本的改变。如何利用病患的断层扫描数据,使术者在手术过程中能够精确定位病灶点,有效避开血管等关键管道,是一项亟待解决的问题。
发明内容
为解决以上问题,本发明提出了一种腹部外科精准手术系统及方法。
本发明的技术方案是:一种腹部外科精准手术系统及方法,包含腹腔镜主机、高分辨影像采集模块、影像处理计算机、显示屏,断层扫描数据文件、断层扫描文件-3D实体转换软件、病患腹部器官3D实体影像、腹腔镜影像-3D实体影像显示和叠加锁定方法,其特征在于,所述高分辨影像采集模块与腹腔镜主机高清视频输出端子相连接,高分辩影像采集模块的输出与影像处理计算机USB端口相连接。
病患腹部器官3D实体影像与腹腔镜影像-3D实体影像叠加锁定方法的特征在于,依据以下步骤实现病患腹部器官三维实体影像关键点的显示方位和显示比例与病患腹腔镜腹部器官体表影像关键点的显示方位和显示比例同步锁定,当实体三维影像体表关键点与腹腔镜影像体表关键点重合锁定时,实体三维影像与腹腔镜影像叠加显示于影像处理计算机显示屏上,否则仅显示腹腔镜影像:
步骤1 输入病患的CT或MRI断层扫描数据文件;
步骤2 利用断层扫描文件-3D实体转换软件生成腹部主要器官肝、胆、胰腺的三维体表实体影像文件;
步骤3 利用断层扫描文件-3D实体转换软件生成腹部主要器官肝、胆、胰腺的三维血管、管道实体影像文件;
步骤4 利用断层扫描文件-3D实体转换软件生成腹部主要器官肝、胆、胰腺的三维韧带、肌肉实体影像文件;
步骤5 利用断层扫描文件-3D实体转换软件生成腹部主要器官肝、胆、胰腺的肿瘤、结石等占位实体影像文件;
步骤6 在主要器官上选取至少3个在术中相对位置不发生变化的器官关键点的X、Y、Z坐标;
步骤7 把选取的至少3个体表关键点的坐标存入影像处理计算机内存;
步骤8 利用高清视频数据采集模块将由腹腔镜主机输出的高清视频信号采集到影像处理计算机内存;
步骤9 人工选取腹腔镜影像中至少3个腹部主要器官体表关键点的X、Y、Z坐标,存入影像处理计算机内存;
步骤10 根据人工选取的腹腔镜影像中至少3个腹部主要器官体表关键点的X、Y、Z坐标,实时驱动实体三维影像,使预先提取的至少3个关键与腹腔镜影像的三个关键点的X、Y、Z坐标重合;
步骤11 判别两个影像各自关键点在X、Y、Z坐标之间的差值,当差值小于预先设定的值时,表示两个影像重叠锁定成功,预先设定的差值为1毫米;
步骤12 若锁定成功,将腹腔镜影像与三维实体影像重叠显示于影像处理计算机显示器上,否则,仅显示腹腔镜影像。
与现有技术相比,采用本发明,可实现增强现实虚拟环境下腹部器官内部各类影像的实时显示,引导外科医生实施精准手术。通过本发明,可以有效降低出血、缩短手术时间,最大限度地保留残存器官。
附图说明
图1 为本发明的一种腹部外科精准手术系统的系统框图。
图2为本发明的腹腔镜影像-3D实体影像叠加锁定方法的病患腹部主要器官的断层扫描影像-3D实体影像的转换流程框图。
图3 为本发明的腹腔镜影像-3D实体影像叠加锁定方法的病患主要器官3D实体影像的动态显示驱动流程图。
图4 为本发明的腹腔镜影像-3D实体影像叠加锁定方法的从病患主要器官3D实体影像体表关键点坐标提取的流程图。
图5 为本发明的腹腔镜影像-3D实体影像叠加锁定方法的从腹腔镜影像中提取病患主要器官体表关键点的流程图。
图6 为本发明的腹腔镜影像-3D实体影像叠加锁定方法的腹腔镜影像与3D实体影像进行重叠锁定计算的流程图。
图7为对肝脏体表进行透明处理、以便于观察到肝脏内部血管和肝管的影像图。
图8为对肝脏体表进行透明处理、以便于观察到肝脏内部血管和肝管时,另一视角和比例参数下的影像图。
具体实施方式
如图1所示,本发明的一种腹部外科精准手术系统及方法包含腹腔镜8、腹腔镜主机7、显示屏1、高分辨影像采集模块2、影像处理计算机3、断层扫描数据文件4、断层扫描文件-3D实体转换软件5、病患腹部器官3D实体影像文件6。在本实施例中,腹腔镜8以及腹腔镜主机7为奥林巴斯腹腔镜;高分辨影像采集模块2为 tc-ub530;断层扫描文件-3D实体转换软件5为yorktal。腹腔镜8、腹腔镜主机7、显示屏1为传统腹腔镜系统,高分辨影像采集模块2的数据输入端口与腹腔镜主机7的数据输出口相连接,高分辨影像采集模块2的数据输出端口与影像处理计算机3的USB口相连接。病患腹部器官三维实体影像的显示视点方位和比例与病患腹腔镜腹部器官体表影像视点的方位和比例同步锁定,当实体三维影像体表关键点与腹腔镜影像体表关键点重合锁定时,实体三维影像与腹腔镜影像叠加显示于影像处理计算机显示屏上,否则,仅显示腹腔镜影像。
实体三维影像体表关键点与腹腔镜影像体表关键点重合锁定的具体步骤和方法结合图2至图6的具体实施步骤流程框图说明。
步骤1 输入病患的CT或MRI断层扫描数据文件;
步骤2 利用断层扫描文件-3D实体转换软件生成腹部主要器官肝、胆、胰腺的三维体表实体影像文件;
步骤3 利用断层扫描文件-3D实体转换软件生成腹部主要器官肝、胆、胰腺的三维血管、管道实体影像文件;
步骤4 利用断层扫描文件-3D实体转换软件生成腹部主要器官肝、胆、胰腺的三维韧带、肌肉实体影像文件;
步骤5 利用断层扫描文件-3D实体转换软件生成腹部主要器官肝、胆、胰腺的肿瘤、结石等占位实体影像文件;
步骤6 在主要器官上选取至少3个在术中相对位置不发生变化的器官关键点的X、Y、Z坐标;
步骤7 把选取的至少3个体表关键点的坐标存入影像处理计算机内存;
步骤8 利用高清视频数据采集模块将由腹腔镜主机输出的高清视频信号采集到影像处理计算机内存;
步骤9 人工选取腹腔镜影像中至少3个腹部主要器官体表关键点的X、Y、Z坐标,存入影像处理计算机内存;
步骤10 根据人工选取的腹腔镜影像中至少3个腹部主要器官体表关键点的X、Y、Z坐标,实时驱动实体三维影像,使预先提取的至少3个关键与腹腔镜影像的三个关键点的X、Y、Z坐标重合;
步骤11 判别两个影像各自关键点在X、Y、Z坐标之间的差值,当差值小于预先设定的值时,表示两个影像重叠锁定成功,预先设定的差值为1毫米;
步骤12 若锁定成功,将腹腔镜影像与三维实体影像重叠显示于影像处理计算机显示器上,否则,仅显示腹腔镜影像。
图7、图8为对肝脏体表进行透明处理、以便于观察到肝脏内部血管和肝管时,不同视角和比例参数下的影像图。
本发明的一种腹部外科精准手术系统及方法所述腹腔镜8、腹腔镜主机7、显示屏1、病患断层扫描数据文件4、断层扫描文件-3D实体转换软件5均为现有公知技术装置和公知软件,不再赘述。

Claims (2)

1.一种腹部外科精准手术系统及方法,包含腹腔镜主机、高分辨影像采集模块、影像处理计算机、显示屏,断层扫描数据文件、断层扫描文件-3D实体转换软件、病患腹部器官3D实体影像与腹腔镜影像-3D实体影像叠加锁定方法,其特征在于,所述高分辨影像采集卡与腹腔镜主机高清视频输出端子相连接,高分辩影像采集卡的输出与影像处理计算机USB端口相连接。
2.权利要求1所述病患腹部器官3D实体影像与腹腔镜影像-3D实体影像叠加锁定方法的特征在于,依据以下步骤实现病患腹部器官三维实体影像的显示视点方位和比例与病患腹腔镜腹部器官体表影像视点的方位和比例同步锁定,当实体三维影像体表关键点与腹腔镜影像体表关键点重合锁定时,实体三维影像与腹腔镜影像叠加显示于影像处理计算机显示屏上:
步骤1 输入病患的CT或MRI断层扫描数据文件;
步骤2 利用断层扫描文件-3D实体转换软件生成腹部主要器官肝、胆、胰腺的三维体表实体影像文件;
步骤3 利用断层扫描文件-3D实体转换软件生成腹部主要器官肝、胆、胰腺的三维血管、管道实体影像文件;
步骤4 利用断层扫描文件-3D实体转换软件生成腹部主要器官肝、胆、胰腺的三维韧带、肌肉实体影像文件;
步骤5 利用断层扫描文件-3D实体转换软件生成腹部主要器官肝、胆、胰腺的肿瘤、结石等占位实体影像文件;
步骤6 在主要器官上选取至少3个在术中相对位置不发生变化的器官关键点的X、Y、Z坐标;
步骤7 把选取的至少3个体表关键点的坐标存入影像处理计算机内存;
步骤8 利用高清视频数据采集模块将由腹腔镜主机输出的高清视频信号采集到影像处理计算机内存;
步骤9 人工选取腹腔镜影像中至少3个腹部主要器官体表关键点的X、Y、Z坐标,存入影像处理计算机内存;
步骤10 根据人工选取的腹腔镜影像中至少3个腹部主要器官体表关键点的X、Y、Z坐标,实时驱动实体三维影像,使预先提取的至少3个关键与腹腔镜影像的三个关键点的X、Y、Z坐标重合;
步骤11 判别两个影像各自关键点在X、Y、Z坐标之间的差值,当差值小于预先设定的值时,表示两个影像重叠锁定成功,预先设定的差值为1毫米;
步骤12 若锁定成功,将腹腔镜影像与三维实体影像重叠显示于影像处理计算机显示器上,否则,仅显示腹腔镜影像。
CN201710064456.8A 2017-02-04 2017-02-04 一种腹部外科精准手术系统及方法 Pending CN106580477A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710064456.8A CN106580477A (zh) 2017-02-04 2017-02-04 一种腹部外科精准手术系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710064456.8A CN106580477A (zh) 2017-02-04 2017-02-04 一种腹部外科精准手术系统及方法

Publications (1)

Publication Number Publication Date
CN106580477A true CN106580477A (zh) 2017-04-26

Family

ID=58585350

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710064456.8A Pending CN106580477A (zh) 2017-02-04 2017-02-04 一种腹部外科精准手术系统及方法

Country Status (1)

Country Link
CN (1) CN106580477A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111297477A (zh) * 2020-03-01 2020-06-19 北京工业大学 一种体表数据与x光片复合的全信息化脊柱侧弯模型的制备方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111297477A (zh) * 2020-03-01 2020-06-19 北京工业大学 一种体表数据与x光片复合的全信息化脊柱侧弯模型的制备方法
CN111297477B (zh) * 2020-03-01 2021-07-16 北京工业大学 一种体表数据与x光片复合的全信息化脊柱侧弯模型的制备方法

Similar Documents

Publication Publication Date Title
Wang et al. A practical marker-less image registration method for augmented reality oral and maxillofacial surgery
US5526812A (en) Display system for enhancing visualization of body structures during medical procedures
CN107854142B (zh) 医用超声增强现实成像系统
CN111839727A (zh) 基于增强现实的前列腺粒子植入路径可视化方法及系统
CN112515767B (zh) 手术导航装置、设备及计算机可读存储介质
EP2901935A1 (en) Method and device for generating virtual endoscope image, and program
CN110751681A (zh) 一种增强现实的配准方法、装置、设备及存储介质
US20220215539A1 (en) Composite medical imaging systems and methods
JP6145870B2 (ja) 画像表示装置および方法、並びにプログラム
CN114711962A (zh) 一种增强现实手术规划导航系统及方法
CN115153835A (zh) 基于特征点配准与增强现实的髋臼假体放置引导系统及方法
CN106580477A (zh) 一种腹部外科精准手术系统及方法
Bockholt et al. Augmented reality for enhancement of endoscopic interventions
JPH08280710A (ja) 実時間医用装置及び患者に医用手順を遂行するために操作者を支援する方法
JP2017063908A (ja) 画像位置合せ装置、方法およびプログラム
CN2857869Y (zh) 基于局部解剖结构特征的术中实时导航装置
CN111631814B (zh) 术中血管立体定位导航系统及方法
US20220218435A1 (en) Systems and methods for integrating imagery captured by different imaging modalities into composite imagery of a surgical space
RU2736800C1 (ru) Способ подготовки и выполнения хирургической операции на органах малого таза
Habert et al. Multi-layer visualization for medical mixed reality
Salb et al. INPRES (intraoperative presentation of surgical planning and simulation results): augmented reality for craniofacial surgery
US20220296303A1 (en) Systems and methods for registering imaging data from different imaging modalities based on subsurface image scanning
CN211325035U (zh) 一种内外可视的新型内窥镜系统
US20230145531A1 (en) Systems and methods for registering visual representations of a surgical space
WO2024067753A1 (zh) 一种配准方法、配准系统、导航信息确定方法和导航系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170426