CN112155733B - 可读存储介质、骨建模配准系统及骨科手术系统 - Google Patents
可读存储介质、骨建模配准系统及骨科手术系统 Download PDFInfo
- Publication number
- CN112155733B CN112155733B CN202011052627.3A CN202011052627A CN112155733B CN 112155733 B CN112155733 B CN 112155733B CN 202011052627 A CN202011052627 A CN 202011052627A CN 112155733 B CN112155733 B CN 112155733B
- Authority
- CN
- China
- Prior art keywords
- target
- virtual model
- coordinate
- coordinate system
- bone
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 210000000988 bone and bone Anatomy 0.000 title claims abstract description 156
- 238000001356 surgical procedure Methods 0.000 title description 29
- 238000006243 chemical reaction Methods 0.000 claims abstract description 59
- 239000000523 sample Substances 0.000 claims abstract description 49
- 238000002604 ultrasonography Methods 0.000 claims description 39
- 239000011159 matrix material Substances 0.000 claims description 24
- 230000000399 orthopedic effect Effects 0.000 claims description 20
- 238000001514 detection method Methods 0.000 claims description 19
- 238000002595 magnetic resonance imaging Methods 0.000 claims description 14
- 238000002591 computed tomography Methods 0.000 claims description 13
- 230000001133 acceleration Effects 0.000 claims description 11
- 230000011218 segmentation Effects 0.000 claims description 7
- 238000013519 translation Methods 0.000 claims description 6
- 238000012545 processing Methods 0.000 claims description 5
- 230000002159 abnormal effect Effects 0.000 claims description 4
- 238000004891 communication Methods 0.000 claims description 4
- 238000012829 orthopaedic surgery Methods 0.000 abstract description 2
- 210000000689 upper leg Anatomy 0.000 description 29
- 230000009466 transformation Effects 0.000 description 24
- 238000000034 method Methods 0.000 description 18
- 238000010586 diagram Methods 0.000 description 13
- 230000008569 process Effects 0.000 description 12
- 210000002303 tibia Anatomy 0.000 description 10
- 238000009434 installation Methods 0.000 description 9
- 210000000629 knee joint Anatomy 0.000 description 9
- 230000003287 optical effect Effects 0.000 description 8
- 238000005553 drilling Methods 0.000 description 6
- 208000014674 injury Diseases 0.000 description 5
- 208000015181 infectious disease Diseases 0.000 description 4
- 238000007689 inspection Methods 0.000 description 4
- 230000008733 trauma Effects 0.000 description 4
- 210000004872 soft tissue Anatomy 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 241000567769 Isurus oxyrinchus Species 0.000 description 1
- 238000012274 Preoperative evaluation Methods 0.000 description 1
- 229910000831 Steel Inorganic materials 0.000 description 1
- 208000027418 Wounds and injury Diseases 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000013150 knee replacement Methods 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002035 prolonged effect Effects 0.000 description 1
- 239000010959 steel Substances 0.000 description 1
- 230000000472 traumatic effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
- A61B2034/101—Computer-aided simulation of surgical operations
- A61B2034/105—Modelling of the patient, e.g. for ligaments or bones
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2048—Tracking techniques using an accelerometer or inertia sensor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2063—Acoustic tracking systems, e.g. using ultrasound
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2065—Tracking using image or pattern recognition
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2068—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis using pointers, e.g. pointers having reference marks for determining coordinates of body points
Abstract
本发明提供一种可读存储介质、骨建模配准系统及骨科手术系统,所述可读存储介质上存储有程序,所述程序被执行时实现:获取预定对象的超声图像数据;根据超声图像数据进行三维重建,得到第一虚拟模型;将第一虚拟模型与预置的第二虚拟模型进行配准,获得超声探头阵列坐标系与导航影像坐标系之间的第一坐标转换关系;基于与超声探头阵列连接的靶标,获得超声探头阵列坐标系与靶标坐标系之间的第二坐标转换关系;通过第一坐标转换关系与第二坐标转换关系的坐标系转换,获得靶标坐标系与导航影像坐标系的第三坐标转换关系;基于第三坐标转换关系,利用靶标的实时坐标反馈,得到预定对象于导航影像坐标系下的实时坐标。
Description
技术领域
本发明涉及机器人辅助手术系统领域,特别涉及一种可读存储介质、骨建模配准系统及骨科手术系统。
背景技术
近年来,手术导航系统越来越多地被运用到外科手术当中,特别是骨科手术中。例如MAKO骨科手术导航系统、Robodoc骨科手术导航系统等,均是利用机械臂以及红外光学导航设备的结合,根据医生的术前规划,结合术中的注册配准技术,使用机器人辅助医生完成手术操作。这其中,骨注册配准技术,是获得导航系统虚拟骨模型与实际骨头的坐标转换关系,但是目前通用的注册工具以及方法存在着以下的问题:
1)流程繁琐,增加额外手术时间,目前通用的骨注册方法为:使用带有靶标跟踪球的探针,对骨头采用单点采集,单点采集速度慢,同时由于采集的样本量有限,加之人为采集点的误操作,容易导致配准失败,增加手术整体时间。
2)由于骨头表面存在一层软组织,通用的骨注册需要使用尖头探针刺破软组织,刺破软组织的力度以及深度人为很难把握,采集点不够精确,采集点误差大,从而造成配准误差大。
发明内容
本发明的目的在于提供一种可读存储介质、骨建模配准系统及骨科手术系统,以解决现有骨注册配准所存在的问题。
为解决上述技术问题,根据本发明的第一个方面,提供了一种可读存储介质,其上存储有程序,所述程序被执行时实现:
获取预定对象的超声图像数据,所述超声图像数据经围绕一预定对象的布置的超声探头阵列获得;
根据所述超声图像数据进行三维重建,得到第一虚拟模型;
将所述第一虚拟模型与预置的第二虚拟模型进行配准;
基于与所述超声探头阵列连接的靶标,获得所述超声探头阵列坐标系、靶标坐标系、导航装置坐标系以及导航影像坐标系之间的坐标转换关系;
基于所述坐标转换关系,利用所述靶标于导航装置下的实时坐标反馈,得到所述预定对象于导航影像坐标系下的实时坐标。
可选的,所述第一虚拟模型与所述第二虚拟模型均为骨模型。
可选的,所述可读存储介质上的程序被执行时,根据所述超声图像数据进行三维重建,得到第一虚拟模型的步骤包括:
对所述超声图像数据进行分割处理,获取骨轮廓点云数据;
基于所述骨轮廓点云数据进行三维重建,得到所述第一虚拟模型。
可选的,所述可读存储介质上的程序被执行时,将所述第一虚拟模型与预置的第二虚拟模型进行配准的步骤包括:
根据所述第二虚拟模型,计算得到关节外边界的最小包围盒,并获取所述最小包围盒的中心;
将所述骨轮廓点云数据经粗配准矩阵转换到所述第二虚拟模型的坐标系,并获取转换后的点云中心点;
将所述最小包围盒的中心与所述预定对象的关节中心连接限定第一向量;
将所述点云中心点与所述关节中心连接限定第二向量,所述第二向量与所述第一向量之间的夹角为α,所述第一向量与所述第二向量组成的平面的法向量为ε,将所述骨轮廓点云数据围绕ε轴旋转α角,使所述第一向量与所述第二向量在轴线ε’上重合;以及
将围绕ε向量旋转α角后的骨轮廓点云数据围绕轴线ε’转动β角度。
可选的,所述可读存储介质上的程序被执行时,将所述第一虚拟模型与预置的第二虚拟模型进行配准的步骤还包括:
计算围绕轴线ε’转动β角度后的骨轮廓点云数据与围绕ε向量旋转α角前的骨轮廓点云数据之间的均方根,若所述均方根大于预设的第一阈值,则重复将所述骨轮廓点云数据围绕ε轴旋转α角以及围绕轴线ε’转动β角度的步骤,直至所述均方根不大于所述第一阈值。
可选的,所述可读存储介质上的程序被执行时,在将所述第一虚拟模型与预置的第二虚拟模型进行配准后,还实现:
比较当前时刻的点云配准矩阵与预定间隔时刻下的点云配准矩阵,若当前时刻的点云配准矩阵与预定间隔时刻下的点云配准矩阵之间的旋转和平移大于预设的第二阈值,则触发所述第一虚拟模型与所述第二虚拟模型进行重新配准。
可选的,所述可读存储介质上的程序被执行时,预置的第二虚拟模型根据 CT扫描或MRI扫描所述预定对象所得的影像建立。
可选的,所述可读存储介质上的程序被执行时,还实现:
实时获取所述靶标的位置信息和姿态信息,所述靶标的位置信息和姿态信息来自于与所述靶标连接的惯性组件;
基于所述靶标的初始坐标,以及所述惯性组件实时获取的靶标的位置信息和姿态信息,得到所述靶标的实时坐标反馈。
可选的,所述可读存储介质上的程序被执行时,利用所述惯性组件得到的所述靶标的实时坐标反馈,与导航装置直接获取的所述靶标的实时坐标反馈互为校验,当其中一者发生异常,则产生报警信息。
为解决上述技术问题,根据本发明的第二个方面,还提供了一种骨建模配准系统,其包括:处理器、导航装置以及固定检测装置;所述固定检测装置具有内尺寸可调节的环状部、超声探头阵列及靶标,所述超声探头阵列沿所述环状部周向分布,用于围绕一预定对象环状布置;所述靶标与所述环状部连接;
所述导航装置与所述靶标相适配,用以获取所述靶标的实时坐标反馈,并将所述实时坐标反馈传输至所述处理器;
所述处理器分别与所述导航装置及所述固定检测装置通信连接;所述处理器被配置为,获取经所述超声探头阵列所得到的预定对象的超声图像数据;根据所述超声图像数据进行三维重建,得到第一虚拟模型;将所述第一虚拟模型与预置的第二虚拟模型进行配准,获得超声探头阵列坐标系与导航影像坐标系之间的第一坐标转换关系;获得所述超声探头阵列坐标系与靶标坐标系之间的第二坐标转换关系;通过所述第一坐标转换关系与所述第二坐标转换关系的坐标系转换,获得所述靶标坐标系与所述导航影像坐标系的第三坐标转换关系;基于所述第三坐标转换关系,利用所述靶标的实时坐标反馈,得到所述预定对象于导航影像坐标系下的实时坐标。
可选的,在所述骨建模配准系统中,所述固定检测装置还包括:惯性组件;所述惯性组件与所述靶标连接,用于实时获取所述靶标的位置信息和姿态信息;
所述处理器还被配置为,基于所述靶标的初始坐标,以及所述惯性组件实时获取的靶标的位置信息和姿态信息,得到所述靶标的实时坐标反馈。
可选的,在所述骨建模配准系统中,所述惯性组件包括陀螺仪和/或加速度传感器;所述陀螺仪用于获取所述靶标的姿态信息,所述加速度传感器用于获取所述靶标的位置信息。
可选的,所述骨建模配准系统还包括:报警装置;所述报警装置被配置为,在所述惯性组件及所述导航装置中的任一个无法获取所述靶标的实时坐标反馈时,发出报警信息。
为解决上述技术问题,根据本发明的第三个方面,还提供了一种骨科手术系统,其包括如上所述的骨建模配准系统。
综上所述,在本发明提供的可读存储介质、骨建模配准系统及骨科手术系统中,所述可读存储介质上存储有程序,所述程序被执行时实现:获取预定对象的超声图像数据,所述超声图像数据经围绕一预定对象布置的超声探头阵列获得;根据所述超声图像数据进行三维重建,得到第一虚拟模型;将所述第一虚拟模型与预置的第二虚拟模型进行配准;基于与所述超声探头阵列连接的靶标,获得所述超声探头阵列坐标系、靶标坐标系、导航装置坐标系以及导航影像坐标系之间的坐标转换关系;基于所述坐标转换关系,利用所述靶标于导航装置下的实时坐标反馈,得到所述预定对象于导航影像坐标系下的实时坐标。
如此配置,利用围绕一预定对象布置的超声探头阵列获取超声图像数据,重建得到第一虚拟模型,基于第一虚拟模型与预置的第二虚拟模型的配准及各坐标系之间的转换,利用靶标的实时坐标反馈,即可得到预定对象于导航影像坐标系下的实时坐标。即实现了术前影像模型与术中实际骨模型的配准。整个配准过程中无需钻孔,无额外创伤,降低感染的可能。此外,骨建模配准系统的设置简单,简化了手术中配准注册工具的安装,简化了配准流程,降低了手术的复杂度,缩减了手术时间。
附图说明
本领域的普通技术人员将会理解,提供的附图用于更好地理解本发明,而不对本发明的范围构成任何限定。其中:
图1是本发明涉及的骨科手术系统的手术场景示意图;
图2是本发明涉及的骨科手术系统的骨科手术过程的流程图;
图3是本发明实施例一的固定检测装置的示意图;
图4是本发明实施例一的固定检测装置安装使用的示意图;
图5是本发明实施例一的环状部调节的示意图;
图6是本发明实施例一的环状部拆卸的示意图;
图7是本发明实施例一的坐标转换示意图;
图8a是本发明实施例一的第一步配准的示意图;
图8b是本发明实施例一的第二步配准的示意图;
图9是本发明实施例一的配准算法的流程图;
图10是本发明实施例一的配准后误差实时校准的示意图;
图11是本发明实施例二的固定检测装置的示意图;
图12是本发明实施例三的固定检测装置的示意图;
图13是本发明实施例三的固定检测装置安装使用的示意图;
图14是本发明实施例三的坐标转换示意图;
图15是本发明实施例四的固定检测装置的示意图;
图16是本发明实施例四的固定检测装置安装使用的示意图;
图17是本发明实施例四的坐标转换示意图。
附图中:
1-手术台车;2-机械臂;3-工具靶标;4-截骨导向工具;5-手术工具;6-跟踪仪;7-辅助显示器;8-主显示器;9-导航台车;10-键盘;11-股骨靶标;12-股骨;13-胫骨靶标;14-胫骨;15-基座靶标;17-患者;18-操作者;
21-超声探头阵列坐标系;22-靶标坐标系;23-导航装置坐标系;24-导航影像坐标系;25-深度传感器坐标系;
100-固定检测装置;110-环状部;120-超声探头阵列;130-靶标;140-惯性组件;150-深度传感器。
具体实施方式
为使本发明的目的、优点和特征更加清楚,以下结合附图和具体实施例对本发明作进一步详细说明。需说明的是,附图均采用非常简化的形式且未按比例绘制,仅用以方便、明晰地辅助说明本发明实施例的目的。此外,附图所展示的结构往往是实际结构的一部分。特别的,各附图需要展示的侧重点不同,有时会采用不同的比例。
如在本发明中所使用的,单数形式“一”、“一个”以及“该”包括复数对象,术语“或”通常是以包括“和/或”的含义而进行使用的,术语“若干”通常是以包括“至少一个”的含义而进行使用的,术语“至少两个”通常是以包括“两个或两个以上”的含义而进行使用的,此外,术语“第一”、“第二”、“第三”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”、“第三”的特征可以明示或者隐含地包括一个或者至少两个该特征,术语“近端”通常是靠近操作者的一端,术语“远端”通常是靠近被操作对象的一端,“一端”与“另一端”以及“近端”与“远端”通常是指相对应的两部分,其不仅包括端点,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或成一体;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通或两个元件的相互作用关系。此外,如在本发明中所使用的,一元件设置于另一元件,通常仅表示两元件之间存在连接、耦合、配合或传动关系,且两元件之间可以是直接的或通过中间元件间接的连接、耦合、配合或传动,而不能理解为指示或暗示两元件之间的空间位置关系,即一元件可以在另一元件的内部、外部、上方、下方或一侧等任意方位,除非内容另外明确指出外。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。
本发明的核心思想在于提供一种可读存储介质、骨建模配准系统及骨科手术系统,以解决现有骨注册配准所存在的一个或者多个问题。
请参考图1和图2,其中,图1是本发明涉及的骨科手术系统的手术场景示意图;图2是本发明涉及的骨科手术系统的骨科手术过程的流程图。
图1示出了一个示范性的实施例中,利用所述骨科手术系统进行膝关节置换的应用场景,然而,本发明的骨科手术系统对应用环境没有特别的限制,也可应用于其他的骨科手术。以下描述中,以用于膝关节置换为示例对骨科手术系统进行说明,但不应以此作为对本发明的限定。
如图1所示,所述骨科手术系统包括控制装置、导航装置、机械臂2以及截骨导向工具4。机械臂2设置在手术台车1上,所述控制装置在一些实施例中为一台计算机,但本发明对此不作限制,该计算机配置了处理器、主显示器8和键盘10,更优选还包括辅助显示器7。所述辅助显示器7和主显示器8所显示的内容可以是一致的,也可以不同。所述导航装置可以是电磁定位导航装置、光学定位导航装置或者电磁定位导航装置。优选的,所述导航装置为光学定位导航装置,相比于其他的导航方式,测量精度高,可有效提高截骨导向工具4的定位精度。以下描述中,以光学定位导航装置作为示例进行说明,但不以此为限。
所述导航装置具体包括导航标志物和跟踪仪6,所述导航标志物包括基座靶标15和工具靶标3,基座靶标15固定不动,例如基座靶标15被固定在手术台车1上而用于提供一个基坐标系(或称基座靶标坐标系),而工具靶标3安装在截骨导向工具4上而用于跟踪截骨导向工具4的位置。所述截骨导向工具4安装在机械臂2的末端,从而通过机械臂2来支撑截骨导向工具4,并调整截骨导向工具4的空间位置和姿态。
实际中,利用跟踪仪6来捕捉工具靶标3反射的信号(优选光学信号)并记录工具靶标3的位置(即工具靶标3在基座标系下的位置和姿态),再由控制装置的存储器内存储的计算机程序根据工具靶标3的当前位置和期望位置,控制机械臂2运动,机械臂2驱动截骨导向工具4和工具靶标3运动,并使工具靶标3到达期望位置,工具靶标3的期望位置对应于截骨导向工具4的期望位置。
因此,对于骨科手术系统的应用,可实现截骨导向工具4的自动定位,且手术过程中由工具靶标3跟踪并反馈截骨导向工具4的实时位姿,并通过控制机械臂的运动实现截骨导向工具4的位置和姿态的调整,不仅截骨导向工具4的定位精度高,而且通过机械臂2来支撑截骨导向工具4,而无需将导向工具固定在人体上,可避免对人体产生二次伤害。
一般的,所述骨科手术系统还包括手术台车1和导航台车9。所述控制装置和一部分所述导航装置安装在导航台车9上,例如所述处理器安装在导航台车9 的内部,所述键盘10放置在导航台车9的外部进行操作,所述主显示器8、辅助显示器7和跟踪仪6均安装在一个支架上,所述支架竖直固定在导航台车9 上,而所述机械臂2安装在手术台车1上。手术台车1和导航台车9的使用,使整个手术操作更为方便。
请参考图2,在执行膝关节置换手术时,本实施例的骨科手术系统的使用过程大致包括以下操作:
步骤SK1:将手术台车1及导航台车9移动至病床旁边合适的位置;
步骤SK2:安装导航标志物(导航标志物还包括股骨靶标11、胫骨靶标13)、截骨导向工具4以及其他相关部件(如无菌袋);
步骤SK3:术前规划;具体的,操作者18将患者17的骨头CT/MRI扫描模型导入所述计算机进行术前规划,得到截骨方案,该截骨方案例如包括截骨平面坐标、假体的型号以及假体的安装方位等信息;具体地,根据CT/MRI扫描得到的患者膝关节影像数据,创建三维膝关节虚拟模型,进而根据三维膝关节虚拟模型创建截骨方案,以便手术操作者根据截骨方案进行术前评估,更具体地,基于三维膝关节虚拟模型,并结合得到的假体的尺寸规格以及截骨板的安装位置等确定截骨方案,所述截骨方案最终以手术报告形式输出,其记录有截骨平面坐标、截骨量、截骨角度、假体规格、假体的安装位置、手术辅助工具等一系列参考数据,特别还包括一系列理论说明,如选取该截骨角度的原因说明等,以为手术操作者提供参考;其中,三维膝关节虚拟模型可通过主显示器8进行显示,且操作者可通过键盘10输入手术参数,以便进行术前规划;
步骤SK4:骨实时配准;术前评估后,需要实时获取骨头特征点位置,然后处理器才可以通过特征匹配算法得到股骨12及胫骨14的实际方位,并与股骨 12及胫骨14的图像方位相对应,随后导航装置将股骨12、胫骨14的实际方位与安装在股骨12及胫骨14上的相应靶标相联系,从而使股骨靶标11和胫骨靶标13可以实时跟踪骨头的实际位置。通过导航装置将股骨12及胫骨14的实际方位与安装在股骨12及胫骨14上的相应靶标相联系,使得股骨靶标11和胫骨靶标13可以实时跟踪骨头的实际位置,且手术过程中,只要靶标与骨头间的相对位置固定,骨头移动不会影响手术效果;
步骤SK5:驱动机械臂运动到位,执行操作;进而通过导航装置将术前规划的截骨平面坐标发送给机械臂2,所述机械臂2通过工具靶标3定位截骨平面并运动到预定位置后,使机械臂2进入保持状态(即不动),此后,操作者即可使用摆锯或电钻等手术工具5通过截骨导向工具4进行截骨和/或钻孔操作。完成截骨及钻孔操作后,操作者即可安装假体及进行其他手术操作。
传统手术及没有机械臂参与定位的导航手术系统,需要手动调整截骨导向定位工具,精度差,调整效率低,而使用机械臂定位导向工具,操作者不需要使用额外的骨钉将导向工具固定在骨头上,减少病人的创伤面,并缩减手术时间。
本实施例中,所述导航标志物还包括股骨靶标11和胫骨靶标13。其中股骨靶标11用于定位股骨12的空间位置和姿态,胫骨靶标13用于定位胫骨14的空间位置和姿态。如前所说的,所述工具靶标3安装在截骨导向工具4上,但在其他实施例中,所述工具靶标3也可以安装在机械臂2的末端关节上。
基于上述骨科手术系统,可实现机器人辅助手术,帮助操作者定位需截骨的位置,以便于操作者实施截骨。然而,在术前评估后,需要将骨虚拟模型与实际骨头的位置进行配准,股骨靶标11和胫骨靶标13才可以实现实时跟踪骨头的功能。为此,本发明提供了一种骨建模配准系统,其包括:处理器、导航装置以及固定检测装置100;这里的处理器可以为设置在手术台车1上的计算机内的共用的处理器,也可以是独立设置的处理器;同样的,导航装置可以利用前述骨科手术系统中的跟踪仪6,也可以独立设置。所述骨科手术系统包括如上所述的骨建模配准系统,即可利用该骨建模配准系统在术前或术中对骨位置进行配准。下面通过若干实施例,结合附图,对本发明提供的可读存储介质、骨建模配准系统及骨科手术系统进行详细的说明。
【实施例一】
请参考图3至图10,其中,图3是本发明实施例一的固定检测装置的示意图;图4是本发明实施例一的固定检测装置安装使用的示意图;图5是本发明实施例一的环状部调节的示意图;图6是本发明实施例一的环状部拆卸的示意图;图7是本发明实施例一的坐标转换示意图;图8a是本发明实施例一的第一步配准的示意图;图8b是本发明实施例一的第二步配准的示意图;图9是本发明实施例一的配准算法的流程图;图10是本发明实施例一的配准后误差实时校准的示意图。
图3和图4示出了本发明实施例一提供的固定检测装置100,所述固定检测装置100具有内尺寸可调节的环状部110、超声探头阵列120及靶标130,所述超声探头阵列120沿所述环状部110周向分布,用于围绕一预定对象布置;所述靶标130与所述环状部110连接;所述导航装置与所述靶标130相适配(如跟踪仪6与相适配的光学靶标),用以获取所述靶标130的实时坐标反馈,并将所述实时坐标反馈传输至所述处理器;所述处理器分别与所述导航装置及所述固定检测装置100通信连接;所述处理器被配置为,获取经所述超声探头阵列120所得到的预定对象的超声图像数据;根据所述超声图像数据进行三维重建,得到第一虚拟模型;将所述第一虚拟模型与预置的第二虚拟模型进行配准,获得超声探头阵列坐标系与导航影像坐标系(即用于导航的CT影像或MRI影像的坐标系)之间的第一坐标转换关系;获得所述超声探头阵列坐标系与靶标坐标系之间的第二坐标转换关系;通过所述第一坐标转换关系与所述第二坐标转换关系的坐标系转换,获得所述靶标坐标系与所述导航影像坐标系的第三坐标转换关系;基于所述第三坐标转换关系,利用所述靶标130的实时坐标反馈,得到所述预定对象于导航影像坐标系下的实时坐标。在一些实施例中,所述第二坐标转换关系可以是固定的,如通过机械设计文件或者通过标定的方式获得。优选的,所述第一虚拟模型与所述第二虚拟模型均为骨模型,第一虚拟模型是根据超声图像数据所建立的待配准的骨头的骨模型,第二虚拟模型是根据该骨头于术前 CT/MRI扫描所得的影像所建立的骨模型。
由此,本实施例一还提供一种可读存储介质,其上存储有程序,所述程序被执行时实现:
步骤SA1:获取预定对象的超声图像数据,所述超声图像数据经围绕一预定对象的环状布置的超声探头阵列120获得;
步骤SA2:根据所述超声图像数据进行三维重建,得到第一虚拟模型;
步骤SA3:将所述第一虚拟模型与预置的第二虚拟模型进行配准;
步骤SA4:基于与所述超声探头阵列120连接的靶标130,获得所述超声探头阵列坐标系、靶标坐标系、导航装置坐标系以及导航影像坐标系之间的坐标转换关系;
步骤SA5:基于所述坐标转换关系,利用所述靶标130于导航装置下的实时坐标反馈,得到所述预定对象于导航影像坐标系下的实时坐标。
下面以股骨作为预定对象为例进行说明,环状部110可以围绕股骨绑扎在患者的大腿上,如此,超声探头阵列120即可获取股骨的超声图像数据。请参考图5和图6,优选的,环状部110的内尺寸可调节,且可开合地设置,即在使用中,环状部110可以打开,套设在患者大腿上,然后闭合,调节内尺寸,以适合不同患者的大腿的粗细尺寸。可选的,环状部110可采用钢带等材料。
在步骤SA1中,环状布置的超声探头阵列120可以获取股骨的超声图像数据,进而将获取到的超声图像数据传输至处理器。进一步的,步骤SA2具体包括:
步骤SA21:对所述超声图像数据进行分割处理,获取骨轮廓点云数据;
步骤SA22:基于所述骨轮廓点云数据进行三维重建,得到所述第一虚拟模型,亦即重建后的股骨的虚拟模型。
优选的,在步骤SA3中,预置的第二虚拟模型根据CT扫描或MRI扫描所述预定对象所得的影像建立。具体的,可于术前通过CT扫描或MRI扫描得到 CT扫描影像或MRI扫描影像,并传输至处理器,处理器根据CT扫描影像或 MRI扫描影像建立第二虚拟模型。进一步的,将根据超声图像数据建立的第一虚拟模型与根据术前影像建立的第二虚拟股模型进行配准,即实现了术前影像模型与术中实际骨模型的配准。
请参考图7,步骤SA4的目的是将各坐标系进行统一。具体的,由于超声探头阵列120与靶标130分别与环状部110连接,超声探头阵列120与靶标130 之间的相对位置是可以预知的,因此超声探头阵列坐标系21与靶标坐标系22 之间的转换关系是可知的,例如可通过配置文件获知。由于导航装置(如跟踪仪 6)与靶标130两者是相适配的,跟踪仪6可以实时地获知靶标130的位置信息,因此靶标坐标系22和导航装置坐标系23之间的转换关系可通过跟踪仪6对靶标130的跟踪获知。通过第一虚拟模型与第二虚拟模型进行配准,可以获得超声探头阵列坐标系21与导航影像坐标系24之间的转换关系。进一步的,通过上述各个坐标系之间的转换关系,即可获得靶标坐标系22与导航影像坐标系24 之间的转换关系。
步骤SA5中,在完成步骤SA3的配准,以及步骤SA4的坐标系转换后,即可通过靶标130在导航装置坐标系23下的实时位置反馈,对股骨的实际位置进行实时跟踪。
如此配置,利用环状布置的超声探头阵列120获取超声图像数据,重建得到第一虚拟模型,基于第一虚拟模型与预置的第二虚拟模型的配准及各坐标系之间的转换,利用靶标的实时坐标反馈,即可得到预定对象于导航影像坐标系下的实时坐标。即实现了术前影像模型与术中实际骨模型的配准。整个配准过程中无需钻孔,无额外创伤,降低感染的可能。此外,骨建模配准系统的设置简单,简化了手术中配准注册工具的安装,简化了配准流程,降低了手术的复杂度,缩减了手术时间。
请参考图8a、8b和图9,将所述第一虚拟模型与预置的第二虚拟模型进行配准的步骤包括:
步骤SA31:根据所述第二虚拟模型,计算得到关节外边界的最小包围盒,并获取所述最小包围盒的中心Ckj;
步骤SA32:将所述骨轮廓点云数据经粗配准矩阵T0转换到所述第一虚拟模型的坐标系,并获取转换后的点云中心点Cb;具体如下公式:
P{CT}=T0P{R}
其中,P{CT}指的是骨轮廓点云数据中的任意一点,P{R}代表实际重建采集的第一虚拟模型的坐标系(即超声探头阵列坐标系)。
步骤SA33:将所述最小包围盒的中心Ckj与所述预定对象的关节中心hct连接限定第一向量q;需要理解的,若预定对象为股骨,则其对应的关节中心为髋关节中心,而若预定对象为胫骨,则其对应的关节中心为踝关节中心。
步骤SA34:将所述点云中心点Cb与所述关节中心hct连接限定第二向量s,所述第二向量s与所述第一向量q之间的夹角为α,所述第一向量q与所述第二向量s组成的平面的法向量为ε,将所述骨轮廓点云数据围绕ε向量旋转α角,使所述第一向量q与所述第二向量s在轴线ε’上重合;实现第一步配准(如图8a所示)。
步骤SA35:将所述骨轮廓点云数据围绕轴线ε’转动β角度。在经过步骤 SA34的轴线重合后,围绕ε向量旋转α角前后的骨轮廓点云数据之间还存在围绕轴ε’成β角度的偏角,因此还需将围绕ε向量旋转α角后的骨轮廓点云数据围绕轴线ε’转动β角度;实现第二步配准(如图8b所示)。
进一步的,将所述第一虚拟模型与预置的第二虚拟模型进行配准的步骤还包括:
步骤SA36:计算围绕轴线ε’转动β角度后的骨轮廓点云数据与围绕ε向量旋转α角前的骨轮廓点云数据之间的均方根(RMS),若所述均方根大于预设的第一阈值,则重复将所述骨轮廓点云数据围绕ε轴旋转α角以及围绕轴线ε’转动β角度的步骤,直至所述均方根不大于所述第一阈值。具体的,步骤SA34与步骤SA35可以重复多次,直至均方根不大于第一阈值时达到收敛条件,完成配准。具体如下公式:
T′n=T(hCT)R1(εn,αn)T(-hct)Tn
Tn+1=T(hct)R2(ε′n,βn)T(-hct)T′n
其中,Tn为第n次迭代后的配准矩阵,T′n是第n次迭代的轴向旋转配准矩阵(即步骤SA34所采用的矩阵),R1为绕ε旋转α角度;Tn+1是第n+1迭代的轴向自转的配准矩阵(即步骤SA35所采用的矩阵);R2为基于上一次轴向旋转之后的围绕ε′轴旋转β角度。
通过上述步骤,即实现了骨轮廓点云数据与第二虚拟模型的配准。
进一步的,在将所述第一虚拟模型与预置的第二虚拟模型进行配准后,所述可读存储介质上的程序被执行时还实现:比较当前时刻的点云配准矩阵与预定间隔时刻下的点云配准矩阵,若当前时刻的点云配准矩阵与预定间隔时刻下的点云配准矩阵之间的旋转和平移大于预设的第二阈值,则触发所述第一虚拟模型与所述第二虚拟模型进行重新配准。请参考图10,在配准后,还可以对误差进行实时校准。在手术执行过程中,超声探头阵列120实时获取的超声图像数据经过分割重建得到点云数据,当前后两个配准矩阵之间的旋转和平移大于预设的第二阈值,则可认为当前靶标130发生了移动,将触发进行重新配准(如重新执行步骤SA31~步骤SA36),直至旋转和平移在可接受的范围内,即完成误差校准。
【实施例二】
请参考图11,其是本发明实施例二的固定检测装置的示意图。
本发明实施例二提供的可读存储介质、骨建模配准系统及骨科手术系统与实施例一提供的可读存储介质、骨建模配准系统及骨科手术系统基本相同,对于相同部分不再叙述,以下仅针对不同点进行描述。
如图11所示,实施例二提供的骨建模配准系统中,所述固定检测装置还包括:惯性组件140;所述惯性组件140与所述靶标连接,用于实时获取所述靶标 130的位置信息和姿态信息;所述处理器还被配置为,基于所述靶标130于导航装置坐标系23下的初始坐标,以及所述惯性组件140实时获取的靶标130的位置信息和姿态信息,得到所述靶标130的实时坐标反馈。可选的,所述惯性组件 140包括陀螺仪和/或加速度传感器;所述陀螺仪用于获取所述靶标130的姿态信息,所述加速度传感器用于获取所述靶标130的位置信息。陀螺仪如可为三轴陀螺仪,加速度传感器如可为三轴加速度传感器。三轴陀螺仪测量的目标是旋转角速度,通过对时间进行积分和累加可以得到靶标130的姿态信息。三轴加速度传感器测量的目标是加速度,通过对加速度进行积分和累加可以得到靶标 130的位置信息。
基于本实施例提供二的骨建模配准系统,可读存储介质上的程序被执行时,除了可实现实施例一中的步骤SA1~SA5外,还可进一步实现:
步骤SA6:实时获取所述靶标130的位置信息和姿态信息,所述靶标130的位置信息和姿态信息来自于与所述靶标130连接的惯性组件140;
步骤SA7:基于所述靶标130于导航装置坐标系23下的初始坐标,以及所述惯性组件140实时获取的靶标130的位置信息和姿态信息,得到所述靶标130 的实时坐标反馈。
需要说明的,这里步骤SA6和步骤SA7并不限定按顺序在步骤SA5之后执行,而是可以在步骤SA1~步骤SA5在的任一个步骤之前或之后执行。
基于上述骨建模配准系统和可读存储介质,处理器可以获取两套跟踪数据,一套是通过导航装置-靶标130的跟踪系统,另一套为利用惯性组件140的惯性跟踪系统。进一步的,在所述可读存储介质中,利用所述惯性组件140得到的所述靶标130的实时坐标反馈,与导航装置直接获取的所述靶标130的实时坐标反馈互为校验,当其中一者发生异常,则产生报警信息。在一些实施例中,靶标 130为光学靶标,当导航装置在跟踪靶标130的位置和姿态时,靶标130发生被遮挡或者无法识别的情况,处理器可通过惯性跟踪系统对靶标130的位置进行修正和补偿,从而可避免由于靶标130丢失跟踪造成的误差。
优选的,所述骨建模配准系统还包括:报警装置(未图示);所述报警装置被配置为,在所述惯性组件140及所述导航装置中的任一个无法获取所述靶标 130的实时坐标反馈时,发出报警信息。报警装置如包括LED灯或者蜂鸣器等,当惯性组件140无法提供准确信息时,或者当导航装置无法获取靶标130的实时坐标反馈时,报警装置即发出报警信息,以提示操作者至少一个跟踪系统存在问题。
【实施例三】
请参考图12至图14,其中,图12是本发明实施例三的固定检测装置的示意图;图13是本发明实施例三的固定检测装置安装使用的示意图;图14是本发明实施例三的坐标转换示意图。
本发明实施例三提供的可读存储介质、骨建模配准系统及骨科手术系统与实施例一提供的可读存储介质、骨建模配准系统及骨科手术系统基本相同,对于相同部分不再叙述,以下仅针对不同点进行描述。
请参考图12和图13,其示出了本实施例三提供的固定检测装置100,所述固定检测装置100具有内尺寸可调节的环状部110及深度传感器150,所述环状部110用于围绕一预定对象布置;所述深度传感器150与所述环状部110连接;所述处理器与所述固定检测装置100通信连接;所述处理器被配置为,获取经所述深度传感器150所得到的预定对象的骨表面数据;根据所述骨表面数据进行三维重建,得到第一虚拟模型;将所述第一虚拟模型与预置的第二虚拟模型进行配准,获得深度传感器坐标系与导航影像坐标系之间的第一坐标转换关系;基于所述第一坐标转换关系,利用所述深度传感器150所获取的实时骨表面数据反馈,得到所述预定对象于导航影像坐标系下的实时坐标。
由此,本实施例三还提供一种可读存储介质,其上存储有程序,所述程序被执行时实现:
步骤SB1:获取预定对象的骨表面数据,所述骨表面数据经与一预定对象连接的深度传感器获得;
步骤SB2:根据所述骨表面数据进行三维重建,得到第一虚拟模型;
步骤SB3:将所述第一虚拟模型与预置的第二虚拟模型进行配准,获得深度传感器坐标系与导航影像坐标系之间的第一坐标转换关系;
步骤SB4:基于所述第一坐标转换关系,利用所述深度传感器所获取的实时骨表面数据反馈,得到所述预定对象于导航影像坐标系下的实时坐标。
下面以股骨作为预定对象为例进行说明,环状部110可以围绕股骨绑扎在患者的大腿上,深度传感器150(如可包括深度相机等)向膝关节一侧延伸。术前暴露股骨靠近膝关节的一端,深度传感器150即可直接获取该暴露的股骨的骨表面数据。具体的,这里的骨表面数据包括图像深度数据等。由于深度传感器 150相对于环状部110的位置关系可以预先设置或根据配准文件获得,因此可以认为深度传感器150与股骨形成可预知的连接关系。
在步骤SB1中,深度传感器150可以获取股骨的骨表面数据,进而将获取到的骨表面数据传输至处理器。进一步的,步骤SB2具体包括:
步骤SB21:对所述骨表面数据进行分割处理,获取骨轮廓点云数据;
步骤SB22:基于所述骨轮廓点云数据进行三维重建,得到所述第一虚拟模型,亦即重建后的股骨的虚拟模型。
在一个示范例中,深度传感器150在获取骨表面数据后,可通过深度传感器150上的可视化的窗口,通过自动区域获取算法或者交互的方式,获取用户感兴趣区域数据,通过自动分割算法实现骨头分割,并对分割后的结果进行重建。当然,本领域技术人员还可根据现有技术,对第一虚拟模型的重建方法进行合理的改进。
优选的,在步骤SB3中,预置的第二虚拟模型根据CT扫描或MRI扫描所述预定对象所得的影像建立。具体的,可于术前通过CT扫描或MRI扫描得到 CT扫描影像或MRI扫描影像,并传输至处理器,处理器根据CT扫描影像或 MRI扫描影像建立第二虚拟模型。进一步的,将根据骨表面数据建立的第一虚拟模型与根据术前影像建立的第二虚拟股模型进行配准,即实现了术前影像模型与术中实际骨模型的配准。
请参考图14,步骤SB4的目的是将坐标系进行统一。具体的,深度传感器 150相对于环状部110的位置关系可以预先设置或根据配准文件获得,深度传感器150相对于环状部110之间的相对位置是可以预知的,因此通过第一虚拟模型与第二虚拟模型进行配准,可以获得深度传感器坐标系25与导航影像坐标系 24之间的转换关系。
步骤SB5中,在完成步骤SB3的配准,以及步骤SB4的坐标系转换后,即可通过深度传感器150所获取的实时骨表面数据反馈,对股骨的实际位置进行实时跟踪。
如此配置,利用深度传感器150获取骨表面数据,重建得到第一虚拟模型,基于第一虚拟模型与预置的第二虚拟模型的配准及坐标系之间的转换,利用深度传感器150所获取的实时骨表面数据反馈,即可得到预定对象于导航影像坐标系24下的实时坐标。即实现了术前影像模型与术中实际骨模型的配准。整个配准过程中无需钻孔,无额外创伤,降低感染的可能。此外,骨建模配准系统的设置简单,简化了手术中配准注册工具的安装,简化了配准流程,降低了手术的复杂度,缩减了手术时间。
步骤SB3的配准算法,与实施例一的步骤SA3相类似,请参考实施例一,这里不再重复说明。进一步的,本实施例三的可读存储介质上的程序被执行时也可以包括误差校准的步骤,具体请参考实施例一,若当前时刻的点云配准矩阵与预定间隔时刻下的点云配准矩阵之间的点云配准矩阵的旋转和平移大于预设的第二阈值,则触发进行重新配准。
【实施例四】
请参考图15至图17,其中,图15是本发明实施例四的固定检测装置的示意图;图16是本发明实施例四的固定检测装置安装使用的示意图;图17是本发明实施例四的坐标转换示意图。
本发明实施例四提供的可读存储介质、骨建模配准系统及骨科手术系统与实施例三提供的可读存储介质、骨建模配准系统及骨科手术系统基本相同,对于相同部分不再叙述,以下仅针对不同点进行描述。
如图15至图17所示,实施例四提供的骨建模配准系统中,所述固定检测装置还包括:导航装置与靶标130;所述靶标130与所述环状部110连接;所述导航装置与所述处理器通信连接,所述导航装置与所述靶标130相适配(如与跟踪仪6相适配的光学靶标),用以获取所述靶标130的实时坐标反馈,并将所述实时坐标反馈传输至所述处理器;所述处理器还被配置为,获得所述深度传感器坐标系25与靶标坐标系22之间的第二坐标转换关系;通过所述第一坐标转换关系与所述第二坐标转换关系的坐标系转换,获得所述靶标坐标系22与所述导航影像坐标系24的第三坐标转换关系;基于所述第三坐标转换关系,利用所述靶标130的实时坐标反馈,得到所述预定对象于导航影像坐标系24下的实时坐标。
基于本实施例四的骨建模配准系统,所述可读存储介质上的程序被执行时,还可进一步实现:
步骤SB6:基于与所述深度传感器150连接的靶标130,获得深度传感器坐标系25与靶标坐标系22之间的第二坐标转换关系;
步骤SB7:通过所述第一坐标转换关系与所述第二坐标转换关系的坐标系转换,获得所述靶标坐标系22与所述导航影像坐标系24的第三坐标转换关系;
步骤SB8:基于所述第三坐标转换关系,利用所述靶标130的实时坐标反馈,得到所述预定对象于导航影像坐标系24下的实时坐标。
需要说明的,这里步骤SB6~步骤SB8并不限定按顺序在步骤SB5之后执行,而是可以在步骤SB1~步骤SB5在的任一个步骤之前或之后执行。
基于上述骨建模配准系统和可读存储介质,处理器可以获取两套跟踪数据,一套是通过导航装置-靶标130的跟踪系统,另一套为利用深度传感器150的跟踪系统。进一步的,利用所述实时骨表面数据反馈得到的所述预定对象于导航影像坐标系24下的实时坐标,与利用所述靶标130的实时坐标反馈得到的所述预定对象于导航影像坐标系24下的实时坐标互为校验,当其中一者发生异常,则产生报警信息。
在一些实施例中,利用所述深度传感器150获取实时骨表面数据反馈需要占用较大的计算资源,而利用导航装置跟踪靶标130的位置和姿态则较为方便可靠,因此处理器在可以获取两套跟踪数据时,优选以导航装置所获取的靶标130的实时坐标为主要数据,来计算得到所述预定对象于导航影像坐标系24下的实时坐标。而当靶标130发生被遮挡或者无法识别的情况,处理器可通过深度传感器150获取实时骨表面数据反馈对靶标130的位置进行修正和补偿,从而可避免由于靶标130丢失跟踪造成的误差。
优选的,所述骨建模配准系统还包括:报警装置(未图示);所述报警装置被配置为,所述报警装置被配置为,在所述深度传感器150无法获取实时骨表面数据反馈,或者所述导航装置无法获取所述靶标130的实时坐标反馈时,发出报警信息。报警装置如包括LED灯或者蜂鸣器等,当深度传感器150无法获取实时骨表面数据反馈时,或者当导航装置无法获取靶标130的实时坐标反馈时,报警装置即发出报警信息,以提示操作者至少一个跟踪系统存在问题。
综上所述,在本发明提供的可读存储介质、骨建模配准系统及骨科手术系统中,一个优选实施例提供的可读存储介质上的程序被执行时实现:获取预定对象的超声图像数据,所述超声图像数据经围绕一预定对象布置的超声探头阵列获得;根据所述超声图像数据进行三维重建,得到第一虚拟模型;将所述第一虚拟模型与预置的第二虚拟模型进行配准,获得超声探头阵列坐标系与导航影像坐标系之间的第一坐标转换关系;基于与所述超声探头阵列连接的靶标,获得所述超声探头阵列坐标系与靶标坐标系之间的第二坐标转换关系;通过所述第一坐标转换关系与所述第二坐标转换关系的坐标系转换,获得所述靶标坐标系与所述导航影像坐标系的第三坐标转换关系;基于所述第三坐标转换关系,利用所述靶标的实时坐标反馈,得到所述预定对象于导航影像坐标系下的实时坐标。
如此配置,利用围绕一预定对象布置的超声探头阵列获取超声图像数据,重建得到第一虚拟模型,基于第一虚拟模型与预置的第二虚拟模型的配准及各坐标系之间的转换,利用靶标的实时坐标反馈,即可得到预定对象于导航影像坐标系下的实时坐标。即实现了术前影像模型与术中实际骨模型的配准。
另一个优选实施例提供的可读存储介质上的程序被执行时实现:获取预定对象的骨表面数据,所述骨表面数据经与一预定对象连接的深度传感器获得;根据所述骨表面数据进行三维重建,得到第一虚拟模型;将所述第一虚拟模型与预置的第二虚拟模型进行配准,获得深度传感器坐标系与导航影像坐标系之间的第一坐标转换关系;基于所述第一坐标转换关系,利用所述深度传感器所获取的实时骨表面数据反馈,得到所述预定对象于导航影像坐标系下的实时坐标。
如此配置,利用深度传感器获取骨表面数据,重建得到第一虚拟模型,基于第一虚拟模型与预置的第二虚拟模型的配准及各坐标系之间的转换,利用深度传感器所获取的实时骨表面数据反馈,即可得到预定对象于导航影像坐标系下的实时坐标。即实现了术前影像模型与术中实际骨模型的配准。整个配准过程中无需钻孔,无额外创伤,降低感染的可能。此外,骨建模配准系统的设置简单,简化了手术中配准注册工具的安装,简化了配准流程,降低了手术的复杂度,缩减了手术时间。
上述描述仅是对本发明较佳实施例的描述,并非对本发明范围的任何限定,本发明领域的普通技术人员根据上述揭示内容做的任何变更、修饰,均属于权利要求书的保护范围。
Claims (12)
1.一种可读存储介质,其上存储有程序,其特征在于,所述程序被执行时实现:
获取预定对象的超声图像数据,所述超声图像数据经围绕一预定对象布置的超声探头阵列获得;
根据所述超声图像数据进行三维重建,得到第一虚拟模型;
将所述第一虚拟模型与预置的第二虚拟模型进行配准;
基于与所述超声探头阵列连接的靶标,获得所述超声探头阵列坐标系、靶标坐标系、导航装置坐标系以及导航影像坐标系之间的坐标转换关系;
基于所述坐标转换关系,利用所述靶标于导航装置下的实时坐标反馈,得到所述预定对象于导航影像坐标系下的实时坐标;
根据所述超声图像数据进行三维重建,得到第一虚拟模型的步骤包括:
对所述超声图像数据进行分割处理,获取骨轮廓点云数据;
基于所述骨轮廓点云数据进行三维重建,得到所述第一虚拟模型;
将所述第一虚拟模型与预置的第二虚拟模型进行配准的步骤包括:
根据所述第二虚拟模型,计算得到关节外边界的最小包围盒,并获取所述最小包围盒的中心;
将所述骨轮廓点云数据经粗配准矩阵转换到所述第二虚拟模型的坐标系,并获取转换后的点云中心点;
将所述最小包围盒的中心与所述预定对象的关节中心连接限定第一向量;
将所述点云中心点与所述关节中心连接限定第二向量,所述第二向量与所述第一向量之间的夹角为α,所述第一向量与所述第二向量组成的平面的法向量为ε,将所述骨轮廓点云数据围绕ε轴旋转α角,使所述第一向量与所述第二向量在轴线ε’上重合;以及
将围绕ε向量旋转α角后的骨轮廓点云数据围绕轴线ε’转动β角度。
2.根据权利要求1所述的可读存储介质,其特征在于,所述第一虚拟模型与所述第二虚拟模型均为骨模型。
3.根据权利要求1所述的可读存储介质,其特征在于,将所述第一虚拟模型与预置的第二虚拟模型进行配准的步骤还包括:
计算围绕轴线ε’转动β角度后的骨轮廓点云数据与围绕ε向量旋转α角前的骨轮廓点云数据之间的均方根,若所述均方根大于预设的第一阈值,则重复将所述骨轮廓点云数据围绕ε轴旋转α角以及围绕轴线ε’转动β角度的步骤,直至所述均方根不大于所述第一阈值。
4.根据权利要求1所述的可读存储介质,其特征在于,在将所述第一虚拟模型与预置的第二虚拟模型进行配准后,所述程序被执行时还实现:
比较当前时刻的点云配准矩阵与预定间隔时刻下的点云配准矩阵,若当前时刻的点云配准矩阵与预定间隔时刻下的点云配准矩阵之间的旋转和平移大于预设的第二阈值,则触发所述第一虚拟模型与所述第二虚拟模型进行重新配准。
5.根据权利要求1所述的可读存储介质,其特征在于,预置的第二虚拟模型根据CT扫描或MRI扫描所述预定对象所得的影像建立。
6.根据权利要求1所述的可读存储介质,其特征在于,所述程序被执行时还实现:
实时获取所述靶标的位置信息和姿态信息,所述靶标的位置信息和姿态信息来自于与所述靶标连接的惯性组件;
基于所述靶标于所述导航装置坐标系下的初始坐标,以及所述惯性组件实时获取的靶标的位置信息和姿态信息,得到所述靶标的实时坐标反馈。
7.根据权利要求6所述的可读存储介质,其特征在于,利用所述惯性组件得到的所述靶标的实时坐标反馈,与导航装置直接获取的所述靶标的实时坐标反馈互为校验,当其中一者发生异常,则产生报警信息。
8.一种骨建模配准系统,其特征在于,包括:处理器、导航装置以及固定检测装置;所述固定检测装置具有内尺寸可调节的环状部、超声探头阵列及靶标,所述超声探头阵列沿所述环状部周向分布,用于围绕一预定对象布置;所述靶标与所述环状部连接;
所述导航装置与所述靶标相适配,用以获取所述靶标的实时坐标反馈,并将所述实时坐标反馈传输至所述处理器;
所述处理器分别与所述导航装置及所述固定检测装置通信连接;所述处理器被配置为,获取经所述超声探头阵列所得到的预定对象的超声图像数据;根据所述超声图像数据进行三维重建,得到第一虚拟模型;将所述第一虚拟模型与预置的第二虚拟模型进行配准,获得超声探头阵列坐标系与导航影像坐标系之间的第一坐标转换关系;获得所述超声探头阵列坐标系与靶标坐标系之间的第二坐标转换关系;通过所述第一坐标转换关系与所述第二坐标转换关系的坐标系转换,获得所述靶标坐标系与所述导航影像坐标系的第三坐标转换关系;基于所述第三坐标转换关系,利用所述靶标的实时坐标反馈,得到所述预定对象于导航影像坐标系下的实时坐标;
其中,根据所述超声图像数据进行三维重建,得到第一虚拟模型的步骤包括:
对所述超声图像数据进行分割处理,获取骨轮廓点云数据;
基于所述骨轮廓点云数据进行三维重建,得到所述第一虚拟模型;
将所述第一虚拟模型与预置的第二虚拟模型进行配准的步骤包括:
根据所述第二虚拟模型,计算得到关节外边界的最小包围盒,并获取所述最小包围盒的中心;
将所述骨轮廓点云数据经粗配准矩阵转换到所述第二虚拟模型的坐标系,并获取转换后的点云中心点;
将所述最小包围盒的中心与所述预定对象的关节中心连接限定第一向量;
将所述点云中心点与所述关节中心连接限定第二向量,所述第二向量与所述第一向量之间的夹角为α,所述第一向量与所述第二向量组成的平面的法向量为ε,将所述骨轮廓点云数据围绕ε轴旋转α角,使所述第一向量与所述第二向量在轴线ε’上重合;以及
将围绕ε向量旋转α角后的骨轮廓点云数据围绕轴线ε’转动β角度。
9.根据权利要求8所述的骨建模配准系统,其特征在于,所述固定检测装置还包括:惯性组件;所述惯性组件与所述靶标连接,用于实时获取所述靶标的位置信息和姿态信息;
所述处理器还被配置为,基于所述靶标于所述导航装置坐标系下的初始坐标,以及所述惯性组件实时获取的靶标的位置信息和姿态信息,得到所述靶标的实时坐标反馈。
10.根据权利要求9所述的骨建模配准系统,其特征在于,所述惯性组件包括陀螺仪和/或加速度传感器;所述陀螺仪用于获取所述靶标的姿态信息,所述加速度传感器用于获取所述靶标的位置信息。
11.根据权利要求9所述的骨建模配准系统,其特征在于,所述骨建模配准系统还包括:报警装置;所述报警装置被配置为,在所述惯性组件及所述导航装置中的任一个无法获取所述靶标的实时坐标反馈时,发出报警信息。
12.一种骨科手术系统,其特征在于,包括根据权利要求8~11中任一项所述的骨建模配准系统。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011052627.3A CN112155733B (zh) | 2020-09-29 | 2020-09-29 | 可读存储介质、骨建模配准系统及骨科手术系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011052627.3A CN112155733B (zh) | 2020-09-29 | 2020-09-29 | 可读存储介质、骨建模配准系统及骨科手术系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112155733A CN112155733A (zh) | 2021-01-01 |
CN112155733B true CN112155733B (zh) | 2022-01-28 |
Family
ID=73860752
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011052627.3A Active CN112155733B (zh) | 2020-09-29 | 2020-09-29 | 可读存储介质、骨建模配准系统及骨科手术系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112155733B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP4302719A1 (en) * | 2022-07-08 | 2024-01-10 | Orthosoft ULC | System for computer-assisted shoulder surgery |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112155734B (zh) * | 2020-09-29 | 2022-01-28 | 苏州微创畅行机器人有限公司 | 可读存储介质、骨建模配准系统及骨科手术系统 |
CN112155732B (zh) * | 2020-09-29 | 2022-05-17 | 苏州微创畅行机器人有限公司 | 可读存储介质、骨建模配准系统及骨科手术系统 |
CN113768628B (zh) * | 2021-09-27 | 2023-12-12 | 武汉联影智融医疗科技有限公司 | 磨骨量安全范围确定方法和电子装置 |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2009094646A3 (en) * | 2008-01-24 | 2009-10-29 | The University Of North Carolina At Chapel Hill | Methods, systems, and computer readable media for image guided ablation |
CN101977557A (zh) * | 2008-03-25 | 2011-02-16 | 奥索瑟夫特公司 | 用于规划/引导对骨骼的改变的方法和系统 |
CN102999902A (zh) * | 2012-11-13 | 2013-03-27 | 上海交通大学医学院附属瑞金医院 | 基于ct配准结果的光学导航定位系统及其导航方法 |
CN103356284A (zh) * | 2012-04-01 | 2013-10-23 | 中国科学院深圳先进技术研究院 | 手术导航方法和系统 |
CN103491893A (zh) * | 2011-02-08 | 2014-01-01 | 通用医疗公司 | 患者定位系统及方法 |
CN105046644A (zh) * | 2015-07-06 | 2015-11-11 | 嘉恒医疗科技(上海)有限公司 | 基于线性相关性的超声与ct图像配准方法和系统 |
US9436993B1 (en) * | 2015-04-17 | 2016-09-06 | Clear Guide Medical, Inc | System and method for fused image based navigation with late marker placement |
CN106344152A (zh) * | 2015-07-13 | 2017-01-25 | 中国科学院深圳先进技术研究院 | 腹部外科手术导航配准方法及系统 |
CN108175503A (zh) * | 2013-03-13 | 2018-06-19 | 史赛克公司 | 用于在外科程序的准备中布置手术室中的对象的系统 |
CN109152615A (zh) * | 2016-05-23 | 2019-01-04 | 马科外科公司 | 在机器人手术过程期间识别和跟踪物理对象的系统和方法 |
CN109310477A (zh) * | 2016-06-16 | 2019-02-05 | 医疗技术股份有限公司 | 用于股骨髋臼撞击表面修复的自动化系统 |
CN109741374A (zh) * | 2019-01-30 | 2019-05-10 | 重庆大学 | 点云配准旋转变换方法、点云配准方法、设备及可读存储介质 |
CN110960321A (zh) * | 2019-12-18 | 2020-04-07 | 苏州微创畅行机器人有限公司 | 注册靶标、注册方法、装置、电子设备和存储介质 |
CN111227932A (zh) * | 2020-02-19 | 2020-06-05 | 苏州微创畅行机器人有限公司 | 骨注册方法、骨注册系统、骨注册控制装置及可跟踪元件 |
-
2020
- 2020-09-29 CN CN202011052627.3A patent/CN112155733B/zh active Active
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2009094646A3 (en) * | 2008-01-24 | 2009-10-29 | The University Of North Carolina At Chapel Hill | Methods, systems, and computer readable media for image guided ablation |
CN101977557A (zh) * | 2008-03-25 | 2011-02-16 | 奥索瑟夫特公司 | 用于规划/引导对骨骼的改变的方法和系统 |
CN103491893A (zh) * | 2011-02-08 | 2014-01-01 | 通用医疗公司 | 患者定位系统及方法 |
CN103356284A (zh) * | 2012-04-01 | 2013-10-23 | 中国科学院深圳先进技术研究院 | 手术导航方法和系统 |
CN102999902A (zh) * | 2012-11-13 | 2013-03-27 | 上海交通大学医学院附属瑞金医院 | 基于ct配准结果的光学导航定位系统及其导航方法 |
CN108175503A (zh) * | 2013-03-13 | 2018-06-19 | 史赛克公司 | 用于在外科程序的准备中布置手术室中的对象的系统 |
US9436993B1 (en) * | 2015-04-17 | 2016-09-06 | Clear Guide Medical, Inc | System and method for fused image based navigation with late marker placement |
CN105046644A (zh) * | 2015-07-06 | 2015-11-11 | 嘉恒医疗科技(上海)有限公司 | 基于线性相关性的超声与ct图像配准方法和系统 |
CN106344152A (zh) * | 2015-07-13 | 2017-01-25 | 中国科学院深圳先进技术研究院 | 腹部外科手术导航配准方法及系统 |
CN109152615A (zh) * | 2016-05-23 | 2019-01-04 | 马科外科公司 | 在机器人手术过程期间识别和跟踪物理对象的系统和方法 |
CN109310477A (zh) * | 2016-06-16 | 2019-02-05 | 医疗技术股份有限公司 | 用于股骨髋臼撞击表面修复的自动化系统 |
CN109741374A (zh) * | 2019-01-30 | 2019-05-10 | 重庆大学 | 点云配准旋转变换方法、点云配准方法、设备及可读存储介质 |
CN110960321A (zh) * | 2019-12-18 | 2020-04-07 | 苏州微创畅行机器人有限公司 | 注册靶标、注册方法、装置、电子设备和存储介质 |
CN111227932A (zh) * | 2020-02-19 | 2020-06-05 | 苏州微创畅行机器人有限公司 | 骨注册方法、骨注册系统、骨注册控制装置及可跟踪元件 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP4302719A1 (en) * | 2022-07-08 | 2024-01-10 | Orthosoft ULC | System for computer-assisted shoulder surgery |
Also Published As
Publication number | Publication date |
---|---|
CN112155733A (zh) | 2021-01-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112155734B (zh) | 可读存储介质、骨建模配准系统及骨科手术系统 | |
CN112155733B (zh) | 可读存储介质、骨建模配准系统及骨科手术系统 | |
CN110711029B (zh) | 截骨导向工具的位置校正方法及骨科手术系统 | |
CN110811832B (zh) | 截骨校验方法、校验设备、可读存储介质及骨科手术系统 | |
US6430434B1 (en) | Method for determining the location and orientation of a bone for computer-assisted orthopedic procedures using intraoperatively attached markers | |
US20170132389A1 (en) | Patient specific instrumentation with mems in surgery | |
US20050203384A1 (en) | Computer assisted system and method for minimal invasive hip, uni knee and total knee replacement | |
JP2004202242A (ja) | 外科手術用器具およびその位置決め方法 | |
US20230405815A1 (en) | Surgical robot, control method, system, and readable storage medium | |
CN110811833B (zh) | 截骨校验方法、校验工具、可读存储介质及骨科手术系统 | |
US20170245830A1 (en) | System and process for ultrasonic determination of long bone orientation | |
CN114650785A (zh) | 装置的机器人定位 | |
JP2021146218A (ja) | ニューロナビゲーション位置合わせおよびロボット軌道誘導のためのシステム、ならびに関連する方法およびデバイス | |
Langlotz et al. | Technical approaches to computer-assisted orthopedic surgery | |
US20240081836A1 (en) | Lockable surgical system | |
Phillips et al. | Image guided orthopaedic surgery design and analysis | |
US5792215A (en) | Laser integrated targeting and entry system and method | |
US8067726B2 (en) | Universal instrument calibration system and method of use | |
Duan et al. | Modelling and experiment based on a navigation system for a cranio-maxillofacial surgical robot | |
EP4062854A1 (en) | Osteotomy verification method and verification apparatus, readable storage medium, and orthopedic surgery system | |
US20220398744A1 (en) | Tracking system for robotized computer-assisted surgery | |
CA3226866A1 (en) | Instrument bourne position sensing system for precision 3d guidance and methods of surgery | |
WO2024081388A1 (en) | System and method for implantable sensor registration | |
AU2021288205A1 (en) | Navigational and/or robotic tracking methods and systems | |
Zheng et al. | Technical principles of computer assisted orthopaedic surgery |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CB03 | Change of inventor or designer information |
Inventor after: Shao Hui Inventor after: Li Huiwu Inventor after: Sun Feng Inventor after: Li Tao Inventor after: He Chao Inventor before: Shao Hui Inventor before: Sun Feng Inventor before: Li Tao Inventor before: He Chao |
|
CB03 | Change of inventor or designer information |