CN114727847A - 用于计算坐标系变换的系统和方法 - Google Patents

用于计算坐标系变换的系统和方法 Download PDF

Info

Publication number
CN114727847A
CN114727847A CN202080084340.0A CN202080084340A CN114727847A CN 114727847 A CN114727847 A CN 114727847A CN 202080084340 A CN202080084340 A CN 202080084340A CN 114727847 A CN114727847 A CN 114727847A
Authority
CN
China
Prior art keywords
coordinate system
internal structure
coordinate
sur
ima
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080084340.0A
Other languages
English (en)
Inventor
S·韦伯
A·拉贝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Universitaet Bern
Original Assignee
Universitaet Bern
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Universitaet Bern filed Critical Universitaet Bern
Publication of CN114727847A publication Critical patent/CN114727847A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39Markers, e.g. radio-opaque or breast lesions markers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00831Material properties
    • A61B2017/00902Material properties transparent or translucent
    • A61B2017/00907Material properties transparent or translucent for light
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2051Electromagnetic tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2055Optical tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/363Use of fiducial points
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3966Radiopaque markers visible in an X-ray image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3983Reference marker arrangements for use with image guided surgery

Abstract

本发明涉及一种用于确定物理对象(1)内部的内部结构(I1)的坐标系(INN1)和3D图像或其模型的坐标系(IMA)之间的坐标变换的医疗系统(100)。

Description

用于计算坐标系变换的系统和方法
本发明涉及医疗系统和相应的方法,并且特别地涉及医疗断层成像和外科手术技术。它特别适用于图像引导外科手术(IGS)和机器人外科手术,但也适用于其他应用。
医疗断层成像对于以非侵入性方式获得患者的内部解剖结构和/或病理学的准确模型是有价值的。在手术之前,可以通过CT或锥形束扫描仪、磁共振成像(MRI)扫描仪、伽马相机和其他医疗诊断成像装备来生成感兴趣的解剖结构的断层图像数据集。典型地,这些成像模态提供具有亚毫米分辨率的结构细节。解剖结构的重建图像可以贯穿外科手术或介入过程使用,以帮助通过和/或围绕各种解剖结构导航。
通常,IGS系统包括计算机和系统,用于通过光学跟踪、磁跟踪、飞行时间跟踪或其他方式对器械和患者的解剖结构的各方面进行空间和时间跟踪。在对断层医疗图像数据集和可用姿态数据(器械的姿态和目标结构的姿态之间的相对姿态)进行联合配准(co-registration)时,可以相应地计算和显示医疗图像数据集中虚拟器械的相应姿态。此外,可以使用可用的跟踪信息经由开环或闭环控制机制来引导外科手术机器人。
利用患者的断层摄影图像数据,已经开发了各种立体定向IGS手术,包括但不限于针活检、分流放置、肿瘤消融、开颅和耳蜗植入。
另一种IGS手术是脊柱融合外科手术,包括螺钉放置和固定、骨折减压和脊柱肿瘤去除。具体地,在脊柱螺钉固定过程期间,在脊椎中形成螺钉孔,螺钉被旋入其中。外科医生依靠IGS或荧光透视引导来优化孔和螺钉的位置。在没有帮助的情况下,或者使用当前的引导模态进行,这种方法可能导致螺钉的放置不是最佳,这进而可能损伤神经、血管或脊髓。
然而,IGS的使用与受试者的真实世界解剖结构与其在图像空间中的相应模型的对准中的不准确性相关联。在实际的外科手术过程中,结构的位置和取向可能由于物理操纵和通过器械施加的力而改变,从而导致相对于术前获取的图像的几何误差。该误差将最终导致器械或工具的不准确引导,这进而可能导致外科手术并发症或次优的外科手术结果。当距离是小的时(例如小于10 cm)以及相同的实心和刚性节段(segment)(例如一块椎骨、颅骨、一块没有关节的骨骼等)被用于配准和作为IGS的目标时,几何误差减小。当距离增加(例如大于20 cm)并且涉及多于一个节段,并且节段彼此(两个或多个椎骨、具有关节的骨骼等)柔性附着并且用于配准的节段不同于用作IGS的目标的节段时,几何误差增加。
在许多当前的应用中,仅一个节段(诸如骶骨)被可用的跟踪系统跟踪,而另一节段以IGS为目标(其中执行外科手术过程的节段),导致针对离被跟踪节段更远的节段的不断增加的空间误差。在感兴趣的各种解剖特征的相对空间关系与获得图像时相比已经移位或以其他方式改变的情况下,螺钉错位将被预期。
因此,几何变换将受试者的特定目标椎骨(在空间和时间上被跟踪)与相应的图像(在图像空间中)配准。受到由操纵、呼吸等以及通过由先前操纵产生的静态位移引起的动态变形的影响,单个变换不能准确地将任何其他椎骨映射到图像空间中的相应图像。随后,给定的变换只能准确地映射相对于目标椎骨的外科手术工具姿态。使用给定的变换无法导航任何其他椎骨。结果,器械引导将导致外科手术工具和附近解剖结构之间的相对空间关系的不准确表示。
迄今为止,没有系统可用于允许跟踪另一个结构(受试者身体)内的多于一个非刚性解剖结构(即脊柱的各个节段)。此外,没有方法可用于通过将坐标系从身体外部的特征传递到身体内部的特征(本文中也称为内部结构)来导出几何变换。同样,没有系统可用于将应用于几个节段系统(例如,多于两个脊柱的椎骨)的坐标系分割成几个子坐标系,并且将这些子坐标系一个接一个地移交(hand-over)给特定的一个节段单元(即,只有一个椎骨),而不损失准确性并且没有附加的成像。
在现有技术中,描述了将内部结构配准到模型数据集的各种方法,包括用各种成像模态配准三维模型的方法,诸如
a.超声(WO2012177470、DE102011106812),
b.荧光透视(US2011270072、EP3326564);
c.热成像(US2012281898);
d.光学表面扫描(WO2016015760、WO2015074158、WO2014094811);
e.基于视频的成像(EP1657678、单焦点DE102012208389);
或者经由使用非成像方法,诸如
f.基于通用图像信息(即图集)的方法(EP2912630);
g.附加参考结构的成像(US6674916);
h.由人和通过使用通用图形用户接口(US2008300477)和/或基于增强现实的系统(WO2018171880)进行视觉对准;在WO2011063840中,附着到对象的基准在对象的模型中被标识,并且基准在模型内(经由图像分析)和在对象内(经由跟踪)的空间配置被用于确定基准的空间移位。
可以使用关于几何(大小、形状)和物理(即密度)属性的先验知识在图像体积中自动确定基准(人工界标)(EP0732899和US5769789)。此外,已经公开了用于通过将空间体的空间信息与来自数据库中相应点的可用数据进行比较来标识空间体上的点的系统和方法(EP0927403)。因此,立体定向外科手术可以通过基于放置在患者的解剖结构上的多个固定参考点(例如,基准点)的相对位置的导航来执行。(WO2018/191057)。
此外,通过经过使用经由CT扫描仪对物体进行重复扫描来跟踪刚性地附着在身体的基准,可以在空间和时间上跟踪移动物体(EP2070478)。此外,已经公开了用于使用可跟踪标记来跟踪动态参考系(frame)的系统,标记中的一些在3D空间中是可移动的。这已经被应用于脊柱外科手术中的基准标记。(US2019/0209080)。此外,算法解决方案可以用于通过三维图像数据集中的图像分析来跟踪结构(WO2016206743)。
已经公开了用于在机器人坐标系和图像数据集之间配准沿着目标对象(骨骼)间隔开的两个位置坐标和穿过位置坐标中的至少一个的方向向量的发明。(WO9836371)。类似地,已经公开了相对于患者身上的跟踪阵列来优化机器人外科手术系统的末端执行器的跟踪的发明。(US2017/0348061)。
基于现有技术未满足的上述需求,本发明的目的是提供一种医疗系统和方法,其两者允许精确和准确地跟踪多种受试者的内部结构(例如,单独的节段)并相对于图像坐标系跟踪/配准该姿态信息。
该问题通过具有权利要求1的特征的医疗系统以及通过具有权利要求14的特征的方法来解决。
本发明的这些方面的优选实施例在相应的从属权利要求中陈述,并在下文中描述。
根据权利要求1,公开了一种用于确定物理对象内部的内部结构的坐标系和其3D图像或模型的坐标系之间的坐标变换的医疗系统,其中该医疗系统包括:
- 多个表面基准标记,其被配置成附着到物理对象的外表面,特别是在相对于彼此的任意空间配置中(例如,人体或人体的一部分),其中任何几何布置都是可能的
- 至少一个适配器,其被配置成附着到物理对象的内部结构(例如,脊椎),其中该系统可以包括至少一个结构基准标记,该结构基准标记被配置成可释放地连接到至少一个适配器(例如,用于在外科手术期间跟踪内部结构),
- 医疗成像单元,例如计算断层摄影术(CT)扫描仪或磁共振成像(MRI)设备,其被配置成生成所述物理对象和附着到所述外表面的表面基准标记的3D图像,
- 处理单元,其被配置用于测量(例如,手动或自动地)每个表面基准标记在3D图像内的并且相对于3D图像的图像坐标系(IMA)的姿态,并根据表面基准的位置以及从图像坐标系到表面基准标记的坐标系(SUR)的第一坐标变换(SURTIMA)来计算表面基准的坐标系(SUR);
- 测量单元(例如立体定向照相机),用于当相应的表面基准标记被附着到所述外表面时,测量表面基准标记相对于测量单元的坐标系(WOR)的姿态,
- 其中处理单元被进一步配置成经由表面基准标记的坐标系(SUR)计算从测量单元的坐标系(WOR)到图像坐标系(IMA)的第二坐标变换(IMATWOR),从而允许将所述外表面上的点与3D图像内的点进行参考,
- 其中该医疗系统被配置成当至少一个适配器被附着到物理对象的内部结构时,测量至少一个适配器相对于表面基准标记的姿态,并且其中处理单元被配置成计算从表面基准的坐标系(SUR)到内部结构的坐标系(INN1)的第三坐标变换(INN1TSUR),并且其中处理单元被配置成将第二坐标变换IMATWOR与第一坐标变换(SURTIMA)以及与第三坐标变换(INN1TSUR)相结合,以创建从测量单元的坐标系(WOR)到内部结构的坐标系(INN1)中的坐标变换(INN1TWOR),从而允许测量所述测量单元的坐标系中的至少一个适配器的姿态。
特别地,组合第二、第一和第三坐标变换对应于矩阵乘法
INN1TSUR SURTIMA IMATWOR=INN1TWOR
特别地,第一坐标系x和第二坐标系X’之间的相应坐标变换可以以公知的方式被表示为具有三个垂直列和三个水平行的3×3矩阵T,其表达了第一坐标系x中的向量A的分量如何与第二坐标系X’中的相同向量A’的分量相关:A’=X’TxA
X’Tx和A之间的矩阵向量乘法产生向量A’的分量a’i,所述分量由矩阵X’Tx的相应行的条目与向量A的分量ai相乘并求和来确定:
Figure 100002_DEST_PATH_IMAGE002
其中tij是矩阵X’Tx的条目,其中i表示第i行,并且j表示第j列。逆矩阵(X’Tx-1等于X’Tx的转置,其被表示为(X’TxT。当对矩阵进行转置时,(X’TxT的第i行第j列元素是X’Tx的第j行第i列元素。
特别地,如上所述,处理单元被配置成经由表面基准标记的坐标系(SUR)计算从测量单元的坐标系(WOR)到图像坐标系(IMA)的第二坐标系变换IMATWOR。例如,这可以通过计算(SURTIMA-1SURTWOR之间的矩阵乘法来实现:
Figure DEST_PATH_IMAGE004
即通过从测量单元的坐标系(WOR)变换到表面基准标记的坐标系(SUR),并且然后通过从表面基准标记的坐标系(SUR)变换到图像坐标系(IMA)(后面的变换对应于(SURTIMA-1)。
由于相应的最终坐标变换的特定生成,可以相对于先前获取的图像数据集在空间和时间上跟踪受试者的特定内部结构(诸如脊椎)。结果,由上述平移和误差的源(诸如动态操纵、呼吸运动和器械活动)引起的不准确性可以被大大地降低。
在本发明的框架中,概念“位置”描述了包括三个自由度的空间中的点或向量,并且可以使用例如沿着线性独立空间方向的三个坐标(例如垂直右手坐标系的坐标轴x、y、z)来定义。
此外,概念“姿态”描述了扩展物体的空间位置及其在六个自由度内的空间中的取向。可以使用例如沿着线性独立空间方向的三个坐标(例如垂直右手坐标系的坐标轴x、y、z)以及围绕这些方向/坐标轴的旋转角度来定义对象(诸如基准标记)的姿态。这些角度通常被表示为滚动(围绕x轴旋转)、俯仰(围绕y轴旋转)和偏航(围绕z轴旋转)。
此外,根据医疗系统的实施例,后者被配置成使用例如表面基准标记来跟踪所述外表面,其中特别地,医疗系统被配置成例如通过使用以下技术之一来跟踪每个单独的表面基准标记的位置或姿态:光学测量原理、视频-光学测量原理、电磁测量原理、飞行时间测量原理。
替代地或附加地,医疗系统可以被配置成通过使用以下技术之一来跟踪所述外表面:激光扫描外表面,用结构光扫描外表面。
根据医疗系统的实施例,其被配置成使用表面基准标记来跟踪所述外表面,其中特别地,医疗系统被配置成跟踪每个单独的表面基准标记的位置(3 DOF)或姿态(6 DOF,即位置和取向)。为此,可以使用以下各项之一:光学测量原理、视频-光学测量原理、电磁测量原理、飞行时间测量原理或本领域已知的能够使用表面基准标记跟踪外表面的任何其他测量原理。替代地,外表面的跟踪也可以通过使用以下各项之一来实现:激光扫描外表面,或用结构光扫描外表面。
此外,依据根据本发明的医疗系统的实施例,医疗系统包括一个坐标系内的不同的测量模态,以允许使用不同的测量模态同时跟踪表面基准标记和结构基准标记。此外,依据根据本发明的医疗系统的实施例,该医疗系统包括优选姿态可跟踪的外科手术机器人设备,其被配置成生成对物理对象/患者的身体的内部结构的访问,并且递送并且特别是将至少一个适配器附着到内部结构。特别地,在所有实施例中,内部结构可以例如是患者的脊椎。
外科手术机器人设备可以用两个独立的跟踪的源进行姿态跟踪——运动跟踪并且其中标记被附着到机器人上的点。
此外,依据根据本发明的医疗系统的实施例,该医疗系统被配置成独立地跟踪同一物理对象(例如患者的身体)内的若干内部结构(例如椎骨),并建立和跟踪那些内部结构和物理对象/身体的外表面之间的若干几何变换。
此外,依据根据本发明的医疗系统的实施例,该医疗系统被配置成相对于彼此相对地跟踪若干内部结构,并且同时相对于外表面绝对地跟踪那些内部结构。
此外,依据根据本发明的医疗系统的实施例,所述至少一个适配器包括连接部分和锚定部分,该连接部分被配置成可释放地连接到系统的至少一个结构基准标记,该锚定部分被配置成被附着到内部结构,使得在将释放的结构基准标记重新连接到至少一个适配器时,再现适配器或结构基准标记相对于内部结构的初始配准姿态。特别地,连接部分例如一体地被连接到锚定部分。
此外,依据根据本发明的医疗系统的实施例,锚定部分包括在锚定部分的外侧上的螺纹,用于通过将锚定部分拧入到内部结构的钻孔中而将至少一个适配器锚定到内部结构。特别地,锚定部分可以是锥形的,以形成锚定部分和/或螺纹的尖端。
此外,依据根据本发明的医疗系统的实施例,适配器的连接部分被配置成当锚定部分被锚定到内部结构时布置在内部结构的外表面上,其中连接部分包括集成到连接部分中的多个图像定位特征,其中特别地,相应的图像定位特征是不透射线的标记。
特别地,在实施例中,相应的图像定位特征由圆柱形杆形成,其中杆可以相对于彼此倾斜地布置。
在医疗系统包括若干结构基准标记的情况下,针对每个结构基准标记提供适配器,使得所有结构基准标记可以经由专用适配器附着到内部结构(例如,椎骨)。
根据医疗系统的又一实施例,图像定位特征可以被用于经由术中成像方法更新或替换现有的配准变换INN1TWOR(例如,当现有的变换已经丢失时),其中,通过算法地定位在得到的图像中的至少一个适配器的内部结构和定位特征,并通过计算随后的增量配准变换INN’TWOR,来细化/或替换先前存在的坐标变换INN1TWOR
特别地,为此,医疗系统可以被配置成计算从内部结构的坐标系INN’到术中获得的图像的图像坐标系IMA的坐标变换IMATINN’,并且通过将该变换IMATINN’与坐标变换IMATWOR相结合来实现从测量单元的坐标系WOR到内部结构的坐标系INN’的所述坐标变换:
Figure DEST_PATH_IMAGE006
特别地,依据根据本发明的医疗系统的实施例,医疗系统,特别是处理单元,被配置成通过使用第一表面基准标记(F1)的位置作为表面基准标记(Fi)的坐标系(SUR)的中心来计算表面基准标记(Fi)的坐标系(SUR),其中,所述医疗系统被进一步配置成将从第一表面基准标记(F1)扩展到第二表面基准标记(F2)的归一化向量用作表面基准标记(Fi)的坐标系(SUR)的第一坐标轴(x),并且将从第一表面基准标记(F1)扩展到第三表面基准标记(F3)的归一化向量用作第二坐标轴(y),并且将第一坐标轴和第二坐标轴之间的叉积用作第三主轴(z)。可以使用更多的表面基准标记来细化准确性。构建表面基准标记的坐标系(SUR)的其他方式也是可设想的。
本发明的又一(第二)方面涉及一种用于确定物理对象内部的内部结构的坐标系和内部结构的3D图像的图像坐标系之间的坐标变换的方法,其中生成该坐标变换包括以下步骤:
(a)计算从3D图像的图像坐标系(IMA)到附着到物理对象的外侧的表面基准标记的坐标系(SUR)的第一坐标变换SURTIMA(即配准);
(b)从附着到物理对象的外表面的表面基准标记的坐标系(SUR)和物理对象内部的内部结构的坐标系(INN1)计算坐标变换INN1TSUR
(c)通过在步骤(b)中计算的坐标变换来自动扩展在步骤(a)中计算的坐标变换,以创建从3D图像的图像坐标系(IMA)到内部结构的坐标系(INN1)的坐标变换。
特别是在物理对象是活的人类或动物患者的身体的情况下,根据本发明的方法不包括任何外科手术步骤。将例如至少一个适配器布置在内部结构上(或者将若干个这样的标记布置在若干个内部结构上)不形成要求保护的方法的部分。
依据根据本发明的方法的实施例,通过单独跟踪表面基准标记的姿态或位置来跟踪外表面,特别是通过以下各项中的一项来跟踪外表面:光学跟踪、视频-光学跟踪、电磁跟踪、飞行时间跟踪或本领域已知的任何其他合适的跟踪方法。
替代地,代替这样的跟踪方法,根据该方法的实施例,也可以采用通过激光扫描或用结构光扫描直接跟踪外表面。
此外,依据根据本发明的方法的实施例,使用不同的测量模态同时跟踪表面基准标记和连接到至少一个适配器的结构基准标记的至少一个适配器(也参见上文)。
特别地,依据根据本发明的方法的实施例,彼此独立地跟踪同一物理对象(例如患者的身体)内的若干个内部结构,并且其中建立和跟踪每个内部结构和外表面之间的坐标变换。
此外,本发明的第三方面涉及一种包括指令的计算机程序,当由计算机执行该计算机程序时,该指令使得计算机执行根据本发明的第二方面的上述方法的步骤。此外,本发明的第四方面涉及一种其上存储有根据本发明的第三方面的计算机程序的计算机可读数据载体。
此外,根据本发明的第五方面,公开了一种适配器,其中该适配器包括连接部分和锚定部分,该连接部分被配置成可释放地连接到基准标记,该锚定部分被配置成附着到物理对象(例如患者的身体)的内部结构,使得在将释放的基准标记重新连接到适配器时,再现适配器和/或结构基准标记相对于内部结构的初始配准姿态。特别地,连接部分被连接到锚定部分,其中连接部分可以被一体地连接到锚定部分。内部结构可以是骨骼,例如椎骨。
此外,根据适配器的实施例,锚定部分包括在锚定部分的外侧上的螺纹,用于通过将锚定部分拧入到内部结构的钻孔中而将所述至少一个适配器锚定到内部结构。特别地,锚定部分可以是锥形的,以形成锚定部分和/或螺纹的尖端。
此外,根据适配器的实施例,适配器的连接部分被配置成当锚定部分被锚定到内部结构时从内部结构的外部突出,其中连接部分包括集成到连接部分中的多个图像定位特征,其中特别地,相应的图像定位特征是不透射线的标记。
特别地,在适配器的实施例中,相应的图像定位特征由圆柱形杆形成,其中杆可以相对于彼此倾斜地布置。
根据本发明的第六方面,公开了一种方法,其中该方法优选地使用根据本发明的医疗系统,并且其中该方法包括以下步骤:
-使用医疗成像单元生成物理对象的3D图像,其中表面基准标记被布置在物理对象的外表面上,
-测量每个表面基准标记在3D图像内并且相对于3D图像的图像坐标系(IMA)的姿态,并且根据表面基准标记的位置自动计算表面基准标记的坐标系(SUR),并且自动计算从图像坐标系(IMA)到表面基准标记的坐标系(SUR)的第一坐标变换(SURTIMA);
-使用测量单元(例如立体定向相机)来获取表面基准标记相对于测量单元的坐标系(WOR)的姿态,
-经由表面基准标记的坐标系(SUR)自动计算从测量单元的坐标系(WOR)到图像坐标系(IMA)的第二坐标变换(IMATWOR),
-测量附着到物理对象的内部结构的至少一个适配器的姿态,并且自动计算从表面基准标记的坐标系(SUR)到内部结构的坐标系(INN1)的第三坐标变换(INN1TSUR),并且自动地将第二坐标变换(IMATWOR)与第一坐标变换(SURTIMA)和与第三坐标变换(INN1TSUR)相结合,以创建从测量单元的坐标系(WOR)到内部结构的坐标系(INN1)的坐标变换(INN1TWOR),从而允许测量所述测量单元的坐标系(WOR)中的至少一个适配器的姿态。
根据本发明的第七方面,公开了一种计算机程序,其中该计算机程序包括使根据本发明的医疗系统执行根据本发明的第六方面的方法的指令。
本发明的又一方面涉及一种计算机可读数据载体,其上存储有根据本发明的第七方面的计算机程序。
依据根据本发明的方法的另外的实施例(第二方面),另外至少一个适配器通过姿态可跟踪的外科手术机器人设备附着到内部结构,并且其中,可以通过计算坐标变换(SURTIMAINN1TSURINN1TIMA)的处理单元相对于表面基准标记跟踪该至少一个适配器。
本发明的另外的方面涉及一种医疗系统,包括:
- 多个表面基准标记,其被配置成以相对于彼此的任意空间配置附着到物理对象的外表面,
- 至少一个适配器,其被配置成附着到物理对象的内部结构,
- 医疗成像单元,其被配置成在预定义的图像坐标系(IMA)内生成所述物理对象和附着到所述外表面的表面基准标记的3D图像,
- 处理单元,其被配置用于测量每个表面基准标记在3D图像内的并且相对于图像坐标系(IMA)的姿态,并根据表面基准标记的位置来计算表面基准标记的坐标系(SUR),以及图像坐标系(IMA)和表面基准标记的坐标系(SUR)之间的第一坐标变换(SURTIMA);
- 测量单元,其被配置成当相应的表面基准标记被附着到所述外表面时,获取表面基准标记相对于测量单元的坐标系(WOR)的姿态,
- 其中,所述处理单元被进一步配置成经由表面基准标记的坐标系(SUR)计算测量单元的坐标系(WOR)和图像坐标系(IMA)之间的第二坐标系变换(IMATWOR),从而允许根据
Figure DEST_PATH_IMAGE008
将所述外表面上的点与3D图像内的点进行参考,
- 其中,所述医疗系统通过其至少一个适配器的姿态可跟踪放置被配置成当至少一个适配器被附着到所述物理对象的内部结构时测量至少一个适配器相对于表面基准标记的姿态,并且其中处理单元被配置成计算表面基准标记的坐标系(SUR)和内部结构的坐标系(INN1)之间的第三坐标变换(INN1TSUR),并且其中处理单元被配置成将第二坐标变换(IMATWOR)与第一坐标变换(SURTIMA)以及与第三坐标变换(INN1TSUR)相结合,以根据INN1TSUR* SURTIMA* IMATWOR=INN1TWOR创建所述测量单元的坐标系(WOR)和内部结构的坐标系(INN1)之间的坐标变换(INN1TWOR),从而允许医疗系统测量所述测量单元的坐标系(WOR)中的至少一个适配器的姿态。
根据医疗系统的实施例,所述医疗系统被配置成在测量单元的坐标系(WOR)和物理对象的另外的内部结构的坐标系(INN2)之间建立至少一个另外的坐标变换(INN2TWOR),其中所述医疗系统被配置成执行以下各项中的至少一项:
- 当另外的适配器被附着到所述物理对象的另外的内部结构时,测量另外的适配器相对于表面基准标记的姿态,并且其中处理单元被配置成计算表面基准标记的坐标系(SUR)和另外的内部结构的坐标系(INN2)之间的另外的第三坐标变换(INN2TSUR),并且其中,处理单元被配置成将第二坐标变换(IMATWOR)与第一坐标变换(SURTIMA)以及与另外的第三坐标变换(INN2TSUR)相结合,以创建测量单元的坐标系(WOR)和另外的内部结构的坐标系(INN2)之间的另外的坐标变换(INN2TWOR),从而允许测量所述测量单元的坐标系(WOR)中的另外的适配器的姿态,或者通过
- 通过将测量单元的坐标(WOR)和内部结构的坐标系(INN1)之间的坐标变换(INN1TWOR)与内部结构的坐标系(INN1)和另外的内部结构的坐标系(INN2)之间的坐标变换(INN2TINN1)相结合。
根据医疗系统的另外的实施例,所述医疗系统被配置成使用以下各项中的一项来跟踪所述外表面(2):
a.表面基准标记,其中特别地,所述医疗系统被配置成跟踪每个单独的表面基准标记的位置或姿态,特别地使用以下各项中的一项来跟踪:光学测量原理、视频-光学测量原理、电磁测量原理、飞行时间测量原理;
b.通过使用以下各项中的一项来跟踪外表面:激光扫描外表面,用结构光扫描外表面。
根据医疗系统的另外的实施例,所述医疗系统包括一个坐标系内的不同测量模态,以允许使用不同测量模态同时跟踪表面基准标记和至少一个适配器。
根据医疗系统的另外的实施例,所述医疗系统包括姿态可跟踪外科手术机器人设备,其被配置成生成对物理对象的内部结构的访问,并将所述至少一个适配器递送到内部结构并将所述至少一个适配器定位在内部结构上。
根据医疗系统的另外的实施例,所述医疗系统被配置成独立地跟踪物理对象内的若干内部结构,并且建立和跟踪那些内部结构和外表面之间的若干坐标变换,其中至少一个适配器已经由姿态可跟踪外科手术机器人设备递送到若干内部结构中的每个。
根据医疗系统的另外的实施例,所述医疗系统被配置成相对于彼此并且同时绝对相对于所述外表面跟踪若干内部结构。
根据医疗系统的另外的实施例,所述至少一个适配器包括连接部分和锚定部分,所述连接部分被配置成可释放地连接到结构基准标记,所述锚定部分被配置成附着到内部结构,使得在将结构基准标记重新连接到适配器时,再现结构基准标记相对于内部结构的初始配准姿态。
根据医疗系统的另外的实施例,所述锚定部分包括在锚定部分的外侧上的螺纹,用于通过将锚定部分拧入到内部结构的钻孔中而将所述至少一个适配器锚定到内部结构。
根据医疗系统的另外的实施例,所述连接部分被配置成当所述锚定部分被锚定到所述内部结构时从所述内部结构的外部突出,其中,所述连接部分包括被集成到所述连接部分中的多个图像定位特征,其中,特别地,相应的图像定位特征是不透射线的标记。
根据医疗系统的另外的实施例,所述医疗系统被配置成术中获取内部结构的至少一个图像和适配器的图像定位特征,以及在至少一个术中获取的图像中定位内部结构和图像定位特征,并且计算所述测量单元的坐标系(WOR)和内部结构的坐标系(INN’)之间的坐标变换(INN’TWOR)。
根据医疗系统的另外的实施例,相应的图像定位特征由圆柱形杆形成,其中,特别地,杆相对于彼此倾斜地布置。
根据医疗系统的另外的实施例,所述医疗系统被配置成通过使用第一表面基准标记的位置作为所述表面基准标记的坐标系(SUR)的中心来计算所述表面基准标记的坐标系(SUR),其中,所述医疗系统被进一步配置成将从第一表面基准标记扩展到第二表面基准标记的归一化向量用作表面基准标记的坐标系(SUR)的第一坐标轴(x),并且将从第一表面基准标记扩展到第三表面基准标记的归一化向量用作第二坐标轴(y),并且将第一和第二坐标轴(x,y)之间的叉积用作第三坐标轴(z)。
本发明的又一方面涉及一种用于确定物理对象内部的内部结构的坐标系(INN1)和内部结构的3D图像的图像坐标系(IMA)之间的坐标变换的方法,其中所述方法包括以下步骤:
(a)计算附着到物理对象的外侧的表面基准标记的坐标系(SUR)和3D图像的图像坐标系(IMA)之间的第一坐标变换(SURTIMA);
(b)计算附着到物理对象的外侧的表面基准标记的坐标系(SUR)和物理对象内部的内部结构的坐标系(INN1)之间的第二坐标变换(INN1TSUR);
(c)通过在步骤(b)中计算的坐标变换(INN1TSUR)来自动扩展在步骤(a)中计算的坐标变换(SURTIMA),以创建3D图像的图像坐标系(IMA)和内部结构的坐标系(INN1)之间的坐标变换(INN1TIMA)。
根据方法的另外的实施例,所述外表面通过以下各项中的一项进行跟踪:
a.单独跟踪所述表面基准标记的姿态或位置,特别是通过以下各项中的一项来跟踪:光学跟踪、视频-光学跟踪、电磁跟踪、飞行时间跟踪;
b.通过激光扫描或用结构光扫描来跟踪外表面。
此外,根据方法的另外的实施例,另外至少一个适配器通过姿态可跟踪外科手术机器人设备被附着到所述内部结构,并且其中所述至少一个适配器能够通过计算所述坐标变换(SURTIMAINN1TSURINN1TIMA)的处理单元)相对于所述表面基准标记被跟踪。
在下面的实施例中,以及参考附图描述本发明的另外的特征和优点,其中
图1示出了根据本发明的医疗系统的示意图;
图2示出了当附着到患者的内部结构(例如,椎骨)时,用于保持根据图1的系统的结构基准标记的适配器的详细图示,
图3A示出了表面基准标记的实施例的图示;
图3B示出了表面基准标记的另外的实施例的图示;
图4示出了医疗系统的适配器的实施例,该适配器被配置成附着到内部结构(例如,椎骨)并允许结构基准标记与适配器的可释放但可再现的连接;
图5示出了可以被连接到图4中所示的适配器的结构基准标记的实施例;以及
图6示出了使用术中获得的图像对内部结构的坐标系和测量单元的坐标系之间的坐标变换的细化。
图1示出了根据本发明的医疗系统100的实施例,其允许确定物理对象1(即患者的身体1)内部的内部结构I1(诸如脊椎)和对象/身体1的3D图像之间的几何变换。为此,医疗系统100包括测量单元10、处理单元7、医疗成像单元6(例如CT扫描仪或MRI设备)并且优选地还包括外科手术机器人设备8。很好理解的是,光学跟踪系统可以被用于跟踪外科手术器械、外科手术机器人设备8和适配器设备的姿态。处理单元7可以包括任何合适的计算机。处理单元7可以是独立的单元,但是也可以是系统100的另一组件的组成部分。处理单元7优选地包括用于连接到医疗成像单元6(例如用于接收患者的3D图像)并且特别是连接到外科手术机器人设备8的接口,例如用于控制后者。此外,处理单元7可以包括用于连接到测量单元10的接口。
此外,医疗系统100包括多个表面基准标记Fi(其中i是标记表面基准标记的自然数),每个表面基准标记可以如下面在图3A中所示进行配置。每个表面基准标记Fi被设计成以相对于彼此的任意空间配置附着到物理对象1(例如患者的身体1的皮肤2)的外表面2。
此外,医疗系统100包括至少一个适配器A1,用于提供相关联的结构基准标记S1到适配器A1的可再现连接(在应跟踪若干个内部结构Ii的情况下,使用若干个这样的适配器Ai/结构基准标记Si,其中i再次是分别标记适配器、表面基准标记和内部结构的自然数),其中适配器A1被配置成附着到物理对象1的内部结构I1。下面将结合图4进一步详细描述优选适配器A1的实施例。
特别地,医疗成像单元6被配置成相对于图像坐标系IMA生成所述物理对象1和附着到对象1的所述外表面2的表面基准标记Fi的3D图像。
借助于处理单元7(例如在其上执行合适软件的计算机),在3D图像内并相对于图像坐标系IMA测量每个表面基准标记的姿态。这可以自动执行或者由用户/医生指导。此外,处理单元7被配置成根据表面基准标记的位置计算表面基准标记Fi的坐标系SUR,以及图像坐标系IMA和表面基准标记Fi的坐标系SUR之间的第一坐标变换SURTIMA
此外,测量单元10(例如立体定向相机)被配置成当相应的表面基准标记Fi被附着到对象1的所述外表面2时,获取表面基准标记Fi相对于测量单元10的坐标系WOR的姿态,如图1中所示。
关于该测量单元10,处理单元7被进一步配置成经由表面基准标记Fi的坐标系SUR计算测量单元10的坐标系WOR和图像坐标系IMA之间的第二坐标系变换IMATWOR,从而允许对象1的所述外表面2上的点与借助医疗成像单元6生成的3D图像或模型内的点之间的参考。
系统1现在被配置成测量附着到内部结构I1的至少一个适配器A1相对于表面基准标记Fi的姿态。特别地,外科手术机器人设备8可以在借助于系统100的机器人设备8将适配器A1附着到内部结构I1时测量适配器A1的姿态。本领域技术人员将理解,机器人设备8的姿态也可以通过跟踪相机结合定位在机器人设备8上(例如,在机器人设备8的关节上)的跟踪标记来测量,或者可以通过医疗成像单元6来推断,该医疗成像单元6提供关于附着到机器人设备8的外科手术器械的位置的数据。在这方面中,跟踪相机的坐标系可以测量机器人设备8的末端执行器在空间中的位置以及患者上的表面基准标记的位置两者,从而允许推断末端执行器相对于患者坐标系的位置。此外,处理单元7被配置成计算表面基准标记Fi的坐标系SUR和内部结构I1的坐标系INN1之间的第三坐标变换INN1TSUR
处理单元7然后将第二坐标变换IMATWOR与第一坐标变换SURTIMA和与第三坐标变换INN1TSUR组合,例如通过将相关联的矩阵相乘:
INN1TSUR SURTIMA IMATWOR=INN1TWOR
以创建由矩阵INN1TWOR表示的最终坐标变换,从而允许测量坐标系WOR中的适配器A1的(或连接到适配器A1的结构基准标记S1的)姿态。
为了能够以高效且可再现的方式将结构基准标记S1附着到相应的内部结构Ii,医疗系统100优选地包括至少一个适配器A1,如图4中所示。系统100可以包括若干个适配器Ai和相关联的结构基准标记Si)。
至少一个适配器A1包括连接部分5b,其被配置成可释放地连接到至少一个结构基准标记S1(参考例如图5)。为此,适配器A1可以包括连接器53,其例如由布置在适配器5的连接部分5b的正面5a中的开口53形成。基准标记S1可以被配置成与连接器/开口53接合(engage),以在标记S1和适配器A1之间产生可释放的机械连接(结构基准标记S1在图2中未指示,但在图5中示出)。此外,适配器A1包括锚定部分5c,该锚定部分5c被配置成附着到内部结构I1。在系统100包括若干个适配器Ai和结构基准标记Si的情况下,这些适配器和结构基准标记可以分别被设计为适配器A1和标记S1
由于至少一个适配器A1的特定设计,在释放的结构基准标记20重新连接到适配器A1时,结构基准标记S1(当连接到适配器A1时)相对于内部结构I1的初始配准姿态被再现。
为了将锚定部分5c锚定在内部结构(例如,骨骼,特别是椎骨)I1中,适配器A1包括形成在锚定部分5c的外侧上的螺纹51。因此,锚定部分5c可以被拧入到内部结构I1中提供的钻孔中(例如,通过姿态可跟踪外科手术机器人设备8)。特别地,锚定部分5c是锥形的,以形成锚定部分5c的尖端,这改善了在钻孔中的插入。
特别地,连接部分5b被配置成当锚定部分5c如上所述被锚定到内部结构I1时沿着内部结构I1的外侧延伸,其中连接部分5c包括被集成到连接部分5b中的多个图像定位特征52,其中特别地,相应的图像定位特征52是不透射线的标记。在实施例中,相应的图像定位特征52由圆柱形杆形成,其中杆相对于彼此倾斜布置,如图4中所指示的那样。
图5中示出了结构基准标记S1的实施例,该结构基准标记S1可以例如被用于在外科手术期间进行跟踪,并且对于根据本发明的配准过程来说不是必需的。据此,标记S1包括基部21,该基部21被配置成与适配器A1的连接器53接合,以便将标记S1可释放地连接到适配器A1。此外,标记S1可以包括若干个(例如三个)单独可跟踪的基准元件23(特别是以球体的形式),其可以经由臂22连接到基部21部分。
此外,图3A示出了表面基准标记F1的实施例,其包括扁平圆柱形主体40,视觉可跟踪基准元件41可以被嵌入到该扁平圆柱形主体40中。
图3B示出了表面基准标记F1的替代实施例,其中这里基准元件41由回射球体形成,其中跟踪元件41可以被连接到圆形基部40,并且可以进一步被连接到基部40的透明盖42覆盖。
此外,图6示出了变换INN1TWOR可以经由术中成像方法被进一步细化或替换,其中通过算法地定位在得到的图像中的适配器A1的内部结构I1和图像定位特征52以及通过计算随后的增量配准变换INN’TWOR来细化先前存在的坐标系变换INN1TWOR。特别地,医疗系统100可以被配置成计算从术中获得的图像IM中的内部结构I1的坐标系INN’到术中获得的图像IM的图像坐标系IMA的坐标变换IMATINN’,如图6中所指示,并且通过将该变换IMATINN’与已经计算的坐标变换IMATWOR相结合
Figure 416882DEST_PATH_IMAGE006
来确定从测量单元10的坐标系WOR到内部结构的坐标系INN’的细化坐标变换INN’TWOR
如本文中描述的根据本发明的医疗系统100特别适合于执行根据本发明的方法。
非外科手术方法允许确定物理对象1内部的如图1中所示的内部结构I1的坐标系INN1和其3D图像(例如利用医疗成像单元6获得)的坐标系之间的坐标变换,其中通过以下步骤逐步实现生成该变换:
(a)计算附着到物理对象1的外侧2的表面基准标记Fi(i=1,2,…)的坐标系SUR和3D图像之间的初始坐标变换SURTIMA(即配准);
(b)计算附着到物理对象的外侧2的表面基准标记Fi(i=1,2,…)的坐标系SUR和内部结构I1的坐标系INN1之间的坐标变换INN1TSUR,至少一个适配器A1已经在物理对象1内部被附着到该内部结构I1。特别地,适配器A1用于以之后可以跟踪(例如在外科手术期间)的可再现的方式将结构基准标记S1(参考图5)连接到适配器A1;以及
(c)通过步骤(b)中计算的坐标变换来扩展步骤(a)中计算的坐标变换,以创建3D图像的图像坐标系IMA和与内部结构I1相关联的坐标系INN1之间的坐标变换。
特别地,在实施例中,该方法可以用于由脊椎形成的患者的内部结构Ii(i=1,2,…),其中物理对象1是患者的上身。然而,本发明也可以被应用于允许放置适配器或结构基准标记的任何其他内部结构。
特别地,使用根据本发明的方法,可以执行与跟踪椎骨(或其他内部结构)Ii相关的以下过程:
1)将在由医疗成像单元6(例如CT或MRI)和测量单元(例如诸如立体定向相机)10中创建的3D图像中可见的表面基准标记Fi附着到受试者的身体的外表面2(即皮肤);
2)使用医疗成像单元6产生3D图像,并确定表面基准标记在图像坐标系IMA内的位置或姿态。从表面基准标记的位置计算(例如垂直右手)坐标系SUR。
3)在对象的身体/外表面上执行经由所述表面基准标记Fi设置对外表面2的跟踪和随后的跟踪(特别是基于只要没有外科手术干预(切割、螺钉放置等)就不存在变形的假设)。
4)将3D图像传递到软件系统(例如,处理单元)7,并标记合适的位置,以钻孔并将用于结构基准标记S1的适配器A1插入到内部结构(例如,受试者的椎骨)I1中。该步骤可以根据需要重复多次,以预先准备根据本发明的方法,但不构成要求保护的方法的步骤。
5)使用合适的外科手术设备或控制姿态可跟踪的外科手术机器人设备8以在计划的位置和取向处在椎骨I1中钻孔(根据步骤4)。特别地,表面基准标记Fi的变形最小至没有变形(该步骤也不构成要求保护的方法的步骤)。
6)将适配器A1附着到内部结构/椎骨I1(该步骤也不构成要求保护的方法的步骤)。特别地,适配器A1的姿态经由姿态可跟踪外科手术机器人设备8而为系统100所知,该姿态可跟踪外科手术机器人设备8可以在附着适配器A1时测量适配器A1的精确姿态(并因此测量稍后连接到适配器的标记20的精确姿态)。
7)跟踪系统(例如,包括测量单元10)记录表面基准标记Fi和适配器A1或连接到适配器A1的结构基准标记S1的相对位置或姿态,并且医疗系统100计算表面和适配器A1/结构基准标记S1之间的相对几何变换。然后使得被跟踪的内部结构(例如椎骨)I1和3D图像数据集之间的配准可用。
8)针对每个内部结构(例如椎骨)Ii(i>1)和相应的适配器Ai(i>1)重复步骤4-7。
参考数字
1 物理对象(例如患者的身体或身体部分)
2 物理对象的外表面
Ii 物体的第i个内部结构,其否则不可从外部访问
Fi 附着到外表面的第i个表面基准标记
Ai (在创建访问后)附着到对象内部结构的第i个适配器,其可连接到结构基准标记
5a 正面
5b 连接部分
5c 锚定部分
6 医疗成像设备(例如CT扫描仪或MRI设备)
7 处理单元
8 外科手术机器人
10 测量单元
IMA (3D图像/模型的)图像坐标系
WOR 测量单元的坐标系
SUR 表面基准标记的坐标系
INN1 物体内部结构的坐标系
INN 内部结构的坐标系
Si 内部结构的第i个结构基准标记
51 螺纹
52 图像定位特征
53 用于将结构基准标记连接到适配器的开口/连接器
100 医疗系统。

Claims (32)

1.一种医疗系统(100),包括:
- 多个表面基准标记(Fi),其被配置成以相对于彼此的任意空间配置附着到物理对象(1)的外表面(2),
- 至少一个适配器(A1),其被配置成附着到物理对象(1)的内部结构(I1),
- 医疗成像单元(6),其被配置成在预定义的图像坐标系(IMA)内生成所述物理对象(1)和附着到所述外表面(2)的表面基准标记(Fi)的3D图像,
- 处理单元(7),其被配置用于测量每个表面基准标记在3D图像内的并且相对于图像坐标系(IMA)的姿态,并根据表面基准标记(Fi)的位置来计算表面基准标记(Fi)的坐标系(SUR),以及图像坐标系(IMA)和表面基准标记(Fi)的坐标系(SUR)之间的第一坐标变换(SURTIMA);
- 测量单元(10),其被配置成当相应的表面基准标记(Fi)被附着到所述外表面(2)时,获取表面基准标记(Fi)相对于测量单元(10)的坐标系(WOR)的姿态,
- 其中,所述处理单元(7)被进一步配置成经由表面基准标记(Fi)的坐标系(SUR)计算测量单元(10)的坐标系(WOR)和图像坐标系(IMA)之间的第二坐标系变换(IMATWOR),从而允许将所述外表面(2)上的点与3D图像内的点进行参考,
- 其中,所述医疗系统(100)通过其至少一个适配器(A1)的姿态可跟踪放置被配置成当至少一个适配器(A1)被附着到所述物理对象(1)的内部结构(I1)时测量至少一个适配器(A1)相对于表面基准标记(Fi)的姿态,并且其中处理单元(7)被配置成计算表面基准标记(Fi)的坐标系(SUR)和内部结构(I1)的坐标系(INN1)之间的第三坐标变换(INN1TSUR),并且其中处理单元(7)被配置成将第二坐标变换(IMATWOR)与第一坐标变换(SURTIMA)以及与第三坐标变换(INN1TSUR)相结合,以创建所述测量单元(10)的坐标系(WOR)和内部结构(I1)的坐标系(INN1)之间的坐标变换(INN1TWOR),从而允许医疗系统(100)测量所述测量单元(10)的坐标系(WOR)中的至少一个适配器(A1)的姿态。
2.根据权利要求1所述的系统,其中所述医疗系统(100)被配置成在测量单元(10)的坐标系(WOR)和物理对象(1)的另外的内部结构(I2)的坐标系(INN2)之间建立至少一个另外的坐标变换(INN2TWOR),其中所述医疗系统(100)被配置成执行以下各项中的至少一项:
- 当另外的适配器(A2)被附着到所述物理对象(1)的另外的内部结构(I2)时,测量另外的适配器(A2)相对于表面基准标记(Fi)的姿态,并且其中处理单元(7)被配置成计算表面基准标记(Fi)的坐标系(SUR)和另外的内部结构(I2)的坐标系(INN2)之间的另外的第三坐标变换(INN2TSUR),并且其中,处理单元(7)被配置成将第二坐标变换(IMATWOR)与第一坐标变换(SURTIMA)以及与另外的第三坐标变换(INN2TSUR)相结合,以创建测量单元(10)的坐标系(WOR)和另外的内部结构(I2)的坐标系(INN2)之间的另外的坐标变换(INN2TWOR),从而允许测量所述测量单元(10)的坐标系(WOR)中的另外的适配器(A2)的姿态,或者通过
- 通过将测量单元(10)的坐标(WOR)和内部结构(I1)的坐标系(INN1)之间的坐标变换(INN1TWOR)与内部结构(I1)的坐标系(INN1)和另外的内部结构(I2)的坐标系(INN2)之间的坐标变换(INN2TINN1)相结合。
3.根据权利要求1或2所述的医疗系统,其中所述医疗系统(100)被配置成使用以下各项中的一项来跟踪所述外表面(2):
c.表面基准标记(Fi),其中特别地,所述医疗系统(100)被配置成跟踪每个单独的表面基准标记(Fi)的位置或姿态,特别地使用以下各项中的一项来跟踪:光学测量原理、视频-光学测量原理、电磁测量原理、飞行时间测量原理;
d.通过使用以下各项中的一项来跟踪外表面(2):激光扫描外表面(2),用结构光扫描外表面(2)。
4.根据前述权利要求中的一项所述的医疗系统,其中,所述医疗系统(100)包括一个坐标系内的不同测量模态,以允许使用不同测量模态同时跟踪表面基准标记(Fi)和至少一个适配器(A1)。
5.根据前述权利要求中的一项所述的医疗系统,其中,所述医疗系统(100)包括姿态可跟踪外科手术机器人设备(8),其被配置成生成对物理对象(1)的内部结构(I1)的访问,并将所述至少一个适配器(A1)递送到内部结构(3)并将所述至少一个适配器(A1)定位在内部结构(3)上。
6.根据前述权利要求中的一项所述的医疗系统,其中所述医疗系统(100)被配置成独立地跟踪物理对象(1)内的若干内部结构(Ii),并且建立和跟踪那些内部结构(Ii)和外表面(2)之间的若干坐标变换,其中至少一个适配器(A1)已经由姿态可跟踪外科手术机器人设备(8)递送到若干内部结构(Ii)中的每个。
7.根据前述权利要求中的一项所述的医疗系统,其中,所述医疗系统(100)被配置成相对于彼此并且同时绝对相对于所述外表面(2)跟踪若干内部结构(Ii)。
8.根据前述权利要求中的一项所述的医疗系统,其中,所述至少一个适配器(A1)包括连接部分(5b)和锚定部分(5c),所述连接部分(5b)被配置成可释放地连接到结构基准标记(S1),所述锚定部分(5c)被配置成附着到内部结构(I1),使得在将结构基准标记(S1)重新连接到适配器(A1)时,再现结构基准标记(S1)相对于内部结构(I1)的初始配准姿态。
9.根据权利要求8所述的医疗系统,其中所述锚定部分(5c)包括在锚定部分(5c)的外侧上的螺纹(51),用于通过将锚定部分(5c)拧入到内部结构(I1)的钻孔中而将所述至少一个适配器(A1)锚定到内部结构(I1)。
10.根据权利要求8或9所述的医疗系统,其中,所述连接部分(5b)被配置成当所述锚定部分(5c)被锚定到所述内部结构(I1)时从所述内部结构(I1)的外部突出,其中,所述连接部分(5b)包括被集成到所述连接部分(5b)中的多个图像定位特征(52),其中,特别地,相应的图像定位特征(52)是不透射线的标记。
11.根据权利要求10所述的医疗系统,其中,所述医疗系统(100)被配置成术中获取内部结构(I1)的至少一个图像(IM)和适配器(A1)的图像定位特征(52),以及在至少一个术中获取的图像(IM)中定位内部结构(I1)和图像定位特征(52),并且计算测量单元(10)的坐标系(WOR)和内部结构(I1)的坐标系(INN’)之间的坐标变换(INN’TWOR)。
12.根据权利要求10或11所述的医疗系统,其中,相应的图像定位特征(52)由圆柱形杆形成,其中,特别地,杆(52)相对于彼此倾斜地布置。
13.根据前述权利要求中的一项所述的医疗系统,其中所述医疗系统(100)被配置成通过使用第一表面基准标记(F1)的位置作为所述表面基准标记(Fi)的坐标系(SUR)的中心来计算所述表面基准标记(Fi)的坐标系(SUR),其中,所述医疗系统被进一步配置成将从第一表面基准标记(F1)扩展到第二表面基准标记(F2)的归一化向量用作表面基准标记(Fi)的坐标系(SUR)的第一坐标轴(x),并且将从第一表面基准标记(F1)扩展到第三表面基准标记(F3)的归一化向量用作第二坐标轴(y),并且将第一和第二坐标轴(x,y)之间的叉积用作第三坐标轴(z)。
14.一种用于确定物理对象(1)内部的内部结构(I1)的坐标系(INN1)和内部结构(I1)的3D图像的图像坐标系(IMA)之间的坐标变换的方法,其中所述方法包括以下步骤:
(a)计算附着到物理对象(1)的外侧(2)的表面基准标记(Fi)的坐标系(SUR)和3D图像的图像坐标系(IMA)之间的第一坐标变换(SURTIMA);
(b)计算附着到物理对象的外侧(2)的表面基准标记(Fi)的坐标系(SUR)和物理对象(1)内部的内部结构(I1)的坐标系(INN1)之间的第二坐标变换(INN1TSUR);
(c)通过在步骤(b)中计算的坐标变换(INN1TSUR)来扩展在步骤(a)中计算的坐标变换(SURTIMA),以创建3D图像的图像坐标系(IMA)和内部结构(I1)的坐标系(INN1)之间的坐标变换(INN1TIMA)。
15.根据权利要求14所述的方法,其中,所述外表面(2)通过以下各项中的一项来跟踪:
a.单独跟踪所述表面基准标记(Fi)的姿态或位置,特别是通过以下各项中的一项来跟踪:光学跟踪、视频-光学跟踪、电磁跟踪、飞行时间跟踪;
b.通过激光扫描或用结构光扫描来跟踪外表面(2)。
16.根据权利要求14所述的方法,其中另外至少一个适配器(A1)通过姿态可跟踪外科手术机器人设备(8)被附着到所述内部结构(Ii),并且其中所述至少一个适配器(A1)能够通过计算所述坐标变换(SURTIMAINN1TSURINN1TIMA)的处理单元(7)相对于所述表面基准标记(Fi)被跟踪。
17.一种医疗系统(100),包括:
- 多个表面基准标记(Fi),其被配置成以相对于彼此的任意空间配置附着到物理对象(1)的外表面(2),
- 至少一个适配器(A1),其被配置成附着到物理对象(1)的内部结构(I1),
- 医疗成像单元(6),其被配置成在预定义的图像坐标系(IMA)内生成所述物理对象(1)和附着到所述外表面(2)的表面基准标记(Fi)的3D图像,
- 处理单元(7),其被配置用于测量每个表面基准标记在3D图像内的并且相对于图像坐标系(IMA)的姿态,并根据表面基准标记(Fi)的位置来计算表面基准标记(Fi)的坐标系(SUR),以及图像坐标系(IMA)和表面基准标记(Fi)的坐标系(SUR)之间的第一坐标变换(SURTIMA);
- 测量单元(10),其被配置成当相应的表面基准标记(Fi)被附着到所述外表面(2)时,获取表面基准标记(Fi)相对于测量单元(10)的坐标系(WOR)的姿态,
- 其中,所述处理单元(7)被进一步配置成经由表面基准标记(Fi)的坐标系(SUR)计算测量单元(10)的坐标系(WOR)和图像坐标系(IMA)之间的第二坐标系变换(IMATWOR),从而允许根据
Figure DEST_PATH_IMAGE002
将所述外表面(2)上的点与3D图像内的点进行参考,
- 其中,所述医疗系统(100)通过其至少一个适配器(A1)的姿态可跟踪放置被配置成当至少一个适配器(A1)被附着到所述物理对象(1)的内部结构(I1)时测量至少一个适配器(A1)相对于表面基准标记(Fi)的姿态,并且其中处理单元(7)被配置成计算表面基准标记(Fi)的坐标系(SUR)和内部结构(I1)的坐标系(INN1)之间的第三坐标变换(INN1TSUR),并且其中处理单元(7)被配置成将第二坐标变换(IMATWOR)与第一坐标变换(SURTIMA)以及与第三坐标变换(INN1TSUR)相结合,以根据INN1TSUR* SURTIMA* IMATWOR=INN1TWOR创建所述测量单元(10)的坐标系(WOR)和内部结构(I1)的坐标系(INN1)之间的坐标变换(INN1TWOR),从而允许医疗系统(100)测量所述测量单元(10)的坐标系(WOR)中的至少一个适配器(A1)的姿态。
18.根据权利要求17所述的系统,其中所述医疗系统(100)被配置成在测量单元(10)的坐标系(WOR)和物理对象(1)的另外的内部结构(I2)的坐标系(INN2)之间建立至少一个另外的坐标变换(INN2TWOR),其中所述医疗系统(100)被配置成执行以下各项中的至少一项:
- 当另外的适配器(A2)被附着到所述物理对象(1)的另外的内部结构(I2)时,测量另外的适配器(A2)相对于表面基准标记(Fi)的姿态,并且其中处理单元(7)被配置成计算表面基准标记(Fi)的坐标系(SUR)和另外的内部结构(I2)的坐标系(INN2)之间的另外的第三坐标变换(INN2TSUR),并且其中,处理单元(7)被配置成将第二坐标变换(IMATWOR)与第一坐标变换(SURTIMA)以及与另外的第三坐标变换(INN2TSUR)相结合,以创建测量单元(10)的坐标系(WOR)和另外的内部结构(I2)的坐标系(INN2)之间的另外的坐标变换(INN2TWOR),从而允许测量所述测量单元(10)的坐标系(WOR)中的另外的适配器(A2)的姿态,或者通过
- 通过将测量单元(10)的坐标(WOR)和内部结构(I1)的坐标系(INN1)之间的坐标变换(INN1TWOR)与内部结构(I1)的坐标系(INN1)和另外的内部结构(I2)的坐标系(INN2)之间的坐标变换(INN2TINN1)相结合。
19.根据权利要求17或18所述的医疗系统,其中所述医疗系统(100)被配置成使用以下各项中的一项来跟踪所述外表面(2):
e.表面基准标记(Fi),其中特别地,所述医疗系统(100)被配置成跟踪每个单独的表面基准标记(Fi)的位置或姿态,特别地使用以下各项中的一项来跟踪:光学测量原理、视频-光学测量原理、电磁测量原理、飞行时间测量原理;
f.通过使用以下各项中的一项来跟踪外表面(2):激光扫描外表面(2),用结构光扫描外表面(2)。
20.根据前述权利要求中的一项所述的医疗系统,其中,所述医疗系统(100)包括一个坐标系内的不同测量模态,以允许使用不同测量模态同时跟踪表面基准标记(Fi)和至少一个适配器(A1)。
21.根据前述权利要求中的一项所述的医疗系统,其中,所述医疗系统(100)包括姿态可跟踪外科手术机器人设备(8),其被配置成生成对物理对象(1)的内部结构(I1)的访问,并将所述至少一个适配器(A1)递送到内部结构(3)并将所述至少一个适配器(A1)定位在内部结构(3)上。
22.根据前述权利要求中的一项所述的医疗系统,其中所述医疗系统(100)被配置成独立地跟踪物理对象(1)内的若干内部结构(Ii),并且建立和跟踪那些内部结构(Ii)和外表面(2)之间的若干坐标变换,其中至少一个适配器(A1)已经由姿态可跟踪外科手术机器人设备(8)递送到若干内部结构(Ii)中的每个。
23.根据前述权利要求中的一项所述的医疗系统,其中,所述医疗系统(100)被配置成相对于彼此并且同时绝对相对于所述外表面(2)跟踪若干内部结构(Ii)。
24.根据前述权利要求中的一项所述的医疗系统,其中,所述至少一个适配器(A1)包括连接部分(5b)和锚定部分(5c),所述连接部分(5b)被配置成可释放地连接到结构基准标记(S1),所述锚定部分(5c)被配置成附着到内部结构(I1),使得在将结构基准标记(S1)重新连接到适配器(A1)时,再现结构基准标记(S1)相对于内部结构(I1)的初始配准姿态。
25.根据权利要求24所述的医疗系统,其中所述锚定部分(5c)包括在锚定部分(5c)的外侧上的螺纹(51),用于通过将锚定部分(5c)拧入到内部结构(I1)的钻孔中而将所述至少一个适配器(A1)锚定到内部结构(I1)。
26.根据权利要求24或25所述的医疗系统,其中,所述连接部分(5b)被配置成当所述锚定部分(5c)被锚定到所述内部结构(I1)时从所述内部结构(I1)的外部突出,其中,所述连接部分(5b)包括被集成到所述连接部分(5b)中的多个图像定位特征(52),其中,特别地,相应的图像定位特征(52)是不透射线的标记。
27.根据权利要求26所述的医疗系统,其中,所述医疗系统(100)被配置成术中获取内部结构(I1)的至少一个图像(IM)和适配器(A1)的图像定位特征(52),以及在至少一个术中获取的图像(IM)中定位内部结构(I1)和图像定位特征(52),并且计算所述测量单元(10)的坐标系(WOR)和内部结构(I1)的坐标系(INN’)之间的坐标变换(INN’TWOR)。
28.根据权利要求26或27所述的医疗系统,其中,相应的图像定位特征(52)由圆柱形杆形成,其中,特别地,杆(52)相对于彼此倾斜地布置。
29.根据前述权利要求中的一项所述的医疗系统,其中所述医疗系统(100)被配置成通过使用第一表面基准标记(F1)的位置作为所述表面基准标记(Fi)的坐标系(SUR)的中心来计算所述表面基准标记(Fi)的坐标系(SUR),其中,所述医疗系统被进一步配置成将从第一表面基准标记(F1)扩展到第二表面基准标记(F2)的归一化向量用作表面基准标记(Fi)的坐标系(SUR)的第一坐标轴(x),并且将从第一表面基准标记(F1)扩展到第三表面基准标记(F3)的归一化向量用作第二坐标轴(y),并且将第一和第二坐标轴(x,y)之间的叉积用作第三坐标轴(z)。
30.一种用于确定物理对象(1)内部的内部结构(I1)的坐标系(INN1)和内部结构(I1)的3D图像的图像坐标系(IMA)之间的坐标变换的方法,其中所述方法包括以下步骤:
(a)计算附着到物理对象(1)的外侧(2)的表面基准标记(Fi)的坐标系(SUR)和3D图像的图像坐标系(IMA)之间的第一坐标变换(SURTIMA);
(b)计算附着到物理对象的外侧(2)的表面基准标记(Fi)的坐标系(SUR)和物理对象(1)内部的内部结构(I1)的坐标系(INN1)之间的第二坐标变换(INN1TSUR);
(c)通过在步骤(b)中计算的坐标变换(INN1TSUR)来自动扩展在步骤(a)中计算的坐标变换(SURTIMA),以创建3D图像的图像坐标系(IMA)和内部结构(I1)的坐标系(INN1)之间的坐标变换(INN1TIMA)。
31.根据权利要求30所述的方法,其中,所述外表面(2)通过以下各项中的一项来跟踪:
a.单独跟踪所述表面基准标记(Fi)的姿态或位置,特别是通过以下各项中的一项来跟踪:光学跟踪、视频-光学跟踪、电磁跟踪、飞行时间跟踪;
b.通过激光扫描或用结构光扫描来跟踪外表面(2)。
32.根据权利要求30所述的方法,其中另外至少一个适配器(A1)通过姿态可跟踪外科手术机器人设备(8)被附着到所述内部结构(Ii),并且其中所述至少一个适配器(A1)能够通过计算所述坐标变换(SURTIMAINN1TSURINN1TIMA)的处理单元(7)相对于所述表面基准标记(Fi)被跟踪。
CN202080084340.0A 2019-10-06 2020-10-06 用于计算坐标系变换的系统和方法 Pending CN114727847A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP19201585.7 2019-10-06
EP19201585 2019-10-06
PCT/EP2020/078017 WO2021069449A1 (en) 2019-10-06 2020-10-06 System and method for computation of coordinate system transformations

Publications (1)

Publication Number Publication Date
CN114727847A true CN114727847A (zh) 2022-07-08

Family

ID=68158996

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080084340.0A Pending CN114727847A (zh) 2019-10-06 2020-10-06 用于计算坐标系变换的系统和方法

Country Status (4)

Country Link
US (1) US20220361959A1 (zh)
EP (1) EP4037595A1 (zh)
CN (1) CN114727847A (zh)
WO (1) WO2021069449A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021258113A1 (en) 2020-06-19 2021-12-23 Remedy Robotics, Inc. Systems and methods for guidance of intraluminal devices within the vasculature
EP4104786A1 (en) * 2021-06-15 2022-12-21 Stryker European Operations Limited Technique for determining poses of tracked vertebrae
US11707332B2 (en) 2021-07-01 2023-07-25 Remedy Robotics, Inc. Image space control for endovascular tools
WO2023278789A1 (en) 2021-07-01 2023-01-05 Remedy Robotics, Inc. Vision-based position and orientation determination for endovascular tools
CN114041876A (zh) * 2021-11-30 2022-02-15 苏州大学 一种基于结构光的增强现实骨科透视导航方法及系统
FR3132832B1 (fr) * 2022-02-22 2024-04-12 S M A I O Système de chirurgie rachidienne robotisée

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5799099A (en) 1993-02-12 1998-08-25 George S. Allen Automatic technique for localizing externally attached fiducial markers in volume images of the head
WO1995015729A1 (en) 1993-12-10 1995-06-15 Wang Mattew Y Automatic technique for localizing externally attached fiducial markers in volume images of the head
US5951571A (en) 1996-09-19 1999-09-14 Surgical Navigation Specialist Inc. Method and apparatus for correlating a body with an image of the body
WO1998036371A1 (en) 1997-02-13 1998-08-20 Integrated Surgical Systems, Inc. Method and system for registering the position of a surgical system with a preoperative bone image
US6674916B1 (en) 1999-10-18 2004-01-06 Z-Kat, Inc. Interpolation in transform space for multiple rigid object registration
EP1890261B1 (de) 2006-08-14 2009-02-18 BrainLAB AG Registrierung von MR-Daten anhand generischer Modelle
EP1657678B1 (de) 2004-11-15 2007-09-12 BrainLAB AG Videobildunterstützte Patientenregistrierung
EP1741469A1 (en) 2005-07-08 2007-01-10 Engineers & Doctors Wallstén Medical A/S Method of guiding an irradiation equipment
US8108025B2 (en) * 2007-04-24 2012-01-31 Medtronic, Inc. Flexible array for use in navigated surgery
US20080300477A1 (en) 2007-05-30 2008-12-04 General Electric Company System and method for correction of automated image registration
EP2070478B1 (en) 2007-12-13 2011-11-23 BrainLAB AG Detection of the position of a moving object and treatment method
EP2504714A1 (en) 2009-11-26 2012-10-03 BrainLAB AG Shift compensation in medical image processing
US8675939B2 (en) 2010-07-13 2014-03-18 Stryker Leibinger Gmbh & Co. Kg Registration of anatomical data sets
CA2840193C (en) 2011-06-22 2017-11-21 DePuy Synthes Products, LLC Assembly for manipulating a bone comprising a position tracking system
DE102012208389A1 (de) 2012-05-18 2013-11-21 Fiagon Gmbh Registrierverfahren und -vorrichtung für ein Positionserfassungssystem
US11395706B2 (en) 2012-06-21 2022-07-26 Globus Medical Inc. Surgical robot platform
WO2014063746A1 (en) 2012-10-26 2014-05-01 Brainlab Ag Matching patient images and images of an anatomical atlas
US9818175B2 (en) 2012-12-17 2017-11-14 Brainlab Ag Removing image distortions based on movement of an imaging device
EP3074951B1 (en) 2013-11-25 2022-01-05 7D Surgical ULC System and method for generating partial surface from volumetric data for registration to surface topology image data
US10201717B2 (en) 2014-07-30 2019-02-12 Brainlab Ag Online patient reconstruction and tracking for patient setup in radiation therapy using an iterative closest point algorithm
US11420076B2 (en) 2015-06-25 2022-08-23 Brainlab Ag Utilization of a transportable CT-scanner for radiotherapy procedures
US10102640B2 (en) 2016-11-29 2018-10-16 Optinav Sp. Z O.O. Registering three-dimensional image data of an imaged object with a set of two-dimensional projection images of the object
US11443431B2 (en) 2017-03-22 2022-09-13 Brainlab Ag Augmented reality patient positioning using an atlas
US20170209225A1 (en) 2017-04-10 2017-07-27 Danling Wu Stereotactic medical procedure using sequential references and system thereof
US11540767B2 (en) 2017-07-03 2023-01-03 Globus Medical Inc. Intraoperative alignment assessment system and method

Also Published As

Publication number Publication date
US20220361959A1 (en) 2022-11-17
WO2021069449A1 (en) 2021-04-15
EP4037595A1 (en) 2022-08-10

Similar Documents

Publication Publication Date Title
EP4159149A1 (en) Surgical navigation system, computer for performing surgical navigation method, and storage medium
US11957445B2 (en) Method and apparatus for moving a reference device
JP7204663B2 (ja) 慣性計測装置を使用して手術の正確度を向上させるためのシステム、装置、及び方法
US20220361959A1 (en) System and Method for Computation of Coordinate System Transformations
US6546279B1 (en) Computer controlled guidance of a biopsy needle
EP3306567B1 (en) System for improving 2d-3d registration convergence
US9597154B2 (en) Method and apparatus for optimizing a computer assisted surgical procedure
US11759272B2 (en) System and method for registration between coordinate systems and navigation
US7885441B2 (en) Systems and methods for implant virtual review
US8010177B2 (en) Intraoperative image registration
EP1820465B1 (en) Universal image registration interface
US20080242978A1 (en) Method and apparatus for registering a physical space to image space
US20080154120A1 (en) Systems and methods for intraoperative measurements on navigated placements of implants
JP2008126075A (ja) Ctレジストレーション及びフィードバックの視覚的検証のためのシステム及び方法
JP2002186603A (ja) 対象物の案内のための座標変換法
US20220378526A1 (en) Robotic positioning of a device
EP3908221B1 (en) Method for registration between coordinate systems and navigation
CN110575255B (zh) 使用自然基准提供共配准的机器人系统和相关方法
CN114159160B (zh) 手术导航方法、装置、电子设备、存储介质
Nakajima et al. Surgical tool alignment guidance by drawing two cross-sectional laser-beam planes
CN212490140U (zh) 手术导航系统
US20230149112A1 (en) System and method for a navigated procedure
Williamson et al. Image-guided microsurgery
Kalfas Spinal registration accuracy and error

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination