CN101553182B - 用于确定第一对象在第二对象中的位置的装置 - Google Patents

用于确定第一对象在第二对象中的位置的装置 Download PDF

Info

Publication number
CN101553182B
CN101553182B CN2007800440885A CN200780044088A CN101553182B CN 101553182 B CN101553182 B CN 101553182B CN 2007800440885 A CN2007800440885 A CN 2007800440885A CN 200780044088 A CN200780044088 A CN 200780044088A CN 101553182 B CN101553182 B CN 101553182B
Authority
CN
China
Prior art keywords
threedimensional model
projection image
dimensional projection
contact area
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2007800440885A
Other languages
English (en)
Other versions
CN101553182A (zh
Inventor
R·H·P·贝特拉姆斯
G·H·M·海斯贝斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN101553182A publication Critical patent/CN101553182A/zh
Application granted granted Critical
Publication of CN101553182B publication Critical patent/CN101553182B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/75Determining position or orientation of objects or cameras using feature-based methods involving models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017Electrical control of surgical instruments
    • A61B2017/00022Sensing or detecting at the treatment site
    • A61B2017/00039Electric or electromagnetic phenomena other than conductivity, e.g. capacity, inductivity, Hall effect
    • A61B2017/00044Sensing electrocardiography, i.e. ECG
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/101Computer-aided simulation of surgical operations
    • A61B2034/102Modelling of surgical devices, implants or prosthesis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/376Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/12Arrangements for detecting or locating foreign bodies
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10116X-ray image
    • G06T2207/10121Fluoroscopy
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30021Catheter; Guide wire
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30048Heart; Cardiac

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Processing (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Analysis (AREA)
  • Processing Or Creating Images (AREA)
  • Surgical Instruments (AREA)

Abstract

本发明涉及一种用于确定第一对象(14)在第二对象(13)内的位置的装置,其中,所述第一对象(14)在接触区与所述第二对象(13)接触。所述装置(1)包括用于提供第二对象(13)的三维模型(20)的提供单元(2)。投影单元(5、6、7、21)生成第一对象(14)和第二对象(13)的二维投影图像(26),配准单元(8)将三维模型(20)与二维投影图像(26)进行配准。确定单元(9)根据第一对象(14)在二维投影图像(26)和经配准的第二对象(13)的三维模型(20)上的位置确定接触区的位置,其中,所述接触区的位置是所述第一对象(14)在所述第二对象(13)内的位置。

Description

用于确定第一对象在第二对象中的位置的装置
技术领域
本发明涉及用于确定第一对象在第二对象中的位置的装置、方法和计算机程序。
背景技术
US2006/0241413A1公开了一种用于采用x射线系统确定仪器在对象的结构内的位置的方法。为与确定所述位置相关的对象的至少一个区域提供三维图像。将x射线系统与三维图像进行配准,并且在将仪器引入到结构中之后,利用x射线系统按照已知的投影几何形状获取相关区域的至少一幅二维x射线图像。在二维x射线图像中确定仪器的二维位置,并且在所述二维位置贯穿三维图像放置一条根据已知的投影几何形状的投影线,其中,根据投影线与结构的交点确定仪器在三维图像中的三维位置。
WO 00/72264A1公开了一种位置确定系统,其尤其适于确定演员在演播室内的位置,其基于在处于已知位置的摄像机拍摄的图像中识别演员的部分,并且基于所述摄像机的位置和所述部分的高度确定所述演员的位置。在实施例中,基于在由处于已知的摄像机位置的摄像机拍摄的图像中识别演员的脚确定演员在演播室内的位置,并基于所述摄像机的位置以及脚通常是演员在图像中的最低可见部分的假设确定演员的脚部位置。在确定演员的位置之前,执行校准过程,从而得到将摄像机拍摄的图像中的每一位置映射至地板上的定位的映射函数,其中,在校准之后,为了确定演员的位置,在图像中识别出脚的位置,并采用所述映射函数将图像中的这一确定位置映射到地板上的位置。
WO 2005/020148A1公开了用于对导管的当前(x射线)图像和脉管树的地图图像进行叠加显示的设备和方法。对于示出导管必须经过的脉管树的地图图像而言,已经借助于距离变换计算了相关距离图像并将其归档到存储器内。在当前图像中,对导管进行分段,之后借助于距离图像计算地图图像的变换,从而在当前图像与经变换的地图图像在监视器上重叠时,使所述导管的图像处于经变换的地图图像的脉管树内。
WO 01/20552A1公开了一种用于在医疗过程中生成图像的方法。使心脏的高分辨率三维模型与执行医疗过程时获取的低分辨率获取图像进行配准,并显示经配准的高分辨率模型和低分辨率图像,其中,由于所述低分辨率图像还可以示出例如导管的电极,因而在经配准的高分辨率模型上显示所述电极。
例如,将用于确定第一对象在第二对象中的位置的装置应用在心脏电生理学领域,从而定位导管顶端在患者心脏内的三维位置。采用这些经定位的导管顶端的三维位置记录感兴趣的位置,诸如,三维空间中的解剖学界标和/或消融位置。这种已知的定位基于电磁或超声实时(低潜伏时间)三维定位技术。例如,用于对导管顶端的三维位置进行定位的装置包括三个靠近患者布置的磁场发射线圈和位于导管的顶端的对应传感器,其中,通过三角测量确定导管顶端的三维位置。
这些用于确定诸如导管顶端的第一对象在诸如患者心脏的第二对象中的位置的已知技术是复杂的,需要大量的硬件,尤其是专用的导管,因此价格昂贵。
发明内容
本发明的目的在于提供用于确定第一对象在第二对象内的位置的装置、方法和计算机程序,它们具有更低的复杂性,需要的硬件数量更少,因而价格更加低廉。
在本发明的第一方面,提供了一种用于确定第一对象在第二对象内的位置的装置,其中,所述第一对象在接触区与所述第二对象接触,其中,所述装置包括:
-用于提供第二对象的三维模型的提供单元,
-用于生成第一对象和第二对象的二维投影图像的投影单元,
-用于将三维模型与二维投影图像进行配准的配准单元,
-用于根据第一对象在二维投影图像和经配准的第二对象的三维模型上的位置确定接触区的位置的确定单元,所述接触区的位置是第一对象在第二对象内的位置,
其中,确定单元适于通过确定第一对象的视线与三维模型的表面相交的位置确定所述接触区的位置。
本发明基于这样的理念,即,可以采用第一对象在二维投影图像上的位置确定所述第一对象,进而确定接触区在第二对象内的二维位置,而且,能够优选地使用所述第一对象位于经配准的三维模型的表面上的信息根据所述接触区在第三维的位置确定所述第一对象在第三维内的位置,所述接触区优选地为所述第一对象和所述第二对象之间的接触点。因此,能够在不需要复杂的定位布置,如上述现有技术中的三个磁场发射线圈和位于导管顶端的传感器的情况下,确定第一对象在第二对象内的位置。因而,降低了确定第一对象在第二对象内的位置所需的硬件的数量,进而降低了这样的装置的成本。
提供单元优选地是用于根据从检测数据生成单元获取的第二对象的检测数据的生成所述第二对象的三维模型的三维模型生成单元,例如,所述检测数据生成单元可以是计算机层析成像系统、磁共振成像系统、三维旋转X射线系统或超声成像系统。三维模型生成单元优选适于采用用于根据所获取的检测数据对第二对象进行重构的已知重构技术生成所述第二对象的三维模型,其方式为,在重构图像内对所述第二对象分段,并对经分段的第二对象进行表面绘制。
第一对象优选地是定位于作为第二对象的患者心脏内的导管。投影单元优选是X射线荧光检查单元。
优选地,投影单元适于在不同的投影方向上生成二维投影图像,并且配准单元适于将三维模型与不同的二维投影图像进行配准,从而在不同投影方向上的每者均将所述三维模型与对应的二维投影图像进行配准。由于将不同的二维投影图像在不同投影方向上的每者与三维模型进行配准,因而,在每一任意选择的方向上,均将所述二维投影图像与所述三维模型进行配准。因而,能够在具有任意选定的投影方向的二维投影图像上显示所述三维模型。此外,能够通过采用任意选定投影方向的投影图像执行第一对象的位置的确定,而不必将三维模型再次与这一二维投影图像进行配准。如果用户想要在改变第一对象的位置和投影方向之后确定所述第一对象在第二对象内的位置,那么其缩短了用于确定第一对象在第二对象内的位置所需的时间。
所述视线是由第一对象在二维投影图像上的位置和投影单元的源的位置定义的,其中,所述投影单元的源优选地为X射线源,具体而言是X射线源的焦斑。能够容易地确定这一视线和这一视线与三维模型之间的交点,其允许以低计算成本确定第一对象在第二对象内的位置。
优选地,装置还包括选择单元,其用于选择视线与三维模型的两个或更多交点中的哪一个对应于接触区的位置。进一步优选地,装置包括用于通过侧视图使三维模型、视线以及两个或更多交点可视化的可视化单元,并且选择单元包括允许用户选择所述两个或更多交点之一作为所述接触区的位置的输入单元。此外,优选地,投影单元适于在少两个投影方向上生成第一对象和第二对象的至少两个二维投影图像,所述确定单元适于确定接触区的位置,在该位置上所述第一对象相对于二维投影图像之一的投影方向的视线与三维模型相交,所述选择单元适于采用其他二维投影图像的至少其中之一选择所述视线与所述三维模型的两个或更多交点中的哪一个对应于所述接触区的位置。这些用于确定第一对象在第二对象内的位置的优选实施例能够容易地在计算机系统上实现,而且只需要非常低的计算成本。
所述视线通常在两个交点上与三维模型相交,尤其是在所述三维模型不是非常复杂的情况下。但是,就所述第二对象的,进而就所述三维模型的更为复杂的三维形态而言,可能存在两个以上的交点。
在另一实施例中,投影单元适于在至少两个投影方向上生成第一对象和第二对象的至少两个二维投影图像,其中,确定单元适于针对至少两个投影方向确定所述第一对象的至少两条视线,其中,所述确定单元还适于确定所述至少两条视线的交点,其中,所述确定单元还适于使所述交点移动到三维模型的表面上,其中,经移动的交点是所确定的接触区的位置。理论上,由于第一对象接触第二对象,因而至少两条视线的交点应当被定位于第二对象的表面上,但实际上,由于用于确定第一对象在第二对象内的位置的装置的可能存在的不准确性以及由于第一对象和/或第二对象的可能的移动,所述交点往往并非被定位于第二对象的表面上。因此,将所述交点移动到第二对象的三维模型的表面上。其允许以提高的准确度确定所述接触区,进而确定第一对象在第二对象内的位置,同时所需的计算成本仍然很低。
优选地,装置包括用于在二维投影图像上对三维模型可视化的可视化单元,其中,所述可视化单元适于同时显示三维模型、二维投影图像和所确定的第一对象的位置。进一步优选地,可视化单元适于在投影单元生成二维投影图像的同时,对三维模型和二维投影图像同时进行可视化。此外,优选地,可视化单元适于通过三维模型上的图形指示对所确定的第一对象的位置进行可视化。其允许显示第一对象在第二对象内的位置,从而使用户能够容易地理解。此外,优选地,如果使第一对象移动到第二对象的表面上的不同位置,那么确定这些位置中的每者,通过图形指示在三维模型上指示所述位置,并将其记录在所述三维模型上,这样所确定的不同位置,即,例如叉号或球的不同图形指示将形成第一对象沿第二对象的表面移动所遵循的路径。如果第一对象是消融导管的顶端,并且如果第二对象是患者的心脏,那么所记录的位置能够示出例如心壁上的消融点。
此外,优选地,可视化单元包括用于在二维投影图像之上使三维模型可视化的成像区。这允许在成像区上显示所有可用信息,即,二维投影图像、第二对象的三维模型以及优选地第一对象在第二对象内的位置。此外,优选地,例如X荧光检查系统的投影单元包括显示单元,或者可视化单元包括另一成像区,所述成像区用于在不受三维模型的干扰的情况下显示二维投影图像或对其进行可视化。
此外,优选地,提供单元适于提供第二对象的移动的三维模型,其中,装置还包括用于在通过投影单元生成第一对象和第二对象的二维投影图像的过程中检测所述第二对象的运动的运动检测单元,其中,配准单元适于将移动的三维模型与二维投影图像进行配准。这样即使第二对象正在移动,也能够准确地确定第一对象在第二对象内的位置。
在本发明的另一方面,提供了一种用于确定第一对象在第二对象内的位置的方法,其中,所述第一对象在接触区与所述第二对象接触,其中,所述方法包括下述步骤:
-提供第二对象的三维模型,
-生成第一对象和第二对象的二维投影图像,
-将三维模型与二维投影图像进行配准,
-根据第一对象在二维投影图像和经配准的第二对象的三维模型上的位置确定至少一个接触区的位置,所述至少一个接触区的位置就所述第一对象在所述第二对象内的位置,其中,通过确定第一对象的视线与三维模型的表面相交的位置确定所述接触区的位置。
在本发明的另一方面,提供了一种采用能量发射的第一对象经由第二对象的表面向所述第二对象施加能量的装置,其中,所述能量发射的第一对象在接触区与所述第二对象的表面接触,并且其中,用于施加能量的装置包括根据本发明的用于确定第一对象在第二对象内的位置的装置。例如,用于施加能量的装置是用于患者心脏的消融治疗的消融装置。在这种情况下,第一对象是在能量施加过程中接触心脏内表面的消融导管的顶端。
在本发明的另一方面,提供了一种用于确定第一对象在第二对象内的位置的计算机程序,其中,所述计算机程序包括当在控制根据权利要求1所述的装置的计算机上运行所述计算机程序时,使所述装置执行根据权利要求12所述的方法的步骤的程序代码模块。
应当理解,根据权利要求1所述的装置、根据权利要求12所述的方法和根据权利要求13所述的计算机程序具有与从属权利要求中界定的类似和/或等同的优选实施例。应当理解,本发明的优选实施例还可以是从属权利要求的任何组合。
附图说明
通过下文中描述的实施例,本发明的这些和其他方面将变得显而易见,并参考其进行阐述。在下述附图中:
图1示意性地示出了采用能量发射的第一对象经由第二对象的表面向所述第二对象施加能量的装置的实施例;
图2示意性地示出了二维投影图像的生成;
图3示意性地示出了沿不同的取向依次显示第二对象的三维模型的可视化单元的成像区;
图4a示意性地示出了在第一投影方向上的第一二维投影图像的生成;
图4b示意性地示出了在第二投影方向上的第二二维投影图像的生成;
图5示意性地示出了显示第二对象的三维模型上的不同确定位置的成像区;
图6示意性地示出了说明用于确定第一对象在第二对象中的位置的方法的实施例的流程图。
具体实施方式
图1示出了用于确定第一对象14在第二对象13内的位置的装置1,其中,所述第一对象14与所述第二对象13在接触区发生接触。在这一实施例中,第一对象是导管4的顶端14,例如,其用于使患者15的在这一实施例中作为第二对象的心脏13的内壁消融。患者位于患者台16上。因而,在这一实施例中,装置1能够确定导管顶端14在心脏13的内表面上的位置。优选地将导管4连接至消融和感测单元3。导管顶端14、导管4以及消融和感测单元3的组合是公知的,因此不再对其进行详细说明。
装置1包括用于发射X射线17的X射线源5、用于检测穿越了第二对象13之后的X射线17的检测单元6以及用于控制所述X射线源5和检测单元6的控制单元7。X射线源5、检测单元6和控制单元7形成投影单元,在这一实施例中,所述单元为荧光检查设备。投影单元5、6、7生成第一对象14和第二对象13的二维投影图像,并将这些二维投影图形发送至配准单元8。配准单元8还接收来自提供单元2的第二对象13的三维模型。提供单元2可以是存储了第二对象13的三维模型的存储器。可替代地或此外,投影单元2可以包括用于生成第二对象13的三维模型的三维模型生成单元。三维模型生成单元可以包括检测数据生成单元,如计算机层析成像系统、磁共振成像系统、三维旋转X射线系统或超声成像系统。三维模型生成单元通过使用检测数据生成第二对象13的三维图像,所述检测数据优选地由检测数据生成单元提前获取,即,在将第一对象14定位于第二对象13之前。优选地,在三维图像内对第二对象13分段,并通过例如表面绘制使所述经分段的第二对象13可视化,从而得到所述第二对象13的三维模型。同样,根据本发明还可以采用用于生成第二对象13的三维模型的其他方法。
配准单元适于将第二对象13的三维模型与从投影单元5、6、7接收的二维投影图像进行配准。配准单元8利用特征执行二维投影图像与第二对象13的三维模型的配准,所述特征可能被定位于二维投影图像和第二对象13的三维模型两者内。例如,针对这一2D-3D配准,可以使用在Circulation2005 112:3769-3776或在Lancet 2003 362:1877-82中描述的方法。
例如,可以采用在不同投影方向上生成的两个二维投影图像执行所述2D-3D配准。可以借助于已知的图形技术对第二对象13的三维模型进行尺寸调节、旋转和平移,从而利用以下方式使所述三维模型与所述二维投影图形进行对准,即:通过使用“基准点”(指示某些解剖学结构的图像特征或者在所述二维投影图像和三维投影图像二者中均可视的图像特征),或者通过使用用于勾勒所研究的(在这一实施例中)心室的形状的X射线造影剂注射,或者通过将(在这一实施例中)导管放到已知位置,或者利用能够在所述二维投影图像和所述第二对象13的三维模型二者中能够容易地看到的(在这一实施例中)脊骨或肋骨。现在所述对准在两维内是正确的,所述两维是所述二维投影图像的两维。沿垂直于这两维的维的对准在最初是未知的。为了找到这一第三维,优选使投影单元旋转大约90°,并使所述三维模型相应地旋转。两个二维投影图像中的第二个对应于这一经旋转的投影方向,即,第二二维投影图像是在这一经旋转的投影方向内生成的,并使所述三维模型相对于这一第二二维投影图像进行对准。通过这种方式,能够在所有三维空间内建立二维投影图像和三维模型之间的对准。如果对投影单元进行旋转以获取新的投影方向,那么所述三维模型优选地自动随之旋转,这是由于所述投影单元将其位置参数自动发送至配准单元8。优选地在可视化单元12上将二维投影图像和经配准的第二对象13的三维模型可视化。
装置1优选还包括用于在生成第一对象14和第二对象13的二维投影图像的过程中检测第二对象的运动的运动检测单元23。在这一实施例中,运动检测单元23为检测心脏13的运动的心电图仪。在其他实施例中,运动检测单元23可以是用于实时(低潜伏时间)荧光检查的分析第二对象13的运动的图像处理软件,或者用于同样目的的实时超声成像系统。此外,所提供的第二对象13的三维模型优选地是移动的三维模型,例如,其可以由包括检测数据生成单元、图像重构单元、分段单元和表面绘制单元的三维模型生成单元生成,其中,在用于重构第二对象13的图像的检测信号的检测过程中,通过运动检测单元23检测第二对象13的运动。如果提供了移动的三维模型,并且如果在生成二维投影图像的过程中检测到了第二对象13的运动,那么配准单元8还用于相对于第二对象13的移动将移动的三维模型与二维投影图像进行配准。
可视化单元12包括成像区22。在成像区22上,优选地将第二对象13的三维模型20连同经配准的二维投影图像一起显示。此外,投影单元包括用于显示二维投影图像的显示单元21。
装置1还包括用于确定第一对象14和第二对象13之间的接触区的确定单元9,其中,所述接触区是所述第一对象14在所述第二对象13内的位置。
现在将参考图2描述接触区的确定的实施例。图2示出了发出X射线辐射17的X射线源5,所述X射线辐射穿过第一对象14和第二对象13,并生成第一对象14和第二对象13的投影图像26。确定单元9确定视线25,所述视线25将二维投影图像26上的第一对象,即这一实施例中的导管顶端与X射线源5,即,发出射线的区域,进行连接。确定单元9将这一视线25发送至可视化单元12,并且在使三维模型20连同视线25一起旋转以允许通过侧视图观看贯穿三维模型20的视线25之后,将第二对象13的三维模型和视线25显示在可视化单元12的成像区22上。确定单元9还确定视线25与三维模型20的交点27、28。还将所述交点27、28显示在成像区22上。图3的左侧部分示出了在三维模型20旋转之前显示三维模型20和经配准的二维投影图像26的成像区22。图3的中间部分示出了显示经旋转的三维模型20、经旋转的视线25、两个所确定的交点27、28以及两个假想导管和导管顶端的成像区22。用于确定第一对象在第二对象内的位置的装置1还包括选择单元10,其用于选择视线25与三维模型20的两个交点27、28中的哪一个对应于接触区的位置。选择单元优选包括诸如鼠标或键盘的输入单元11,其允许用户向选择单元10内输入信号,以选择交点27、28中的一个作为接触区。即:将由用户选择的交点作为接触区,从而,将其视为是第一对象14在第二对象13内的三维位置,即,在本实施例中,导管顶端14在心脏13的内壁上的位置。将所确定的这一第一对象14在第二对象13内的三维位置29连同三维模型20一起显示在成像区22上(图3的右侧部分)。
在另一实施例中,确定单元9可以适于如下文中参考图4a和4b所述确定接触区。在图4a中,相对于第一投影方向生成第一二维投影图像26a,确定单元9确定第一视线25a。在图4b中,使投影单元发生旋转,例如,旋转90°角,并生成第二二维投影图像26b,并且确定单元9确定第二视线25b。为了旋转投影单元,优选地将所述投影单元安装到C臂上。确定单元9确定第一视线25a和第二视线25b的交点,并将这一交点移动到与第一对象14接触的第二对象13的三维模型20的表面上。由于测量的欠准确性、非精确对准以及第二对象13的可能的运动的原因,所述交点并被定位于第二对象13的三维模型20的表面上。因而,只有在移动到第二对象13的三维模型20的表面上之后,两条视线25a、25b的经移动的确定交点才被定位于三维模型20的表面上。这一经移动的交点对应于第一对象14和第二对象13的接触区的位置,因此对应于第一对象14在第二对象13内的位置,即,所述经移动的交点的位置是所确定的第一对象14在第二对象13内的三维位置。可以将第二对象13的三维模型20连同所确定的第一对象14的三维位置一起显示在成像区22上。优选地沿所确定的交点和三维模型的表面之间的最短距离执行向所述三维模型的表面上的移动。
如上文所述,在这一实施例中,第一对象14是导管顶端,第二对象13是患者的心脏。导管顶端14可以在不同的接触区依次接触心脏13的内壁,从而例如使处于所述不同接触区上的心脏组织变性,以实施消融过程。装置1能够适于确定这些接触区的每一位置,即,这一实施例中,导管顶端14在心脏13的内壁上的三维位置,并且通过叉号或球在心脏的三维模型20上对所确定的三维位置中的每者进行标记。图5示出了在成像区22上连同三维模型20、导管4和导管顶端14的叉号18。图5还示意性地示出了肺静脉口19,其被所确定的位置18包围,在这一实施例中,所确定的位置18对应于消融点。
如果投影单元为X射线荧光检查单元,可以执行第一对象在第二对象内的三维位置的确定,使由X射线荧光检查所提供的总皮肤剂量明显地保持在针对确定性的辐射作用的任何阈值之下,即,显著低于2Gy。
为了确定视线,必须确定第一对象在二维投影图像上的位置。例如,可以通过阈值设定(thresholding)或者采用图像处理实施的图案识别自动执行这一确定。在这一实施例中,如果第一对象14是包括金属的导管顶端,那么可以通过阈值设定容易地确定导管顶端14在二维投影图像中的位置。此外,出于校正目的或者出于其他目的,用户可以入二维投影图像内的位置,其中,为了实现下述相应视线的确定,将这一输入位置视为第一对象14在二维投影图像上的位置。
可视化单元12优选适于通过所谓的“反透视法”显示第二对象13的三维模型20,所述方法将三维模型20显示为就像其是由优选地为锥形的相同X射线射束形状所投射的,其实际上生成关于第二对象13的二维投影图像。
在下文中,将参考图6所示的流程图说明根据本发明的用于确定第一对象在第二对象中的位置的方法。
在步骤101中,提供第二对象13的三维模型20。此外,在步骤102中,生成第一对象14和第二对象13的二维投影图像。在步骤103中,使第二对象13的三维模型20与二维投影图像配准。在步骤104中,确定单元将第一对象14和第二对象13之间的接触区确定为第一对象14在第二对象13内的三维位置。在步骤105中,将三维模型20连同所确定的第一对象14在第二对象13内的三维位置显示在可视化单元12上。
上述实施例描述了每次只在一个接触区上与第二对象接触的第一对象。但是,本发明不限于这样的布置。例如,第一对象可以包括几个同时接触第二对象的部分。例如,如果第一对象是消融导管以及如果第二对象是患者的心脏,那么所述消融导管可以包括能够同时接触心脏的内壁的几个电极或其他导管位点,其中,所述的用于确定第一对象在第二对象内的位置的装置适于针对所述消融导管的这些部分中的每者确定心脏内壁上的三维位置。
尽管主要以患者的心脏作为第二对象描述了本发明,但是本发明不限于患者心脏内的位置的确定。例如,第二对象还可以是诸如管线的技术对象,其中,例如,出于治疗目的必须向所述技术对象的内侧部分施加能量,其中,在所述技术对象内采用了用于施加能量的能量发射元件,并且其中,必须确定所述能量发射元件在所述技术对象内的位置。
在上述实施例中,可视化单元包括一个成像区。但是,本发明不限于可视化单元只具有一个成像区。例如,可视化单元还可以包括两个以上的成像区。此外,根据本发明,在其他实施例中,所述或者每一成像区都能够显示二维投影图像和/或第二对象的三维模型和/或所确定的第一对象在第二对象内的位置。
例如,还可以在从不同方向生成二维投影图像的过程中确定第二对象的图像,由此由二维投影图像的生成提供三维模型。
可以通过一个或几个单元实现上述单元的一些或全部。此外,例如,所述确定单元、配准单元或重构单元的执行计算和/或确定的单元,可以是运行于计算机系统上的执行相应的功能的程序代码模块或者执行相应功能的专用硬件。
可以将用于确定第一对象在第二对象内的位置的装置1与导管顶端14、导管4以及消融和感测单元3的组合视为根据本发明的通过采用能量发射的第一对象经由第二对象的表面向所述第二对象施加能量的装置,其中,能量发射的第一对象是可以为电极的导管顶端,其用于经由诸如患者的心脏的内壁的第二对象的表面向所述第二对象施加能量。
尽管在上述实施例中,已经确定了经由导管4连接至消融和感测单元3的导管顶端14在第二对象13中的位置,但是,同样可以采用用于确定第一对象在第二对象内的位置的装置确定定位于任意选择的第二对象的表面上的一个或多个其他的任意选择的第一对象的位置。
通过研究说明书的附图和权利要求,本领域技术人员能够在实践所要求保护的本发明的过程当中理解并实施针对所公开的实施例的其他变型。
尽管已经在附图和上述说明中详细示出和描述了本发明,但是应当将这样的图示和说明看作是示意性或示例性的,而非限定性的。本发明不限于所公开的实施例。
在权利要求中,词语“包括”不排除其他元件或步骤,不定冠词“一”或“一个”不排除复数。例如,在权利要求1中,也可以采用两个或更多二维投影图像确定接触区的位置。
可以将计算机程序存储/分布在适当的介质当中,例如,所述介质可以是光存储介质或者与其他硬件一起提供的或者作为其他硬件的部分的固体介质,但是,也可以使所述计算机程序通过其他形式分布,诸如,因特网或者其他有线或无线电信系统。
不应将权利要求中的附图标记理解为限制本发明的范围。

Claims (12)

1.一种用于确定第一对象(14)在第二对象(13)内的位置的装置,其中,所述第一对象(14)在接触区与所述第二对象(13)接触,所述装置包括:
-用于提供所述第二对象(13)的三维模型(20)的提供单元(2),
-用于生成所述第一对象(14)和所述第二对象(13)的二维投影图像(26)的投影单元(5、6、7、21),
-用于将所述三维模型(20)与所述二维投影图像(26)进行配准的配准单元(8),
-用于根据所述第一对象(14)在所述二维投影图像(26)和所述第二对象(13)的经配准的三维模型(20)上的位置确定所述接触区的位置的确定单元(9),所述接触区的所述位置是所述第一对象(14)在所述第二对象(13)内的位置,
其中,所述确定单元(9)适于通过确定所述第一对象(14)的视线(25)与所述三维模型(20)的表面相交的位置而确定所述接触区的位置。
2.根据权利要求1所述的装置,其中,所述投影单元(5、6、7、21)适于在不同的投影方向上生成二维投影图像(26),并且其中,所述配准单元(8)适于将所述三维模型(20)与不同的二维投影图像(26)进行配准,从而在所述不同投影方向中的每者上使所述三维模型(20)与对应的二维投影图像(26)相配准。
3.根据权利要求1所述的装置,其中,所述装置(1)还包括选择单元(10),所述选择单元(10)用于选择所述视线(25)与所述三维模型(20)的两个或更多交点(27、28)中的哪个对应于所述接触区的所述位置。
4.根据权利要求3所述的装置,其中,所述装置包括用于通过侧视图使所述三维模型(20)、所述视线(25)以及所述两个或更多交点(27、28)可视化的可视化单元(12),并且其中,所述选择单元(10)包括允许用户选择所述交点(27、28)之一作为所述接触区的所述位置的输入单元(11)。
5.根据权利要求3所述的装置,其中,所述投影单元(5、6、7、21)适于在至少两个投影方向上生成所述第一对象(14)和第二对象(13)的至少两个二维投影图像,其中,所述确定单元(9)适于确定所述接触区的所述位置,在所述位置上所述第一对象(14)的相对于所述二维投影图像之一的投影方向的视线与所述三维模型(20)相交,其中,所述选择单元适于采用其他二维投影图像的至少其中之一选择所述视线与所述三维模型(20)的两个或更多交点中的哪一个对应于所述接触区的所述位置。
6.根据权利要求1所述的装置,其中,所述投影单元(5、6、7、21)适于在至少两个投影方向上生成所述第一对象(14)和第二对象(13)的至少两个二维投影图像(26a、26b),其中,所述确定单元(9)适于针对所述至少两个投影方向确定所述第一对象(14)的至少两条视线(25a、25b),其中,所述确定单元(9)还适于确定所述至少两条视线(25a、25b)的交点,其中,所述确定单元(9)还适于将所述交点移动到所述三维模型(20)的表面上,其中,经移动的交点就是所确定的所述接触区的位置。
7.根据权利要求1所述的装置,其中,所述装置包括用于使所述三维模型(20)在所述二维投影图像(26)之上可视化的可视化单元(12),其中,所述可视化单元(12)适于同时显示所述三维模型(20)、所述二维投影图像(26)和所确定的所述第一对象(14)的位置。
8.根据权利要求7所述的装置,其中,所述可视化单元(12)适于通过所述三维模型(20)上的图形指示使所确定的所述第一对象(14)的位置可视化。
9.根据权利要求7所述的装置,其中,所述可视化单元(12)包括用于使所述三维模型(20)在所述二维投影图像(26)之上可视化的成像区(22)。
10.根据权利要求1所述的装置,
其中,所述提供单元(2)适于提供所述第二对象(13)的移动的三维模型(20),其中,所述装置还包括用于在通过所述投影单元(5、6、7、21)生成所述第一对象(14)和所述第二对象(13)的二维投影图像(26)的过程中检测所述第二对象(13)的运动的运动检测单元(23),其中,所述配准单元(8)适于将所述移动的三维模型(20)与所述二维投影图像(26)进行配准。
11.一种采用能量发射的第一对象(14)经由第二对象(13)的表面向所述第二对象(13)施加能量的装置,其中,所述能量发射的第一对象(2)在接触区与所述第二对象(13)的所述表面接触,所述装置包括根据权利要求1所述的用于确定第一对象(14)在第二对象(13)内的位置的装置。
12.一种用于确定第一对象(14)在第二对象(13)内的位置的方法,其中,所述第一对象(14)在接触区与所述第二对象(13)接触,所述方法包括下述步骤:
-提供所述第二对象(13)的三维模型(20),
-生成所述第一对象(14)和所述第二对象(13)的二维投影图像(26),
-将所述三维模型(20)与所述二维投影图像(26)进行配准,
-根据所述第一对象(14)在所述二维投影图像(26)和经配准的所述第二对象(13)的三维模型(20)上的位置确定至少一个接触区的位置,所述至少一个接触区的所述位置是所述第一对象(14)在所述第二对象(13)内的位置,其中,通过确定所述第一对象(14)的视线(25)与所述三维模型(20)的表面相交的位置而确定所述接触区的位置。
CN2007800440885A 2006-11-28 2007-11-21 用于确定第一对象在第二对象中的位置的装置 Active CN101553182B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP06124894.4 2006-11-28
EP06124894 2006-11-28
PCT/IB2007/054731 WO2008065581A2 (en) 2006-11-28 2007-11-21 Apparatus for determining a position of a first object within a second object

Publications (2)

Publication Number Publication Date
CN101553182A CN101553182A (zh) 2009-10-07
CN101553182B true CN101553182B (zh) 2012-04-25

Family

ID=39345341

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007800440885A Active CN101553182B (zh) 2006-11-28 2007-11-21 用于确定第一对象在第二对象中的位置的装置

Country Status (7)

Country Link
US (1) US10354410B2 (zh)
EP (1) EP2099378B1 (zh)
JP (1) JP5503289B2 (zh)
CN (1) CN101553182B (zh)
AT (1) ATE548987T1 (zh)
RU (1) RU2464931C2 (zh)
WO (1) WO2008065581A2 (zh)

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9789608B2 (en) 2006-06-29 2017-10-17 Intuitive Surgical Operations, Inc. Synthetic representation of a surgical robot
US9718190B2 (en) 2006-06-29 2017-08-01 Intuitive Surgical Operations, Inc. Tool position and identification indicator displayed in a boundary area of a computer display screen
US10008017B2 (en) 2006-06-29 2018-06-26 Intuitive Surgical Operations, Inc. Rendering tool information as graphic overlays on displayed images of tools
US10258425B2 (en) 2008-06-27 2019-04-16 Intuitive Surgical Operations, Inc. Medical robotic system providing an auxiliary view of articulatable instruments extending out of a distal end of an entry guide
US9089256B2 (en) 2008-06-27 2015-07-28 Intuitive Surgical Operations, Inc. Medical robotic system providing an auxiliary view including range of motion limitations for articulatable instruments extending out of a distal end of an entry guide
US9469034B2 (en) 2007-06-13 2016-10-18 Intuitive Surgical Operations, Inc. Method and system for switching modes of a robotic system
US8620473B2 (en) 2007-06-13 2013-12-31 Intuitive Surgical Operations, Inc. Medical robotic system with coupled control modes
ES2659090T3 (es) 2009-03-20 2018-03-13 Orthoscan Incorporated Aparato móvil de captación de imagen
US9492927B2 (en) 2009-08-15 2016-11-15 Intuitive Surgical Operations, Inc. Application of force feedback on an input device to urge its operator to command an articulated instrument to a preferred pose
JP5609302B2 (ja) * 2010-06-18 2014-10-22 富士通株式会社 接触定義装置、接触定義プログラム及び接触定義方法
US20120022366A1 (en) * 2010-07-21 2012-01-26 Marcus Pfister Registration of aorta to patient via two 2d images for placement of a stent
US9125611B2 (en) 2010-12-13 2015-09-08 Orthoscan, Inc. Mobile fluoroscopic imaging system
BR112013021977A2 (pt) * 2011-03-02 2018-06-12 King S College London método para visualizar informações de um objeto de interesse, dispositivo para visualizar informações de um objeto de interesse, sistema de formação de imagem médica, elemento de programa de computador e meio legível por computador
DE102011083522B4 (de) * 2011-09-27 2015-06-18 Friedrich-Alexander-Universität Erlangen-Nürnberg Verfahren und Vorrichtung zur Visualisierung der Qualität eines Ablationsvorgangs
JP5865664B2 (ja) * 2011-10-07 2016-02-17 株式会社東芝 医用画像診断装置及び医用画像処理方法
BR112015015274A2 (pt) * 2012-12-28 2017-07-11 Koninklijke Philips Nv aparelho para ver material de imagem em um ambiente de imageamento multimodal, método de visualização de material de imagem em um ambiente de imageamento multimodal, sistema de imageamento, elemento de programa de computador para controlar um aparelho, e meio legível por computador
US10507066B2 (en) 2013-02-15 2019-12-17 Intuitive Surgical Operations, Inc. Providing information of tools by filtering image areas adjacent to or on displayed images of the tools
EP3079589B1 (en) * 2013-12-11 2017-04-12 Koninklijke Philips N.V. Three dimensional (3d) pre-scan based volumetric image data processing
US20150305612A1 (en) 2014-04-23 2015-10-29 Mark Hunter Apparatuses and methods for registering a real-time image feed from an imaging device to a steerable catheter
CN106456254B (zh) 2014-05-23 2019-08-16 皇家飞利浦有限公司 用于对第二目标内的第一目标进行成像的成像装置
JP2018501834A (ja) * 2014-11-27 2018-01-25 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 投影画像における介入器具の位置を決定する装置
US10191615B2 (en) 2016-04-28 2019-01-29 Medtronic Navigation, Inc. Method and apparatus for image-based navigation
JP6796663B2 (ja) * 2016-06-22 2020-12-09 セント・ジュード・メディカル,カーディオロジー・ディヴィジョン,インコーポレイテッド 電気生理学的処置中に医療デバイスを測位するシステム
CN106994487B (zh) * 2017-05-31 2018-12-04 广船国际有限公司 一种水火弯板机焰道干预的方法
CN109985315B (zh) * 2017-12-29 2021-04-20 北京连心医疗科技有限公司 一种核磁图像引导放疗设备和存储介质
CN109925053B (zh) * 2019-03-04 2021-06-22 杭州三坛医疗科技有限公司 手术路径的确定方法、装置和系统、可读存储介质
US11304757B2 (en) 2019-03-28 2022-04-19 Synthes Gmbh Orthopedic fixation control and visualization
CN113538572A (zh) * 2020-04-17 2021-10-22 杭州三坛医疗科技有限公司 一种目标对象的坐标确定方法、装置和设备

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3152396B2 (ja) * 1990-09-04 2001-04-03 株式会社東芝 医用画像表示装置
US5156151A (en) * 1991-02-15 1992-10-20 Cardiac Pathways Corporation Endocardial mapping and ablation system and catheter probe
US5297549A (en) * 1992-09-23 1994-03-29 Endocardial Therapeutics, Inc. Endocardial mapping system
US6285898B1 (en) * 1993-07-20 2001-09-04 Biosense, Inc. Cardiac electromechanics
US5848972A (en) * 1995-09-15 1998-12-15 Children's Medical Center Corporation Method for endocardial activation mapping using a multi-electrode catheter
RU2170066C2 (ru) * 1997-05-28 2001-07-10 Акционерное общество закрытого типа "Технолазер" Устройство для воздействия на миокард с помощью лазерного излучения
US6556695B1 (en) 1999-02-05 2003-04-29 Mayo Foundation For Medical Education And Research Method for producing high resolution real-time images, of structure and function during medical procedures
US6233476B1 (en) 1999-05-18 2001-05-15 Mediguide Ltd. Medical positioning system
GB9911935D0 (en) * 1999-05-21 1999-07-21 British Broadcasting Corp Tracking of moving objects
RU2197917C1 (ru) * 2001-10-04 2003-02-10 Зао "Вниимп-Вита" Устройство для локальной холодовой радиочастотной абляции при операции на открытом сердце
DE10210646A1 (de) * 2002-03-11 2003-10-09 Siemens Ag Verfahren zur Bilddarstellung eines in einen Untersuchungsbereich eines Patienten eingebrachten medizinischen Instruments
DE10247299A1 (de) * 2002-10-10 2004-04-22 Philips Intellectual Property & Standards Gmbh Bildverarbeitungseinheit und Verfahren für die Zuordnung von gespeicherten zu aktuellen Aufnahmen
JP2007502647A (ja) * 2003-08-21 2007-02-15 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 血管造影図及び現x線画像の複合表示のための装置及び方法
US20060009755A1 (en) 2003-09-04 2006-01-12 Sra Jasbir S Method and system for ablation of atrial fibrillation and other cardiac arrhythmias
US20060024141A1 (en) * 2004-07-30 2006-02-02 Hilti Aktiengesellschaft Power tool with an intermittent angular torque pulse
US8515527B2 (en) 2004-10-13 2013-08-20 General Electric Company Method and apparatus for registering 3D models of anatomical regions of a heart and a tracking system with projection images of an interventional fluoroscopic system
DE102005007893B4 (de) * 2005-02-21 2007-05-10 Siemens Ag Verfahren zur Positionsbestimmung eines Instrumentes mit einem Röntgensystem

Also Published As

Publication number Publication date
US10354410B2 (en) 2019-07-16
RU2464931C2 (ru) 2012-10-27
JP5503289B2 (ja) 2014-05-28
WO2008065581A2 (en) 2008-06-05
EP2099378A2 (en) 2009-09-16
CN101553182A (zh) 2009-10-07
ATE548987T1 (de) 2012-03-15
US20100020161A1 (en) 2010-01-28
JP2010510822A (ja) 2010-04-08
RU2009124442A (ru) 2011-01-10
WO2008065581A3 (en) 2008-07-24
EP2099378B1 (en) 2012-03-14

Similar Documents

Publication Publication Date Title
CN101553182B (zh) 用于确定第一对象在第二对象中的位置的装置
CN1853573B (zh) 使用超声以预获取图像配准电解剖图
CN1853574B (zh) 超声数据以预获取图像的配准
KR102203544B1 (ko) C-arm 기반의 의료영상 시스템 및 2D 이미지와 3D 공간의 정합방법
CN103402453B (zh) 用于导航系统的自动初始化和配准的系统和方法
JP5883998B2 (ja) コンピュータ断層撮影システム、インターベンションシステム、コンピュータ断層撮影システムの作動方法、及びコンピュータプログラム
JP2021049416A (ja) 同時x平面撮像を用いた画像レジストレーション及び誘導
JP6776086B2 (ja) 複数目印ジグの識別及び位置合わせ
EP2680755B1 (en) Visualization for navigation guidance
CA3061191A1 (en) Tissue imaging system and method for tissue imaging
US20150302634A1 (en) Real-time scene-modeling combining 3d ultrasound and 2d x-ray imagery
KR20160076487A (ko) 영상 시스템 및 영상 진단 장치 내에 환자를 포지셔닝하는 방법
CN105408939A (zh) 用于配准成像设备与跟踪设备的配准系统
CN105611877A (zh) 引导超声图像采集的方法和系统
US20140023250A1 (en) Medical imaging systen and method for providing an image representation supporting accurate guidance of an intervention device in a vessel intervention procedure
CN105873538A (zh) 光学形状感测系统到成像系统的无辐射配准
US10806520B2 (en) Imaging apparatus for imaging a first object within a second object
CN106030266A (zh) 温度分布确定装置
CN106999130A (zh) 用于确定在投影图像中介入仪器的位置的装置
AU2020294163A1 (en) Orientation detection in fluoroscopic images
US20050203386A1 (en) Method of calibrating an X-ray imaging device
JP7463625B2 (ja) ナビゲーションサポート
WO2022165112A1 (en) Systems and methods for c-arm fluoroscope camera pose refinement with secondary movement compensation
JP7334590B2 (ja) X線透視方法およびx線透視装置
Léger et al. Evaluation of low-cost hardware alternatives for 3d freehand ultrasound reconstruction in image-guided neurosurgery

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CI01 Publication of corrected invention patent application

Correction item: International Day of publication

Correct: 20080605

False: 20080724

Number: 17

Volume: 28

CI03 Correction of invention patent

Correction item: International Day of publication

Correct: 20080605

False: 20080724

Number: 17

Page: The title page

Volume: 28

ERR Gazette correction

Free format text: CORRECT: INTERNATIONAL PROCLAMATION DATE; FROM: 2008.07.24 TO: 2008.06.05