CN113768620A - 用于手术期间的计算机辅助导航的摄像机跟踪系统的摄像机跟踪杆 - Google Patents

用于手术期间的计算机辅助导航的摄像机跟踪系统的摄像机跟踪杆 Download PDF

Info

Publication number
CN113768620A
CN113768620A CN202110641817.7A CN202110641817A CN113768620A CN 113768620 A CN113768620 A CN 113768620A CN 202110641817 A CN202110641817 A CN 202110641817A CN 113768620 A CN113768620 A CN 113768620A
Authority
CN
China
Prior art keywords
tracking
camera
cameras
stereo
wand
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110641817.7A
Other languages
English (en)
Inventor
T·卡洛韦
L·奈马克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Globus Medical Inc
Original Assignee
Globus Medical Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Globus Medical Inc filed Critical Globus Medical Inc
Publication of CN113768620A publication Critical patent/CN113768620A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25User interfaces for surgical systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/70Manipulators specially adapted for use in surgery
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361Image-producing devices, e.g. surgical cameras
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/285Analysis of motion using a sequence of stereo image pairs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/292Multi-camera tracking
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/243Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/246Calibration of cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/25Image signal generators using stereoscopic image cameras using two or more image sensors with different characteristics other than in their location or field of view, e.g. having different resolutions or colour pickup characteristics; using image signals from one sensor to control the characteristics of another sensor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/254Image signal generators using stereoscopic image cameras in combination with electromagnetic radiation sources for illuminating objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/296Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/54Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/71Circuitry for evaluating the brightness variation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/74Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/20Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/005Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017Electrical control of surgical instruments
    • A61B2017/00203Electrical control of surgical instruments with speech control or speech recognition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017Electrical control of surgical instruments
    • A61B2017/00207Electrical control of surgical instruments with hand gesture control or hand gesture recognition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/101Computer-aided simulation of surgical operations
    • A61B2034/105Modelling of the patient, e.g. for ligaments or bones
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107Visualisation of planned trajectories or target regions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/108Computer aided selection or customisation of medical implants or cutting guides
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2048Tracking techniques using an accelerometer or inertia sensor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2055Optical tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2055Optical tracking systems
    • A61B2034/2057Details of tracking cameras
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2063Acoustic tracking systems, e.g. using ultrasound
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2065Tracking using image or pattern recognition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2068Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis using pointers, e.g. pointers having reference marks for determining coordinates of body points
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25User interfaces for surgical systems
    • A61B2034/252User interfaces for surgical systems indicating steps of a surgical procedure
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/06Measuring instruments not otherwise provided for
    • A61B2090/064Measuring instruments not otherwise provided for for measuring force, pressure or mechanical tension
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • A61B2090/365Correlation of different images or relation of image positions in respect to the body augmented reality, i.e. correlating a live optical image with another image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • A61B2090/367Correlation of different images or relation of image positions in respect to the body creating a 3D dataset from 2D images using position information
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/371Surgical systems with images on a monitor during operation with simultaneous use of two cameras
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/372Details of monitor hardware
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/376Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/376Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
    • A61B2090/3762Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy using computed tomography systems [CT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/50Supports for surgical instruments, e.g. articulated arms
    • A61B2090/502Headgear, e.g. helmet, spectacles
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/44Constructional features of apparatus for radiation diagnosis
    • A61B6/4429Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units
    • A61B6/4435Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units the source unit and the detector unit being coupled by a rigid structure
    • A61B6/4441Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units the source unit and the detector unit being coupled by a rigid structure the rigid structure being a C-arm or U-arm
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • G06T2207/10021Stereoscopic video; Stereoscopic image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10048Infrared image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00Details of stereoscopic systems
    • H04N2213/001Constructional or mechanical details

Abstract

一种用于手术期间的计算机辅助导航的摄像机跟踪系统的摄像机跟踪杆。该摄像机跟踪杆包括第一组立体跟踪摄像机,其具有第一分辨率、第一视场并且在摄像机跟踪杆上以第一基线距离间隔开。摄像机跟踪杆还包括第二组立体跟踪摄像机,其具有第二分辨率、第二视场并且在摄像机跟踪杆上以小于第一基线距离的第二基线距离间隔开。第二组立体跟踪摄像机定位于第一组立体跟踪摄像机之间,并且第二组立体跟踪摄像机的分辨率和/或视场与第一组立体跟踪摄像机的分辨率和/或视场不同。通信接口将摄像机视频流提供给摄像机跟踪子系统。

Description

用于手术期间的计算机辅助导航的摄像机跟踪系统的摄像机 跟踪杆
技术领域
本公开涉及医疗装置和系统,并且更具体地,涉及手术期间用于计算机辅助导航的摄像机跟踪系统。
背景技术
手术期间的计算机辅助导航可以为外科医生提供相对于患者解剖的医学图像的手术工具的当前位姿的计算机化的可视化。用于计算机辅助导航的摄像机跟踪系统使用一或多个立体摄像机系统来跟踪一组基准点,这些基准点附接至手术工具上,该手术工具由外科医生或其他用户在手术期间中进行定位。一组基准点,也称为动态参考阵列,允许摄像机跟踪系统用于确定手术工具相对于医学图像中的解剖结构以及相对于患者的位姿,以便显示给外科医生。因此,外科医生可以在手术过程期间使用实时位姿反馈来导航手术工具。
当所跟踪对象被移动到摄像机系统的跟踪区域之外或者由于介入人员和/或器械而被阻碍不能从摄像机查看时,使用现有导航系统的导航手术过程易于发生触发间歇暂停的事件。还需要改进导航系统的跟踪精度。
发明内容
本文所公开的各个实施例涉及手术期间的计算机辅助导航的改进。
一些实施例针对公开了用于手术期间的计算机辅助导航的摄像机跟踪系统的摄像机跟踪杆。摄像机跟踪杆包括第一组立体跟踪摄像机,其具有第一分辨率、第一视场,并且在摄像机跟踪杆上以第一基线距离间隔开。摄像机跟踪杆还包括第二组立体跟踪摄像机,其具有第二分辨率、第二视场并且在摄像机跟踪杆上以小于第一基线距离的第二基线距离间隔开。第二组立体跟踪摄像机定位于第一组立体跟踪摄像机之间,并且第二组立体跟踪摄像机的分辨率和/或视场与第一组立体跟踪摄像机的分辨率和/或视场不同。摄像机跟踪杆还包括通信接口,该通信接口被配置为将来自第一组立体跟踪摄像机和第二组立体跟踪摄像机的视频流提供给摄像机跟踪子系统。
公开了用于由摄像机跟踪系统执行的操作和方法的相关实施例。
在审阅以下附图和详细描述之后,根据实施例的其它摄像机跟踪杆、摄像机跟踪系统、计算机程序产品和方法对于本领域技术人员来说将是或变得显而易见的。预期所有此类摄像机跟踪杆、摄像机跟踪系统、计算机程序产品和方法包含在本说明书中、在本公开的范围之内且受所附权利要求的保护。此外,意图是可以以任何方式和/或组合来单独或组合实现本文公开的所有实施例。
附图说明
附图展示了发明概念的一些非限制性实施例,所述附图被包含在内以提供对本公开的进一步理解,并且结合在本申请内并构成本申请的一部分。在附图中:
图1示出了根据本公开的一些实施例的手术系统的实施例;
图2示出了根据本公开的一些实施例的图1的手术系统的手术机器人组件;
图3A示出了根据本公开的一些实施例的图1的手术系统的摄像机跟踪系统组件;
图3B和3C示出了根据本公开的一些实施例的可以与图1的手术系统一起使用的另一个摄像机跟踪系统组件的正视图和等距视图;
图4示出了可连接到机器人臂并且根据本公开的一些实施例配置的末端执行器的实施例;
图5示出了医疗操作,其中手术机器人和摄像机系统被安置在患者周围;
图6示出了用于医疗操作的图5的手术系统的组件的框图视图;
图7示出了在使用手术系统的导航功能时可以在图5和图6的显示器上显示的各种显示屏;
图8示出了根据本公开的一些实施例的手术机器人的一些电组件的框图;
图9示出了根据本公开的一些实施例的手术系统的组件的框图,所述手术系统包含连接到可以操作性地连接至摄像机跟踪系统和/或手术机器人的计算机平台的成像装置;
图10示出了根据本公开的一些实施例的可以与手术机器人组合使用的C形臂成像装置的实施例;
图11示出了根据本公开的一些实施例的可以与手术机器人组合使用的O形臂成像装置的实施例;
图12示出了包含根据本公开的一些实施例进行操作的一对XR头戴装置和辅助跟踪杆的手术系统的组件的框图视图;
图13示出了根据本公开的一些实施例配置的XR头戴装置;
图14示出了根据本公开的一些实施例的可以操作性地连接到计算机平台、一或多个成像装置和/或手术机器人的XR头戴装置的电组件;
图15示出了示出根据本公开的一些实施例的XR头戴装置的光学组件的布置的框图;
图16示出了根据本公开的一些实施例的通过用于在医疗程序期间提供导航辅助以操纵手术工具的XR头戴装置的显示屏的示例视图;
图17示出了根据本公开的一些实施例配置的具有两对立体摄像机的辅助跟踪杆的示例性配置;
图18示出了包含根据本公开的一些实施例共同操作的一对XR头戴装置和辅助跟踪杆中的包含跟踪摄像机的手术系统的组件的框图视图;
图19示出了根据本公开的一些实施例的所公开的摄像机跟踪杆的主要组件的一些实施例。
图20和图21示出了根据本公开的一些实施例的由第一组立体跟踪摄像机产生的跟踪体积;
图22和图23示出了根据本公开的一些实施例的由第二组立体跟踪摄像机产生的跟踪体积;
图24和图25示出了根据本公开的一些实施例的第一组立体跟踪摄像机和第二组立体跟踪摄像机的模拟三角测量精度;
图26示出了根据本公开的一些实施例的应用于第一组和第二组立体跟踪摄像机输出的视频帧的双通过滤光器;
图27示出了根据本发明的一些实施例的在其上具有反向反射球体的反向反射跟踪阵列;和
图28和图29示出了根据本公开的一些实施例的由摄像机跟踪子系统执行的操作的流程图。
具体实施方式
现将参考附图在下文中更全面地描述发明概念,在附图中示出了发明概念的实施例的示例。发明概念可以以许多不同的形式实施,并且不应该被解释为限于本文列出的实施例。而是这些实施例被提供为使得本公开更完全和完整,并且将各个本发明概念的范围完全地转达给所属领域技术人员。还应当注意,这些实施例并不相互排斥。一个实施例中的组件可以被默认为存在于另一实施例中或在另一个实施例中使用。
本文所公开的各个实施例涉及手术期间的计算机辅助导航的改进。公开了一种摄像机跟踪系统的摄像机跟踪杆,其包括第一组立体跟踪摄像机,其具有第一分辨率、第一视场并且在摄像机跟踪杆上以第一基线距离间隔开。摄像机跟踪杆还包括第二组立体跟踪摄像机,其具有第二分辨率、第二视场并且在摄像机跟踪杆上以小于第一基线距离的第二基线距离间隔开。第二组立体跟踪摄像机定位于第一组立体跟踪摄像机之间,并且第二组立体跟踪摄像机的分辨率和/或视场与第一组立体跟踪摄像机的分辨率和/或视场不同。摄像机跟踪杆还包括通信接口,该通信接口被配置为将来自第一组立体跟踪摄像机和第二组立体跟踪摄像机的视频流提供给摄像机跟踪子系统。公开了各种摄像机配置和操作,其使得摄像机跟踪杆能够为手术期间的计算机辅助导航提供改进的对象跟踪。
图1示出了根据本公开的一些实施例的手术系统2的实施例。在执行矫形或其它手术过程之前,可以使用例如图10的C形臂成像装置104或图11的O形臂成像装置106,或从如计算机断层扫描(CT)图像或MRI的另一个医学成像装置、对患者的有计划的手术区进行三维(“3D”)图像扫描。可以在术前(例如,最常见的在过程前几周)或术中进行这种扫描。然而,可以根据手术系统2的各个实施例来使用任何已知的3D或2D图像扫描。图像扫描发送到与手术系统2通信的计算机平台,如手术系统900的计算机平台910(图9),所述手术系统可以包含摄像机跟踪系统组件6、手术机器人4(例如,图1中的机器人2)、成像装置(例如,C形臂104、O形臂106等)以及用于存储患者的图像扫描的图像数据库950。查看计算机平台910(图9)的显示装置上的一或多个图像扫描的外科医生产生限定要在对患者的解剖结构进行的手术过程期间使用的手术工具的目标位姿的手术计划。实例手术工具,也称为工具,可以包含但不限于钻孔机、螺丝刀、锯子、牵开器和诸如螺钉、间隔器、椎间融合装置、板、棒等的植入物。在一些实施例中,在显示装置上显示的3D图像扫描上规划限定目标平面的手术计划。
如本文所使用,术语“位姿”是指一个对象(例如,动态参考阵列、末端执行器、手术工具、解剖结构等)相对于另一对象和/或限定的坐标系的位置和/或旋转角度。因此,位姿可以仅基于一个对象相对于另一个对象和/或限定的坐标系的多维位置、仅基于所述对象相对于另一个对象和/或限定的坐标系的多维旋转角度或结合多维位置和多维旋转角度来限定。因此,术语“位姿”用于指位置、旋转角度或其组合。
图1的手术系统2可以在医疗程序期间通过例如供使用的保持工具、对齐工具、使用工具、引导工具和/或定位工具来辅助外科医生。在一些实施例中,手术系统2包含手术机器人4和摄像机跟踪系统组件6。将手术机器人4和摄像机跟踪系统组件6机械联接的能力可以允许手术系统2作为单个单元来操纵并移动,并且允许手术系统2在区域中具有小的占用空间,允许更容易的通过狭窄的通道和绕过转弯的移动,并且允许存储在较小的区域之内。
手术过程可以开始于手术系统2从医疗存储室移动到医疗程序室。可以通过门道、大厅和电梯操纵手术系统2以到达医疗程序室。在所述医疗程序室内,手术系统2可以在物理上分成两个单独且不同的系统(手术机器人4和摄像机跟踪系统组件6)。手术机器人4可以定位成在任何合适的位置邻近患者,以适当地辅助医务人员。摄像机跟踪系统组件6可以定位在患者的底部、在患者肩部或任何其它适合于跟踪手术机器人4和患者的轨道部分的当前位姿和位姿移动的位置。手术机器人4和摄像机跟踪系统组件6可以由机载电源供电和/或插入到外墙插座中。
手术机器人4可以用于通过在医疗程序期间保持和/或使用工具来辅助外科医生。为了适当地利用并保持工具,手术机器人4可以依靠多个马达、计算机和/或致动器来适当地起作用。如图1所示出的,机器人主体8可以充当其中多个马达、计算机和/或致动器可以固定在手术机器人4内的结构。机器人主体8还可以为机器人伸缩式支撑臂16提供支撑。机器人主体8的大小可以提供支撑附接组件的稳固平台,并且可以容纳、隐藏并保护可以操作附接组件的多个马达、计算机和/或致动器。
机器人底座10可以充当手术机器人4的下部支撑。在一些实施例中,机器人底座10可以支撑机器人主体8,并且可以将机器人主体8附接到多个动力轮12。这种与轮的附接可以允许机器人主体8在空间中有效地移动。机器人底座10可以沿机器人主体8的长度和宽度运行。机器人底座10可以是约两英寸到约10英寸高。机器人底座10可以覆盖、保护并支撑动力轮12。
在一些实施例中,如图1所示出的,至少一个动力轮12可以附接到机器人底座10。动力轮12可以在任何位置附接到机器人底座10。每个单独的动力轮12可以在任何方向上绕竖直轴线旋转。马达可以安置在动力轮12的上方、之内或邻近其安置。这种马达可以允许手术系统2操纵到任何位置,并且稳定和/或调平手术系统2。可以通过马达将位于动力轮12之内或邻近其的杆压入表面中。未示出的杆可以由任何合适的金属制成,以提升手术系统2。所述杆可以将动力轮10(其可以提升手术系统2)提升到调平或以其它方式固定手术系统2相对于患者的定向所需的任何高度。手术系统2的重量通过每个轮上的杆的小接触区域支撑,防止手术系统2在医疗程序期间移动。此刚性定位可以防止对象和/或人意外地移动手术系统2。
可以使用机器人轨道14促进移动手术系统2。机器人轨道14给人提供了在未抓住机器人主体8的情况下移动手术系统2的能力。如图1所示出的,机器人轨道14的长度可以和机器人主体8一样长、比机器人主体8短,和/或可以比机器人主体8更长。机器人轨道14可以进一步向机器人主体8提供保护,从而防止对象和/或医务人员接触、撞击或撞到机器人主体8。
机器人主体8可以为选择顺应性铰接式机器人臂提供支撑,在下文中被称为“SCARA”。由于机械臂的可重复性和紧凑性,在手术系统2内使用SCARA 24可能是有利的。SCARA的紧凑性可以在医疗程序内提供另外的空间,这可以允许医疗专业人员在没有过多杂乱和限制区域的情况下执行医疗程序。SCARA 24可以包括机器人伸缩式支撑件16、机器人支撑臂18和/或机器人臂20。机器人伸缩式支撑件16可以沿机器人主体8安置。如图1所示出的,机器人伸缩式支撑件16可以为SCARA 24和显示器34提供支撑。在一些实施例中,机器人伸缩式支撑件16可以在竖直方向上延伸并收缩。机器人伸缩式支撑件16的主体可以是被配置成支撑放在其上的应力和重量的任何宽度和/或高度。
在一些实施例中,医务人员可以通过由医务人员提交的命令来移动SCARA 24。如将在下面进一步详细解释的,命令可以源自在显示器34、平板计算机和/或XR头戴装置(例如,图9中的头戴装置920)上接收到的输入。XR头戴装置可以消除医务人员参考如显示器34或平板计算机等任何其它显示器的需要,这使得能够在没有显示器34和/或平板计算机的情况下配置SCARA 24。如将在下面进一步详细解释的,命令可以通过按压开关和/或按压多个开关来生成,和/或可以基于由XR头戴装置感测到的手势命令和/或语音命令来生成。
如图5中所示出的,激活组合件60可以包含开关和/或多个开关。激活组合件60可以是可操作的以向SCARA 24传输移动命令,从而允许操作者手动操纵SCARA 24。当按压开关或多个开关时,医务人员可以具有通过所应用的手部移动来移动SCARA 24的能力。可替代地或另外地,如将在下面进一步详细解释的,操作者可以通过由XR头戴装置感测到的手势命令和/或语音命令来控制SCARA 24的移动。另外地,当SCARA 24未接收到移动的命令时,SCARA 24可以锁定在适当的位置以防止由医务人员和/或其它对象意外移动。通过锁定在适当的位置,SCARA 24提供了稳固平台,通过所述稳固平台,末端执行器26可以在医疗程序期间引导手术工具。
机器人支撑臂18可以通过各种机构连接到机器人伸缩式支撑件16。在一些实施例中,最佳参见图1和2,机器人支撑臂18相对于机器人伸缩式支撑件16在任何方向上旋转。机器人支撑臂18可以围绕机器人伸缩式支撑件16旋转三百六十度。机器人臂20可以在任何合适的位置并通过使得能够相对于机器人支撑臂18在任何方向上旋转的各种机构连接到机器人支撑臂18。在一个实施例中,机器人臂20可相对于机器人支撑臂18旋转三百六十度。这种自由旋转允许操作者根据手术计划对机器人臂20进行定位。
图4和图5中的末端执行器26以在任何合适的位置附接到机器人臂20。末端执行器26被配置成附接到由手术机器人4定位的机器人臂20的末端执行器联接器22。实例末端执行器26包含引导插入式手术工具相对于要被执行手术过程的解剖结构的移动的管状引导件。
在一些实施例中,动态参考阵列52附接到末端执行器26。动态参考阵列(在本文中也称为“DRA”和“参考阵列”)可以是刚体、可附接或形成于由手术室中的人员佩戴的一或多个XR头戴装置上的标示物或其它标记、末端执行器、手术机器人、导航手术过程中的手术工具和患者的解剖结构(例如骨头)。计算机平台910与摄像机跟踪系统组件6或其它3D定位系统的组合被配置成实时跟踪DRA的位姿(例如,位置和旋转定向)。DRA可以包含基准点,如球的所示出布置。对DRA的3D坐标的这种跟踪可以允许手术系统2确定DRA在相对于图5中的患者50的目标解剖结构的任何多维空间中的位姿。
如图1所示出的,光指示器28可以定位于SCARA 24的顶部。光指示器28可以作为任何类型的光点亮,以指示其中手术系统2当前操作的“状况”。在一些实施例中,光可以由LED灯产生,所述灯可以围绕光指示器28形成环。光指示器28可以包括可以让光透过整个光指示器28的完全可渗透材料。光指示器28可以附接到下部显示器支撑件30。如图2所示出的,下部显示器支撑件30可以允许操作者操纵显示器34到任何合适的位置。下部显示器支撑件30可以通过任何合适的机构附接到光指示器28。在一些实施例中,下部显示器支撑件30可以绕光指示器28旋转或刚性附接到所述光指示器。上部显示器支撑件32可以通过任何合适的机构附接到下部显示器支撑件30。
在一些实施例中,平板计算机可以与显示器34结合使用和/或在没有显示器34的情况下使用。平板计算机可以安置在上部显示器支撑件32上以代替显示器34,并且可以能够在医疗操作期间从上部显示器支撑件32移除。另外,平板计算机可以与显示器34通信。平板计算机能够通过任何合适的无线和/或有线连接连接到手术机器人4。在一些实施例中,平板计算机能够在医疗操作期间对手术系统2进行编程和/或控制。当用平板计算机控制手术系统2时,所有输入和输出命令都可以在显示器34上复制。使用平板计算机可以允许操作者操纵手术机器人4,而不必围绕患者50和/或手术机器人4移动。
如下面将解释的,在一些实施例中,外科医生和/或其它人员可以佩戴可以与显示器34和/或平板计算机结合使用的XR头戴装置,或者一或多个XR头戴装置可以消除使用显示器34和/或平板计算机的需要。
如图3A和5所示出的,摄像机跟踪系统组件6通过有线或无线通信网络与手术机器人4组合工作。参考图1、图3和图5,摄像机跟踪系统组件6可以包含与手术机器人4类似的一些组件。例如,摄像机主体36可以提供在机器人主体8中发现的功能。机器人主体8可以提供摄像机46安装在其上的辅助跟踪杆。机器人主体8内的结构还可以为用于操作摄像机跟踪系统组件6的电子设备、通信装置和电源提供支撑。摄像机主体36可以由与机器人主体8相同的材料制成。摄像机跟踪系统组件6可以通过无线和/或有线网络与XR头戴装置、平板计算机和/或显示器34直接通信,以使得XR头戴装置、平板计算机和/或显示器34能够控制摄像机跟踪系统组件6的功能。
摄像机主体36由摄像机底座38支撑。摄像机底座38可以用作机器人底座10。在图1的实施例中,摄像机底座38可以比机器人底座10宽。摄像机底座38的宽度可以允许摄像机跟踪系统组件6与手术机器人4连接。如图1所示出的,摄像机底座38的宽度可以足够大以适合机器人底座10的外部。当摄像机跟踪系统组件6与手术机器人4连接时,摄像机底座38的另外的宽度可以允许手术系统2为手术系统2提供另外的可操作性和支撑。
如同机器人底座10,多个动力轮12可以附接到摄像机底座38。类似于机器人底座10和动力轮12的操作,动力轮12可以允许摄像机跟踪系统组件6相对于患者50稳定和调平或设置固定定向。这种稳定可以防止摄像机跟踪系统组件6在医疗程序期间移动,并且可以防止辅助跟踪杆上的摄像机46失去对连接到XR头戴装置和/或手术机器人4的DRA的跟踪和/或失去对连接到如图3A和5所示出的指定区56内的解剖结构54和/或工具58的一或多个DRA 52的跟踪。跟踪的这种稳定性和维护增强了手术机器人4与摄像机跟踪系统组件6一起有效操作的能力。另外地,宽摄像机底座38可以为摄像机跟踪系统组件6提供另外的支撑。具体地,如图3A和5所示出的,当摄像机46安置在患者之上时,宽摄像机底座38可以防止摄像机跟踪系统组件6倾翻。
摄像机伸缩式支撑件40可以支撑辅助跟踪杆上的摄像机46。在一些实施例中,伸缩式支撑件40可以在竖直方向上将摄像机46向更高或更低处移动。摄像机手柄48可以在任何合适的位置附接到摄像机伸缩式支撑件40,并且被配置成允许操作者在医疗操作之前将摄像机跟踪系统组件6移动到计划的位置。在一些实施例中,摄像机手柄48可以用于降低和升高摄像机伸缩式支撑件40。摄像机手柄48可以通过按压按钮、开关、杠杆和/或其任何组合来执行摄像机伸缩式支撑件40的升高和降低。
下部摄像机支撑臂42可以在任何合适的位置附接到摄像机伸缩式支撑件40,在实施例中,如图1所示出的,下部摄像机支撑臂42可以围绕伸缩式支撑件40旋转三百六十度。这种自由旋转可以允许操作者将摄像机46定位在任何合适的位置。下部摄像机支撑臂42可以通过任何合适的机构连接到伸缩式支撑件40。下部摄像机支撑臂42可以用于为摄像机46提供支撑。摄像机46可以通过任何合适的机构附接到下部摄像机支撑臂42。摄像机46可以在摄像机46与下部摄像机支撑臂42之间的附接区域在任何方向上枢转。在实施例中,弯曲轨道44可以安置在下部摄像机支撑臂42上。
弯曲轨道44可以安置在下部摄像机支撑臂42上的任何合适的位置。如图3A所示出的,弯曲轨道44可以通过任何合适的机构附接到下部摄像机支撑臂42。弯曲轨道44可以是任何合适的形状,合适的形状可以是新月形、圆形、扁形、椭圆形和/或其任何组合。摄像机46可以沿弯曲轨道44可移动地安置。摄像机46可以通过例如辊、支架、支具、马达和/或其任何组合附接到弯曲轨道44。未示出的马达和辊可以用于沿弯曲轨道44移动摄像机46。如图3A所示出的,在医疗程序期间,如果对象阻止摄像机46观察所跟踪的一或多个DRA,则马达可以响应地沿弯曲轨道44移动摄像机46。这种机动化移动可以允许摄像机46在没有移动摄像机跟踪系统组件6的情况下移动到不再被对象阻碍的新位置。当阻碍到摄像机46观察一或多个所跟踪DRA时,摄像机跟踪系统组件6可以向手术机器人4、XR头戴装置、显示器34和/或平板计算机发送停止信号。停止信号可以阻止SCARA 24移动,直到摄像机46已经重新获取所跟踪的DRA 52和/或可以警告操作者佩戴XR头戴装置和/或观看显示器34和/或平板计算机为止。这个SCARA 24可以被配置成通过停止底座和/或末端执行器联接器22的进一步移动直到所述摄像机跟踪系统可以重新开始对DRA的跟踪为止来对停止信号的接收作出响应。
图3B和3C示出了可以与图1的手术系统一起使用或可以独立于手术机器人使用的另一个摄像机跟踪系统组件6'的正视图和等距视图。例如,摄像机跟踪系统组件6'可以用于在不使用机器人引导的情况下提供被导航手术。图3B和3C的摄像机跟踪系统组件6'与图3A的摄像机跟踪系统组件6之间的区别之一是图3B和3C的摄像机跟踪系统组件6'包含用于运输计算机平台910的壳体。计算机平台910可以被配置成:执行摄像机跟踪操作以跟踪DRA;执行向显示装置(例如,XR头戴装置和/或其它显示装置)提供手术导航信息的被导航手术操作;并且执行本文所公开的其它计算操作。因此,计算机平台910可以包含导航计算机,如图14的导航计算机中的一或多个导航计算机。
图6示出了用于医疗操作的图5的手术系统的组件的框图视图。参考图6,辅助跟踪杆上的跟踪摄像机46具有在其中对附接到患者的参考阵列602、附接到手术器械的参考阵列604和机器人臂20的位姿(例如,位置和定向)进行跟踪的导航视场600。跟踪摄像机46可以是包含被配置成执行下面描述的操作的计算机平台910的图3B和图3C的摄像机跟踪系统组件6'的一部分。参考阵列通过以已知模式反射光来实现跟踪,所述已知模式被手术机器人4的跟踪子系统解码以确定所述参考阵列的相应位姿。如果患者参考阵列602与辅助跟踪杆上的跟踪摄像机46之间的视线被阻挡(例如,由医务人员、器械等),则可能无法对手术器械进行进一步导航,并且响应式通知可以暂时停止机器人臂20和手术机器人4的进一步移动、在显示器34上显示警告,和/或向医务人员提供听觉警告。显示器34可供外科医生610和助手612使用,但是查看需要将头转动远离患者并将眼焦点改变到不同的距离和位置。导航软件可以由技术人员614基于来自外科医生的声音指令来控制。
图7示出了在使用手术系统2的导航功能时可以通过手术机器人4在图5和图6的显示器34上显示的各种显示屏。显示屏可以包含但不限于具有基于开发的手术计划和/或基于所跟踪的参考阵列的位姿相对于解剖结构定位在显示屏中的器械模型的覆盖图形表示的患者射线照片、用于控制手术过程的不同阶段以及虚拟投射的植入物的尺寸参数(例如,长度、宽度和/或直径)的各种用户可选择菜单。
对于被导航手术,提供了下面描述的使得能够对手术过程(例如,植入物放置)进行术前计划以及将计划电子传递到计算机平台910以在计划的手术过程期间向一或多个用户提供导航信息的各种处理组件(例如,计算机平台910)和相关联软件。
对于机器人导航,提供了下面描述的使得能够对手术过程(例如,植入物放置)进行术前计划以及将计划电子传递到手术机器人4的各种处理组件(例如,计算机平台910)和相关联软件。手术机器人4使用计划来引导机器人臂20和连接的末端执行器26,以针对计划的手术过程的步骤提供手术工具相对于患者解剖结构的目标位姿。
下面的各个实施例涉及使用可以由外科医生610、助手612和/或其它医务人员佩戴的一或多个XR头戴装置以提供用于从手术机器人、摄像机跟踪系统组件6/6'和/或手术室中的其它医疗设备接收信息和/或向其提供控制命令的改进的用户界面。
图8示出了根据本公开的一些实施例的手术机器人4的一些电组件的框图。参考图8,测力传感器(load cell,未示出)可以被配置成跟踪施加到末端执行器联接器22的力。在一些实施例中,测力传感器可以与多个马达850、851、852、853和/或854通信。当测力传感器感测到力时,关于所施加的力的量的信息可以从开关阵列和/或多个开关阵列分布到控制器846。控制器846可以从测力传感器获取力信息,并且用开关算法对其进行处理。控制器846使用开关算法来控制马达驱动器842。马达驱动器842控制一或多个马达850、851、852、853和/或854的操作。马达驱动器842可以指导特定马达产生例如由测力传感器通过马达测得的等量的力。在一些实施例中,如控制器846所指示的,所产生的力可以来自多个马达,例如850至854。另外地,马达驱动器842可以从控制器846接收输入。控制器846可以从测力传感器接收关于由测力传感器感测到的力的方向的信息。控制器846可以使用运动控制器算法来处理这个信息。所述算法可以用于向特定马达驱动器842提供信息。为了复制力的方向,控制器846可以激活和/或去激活某些马达驱动器842。控制器846可以控制一或多个马达,例如850至854中的一或多个,以诱导末端执行器26在由测力传感器感测的力的方向上的运动。这种力控制的运动可以允许操作者毫不费力地和/或以非常小的阻力移动SCARA24和末端执行器26。可以执行末端执行器26的移动,以将末端执行器26以任何合适的位姿定位(即,相对于限定的三维(3D)正交参考轴线的位置和角度定向),以供医务人员使用。
图5最佳示出的,激活组合件60可以缠绕末端执行器联接器22的手镯的形式。激活组合件60可以定位于SCARA 24的任何部分、末端执行器联接器22的任何部分上,可以由医务人员佩戴(并且无线通信),和/或其任何组合。激活组合件60可以包括主按钮和次按钮。
按压主按钮可以允许操作者移动SCARA 24和末端执行器联接器22。根据一个实施例,一旦设置在适当位置,SCARA 24和末端执行器联接器22可以不移动直到操作者对手术机器人4进行编程以移动SCARA 24和末端执行器联接器22为止,或使用主按钮来移动。在一些实例中,可能需要在SCARA 24和末端执行器联接器22将对操作者命令作出响应之前按压至少两个不相邻的主激活开关。按压至少两个主激活开关可以防止SCARA 24和末端执行器联接器22在医疗程序期间的意外移动。
由主按钮激活,测力传感器可以测量由操作者(即,医务人员)施加在末端执行器联接器22上的力的量值和/或方向。这个信息可以传递到SCARA 24内的可以用于移动SCARA24和末端执行器联接器22的一或多个马达,例如850至854中的一或多个。关于由测力传感器测得的力的量值和方向的信息可以使一或多个马达(例如,850至854中的一或多个)在与由测力传感器感测到的同一方向上移动SCARA 24和末端执行器联接器22。这种力控制的移动可以允许操作者容易地移动SCARA 24和末端执行器联接器22,并且由于在操作者移动SCARA 24和末端执行器联接器22的同时马达移动SCARA 24和末端执行器联接器22,所以不需要大量的努力。
在一些实例中,操作者可以将次级按钮用作“选择”装置。在医疗操作期间,手术机器人4可以通过一或多个XR头戴装置920、显示器34和/或光指示器28通知医务人员某些情况。一或多个XR头戴装置920各自被配置成将图像显示于透视显示屏上,以形成覆盖在通过透视显示屏可观看的真实世界对象上的扩展现实图像。手术机器人4可以提示医务人员选择功能、模式和/或评估手术系统2的情况。按压次按钮单次可以激活某些功能、模式和/或确认通过一或多个XR头戴装置920、显示器34和/或光指示器28传送给医务人员的信息。另外地,快速连续地按压次按钮多次可以激活另外的功能、模式和/或选择通过一或多个XR头戴装置920、显示器34和/或光指示器28传送给医务人员的信息。
进一步参考图8,手术机器人4的电组件包含平台子系统802、计算机子系统820、运动控制子系统840和跟踪子系统830。平台子系统802包含电池806、配电模块804、连接器面板808和充电站810。计算机子系统820包含计算机822、显示器824和扬声器826。运动控制子系统840包含驱动电路842、马达850、851、852、853、854、稳定器855、856、857、858、末端执行器连接器844和控制器846。跟踪子系统830包含位置传感器832和摄像机转换器834。手术机器人4还可以包含可移除脚踏板880和可移除平板计算机890。
输入功率通过可以提供给配电模块804的电源供应给手术机器人4。配电模块804接收输入功率,并且被配置成生成提供给手术机器人4的其它模块、组件和子系统的不同的电源电压。配电模块804可以被配置成向连接器面板808提供不同的电压供应,所述电压供应可以提供给其它组件(如计算机822、显示器824、扬声器826、驱动器842)以例如给马达850至854和末端执行器联接器844供电,并且提供给摄像机转换器834和用于手术机器人4的其它组件。配电模块804还可以连接到电池806,所述电池在配电模块804未从输入电源接收电力的情况下充当临时电源。在其它时间,配电模块804可以用于给电池806充电。
连接器面板808可以用于将不同的装置和组件连接到手术机器人4和/或相关联组件和模块。连接器面板808可以含有从不同组件接收线路或连接件的一或多个端口。例如,连接器面板808可以具有将手术机器人4接地到其它设备的接地端端口、用于连接脚踏板880的端口、用于连接到跟踪子系统830的端口,所述跟踪子系统可以包含位置传感器832、摄像机转换器834和摄像机跟踪杆870。连接器面板808还可以包含其它端口,以允许与其它组件(如计算机822)的USB、以太网、HDMI通信。根据一些实施例,连接器面板808可以包含有线和/或无线接口以用于将一或多个XR头戴装置920可操作地连接到跟踪子系统830和/或计算机子系统820。
控制面板816可以提供控制手术机器人4的操作和/或提供来自手术机器人4的信息以供操作者观察的各种按钮或指示器。例如,控制面板816可以包含用于打开或关闭手术机器人4、提升或降低竖直柱16以及提升或降低稳定器855至858的按钮,所述稳定器可以被设计成接合脚轮12以锁定手术机器人4而不物理上移动。其它按钮可以在发生紧急情况时停止手术机器人4,这可以移除所有马达功率并应用机械制动器来停止所有运动发生。控制面板816还可以具有通知操作者某些系统情况的指示器(如线路功率指示器)或电池806的充电状态。根据一些实施例,一或多个XR头戴装置920可以例如通过连接器面板808进行通信,以控制手术机器人4的操作和/或接收并显示由手术机器人4生成的信息以供佩戴XR头戴装置920的人员观察。
计算机子系统820的计算机822包含用于操作手术机器人4的指定功能的操作系统和软件。计算机822可以接收并处理来自其它组件(例如,跟踪子系统830、平台子系统802和/或运动控制子系统840)的信息,以便向操作者显示信息。进一步地,计算机子系统820可以通过扬声器826为操作者提供输出。扬声器可以是所述手术机器人的一部分、XR头戴装置920的一部分,或在手术系统2的另一个组件内。显示器824可以对应于图1和图2所示出的显示器34。
跟踪子系统830可以包含位置传感器832和摄像机转换器834。跟踪子系统830可以对应于图3的摄像机跟踪系统组件6。摄像机跟踪杆870与位置传感器832一起操作,以确定DRA 52的位姿。可以与本公开一致的方式进行此跟踪,所述跟踪包含使用分别跟踪DRA 52(如LED或反射基准点(也称为标示物))的有源元件或无源元件的位置的红外光或可见光技术。
跟踪子系统830和计算机子系统820的功能操作可以包含在可以由图3A和图3B的摄像机跟踪系统组件6'传输的计算机平台910中。跟踪子系统830可以被配置成确定位姿,例如所跟踪的DRA的位置和角度定向。计算机平台910还可以包含导航控制器,所述导航控制器被配置成使用所确定的位姿来向用户提供引导它们在计划的手术过程期间相对于定位配准的患者图像和/或所跟踪的解剖结构移动所跟踪的工具的导航信息。计算机平台910可以在图3B和图3C的显示器上和/或向一或多个XR头戴装置920显示信息。当与手术机器人一起使用时,计算机平台910可以被配置成与计算机子系统820和图8的其它子系统通信以控制末端执行器26的移动。例如,如下面将解释的,计算机平台910可以生成患者的解剖结构、手术工具、用户的手等的图形表示,其具有基于一或多个所跟踪的DRA的所确定的位姿进行控制的所显示的大小、形状、颜色和/或位姿,并且所显示的图形表示可以被动态修改以跟踪所确定的位姿随时间的变化。
运动控制子系统840可以被配置成物理地移动竖直柱16、上部臂18、下部臂20,或旋转末端执行器联接器22。可以通过使用一或多个马达850至854来进行物理移动。例如,马达850可以被配置成竖直提升或降低竖直柱16。如图2所示出的,马达851可以被配置成围绕与竖直柱16的接合点侧向移动上部臂18。如图2所示出的,马达852可以被配置成围绕与上部臂18的接合点侧向移动下部臂20。马达853和854可以被配置成移动末端执行器联接器22,以提供沿三维轴线的平移移动和围绕其的旋转。图9所示出的计算机平台910可以向控制器846提供引导末端执行器联接器22的移动的控制输入,以相对于在计划的手术过程期间要对其进行操作的解剖结构以计划的位姿(即,相对于限定的3D正交参考轴线的位置和角度定向)定位连接到其的被动末端执行器。运动控制子系统840可以被配置成使用集成的位置传感器(例如,编码器)来测量末端执行器联接器22和/或末端执行器26的位置。
图9示出了根据本公开的一些实施例的手术系统的组件的框图,所述手术系统包含连接到可以操作性地连接到摄像机跟踪系统组件6(图3A)或6'(图3B、3C)和/或手术机器人4的计算机平台910的成像装置(例如,C形臂104、O形臂106等)。可替代地,本文所公开的由计算机平台910执行的至少一些操作可以另外地或可替代地由手术系统的组件来执行。
参考图9,计算机平台910包含显示器912、至少一个处理器电路914(为简洁起见也被称为处理器)、含有计算机可读程序代码918的至少一个存储器电路916(为简洁起见也被称为存储器)和至少一个网络接口902(为简洁起见也被称为网络接口)。显示器912可以是根据本公开的一些实施例的XR头戴装置920的一部分。网络接口902可以被配置成连接到图10中的C形臂成像装置104、图11中的O形臂成像装置106、另一个医学成像装置、含有患者医学图像的图像数据库950、手术机器人4的组件和/或其它电子设备。
当与手术机器人4一起使用时,显示器912可以对应于图2的显示器34和/或图8的平板计算机890和/或可操作地连接到手术机器人4的XR头戴装置920,网络接口902可以对应于图8的平台网络接口812,并且处理器914可以对应于图8的计算机822。XR头戴装置920的网络接口902可以被配置成根据一种或多种无线通信协议(例如,WLAN、3GPP 4G和/或5G(新无线电)蜂窝通信标准等)通过有线网络(例如,细线以太网)和/或通过无线RF收发器链路进行通信。
处理器914可以包含一或多个数据处理电路,如通用和/或专用处理器,例如微处理器和/或数字信号处理器。处理器914被配置成执行存储器916中的计算机可读程序代码918以执行操作,所述操作可以包含本文中描述为针对手术计划、被导航手术和/或机器人手术执行的操作中的一些或所有操作。
计算机平台910可以被配置成提供手术计划功能。处理器914可以操作以在显示装置912上和/或XR头戴装置920上显示通过网络接口920从成像装置104和106之一和/或从图像数据库950接收的解剖结构(例如,椎骨)的图像。处理器914接收操作者对在一或多个图像中示出的解剖结构要进行手术过程(例如,螺钉放置)的位置的限定,如通过操作者触摸选择显示器912上用于计划的手术过程的位置或使用基于鼠标的光标来限定用于计划的手术过程的位置。如将在下面进一步详细解释的,当在XR头戴装置920中显示图像时,所述XR头戴装置可以被配置成感测由佩戴者形成的基于手势的命令和/或感测由佩戴者说出的基于语音的命令,所述命令可以用于控制菜单项之间的选择和/或控制如何在XR头戴装置920上显示对象。
计算机平台910可以被配置成能够进行对膝关节手术可能特别有用的解剖测量,类似于对确定臀部中心、角度中心、天然标志(例如,股骨通髁线(transepicondylarline)、白侧线(Whitesides line)、股骨后髁线(posterior condylar line)等)等的各个角度的测量。一些测量可以是自动的,而一些其它测量可以涉及人为输入或辅助。计算机平台910可以被配置成允许操作者输入对患者来说正确的植入物的选择,包含大小和对齐的选择。计算机平台910可以被配置成对CT图像或其它医学图像进行自动或半自动(涉及人为输入)分割(图像处理)。患者的手术计划可以存储在可以对应于数据库950的基于云的服务器中,以供手术机器人4检索。
例如,在矫形手术期间,外科医生可以通过例如XR头戴装置920使用计算机屏幕(例如,触摸屏)或扩展现实(XR)交互(例如,基于手势的命令和/或基于语音的命令)来选择要进行切割的部位(例如,后股骨、胫骨近端等)。计算机平台910可以生成向外科医生提供视觉引导以执行手术过程的导航信息。当与手术机器人4一起使用时,计算机平台910可以提供允许手术机器人4自动将末端执行器26移动到目标位姿使得手术工具与目标位置对齐以对解剖结构进行手术过程的引导。
在一些实施例中,手术系统900可以使用两个DRA来跟踪患者解剖位置,如连接到患者胫骨的DRA和连接到患者股骨的DRA。系统900可以使用标准被导航器械以进行配准和检查(例如,类似于Globus ExcelsiusGPS系统中用于进行脊柱手术的指针)。
导航手术中的特别具有挑战性的任务是如何计划植入物在脊柱、膝盖和其它解剖结构中的位置,在所述位置处,外科医生努力在计算机屏幕上执行所述任务,其是3D解剖结构的2D表示。系统900可以通过使用XR头戴装置920来显示解剖结构和候选植入装置的三维(3D)计算机生成的表示来解决这个问题。在计算机平台910的引导下,计算机生成的表示相对于彼此在显示屏上缩放并摆放,并且可以由外科医生在通过XR头戴装置920进行查看时对其进行操纵。外科医生可以例如使用由XR头戴装置920感测到的基于手势的命令和/或基于语音的命令来操纵解剖结构、植入物、手术工具等的所显示的计算机生成的表示。
例如,外科医生可以观看虚拟植入物上的所显示的虚拟手柄,并且可以操纵(例如,抓握和移动)虚拟手柄以将虚拟植入物移动到期望的位姿并且相对于解剖结构的图形表示调整计划的植入物放置。之后,在手术期间,计算机平台910可以通过XR头戴装置920显示有助于外科医生更加准确地遵循手术计划来插入植入物和/或对解剖结构进行另一个手术过程的能力的导航信息。当手术过程涉及骨骼移除时,骨骼移除的进展(例如,切割深度)可以通过XR头戴装置920实时显示。可以通过XR头戴装置920显示的其它特征可以包含但不限于沿关节运动范围的间隙或韧带平衡、植入物上的沿关节运动范围的接触线、通过颜色或其它图形渲染的韧带张力和/或松弛度等。
在一些实施例中,计算机平台910可以允许计划标准手术工具和/或植入物的使用,例如后稳定型植入物和十字状保留型植入物、骨水泥型和非骨水泥型植入物、用于与例如全膝关节或部分膝关节和/或髋关节置换和/或创伤相关的手术的修正系统。
自动成像系统可以与计算机平台910结合使用,以获取解剖结构的术前、术中、术后和/或实时图像数据。图10和图11示出了示例自动成像系统。在一些实施例中,自动成像系统是C形臂104(图10)成像装置或O形臂
Figure BDA0003108170640000161
106(图11)。(在美国科罗拉多州路易斯维尔设有营业地点的美敦力导航公司(Medtronic Navigation,Inc.)拥有O形臂
Figure BDA0003108170640000162
的版权)。可能期望从许多不同的位置对患者进行x射线检查,而不需要频繁地对患者进行手动重新定位,这在x射线系统中是可能需要的。C形臂104x射线诊断设备可以解决频繁手动重新定位的问题,并且在手术和其它介入手术的医学领域中是众所周知的。如图10所示出的,C形臂包含终止于“C”形的相对远端112的细长C形构件。C形构件附接到x射线源114和图像接收器116。臂的C形臂104内的空间为医生照顾患者提供了基本上不受X射线支撑结构的干扰空间。
将C形臂安装成使得臂能够在两个自由度上旋转移动(即,在球形运动中围绕两个垂直轴线)。C形臂可滑动地安装到x射线支撑结构上,这允许C形臂围绕其曲率中心进行轨道旋转移动,这可以允许x射线源114和图像接收器116选择性的竖直和/或水平定向。C形臂还可以是侧向上可旋转的(即,在相对于轨道运行方向的垂直方向上,以使得能够相对于患者的宽度和长度选择性地调整X射线源114和图像接收器116的定位)。C形臂设备的球形旋转方面允许医生以相对于被成像的特定解剖条件确定的最佳角度对患者进行x射线检查。
图11中示出的O形臂
Figure BDA0003108170640000163
106包含台架壳体124,其可以包围未示出的图像捕获部分。图像捕获部分包含x射线源部分和/或x射线发射部分以及x射线接收部分和/或图像接收部分,所述部分可以彼此相距约一百八十度安置,并且相对于图像捕获部分的轨道安装在转子(未示出)上。图像捕获部分可以在图像采集期间操作性地旋转三百六十度。图像捕获部分可以绕中心点和/或轴线旋转,从而允许从多个方向或在多个平面中获取患者的图像数据。
带有台架壳体124的O形臂
Figure BDA0003108170640000164
106具有用于围绕要成像的对象定位的中心开口、可围绕台架壳体124的内部旋转的辐射源,所述辐射源可以适于从多个不同的投射角度投射辐射。检测器系统适于检测每个投射角度下的辐射,从而以准同时的方式从多个投射平面获取对象图像。台架可以以悬臂方式附接到支撑结构O形臂
Figure BDA0003108170640000165
支撑结构,如带有轮子的轮式移动推车。定位单元优选地在计算机化运动控制系统的控制下将台架平移和/或倾斜到计划的定位和朝向。台架可以包含在台架上彼此相对安置的源和检测器。可以将源和检测器固定到机动转子上,所述机动转子可以使源和检测器围绕台架的内部彼此组合旋转。可以在部分和/或完整的三百六十度旋转中在多个位置和定向上对源进行脉冲化,以对定位于台架内部的目标对象进行多平面成像。台架可以进一步包括用于在转子旋转时引导转子的轨道和轴承系统,所述轨道和轴承系统可以承载源和检测器。O形臂
Figure BDA0003108170640000171
106和C形臂104两者和/或其中之一可以用作自动成像系统,以扫描患者并将信息发送到手术系统2。
由成像系统捕获到的图像可以显示于XR头戴装置920和/或手术系统900的计算机平台910、手术机器人4和/或另一个组件的另一个显示装置上。XR头戴装置920可以例如通过计算机平台910连接到成像装置104和/或106中的一或多个成像装置和/或图像数据库950,以从其中显示图像。用户可通过XR头戴装置920提供控制输入,例如,基于手势和/或语音的命令以控制成像装置104和/或106中的一或多个成像装置和/或图像数据库950的操作。
图12示出了包含一对XR头戴装置920(头戴式显示器HMD1和HMD2)的手术系统的组件的框图视图,所述XR头戴装置可对应于图13中展示的XR头戴装置920并根据本公开的一些实施例进行操作。
参考图12的实例情境,助手612和外科医生610两者分别佩戴XR头戴装置920。助手612任选地佩戴XR头戴装置920。如下文将进一步描述,XR头戴装置920被配置成向佩戴者提供可以通过其观看与手术过程有关的信息并与所述信息交互的交互式环境。此基于交互式XR的环境可消除对在手术室中存在图6中展示的技术人员614的需要,且可消除对使用图6中展示的显示器34的需要。每一XR头戴装置920可以包含被配置成提供跟踪DRA或附接到手术工具、患者的解剖结构、末端执行器26和/或其它设备的其它参考阵列的另外的源的一或多个摄像机。在图12的实例中,XR头戴装置920具有用于跟踪DRA和其它对象的视场(FOV)1202,XR头戴装置920具有用于跟踪DRA和其它对象的与FOV 1202部分重叠的FOV 1212,且跟踪摄像机46具有用于跟踪DRA和其它对象的与FOV 1202和1212部分重叠的另一FOV 600。
如果一或多个摄像机受阻于查看附接到所跟踪对象(例如,手术工具)的DRA,但DRA在一或多个其它摄像机的视图中,则跟踪子系统830和/或导航控制器828可以继续无缝地跟踪对象,而不会失去导航。另外,如果从一台摄像机的视角来看DRA被部分遮挡,但整个DRA通过多个摄像机源可见,则可以合并摄像机的跟踪输入以继续对DRA进行导航。XR头戴装置中的一个和/或跟踪摄像机46可查看和跟踪另一XR头戴装置上的DRA以使计算机平台910(图9和图14)、跟踪子系统830和/或另一计算组件能够确定例如XR头戴装置920、跟踪摄像机46的DRA相对于一或多个限定的坐标系和/或限定用于患者、桌子和/或房间的另一坐标系的位姿。
XR头戴装置920可以可操作的方式连接以查看视频、图片和/或其它所接收信息和/或提供控制手术室中的各种设备的命令,包含但不限于神经监测、显微镜、摄像机和麻醉系统。可在头戴装置内处理且显示来自各种设备的数据,例如显示患者的生命体征或显微镜馈送。
示例XR头戴装置组件以及与被导航手术、手术机器人和其它设备的集成
图13示出了根据本公开的一些实施例配置的XR头戴装置920。XR头戴装置包含被配置成将XR头戴装置固定到佩戴者的头部的头带1306、由头带1306支撑的电子组件外壳1304和跨电子组件外壳1304侧向延伸并从其向下延伸的显示屏1302。显示屏1302可以是透视LCD显示装置或将由显示装置投射的图像朝佩戴者的眼睛反射的半反射透镜。一组DRA基准点1310(例如,点状部)以间隔开的已知方式喷涂或附接到头戴装置的一侧或两侧上。头戴装置上的DRA使辅助跟踪杆上的跟踪摄像机能够跟踪头戴装置920的位姿和/或使另一XR头戴装置能够跟踪头戴装置920的位姿。
显示屏1302作为将来自显示装置的显示面板的光朝向用户的眼睛反射的透视显示屏(也被称为组合器)进行操作。显示面板可以定位于电子组件外壳与用户的头部之间,并且成一定角度以将虚拟内容朝向显示屏1302投射以朝向用户的眼睛反射。显示屏1302是半透明和半反射的,从而允许用户看到覆盖在真实世界场景的用户视图上的所反射的虚拟内容。显示屏1302可以具有不同的不透明度区域,如所示出的其不透明度比下部横向带高的上部侧向带。显示屏1302的不透明度可以被电控以调节来自真实世界场景的光穿过到达用户的眼睛的量。显示屏1302的高不透明度配置使得高对比度虚拟图像覆盖在真实世界场景的昏暗视图上。显示屏1302的低不透明度配置可以使得更模糊的虚拟图像覆盖在真实世界场景的较清楚视图上。可通过在显示屏1302的表面上涂敷不透明材料来控制不透明度。
根据一些实施例,手术系统包含XR头戴装置920和XR头戴装置控制器,例如图14中的控制器1430。XR头戴装置920被配置成在手术过程期间由用户佩戴且具有透视显示屏1302,所述透视显示屏被配置成显示XR图像且允许真实世界场景的至少一部分穿过其中以供用户查看。XR头戴装置920还包含不透明度滤光器,所述不透明度滤光器在透视显示屏1302由用户进行观看时定位于用户的眼睛中的至少一只眼睛与真实世界场景之间。所述不透明度滤光器被配置成向来自真实世界场景的光提供不透明性。XR头戴装置控制器被配置成与导航控制器(例如,图14中的一或多个控制器828A、828B和/或828C)通信以从导航控制器接收在对解剖结构进行的手术过程期间向所述用户提供引导的导航信息,并且进一步被配置成基于导航信息生成XR图像以在透视显示屏1302上进行显示。
显示屏1302的不透明度可以被配置为具有随着从显示屏1302的顶部部分向下的距离而更连续变化的不透明度的梯度。梯度的最暗点可以定位于显示屏1302的顶部部分处,并在显示屏1302上进一步向下逐渐变得较不透明,直到不透明度变透明或不存在为止。在另外的示例实施例中,梯度可以大约在显示屏1302的中眼水平处从约90%不透明度改变成完全透明。在正确校准并放置头戴装置的情况下,中眼水平可以对应于用户将会直视的点,并且梯度的末端将定位于眼睛的“水平”线。梯度的较暗部分将允许虚拟内容的清晰明确的视觉并且有助于阻挡高架手术室灯的侵入亮度。
以这种方式使用不透明度滤光器使得XR头戴装置920能够通过基本上或完全阻挡来自真实世界场景的光沿显示屏1302的上部部分来提供虚拟真实(VR)功能并沿着显示屏1302的中间或下部部分提供AR功能。这允许用户在有需要并且在程序期间允许对患者解剖使用明确光学器件的位置具有半透明的AR。将显示屏1302配置为梯度而不是更恒定的不透明度带可以使佩戴者在更VR类型的视图与更AR类型的视图之间体验更自然的过渡,而不会体验真实世界场景的亮度以及可以如在上下视图之间进行更快速的移位期间以其它方式使眼睛疲劳的景深的突变。
显示面板和显示屏1302可以被配置成提供宽视场透视XR显示系统。在一个示例性配置中,它们为用户提供了80°对角线视场(FOV)和55°竖直覆盖范围以供用户查看虚拟内容。其它对角线FOV角度和竖直覆盖范围角可以通过不同大小的显示面板、不同曲率的透镜和/或显示面板与弯曲的显示屏1302之间的不同距离和角度定向来提供。
图14示出了根据本公开的一些实施例的XR头戴装置920的电组件,所述XR头戴装置可以可操作地连接到计算机平台910、成像装置中的一或多个成像装置(如C形臂成像装置104、O形臂成像装置106)和/或图像数据库950和/或手术机器人800。
XR头戴装置920提供用于执行被导航手术过程的改进的人机界面。XR头戴装置920可以被配置成例如通过计算机平台910提供功能,所述功能包含但不限于以下任何一或多个:标识基于手势的命令和/或基于语音的命令、在显示装置1450上显示XR图形对象。显示装置1450可以是将所显示的XR图形对象投射到显示屏1302上的视频投影仪、平板显示器等。用户可以将XR图形对象视为锚定到通过显示屏1302(图13)观看到的特定真实世界对象的覆盖图。XR头戴装置920可以另外地或可替代地配置为在显示屏1450上显示来自安装到一或多个XR头戴装置920和其它摄像机的摄像机的视频馈送。
XR头戴装置920的电组件可以包含多个摄像机1440、麦克风1442、手势传感器1444、位姿传感器(例如,惯性测量单元(IMU))1446、包含显示装置1450的显示模块1448,和无线/有线通信接口1452。如下面所解释的,XR头戴装置的摄像机1440可以是可见光捕获摄像机、近红外捕获摄像机或两者的组合。
摄像机1440可以被配置成作为手势传感器1444通过为了标识而捕获在一或多个摄像机1440的视场内执行的用户手势来进行操作。可替代地,手势传感器1444可以是感测接近手势传感器1444执行的手势和/或感测物理接触(例如,轻敲传感器或外壳1304)的接近度传感器和/或触摸传感器。位姿传感器1446(例如,IMU)可以包含多轴加速度计、倾斜传感器和/或可以感测XR头戴装置920沿一或多个限定的坐标轴的旋转和/或加速度的另一个传感器。这些电组件中的一些或全部电组件可以含有在组件外壳1304中或可以含有在被配置成在其它地方(如在臀部或肩膀上)佩戴的另一个外壳中。
如上文所解释的,手术系统2包含摄像机跟踪系统组件6/6'和跟踪子系统830,所述跟踪子系统可以是计算机平台910的一部分。手术系统可以包含成像装置(例如,C形臂104、O形臂106和/或图像数据库950)和/或手术机器人4。跟踪子系统830被配置成确定附接到解剖结构、末端执行器、手术工具等的DRA的位姿。导航控制器828被配置成基于限定要使用手术工具对解剖结构执行手术过程的位置的手术计划(例如,根据由图9的计算机平台910执行的手术计划功能)并基于通过跟踪子系统830确定的解剖结构的位姿确定手术工具相对于解剖结构的目标位姿。导航控制器828可进一步被配置成基于手术工具的目标位姿、解剖结构的位姿以及手术工具和/或末端执行器的位姿产生转向信息,其中所述转向信息指示手术机器人的手术工具和/或末端执行器应当被移动到何处以执行手术计划。XR头戴装置920的各种摄像机1440可连接到摄像机跟踪系统组件6/6'以跟踪DRA、用户的手等的位姿。
XR头戴装置920的电组件可以通过有线/无线接口1452可操作地连接到计算机平台910的电组件。XR头戴装置920的电组件可以例如通过计算机平台910操作性地连接或通过有线/无线接口1452直接连接到各种成像装置(例如,C形臂成像装置104、I/O形臂成像装置106、图像数据库950)和/或其它医疗设备。
手术系统2进一步包含至少一个XR头戴装置控制器1430(为简洁起见也被称为“XR头戴装置控制器”),其可以驻留在XR头戴装置920、计算机平台910中和/或在通过有线电缆和/或无线通信链路连接的另一个系统组件中。XR头戴装置控制器1430执行的软件提供各种功能。XR头戴装置控制器1430被配置成从导航控制器828接收在对解剖结构进行的手术过程期间向用户提供引导的导航信息,并且被配置成基于导航信息生成XR图像以在显示装置1450上进行显示,以投射在透视显示屏1302上。
显示装置1450相对于显示屏(也被称为“透视显示屏”)1302的配置被配置成以使得XR图像在佩戴XR头戴装置920的用户通过显示屏1302观看时似乎是在真实世界中的方式显示XR图像。显示屏1302可以通过头带1306定位于用户的眼睛前面。
XR头戴装置控制器1430可以在被配置成在观看显示屏1302时佩戴在用户头部或用户身体上的其它部位上的壳体内,或可以在通信连接到显示屏1302时远离观看显示屏1302的用户定位。XR头戴装置控制器1430可以被配置成操作性地处理来自摄像机1440、麦克风142和/或位姿传感器1446的信令,并且连接以在显示装置1450上显示XR图像以在显示屏1302上供用户观看。因此,示出为XR头戴装置920内的电路框的XR头戴装置控制器1430应被理解为操作性地连接到XR头戴装置920的其它所示出组件,但不必驻留在公共壳体(例如,图13的电子组件外壳1304)内或可以其它方式由用户运输。例如,AR头戴装置控制器1430可以驻留在计算机平台910内,所述计算机平台进而可以驻留在图3B和图3C所示出的计算机跟踪系统6'的壳体内。
实例XR头戴装置组件光学布置
图15示出了根据本公开的一些实施例的展示XR头戴装置920的光学组件的布置的框图。参考图15,显示装置1450被配置成显示由XR头戴装置控制器1430产生的XR图像,来自所述XR图像的光作为XR图像1500被投射到显示屏1302。显示屏1302被配置成将XR图像1500的光和来自真实世界场景1502的光组合成组合增强视图1504,所述增强视图被引导到用户的眼睛1510。以此方式配置的显示屏1302充当透视显示屏。XR头戴装置920可以包含任何多个跟踪摄像机1440。摄像机1440可以是可见光捕获摄像机、近红外捕获摄像机或两者的组合。
通过XR头戴装置的示例性用户视图
XR头戴装置操作可以在显示屏1302上显示2D图像和3D模型两者。2D图像可以优选地在显示屏1302的较不透明的带(上部带)中显示,并且3D模型可以更优选地在显示屏1302的较透明的带(以其它方式被称为环境区域)(底带)中显示。在显示屏1302结束的下部带的下方,佩戴者可以无阻挡地观看到手术室。注意,在显示屏1302上显示XR内容的位置可以是流体的。显示3D内容的位置可能会取决于头戴装置相对于内容的定位而移动到不透明带,并且显示2D内容的位置可以被放置在透明带中并相对于真实世界稳定。另外地,整个显示屏1302可以在电控制下变暗,以将头戴装置转换成用于手术计划的虚拟现实或在医疗程序期间完全透明。如上文所解释的,XR头戴装置920和相关联操作不仅支持被导航程序,而且可以与机器人辅助程序结合执行。
图16示出了根据本公开的一些实施例的通过用于在医疗程序期间向操纵手术工具1602的用户提供导航辅助的XR头戴装置920的显示屏1302的示例视图。参考图16,当将手术工具1602带到所跟踪的解剖结构附近使得连接到手术工具1602的动态参考阵列1630和1632变得在摄像机1440(图15)和/或46(图6)的视场内时,工具的图形表示1600可以相对于解剖结构的图形表示1610以2D和/或3D图像显示。用户可以使用所观看的图形表示来调整手术工具1602的轨迹1620,所述轨迹可以示出为从工具的图形表示2000延伸通过解剖结构的图形表示1610。XR头戴装置920还可以显示文本信息和其它对象1640。跨所观看的显示屏延伸的虚线1650表示不同不透明度水平上带与下带之间的示例划分。
可以在显示屏1302上显示的其它类型的XR图像(虚拟内容)可以包含但不限于以下中的任何一或多个:
I)患者解剖的2D轴向、矢状和/或冠状视图;
2)计划的工具和手术植入物位置对当前跟踪的工具和手术植入物位置的覆盖图;
3)术前图像库;
4)来自显微镜和其它类似系统的视频馈送或远程视频会议;
5)选项和配置设置以及按钮;
6)具有手术计划信息的患者解剖的浮动3D模型;
7)相对于浮动患者解剖的手术器械的实时跟踪;
8)具有指令和引导的患者解剖的增强覆盖图;和
9)手术设备的增强覆盖图。
用于跟踪系统组件的摄像机的示例性配置
图17示出了根据本公开的一些实施例配置的具有两对立体跟踪摄像机的辅助跟踪杆46的示例性配置。辅助跟踪杆46是图3A、图3B和图3C的摄像机跟踪系统组件的一部分。根据一个实施例,立体跟踪摄像机包含一对立体的间隔开的可见光捕获摄像机和另一对立体的间隔开的近红外捕获摄像机。可替换地,在辅助跟踪杆46中可以只使用一对可见光捕获摄像机或者只使用一对近红外捕获摄像机。可以使用任何数量的近红外和/或可见光摄像机。
位姿测量链
如上文所解释,导航手术可以包含计算机视觉跟踪和确定手术器械的位姿(例如,在六自由度坐标系中的位置和定向),例如通过确定包含以已知方式布置到摄像机跟踪系统的间隔开的例如盘或球的基准点的所附接DRA的位姿。计算机视觉使用被配置成捕获近红外光和/或可见光的间隔开的跟踪摄像机,例如立体摄像机。在此情境下,有三个参数共同竞争优化:手术过程期间的(1)精度、(2)稳定性和(3)用户人机工程学。
计算机操作可通过结合安装到一或多个XR头戴装置的额外跟踪摄像机,以可以提高上述三个参数中的一或多个的优化的方式组合(链接)所测量的位姿。如图17所示,根据本公开的一些实施例,可以将一对立体可见光跟踪摄像机和另一对立体近红外跟踪摄像机附接到摄像机跟踪系统组件的辅助跟踪杆。公开了操作算法,其分析被完全观察或部分观察的DRA的位姿(例如,当通过一对立体摄像机观察不到DRA的所有基准点时),并且以能够在导航手术期间提高精度、稳健性和/或人体工程学的方式组合观察到的位姿或部分位姿。
如上文所解释的,XR头戴装置可以被配置成用计算机生成的XR图像增强真实世界场景。XR头戴装置可以被配置成通过在透视显示屏上显示计算机生成的XR图像来提供XR观看环境,所述透视显示屏允许来自真实世界场景的光穿过其中以供用户组合观看。可替代地,XR头戴装置可以被配置成通过防止或基本上防止来自真实世界场景的光被用户沿所显示的XR图像的观看路径直接观看而提供VR观看环境。XR头戴装置可以被配置成提供AR观看环境和VR观看环境两者。在一个实施例中,AR观看环境和VR观看环境两者均由布置在透视显示屏与真实世界场景之间的具有显著不同不透明度的侧向带提供,使得为与高不透明度带对齐的XR图像提供VR观看环境并为与低不透明度带对齐的XR图像提供AR观看环境。在另一个实施例中,AR观看环境和VR观看环境两者均通过可计算机调整控制的透明度滤光器来提供,该滤光器可变地约束有多少来自真实世界场景的光穿过透视显示屏,以便与用户观看的XR图像进行组合。因此,XR头戴装置也可以被称为AR头戴装置或VR头戴装置。
如上文所解释的,XR头戴装置可以包含被配置成跟踪连接到手术器械、患者解剖结构、一或多个其它XR头戴装置和/或机器人末端执行器的DRA的基准点的近红外跟踪摄像机和/或可见光跟踪摄像机。在XR头戴装置上使用近红外跟踪和/或可见光跟踪提供超出单个辅助跟踪杆上的摄像机可以提供的另外的跟踪体积覆盖范围。向现有的辅助跟踪杆添加近红外跟踪摄像机允许与在可见光下相比更稳健地但较不准确地跟踪头戴装置位置。使用立体匹配来共同标识可见跟踪坐标系与近红外跟踪坐标系之间的DRA基准点的位姿使可见跟踪坐标系和近红外跟踪坐标系机械校准使坐标系能够充分对齐以执行3D DRA基准点三角测量操作。使用可见和近红外跟踪坐标系两者可以实现以下任何一或多个:(a)标识使用单一坐标系无法标识的工具;(b)提高位姿跟踪精度;(c)在不失去对手术器械、患者解剖结构和/或机器人末端执行器的跟踪的情况下实现更宽范围的运动;以及(d)在与所导航手术器械相同的坐标系中自然地跟踪XR头戴装置。
图18示出了手术系统的组件的框图视图,所述手术系统包含一对XR头戴装置920(头戴显示器HMD1和HMD2)中的跟踪摄像机和容纳计算机平台910的摄像机跟踪系统组件6'中的摄像机跟踪杆中的跟踪摄像机。计算机平台910可包含跟踪子系统830、导航控制器828和XR头戴装置控制器1430,如先前在图14中所展示。
参考图18的手术系统,外科医生和助手都分别佩戴XR头戴装置HMD1 920和HMD2920,若每一XR头戴装置包含可如图13所展示配置的跟踪摄像机。助手任选地佩戴XR头戴装置HMD2 920。
XR头戴装置HMD1 920和HMD2 920与辅助跟踪杆上的跟踪摄像机46的组合可以在与计算机平台910一起操作时更稳健地跟踪患者参考阵列(R)、机器人末端执行器(E)和手术工具(T)或器械的示例对象。由XR头戴装置HMD1 920和HMD2 920以及辅助跟踪杆上的跟踪摄像机46提供的来自不同视角的重叠视图在图12中示出。
图18中标记项中的每个表示唯一的坐标系。坐标系标签的说明如下:
A=第二头戴装置HMD2 920的可见光坐标系;
N3=第二头戴装置HMD2 920的NIR坐标系;
S=主头戴装置HMD1 920的可见光坐标系;
N2=主头戴装置HMD1 920的NIR坐标系;
N=辅助导航杆46的NIR坐标系;
V=辅助导航杆46的可见光坐标系;
R=患者参考基准阵列602的NIR坐标系;
T=所跟踪的工具604的NIR坐标系;
E=机器人臂20上的所跟踪的机器人末端执行器的NIR坐标系;以及
W=具有稳定重力向量的惯性导航世界坐标系。
在制造过程中,当设备安装在手术室中时,和/或在要执行手术过程之前,可以测量和校准这些标记对象中的一些的空间关系(并且通过扩展、坐标系)。在所公开的系统中,校准以下坐标系:
Figure BDA0003108170640000241
其中术语“T”被限定为两个指定坐标系之间的六自由度(6DOF)齐次变换。因此,例如,项
Figure BDA0003108170640000242
是主头戴装置HMD1 920的可见光坐标系与主头戴装置HMD1920的NIR坐标系之间的6DOF齐次变换。
在一个实施例中,XR头戴装置HMD1 920和HMD2 920具有喷涂或以其它方式附接到其(坐标系S和A)上的无源可见光基准点,例如图13中所示的参考阵列基准点1310。跟踪摄像机在空间上被校准到这些无源基准点(坐标系N2和N3)。
如上文所解的释,XR头戴装置HMD1 920HMD2 920上的摄像机和辅助跟踪杆上的跟踪摄像机46具有部分重叠的视场。如果XR头戴装置HMD1 920上的一或多个摄像机被阻挡而无法查看附接到所跟踪对象,例如所跟踪工具(T)的DRA,但DRA在另一XR头戴装置HMD2 920的摄像机和/或辅助跟踪杆上的跟踪摄像机46的视野内,则计算机平台910可以继续无缝地跟踪DRA而不丢失导航。另外,如果从XR头戴装置HMD1 920上的摄像机的视角来看DRA被部分遮挡,但整个DRA通过另一XR头戴装置HMD2 920的摄像机和/或辅助跟踪杆上的跟踪摄像机46可见,则可以合并摄像机的跟踪输入以继续对DRA进行导航。
更确切地说,通过独立观察由XR头戴装置HMD1 920和HMD2 920提供的各种摄像机系统和辅助跟踪杆上的跟踪摄像机46,可以将各种坐标系链接在一起。例如,XR头戴装置HMD1 920和HMD2 920中的每一个可能需要机器人末端执行器(E)的虚拟增强。虽然一个XR头戴装置HMD1 920(N2)和辅助跟踪杆(N)上的跟踪摄像机46能够看见(E),但可能另一XR头戴装置HMD2 920(N3)无法看见。(E)相对于(N3)的位置仍然可以通过若干种不同的操作方法之一来计算。根据一个实施例的操作执行来自患者参考(R)的位姿的链接。如果患者参考(R)由(N3)和(N)或(N2)中的任一个看到,则(E)相对于(N3)的位姿可直接由以下两个方程中的任一个求解:
Figure BDA0003108170640000251
-或-
Figure BDA0003108170640000252
对这种位姿链的关键是推断每个链末端的帧之间的关系(在下面画圈并传送)。链可以是任意长的,且通过具有一个以上的立体摄像机系统(例如,N、N2、N3)来实现。
摄像机跟踪系统可以被配置成在手术过程期间从第一跟踪摄像机(例如,N3)和第二跟踪摄像机(例如,N2)接收与所跟踪对象相关的跟踪信息。摄像机跟踪系统可以基于来自第一跟踪摄像机(例如,N3)的指示第一对象(例如,R)的位姿的第一对象跟踪信息来确定第一对象(例如,R)坐标系与第一跟踪摄像机(例如,N3)坐标系之间的第一位姿变换例如,
Figure BDA0003108170640000253
)。摄像机跟踪系统可以基于来自第二跟踪摄像机(例如,N2)的指示第一对象(例如,R)的位姿的第一对象跟踪信息来确定第一对象(例如,R)坐标系与第二跟踪摄像机(例如,N2)坐标系之间的第二位姿变换(例如
Figure BDA0003108170640000254
))。摄像机跟踪系统可以基于来自第二跟踪摄像机(例如,N2)的指示第二对象(例如,E)的位姿的第二对象跟踪信息来确定第二对象(例如,E)坐标系与第二跟踪摄像机(例如,N2)坐标系之间的第三位姿变换(例如,
Figure BDA0003108170640000255
))。摄像机跟踪系统可以基于组合第一、第二和第三位姿变换来确定第二对象(例如,E)坐标系与第一跟踪摄像机(例如,N3)坐标系之间的第四位姿变换例如,
Figure BDA0003108170640000256
)。
在一些其它实施例中,摄像机系统可以进一步基于通过第四位姿变换处理跟踪信息来确定第二对象(例如,E)与第一跟踪摄像机系统(例如,N3)坐标系的位姿。
由于各种摄像机系统的重叠视场,当第一摄像机被阻挡而无法看到第二对象(例如,E)时,摄像机跟踪系统能够确定第二对象(例如,E)相对于第一跟踪摄像机(例如,N3)的位姿。例如,在一些实施例中,摄像机跟踪系统进一步被配置成确定第二对象(例如,E)坐标系和第一跟踪摄像机(例如,N3)坐标系之间的第四位姿变换(例如,
Figure BDA0003108170640000261
),而不使用来自第一跟踪摄像机(例如,N3)的指示第二对象(例如E)的位姿的任何跟踪信息。
摄像机跟踪系统可以通过合并来自多个摄像机系统的同步图像来实现较高的跟踪精度。例如,摄像机跟踪系统可以通过合并来自多个视角(第一和第二跟踪摄像机)的第二对象(例如,E)的同步图像来确定第二对象(例如,E)相对于第一跟踪摄像机(例如,N3)的位姿,且可以使用可以基于相应摄像机的精度规格确定的加权。更具体地,摄像机跟踪系统可以进一步被配置成基于来自第一跟踪摄像机(例如,N3)的指示第二对象(例如,E)的位姿的第二对象跟踪信息并且进一步基于第一、第二和第三位姿变换的组合结果来确定第二对象(,例如,E)坐标系和第一跟踪摄像机(例如,N3)坐标系之间的第四位姿变换(例如,
Figure BDA0003108170640000262
手术系统可被配置成在XR头戴装置的透视显示屏上显示具有基于第四位姿变换而确定的位姿的XR图像。摄像机跟踪系统可进一步被配置成基于对来自第一和第二跟踪摄像机的第一对象跟踪信息和来自第二跟踪摄像机的第二对象跟踪信息进行第四位姿变换的处理而产生作为在透视显示屏上摆放的第二对象(例如,E)的图形表示的XR图像。
如上文所解释的,摄像机跟踪系统可以包含导航控制器828,所述导航控制器以通信方式连接到第一跟踪摄像机(例如,N3)和第二跟踪摄像机(例如,N2)以接收跟踪信息,且被配置成确定第一、第二、第三和第四位姿变换。
五个用于手术导航的摄像机跟踪杆
尽管当今存在不同的立体摄像机跟踪杆或甚至存在三个摄像机的跟踪杆(也称为导航杆),但在此描述的摄像机跟踪杆可以包括五个摄像机,所述五个摄像机的设计、配置、校准和使用方式使得摄像机跟踪杆能够在手术期间提供改进的计算机辅助导航的对象跟踪。
这包括高速率惯性测量单元(3轴陀螺仪和3轴加速度计),还允许在当前技术水平上提供其他功能。
根据一些实施例,摄像机跟踪杆使用环境可见光用于器械、末端执行器和直接的患者解剖结构跟踪。近红外(NIR)照明器电路还包括在五个能够检测NIR照明的摄像机中的至少一个摄像机中。在非常低的图像传感器曝光下,照明能够有助于在黑暗环境中进行跟踪或将反向反射表面与正常表面区分开。额外的摄像机(超过仅两个立体摄像机)增加了可以完成对象跟踪的体积。这减小了当前系统的问题的影响,在当前系统中,小跟踪体积迫使手术人员频繁地重新定位摄像机跟踪杆和/或导致对象跟踪的丢失和导航手术操作的意外中断。
由于图像传感器需要很高的动态范围,因此可能很难从环境光中跟踪可见光。简而言之,明亮或聚光灯的中心与周围区域之间的照明存在很大差异。具有多个立体对允许同时在不同曝光下进行光学标记检测和跟踪。包含多于两个的立体摄像机还可以消除点三角测量的歧义,这实际上意味着存在较少的“干扰”。
图19示出了所公开的摄像机跟踪杆的主要组件的一些实施例。
在本公开的各种实施例中,摄像机跟踪杆包括第一组立体跟踪摄像机1900、第二组跟踪摄像机1910和通信接口1970,如图19所示。
第一组立体跟踪摄像机1900是最外面的立体摄像机。第一组立体跟踪摄像机1900的分辨率、镜头的视场、基线1905(第一组立体跟踪摄像机之间的间隔),和安装角度都针对该应用进行了调整,因为每一者都会影响精度、敏锐度和所支持的立体跟踪体积。较宽的基线可以实现更好的三角测量和深度感知精度,但是对于离得越远的物体,摄像机之间的距离越远,误差就越大。
在一些实施例中,摄像机跟踪杆还包括位于原始对内部的第二组跟踪摄像机1910。这些摄像机可以具有更宽的视场并向内倾斜,以便检测正常跟踪区域之外的跟踪对象。第二组立体跟踪摄像机1910的分辨率、镜头的视场、基线1915(第一组立体跟踪摄像机之间的间隔),和安装角度都针对该应用进行了调整,因为每一者都会影响精度、敏锐度和支持的立体跟踪体积。
在一些实施例中,在手术期间用于计算机辅助导航的摄像机跟踪系统的摄像机跟踪杆包括第一组立体跟踪摄像机1900,其具有第一分辨率、第一视场并且在摄像机跟踪杆上以第一基线距离1905间隔开。摄像机跟踪杆还包括第二组立体跟踪摄像机1910,其具有第二分辨率、第二视场并且在摄像机跟踪杆上以小于第一基线距离1905的第二基线距离间1915隔开。第二组立体跟踪摄像机1910定位于第一组立体跟踪摄像机1900之间,并且第二组立体跟踪摄像机1910的分辨率和/或视场与第一组立体跟踪摄像机1900的分辨率和/或视场不同。摄像机跟踪杆还包括通信接口1970,该通信接口1970被配置为将来自第一组立体跟踪摄像机1900和第二组立体跟踪摄像机1910的视频流提供给摄像机跟踪子系统。
在一些实施例中,第一组立体跟踪摄像机1900中的每个摄像机都附接至摄像机跟踪杆的表面,并以第一角度朝向彼此向内倾斜,并且第二组立体跟踪摄像机1910中的每个摄像机都附接至摄像机跟踪杆的表面,并以与第一角度不同的的第二角度朝向彼此向内倾斜。
在一些实施例中,可以包括彩色摄像机1920或一组彩色摄像机以用于记录或训练目的。此处包括的彩色摄像机与其他四个摄像机进行了很好的校准,因此可以将颜色信息添加到所跟踪的对象,以改善对所跟踪对象的配置的识别和区分。
在一些实施例中,摄像机跟踪杆还可包括高速率惯性测量单元(IMU)1940。IMU1940允许自动区分摄像机和所跟踪对象的运动。IMU测量由于运动和重力而产生的角速度和线性加速度。该IMU不仅可以用来区分摄像机和所跟踪对象的运动,而且还可以提供准确估计的摄像机和所有所跟踪的器械的重力。IMU 1940可以包括3轴陀螺仪和3轴加速度计。IMU 1940被配置为输出对所测量的摄像机跟踪杆的运动进行指示的运动数据,并且通信接口还被配置为向摄像机跟踪子系统提供运动数据。惯性测量单元可以被配置为在运动数据中包括三轴陀螺仪的角速度的测量和三轴加速度计的线性加速度的测量。摄像机跟踪杆还可以包括处理器,该处理器被配置为将视频流和运动数据测量的定向与重力参考对准。
在一些实施例中,摄像机跟踪杆还可以包括麦克风阵列1950,该麦克风阵列1950包括多个沿着摄像机跟踪杆间隔开并且被连接成向计算机平台提供至少一个音频流的麦克风。该计算机平台被配置为执行下述各者中的至少一者:记录至少一个音频流,识别包含在至少一个音频流中的语音命令,并选择性地触发与语音命令中的所识别的语音命令相关联的经限定的操作,测量包含在至少一个音频流中的环境噪声水平,并三角测量包含在由多个麦克风提供的至少两个音频流中的声音源的位置。
在一些实施例中,麦克风阵列1950已经被并入到跟踪杆中,以便记录的音频以用于训练、触发语音命令、测量环境噪声水平以及对声音的来源进行三角测量。麦克风阵列1950还可以用于收集用于深度学习的数据。可以相对于整个情况来测量、检测和时间戳记背景对话和诸如高速钻或锯的设备噪音。
摄像机跟踪杆可以用于跟踪动态参考阵列上的盘或反向反射球体。单个跟踪摄像机的分辨率、视场、基线距离和安装角度均经过优化,以便检测具有理想像素密度的盘或反向反射球体,诸如至少为10像素乘以10像素且不超过30像素乘以30像素的像素阵列。
在一些实施例中,第一组立体跟踪摄像机1900的第一分辨率和第一视场被配置为输出在视频流中的帧,该帧对在手术期间摆放的参考阵列进行成像,该参考阵列在至少为10像素乘以10像素且在不超过30像素乘以30像素上延伸。
在一些其他的实施例中,第二组立体跟踪摄像机1910的第二分辨率和第二视场被配置为输出在视频流中的帧,该帧对参考阵列进行成像,该参考阵列在至少为10像素乘以10像素且在不超过30像素乘以30像素上延伸。
在一些其他实施例中,第一分辨率是7兆像素,第一视场是50度,第一基线距离1905是0.5米,并且第二分辨率是1.5兆像素,第二视场是85度,第二基线距离1915是0.4米。
在一些实施例中,摄像机跟踪杆还包括:一组近红外照明器,所述组近红外照明器围绕第一组立体跟踪摄像机中的各个摄像机定位,和至少一个处理器,所述至少一个处理器在操作上被配置为当由第一组立体跟踪摄像机中的至少一个摄像机检测到的环境光水平低于环境光阈值时打开所述照明器,并且响应于打开近红外照明器而停止使用来自可见光摄像机校准文件中的值来对来自第一组立体跟踪摄像机的视频进行处理并开始使用来自近红外光摄像机校准文件中的值来对来自第一组立体跟踪摄像机的视频进行处理。
在一些实施例中,摄像机跟踪杆还包括:一组照明器,该组照明器主要发射围绕第一组立体跟踪摄像机中的各个摄像机定位的一种颜色;和至少一个处理器,所述至少一个处理器在操作上被配置为当由所述第一组立体跟踪摄像机中的至少一个摄像机检测到的环境光水平低于环境光阈值时打开所述照明器,并且响应于打开近红外照明器而停止使用来自环境光摄像机校准文件中的值来对来自第一组立体跟踪摄像机的视频进行处理并开始使用来自彩色光摄像机校准文件中的值来对来自第一组立体跟踪摄像机的视频进行处理。
在一些实施例中,第一组立体跟踪摄像机被配置为具有与第二组立体跟踪摄像机不同的传感器曝光速度。另外,对于每对跟踪摄像机1900和摄像机1910,传感器的曝光可以是不同的,从而提高了检测存在的每件事物的可能性,并且提高了对阴影和其他环境光像差的稳健性。
在一些实施例中,由第一组立体跟踪摄像机和第二组立体跟踪摄像机输出的视频帧通过浮点门阵列输出的公共同步信号而被同步。所有的跟踪摄像机1900、1910和1920都通过浮点门阵列FPGA进行同步1960,因此来自不同传感器的数据在时间上对齐。该同步信号从导航杆输出,以便其他外部传感器可以捕获与同一时刻相对应的信息。
图20和图21示出了由第一组立体跟踪摄像机1900产生的跟踪体积。在一些实施例中,第一组立体跟踪摄像机1900被配置为提供第一跟踪体积,该第一跟踪体积具有413毫米宽乘以427毫米高的第一近场三维体积角锥体以及具有1619毫米宽乘以1463毫米高的第一远场三维体积角锥体。
图22和图23示出了由第二组立体跟踪摄像机1910产生的跟踪体积。可以调节镜头的视场和角度,以调节体积和精度。在该示例实施例中,内部摄像机自身的跟踪精度大大降低,但是覆盖了更大的跟踪体积,并大大提高了检测率和总体认知度。应注意的是,内部对是能够更接近地跟踪,并且在范围内具有更大的体积。在一些实施例中,第二组立体跟踪摄像机1910被配置为提供第二跟踪体积,该第二跟踪体积具有585毫米宽乘以1020毫米高的第二近场三维体积角锥体以及具有2227毫米宽和4589毫米高的第二远场三维体积角锥体。
图24和图25示出了第一组立体跟踪摄像机和第二组立体跟踪摄像机的模拟三角测量精度。对于两个立体对中的每对,模拟的跟踪精度都显示为所跟踪对象位置的函数。实验结果已证明非常接近此预测的三角测量精度。
图26示出了应用于通过第一组立体跟踪摄像机1900和第二组立体跟踪摄像机1910输出的视频帧的双通过滤光器。双通过滤光器可以使摄像机跟踪系统执行窄的红外、NIR和可见光跟踪。在一些实施例中,第一组立体跟踪摄像机包括双通滤光器,该双通滤光器被配置为使可见光中的窄波长带和近红外光中的另一窄波长带通过。摄像机跟踪子系统被配置为对视频流中的参考阵列的反向反射基准点的位姿进行跟踪,该视频流对可见光中的窄波长带和近红外光中的另一窄波长带进行捕获。
参照图26,将NIR照明(例如850纳米)包含到立体摄像机对之一中,以便在低环境光条件下进行跟踪,同时还允许可见光机器视觉应用。如图26所示,这是通过使两个波长的光穿过来实现的。
图27示出了在其上具有反向反射球体的反向反射跟踪阵列。图26的双带通滤光器允许跟踪没有清晰可见光边界的反向反射对象,诸如图27中所示的球体。纯NIR跟踪器仅让与照明匹配的NIR光谱通过,以减少光污染,从而有效地跟踪带有白色NIR LED或反射对象的黑色图像。通过可见光光谱允许摄像机不仅对LED和反射对象成像,而且是在明亮照明条件下进行跟踪的首选方法。通过降低摄像机的曝光,可以改善没有清晰边缘的反向反射球体的成像。
图28示出了由摄像机跟踪子系统执行的操作的流程图,如在以下实施例中进一步详细讨论。
在各种其他实施例中,用于手术期间的计算机辅助导航的摄像机跟踪系统包括摄像机跟踪杆。摄像机跟踪杆包括第一组立体跟踪摄像机,其具有第一分辨率、第一视场,并且在摄像机跟踪杆上以第一基线距离间隔开。摄像机跟踪杆还包括第二组立体跟踪摄像机,其具有第二分辨率、第二视场并且在摄像机跟踪杆上以小于第一基线距离的第二基线距离间隔开。第二组立体跟踪摄像机定位于第一组立体跟踪摄像机之间,并且第二组立体跟踪摄像机的分辨率和/或视场与第一组立体跟踪摄像机的分辨率和/或视场不同。摄像机跟踪杆还包括摄像机跟踪子系统,该摄像机跟踪子系统被配置为确定来自所述第一组立体跟踪摄像机和所述第二组立体跟踪摄像机的视频流中参考阵列的基准点的位姿2800。
在一些所述实施例中,摄像机跟踪子系统还被配置为当确定参考阵列的基准点的位姿时,对由运动数据指示的摄像机跟踪杆的运动进行补偿2802。
在一些实施例中,第一组立体跟踪摄像机的第一分辨率和第一视场被配置为输出在视频流中的帧,该帧对在手术期间摆放的参考阵列进行成像,该参考阵列在至少为10像素乘以10像素且在不超过30像素乘以30像素上延伸。第二组立体跟踪摄像机的第二分辨率和第二视场被配置为输出在视频流中的帧,该帧对参考阵列进行成像,该参考阵列在至少为10像素乘以10像素且在不超过30像素乘以30像素上延伸。
图29示出了由摄像机跟踪杆的处理器执行的操作的流程图,如在以下实施例中进一步详细讨论。
在一些实施例中,摄像机跟踪杆还包括:一组近红外照明器,该组近红外照明器围绕第一组立体跟踪摄像机中的各个摄像机定位,和至少一个处理器,所述至少一个处理器在操作上被配置为当由第一组立体跟踪摄像机中的至少一个摄像机检测到的环境光水平低于环境光阈值时打开2900所述照明器,并且响应于打开近红外照明器而停止2902使用可见光摄像机校准文件中的值来对来自第一组立体跟踪摄像机的视频进行处理并开始2904使用来自近红外光摄像机校准文件中的值来对来自第一组立体跟踪摄像机的视频进行处理。
在一些实施例中,第一组立体跟踪摄像机包括双通滤光器,该双通滤光器被配置为使可见光中的窄波长带和近红外光中的另一窄波长带通过。摄像机跟踪子系统被配置为跟踪2906在视频流中的参考阵列的反向反射基准点的位姿,该视频流对可见光中的窄波长带和近红外光中的另一窄波长带进行捕获。
在一些实施例中,摄像机跟踪杆还包括:一组照明器,所述一组照明器主要发射围绕第一组立体跟踪摄像机中的各个摄像机定位的一种颜色;和至少一个处理器,所述至少一个处理器在操作上被配置为当由所述第一组立体跟踪摄像机中的至少一个摄像机检测到的环境光水平低于环境光阈值时打开所述照明器,并且响应于打开近红外照明器而停止使用来自环境光摄像机校准文件中的值来对来自第一组立体跟踪摄像机的视频进行处理并开始使用来自彩色光摄像机校准文件中的值来对来自第一组立体跟踪摄像机的视频进行处理。
另外的限定和实施例:
在本发明概念的各种实施例的以上描述中,应理解,本文使用的术语仅用于描述特定实施例的目的,并且不意图限制本发明概念。除非另外限定,否则本文所使用的所有术语(包括技术和科学术语)具有与本发明概念所属领域的普通技术人员通常理解的含义相同的含义。将进一步理解的是,例如在常用词典中限定的那些术语应被解释为具有与其在本说明书的上下文和相关领域中的含义一致的含义,并且除非本文明确限定,否则不应在理想化或过度正式的意义上解释。
当元件被称为“连接到”或“联接到”“响应于”另一个元件或其变体时,其可以直接连接到、联接到或响应于另一元件,或者可以存在中间元件。相反,当一个元件被称为与另一个元件“直接地连接”、“直接地联接”、“直接响应于”另一个元件或其变体时,不存在中间元件。贯穿全文地以相似的数字指代相似的要素。此外,如本文中使用的“联接”、“连接”、“响应”或其变体可以包含无线联接、连接或响应。除非上下文另外清楚地说明,否则如本文所使用的,单数形式“一个/一种(a、an)”和“所述(the)”旨在包含复数形式。为了简洁和/或清楚,可能不会详细描述众所周知的功能或构造。术语“和/或”包含相关联的所列项中的一或多个项的任何和所有组合。
应当理解,尽管本文中可以使用术语第一、第二、第三等来描述各种元件/操作,但是这些元件/操作不应受这些术语的限制。这些术语仅是用来将一个元件/操作与另一个元件/操作进行区分。因此,在不脱离本发明概念的教导的情况下,一些实施例中的第一元件/操作可以在其它实施例中被称为第二元件/操作。在整个本说明书中,相同的附图标记或相同的附图指示符表示相同或类似的元件。
如本文所使用的,术语“包括(comprise/comprising/comprises)”、“包含(include/including/includes)”、“具有(have/has/having)”或其变体是开放式的,并且包含一或多个陈述的特征、整数、元件、步骤、组件或功能,但是不排除一或多个其它特征、整数、元件、步骤、组件、功能或其组合的存在或添加。此外,如本文所使用的,源自拉丁短语“exempli gratia”的通用缩写“例如”可以用于介绍或指定先前提及的项目的一或多个一般示例,并且不旨在限制这种项目。源自拉丁短语“id est”的通用缩写“即”可以用于从更一般的陈述中指定特定项目。
本文中参考计算机实施的方法、设备(系统和/或装置)和/或计算机程序产品的框图和/或流程展示描述了示例实施例。应当理解的是,可以通过由一或多个计算机电路执行的计算机程序指令来实现框图和/或流程示出的框以及框图和/或流程示出中框的组合。这些计算机程序指令可以被提供给通用计算机电路、专用计算机电路和/或其它可编程数据处理电路的处理器电路,以产生机器,使得经由计算机和/或其它可编程数据处理设备的处理器执行的指令转换并控制晶体管、存储在存储器位置中的值以及这种电路系统内的其它硬件组件,以实现框图和/或一或多个流程图框中指定的功能/动作,并且由此创建用于实现框图和/或一或多个流程图框中指定的功能/动作的装置(功能)和/或结构。
这些有形计算机程序指令也可以存储在可以指导计算机或其它可编程数据处理设备以特定方式运行的计算机可读介质中,使得存储在计算机可读介质中的指令产生包含实施在框图和/或一或多个流程图框中指定的功能/动作的指令的制品。因此,本发明概念的实施例可以体现在硬件和/或软件(包含固件、常驻软件、微代码等)中,其在如数字信号处理器等处理器上运行,所述数字信号处理器可以被统称为“电路系统”、“模块”或其变体。
还应该注意的是,在一些替代性实现方案中,框中标注的功能/动作可以不按流程图中标注的顺序发生。例如,根据所涉及的功能/动作,连续示出的两个框实际上可以基本上同时执行,或者所述框有时可以按相反顺序执行。此外,可以将流程图和/或框图的给定框的功能分成多个框,和/或流程图和/或框图的两个或更多个框的功能可以至少部分地集成。最后,在不脱离本发明概念的范围的情况下,可以在所示出的框之间添加/插入其它框,和/或可以省略框/操作。此外,尽管所述图中的一些图包含通信路径上的箭头以示出通信的主要方向,但是应当理解的是,通信可以在与所描绘的箭头相反的方向上发生。
在不实质脱离本发明概念的原理的情况下,可以对实施例进行许多变化和修改。所有的此种变体以及改变都旨在被包含在本文中本发明概念的范围内。因此,上文所公开的主题应视为说明性而非限制性的,并且所附实施例的示例旨在覆盖落入本发明概念的精神和范围内的所有这种修改、增强以及其它实施例。因此,为了被法律最大程度地允许,本发明概念的范围将由本公开的最广泛允许的解读来确定,所述解读包含以下实施例及其等效物的示例,并且不应受限于或局限于前述具体详细描述。

Claims (10)

1.一种用于手术期间的计算机辅助导航的摄像机跟踪系统的摄像机跟踪杆,所述摄像机跟踪杆包括:
第一组立体跟踪摄像机,所述第一组立体跟踪摄像机具有第一分辨率、第一视场,并且在所述摄像机跟踪杆上以第一基线距离间隔开;
第二组立体跟踪摄像机,所述第二组立体跟踪摄像机具有第二分辨率、第二视场,并且在所述摄像机跟踪杆上以小于所述第一基线距离的第二基线距离间隔开,
其中,所述第二组立体跟踪摄像机定位于所述第一组立体跟踪摄像机之间,并且所述第二组立体跟踪摄像机的所述分辨率与所述第一组立体跟踪摄像机的所述分辨率场不同以及/或者所述第二组立体跟踪相机的所述视场与所述第一组立体跟踪相机的所述视场不同;和
通信接口,所述通信接口配置为将来自所述第一组立体跟踪摄像机和所述第二组立体跟踪摄像机的视频流提供给所述摄像机跟踪子系统。
2.根据权利要求1所述的摄像机跟踪杆,其中:
所述第一组立体跟踪摄像机中的每个摄像机都附接至所述摄像机跟踪杆的表面并以第一角度朝向彼此向内倾斜;和
所述第二组立体跟踪摄像机中的每个摄像机都附接至所述摄像机跟踪杆的表面并以与所述第一角度不同的第二角度朝向彼此向内倾斜。
3.根据权利要求1所述的摄像机跟踪杆,还包括:高速率惯性测量单元,所述高速率惯性测量单元包括三轴陀螺仪和三轴加速度计,其中,所述惯性测量单元被配置为输出对所测量的所述摄像机跟踪杆的运动进行指示的运动数据,并且所述通信接口还被配置为向所述摄像机跟踪子系统提供所述运动数据。
4.根据权利要求3所述的摄像机跟踪杆,其中,所述惯性测量单元被配置为在所述运动数据中包括所述三轴陀螺仪的角速度的测量和所述三轴加速度计的线性加速度的测量。
5.根据权利要求4所述的摄像机跟踪杆,还包括处理器,所述处理器被配置为将所述视频流和所述运动数据测量的定向与重力参考对准。
6.根据权利要求1所述的摄像机跟踪杆,还包括麦克风阵列,所述麦克风阵列包括多个麦克风,所述多个麦克风沿着所述摄像机跟踪杆间隔开并且被连接成向计算机平台提供至少一个音频流,其中,所述计算机平台被配置为执行下述各者中的至少一者:
记录所述至少一个音频流;
识别包含在所述至少一个音频流中的语音命令,并选择性地触发与所述语音命令中的所识别的语音命令相关联的经限定的操作;
测量包含在所述至少一个音频流中的环境噪声水平;和
三角测量包含在由上述多个麦克风提供的至少两个音频流中的声音源的位置。
7.根据权利要求1所述的摄像机跟踪杆,其中,所述第一组立体跟踪摄像机的所述第一分辨率和所述第一视场被配置为在所述视频流中输出对在手术期间摆放的参考阵列进行成像的帧,所述参考阵列在至少为10像素乘以10像素且在不超过30像素乘以30像素的像素阵列上延伸。
8.根据权利要求7所述的摄像机跟踪杆,其中,所述第二组立体跟踪摄像机的所述第二分辨率和所述第二视场被配置为在所述视频流中输出对在至少为10像素乘以10像素的且不超过30像素乘以30像素的像素阵列上延伸的所述参考阵列进行成像的帧。
9.根据权利要求8所述的摄像机跟踪杆,其中:
所述第一分辨率为7兆像素,所述第一视场为50度,所述第一基线距离为0.5米;和
所述第二分辨率是1.5兆像素,所述第二视场是85度,并且所述第二基线距离是0.4米。
10.根据权利要求1所述的摄像机跟踪杆,其中:
所述第一组立体跟踪摄像机被配置为提供第一跟踪体积,所述第一跟踪体积具有413毫米宽乘以427毫米高的第一近场三维体积角锥体以及具有1619毫米宽乘以1463毫米高的第一远场三维体积角锥体;和
所述第二组立体跟踪摄像机被配置为提供第二跟踪体积,所述第二跟踪体积具有585毫米宽乘以1020毫米高的第二近场三维体积角锥体以及具有2227毫米宽和4589毫米高的第二远场三维体积角锥体。
CN202110641817.7A 2020-06-09 2021-06-09 用于手术期间的计算机辅助导航的摄像机跟踪系统的摄像机跟踪杆 Pending CN113768620A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US16/896,424 US11317973B2 (en) 2020-06-09 2020-06-09 Camera tracking bar for computer assisted navigation during surgery
US16/896,424 2020-06-09

Publications (1)

Publication Number Publication Date
CN113768620A true CN113768620A (zh) 2021-12-10

Family

ID=76532026

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110641817.7A Pending CN113768620A (zh) 2020-06-09 2021-06-09 用于手术期间的计算机辅助导航的摄像机跟踪系统的摄像机跟踪杆

Country Status (4)

Country Link
US (2) US11317973B2 (zh)
EP (1) EP3922204A1 (zh)
JP (1) JP7376533B2 (zh)
CN (1) CN113768620A (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2536650A (en) 2015-03-24 2016-09-28 Augmedics Ltd Method and system for combining video-based and optic-based augmented reality in a near eye display
US11766296B2 (en) 2018-11-26 2023-09-26 Augmedics Ltd. Tracking system for image-guided surgery
US11871998B2 (en) 2019-12-06 2024-01-16 Stryker European Operations Limited Gravity based patient image orientation detection
US11382712B2 (en) 2019-12-22 2022-07-12 Augmedics Ltd. Mirroring in image guided surgery
US11419655B2 (en) * 2020-04-20 2022-08-23 Henry E. Aryan Intraoperative monitoring and screw placement apparatus
US11896445B2 (en) 2021-07-07 2024-02-13 Augmedics Ltd. Iliac pin and adapter

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030164953A1 (en) * 2002-03-01 2003-09-04 Thomas Bauch Operation lamp with camera system for 3D referencing
US20070081695A1 (en) * 2005-10-04 2007-04-12 Eric Foxlin Tracking objects with markers
CN103492833A (zh) * 2011-02-18 2014-01-01 德普伊新特斯产品有限责任公司 具有集成的导航与制导系统的工具以及相关设备和方法
CN107427327A (zh) * 2014-09-30 2017-12-01 奥瑞斯外科手术机器人公司 具有虚拟轨迹和柔性内窥镜的可配置机器人外科手术系统
US20190038362A1 (en) * 2017-08-02 2019-02-07 Medtech S.A. Surgical field camera system
CN110461268A (zh) * 2017-02-02 2019-11-15 埃尔比特系统有限公司 医疗用途的放大的高分辨率成像和跟踪
US20190387149A1 (en) * 2018-06-15 2019-12-19 Mako Surgical Corp. Systems and methods for tracking objects

Family Cites Families (557)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE2614083B2 (de) 1976-04-01 1979-02-08 Siemens Ag, 1000 Berlin Und 8000 Muenchen Röntgenschichtgerät zur Herstellung von Transversalschichtbildern
US5354314A (en) 1988-12-23 1994-10-11 Medical Instrumentation And Diagnostics Corporation Three-dimensional beam localization apparatus and microscope for stereotactic diagnoses or surgery mounted on robotic type arm
US5246010A (en) 1990-12-11 1993-09-21 Biotrine Corporation Method and apparatus for exhalation analysis
US5417210A (en) 1992-05-27 1995-05-23 International Business Machines Corporation System and method for augmentation of endoscopic surgery
US6963792B1 (en) 1992-01-21 2005-11-08 Sri International Surgical method
US5631973A (en) 1994-05-05 1997-05-20 Sri International Method for telemanipulation with telepresence
US5657429A (en) 1992-08-10 1997-08-12 Computer Motion, Inc. Automated endoscope system optimal positioning
US5397323A (en) 1992-10-30 1995-03-14 International Business Machines Corporation Remote center-of-motion robot for surgery
WO1994026167A1 (en) 1993-05-14 1994-11-24 Sri International Remote center positioner
JP3378401B2 (ja) 1994-08-30 2003-02-17 株式会社日立メディコ X線装置
US6646541B1 (en) 1996-06-24 2003-11-11 Computer Motion, Inc. General purpose distributed operating room control system
US6978166B2 (en) 1994-10-07 2005-12-20 Saint Louis University System for use in displaying images of a body part
DE69528998T2 (de) 1994-10-07 2003-07-03 St Louis University St Louis Chirurgische navigationsanordnung einschliesslich referenz- und ortungssystemen
US5882206A (en) 1995-03-29 1999-03-16 Gillio; Robert G. Virtual surgery system
US5887121A (en) 1995-04-21 1999-03-23 International Business Machines Corporation Method of constrained Cartesian control of robotic mechanisms with active and passive joints
US6122541A (en) 1995-05-04 2000-09-19 Radionics, Inc. Head band for frameless stereotactic registration
US5649956A (en) 1995-06-07 1997-07-22 Sri International System and method for releasably holding a surgical instrument
US5825982A (en) 1995-09-15 1998-10-20 Wright; James Head cursor control interface for an automated endoscope system for optimal positioning
US5772594A (en) 1995-10-17 1998-06-30 Barrick; Earl F. Fluoroscopic image guided orthopaedic surgery system with intraoperative registration
US5855583A (en) 1996-02-20 1999-01-05 Computer Motion, Inc. Method and apparatus for performing minimally invasive cardiac procedures
SG64340A1 (en) 1996-02-27 1999-04-27 Inst Of Systems Science Nation Curved surgical instruments and methods of mapping a curved path for stereotactic surgery
US6167145A (en) 1996-03-29 2000-12-26 Surgical Navigation Technologies, Inc. Bone navigation system
US5792135A (en) 1996-05-20 1998-08-11 Intuitive Surgical, Inc. Articulated surgical instrument for performing minimally invasive surgery with enhanced dexterity and sensitivity
WO1999050721A1 (en) 1997-09-19 1999-10-07 Massachusetts Institute Of Technology Robotic apparatus
US6167296A (en) 1996-06-28 2000-12-26 The Board Of Trustees Of The Leland Stanford Junior University Method for volumetric image navigation
US7302288B1 (en) 1996-11-25 2007-11-27 Z-Kat, Inc. Tool position indicator
US7727244B2 (en) 1997-11-21 2010-06-01 Intuitive Surgical Operation, Inc. Sterile surgical drape
US8529582B2 (en) 1996-12-12 2013-09-10 Intuitive Surgical Operations, Inc. Instrument interface of a robotic surgical system
US6205411B1 (en) 1997-02-21 2001-03-20 Carnegie Mellon University Computer-assisted surgery planner and intra-operative guidance system
US6012216A (en) 1997-04-30 2000-01-11 Ethicon, Inc. Stand alone swage apparatus
US5820559A (en) 1997-03-20 1998-10-13 Ng; Wan Sing Computerized boundary estimation in medical images
US5911449A (en) 1997-04-30 1999-06-15 Ethicon, Inc. Semi-automated needle feed method and apparatus
US6231565B1 (en) 1997-06-18 2001-05-15 United States Surgical Corporation Robotic arm DLUs for performing surgical tasks
US6226548B1 (en) 1997-09-24 2001-05-01 Surgical Navigation Technologies, Inc. Percutaneous registration apparatus and method for use in computer-assisted surgical navigation
US5951475A (en) 1997-09-25 1999-09-14 International Business Machines Corporation Methods and apparatus for registering CT-scan data to multiple fluoroscopic images
US5987960A (en) 1997-09-26 1999-11-23 Picker International, Inc. Tool calibrator
US6212419B1 (en) 1997-11-12 2001-04-03 Walter M. Blume Method and apparatus using shaped field of repositionable magnet to guide implant
US6157853A (en) 1997-11-12 2000-12-05 Stereotaxis, Inc. Method and apparatus using shaped field of repositionable magnet to guide implant
US6031888A (en) 1997-11-26 2000-02-29 Picker International, Inc. Fluoro-assist feature for a diagnostic imaging device
US6165170A (en) 1998-01-29 2000-12-26 International Business Machines Corporation Laser dermablator and dermablation
US6949106B2 (en) 1998-02-24 2005-09-27 Endovia Medical, Inc. Surgical instrument
FR2779339B1 (fr) 1998-06-09 2000-10-13 Integrated Surgical Systems Sa Procede et appareil de mise en correspondance pour la chirurgie robotisee, et dispositif de mise en correspondance en comportant application
US6477400B1 (en) 1998-08-20 2002-11-05 Sofamor Danek Holdings, Inc. Fluoroscopic image guided orthopaedic surgery system with intraoperative registration
DE19839825C1 (de) 1998-09-01 1999-10-07 Siemens Ag Röntgendiagnostikgerät mit an einer bogenförmigen Halterung einander gegenüberliegend gelagertem Strahlensender und Strahlenempfänger
US6033415A (en) 1998-09-14 2000-03-07 Integrated Surgical Systems System and method for performing image directed robotic orthopaedic procedures without a fiducial reference system
DE19842798C1 (de) 1998-09-18 2000-05-04 Howmedica Leibinger Gmbh & Co Kalibriervorrichtung
US6340363B1 (en) 1998-10-09 2002-01-22 Surgical Navigation Technologies, Inc. Image guided vertebral distractor and method for tracking the position of vertebrae
US6659939B2 (en) 1998-11-20 2003-12-09 Intuitive Surgical, Inc. Cooperative minimally invasive telesurgical system
US8527094B2 (en) 1998-11-20 2013-09-03 Intuitive Surgical Operations, Inc. Multi-user medical robotic system for collaboration or training in minimally invasive surgical procedures
US6325808B1 (en) 1998-12-08 2001-12-04 Advanced Realtime Control Systems, Inc. Robotic system, docking station, and surgical tool for collaborative control in minimally invasive surgery
US7125403B2 (en) 1998-12-08 2006-10-24 Intuitive Surgical In vivo accessories for minimally invasive robotic surgery
US6322567B1 (en) 1998-12-14 2001-11-27 Integrated Surgical Systems, Inc. Bone motion tracking system
US6451027B1 (en) 1998-12-16 2002-09-17 Intuitive Surgical, Inc. Devices and methods for moving an image capture device in telesurgical systems
US7016457B1 (en) 1998-12-31 2006-03-21 General Electric Company Multimode imaging system for generating high quality images
DE19905974A1 (de) 1999-02-12 2000-09-07 Siemens Ag Verfahren zur Abtastung eines Untersuchungsobjekts mittels eines CT-Geräts
US6560354B1 (en) 1999-02-16 2003-05-06 University Of Rochester Apparatus and method for registration of images to physical space using a weighted combination of points and surfaces
US6501981B1 (en) 1999-03-16 2002-12-31 Accuray, Inc. Apparatus and method for compensating for respiratory and patient motions during treatment
US6778850B1 (en) 1999-03-16 2004-08-17 Accuray, Inc. Frameless radiosurgery treatment system and method
US6144875A (en) 1999-03-16 2000-11-07 Accuray Incorporated Apparatus and method for compensating for respiratory and patient motion during treatment
US6470207B1 (en) 1999-03-23 2002-10-22 Surgical Navigation Technologies, Inc. Navigational guidance via computer-assisted fluoroscopic imaging
JP2000271110A (ja) 1999-03-26 2000-10-03 Hitachi Medical Corp 医用x線装置
US6594552B1 (en) 1999-04-07 2003-07-15 Intuitive Surgical, Inc. Grip strength with tactile feedback for robotic surgery
US6565554B1 (en) 1999-04-07 2003-05-20 Intuitive Surgical, Inc. Friction compensation in a minimally invasive surgical apparatus
US6424885B1 (en) 1999-04-07 2002-07-23 Intuitive Surgical, Inc. Camera referenced control in a minimally invasive surgical apparatus
US6301495B1 (en) 1999-04-27 2001-10-09 International Business Machines Corporation System and method for intra-operative, image-based, interactive verification of a pre-operative surgical plan
DE19927953A1 (de) 1999-06-18 2001-01-11 Siemens Ag Röntgendiagnostikgerät
US6314311B1 (en) 1999-07-28 2001-11-06 Picker International, Inc. Movable mirror laser registration system
US6788018B1 (en) 1999-08-03 2004-09-07 Intuitive Surgical, Inc. Ceiling and floor mounted surgical robot set-up arms
US7594912B2 (en) 2004-09-30 2009-09-29 Intuitive Surgical, Inc. Offset remote center manipulator for robotic surgery
US9107683B2 (en) 1999-09-17 2015-08-18 Intuitive Surgical Operations, Inc. Systems and methods for cancellation of joint motion using the null-space
US8004229B2 (en) 2005-05-19 2011-08-23 Intuitive Surgical Operations, Inc. Software center and highly configurable robotic systems for surgery and other uses
US8271130B2 (en) 2009-03-09 2012-09-18 Intuitive Surgical Operations, Inc. Master controller having redundant degrees of freedom and added forces to create internal motion
US6312435B1 (en) 1999-10-08 2001-11-06 Intuitive Surgical, Inc. Surgical instrument with extended reach for use in minimally invasive surgery
US8239001B2 (en) 2003-10-17 2012-08-07 Medtronic Navigation, Inc. Method and apparatus for surgical navigation
US6499488B1 (en) 1999-10-28 2002-12-31 Winchester Development Associates Surgical sensor
US8644907B2 (en) 1999-10-28 2014-02-04 Medtronic Navigaton, Inc. Method and apparatus for surgical navigation
US7366562B2 (en) 2003-10-17 2008-04-29 Medtronic Navigation, Inc. Method and apparatus for surgical navigation
US6379302B1 (en) 1999-10-28 2002-04-30 Surgical Navigation Technologies Inc. Navigation information overlay onto ultrasound imagery
US6235038B1 (en) 1999-10-28 2001-05-22 Medtronic Surgical Navigation Technologies System for translation of electromagnetic and optical localization systems
US20010036302A1 (en) 1999-12-10 2001-11-01 Miller Michael I. Method and apparatus for cross modality image registration
US7635390B1 (en) 2000-01-14 2009-12-22 Marctec, Llc Joint replacement component having a modular articulating surface
US6377011B1 (en) 2000-01-26 2002-04-23 Massachusetts Institute Of Technology Force feedback user interface for minimally invasive surgical simulator and teleoperator and other similar apparatus
WO2001056007A1 (en) 2000-01-28 2001-08-02 Intersense, Inc. Self-referenced tracking
WO2001064124A1 (en) 2000-03-01 2001-09-07 Surgical Navigation Technologies, Inc. Multiple cannula image guided tool for image guided procedures
AU2001248161A1 (en) 2000-03-15 2001-09-24 Orthosoft Inc. Automatic calibration system for computer-aided surgical instruments
US6535756B1 (en) 2000-04-07 2003-03-18 Surgical Navigation Technologies, Inc. Trajectory storage apparatus and method for surgical navigation system
US6856826B2 (en) 2000-04-28 2005-02-15 Ge Medical Systems Global Technology Company, Llc Fluoroscopic tracking and visualization system
US6856827B2 (en) 2000-04-28 2005-02-15 Ge Medical Systems Global Technology Company, Llc Fluoroscopic tracking and visualization system
US6490475B1 (en) 2000-04-28 2002-12-03 Ge Medical Systems Global Technology Company, Llc Fluoroscopic tracking and visualization system
US6614453B1 (en) 2000-05-05 2003-09-02 Koninklijke Philips Electronics, N.V. Method and apparatus for medical image display for surgical tool planning and navigation in clinical environments
US6645196B1 (en) 2000-06-16 2003-11-11 Intuitive Surgical, Inc. Guided tool change
US6782287B2 (en) 2000-06-27 2004-08-24 The Board Of Trustees Of The Leland Stanford Junior University Method and apparatus for tracking a medical instrument based on image registration
US6837892B2 (en) 2000-07-24 2005-01-04 Mazor Surgical Technologies Ltd. Miniature bone-mounted surgical robot
US6902560B1 (en) 2000-07-27 2005-06-07 Intuitive Surgical, Inc. Roll-pitch-roll surgical tool
DE10037491A1 (de) 2000-08-01 2002-02-14 Stryker Leibinger Gmbh & Co Kg Verfahren zum dreidimensionalen Visualisieren von Strukturen im Körperinneren
US6823207B1 (en) 2000-08-26 2004-11-23 Ge Medical Systems Global Technology Company, Llc Integrated fluoroscopic surgical navigation and imaging workstation with command protocol
JP4022145B2 (ja) 2000-09-25 2007-12-12 ゼット − キャット、インコーポレイテッド 光学および/または磁気マーカを備える蛍光透視重ね合せ構造体
US7953470B2 (en) 2000-10-23 2011-05-31 Deutsches Krebsforschungszentrum Stiftung des öffentlichen Rechts Method, device and navigation aid for navigation during medical interventions
US6718194B2 (en) 2000-11-17 2004-04-06 Ge Medical Systems Global Technology Company, Llc Computer assisted intramedullary rod surgery system with enhanced features
US6666579B2 (en) 2000-12-28 2003-12-23 Ge Medical Systems Global Technology Company, Llc Method and apparatus for obtaining and displaying computed tomography images using a fluoroscopy imaging system
US6840938B1 (en) 2000-12-29 2005-01-11 Intuitive Surgical, Inc. Bipolar cauterizing instrument
CN100491914C (zh) 2001-01-30 2009-05-27 Z-凯特公司 器具的校准器及跟踪器系统
US7220262B1 (en) 2001-03-16 2007-05-22 Sdgi Holdings, Inc. Spinal fixation system and related methods
FR2822674B1 (fr) 2001-04-03 2003-06-27 Scient X Systeme stabilise de fusion intersomatique pour vertebres
WO2002083003A1 (en) 2001-04-11 2002-10-24 Clarke Dana S Tissue structure identification in advance of instrument
US6783524B2 (en) 2001-04-19 2004-08-31 Intuitive Surgical, Inc. Robotic surgical tool with ultrasound cauterizing and cutting instrument
US7824401B2 (en) 2004-10-08 2010-11-02 Intuitive Surgical Operations, Inc. Robotic tool with wristed monopolar electrosurgical end effectors
US6994708B2 (en) 2001-04-19 2006-02-07 Intuitive Surgical Robotic tool with monopolar electro-surgical scissors
US8398634B2 (en) 2002-04-18 2013-03-19 Intuitive Surgical Operations, Inc. Wristed robotic surgical tool for pluggable end-effectors
US6636757B1 (en) 2001-06-04 2003-10-21 Surgical Navigation Technologies, Inc. Method and apparatus for electromagnetic navigation of a surgical probe near a metal object
US7607440B2 (en) 2001-06-07 2009-10-27 Intuitive Surgical, Inc. Methods and apparatus for surgical planning
CA2486520A1 (en) 2001-06-13 2002-12-19 Volume Interactions Pte. Ltd. Guide systems for interacting with a subject, and methods therefor
US6584339B2 (en) 2001-06-27 2003-06-24 Vanderbilt University Method and apparatus for collecting and processing physical space data for use while performing image-guided surgery
JP4347043B2 (ja) 2001-06-29 2009-10-21 イントゥイティブ・サージカル・インコーポレーテッド プラットフォーム関節手首
US7063705B2 (en) 2001-06-29 2006-06-20 Sdgi Holdings, Inc. Fluoroscopic locator and registration device
US20040243147A1 (en) 2001-07-03 2004-12-02 Lipow Kenneth I. Surgical robot and robotic controller
ITMI20011759A1 (it) 2001-08-09 2003-02-09 Nuovo Pignone Spa Dispositivo raschiaiolo per asta di stantuffo di compressori alternativi
US7708741B1 (en) 2001-08-28 2010-05-04 Marctec, Llc Method of preparing bones for knee replacement surgery
US6728599B2 (en) 2001-09-07 2004-04-27 Computer Motion, Inc. Modularity system for computer assisted surgery
US6587750B2 (en) 2001-09-25 2003-07-01 Intuitive Surgical, Inc. Removable infinite roll master grip handle and touch sensor for robotic surgery
US6619840B2 (en) 2001-10-15 2003-09-16 Koninklijke Philips Electronics N.V. Interventional volume scanner
US6839612B2 (en) 2001-12-07 2005-01-04 Institute Surgical, Inc. Microwrist system for surgical procedures
US6947786B2 (en) 2002-02-28 2005-09-20 Surgical Navigation Technologies, Inc. Method and apparatus for perspective inversion
US8996169B2 (en) 2011-12-29 2015-03-31 Mako Surgical Corp. Neural monitor-based dynamic haptics
EP2345370A3 (en) 2002-03-19 2012-05-09 Breakaway Imaging, Llc Computer tomography with a detector following the movement of a pivotable x-ray source
WO2003086714A2 (en) 2002-04-05 2003-10-23 The Trustees Of Columbia University In The City Of New York Robotic scrub nurse
US7099428B2 (en) 2002-06-25 2006-08-29 The Regents Of The University Of Michigan High spatial resolution X-ray computed tomography (CT) system
US7248914B2 (en) 2002-06-28 2007-07-24 Stereotaxis, Inc. Method of navigating medical devices in the presence of radiopaque material
US7630752B2 (en) 2002-08-06 2009-12-08 Stereotaxis, Inc. Remote control of medical devices using a virtual device interface
US7231063B2 (en) 2002-08-09 2007-06-12 Intersense, Inc. Fiducial detection system
WO2004015369A2 (en) 2002-08-09 2004-02-19 Intersense, Inc. Motion tracking system and method
US7155316B2 (en) 2002-08-13 2006-12-26 Microbotics Corporation Microsurgical robot system
US6892090B2 (en) 2002-08-19 2005-05-10 Surgical Navigation Technologies, Inc. Method and apparatus for virtual endoscopy
US7331967B2 (en) 2002-09-09 2008-02-19 Hansen Medical, Inc. Surgical instrument coupling mechanism
ES2204322B1 (es) 2002-10-01 2005-07-16 Consejo Sup. De Invest. Cientificas Navegador funcional.
JP3821435B2 (ja) 2002-10-18 2006-09-13 松下電器産業株式会社 超音波探触子
US7319897B2 (en) 2002-12-02 2008-01-15 Aesculap Ag & Co. Kg Localization device display method and apparatus
US7318827B2 (en) 2002-12-02 2008-01-15 Aesculap Ag & Co. Kg Osteotomy procedure
US8814793B2 (en) 2002-12-03 2014-08-26 Neorad As Respiration monitor
US7386365B2 (en) 2004-05-04 2008-06-10 Intuitive Surgical, Inc. Tool grip calibration for robotic surgery
US7945021B2 (en) 2002-12-18 2011-05-17 Varian Medical Systems, Inc. Multi-mode cone beam CT radiotherapy simulator and treatment machine with a flat panel imager
US7505809B2 (en) 2003-01-13 2009-03-17 Mediguide Ltd. Method and system for registering a first image with a second image relative to the body of a patient
US7660623B2 (en) 2003-01-30 2010-02-09 Medtronic Navigation, Inc. Six degree of freedom alignment display for medical procedures
US7542791B2 (en) 2003-01-30 2009-06-02 Medtronic Navigation, Inc. Method and apparatus for preplanning a surgical procedure
WO2004069040A2 (en) 2003-02-04 2004-08-19 Z-Kat, Inc. Method and apparatus for computer assistance with intramedullary nail procedure
US6988009B2 (en) 2003-02-04 2006-01-17 Zimmer Technology, Inc. Implant registration device for surgical navigation system
US7083615B2 (en) 2003-02-24 2006-08-01 Intuitive Surgical Inc Surgical tool having electrocautery energy supply conductor with inhibited current leakage
JP4163991B2 (ja) 2003-04-30 2008-10-08 株式会社モリタ製作所 X線ct撮影装置及び撮影方法
US9060770B2 (en) 2003-05-20 2015-06-23 Ethicon Endo-Surgery, Inc. Robotically-driven surgical instrument with E-beam driver
US7194120B2 (en) 2003-05-29 2007-03-20 Board Of Regents, The University Of Texas System Methods and systems for image-guided placement of implants
US7171257B2 (en) 2003-06-11 2007-01-30 Accuray Incorporated Apparatus and method for radiosurgery
US9002518B2 (en) 2003-06-30 2015-04-07 Intuitive Surgical Operations, Inc. Maximum torque driving of robotic surgical tools in robotic surgical systems
US7960935B2 (en) 2003-07-08 2011-06-14 The Board Of Regents Of The University Of Nebraska Robotic devices with agent delivery components and related methods
US7042184B2 (en) 2003-07-08 2006-05-09 Board Of Regents Of The University Of Nebraska Microrobot for surgical applications
US7324623B2 (en) 2003-07-15 2008-01-29 Koninklijke Philips Electronics N. V. Computed tomography scanner with large gantry bore
US7313430B2 (en) 2003-08-28 2007-12-25 Medtronic Navigation, Inc. Method and apparatus for performing stereotactic surgery
US7835778B2 (en) 2003-10-16 2010-11-16 Medtronic Navigation, Inc. Method and apparatus for surgical navigation of a multiple piece construct for implantation
US20050171558A1 (en) 2003-10-17 2005-08-04 Abovitz Rony A. Neurosurgery targeting and delivery system for brain structures
US7840253B2 (en) 2003-10-17 2010-11-23 Medtronic Navigation, Inc. Method and apparatus for surgical navigation
US20050096502A1 (en) 2003-10-29 2005-05-05 Khalili Theodore M. Robotic surgical device
US9393039B2 (en) 2003-12-17 2016-07-19 Brainlab Ag Universal instrument or instrument set for computer guided surgery
US7466303B2 (en) 2004-02-10 2008-12-16 Sunnybrook Health Sciences Center Device and process for manipulating real and virtual objects in three-dimensional space
WO2005086062A2 (en) 2004-03-05 2005-09-15 Depuy International Limited Registration methods and apparatus
US7974681B2 (en) 2004-03-05 2011-07-05 Hansen Medical, Inc. Robotic catheter system
US20080269596A1 (en) 2004-03-10 2008-10-30 Ian Revie Orthpaedic Monitoring Systems, Methods, Implants and Instruments
US7657298B2 (en) 2004-03-11 2010-02-02 Stryker Leibinger Gmbh & Co. Kg System, device, and method for determining a position of an object
US8475495B2 (en) 2004-04-08 2013-07-02 Globus Medical Polyaxial screw
WO2005112563A2 (en) 2004-04-13 2005-12-01 The University Of Georgia Research Foundation, Inc. Virtual surgical system and methods
KR100617974B1 (ko) 2004-04-22 2006-08-31 한국과학기술원 명령추종이 가능한 복강경 장치
US7567834B2 (en) 2004-05-03 2009-07-28 Medtronic Navigation, Inc. Method and apparatus for implantation between two vertebral bodies
US7379790B2 (en) 2004-05-04 2008-05-27 Intuitive Surgical, Inc. Tool memory-based software upgrades for robotic surgery
US7974674B2 (en) 2004-05-28 2011-07-05 St. Jude Medical, Atrial Fibrillation Division, Inc. Robotic surgical system and method for surface modeling
US8528565B2 (en) 2004-05-28 2013-09-10 St. Jude Medical, Atrial Fibrillation Division, Inc. Robotic surgical system and method for automated therapy delivery
FR2871363B1 (fr) 2004-06-15 2006-09-01 Medtech Sa Dispositif robotise de guidage pour outil chirurgical
US7327865B2 (en) 2004-06-30 2008-02-05 Accuray, Inc. Fiducial-less tracking with non-rigid image registration
ITMI20041448A1 (it) 2004-07-20 2004-10-20 Milano Politecnico Apparato per la fusione e navigazione di immagini ecografiche e volumetriche di un paziente che utilizza una combinazione di marcatori ottici attivi e passivi per la localizzazione di sonde ecografiche e strumenti chirurgici rispetto al paziente
US7440793B2 (en) 2004-07-22 2008-10-21 Sunita Chauhan Apparatus and method for removing abnormal tissue
US7979157B2 (en) 2004-07-23 2011-07-12 Mcmaster University Multi-purpose robotic operating system and method
GB2422759B (en) 2004-08-05 2008-07-16 Elekta Ab Rotatable X-ray scan apparatus with cone beam offset
US7702379B2 (en) 2004-08-25 2010-04-20 General Electric Company System and method for hybrid tracking in surgical navigation
US7555331B2 (en) 2004-08-26 2009-06-30 Stereotaxis, Inc. Method for surgical navigation utilizing scale-invariant registration between a navigation system and a localization system
DE102004042489B4 (de) 2004-08-31 2012-03-29 Siemens Ag Medizinische Untersuchungs- oder Behandlungseinrichtung mit dazugehörigem Verfahren
JP4756045B2 (ja) 2004-09-15 2011-08-24 エーオー テクノロジー エージー 較正装置
EP1799107A1 (en) 2004-10-06 2007-06-27 Philips Intellectual Property & Standards GmbH Computed tomography method
US7831294B2 (en) 2004-10-07 2010-11-09 Stereotaxis, Inc. System and method of surgical imagining with anatomical overlay for navigation of surgical devices
US7983733B2 (en) 2004-10-26 2011-07-19 Stereotaxis, Inc. Surgical navigation using a three-dimensional user interface
US7062006B1 (en) 2005-01-19 2006-06-13 The Board Of Trustees Of The Leland Stanford Junior University Computed tomography with increased field of view
US7763015B2 (en) 2005-01-24 2010-07-27 Intuitive Surgical Operations, Inc. Modular manipulator support for robotic surgery
US7837674B2 (en) 2005-01-24 2010-11-23 Intuitive Surgical Operations, Inc. Compact counter balance for robotic surgical systems
US20060184396A1 (en) 2005-01-28 2006-08-17 Dennis Charles L System and method for surgical navigation
US7231014B2 (en) 2005-02-14 2007-06-12 Varian Medical Systems Technologies, Inc. Multiple mode flat panel X-ray imaging system
CN101528122B (zh) 2005-03-07 2011-09-07 赫克托·O·帕切科 一种用于插入到椎弓根中的套管
US8375808B2 (en) 2005-12-30 2013-02-19 Intuitive Surgical Operations, Inc. Force sensing for surgical instruments
WO2006102756A1 (en) 2005-03-30 2006-10-05 University Western Ontario Anisotropic hydrogels
US8496647B2 (en) 2007-12-18 2013-07-30 Intuitive Surgical Operations, Inc. Ribbed force sensor
US7720523B2 (en) 2005-04-20 2010-05-18 General Electric Company System and method for managing power deactivation within a medical imaging system
US8208988B2 (en) 2005-05-13 2012-06-26 General Electric Company System and method for controlling a medical imaging device
CN101193603B (zh) 2005-06-06 2010-11-03 直观外科手术公司 腹腔镜的超声机器人外科手术系统
US8398541B2 (en) 2006-06-06 2013-03-19 Intuitive Surgical Operations, Inc. Interactive user interfaces for robotic minimally invasive surgical systems
JP2007000406A (ja) 2005-06-24 2007-01-11 Ge Medical Systems Global Technology Co Llc X線ct撮影方法およびx線ct装置
US7840256B2 (en) 2005-06-27 2010-11-23 Biomet Manufacturing Corporation Image guided tracking array and method
US20070005002A1 (en) 2005-06-30 2007-01-04 Intuitive Surgical Inc. Robotic surgical instruments for irrigation, aspiration, and blowing
US20070038059A1 (en) 2005-07-07 2007-02-15 Garrett Sheffer Implant and instrument morphing
US20080302950A1 (en) 2005-08-11 2008-12-11 The Brigham And Women's Hospital, Inc. System and Method for Performing Single Photon Emission Computed Tomography (Spect) with a Focal-Length Cone-Beam Collimation
US7787699B2 (en) 2005-08-17 2010-08-31 General Electric Company Real-time integration and recording of surgical image data
US8800838B2 (en) 2005-08-31 2014-08-12 Ethicon Endo-Surgery, Inc. Robotically-controlled cable-based surgical end effectors
US20070073133A1 (en) 2005-09-15 2007-03-29 Schoenefeld Ryan J Virtual mouse for use in surgical navigation
US7643862B2 (en) 2005-09-15 2010-01-05 Biomet Manufacturing Corporation Virtual mouse for use in surgical navigation
US7835784B2 (en) 2005-09-21 2010-11-16 Medtronic Navigation, Inc. Method and apparatus for positioning a reference frame
US8079950B2 (en) 2005-09-29 2011-12-20 Intuitive Surgical Operations, Inc. Autofocus and/or autoscaling in telesurgery
EP1973494A2 (en) 2005-11-17 2008-10-01 Calypso Medical Technologies, INC. Apparatus and methods for using an electromagnetic transponder in orthopedic procedures
US7711406B2 (en) 2005-11-23 2010-05-04 General Electric Company System and method for detection of electromagnetic radiation by amorphous silicon x-ray detector for metal detection in x-ray imaging
EP1795142B1 (en) 2005-11-24 2008-06-11 BrainLAB AG Medical tracking system using a gamma camera
US8672922B2 (en) 2005-12-20 2014-03-18 Intuitive Surgical Operations, Inc. Wireless communication in a robotic surgical system
US8182470B2 (en) 2005-12-20 2012-05-22 Intuitive Surgical Operations, Inc. Telescoping insertion axis of a robotic surgical system
US7762825B2 (en) 2005-12-20 2010-07-27 Intuitive Surgical Operations, Inc. Electro-mechanical interfaces to mount robotic surgical arms
US7819859B2 (en) 2005-12-20 2010-10-26 Intuitive Surgical Operations, Inc. Control system for reducing internally generated frictional and inertial resistance to manual positioning of a surgical manipulator
WO2007075844A1 (en) 2005-12-20 2007-07-05 Intuitive Surgical, Inc. Telescoping insertion axis of a robotic surgical system
US7689320B2 (en) 2005-12-20 2010-03-30 Intuitive Surgical Operations, Inc. Robotic surgical system with joint motion controller adapted to reduce instrument tip vibrations
US8054752B2 (en) 2005-12-22 2011-11-08 Intuitive Surgical Operations, Inc. Synchronous data communication
ES2292327B1 (es) 2005-12-26 2009-04-01 Consejo Superior Investigaciones Cientificas Mini camara gamma autonoma y con sistema de localizacion, para uso intraquirurgico.
EP1965717B1 (en) 2005-12-30 2012-05-16 Intuitive Surgical Operations, Inc. Surgical instrument with modular force sensor
US7907166B2 (en) 2005-12-30 2011-03-15 Intuitive Surgical Operations, Inc. Stereo telestration for robotic surgery
US7930065B2 (en) 2005-12-30 2011-04-19 Intuitive Surgical Operations, Inc. Robotic surgery system including position sensors using fiber bragg gratings
US7533892B2 (en) 2006-01-05 2009-05-19 Intuitive Surgical, Inc. Steering system for heavy mobile medical equipment
KR100731052B1 (ko) 2006-01-23 2007-06-22 한양대학교 산학협력단 미세침습 수술을 위한 컴퓨터통합 수술 보조시스템
US8162926B2 (en) 2006-01-25 2012-04-24 Intuitive Surgical Operations Inc. Robotic arm with five-bar spherical linkage
US8142420B2 (en) 2006-01-25 2012-03-27 Intuitive Surgical Operations Inc. Robotic arm with five-bar spherical linkage
US7845537B2 (en) 2006-01-31 2010-12-07 Ethicon Endo-Surgery, Inc. Surgical instrument having recording capabilities
US20110290856A1 (en) 2006-01-31 2011-12-01 Ethicon Endo-Surgery, Inc. Robotically-controlled surgical instrument with force-feedback capabilities
EP1815950A1 (en) 2006-02-03 2007-08-08 The European Atomic Energy Community (EURATOM), represented by the European Commission Robotic surgical system for performing minimally invasive medical procedures
US8219178B2 (en) 2007-02-16 2012-07-10 Catholic Healthcare West Method and system for performing invasive medical procedures using a surgical robot
US8219177B2 (en) 2006-02-16 2012-07-10 Catholic Healthcare West Method and system for performing invasive medical procedures using a surgical robot
US8526688B2 (en) 2006-03-09 2013-09-03 General Electric Company Methods and systems for registration of surgical navigation data and image data
JP5248474B2 (ja) 2006-03-30 2013-07-31 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ターゲッティング方法、ターゲッティング装置、コンピュータ読取り可能な媒体、及びプログラムエレメント
US20070233238A1 (en) 2006-03-31 2007-10-04 Medtronic Vascular, Inc. Devices for Imaging and Navigation During Minimally Invasive Non-Bypass Cardiac Procedures
US7760849B2 (en) 2006-04-14 2010-07-20 William Beaumont Hospital Tetrahedron beam computed tomography
US8112292B2 (en) 2006-04-21 2012-02-07 Medtronic Navigation, Inc. Method and apparatus for optimizing a therapy
US8021310B2 (en) 2006-04-21 2011-09-20 Nellcor Puritan Bennett Llc Work of breathing display for a ventilation system
US7940999B2 (en) 2006-04-24 2011-05-10 Siemens Medical Solutions Usa, Inc. System and method for learning-based 2D/3D rigid registration for image-guided surgery using Jensen-Shannon divergence
EP2024761B1 (en) 2006-05-16 2014-05-07 SurgicEye GmbH Method and device for 3d acquisition, 3d visualization and computer guided surgery using nuclear probes
US20080004523A1 (en) 2006-06-29 2008-01-03 General Electric Company Surgical tool guide
DE102006032127B4 (de) 2006-07-05 2008-04-30 Aesculap Ag & Co. Kg Kalibrierverfahren und Kalibriervorrichtung für eine chirurgische Referenzierungseinheit
US20080013809A1 (en) 2006-07-14 2008-01-17 Bracco Imaging, Spa Methods and apparatuses for registration in image guided surgery
DE502006005408D1 (de) 2006-08-08 2009-12-31 Brainlab Ag Planungsverfahren und System zur Freiform-Implantatsanpassung
EP2053972B1 (en) 2006-08-17 2013-09-11 Koninklijke Philips Electronics N.V. Computed tomography image acquisition
DE102006041033B4 (de) 2006-09-01 2017-01-19 Siemens Healthcare Gmbh Verfahren zur Rekonstruktion eines dreidimensionalen Bildvolumens
US8231610B2 (en) 2006-09-06 2012-07-31 National Cancer Center Robotic surgical system for laparoscopic surgery
US8150498B2 (en) 2006-09-08 2012-04-03 Medtronic, Inc. System for identification of anatomical landmarks
US8150497B2 (en) 2006-09-08 2012-04-03 Medtronic, Inc. System for navigating a planned procedure within a body
US20080082109A1 (en) 2006-09-08 2008-04-03 Hansen Medical, Inc. Robotic surgical system with forward-oriented field of view guide instrument navigation
US8532741B2 (en) 2006-09-08 2013-09-10 Medtronic, Inc. Method and apparatus to optimize electrode placement for neurological stimulation
US8248413B2 (en) 2006-09-18 2012-08-21 Stryker Corporation Visual navigation system for endoscopic surgery
JP5609112B2 (ja) 2006-09-25 2014-10-22 メイザー ロボティックス リミテッド 三次元画像データの作成方法
US8660635B2 (en) 2006-09-29 2014-02-25 Medtronic, Inc. Method and apparatus for optimizing a computer assisted surgical procedure
US8052688B2 (en) 2006-10-06 2011-11-08 Wolf Ii Erich Electromagnetic apparatus and method for nerve localization during spinal surgery
US20080144906A1 (en) 2006-10-09 2008-06-19 General Electric Company System and method for video capture for fluoroscopy and navigation
US20080109012A1 (en) 2006-11-03 2008-05-08 General Electric Company System, method and apparatus for tableside remote connections of medical instruments and systems using wireless communications
US8551114B2 (en) 2006-11-06 2013-10-08 Human Robotics S.A. De C.V. Robotic surgical device
US20080108912A1 (en) 2006-11-07 2008-05-08 General Electric Company System and method for measurement of clinical parameters of the knee for use during knee replacement surgery
US20080108991A1 (en) 2006-11-08 2008-05-08 General Electric Company Method and apparatus for performing pedicle screw fusion surgery
US8682413B2 (en) 2006-11-15 2014-03-25 General Electric Company Systems and methods for automated tracker-driven image selection
CA2670261A1 (en) 2006-11-16 2008-05-29 Vanderbilt University Apparatus and methods of compensating for organ deformation, registration of internal structures to images, and applications of same
US7935130B2 (en) 2006-11-16 2011-05-03 Intuitive Surgical Operations, Inc. Two-piece end-effectors for robotic surgical tools
US8727618B2 (en) 2006-11-22 2014-05-20 Siemens Aktiengesellschaft Robotic device and method for trauma patient diagnosis and therapy
US7835557B2 (en) 2006-11-28 2010-11-16 Medtronic Navigation, Inc. System and method for detecting status of imaging device
US8320991B2 (en) 2006-12-01 2012-11-27 Medtronic Navigation Inc. Portable electromagnetic navigation system
US7683331B2 (en) 2006-12-08 2010-03-23 Rush University Medical Center Single photon emission computed tomography (SPECT) system for cardiac imaging
US7683332B2 (en) 2006-12-08 2010-03-23 Rush University Medical Center Integrated single photon emission computed tomography (SPECT)/transmission computed tomography (TCT) system for cardiac imaging
US8556807B2 (en) 2006-12-21 2013-10-15 Intuitive Surgical Operations, Inc. Hermetically sealed distal sensor endoscope
US20080177203A1 (en) 2006-12-22 2008-07-24 General Electric Company Surgical navigation planning system and method for placement of percutaneous instrumentation and implants
DE102006061178A1 (de) 2006-12-22 2008-06-26 Siemens Ag System zur Durchführung und Überwachung minimal-invasiver Eingriffe
US20080161680A1 (en) 2006-12-29 2008-07-03 General Electric Company System and method for surgical navigation of motion preservation prosthesis
US9220573B2 (en) 2007-01-02 2015-12-29 Medtronic Navigation, Inc. System and method for tracking positions of uniform marker geometries
US8684253B2 (en) 2007-01-10 2014-04-01 Ethicon Endo-Surgery, Inc. Surgical instrument with wireless communication between a control unit of a robotic system and remote sensor
US8374673B2 (en) 2007-01-25 2013-02-12 Warsaw Orthopedic, Inc. Integrated surgical navigational and neuromonitoring system having automated surgical assistance and control
EP2124799B1 (en) 2007-02-01 2012-10-31 Interactive Neuroscience Center, Llc Surgical navigation
US20080195081A1 (en) 2007-02-02 2008-08-14 Hansen Medical, Inc. Spinal surgery methods using a robotic instrument system
US8233963B2 (en) 2007-02-19 2012-07-31 Medtronic Navigation, Inc. Automatic identification of tracked surgical devices using an electromagnetic localization system
US8600478B2 (en) 2007-02-19 2013-12-03 Medtronic Navigation, Inc. Automatic identification of instruments used with a surgical navigation system
DE102007009017B3 (de) 2007-02-23 2008-09-25 Siemens Ag Anordnung zur Unterstützung eines perkutanen Eingriffs
US10039613B2 (en) 2007-03-01 2018-08-07 Surgical Navigation Technologies, Inc. Method for localizing an imaging device with a surgical navigation system
US8098914B2 (en) 2007-03-05 2012-01-17 Siemens Aktiengesellschaft Registration of CT volumes with fluoroscopic images
US20080228068A1 (en) 2007-03-13 2008-09-18 Viswanathan Raju R Automated Surgical Navigation with Electro-Anatomical and Pre-Operative Image Data
US8821511B2 (en) 2007-03-15 2014-09-02 General Electric Company Instrument guide for use with a surgical navigation system
US20080235052A1 (en) 2007-03-19 2008-09-25 General Electric Company System and method for sharing medical information between image-guided surgery systems
US8150494B2 (en) 2007-03-29 2012-04-03 Medtronic Navigation, Inc. Apparatus for registering a physical space to image space
US7879045B2 (en) 2007-04-10 2011-02-01 Medtronic, Inc. System for guiding instruments having different sizes
US8560118B2 (en) 2007-04-16 2013-10-15 Neuroarm Surgical Ltd. Methods, devices, and systems for non-mechanically restricting and/or programming movement of a tool of a manipulator along a single axis
US8738181B2 (en) 2007-04-16 2014-05-27 Alexander Greer Methods, devices, and systems for automated movements involving medical robots
US8010177B2 (en) 2007-04-24 2011-08-30 Medtronic, Inc. Intraoperative image registration
US8108025B2 (en) 2007-04-24 2012-01-31 Medtronic, Inc. Flexible array for use in navigated surgery
US20090012509A1 (en) 2007-04-24 2009-01-08 Medtronic, Inc. Navigated Soft Tissue Penetrating Laser System
US8301226B2 (en) 2007-04-24 2012-10-30 Medtronic, Inc. Method and apparatus for performing a navigated procedure
US8311611B2 (en) 2007-04-24 2012-11-13 Medtronic, Inc. Method for performing multiple registrations in a navigated procedure
US8062364B1 (en) 2007-04-27 2011-11-22 Knee Creations, Llc Osteoarthritis treatment and device
DE102007022122B4 (de) 2007-05-11 2019-07-11 Deutsches Zentrum für Luft- und Raumfahrt e.V. Greifvorrichtung für eine Chirurgie-Roboter-Anordnung
US8057397B2 (en) 2007-05-16 2011-11-15 General Electric Company Navigation and imaging system sychronized with respiratory and/or cardiac activity
US20080287771A1 (en) 2007-05-17 2008-11-20 General Electric Company Surgical navigation system with electrostatic shield
US8934961B2 (en) 2007-05-18 2015-01-13 Biomet Manufacturing, Llc Trackable diagnostic scope apparatus and methods of use
US20080300478A1 (en) 2007-05-30 2008-12-04 General Electric Company System and method for displaying real-time state of imaged anatomy during a surgical procedure
US20080300477A1 (en) 2007-05-30 2008-12-04 General Electric Company System and method for correction of automated image registration
US9096033B2 (en) 2007-06-13 2015-08-04 Intuitive Surgical Operations, Inc. Surgical system instrument sterile adapter
US9468412B2 (en) 2007-06-22 2016-10-18 General Electric Company System and method for accuracy verification for image based surgical navigation
EP2170564A4 (en) 2007-07-12 2015-10-07 Univ Nebraska METHODS AND SYSTEMS FOR ACTUATION IN ROBOTIC DEVICES
US7834484B2 (en) 2007-07-16 2010-11-16 Tyco Healthcare Group Lp Connection cable and method for activating a voltage-controlled generator
JP2009045428A (ja) 2007-07-25 2009-03-05 Terumo Corp 操作機構、医療用マニピュレータ及び手術用ロボットシステム
US8100950B2 (en) 2007-07-27 2012-01-24 The Cleveland Clinic Foundation Oblique lumbar interbody fusion
US8035685B2 (en) 2007-07-30 2011-10-11 General Electric Company Systems and methods for communicating video data between a mobile imaging system and a fixed monitor system
US8328818B1 (en) 2007-08-31 2012-12-11 Globus Medical, Inc. Devices and methods for treating bone
JP5452826B2 (ja) 2007-09-19 2014-03-26 ロバーツ、ウォルター、エー. 直接可視化ロボットによる術中放射線療法アプリケータ装置
US20090080737A1 (en) 2007-09-25 2009-03-26 General Electric Company System and Method for Use of Fluoroscope and Computed Tomography Registration for Sinuplasty Navigation
US9050120B2 (en) 2007-09-30 2015-06-09 Intuitive Surgical Operations, Inc. Apparatus and method of user interface with alternate tool mode for robotic surgical tools
US9522046B2 (en) 2010-08-23 2016-12-20 Gip Robotic surgery system
WO2009060344A2 (en) 2007-11-06 2009-05-14 Koninklijke Philips Electronics, N.V. Nuclear medicine spect-ct machine with integrated asymmetric flat panel cone-beam ct and spect system
DE102007055203A1 (de) 2007-11-19 2009-05-20 Kuka Roboter Gmbh Einen Roboter aufweisende Vorrichtung, medizinischer Arbeitsplatz und Verfahren zum Registrieren eines Objekts
US8561473B2 (en) 2007-12-18 2013-10-22 Intuitive Surgical Operations, Inc. Force sensor temperature compensation
EP2224852A1 (en) 2007-12-21 2010-09-08 Koninklijke Philips Electronics N.V. Synchronous interventional scanner
US8400094B2 (en) 2007-12-21 2013-03-19 Intuitive Surgical Operations, Inc. Robotic surgical system with patient support
US8864798B2 (en) 2008-01-18 2014-10-21 Globus Medical, Inc. Transverse connector
WO2009097539A2 (en) 2008-01-30 2009-08-06 The Trustees Of Columbia University In The City Of New York Systems, devices, and methods for robot-assisted micro-surgical stenting
US20090198121A1 (en) 2008-02-01 2009-08-06 Martin Hoheisel Method and apparatus for coordinating contrast agent injection and image acquisition in c-arm computed tomography
US8573465B2 (en) 2008-02-14 2013-11-05 Ethicon Endo-Surgery, Inc. Robotically-controlled surgical end effector system with rotary actuated closure systems
US8696458B2 (en) 2008-02-15 2014-04-15 Thales Visionix, Inc. Motion tracking system and method using camera and non-camera sensors
US7925653B2 (en) 2008-02-27 2011-04-12 General Electric Company Method and system for accessing a group of objects in an electronic document
US20090228019A1 (en) 2008-03-10 2009-09-10 Yosef Gross Robotic surgical system
US8282653B2 (en) 2008-03-24 2012-10-09 Board Of Regents Of The University Of Nebraska System and methods for controlling surgical tool elements
CN102017681B (zh) 2008-03-28 2015-05-06 爱立信电话股份有限公司 切换期间被操纵或有缺陷基站的识别
US8808164B2 (en) 2008-03-28 2014-08-19 Intuitive Surgical Operations, Inc. Controlling a robotic surgical tool with a display monitor
US8333755B2 (en) 2008-03-31 2012-12-18 Intuitive Surgical Operations, Inc. Coupler to transfer controller motion from a robotic manipulator to an attached instrument
US7843158B2 (en) 2008-03-31 2010-11-30 Intuitive Surgical Operations, Inc. Medical robotic system adapted to inhibit motions resulting in excessive end effector forces
US7886743B2 (en) 2008-03-31 2011-02-15 Intuitive Surgical Operations, Inc. Sterile drape interface for robotic surgical instrument
US9002076B2 (en) 2008-04-15 2015-04-07 Medtronic, Inc. Method and apparatus for optimal trajectory planning
US9345875B2 (en) 2008-04-17 2016-05-24 Medtronic, Inc. Method and apparatus for cannula fixation for an array insertion tube set
US8167793B2 (en) 2008-04-26 2012-05-01 Intuitive Surgical Operations, Inc. Augmented stereoscopic visualization for a surgical robot using time duplexing
US8364243B2 (en) 2008-04-30 2013-01-29 Nanosys, Inc. Non-fouling surfaces for reflective spheres
US9579161B2 (en) 2008-05-06 2017-02-28 Medtronic Navigation, Inc. Method and apparatus for tracking a patient
US20110022229A1 (en) 2008-06-09 2011-01-27 Bae Sang Jang Master interface and driving method of surgical robot
TW201004607A (en) 2008-07-25 2010-02-01 Been-Der Yang Image guided navigation system and method thereof
US8054184B2 (en) 2008-07-31 2011-11-08 Intuitive Surgical Operations, Inc. Identification of surgical instrument attached to surgical robot
US8771170B2 (en) 2008-08-01 2014-07-08 Microaccess, Inc. Methods and apparatus for transesophageal microaccess surgery
JP2010035984A (ja) 2008-08-08 2010-02-18 Canon Inc X線撮影装置
EP2153794B1 (en) 2008-08-15 2016-11-09 Stryker European Holdings I, LLC System for and method of visualizing an interior of a body
US8500728B2 (en) 2008-08-18 2013-08-06 Encision, Inc. Enhanced control systems including flexible shielding and support systems for electrosurgical applications
DE102008041813B4 (de) 2008-09-04 2013-06-20 Carl Zeiss Microscopy Gmbh Verfahren zur Tiefenanalyse einer organischen Probe
US7900524B2 (en) 2008-09-09 2011-03-08 Intersense, Inc. Monitoring tools
US8165658B2 (en) 2008-09-26 2012-04-24 Medtronic, Inc. Method and apparatus for positioning a guide relative to a base
US8073335B2 (en) 2008-09-30 2011-12-06 Intuitive Surgical Operations, Inc. Operator input device for a robotic surgical system
US8379791B2 (en) 2008-10-10 2013-02-19 Koninklijke Philips Electronics N.V. Method and apparatus to improve CT image acquisition using a displaced geometry
KR100944412B1 (ko) 2008-10-13 2010-02-25 (주)미래컴퍼니 수술용 슬레이브 로봇
WO2010044852A2 (en) 2008-10-14 2010-04-22 University Of Florida Research Foundation, Inc. Imaging platform to provide integrated navigation capabilities for surgical guidance
KR101713676B1 (ko) 2008-10-20 2017-03-08 더 존스 홉킨스 유니버시티 환경 성질 측정 및 그래픽 디스플레이
EP2179703B1 (de) 2008-10-21 2012-03-28 BrainLAB AG Integration von chirurgischem Instrument und Anzeigevorrichtung zur Unterstützung der bildgeführten Chirurgie
US20110150765A1 (en) 2008-10-31 2011-06-23 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Frozen compositions and methods for piercing a substrate
KR101075363B1 (ko) 2008-10-31 2011-10-19 정창욱 최소 침습 수술 도구를 포함하는 수술용 로봇 시스템
US9033958B2 (en) 2008-11-11 2015-05-19 Perception Raisonnement Action En Medecine Surgical robotic system
TWI435705B (zh) 2008-11-20 2014-05-01 Been Der Yang 手術用定位裝置及應用其之影像導航系統
WO2010061810A1 (ja) 2008-11-27 2010-06-03 株式会社 日立メディコ 放射線撮像装置
US8483800B2 (en) 2008-11-29 2013-07-09 General Electric Company Surgical navigation enabled imaging table environment
WO2010064234A2 (en) 2008-12-01 2010-06-10 Mazor Surgical Technologies Ltd. Robot guided oblique spinal stabilization
ES2341079B1 (es) 2008-12-11 2011-07-13 Fundacio Clinic Per A La Recerca Biomedica Equipo para vision mejorada por infrarrojo de estructuras vasculares,aplicable para asistir intervenciones fetoscopicas, laparoscopicas y endoscopicas y proceso de tratamiento de la señal para mejorar dicha vision.
US8021393B2 (en) 2008-12-12 2011-09-20 Globus Medical, Inc. Lateral spinous process spacer with deployable wings
US8830224B2 (en) 2008-12-31 2014-09-09 Intuitive Surgical Operations, Inc. Efficient 3-D telestration for local robotic proctoring
US8184880B2 (en) 2008-12-31 2012-05-22 Intuitive Surgical Operations, Inc. Robust sparse image matching for robotic surgery
US8374723B2 (en) 2008-12-31 2013-02-12 Intuitive Surgical Operations, Inc. Obtaining force information in a minimally invasive surgical procedure
US8594841B2 (en) 2008-12-31 2013-11-26 Intuitive Surgical Operations, Inc. Visual force feedback in a minimally invasive surgical procedure
EP2389114A1 (en) 2009-01-21 2011-11-30 Koninklijke Philips Electronics N.V. Method and apparatus for large field of view imaging and detection and compensation of motion artifacts
EP2381877B1 (en) 2009-01-29 2018-02-28 Imactis Method and device for navigation of a surgical tool
KR101038417B1 (ko) 2009-02-11 2011-06-01 주식회사 이턴 수술 로봇 시스템 및 그 제어 방법
US9737235B2 (en) 2009-03-09 2017-08-22 Medtronic Navigation, Inc. System and method for image-guided navigation
US8418073B2 (en) 2009-03-09 2013-04-09 Intuitive Surgical Operations, Inc. User interfaces for electrosurgical tools in robotic surgical systems
US8120301B2 (en) 2009-03-09 2012-02-21 Intuitive Surgical Operations, Inc. Ergonomic surgeon control console in robotic surgical systems
US8918207B2 (en) 2009-03-09 2014-12-23 Intuitive Surgical Operations, Inc. Operator input device for a robotic surgical system
CA2755036A1 (en) 2009-03-10 2010-09-16 Mcmaster University Mobile robotic surgical system
US8335552B2 (en) 2009-03-20 2012-12-18 Medtronic, Inc. Method and apparatus for instrument placement
WO2010110560A2 (ko) 2009-03-24 2010-09-30 주식회사 래보 증강현실을 이용한 수술 로봇 시스템 및 그 제어 방법
US20100249571A1 (en) 2009-03-31 2010-09-30 General Electric Company Surgical navigation system with wireless magnetoresistance tracking sensors
US8882803B2 (en) 2009-04-01 2014-11-11 Globus Medical, Inc. Orthopedic clamp and extension rod
US20100280363A1 (en) 2009-04-24 2010-11-04 Medtronic, Inc. Electromagnetic Navigation of Medical Instruments for Cardiothoracic Surgery
WO2010144219A1 (en) 2009-05-18 2010-12-16 Loma Linda University Method and devices for performing minimally invasive surgery
ES2388029B1 (es) 2009-05-22 2013-08-13 Universitat Politècnica De Catalunya Sistema robótico para cirugia laparoscópica.
CN101897593B (zh) 2009-05-26 2014-08-13 清华大学 一种计算机层析成像设备和方法
US8121249B2 (en) 2009-06-04 2012-02-21 Virginia Tech Intellectual Properties, Inc. Multi-parameter X-ray computed tomography
WO2011013164A1 (ja) 2009-07-27 2011-02-03 株式会社島津製作所 放射線撮影装置
CN102598059B (zh) 2009-08-06 2015-07-01 皇家飞利浦电子股份有限公司 利用偏移探测器几何结构生成计算断层摄影图像的方法和设备
WO2011021192A1 (en) 2009-08-17 2011-02-24 Mazor Surgical Technologies Ltd. Device for improving the accuracy of manual operations
US9844414B2 (en) 2009-08-31 2017-12-19 Gregory S. Fischer System and method for robotic surgical intervention in a magnetic resonance imager
EP2298223A1 (en) 2009-09-21 2011-03-23 Stryker Leibinger GmbH & Co. KG Technique for registering image data of an object
US8465476B2 (en) 2009-09-23 2013-06-18 Intuitive Surgical Operations, Inc. Cannula mounting fixture
WO2011038759A1 (en) 2009-09-30 2011-04-07 Brainlab Ag Two-part medical tracking marker
NL1037348C2 (en) 2009-10-02 2011-04-05 Univ Eindhoven Tech Surgical robot, instrument manipulator, combination of an operating table and a surgical robot, and master-slave operating system.
US8685098B2 (en) 2010-06-25 2014-04-01 Globus Medical, Inc. Expandable fusion device and method of installation thereof
US8062375B2 (en) 2009-10-15 2011-11-22 Globus Medical, Inc. Expandable fusion device and method of installation thereof
US8556979B2 (en) 2009-10-15 2013-10-15 Globus Medical, Inc. Expandable fusion device and method of installation thereof
US8679183B2 (en) 2010-06-25 2014-03-25 Globus Medical Expandable fusion device and method of installation thereof
US20110098553A1 (en) 2009-10-28 2011-04-28 Steven Robbins Automatic registration of images for image guided surgery
USD631966S1 (en) 2009-11-10 2011-02-01 Globus Medical, Inc. Basilar invagination implant
US8521331B2 (en) 2009-11-13 2013-08-27 Intuitive Surgical Operations, Inc. Patient-side surgeon interface for a minimally invasive, teleoperated surgical instrument
US20110137152A1 (en) 2009-12-03 2011-06-09 General Electric Company System and method for cooling components of a surgical navigation system
US8277509B2 (en) 2009-12-07 2012-10-02 Globus Medical, Inc. Transforaminal prosthetic spinal disc apparatus
JP5739902B2 (ja) 2009-12-10 2015-06-24 コーニンクレッカ フィリップス エヌ ヴェ X線デバイス及び方法
US8694075B2 (en) 2009-12-21 2014-04-08 General Electric Company Intra-operative registration for navigated surgical procedures
US8353963B2 (en) 2010-01-12 2013-01-15 Globus Medical Expandable spacer and method for use thereof
EP2523621B1 (en) 2010-01-13 2016-09-28 Koninklijke Philips N.V. Image integration based registration and navigation for endoscopic surgery
US9381045B2 (en) 2010-01-13 2016-07-05 Jcbd, Llc Sacroiliac joint implant and sacroiliac joint instrument for fusing a sacroiliac joint
EP2524289B1 (en) 2010-01-14 2016-12-07 Brainlab AG Controlling and/or operating a medical device by means of a light pointer
US9039769B2 (en) 2010-03-17 2015-05-26 Globus Medical, Inc. Intervertebral nucleus and annulus implants and method of use thereof
US20140330288A1 (en) 2010-03-25 2014-11-06 Precision Automation And Robotics India Ltd. Articulating Arm for a Robotic Surgical Instrument System
US20110238080A1 (en) 2010-03-25 2011-09-29 Date Ranjit Robotic Surgical Instrument System
IT1401669B1 (it) 2010-04-07 2013-08-02 Sofar Spa Sistema di chirurgia robotizzata con controllo perfezionato.
US8870880B2 (en) 2010-04-12 2014-10-28 Globus Medical, Inc. Angling inserter tool for expandable vertebral implant
IT1399603B1 (it) 2010-04-26 2013-04-26 Scuola Superiore Di Studi Universitari E Di Perfez Apparato robotico per interventi di chirurgia minimamente invasiva
US8717430B2 (en) 2010-04-26 2014-05-06 Medtronic Navigation, Inc. System and method for radio-frequency imaging, registration, and localization
WO2011134083A1 (en) 2010-04-28 2011-11-03 Ryerson University System and methods for intraoperative guidance feedback
CN103118596B (zh) 2010-05-04 2015-11-25 开创治疗股份有限公司 用于使用伪特征进行腹部表面匹配的系统
US8738115B2 (en) 2010-05-11 2014-05-27 Siemens Aktiengesellschaft Method and apparatus for selective internal radiation therapy planning and implementation
DE102010020284A1 (de) 2010-05-12 2011-11-17 Siemens Aktiengesellschaft Bestimmung von 3D-Positionen und -Orientierungen von chirurgischen Objekten aus 2D-Röntgenbildern
US8883210B1 (en) 2010-05-14 2014-11-11 Musculoskeletal Transplant Foundation Tissue-derived tissuegenic implants, and methods of fabricating and using same
US8603077B2 (en) 2010-05-14 2013-12-10 Intuitive Surgical Operations, Inc. Force transmission for robotic surgical instrument
KR101181569B1 (ko) 2010-05-25 2012-09-10 정창욱 단일 통로 수술 모드와 다통로 수술 모드를 실현할 수 있는 수술용 로봇 시스템 및 그 제어 방법
US20110295370A1 (en) 2010-06-01 2011-12-01 Sean Suh Spinal Implants and Methods of Use Thereof
DE102010026674B4 (de) 2010-07-09 2012-09-27 Siemens Aktiengesellschaft Bildgebungsvorrichtung und Strahlentherapiegerät
US8675939B2 (en) 2010-07-13 2014-03-18 Stryker Leibinger Gmbh & Co. Kg Registration of anatomical data sets
EP2593922A1 (en) 2010-07-14 2013-05-22 BrainLAB AG Method and system for determining an imaging direction and calibration of an imaging apparatus
US20120035507A1 (en) 2010-07-22 2012-02-09 Ivan George Device and method for measuring anatomic geometries
US8740882B2 (en) 2010-07-30 2014-06-03 Lg Electronics Inc. Medical robotic system and method of controlling the same
US20120071753A1 (en) 2010-08-20 2012-03-22 Mark Hunter Apparatus and method for four dimensional soft tissue navigation including endoscopic mapping
JP2012045278A (ja) 2010-08-30 2012-03-08 Fujifilm Corp X線画像撮影装置およびx線画像撮影方法
US8764448B2 (en) 2010-09-01 2014-07-01 Agency For Science, Technology And Research Robotic device for use in image-guided robot assisted surgical training
KR20120030174A (ko) 2010-09-17 2012-03-28 삼성전자주식회사 촉각 피드백을 제공하는 수술 로봇 시스템 및 수술 장치, 그리고 그의 촉각 피드백 제공 방법
EP2431003B1 (en) 2010-09-21 2018-03-21 Medizinische Universität Innsbruck Registration device, system, kit and method for a patient registration
US8679125B2 (en) 2010-09-22 2014-03-25 Biomet Manufacturing, Llc Robotic guided femoral head reshaping
US8657809B2 (en) 2010-09-29 2014-02-25 Stryker Leibinger Gmbh & Co., Kg Surgical navigation system
US8718346B2 (en) 2011-10-05 2014-05-06 Saferay Spine Llc Imaging system and method for use in surgical and interventional medical procedures
US8526700B2 (en) 2010-10-06 2013-09-03 Robert E. Isaacs Imaging system and method for surgical and interventional medical procedures
US9913693B2 (en) 2010-10-29 2018-03-13 Medtronic, Inc. Error correction techniques in surgical navigation
WO2012082615A2 (en) 2010-12-13 2012-06-21 Ortho Kinematics, Inc. Methods, systems and devices for clinical data reporting and surgical navigation
US8876866B2 (en) 2010-12-13 2014-11-04 Globus Medical, Inc. Spinous process fusion devices and methods thereof
CN103281968B (zh) 2010-12-22 2017-04-12 优瑞技术公司 用于在医疗过程中进行图像引导的系统和方法
EP2663252A1 (en) 2011-01-13 2013-11-20 Koninklijke Philips N.V. Intraoperative camera calibration for endoscopic surgery
KR101181613B1 (ko) 2011-02-21 2012-09-10 윤상진 사용자 지정에 따라 결정되는 변위 정보에 기초하여 수술을 수행하는 수술용 로봇 시스템과 그 제어 방법
US20120226145A1 (en) 2011-03-03 2012-09-06 National University Of Singapore Transcutaneous robot-assisted ablation-device insertion navigation system
US9026247B2 (en) 2011-03-30 2015-05-05 University of Washington through its Center for Communication Motion and video capture for tracking and evaluating robotic surgery and associated systems and methods
WO2012131660A1 (en) 2011-04-01 2012-10-04 Ecole Polytechnique Federale De Lausanne (Epfl) Robotic system for spinal and other surgeries
US20120256092A1 (en) 2011-04-06 2012-10-11 General Electric Company Ct system for use in multi-modality imaging system
WO2012139031A1 (en) 2011-04-06 2012-10-11 The Trustees Of Columbia University In The City Of New York System, method and computer-accessible medium for providing a panoramic cone beam computed tomography (cbct)
US10426554B2 (en) 2011-04-29 2019-10-01 The Johns Hopkins University System and method for tracking and navigation
US9072535B2 (en) 2011-05-27 2015-07-07 Ethicon Endo-Surgery, Inc. Surgical stapling instruments with rotatable staple deployment arrangements
WO2012169642A1 (ja) 2011-06-06 2012-12-13 株式会社大野興業 レジストレーション用テンプレートの製造方法
US8498744B2 (en) 2011-06-30 2013-07-30 Mako Surgical Corporation Surgical robotic systems with manual and haptic and/or active control modes
CA3082073C (en) 2011-07-11 2023-07-25 Board Of Regents Of The University Of Nebraska Robotic surgical devices, systems, and related methods
US8818105B2 (en) 2011-07-14 2014-08-26 Accuray Incorporated Image registration for image-guided surgery
KR20130015146A (ko) 2011-08-02 2013-02-13 삼성전자주식회사 의료 영상 처리 방법 및 장치, 영상 유도를 이용한 로봇 수술 시스템
US10866783B2 (en) 2011-08-21 2020-12-15 Transenterix Europe S.A.R.L. Vocally activated surgical control system
US9427330B2 (en) 2011-09-06 2016-08-30 Globus Medical, Inc. Spinal plate
US8864833B2 (en) 2011-09-30 2014-10-21 Globus Medical, Inc. Expandable fusion device and method of installation thereof
US9060794B2 (en) 2011-10-18 2015-06-23 Mako Surgical Corp. System and method for robotic surgery
US8894688B2 (en) 2011-10-27 2014-11-25 Globus Medical Inc. Adjustable rod devices and methods of using the same
DE102011054910B4 (de) 2011-10-28 2013-10-10 Ovesco Endoscopy Ag Magnetischer Endeffektor und Einrichtung zur Führung und Positionierung desselben
WO2013071437A1 (en) 2011-11-15 2013-05-23 Macdonald Dettwiler & Associates Inc. Method of real-time tracking of moving/flexible surfaces
FR2983059B1 (fr) 2011-11-30 2014-11-28 Medtech Procede assiste par robotique de positionnement d'instrument chirurgical par rapport au corps d'un patient et dispositif de mise en oeuvre.
WO2013084221A1 (en) 2011-12-05 2013-06-13 Mazor Robotics Ltd. Active bed mount for surgical robot
KR101901580B1 (ko) 2011-12-23 2018-09-28 삼성전자주식회사 수술 로봇 및 그 제어 방법
FR2985167A1 (fr) 2011-12-30 2013-07-05 Medtech Procede medical robotise de surveillance de la respiration d'un patient et de correction de la trajectoire robotisee.
US9265583B2 (en) 2011-12-30 2016-02-23 Mako Surgical Corp. Method for image-based robotic surgery
EP2797510B1 (en) 2011-12-30 2016-03-23 Mako Surgical Corp. System for image-based robotic surgery
KR20130080909A (ko) 2012-01-06 2013-07-16 삼성전자주식회사 수술 로봇 및 그 제어 방법
US9138297B2 (en) 2012-02-02 2015-09-22 Intuitive Surgical Operations, Inc. Systems and methods for controlling a robotic surgical system
WO2013126659A1 (en) 2012-02-22 2013-08-29 Veran Medical Technologies, Inc. Systems, methods, and devices for four dimensional soft tissue navigation
US11207132B2 (en) 2012-03-12 2021-12-28 Nuvasive, Inc. Systems and methods for performing spinal surgery
US8855822B2 (en) 2012-03-23 2014-10-07 Innovative Surgical Solutions, Llc Robotic surgical system with mechanomyography feedback
KR101946000B1 (ko) 2012-03-28 2019-02-08 삼성전자주식회사 수술용 로봇 시스템 및 로봇 시스템의 제어방법
US8888821B2 (en) 2012-04-05 2014-11-18 Warsaw Orthopedic, Inc. Spinal implant measuring system and method
JP6338570B2 (ja) 2012-04-16 2018-06-06 ニューロロジカ・コーポレーション 固定的に装着される基準マーカを伴うイメージングシステム
US20130272488A1 (en) 2012-04-16 2013-10-17 Neurologica Corp. Wireless imaging system
US20140142591A1 (en) 2012-04-24 2014-05-22 Auris Surgical Robotics, Inc. Method, apparatus and a system for robotic assisted surgery
US10383765B2 (en) 2012-04-24 2019-08-20 Auris Health, Inc. Apparatus and method for a global coordinate system for use in robotic surgery
WO2013166098A1 (en) 2012-05-01 2013-11-07 The Johns Hopkins University Improved method and apparatus for robotically assisted cochlear implant surgery
US20140234804A1 (en) 2012-05-02 2014-08-21 Eped Inc. Assisted Guidance and Navigation Method in Intraoral Surgery
US9125556B2 (en) 2012-05-14 2015-09-08 Mazor Robotics Ltd. Robotic guided endoscope
CN104284627A (zh) 2012-05-18 2015-01-14 卡尔斯特里姆保健公司 锥束计算机断层扫描体积成像系统
KR20130132109A (ko) 2012-05-25 2013-12-04 삼성전자주식회사 서포터 장치 및 이를 채용한 수술 로봇 시스템
WO2013181503A1 (en) 2012-06-01 2013-12-05 Intuitive Surgical Operations, Inc. Manipulator arm-to-patient collision avoidance using a null-space
KR102172694B1 (ko) 2012-06-01 2020-11-02 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 멀티­포트 수술 로봇 시스템 구조
US20180325610A1 (en) * 2012-06-21 2018-11-15 Globus Medical, Inc. Methods for indicating and confirming a point of interest using surgical navigation systems
US20130345757A1 (en) 2012-06-22 2013-12-26 Shawn D. Stad Image Guided Intra-Operative Contouring Aid
EP3680071B1 (en) 2012-06-22 2021-09-01 Board of Regents of the University of Nebraska Local control robotic surgical devices
US9364230B2 (en) 2012-06-28 2016-06-14 Ethicon Endo-Surgery, Llc Surgical stapling instruments with rotary joint assemblies
US8880223B2 (en) 2012-07-16 2014-11-04 Florida Institute for Human & Maching Cognition Anthro-centric multisensory interface for sensory augmentation of telesurgery
US20140031664A1 (en) * 2012-07-30 2014-01-30 Mako Surgical Corp. Radiographic imaging device
KR101997566B1 (ko) 2012-08-07 2019-07-08 삼성전자주식회사 수술 로봇 시스템 및 그 제어방법
US9770305B2 (en) 2012-08-08 2017-09-26 Board Of Regents Of The University Of Nebraska Robotic surgical devices, systems, and related methods
WO2014025399A1 (en) 2012-08-08 2014-02-13 Board Of Regents Of The University Of Nebraska Robotic surgical devices, systems, and related methods
US10110785B2 (en) 2012-08-10 2018-10-23 Karl Storz Imaging, Inc. Deployable imaging system equipped with solid state imager
CA2893369A1 (en) 2012-08-24 2014-02-27 University Of Houston Robotic device and systems for image-guided and robot-assisted surgery
US20140080086A1 (en) 2012-09-20 2014-03-20 Roger Chen Image Navigation Integrated Dental Implant System
US8892259B2 (en) 2012-09-26 2014-11-18 Innovative Surgical Solutions, LLC. Robotic surgical system with mechanomyography feedback
US9757160B2 (en) 2012-09-28 2017-09-12 Globus Medical, Inc. Device and method for treatment of spinal deformity
EP2912405B1 (en) * 2012-10-29 2017-10-18 7D Surgical Inc. Integrated illumination and optical surface topology detection system and methods of use thereof
KR102038632B1 (ko) 2012-11-06 2019-10-30 삼성전자주식회사 수술용 인스트루먼트, 서포터 장치, 및 수술 로봇 시스템
CN104780862A (zh) 2012-11-14 2015-07-15 直观外科手术操作公司 用于避免碰撞的智能悬挂物
KR102079945B1 (ko) 2012-11-22 2020-02-21 삼성전자주식회사 수술 로봇 및 수술 로봇 제어 방법
US9393361B2 (en) 2012-12-14 2016-07-19 Medtronic, Inc. Method to determine a material distribution
US9008752B2 (en) 2012-12-14 2015-04-14 Medtronic, Inc. Method to determine distribution of a material by an infused magnetic resonance image contrast agent
US9001962B2 (en) 2012-12-20 2015-04-07 Triple Ring Technologies, Inc. Method and apparatus for multiple X-ray imaging applications
DE102012025101A1 (de) 2012-12-20 2014-06-26 avateramedical GmBH Aktive Positioniereinrichtung eines chirurgischen Instruments und ein diese umfassendes chirurgisches Robotersystem
US20150005784A2 (en) 2012-12-20 2015-01-01 avateramedical GmBH Device for Supporting and Positioning of a Surgical Instrument and/or an Endoscope for Use in Minimal-Invasive Surgery and a Surgical Robotic System
US9002437B2 (en) 2012-12-27 2015-04-07 General Electric Company Method and system for position orientation correction in navigation
WO2014106262A1 (en) 2012-12-31 2014-07-03 Mako Surgical Corp. System for image-based robotic surgery
KR20140090374A (ko) 2013-01-08 2014-07-17 삼성전자주식회사 싱글 포트 수술 로봇 및 그 제어 방법
CN103969269B (zh) 2013-01-31 2018-09-18 Ge医疗系统环球技术有限公司 用于几何校准ct扫描仪的方法和装置
US20140221819A1 (en) 2013-02-01 2014-08-07 David SARMENT Apparatus, system and method for surgical navigation
CN105101903B (zh) 2013-02-04 2018-08-24 儿童国家医疗中心 混合控制外科机器人系统
KR20140102465A (ko) 2013-02-14 2014-08-22 삼성전자주식회사 수술 로봇 및 그 제어방법
KR102117270B1 (ko) 2013-03-06 2020-06-01 삼성전자주식회사 수술 로봇 시스템 및 그 제어방법
KR20140110685A (ko) 2013-03-08 2014-09-17 삼성전자주식회사 싱글 포트 수술 로봇의 제어 방법
KR20140110620A (ko) 2013-03-08 2014-09-17 삼성전자주식회사 수술 로봇 시스템 및 그 작동 방법
US9314308B2 (en) 2013-03-13 2016-04-19 Ethicon Endo-Surgery, Llc Robotic ultrasonic surgical device with articulating end effector
KR102119534B1 (ko) 2013-03-13 2020-06-05 삼성전자주식회사 수술 로봇 및 그 제어방법
KR20140112207A (ko) 2013-03-13 2014-09-23 삼성전자주식회사 증강현실 영상 표시 시스템 및 이를 포함하는 수술 로봇 시스템
WO2014160086A2 (en) 2013-03-14 2014-10-02 Board Of Regents Of The University Of Nebraska Methods, systems, and devices relating to robotic surgical devices, end effectors, and controllers
US9629595B2 (en) 2013-03-15 2017-04-25 Hansen Medical, Inc. Systems and methods for localizing, tracking and/or controlling medical instruments
WO2014144220A1 (en) 2013-03-15 2014-09-18 Board Of Regents Of The University Of Nebraska Robotic surgical devices, systems, and related methdos
KR102117273B1 (ko) 2013-03-21 2020-06-01 삼성전자주식회사 수술 로봇 시스템 및 그 제어 방법
KR20140121581A (ko) 2013-04-08 2014-10-16 삼성전자주식회사 수술 로봇 시스템
KR20140123122A (ko) 2013-04-10 2014-10-22 삼성전자주식회사 수술용 로봇 및 그 제어 방법
US9414859B2 (en) 2013-04-19 2016-08-16 Warsaw Orthopedic, Inc. Surgical rod measuring system and method
US8964934B2 (en) 2013-04-25 2015-02-24 Moshe Ein-Gal Cone beam CT scanning
KR20140129702A (ko) 2013-04-30 2014-11-07 삼성전자주식회사 수술 로봇 시스템 및 그 제어방법
US20140364720A1 (en) 2013-06-10 2014-12-11 General Electric Company Systems and methods for interactive magnetic resonance imaging
RU2015103232A (ru) * 2013-06-28 2017-08-03 Конинклейке Филипс Н.В. Система компьютерной томографии
DE102013012397B4 (de) 2013-07-26 2018-05-24 Rg Mechatronics Gmbh OP-Robotersystem
US10786283B2 (en) 2013-08-01 2020-09-29 Musc Foundation For Research Development Skeletal bone fixation mechanism
US20150085970A1 (en) 2013-09-23 2015-03-26 General Electric Company Systems and methods for hybrid scanning
JP6581973B2 (ja) 2013-10-07 2019-09-25 テクニオン リサーチ アンド ディベロップメント ファンデーション リミテッド 針の挿入及び操縦のためのシステム
JP6456936B2 (ja) 2013-10-09 2019-01-23 ニューヴェイジヴ,インコーポレイテッド 外科的脊椎矯正
US9848922B2 (en) 2013-10-09 2017-12-26 Nuvasive, Inc. Systems and methods for performing spine surgery
ITBO20130599A1 (it) 2013-10-31 2015-05-01 Cefla Coop Metodo e apparato per aumentare il campo di vista in una acquisizione tomografica computerizzata con tecnica cone-beam
US20150146847A1 (en) 2013-11-26 2015-05-28 General Electric Company Systems and methods for providing an x-ray imaging system with nearly continuous zooming capability
JP7150413B2 (ja) 2014-03-17 2022-10-11 インテュイティブ サージカル オペレーションズ, インコーポレイテッド 多関節アームにおける分離クラッチ操作のためのシステム及び方法
US10709509B2 (en) 2014-06-17 2020-07-14 Nuvasive, Inc. Systems and methods for planning, performing, and assessing spinal correction during surgery
CN106687062B (zh) 2014-09-17 2019-11-22 直观外科手术操作公司 用于利用增广雅可比矩阵控制操纵器接头移动的系统和方法
US10313656B2 (en) * 2014-09-22 2019-06-04 Samsung Electronics Company Ltd. Image stitching for three-dimensional video
EP3226790B1 (en) 2014-12-04 2023-09-13 Mazor Robotics Ltd. Shaper for vertebral fixation rods
US20160166329A1 (en) 2014-12-15 2016-06-16 General Electric Company Tomographic imaging for interventional tool guidance
CN107645924B (zh) 2015-04-15 2021-04-20 莫比乌斯成像公司 集成式医学成像与外科手术机器人系统
US10180404B2 (en) 2015-04-30 2019-01-15 Shimadzu Corporation X-ray analysis device
US20170143284A1 (en) 2015-11-25 2017-05-25 Carestream Health, Inc. Method to detect a retained surgical object
US10070939B2 (en) 2015-12-04 2018-09-11 Zaki G. Ibrahim Methods for performing minimally invasive transforaminal lumbar interbody fusion using guidance
WO2017127838A1 (en) 2016-01-22 2017-07-27 Nuvasive, Inc. Systems and methods for facilitating spine surgery
US11058378B2 (en) 2016-02-03 2021-07-13 Globus Medical, Inc. Portable medical imaging system
US10448910B2 (en) 2016-02-03 2019-10-22 Globus Medical, Inc. Portable medical imaging system
US10842453B2 (en) 2016-02-03 2020-11-24 Globus Medical, Inc. Portable medical imaging system
US9962133B2 (en) 2016-03-09 2018-05-08 Medtronic Navigation, Inc. Transformable imaging system
WO2017201093A1 (en) * 2016-05-17 2017-11-23 Hypermed Imaging, Inc. Hyperspectral imager coupled with indicator molecule tracking
US9931025B1 (en) 2016-09-30 2018-04-03 Auris Surgical Robotics, Inc. Automated calibration of endoscopes with pull wires
US11004233B1 (en) * 2020-05-01 2021-05-11 Ynjiun Paul Wang Intelligent vision-based detection and ranging system and method

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030164953A1 (en) * 2002-03-01 2003-09-04 Thomas Bauch Operation lamp with camera system for 3D referencing
US20070081695A1 (en) * 2005-10-04 2007-04-12 Eric Foxlin Tracking objects with markers
CN103492833A (zh) * 2011-02-18 2014-01-01 德普伊新特斯产品有限责任公司 具有集成的导航与制导系统的工具以及相关设备和方法
CN107427327A (zh) * 2014-09-30 2017-12-01 奥瑞斯外科手术机器人公司 具有虚拟轨迹和柔性内窥镜的可配置机器人外科手术系统
CN110461268A (zh) * 2017-02-02 2019-11-15 埃尔比特系统有限公司 医疗用途的放大的高分辨率成像和跟踪
US20190038362A1 (en) * 2017-08-02 2019-02-07 Medtech S.A. Surgical field camera system
US20190387149A1 (en) * 2018-06-15 2019-12-19 Mako Surgical Corp. Systems and methods for tracking objects

Also Published As

Publication number Publication date
JP7376533B2 (ja) 2023-11-08
JP2021194539A (ja) 2021-12-27
US11317973B2 (en) 2022-05-03
EP3922204A1 (en) 2021-12-15
US20210378755A1 (en) 2021-12-09
US20220211447A1 (en) 2022-07-07

Similar Documents

Publication Publication Date Title
US11839435B2 (en) Extended reality headset tool tracking and control
CN113259584B (zh) 摄像机跟踪系统
US11883117B2 (en) Pose measurement chaining for extended reality surgical navigation in visible and near infrared spectrums
US11510750B2 (en) Leveraging two-dimensional digital imaging and communication in medicine imagery in three-dimensional extended reality applications
US20210169581A1 (en) Extended reality instrument interaction zone for navigated robotic surgery
JP7376533B2 (ja) 外科手術中のコンピュータ支援ナビゲーション用のカメラ追跡バー
US11690697B2 (en) Displaying a virtual model of a planned instrument attachment to ensure correct selection of physical instrument attachment
US11382713B2 (en) Navigated surgical system with eye to XR headset display calibration
JP7216764B2 (ja) 手術中の支援されたナビゲーションのための拡張現実ヘッドセットのカメラによって追跡された参照アレイを備えた手術器具の位置合わせ
EP3922203A1 (en) Surgical object tracking in visible light via fiducial seeding and synthetic image registration
CN113208727A (zh) 手术系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination