JP2019202130A - 外科手術のロボットガイダンスに関連するシステムおよび方法 - Google Patents

外科手術のロボットガイダンスに関連するシステムおよび方法 Download PDF

Info

Publication number
JP2019202130A
JP2019202130A JP2019088923A JP2019088923A JP2019202130A JP 2019202130 A JP2019202130 A JP 2019202130A JP 2019088923 A JP2019088923 A JP 2019088923A JP 2019088923 A JP2019088923 A JP 2019088923A JP 2019202130 A JP2019202130 A JP 2019202130A
Authority
JP
Japan
Prior art keywords
bone
surgical
data structure
initial
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019088923A
Other languages
English (en)
Other versions
JP6894466B2 (ja
Inventor
アール.クロフォード ニール
R Crawford Neil
アール.クロフォード ニール
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Globus Medical Inc
Original Assignee
Globus Medical Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US15/975,846 external-priority patent/US11317971B2/en
Application filed by Globus Medical Inc filed Critical Globus Medical Inc
Publication of JP2019202130A publication Critical patent/JP2019202130A/ja
Application granted granted Critical
Publication of JP6894466B2 publication Critical patent/JP6894466B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/56Surgical instruments or methods for treatment of bones or joints; Devices specially adapted therefor
    • A61B17/58Surgical instruments or methods for treatment of bones or joints; Devices specially adapted therefor for osteosynthesis, e.g. bone plates, screws, setting implements or the like
    • A61B17/68Internal fixation devices, including fasteners and spinal fixators, even if a part thereof projects from the skin
    • A61B17/70Spinal positioners or stabilisers ; Bone stabilisers comprising fluid filler in an implant
    • A61B17/7074Tools specially adapted for spinal fixation operations other than for bone removal or filler handling
    • A61B17/7076Tools specially adapted for spinal fixation operations other than for bone removal or filler handling for driving, positioning or assembling spinal clamps or bone anchors specially adapted for spinal fixation
    • A61B17/7082Tools specially adapted for spinal fixation operations other than for bone removal or filler handling for driving, positioning or assembling spinal clamps or bone anchors specially adapted for spinal fixation for driving, i.e. rotating, screws or screw parts specially adapted for spinal fixation, e.g. for driving polyaxial or tulip-headed screws
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/12Devices for detecting or locating foreign bodies
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/46Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
    • A61B6/461Displaying means of special interest
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/50Clinical applications
    • A61B6/505Clinical applications involving diagnosis of bone
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/52Devices using data or image processing specially adapted for radiation diagnosis
    • A61B6/5211Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
    • A61B6/5217Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data extracting a diagnostic or physiological parameter from medical diagnostic data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/16Bone cutting, breaking or removal means other than saws, e.g. Osteoclasts; Drills or chisels for bones; Trepans
    • A61B17/17Guides or aligning means for drills, mills, pins or wires
    • A61B17/1739Guides or aligning means for drills, mills, pins or wires specially adapted for particular parts of the body
    • A61B17/1757Guides or aligning means for drills, mills, pins or wires specially adapted for particular parts of the body for the spine
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00477Coupling
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00831Material properties
    • A61B2017/00876Material properties magnetic
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/101Computer-aided simulation of surgical operations
    • A61B2034/102Modelling of surgical devices, implants or prosthesis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/101Computer-aided simulation of surgical operations
    • A61B2034/105Modelling of the patient, e.g. for ligaments or bones
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107Visualisation of planned trajectories or target regions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/108Computer aided selection or customisation of medical implants or cutting guides
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2051Electromagnetic tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2055Optical tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2068Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis using pointers, e.g. pointers having reference marks for determining coordinates of body points
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/03Automatic limiting or abutting means, e.g. for safety
    • A61B2090/033Abutting means, stops, e.g. abutting on tissue or skin
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/363Use of fiducial points
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/376Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/376Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
    • A61B2090/3762Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy using computed tomography systems [CT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3966Radiopaque markers visible in an X-ray image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/39Markers, e.g. radio-opaque or breast lesions markers
    • A61B2090/3983Reference marker arrangements for use with image guided surgery
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/44Constructional features of apparatus for radiation diagnosis
    • A61B6/4405Constructional features of apparatus for radiation diagnosis the apparatus being movable or portable, e.g. handheld or mounted on a trolley
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/46Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
    • A61B6/467Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient characterised by special input means
    • A61B6/468Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient characterised by special input means allowing annotation or message recording
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/10Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges for stereotaxic surgery, e.g. frame-based stereotaxis
    • A61B90/11Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges for stereotaxic surgery, e.g. frame-based stereotaxis with guides for needles or instruments, e.g. arcuate slides or ball joints
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61FFILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
    • A61F2/00Filters implantable into blood vessels; Prostheses, i.e. artificial substitutes or replacements for parts of the body; Appliances for connecting them with the body; Devices providing patency to, or preventing collapsing of, tubular structures of the body, e.g. stents
    • A61F2/02Prostheses implantable into the body
    • A61F2/30Joints
    • A61F2/46Special tools or methods for implanting or extracting artificial joints, accessories, bone grafts or substitutes, or particular adaptations therefor
    • A61F2/4603Special tools or methods for implanting or extracting artificial joints, accessories, bone grafts or substitutes, or particular adaptations therefor for insertion or extraction of endoprosthetic joints or of accessories thereof
    • A61F2/4611Special tools or methods for implanting or extracting artificial joints, accessories, bone grafts or substitutes, or particular adaptations therefor for insertion or extraction of endoprosthetic joints or of accessories thereof of spinal prostheses
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61FFILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
    • A61F2/00Filters implantable into blood vessels; Prostheses, i.e. artificial substitutes or replacements for parts of the body; Appliances for connecting them with the body; Devices providing patency to, or preventing collapsing of, tubular structures of the body, e.g. stents
    • A61F2/02Prostheses implantable into the body
    • A61F2/30Joints
    • A61F2/46Special tools or methods for implanting or extracting artificial joints, accessories, bone grafts or substitutes, or particular adaptations therefor
    • A61F2002/4632Special tools or methods for implanting or extracting artificial joints, accessories, bone grafts or substitutes, or particular adaptations therefor using computer-controlled surgery, e.g. robotic surgery
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10081Computed x-ray tomography [CT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10088Magnetic resonance imaging [MRI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10116X-ray image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30008Bone
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30204Marker
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/41Medical
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20Indexing scheme for editing of 3D models
    • G06T2219/2016Rotation, translation, scaling

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Physics & Mathematics (AREA)
  • Orthopedic Medicine & Surgery (AREA)
  • Neurology (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Biophysics (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Robotics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Architecture (AREA)
  • Physiology (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Manipulator (AREA)
  • Surgical Instruments (AREA)

Abstract

【課題】位置フィードバックを利用し、患者の手術部位に対するロボットアームおよびツールの動きを正確に誘導するシステムを提供する。【解決手段】外科手術インプラント計画コンピュータは、患者の骨に対してインプラント装置を位置付ける。骨の初期画像2100が取得され、インプラント装置上の位置と初期画像の骨に対する対応する位置との間のマッピングを定義するデータを含む初期位置データ構造が得られる。患者の骨の標的画像2110が取得され、標的画像の骨の対応する部分の輪郭に適合するための定義された規則を満たすために、初期画像の骨の一部分の輪郭を変換する変形マトリクスが生成される。初期位置データ構造に変形マトリクスを適用することに基づいて、変形した位置データ構造が生成される。インプラント装置のグラフィカル表現が、変形した位置データ構造に基づいて決定された骨の標的画像上の位置にオーバーレイ2120されて表示される。【選択図】図21

Description

[関連出願の相互参照]
この出願は、2017年5月31日に出願された米国特許出願第15/609,334号の一部継続出願であり、これは、2016年5月18日に出願された米国特許出願第15/157,444号の一部継続出願であり、これは、2016年4月11日に出願された米国特許出願第15/095,883号の一部継続出願であり、これは、2013年10月24日に出願された米国特許出願第14/062,707号の一部継続出願であり、これは、2013年6月21日に出願された米国特許出願第13/924,505号の一部継続出願であり、これは、2012年6月21日に出願された仮出願第61/662,702号に対する優先権を主張し、および2013年3月15日に出願された仮出願第61/800,527号に対する優先権を主張し、および2018年1月10日に出願された仮出願代62/615,492号に対する優先権を主張し、これらの全てはその全体が本明細書に組み込まれる。
本開示は、医療装置に関し、より詳細には、手術用ロボットシステムと関連方法および関連装置に関する。
ロボット支援外科手術のための位置認識システムは、3次元(3D)における特定のオブジェクトの位置を決定し、それを追跡するために使用される。ロボット支援手術では、例えば、外科用器具のような特定のオブジェクトは、器具がロボットまたは医師によって位置決めされ、動かされるとき、高度の精度で追跡される必要がある。
赤外線信号に基づく位置認識システムは、オブジェクトを追跡するために能動および/または受動センサまたはマーカーを使用することができる。受動センサまたはマーカーでは、追跡されるオブジェクトは、反射球状ボールのような受動センサを含むことができ、受動センサは、追跡されるオブジェクトの戦略的位置に配置される。赤外線送信機は信号を送信し、反射球状ボールは信号を反射して、オブジェクトの3次元位置を決定するのを助ける。能動センサまたはマーカーにおいて、追跡されるオブジェクトは、発光ダイオード(LED)などのアクティブ赤外線送信機を含み、したがって、3D検出のためにそれ自身の赤外線信号を生成する。
能動または受動追跡センサのいずれかを用いて、システムは、一つまたは複数の赤外線カメラ、デジタル信号、能動および/または受動センサの既知の位置、距離、応答信号を受信するのに要した時間、他の既知の変数、またはそれらの組み合わせからの情報、またはそれらへの情報に基づいて、能動および/または受動センサの3次元位置を幾何学的に解決する。
したがって、位置フィードバックを利用して、患者の手術部位に対するロボットアームおよびツールの動きを正確に誘導する。現在、外科手術ロボットを使用するとき、ねじ、ツール、またはその他の外科手術インプラント装置が移植される所望の位置に対する外科手術計画の開発は、外科医によって手動で実施される。外科医は患者の医療画像を分析し、画像をマークアップして外科手術計画を作成しうる。各患者は異なるが、多くの類似点を共有する。したがって、外科手術計画を作成するために画像をマークアップするプロセスは、各ケースについて最初から開始する必要はない。これらの外科手術システムは、特定の骨の中へと移植される外科手術インプラント装置の特徴の計画、ならびに正確な場所、進入角度、および装置の移植の深さの計画のより自動化され、迅速かつ正確なプロセスから利益を得ることができる。こうしたプロセスは、以前の患者のために作成された成功した外科手術計画に基づくものでありうる。
本開示の様々な実施形態は、外科手術計画の自動生成を可能にし、および/または外科医が一つの医療画像に示す骨に関する外科手術インプラント装置を移植するための外科手術計画の開発することを可能にし、かつ別の医療画像に示される骨の中へと外科手術インプラント装置を移植するのに使用するための外科手術計画を自動的に変換する、外科手術システムを対象とする。一部の実施形態では、外科医は、骨の初期画像に対してインプラント装置の移植を計画でき、これはこの初期の画像または別の患者の画像に対応するか、または一般的な外科手術骨モデルに対応しうる。次に、手術または準備の間など、患者の骨の標的画像が得られた時、外科手術システムは、初期画像に示される一つまたは複数の骨輪郭を形質転換して、標的画像内の対応する一つまたは複数の骨輪郭に適合させることに関する変形マトリクスを生成できる。次に、外科手術システムは変形マトリクスを使用して、初期画像に対して開発された外科手術計画を今や標的画像に対して相対的であるように変換する。初期画像に示される骨に関して以前に特定されたインプラント装置の位置、進入角度、および移植深度および/またはインプラント装置のサイズは、それによって標的画像に示される骨に対して変換することができる。変形した外科手術計画は、外科医によるレビューのために表示されてもよく、および/または患者の骨に対する手術用ロボットシステムの外科手術エンドエフェクタの位置決めを制御するために、手術用ロボットシステムに提供されてもよい。
本発明の概念の一部の実施形態によれば、外科手術インプラント装置を患者の骨に対して配置するための外科手術インプラント計画コンピュータを操作するための方法が提供されている。骨の初期画像が取得される。外科手術インプラント装置上の一組の位置と、初期画像の骨に対する対応する位置との間のマッピングを定義するデータを含む初期位置データ構造が得られる。患者の骨の標的画像が取得される。標的画像の骨の対応する部分の輪郭に適合するための定義された規則を満たすために、初期画像の骨の一部分の輪郭を変換する変形マトリクスが生成される。初期位置データ構造に変形マトリクスを適用することに基づいて、変形した位置データ構造が生成される。外科手術インプラント装置のグラフィカル表現が、変形した位置データ構造に基づいて決定された骨の標的画像上の位置にオーバーレイされて表示される。
一部のさらなる実施形態では、変形した位置データ構造は、変形した位置データ構造のデータに基づいて、患者の骨における位置に対する手術用ロボットシステムの外科手術エンドエフェクタの位置決めを制御するための手術用ロボットシステムに提供される。骨の標的画像の基準座標系における変形した位置データ構造によって定義される場所は、外科手術エンドエフェクタの別の基準座標系に変換することができる。患者の骨上の位置に対して外科手術エンドエフェクタを位置決めするための手術用ロボットシステムによる外科手術エンドエフェクタの移動は、変形した位置に基づいて制御され、患者の骨内への外科手術インプラント装置の移植を容易にすることができる。
対応する外科手術インプラント計画コンピュータ、外科手術システム、およびコンピュータプログラム製品が開示されている。
本発明の主題の実施形態による外科手術インプラント計画コンピュータ、外科手術システム、およびコンピュータプログラム製品に対応するさらに他の方法が、以下の図面および詳細な説明を検討することにより当業者に明らかであり、または明らかになるであろう。このような方法、外科手術インプラント計画コンピュータ、外科手術システム、およびコンピュータプログラム製品は全て、本明細書の記載内に含まれ、本発明の主題の範囲内であり、添付の特許請求の範囲によって保護されることが意図される。さらに、本明細書で開示されるすべての実施形態は、別々に実装されてもよく、または任意の方法および/または組み合わせで組み合わされて実装されてもよい。
本開示のさらなる理解を提供するために含まれ、本出願の一部を構成する添付の図面は、本発明の概念の特定の非限定的な実施形態を示す。図面において:
図1は、外科施術中のロボットシステム、患者、外科医、および他の医療従事者の位置のあり得る配置の俯瞰図である。 図2は、一実施形態による、患者に対する手術用ロボットおよびカメラの位置決めを含むロボットシステムを示す。 図3は、例示的な実施形態による手術用ロボットシステムを示す。 図4は、例示的な実施形態による手術用ロボットの一部を示す。 図5は、例示的な実施形態による手術用ロボットのブロック図を示す。 図6は、例示的な実施形態による手術用ロボットを示す。 図7Aは、例示的な実施形態によるエンドエフェクタを示す。 図7Bは、例示的な実施形態によるエンドエフェクタを示す。 図7Cは、例示的な実施形態によるエンドエフェクタを示す。 図8は、一実施形態によるエンドエフェクタのガイドチューブ内に外科用器具を挿入する前後の外科用器具およびエンドエフェクタを示す。 図9Aは、例示的な実施形態によるエンドエフェクタおよびロボットアームの部分を示す。 図9Bは、例示的な実施形態によるエンドエフェクタおよびロボットアームの部分を示す。 図9Cは、例示的な実施形態によるエンドエフェクタおよびロボットアームの部分を示す。 図10は、例示的な実施形態による動的基準アレイ、撮像アレイ、および他のコンポーネントを示す。 図11は、例示的な実施形態による登録の方法を示す。 図12Aは、例示的な実施形態による撮像装置の実施形態を示す。 図12Bは、例示的な実施形態による撮像装置の実施形態を示す。 図13Aは、例示的な実施形態による、ロボットアームとエンドエフェクタとを含むロボットの一部を示す。 図13Bは、エンドエフェクタの拡大図であり、図13Aに示すように、複数の追跡マーカーがその上にしっかりと固定される。 図13Cは、一実施形態による、複数の追跡マーカーがその上にしっかりと固定されたツールまたは器具である。 図14Aは、第一構成の可動追跡マーカーを有するエンドエフェクタの代替バージョンである。 図14Bは、第二の構成の可動追跡マーカーを有する図14Aに示すエンドエフェクタである。 図14Cは、図14Aの第一の構成における追跡マーカーのテンプレートを示す。 図14Dは、図14Bの第二の構成における追跡マーカーのテンプレートを示す。 図15Aは、単一の追跡マーカーのみがその上に固定されたエンドエフェクタの代替バージョンを示す。 図15Bは、ガイドチューブを介して配置された器具を有する図15Aのエンドエフェクタを示す。 図15Cは、二つの異なる位置に器具を有する図15Aのエンドエフェクタを示し、器具がガイドチューブ内にまたはガイドチューブの外側に配置されるかどうかを決定するための結果のロジックを示す。 図15Dは、図15Aのエンドエフェクタを示すが、器具は、二つの異なるフレームでかつガイドチューブ上の単一の追跡マーカーに対して相対的な距離でガイドチューブ内にある。 図15Eは、座標系に対して図15Aのエンドエフェクタを示す。 図16は、ロボットのエンドエフェクタを所望の標的軌道にナビゲートして移動させる方法のブロック図である。 また、図17Aおよび図17Bは、それぞれ、収縮および拡張位置に固定および可動追跡マーカーを有する拡張可能インプラントを挿入するための器具を示す。 また、図18Aおよび図18Bは、それぞれ、挿入位置および傾斜位置に固定および可動追跡マーカーを有する関節のあるインプラントを挿入するための器具を示す。 図19Aは、交換可能または代替のエンドエフェクタを含むロボットの一実施形態を示す。 図19Bは、器具スタイルのエンドエフェクタが結合されたロボットの実施形態を示す。 図20は、一部の例示的な実施形態に従って動作する手術用ロボットシステムに接続された外科手術インプラント計画コンピュータを含む外科手術システムのブロック図を示す。 図21は、いくつかの例示的な実施形態による、標的画像内の骨の上のオーバーレイ用の初期画像において外科手術インプラント装置を骨に対して移植するための外科手術計画を変換する変形マトリクスを生成するためにディスプレイ装置に表示することができる一連の画像および外科手術インプラント計画コンピュータによって実行される関連操作を示す。 図22は、一部の例示的な実施形態による、外科手術インプラント計画コンピュータによる動作のフローチャートを図示する。 図23は、一部の例示的な実施形態による、外科手術インプラント計画コンピュータによる動作のフローチャートを図示する。 図24は、一部の例示的な実施形態による動作を介してディスプレイ装置上に表示され得るオーバーレイされた外科手術インプラント装置を有する骨の一組の画像を示す。 図25は、一部の例示的な実施形態による、図24に示す画像の骨に対する外科手術インプラント装置の位置を調節するための、外科手術インプラント計画コンピュータによる操作のフローチャートを図示する。 図26は、一部の例示的な実施形態に従って動作するように構成された外科手術インプラント計画コンピュータの構成要素のブロック図を示す。
以下の議論は、当業者が本開示の実施形態を作成し使用することを可能にするために提示される。例解された実施形態に対する様々な変更は、当業者には容易に明らかであり、本明細書の原理は、本開示の実施形態から逸脱することなく他の実施形態およびアプリケーションに適用することができる。したがって、実施形態は、示された実施形態に限定されることを意図するものではなく、本明細書に開示された原理および特徴と一致する最も広い範囲が与えられるべきである。以下の詳細な説明は、図面を参照して読まれるべきであり、異なる図における同様の要素は、同様の参照番号を有する。必ずしも縮尺通りではない図面は、選択された実施形態を示しており、実施形態の範囲を限定するものではない。当業者は、本明細書で提供される例が多くの有用な代替物を有し、実施形態の範囲内に入ることを認識するであろう。
上述のように、外科医は、患者の医療画像を解析し、その画像をマーキングして、装置の移植を支援する外科手術ロボットを使用するときには、ねじ、器具、または他の外科手術インプラント装置が移植される所望の場所に対する外科手術計画を作成することができる。手術用ロボットシステムを使用する場合、所望のねじ位置は、コンピュータ化されたインターフェースを使用して手術前に計画してもよい。このインターフェースでは、外科医は、CTスキャン、X線、またはMRIなどの患者の医療画像の図をスクロールし、またはそうでなければ操作して、骨の表示された医療画像上に重なり合うねじの所望の位置を表すグラフィックオブジェクトを位置決めする。システムは、通常、医療画像の体積スキャンの座標系における各ねじの先端およびテールのx、y、zデカルト座標を保存することによって、または透視検査のガイダンスの場合には、フルオロ撮影画像が投影される、座標システム内の先端およびテールの位置座標を保存することによって、計画されたねじ位置をシステムメモリに保存する。後に、ロボットが起動されると、ねじ位置が計画されている座標系は、追跡カメラの座標系に登録され、ロボットは計画された位置に移動し、ねじ穴の準備およびねじの挿入のためのガイド管を保持する。
本明細書に開示される様々な実施形態によれば、外科手術計画プロセスは、外科医が患者の画像を見る前にねじおよび/または外科手術インプラント装置の所望の位置を自動的に予測し、ねじまたは他の装置配置(好ましい深さ、好ましい角度など)に関する外科医の好みを、初期医療画像に関して自動的な予測外科手術計画に組み込むことができる、外科手術インプラント計画コンピュータを提供することによって改善される。代替的または追加的に、外科手術インプラント計画コンピュータは、初期医療画像に対してねじまたはその他のインプラント装置を移植するための外科医によって開発された初期手術計画を取得する。システムは、初期医療画像に関して作製された自動予測外科手術計画および/または外科医の初期外科手術計画を、標的医療画像に示される骨に外科手術インプラント装置を移植するのに使用するための変形計画に変換する。こうした自動的な計画は、手術に必要な時間を減少させ、計画の精度を高めることができる。
骨にねじを移植するための外科手術計画を開発する文脈において、様々な実施形態が記載されているが、本開示はこれに限定されない。本明細書に開示される実施形態は、任意のタイプの外科手術インプラント装置の骨、組織、軟骨、またはその他の解剖学的構造への移植を計画するために使用され得る。
一例としての手術用ロボットシステムは、初めは以下に詳細に記述され、次いで本開示の実施形態による、外科手術システムの一部として、外科手術インプラント計画コンピュータの様々な構成および動作が記述される。
[手術用ロボットシステム]
ここで図面を参照すると、図1および図2は、例示的な実施形態による手術用ロボットシステム100を示す。手術用ロボットシステム100は、例えば、手術用ロボット102と、一つまたは複数のロボットアーム104と、基部106と、ディスプレイ110と、ガイドチューブ114を含むエンドエフェクタ112と、一つまたは複数の追跡マーカー118とを含む。手術用ロボットシステム100は、患者210に直接(例えば、患者210の骨に)固定されるように適合された一つまたは複数の追跡マーカー118も含む患者追跡装置116を含むことができる。手術用ロボットシステム100は、例えば、カメラスタンド202上に位置決めされたカメラ200を利用することもできる。カメラスタンド202は、カメラ200を所望の位置に移動させ、方向付けし、支持するための任意の適切な構成を有することができる。カメラ200は、カメラ200の視点から見ることができる所与の測定ボリューム内にある、例えば能動的および受動的な追跡マーカー118(図2の患者追跡装置116の一部として示され、図13A−13Bの拡大図によって示される)を識別することができる、一つまたは複数の赤外線カメラ(例えば、二焦点カメラまたはステレオ写真カメラ)などの適切なカメラを含んでもよい。カメラ200は、所与の測定ボリュームを走査し、マーカー118から来る光を検出して、マーカー118の三次元での位置を識別し、決定することができる。例えば、能動マーカー118は、電気信号によって作動する赤外線発光マーカー(例えば、赤外線発光ダイオード(LED))を含むことができ、および/または、受動マーカー118は、例えば、カメラ200上の照明器または他の適切な装置によって発光される、赤外線を反射する再帰反射マーカー(例えば、それらは、入射IR照射を入射光の方向へ反射する)を含むことができる。
また、図1および図2は、手術室環境における手術用ロボットシステム100の配置のあり得る構成を示す。例えば、ロボット102は、患者210の近くに、または患者210の隣に配置することができる。患者210の頭の近くに描かれているが、ロボット102は、手術を受ける患者210の領域に応じて、患者210の近くの任意の適切な場所に配置することができることが理解されよう。カメラ200は、ロボットシステム100から分離され、患者210の足に配置されてもよい。この位置は、カメラ200が外科手術領域208に対して視覚的に直接視線を有することを可能にする。ここでも、カメラ200は、外科手術領域208に対し視線を有する任意の適切な位置に配置することができると考えられる。示された構成では、外科医120はロボット102の反対側に配置されるが、依然としてエンドエフェクタ112およびディスプレイ110を操作することができる。外科医助手126もエンドエフェクタ112とディスプレイ110の両方にアクセスできるよう、外科医120の反対側に、配置することができる。必要に応じて、外科医120と助手126の位置を逆にしてもよい。麻酔医122および看護師または手術室技師124のための従来からの領域は、ロボット102およびカメラ200の位置によって妨げられないままであり得る。
ロボット102の他のコンポーネントに関して、ディスプレイ110は、手術用ロボット102に取り付けることができ、他の例示的な実施形態では、ディスプレイ110は、外科手術用ロボット102から離され、手術用ロボット102と一緒に手術室内か、または、遠隔地に置かれる。エンドエフェクタ112は、ロボットアーム104に結合され、少なくとも一つのモータによって制御されてもよい。例示的な実施形態では、エンドエフェクタ112は、患者210に対して外科手術を行うために使用される外科用器具608(本明細書でさらに説明する)を受け入れて配向することができるガイドチューブ114を含むことができる。本明細書で使用される用語「エンドエフェクタ」は、「エンドエフェクチュエータ」および「エフェクチュエータ要素」という用語と交換可能に使用される。概してガイドチューブ114で示されるが、エンドエフェクタ112は、外科手術での使用に適した任意の適切な器具で置き換えることができることが理解されよう。いくつかの実施形態では、エンドエフェクタ112は、外科用器具608の移動を所望の方法で行うための任意の既知の構造を含むことができる。
手術用ロボット102は、エンドエフェクタ112の並進および配向を制御することができる。ロボット102は、例えば、エンドエフェクタ112をx、y、z軸に沿って移動させることができる。エンドエフェクタ112は、(エンドエフェクタ112に関連するオイラーアングル(例えば、ロール、ピッチ、および/またはヨー)の一つまたは複数が選択的に制御できるように)x軸、y軸、およびz軸の一つまたは複数、およびzフレーム軸の回りに選択的に回転するよう構成することができる。いくつかの例示的な実施形態では、エンドエフェクタ112の並進および配向の選択的制御は、例えば、回転軸のみを含む6自由度のロボットアームを利用する従来のロボットと比較して、大幅に改善された正確性を有する医療処置の実行を可能にする。例えば、手術用ロボットシステム100は患者210上で動作するために使用され、ロボットアーム104は患者210の身体の上方に位置決めされ、エンドエフェクタ112は患者210の身体に向かってz軸に対して選択的に角度付けされ得る。
いくつかの例示的な実施形態では、外科用器具608の位置を動的に更新して、手術用ロボット102が手術中に外科用器具608の位置を常に知ることができるようにすることができる。その結果、いくつかの例示的な実施形態では、手術用ロボット102は、(医師が望む場合を除いて)外科用器具608を医師のさらなる助けなしに素早く所望の位置に移動させることができる。さらなるいくつかの実施形態では、外科用器具608が選択されたあらかじめ計画された軌道から逸脱する場合、外科用器具608の経路を修正するように手術用ロボット102を構成することができる。いくつかの例示的な実施形態では、手術用ロボット102は、エンドエフェクタ112および/または外科用器具608の動きの停止、変更、および/または手動制御を可能にするように構成され得る。したがって、使用中、例示的な実施形態では、医師または他のユーザは、システム100を操作することができ、エンドエフェクタ112および/または外科用器具608の自律移動を停止、修正、または手動で制御する選択肢を有する。手術用ロボット102による外科用器具608の制御および移動を含む手術用ロボットシステム100のさらなる詳細は、同時係属中の米国特許出願番号13/924,505に見出すことができ、その全体が参照により本明細書に組み込まれる。
ロボット外科手術システム100は、ロボットアーム104、エンドエフェクタ112、患者210、および/または外科用器具608の三次元での動きを追跡するように構成される一つまたは複数の追跡マーカー118を含むことができる。例示的な実施形態では、複数の追跡マーカー118を、例えばロボット102の基部106上、ロボットアーム104上、および/または、エンドエフェクタ112上等のロボット102の外面に取り付ける(そうでなければ固定する)ことができるが、これに限定されない。例示的な実施形態では、複数の追跡マーカー118のうちの少なくとも一つの追跡マーカー118をエンドエフェクタ112に取り付けるか、または別の方法で固定することができる。一つまたは複数の追跡マーカー118は、患者210にさらに取り付けてもよい(または別の方法で固定されてもよい)。例示的な実施形態では、外科医、外科用ツール、またはロボット102の他の部分によって不明瞭になる可能性を低減するために、複数の追跡マーカー118を外科手術領域208から離れた患者210上に配置することができる。さらに、一つまたは複数の追跡マーカー118を外科用ツール608(例えば、スクリュードライバ、拡張器、インプラント挿入器など)にさらに取り付ける(または別の方法で固定する)ことができる。したがって、追跡マーカー118は、マークされたオブジェクト(例えば、エンドエフェクタ112、患者210、および外科用ツール608)のそれぞれをロボット102によって追跡することを可能にする。例示的な実施形態では、システム100は、マークされたオブジェクトのそれぞれから収集された追跡情報を使用して、例えばエンドエフェクタ112、外科用器具608(例えば、エンドエフェクタ112のチューブ114内に配置される)の配向と位置および患者210の相対位置計算することができる。
マーカー118は、放射線不透過性または光学マーカーを含むことができる。マーカー118は、球形、回転楕円形、円筒形、立方体、直方体などを含む適切な形状にすることができる。例示的な実施形態では、一つまたは複数のマーカー118は光学マーカーであってもよい。いくつかの実施形態では、エンドエフェクタ112上の一つまたは複数の追跡マーカー118の位置決めは、エンドエフェクタ112の位置を確認または確認するよう機能することによって、位置測定の精度を最大にすることができる。手術用ロボット102および外科用器具608の制御、移動および追跡を含む手術用ロボットシステム100のさらなる詳細は、米国特許出願第2016/0242849号に見つけることができ、その全体が参照により本明細書に組み込まれる。
例示的な実施形態は、外科用器具608に結合された一つまたは複数のマーカー118を含む。例示的な実施形態では、例えば、患者210および外科用器具608に結合されたこれらのマーカー118、ならびにロボット102のエンドエフェクタ112に結合されたマーカー118は、従来の赤外線発光ダイオード(LED)、またはOptotrak(登録商標)のような市販の赤外線光学追跡システムを使用して追跡可能なOptotrak(登録商標)ダイオードを含むことができる。Optotrak(登録商標)は、カナダ、オンタリオ州、ウォータールーのNorthern Digital Inc.の登録商標である。他の実施形態では、マーカー118は、Polaris Spectraなどの市販の光学追跡システムを使用して追跡することができる従来の反射球を含むことができる。Polaris SpectraはNorthern Digital,Inc.の登録商標である。例示的な実施形態では、エンドエフェクタ112に結合されたマーカー118は、オンおよびオフにすることができる赤外線発光ダイオードを含む能動マーカーであり、患者210および外科用器具608に結合されたマーカー118は受動反射球体を含む。
例示的な実施形態では、マーカー118から放射された、および/またはマーカー118によって反射された光は、カメラ200によって検出され、マークされたオブジェクトの位置および動きを監視するために使用され得る。代替的な実施形態では、マーカー118は、無線周波数および/または電磁気反射器または受信機を含むことができ、カメラ200は、無線周波数および/または電磁気受信機を含むか、またはそれらに置き換えることができる。
手術用ロボットシステム100と同様に、図3は、本開示の例示的な実施形態に従う、ドッキングされた構成の手術用ロボットシステム300およびカメラスタンド302を示す。手術用ロボットシステム300は、ディスプレイ304と、上アーム306と、下アーム308と、エンドエフェクタ310と、縦柱312と、キャスター314と、キャビネット316と、タブレット引出し318と、コネクタパネル320と、制御パネル322と、情報のリング324とを含むロボット301を含む。カメラスタンド302は、カメラ326を含むことができる。これらのコンポーネントは、図5を参照してより拡大して説明される。図3は、例えば使用されていないときに、カメラスタンド302がロボット301と入れ子になっているドッキング構成の手術用ロボットシステム300を示す。当業者であれば、カメラ326およびロボット301は、互いに分離され、外科施術中に、例えば、図1および図2に示されるように、任意の適切な位置に配置され得ることが理解されよう。
図4は、本開示の例示的な実施形態と一致する基部400を示す。基部400は、手術用ロボットシステム300の一部であってもよく、キャビネット316を含んでもよい。キャビネット316は、バッテリ402、電力分配モジュール404、プラットフォームインターフェースボードモジュール406、コンピュータ408、ハンドル412、およびタブレット引出し414を含むがこれに限定されない手術用ロボットシステム300の特定のコンポーネントを収容することができる。これらのコンポーネント間の接続および関係は、図5を参照してより詳細に説明される。
図5は、手術用ロボットシステム300の例示的な実施形態の特定のコンポーネントのブロック図を示す。手術用ロボットシステム300は、プラットフォームサブシステム502、コンピュータサブシステム504、動作制御サブシステム506、および追跡サブシステム532を含むことができる。プラットフォームサブシステム502は、バッテリ402、電力分配モジュール404、プラットフォームインターフェースボードモジュール406、およびタブレット充電ステーション534をさらに含むことができる。コンピュータサブシステム504は、コンピュータ408、ディスプレイ304、およびスピーカ536をさらに含むことができる。動作制御サブシステム506は、駆動回路508、モータ510、512、514、516、518、安定器520、522、524、526、エンドエフェクタ310、およびコントローラ538をさらに含むことができる。追跡サブシステム532は、位置センサ540およびカメラ変換器542をさらに含むことができる。システム300はまた、フットペダル544およびタブレット546を含むことができる。
入力電力は、電力分配モジュール404に供給され得る電源548を介してシステム300に供給される。電力分配モジュール404は、入力電力を受け取り、システム300の他のモジュール、コンポーネント、およびサブシステムに提供される異なる電源供給電圧を生成するように構成される。電力分配モジュール404は、プラットフォームインターフェースモジュール406に異なる電圧を供給するように構成することができるが、電圧は、コンピュータ408、ディスプレイ304、スピーカ536、例えば電力モータ512、514、516、518およびエンドエフェクタ310のドライバ508、モータ510、リング324、カメラ変換器542、およびシステム300のための他のコンポーネント(例えばキャビネット316内の電気部品を冷却するためのファン)、などの他のコンポーネントに提供することができる。
電力分配モジュール404はまた、タブレット引出し318内に配置され得るタブレット充電ステーション534などの他のコンポーネントに電力を供給し得る。タブレット充電ステーション534は、テーブル546の充電のために、タブレット546との無線または有線通信してもよい。タブレット546は、本開示と一致し、本明細書に記載される外科医によって使用され得る。
電力分配モジュール404は、電力分配モジュール404が入力電力548から電力を受け取らない場合に一時的な電源として働くバッテリ402に接続されてもよい。他の時には、電力分配モジュール404は、必要に応じてバッテリ402を充電するように働くことができる。
プラットフォームサブシステム502の他のコンポーネントは、コネクタパネル320、制御パネル322、およびリング324も含むことができる。コネクタパネル320は、異なる装置およびコンポーネントをシステム300および/または関連するコンポーネントおよびモジュールに接続するように機能することができる。コネクタパネル320は、異なるコンポーネントからラインまたは接続を受ける一つまたは複数のポートを含むことができる。例えば、コネクタパネル320は、システム300を他の機器に接地する接地端子ポート、フットペダル544をシステム300に接続するポート、追跡サブシステム532(位置センサ540、カメラ変換器542、カメラスタンド302に関連するカメラ326と、を含むことができる)に接続するポートを有することができる。コネクタパネル320は、コンピュータ408のような他のコンポーネントへのUSB、イーサネット(登録商標)、HDMI(登録商標)通信を可能にする他のポートを含むこともできる。
制御パネル322は、システム300の動作を制御する、および/またはシステム300に関する情報を提供する様々なボタンまたはインジケータを提供することができる。例えば、制御パネル322は、システム300の電源をオンまたはオフするためのボタン、縦柱312を上げるか、または下げるためのボタン、およびシステム300を物理的に移動させるのを防ぐためにキャスター314に係合するように設計された安定器520〜526を上げるかまたは下げるためのボタンを含むことができる。緊急事態が発生した場合には、他のボタンがシステム300を停止させてもよいが、これによりすべてのモータ動力が除去され、機械的ブレーキが加えられてすべての動作が停止する。制御パネル322はまた、バッテリ402のライン電力インジケータまたは充電状態などの特定のシステム状態をユーザに通知するインジケータを有することができる。
リング324は、システム300のユーザに、システム300が動作している異なるモードおよびユーザに対するある種の警告を通知する視覚的インジケータとすることができる。
コンピュータサブシステム504は、コンピュータ408と、ディスプレイ304と、スピーカ536とを含む。コンピュータ504は、システム300を動作させるオペレーティングシステムと、ソフトウェアとを含む。コンピュータ504は、ユーザに情報を表示するために、他のコンポーネント(例えば、追跡サブシステム532、プラットフォームサブシステム502、および/または動作制御サブシステム506)から情報を受信し処理することができる。さらに、コンピュータサブシステム504は、ユーザにオーディオを提供するスピーカ536を含むこともできる。
追跡サブシステム532は、位置センサ504と変換器542とを含むことができる。追跡サブシステム532は、図3に関して説明したカメラ326を含むカメラスタンド302に対応することができる。位置センサ504は、カメラ326であってもよい。追跡サブシステムは、外科施術中にユーザが使用するシステム300の異なるコンポーネントおよび/または器具上に位置する特定のマーカーの位置を追跡することができる。この追跡は、それぞれ、LEDまたは反射マーカーなどの能動または受動素子の位置を追跡する赤外線技術の使用を含む、本開示と一致する方法で行われてもよい。これらのタイプのマーカーを有する構造体の位置、配向、および配置は、ディスプレイ304上のユーザに示されるコンピュータ408に提供されてもよい。例えば、これらのタイプのマーカーを有し、このようにして(ナビゲーション空間と呼ぶことができる)追跡される外科用器具608は、患者の解剖学的構造の三次元画像に関連してユーザに示されてもよい。
動作制御サブシステム506は、縦柱312、上アーム306、下アーム308、を物理的に移動させ、または回転エンドエフェクタ310回転させるように構成することができる。物理的な移動は、一つまたは複数のモータ510〜518の使用を通じて行うことができる。例えば、モータ510は縦柱312を垂直に持ち上げるかまたは下降させるように構成することができる。モータ512は、図3に示すように、縦柱312との係合点の周りで上アーム308を横方向に移動させるように構成することができる。モータ514は、図3に示すように、下アーム308を上アーム308との係合点の周りで横方向に移動させるように構成することができる。モータ516および518は、ひとつがロールを制御し、ひとつが傾斜を制御して、エンドエフェクタ310を移動させるように構成することができ、それによって、エンドエフェクタ310を移動させることができる複数の角度を提供することができる。これらの動きは、エンドエフェクタ310上に配置され、ユーザが所望の方法でシステム300を移動させるためにこれらのロードセルに係合することによって起動される、ロードセルを介してこれらの動きを制御するコントローラ538によって達成され得る。
さらに、システム300は、ディスプレイ304(タッチスクリーン入力装置とすることができる)上でユーザがディスプレイ304上の患者の解剖学的構造の三次元画像上の外科用器具または構成要素の位置を示すことにより、縦柱312、上アーム306、および下アーム308の自動移動を提供することができる。ユーザは、フットペダル544またはいくつかの他の入力手段を踏んでこの自動移動を開始することができる。
図6は、例示的な実施形態による手術用ロボットシステム600を示す。手術用ロボットシステム600はと、エンドエフェクタ602と、ロボットアーム604と、ガイドチューブ606と、器具608と、ロボット基部610とを含むことができる。器具ツール608は、一つまたは複数の追跡マーカー(マーカー118など)を含む追跡アレイ612に取り付けられ、関連する軌道614を有することができる。軌道614は、ガイドチューブ606を通って位置決めされるかまたは固定されると、器具ツール608が移動するように構成される移動経路(例えば器具ツール608が患者に挿入される経路など)を表すことができる。例示的な動作では、ロボット基部610は、ロボットアーム604およびエンドエフェクタ602と電子的に通信するように構成され、手術用ロボットシステム600は、患者210上で動作する際、ユーザ(例えば外科医)を支援する。手術用ロボットシステム600は、前述した手術用ロボットシステム100および300と一致し得る。
追跡アレイ612は、器具ツール608の位置および配向を監視するために、器具608に据え付けられてもよい。追跡アレイ612は、器具608に取り付けられてもよく、追跡マーカー804を含んでもよい。図8に最もよく示されるように、追跡マーカー804は、例えば、発光ダイオードおよび/または他のタイプの反射マーカー(例えば、本明細書の別の場所で説明したマーカー118)であってもよい。追跡装置は、手術用ロボットシステムに関連する一つまたは複数の視線装置であってもよい。例として、追跡装置は、手術用ロボットシステム100、300に関連する一つまたは複数のカメラ200、326であってもよく、ロボットアーム604、ロボット基部610、エンドエフェクタ602、および/または患者210に関連して器具608の定義された領域または相対的な配向について追跡アレイ612を追跡してもよい。追跡装置は、カメラスタンド302および追跡サブシステム532に関連して説明した構造と一致していてもよい。
また、図7A、図7Bおよび図7Cは、例示的な実施形態によるエンドエフェクタ602の上面図、正面図、および側面図をそれぞれ示す。エンドエフェクタ602は、一つまたは複数の追跡マーカー702を含むことができる。追跡マーカー702は、発光ダイオードまたは他のタイプの能動および受動マーカー、例えば前述の追跡マーカー118であってもよい。例示的な実施形態では、追跡マーカー702は、電気信号(例えば、赤外線発光ダイオード(LED))によって起動される能動赤外線発光マーカーである。したがって、追跡マーカー702は、赤外線マーカー702がカメラ200、326に見えるようにアクティブにしてもよい、または赤外線マーカー702がカメラ200、326には見えないように非アクティブにしてもよい。したがって、マーカー702がアクティブであるとき、エンドエフェクタ602はシステム100、300、600によって制御され、マーカー702が非アクティブ化されると、エンドエフェクタ602は所定の位置にロックされ、システム100、300、600によっては動くことができない。
マーカー702は、マーカー702が一つまたは複数のカメラ200、326、または手術用ロボットシステム100、300、600に関連する他の追跡装置によって視認されるように、エンドエフェクタ602の上または内部に配置されてもよい。カメラ200、326または他の追跡装置は、追跡マーカー702の移動に追従して異なる位置および視野角に移動するときにエンドエフェクタ602を追跡することができる。マーカー702および/またはエンドエフェクタ602の位置は、手術用ロボットシステム100、300、600に関連するディスプレイ110、304、例えば図2に示すディスプレイ110および/または図3に示すディスプレイ304に示されてもよい。このディスプレイ110、304により、ユーザは、エンドエフェクタ602がロボットアーム604、ロボット基部610、患者210、および/またはユーザに対して望ましい位置にあることを確実にすることができる。
例えば、図7Aに示すように、外科手術領域208から離れて配置され、ロボット102、301およびカメラ200、326の方を向いている追跡装置が、追跡装置に対するエンドエフェクタ602の一般的な配向の範囲を通って少なくとも3つのマーカー702を見ることができるよう、マーカー702はエンドエフェクタ602の表面の周りに配置され得る。例えば、このようにマーカー702を分布させることにより、エンドエフェクタ602が外科手術領域208内で移動および回転されるときに、追跡装置によってエンドエフェクタ602を監視することが可能になる。
さらに、例示的な実施形態では、エンドエフェクタ602は、外部カメラ200、326がマーカー702を読み取る準備ができているときを検出することができる赤外線(IR)受信機を含むことができる。この検出に際して、エンドエフェクタ602はマーカー702を照らすことができる。外部カメラ200、326がマーカー702を読み取る準備ができていることをIR受信機が検出することにより、発光ダイオードであってもよいマーカー702のデューティサイクルを外部カメラ200、326に同期させる必要があることを知らせることができる。これはまた、全体としてロボットシステムによるより低い電力消費を可能にすることができ、それにより、マーカー702は、連続的に照射される代わりに適切な時間にのみ照射される。さらに、例示的な実施形態では、マーカー702の電源をオフにして、異なるタイプの外科用器具608などの他のナビゲーションツールとの干渉を防止することができる。
図8は、追跡アレイ612および追跡マーカー804を含む一つのタイプの外科用器具608を示す。追跡マーカー804は発光ダイオードまたは反射球を含む、本明細書に記載された任意のタイプのものでよいが、これに、限定するものではない。マーカー804は、手術用ロボットシステム100、300、600に関連する追跡装置によって監視され、一つまたは複数の視線カメラ200、326であってもよい。カメラ200、326は、追跡アレイ612およびマーカー804の位置および配向に基づいて器具608の位置を追跡することができる。外科医120のようなユーザは、追跡アレイ612およびマーカー804が、追跡装置またはカメラ200、326によって十分に認識され、器具608およびマーカー804を、例えば例示的な手術用ロボットシステムのディスプレイ110上に表示するように器具608を向けることができる。
外科医120が器具608をエンドエフェクタ602のガイドチューブ606内に配置し、器具608を調整する方法は、図8において明らかである。エンドエフェクタ112、310、602の中空チューブまたはガイドチューブ114、606は、外科用器具608の少なくとも一部分を受容するような大きさおよび構成を有する。ガイドチューブ114、606は、外科用器具608の挿入および軌道が患者210の体内または体上の所望の解剖学的標的に到達できるように、ロボットアーム104によって方向付けられるように構成される。外科用器具608は、略円筒形の器具の少なくとも一部を含み得る。スクリュードライバが外科用ツール608として例示されるが、任意の適切な外科用ツール608がエンドエフェクタ602によって位置決めされてもよいことは理解されよう。一例として、外科用器具608は、一つまたは複数のガイドワイヤ、カニューレ、レトラクタ、ドリル、リーマ、スクリュードライバ、挿入ツール、除去ツールなどを含み得る。中空チューブ114、606は全体として円筒形状を有するものとして示されるが、当業者であれば、ガイドチューブ114、606は、外科用器具608を収容し、手術部位にアクセスするのに望ましい任意の適切なサイズおよび構成を有することができる。
また、図9A〜図9Cは、例示的な実施形態によるエンドエフェクタ602およびロボットアーム604の一部を示す。エンドエフェクタ602は、本体1202およびクランプ1204をさらに含むことができる。クランプ1204は、ハンドル1206、ボール1208、バネ1210、およびリップ1212を含むことができる。ロボットアーム604は、窪み1214、取り付けプレート1216、リップ1218、および磁石1220をさらに含むことができる。
エンドエフェクタ602は、一つまたは複数のカップリングを介して手術用ロボットシステムおよびロボットアーム604と機械的にインターフェースおよび/または係合することができる。例えば、エンドエフェクタ602は、位置決めカップリングおよび/または補強カップリングを介してロボットアーム604と係合することができる。これらの結合によって、エンドエフェクタ602は、可撓性で無菌の障壁の外側でロボットアーム604に固定することができる。例示的な実施形態では位置決めカップリングは磁気キネマティックマウントであってもよく、補強カップリングは五つの棒状オーバーセンタクランピングリンク機構であってもよい。
位置決めカップリングに関して、ロボットアーム604は、非磁性材料、一つまたは複数の窪み1214、リップ1218、および磁石1220であってもよい取り付けプレート1216を含むことができる。磁石1220は、窪み1214の各々の下に取り付けられている。クランプ1204の部分は、磁性材料を含み、一つまたは複数の磁石1220によって引き付けられる。クランプ1204およびロボットアーム604の磁気吸引により、ボール1208はそれぞれの窪み1214内に着座するようになる。例えば、図9Bに示すボール1208は、図9Aに示すように、窪み1214内に着座する。この座は、磁気アシストキネマティックカップリングと考えることができる。磁石1220は、エンドエフェクタ602の配向にかかわらず、エンドエフェクタ602の全重量を支持するのに十分な強度を有するように構成することができる。位置決めカップリングは、6自由度を一意的に制限する任意のスタイルのキネマティックマウントである。
補強カップリングに関して、クランプ1204の部分は、固定接地リンクとなるように構成することができ、そのようなクランプ1204は、五つの棒状リンク機構として機能することができる。リップ1212およびリップ1218が、エンドエフェクタ602とロボットアーム604を固定するようにクランプ1204に係合するとき、閉鎖クランプハンドル1206は、エンドエフェクタ602をロボットアーム604に固定してもよい。クランプハンドル1206が閉じられているとき、クランプ1204がロック位置にある間、バネ1210は伸張されてもよいし応力が加えられてもよい。ロック位置は、中心を過ぎたリンク機構を提供する位置であってもよい。クランプ1204を解放するためにクランプハンドル1206に適用される力がない場合には、リンク機構は開かない。したがって、ロック位置において、エンドエフェクタ602は、ロボットアーム604にしっかりと固定され得る。
バネ1210は、張力のある湾曲ビームであってもよい。バネ1210は、未使用のPEEK(ポリエーテルエーテルケトン)のような高い剛性と高降伏歪みを示す材料で構成することができる。エンドエフェクタ602とロボットアーム604との間のリンク機構は、二つのカップリングの締結を妨げることなく、エンドエフェクタ602とロボットアーム604との間の無菌バリアを提供し得る。
補強カップリングは、複数のバネ部材とのリンク機構であってもよい。補強カップリングは、カムまたは摩擦に基づく機構でラッチすることができる。補強カップリングは、エンドエフェクタ102をロボットアーム604に固定するのを支援する、十分に強力な電磁石であってもよい。補強カップリングは、エンドエフェクタ602とロボットアーム604との間のインターフェースを滑り、ねじ機構、オーバーセンタリンク機構、または、カム機構で固定するエンドエフェクタ602および/またはロボットアーム604から完全に分離する多数のカラーであってもよい。
図10および図11を参照すると、外科施術の前または間に、ナビゲーション空間および画像空間の両方において、患者210のオブジェクトおよび標的解剖学的構造を追跡するために、特定の登録手順が実施されてもよい。図10に示すように、このような登録を行うため、登録システム1400を使用することができる。
患者210の位置を追跡するために、患者追跡装置116は、患者210の硬い解剖学的構造に固定されることになる患者固定器具1402を含み得、動的基準ベース(DRB)1404は、患者固定器具1402に固定的に取り付けられてもよい。例えば、患者固定器具1402は、動的基準ベース1404の開口部1406に挿入されてもよい。動的基準ベース1404は、追跡サブシステム532のような追跡装置に見えるマーカー1408を含むことができる。これらのマーカー1408は、本明細書で前述したように、光学マーカーまたは追跡マーカー118などの反射球であってもよい。
患者固定器具1402は、患者210の硬い解剖学的構造に取り付けられ、外科施術中に取り付けられたままであり得る。例示的な実施形態では、患者固定器具1402は、患者210の硬い領域、例えば、外科施術の対象となる標的解剖学的構造から離れて位置する骨に取り付けられる。標的解剖学的構造を追跡するために、動的基準ベース1404は、動的基準ベース1404を標的解剖学的構造の位置で登録するために、標的解剖学的構造上またはその付近に一時的に配置される登録固定具の使用を通して、標的解剖学的構造と関連する。
登録固定具1410は、枢動アーム1412を使用して患者固定器具1402に取り付けられる。枢動アーム1412は、患者固定器具1402を登録固定具1410の開口部1414に挿入することによって患者固定器具1402に取り付けられる。枢動アーム1412は、例えば、枢動アーム1412の開口部1418にノブ1416を挿入することによって、登録固定具1410に取り付けられる。
枢動アーム1412を使用して、登録固定具1410を標的解剖学的構造の上に配置することができ、その位置は、登録固定具1410上の追跡マーカー1420および/または基準1422を使用して画像空間およびナビゲーション空間において決定することができる。登録固定具1410は、ナビゲーション空間で見えるマーカー1420の集合を含むことができる(例えば、マーカー1420は、追跡サブシステム532によって検出可能であり得る)。追跡マーカー1420は、本明細書で前述したように、赤外光で可視的な光学マーカーであってもよい。登録固定具1410は、撮像空間(例えば、三次元CT画像)内で視認可能な、例えばベアリングボールなどの基準点1422の集合体を含むこともできる。図11を参照してより詳細に説明するように、登録固定具1410を使用して、標的解剖学的構造を動的基準ベース1404に関連付けることができ、それにより、解剖学的構造の画像にナビゲーション空間内のオブジェクトの描写を重ね合わせることができる。標的解剖学的構造から離れた位置に配置された動的基準ベース1404は、基準点となり、それにより、登録固定具1410および/または枢動アーム1412を手術領域から除去することができる。
図11は、本開示による、登録のための例示的な方法1500を提供する。方法1500は、ステップ1502から始まり、標的解剖学的構造のグラフィカル表現(または画像)をシステム100、300、600、例えばコンピュータ408にインポートすることができる。このグラフィカル表現は、登録固定具1410および検出可能な基準の撮像パターン1420を含む、患者210の標的解剖学的構造の三次元CTまたは蛍光透視スキャンであってもよい。
ステップ1504において、基準点1420の撮像パターンが検出され、撮像空間に登録され、コンピュータ408に記憶される。任意選択的に、ステップ1506においてこの時点で、登録固定具1410のグラフィカル表現を、標的解剖学的構造の画像上に重ねることができる。
ステップ1508では、マーカー1420を認識することによって、登録固定具1410のナビゲーションパターンが検出され、登録される。マーカー1420は、位置センサ540を介して追跡サブシステム532によって赤外線によってナビゲーション空間内で認識される光学マーカーであってもよい。したがって、標的解剖学的構造の位置、配向、および他の情報がナビゲーション空間に登録される。したがって、登録固定具1410は、基準点1422の使用による画像空間およびマーカー1420の使用によるナビゲーション空間の両方で認識され得る。ステップ1510で、画像空間における登録固定具1410の登録がナビゲーション空間に転送される。この転送は、例えば、マーカー1420のナビゲーションパターンの位置と比較した基準1422の撮像パターンの相対位置を使用することによって行われる。
ステップ1512において、登録固定具1410のナビゲーション空間の登録(画像空間で登録される)は、さらに、患者固定器具1402に取り付けられた動的登録アレイ1404のナビゲーション空間に転送される。したがって、ナビゲーション空間が画像空間に関連付けられているため、登録固定具1410を除去し、動的基準ベース1404を使用して、ナビゲーション空間および画像空間の両方の標的解剖学的構造を追跡することができる。
ステップ1514および1516において、ナビゲーション空間は、ナビゲーション空間において認識できるマーカー(例えば、光学マーカー804を用いる外科用器具608)を用いて、画像空間およびオブジェクト上に重ね合わせてもよい。オブジェクトは、標的解剖学的構造の画像上の外科用器具608のグラフィカル表現を通して追跡することができる。
また、図12A〜図12Bは、患者210の術前、手術中、手術後、および/またはリアルタイム画像データを取得するためにロボットシステム100、300、600と共に使用され得る撮像装置1304を示す。任意の適切な主題は、撮像システム1304を使用して、任意の適切な手順のために画像化することができる。撮像システム1304は、撮像装置1306および/またはC−アーム1308装置などの任意の撮像装置とすることができる。x線システムで必要とされる患者210の頻繁な手動の再位置決めの必要性なしに、いくつかの異なる位置から患者210のx線を取得することが望ましい場合がある。図12Aに示すように、撮像システム1304は、「C」字形の対向する遠位端1312で終端する細長いC字形部材を含むC−アーム1308の形態であってもよい。C字形部材1130は、x線源1314および画像レセプタ1316をさらに含むことができる。アームのC−アーム1308内の空間は、医師がx線支持構造1318からの干渉が実質的にない患者を診断するための余地を提供することができる。図12Bに示すように、撮像システムは、図示されていない画像取り込み部を取り囲むことができるホイール1332を含むホイール付き移動カート1330のような、支持構造撮像装置支持構造1328に取り付けられたガントリハウジング1324を有する撮像装置1306を含むことができる。画像取り込み部は、互いに約180度に配置され、画像取り込み部の追跡に対して回転子(図示せず)に取り付けられたx線源および/または放出部と、x線受取りおよび/または画像受取り部とを含むことができる。画像取り込み部は、画像取得中に360度回転するように動作可能であってもよい。画像取り込み部は、中心点および/または軸の周りを回転することができ、患者210の画像データを複数の方向からまたは複数の平面において取得することを可能にする。特定の撮像システム1304が本明細書で例示されるが、任意の適切な撮像システムが当業者によって選択されてもよいことは理解されよう。
ここで図13A〜図13Cを参照すると、手術用ロボットシステム100、300、600は、所望の手術領域に対するエンドエフェクタ112、602、外科用器具608、および/または患者210(例えば、患者追跡装置116)の正確な位置決めに依存する。図13A〜図13Cに示す実施形態では、を参照すると、追跡マーカー118、804は、器具608および/またはエンドエフェクタ112の一部分に固定的に取り付けられている。
図13Aは、基部106、ロボットアーム104、およびエンドエフェクタ112を含むロボット102を含む手術用ロボットシステム100の一部を示す。ディスプレイ、カメラなどの図示されていない他の要素もまた、本明細書で説明するように存在してもよい。図13Bは、ガイドチューブ114を有するエンドエフェクタ112と、エンドエフェクタ112にしっかりと固定された複数の追跡マーカー118の拡大図を示す。この実施形態では、複数の追跡マーカー118がガイドチューブ112に取り付けられている。図13Cは、器具608にしっかりと固定された複数の追跡マーカー804を有する器具608(この場合、プローブ608A)を示す。本明細書の他の箇所に記載されるように、器具608は、ガイドワイヤ、カニューレ、レトラクタ、ドリル、リーマ、スクリュードライバ、挿入ツール、除去ツール、などの適切な外科用器具を含み得るが、それらに限定されない。
器具608、エンドエフェクタ112、または3Dで追跡される他のオブジェクトを追跡する場合、追跡マーカー118、804のアレイは、ツール608またはエンドエフェクタ112の一部に固定的に取り付けられてもよい。追跡マーカー118、804は、マーカー118、804がじゃまにならない(例えば、外科手術、視界などを妨げない)ように取り付けられることが好ましい。マーカー118、804は、例えば、アレイ612を用いて、器具608、エンドエフェクタ112、または追跡される他のオブジェクトに固定されてもよい。通常、三つまたは四つのマーカー118、804がアレイ612と共に使用される。アレイ612は、直線部分、クロスピースを含むことができ、マーカー118、804が互いに異なる相対位置および位置にあるように非対称であってもよい。例えば、図13Cに示すように、4−マーカー追跡アレイ612を有するプローブ608Aが示されており、図13Bは、異なる4マーカー追跡アレイ612を有するエンドエフェクタ112を示す。
図13Cでは、追跡アレイ612は、プローブ608Aのハンドル620として機能する。したがって、四つのマーカー804は、プローブ608Aのハンドル620に取り付けられ、シャフト622および先端624から離れている。これらの四つのマーカー804の立体写真測量による追跡は、器具608を剛体として追跡することを可能にし、追跡システム100、300、600が、プローブ608Aが追跡カメラ200、326の前方動かされる間に先端624の位置およびシャフト622の配向を正確に決定することができる。
一つまたは複数のツール608、エンドエフェクタ112、または3Dで追跡される他のオブジェクト(例えば、複数の剛体)の自動追跡を可能にするために、各ツール608、エンドエフェクタ112などのマーカー118、804が、既知のマーカー間間隔で非対称に配置される。非対称アラインメントの理由は、どのマーカー118、804が剛体上の特定の位置に対応するか、マーカー118、804が正面または背面から見られているかどうか、すなわち鏡像化されるかは明瞭にするためである。例えば、マーカー118、804がツール608またはエンドエフェクタ112上の正方形に配置されていた場合、どのマーカー118、804が正方形のどの隅に対応するかは、システム100、300、600にとっては不明である。例えば、プローブ608Aの場合、どのマーカー804がシャフト622に最も近いかは不明である。したがって、シャフト622がどのようにアレイ612から伸びていたかは分からない。したがって、各アレイ612、したがって各ツール608、エンドエフェクタ112、または追跡される他のオブジェクトは、他のツール608または追跡されている他のオブジェクトから区別できるように、固有のマーカーパターンを有さなければならない。非対称性およびユニークなマーカーパターンは、システム100、300、600が個々のマーカー118、804を検出し、保存されたテンプレートに対してマーカー間隔をチェックして、それらが、どのツール608、エンドエフェクタ112、または他のオブジェクトを表しているのかを決定することを可能にする。次に、検出されたマーカー118、804を自動的にソートし、追跡された各オブジェクトに正しい順序で割り当てることができる。この情報がなければ、ユーザがどの検出されたマーカー118、804がそれぞれの剛体上のどの位置のどの位置に対応するかを手動で指定しない限り、例えばツール先端624およびシャフト622のアライメントなどの重要な幾何情報を抽出するために剛体計算を実行することができないであろう。これらの概念は、3D光学追跡の方法の当業者には一般に公知である。
ここで図14A〜図14Dを参照すると、可動追跡マーカー918A〜918Dを有するエンドエフェクタ912の代替バージョンが示される。図14Aでは、可動追跡マーカー918A−918Dを有するアレイが第一の構成で示され、図14Bにおいて、可動追跡マーカー918A−918Dは、第一の構成に対して傾斜した第二の構成で示される。図14Cは、例えば、図14Aの第一の構成におけるカメラ200、326によって見られるように、追跡マーカー918A〜918Dのテンプレートを示す。図14Dは、例えば、図14Bの第二の構成におけるカメラ200、326によって見られるように、追跡マーカー918A〜918Dのテンプレートを示す。
この実施形態では、4マーカーアレイ追跡が企図されるが、マーカー918A〜918Dが剛体に対してすべて固定位置にあるわけではなく、その代わりに一つまたは複数のアレイマーカー918A〜918Dが、例えばテスト中に調整され、追跡されるマーカー918A〜918Dの自動検出およびソートのためのプロセスを中断することなく、追跡される剛体に関する最新の情報を与えることができる。
ロボットシステム100、300、600のエンドエフェクタ912に接続されたガイドチューブ914のような任意のツールを追跡する場合、追跡アレイの主な目的は、カメラ座標系におけるエンドエフェクタ912の位置を更新することである。固定システムを使用する場合、例えば、図13Bに示すように、反射マーカー118のアレイ612は、ガイドチューブ114から固定的に延びている。追跡マーカー118は固定的に接続されるので、カメラ座標系におけるマーカー位置の情報はまた、カメラ座標系におけるガイドチューブ114の中心線、先端およびテールの正確な位置を提供する。通常、このようなアレイ612からのエンドエフェクタ112の位置に関する情報、および別の追跡されたソースからの標的軌道の位置に関する情報は、ガイドチューブ114を軌道と整列するように移動させ、先端を軌道ベクトルに沿った特定の位置に移動させるロボット102の各軸に対して入力されなければならない必要な移動を計算するために使用される。
場合によっては、所望の軌道は厄介なまたは到達不能な位置にあるが、ガイドチューブ114を旋回させることができる場合には到達することができる。例えば、ガイドチューブ114がピッチ(手首上下角)軸の限界を超えて上方に枢動可能である場合、ロボット102の基部106から離れて指し示す非常に急な軌道は到達可能であり得るが、もし、ガイドチューブ114が、それを手首の端部に接続するプレートに平行に取り付けられるならば到達できないかもしれない。このような軌道に達するためには、ロボット102の基部106を移動させるか、または異なるガイドチューブアタッチメントを有する異なるエンドエフェクタ112を作業用エンドエフェクタと交換することができる。これらの解決の両方は、時間がかかり、扱いにくい場合がある。
図14Aおよび図14Bに最もよく示されるように、もし、アレイ908がマーカー918A〜918Dの一つまたは複数が固定位置になく、その代わりにマーカー918A〜918Dの一つまたは複数が調整、旋回、枢動、または移動できるならば、ロボット102は、検出および追跡プロセスを中断することなく、追跡されているオブジェクトに関する更新された情報を提供することができる。例えば、マーカー918A〜918Dの一つは定位置に固定され、他のマーカー918A〜918Dは移動可能であってもよい。マーカー918A〜918Dのうちの二つは、定位置に固定され、他のマーカー918A〜918Dは、移動可能であってもよい。マーカー918A〜918Dのうちの三つは、定位置に固定され、他のマーカー918A〜918Dは、移動可能であってもよい。またはマーカー918A〜918Dのすべてが可動であってもよい。
図14Aおよび図14Bに示す実施形態では、マーカー918A、918Bは、エンドエフェクタ912の基部906に直接的に固定的に接続され、マーカー918C、918Dは、チューブ914に固定的に接続される。アレイ612と同様に、マーカー918A〜918Dをエンドエフェクタ912、器具608、または追跡される他のオブジェクトに取り付けるために、アレイ908を設けることができる。しかしながら、この場合、アレイ908は、複数の別個のコンポーネントから構成される。例えば、マーカー918A、918Bは、第一のアレイ908Aによって基部906に接続され、マーカー918C、918Dは、第二のアレイ908Bによってガイドチューブ914に接続されてもよい。マーカー918Aは、第一のアレイ908Aの第一の端部に取り付けられてもよく、マーカー918Bは、直線距離に分離され、第一のアレイ908Aの第二の端部に固定されてもよい。第一のアレイ908は実質的に直線状であるが、第二のアレイ908Bは、曲がり構成、またはV形状構成を有し、それぞれの根元端がガイドチューブ914に接続され、そこからV字形で遠位端に分岐し、一つの遠位端にマーカー918Cを有し、他方の遠位端にはマーカー918Dを有す。特定の構成が本明細書に例示されるが、異なる数およびタイプのアレイ908A、908Bおよび異なる配置、数、およびタイプのマーカー918A〜918Dを含む他の非対称設計が企図されることが理解されよう。
ガイドチューブ914は、例えば、基部906に対するヒンジ920または他のコネクタを横切って、基部906に対して移動可能、枢動可能、または枢動可能であってもよい。したがって、マーカー918C、918Dは、ガイドチューブ914が枢動し、旋回し、または移動するときに、マーカー918C、918Dも枢動、旋回または移動するように移動可能である。図14Aに最もよく示されるように、ガイドチューブ914は、マーカー918A〜918Dが第一の構成を有するように、実質的に法線方向または垂直の向きに整列された長手方向軸916を有する。ここで図14Bを参照すると、マーカー918A〜918Dが第一の構成と異なる第二の構成を有するように、長手方向軸916が垂直方向に対して角度をなすように、ガイドチューブ914が枢動、旋回、または移動される。
図14A〜図14Dに記載された実施形態とは対照的に、四つのマーカー918A〜918Dの全てがガイドチューブ914に固定的に取り付けられた状態で、ガイドチューブ914とアーム104(例えば、手首アタッチメント)との間にスイベルが存在し、このスイベルがユーザによって調整された場合、ロボットシステム100、300、600は、ガイドチューブ914の配向が変化したことを自動的に検出することができない。ロボットシステム100、300、600は、マーカーアレイ908の位置を追跡し、ガイドチューブ914が以前の配向で手首(ロボットアーム104)に取り付けられていると仮定して、不正確なロボット軸の動きを計算する。一つまたは複数のマーカー918A〜918D(例えば、二つのマーカー918C、918D)を、チューブ914上に固定して保持し、一つまたは複数のマーカー918A〜918D(例えば、二つのマーカー918A、918B)をスイベルを横切って保持することによって、新しい位置の自動検出が可能となり、ロボットアーム104の端部上の新しいツールまたはエンドエフェクタ112、912の検出に基づいて正しいロボットの動きが計算される。
一つまたは複数のマーカー918A〜918Dは、任意の適切な手段にしたがって移動、枢動、旋回等されるように構成される。例えば、マーカー918A〜918Dは、クランプ、バネ、レバー、摺動、トグルなどのヒンジ920によって、またはマーカー918A〜918Dを個々にまたは組み合わせて移動させるための、または、アレイ908A、908Bを個々にまたは組み合わせて移動させるための、または、エンドエフェクタ912の任意の部分を別の部分に対して移動させるための、または、ツール608の任意の部分を別の部分に対して移動させるための、任意の他の適切な機構によって、動かしても良い。
図14Aおよび図14Bに示すように、アレイ908およびガイドチューブ914は、単に、クランプまたはヒンジ920を緩め、アレイ908A、908Bの一部を他の部分908A、908Bに対して移動させ、ヒンジ920を再調整して、ガイドチューブ914が異なる位置に向けられるように構成可能であってもよい。例えば、二つのマーカー918C、918Dはチューブ914と固定的に相互接続され、二つのマーカー918A、918Bはヒンジ920を介してロボットアーム104に取り付けられるエンドエフェクタ912の基部906に固定的に相互接続され得る。ヒンジ920は、ユーザが第一の構成(図14A)と第二の構成(図14B)との間を素早く切り替えることを可能にするためにゆるめて締めることができるウイングナットなどのクランプの形態であってもよい。
カメラ200、326は、例えば、図14Cおよび図14Dで識別されたテンプレートの一つにおいてマーカー918A〜918Dを検出する。アレイ908が第一の構成(図14A)にあり、追跡カメラ200、326がマーカー918A〜918Dを検出する場合、追跡されるマーカーは14Cに示すようにアレイテンプレート1と一致する。アレイ908が第二の構成(図14B)であり、追跡カメラ200、326が同じマーカー918A〜918Dを検出した場合、追跡されるマーカーは図14Dに示すようにアレイテンプレート2と一致する。アレイテンプレート1およびアレイテンプレート2は、ガイドチューブ914、マーカー918A〜918D、およびロボットアタッチメント間に固有に画定された空間的関係を有する二つの異なるツールとしてシステム100、300、600によって認識される。したがって、ユーザは、システム100、300、600に変更を通知することなく、第一および第二の構成の間でエンドエフェクタ912の位置を調整することができ、システム100、300、600は、ロボット102の動きを軌道上にあるように適切に調整する。
この実施形態では、マーカーアレイが、システム100、300、600がアセンブリを二つの異なるツールまたは二つの異なるエンドエフェクタとして認識することを可能にする固有のテンプレートと一致する二つのアセンブリ位置が存在する。これらの二つの位置の間または外側のスイベルの任意の位置では、(すなわち、それぞれ図14Cおよび図14Dに示すアレイテンプレート1およびアレイテンプレート2)マーカー918A〜918Dはいずれのテンプレートとも一致せず、システム100、300、600は、カメラ200、326によって個々のマーカー918A〜918Dが検出されるにもかかわらず、存在するアレイを検出せず、マーカー918A〜918Dがカメラ200、326の視界から一時的にブロックされた場合と同じ結果になる。他のアレイテンプレートが、例えば、異なる器具608または他のエンドエフェクタ112、912などを識別する他の構成用に存在してもよいことが理解されよう。
記載された実施形態では、二つの別個の組立位置が図14Aおよび14Bに示される。しかし、スイベルジョイント、直線ジョイント、スイベルジョイントと直線ジョイントの組み合わせ、ペグボード、または他のアセンブリ上に複数の離散的な位置が存在することが理解されよう。ここで、アレイの一つまたは複数のマーカー918A〜918Dの位置をお互いに調整することによってユニークなマーカーテンプレートを作成することができ、各離散的な位置は、特定のテンプレートと一致し、異なる既知の属性を有する固有のツール608またはエンドエフェクタ112、912を定義する。さらに、エンドエフェクタ912について例示されるが、移動可能な固定マーカー918A〜918Dは、任意の適切な器具608または追跡される他のオブジェクトとともに使用されてもよいことが理解されよう。
外部3D追跡システム100、300、600を使用してロボットのエンドエフェクタ112に取り付けられた三つ以上のマーカーの完全な剛体アレイを追跡する場合(例えば、図13Aおよび13Bに示すように)、カメラ200、326の座標系におけるロボット102の各セクションの3D位置を直接的に追跡するか、または計算することができる。トラッカーに対するジョイントの幾何学的な配向は設計によって既知であり、ジョイントの線形位置または角度位置は、ロボット102の各モータのエンコーダから既知であり、エンドエフェクタ112から基部116までのすべての可動部品の3D位置を完全に規定する。同様に、トラッカーがロボット102の基部106(図示せず)に取り付けられている場合、既知のジョイントジオメトリおよび各モータのエンコーダからのジョイント位置に基づいて、基部106からエンドエフェクタ112までのロボット102の各セクションの3D位置を追跡または計算することも同様に可能である。
いくつかの状況では、エンドエフェクタ112に固定的に取り付けられた三つ未満のマーカー118からロボット102のすべてのセグメントの位置を追跡することが望ましい場合がある。具体的には、ツール608がガイドチューブ114内に導入される場合、一つの追加のマーカー118のみが追跡されて、ロボット902の完全な剛体運動を追跡することが望ましい場合がある。
ここで図15A〜図15Eを参照すると、単一の追跡マーカー1018のみを有するエンドエフェクタ1012の代替バージョンが示される。エンドエフェクタ1012は、本明細書に記載の他のエンドエフェクタと同様であってもよく、長手方向軸1016に沿って延在するガイドチューブ1014を含んでもよい。本明細書で説明する他の追跡マーカーと同様の単一の追跡マーカー1018を、ガイドチューブ1014にしっかりと固定することができる。この単一マーカー1018は、完全な剛体追跡を可能にするために欠けている自由度を追加する目的に役立ち、および/またはロボットおよびカメラの位置決めに関する仮定が有効であることを保証する監視マーカーとして機能する目的に役立ち得る。
単一追跡マーカー1018は、任意の好都合な方向に突出し、外科医の視界を妨げないエンドエフェクタ1012に対する剛性の延長部として、ロボット式エンドエフェクタ1012に取り付けられてもよい。追跡マーカー1018は、ガイドチューブ1014またはエンドエフェクタ1012上の任意の他の適切な位置に固定することができる。ガイドチューブ1014に取り付けられたとき、追跡マーカー1018は、ガイドチューブ1014の第一の端部と第二の端部との間の位置に配置されてもよい。例えば、図15Aでは、単一追跡マーカー1018は、ガイドチューブ1014から前方に延在し、ガイドチューブ1014の長手方向の中間点の上でかつガイドチューブ1014の入口の下方に位置する細いシャフト1017の端部に取り付けられた反射球として示される。この位置は、マーカー1018がカメラ200、326によって全体的に見えることを可能にするだけでなく、外科医120の視界を妨げず、手術の近傍の他のツールまたはオブジェクトと衝突しない。さらに、この位置のマーカー1018を有するガイドチューブ1014は、ガイドチューブ1014に導入された任意のツール608上のマーカーアレイを、ガイドチューブ1014上の単一マーカー1018が見えると同時に見ることができるように設計される。
図15Bに示すように、ぴったりとフィットするツールまたは器具608がガイドチューブ1014内に配置されると、器具608は、6つの自由度のうちの4つで機械的に拘束される。すなわち、器具608は、ガイドチューブ1014の長手方向軸線1016を除いて、いかなる方向にも回転させることができず、器具608は、ガイドチューブ1014の長手方向軸線1016に沿って以外の方向に並進することができない。言い換えれば、器具608は、ガイドチューブ1014の中心線に沿って並進移動しかつ回転させることだけができる。(1)ガイドチューブ1014の長手方向軸1016周りの回転角度、(2)ガイドチューブ1014に沿った位置のようにさらに二つのパラメータが既知であれば、カメラ座標系におけるエンドエフェクタ1012の位置が完全に定義される。
次に図15Cに示すように、システム100、300、600は、ツール608がガイドチューブ1014の内部に実際に配置され、代わりにガイドチューブ1014の外側ではなく、カメラ200、326の視界のどこかにあるときを知ることができるべきである。ツール608は、長手方向軸または中心線616と、複数の追跡されるマーカー804を有するアレイ612とを有する。剛体計算を使用して、ツール608上のアレイ612の追跡位置に基づいて、ツール608の中心線616がカメラ座標系内に位置する場所を決定することができる。
単一マーカー1018からガイドチューブ1014の中心線または長手方向軸1016までの固定された法線(垂直)距離Dは固定され、幾何学的に既知であり、単一マーカー1018の位置を追跡することができる。したがって、ツール中心線616から単一マーカー1018までの検出距離Dが、ガイドチューブ中心線1016から単一マーカー1018までの既知の固定距離Dと一致する場合、ツール608がガイドチューブ1014内にある(ツール608およびガイドチューブ1014の中心線616、1016が一致)か、またはこの距離Dが固定距離Dに一致する可能性のある位置の軌跡のある点に存在していることを判定できる。例えば、図15Cに示すように、ツール中心線616から単一マーカー1018までの法線方向の検出距離Dが、二つの位置において、透明なツール608によって表される両方のデータフレーム(追跡されるマーカー座標)においてガイドチューブ中心線1016から単一マーカー1018までの固定距離Dと一致する。したがって、ツール608がガイドチューブ1014内に配置されるときを決定するために追加の考慮が必要とされ得る。
ここで図15Dを参照すると、プログラムされたロジックを使用して、ツール608がガイドチューブ1014内を移動しているという条件を満たすよう、ツール608がスペース内で単一の球体1018に対して、ある程度の最小距離だけ移動しても、ツール中心線616から単一マーカー1018までの検出距離Dが正しい長さに固定されたままである、追跡データのフレームを探すことができる。例えば、第一のフレームF1は、第一の位置のツール608によって検出され、第二のフレームF2は、第二の位置のツール608によって検出され得る(すなわち、第一の位置に対して直線的に移動される)。ツールアレイ612上のマーカー804は、第一のフレームF1から第二のフレームF2へ所与の量より多く(例えば、合計5mm超)だけ移動することができる。この移動であっても、ツール中心線ベクトルC’から単一マーカー1018までの検出距離Dは、第一のフレームF1と第二のフレームF2の両方において実質的に同一である。
論理的には、外科医120またはユーザは、ツール608をガイドチューブ1014内に配置し、ガイドチューブ1014内にそれをわずかに回転させるかまたは滑り込ませることができ、システム100、300、600は、ツール608が五つのマーカー(ツール608上の四つのマーカー804に加えガイドチューブ1014上の単一マーカー1018)から、ガイドチューブ1014内にあることを検知することができる。ツール608がガイドチューブ1014内にあることを知り、空間内のロボット式エンドエフェクタ1012の位置および配向を定める6自由度の全てを計算することができる。単一マーカー1018がなければ、ツール608がガイドチューブ1014内にあることが確実に分かっていても、ガイドチューブ1014がツールの中心線ベクトルC’に沿ってどこに位置するか、およびガイドチューブ1014が中心線ベクトルC’に対しどのように回転するかは不明である。
図15Eで強調するように、ツール608上四つのマーカー804と合わせて単一マーカー1018が追跡されるので、ガイドチューブ1014およびツール608の中心線ベクトルC’および単一マーカー1018および中心線ベクトルC’による法線ベクトルを構築することができる。この法線ベクトルは、手首の遠位のロボットの前腕(この例では、そのセグメントに平行に配向される)に対して既知の配向であり、特定の固定位置で中心線ベクトルC’と交差する配向を有する。便宜上、図15Eに示すように、三つの相互に直交するベクトルk’、j’、i’を構成することができ、ガイドチューブ1014の剛体位置および配向を画定することができる。三つの相互に直交するベクトルの一つである、k’は、中心線ベクトルC’から構成され、第二のベクトルj’は、単一マーカー1018を通る法線ベクトルから構成され、第三のベクトルi’は、第一と第二のベクトルk’、j’のベクトル積である。これらのベクトルk’、j’、i’に対するロボットのジョイント位置は、すべてのジョイントがゼロになると既知であり、固定され、したがって剛体計算を使用して、ロボットがホームポジションにいるとき、これらのベクトルk’、j’、i’に対するロボットの任意の部分の位置を決定することができる。ロボットの移動中に、ツールマーカー804の位置(ツール608がガイドチューブ1014内にある間)および単一マーカー1018の位置が追跡システムから検出され、各ジョイントの角度/直線位置がエンコーダから既知であれば、ロボットの任意の部分の位置および方向を決定することができる。
いくつかの実施形態では、ガイドチューブ1014に対するツール608の配向を固定することが有用であり得る。例えば、エンドエフェクタガイドチューブ1014は、マシニングまたはインプラントの位置決めを可能にするために、その軸1016の周りの特定の位置に向けられてもよい。ガイドチューブ1014内に挿入されたツール608に取り付けられたあらゆる物の配向は、ツール608上の追跡されるマーカー804から分かるが、ガイドチューブ1014上の追加の追跡マーカー1018(または他の実施形態では複数の追跡マーカー)がなければ、カメラ座標系におけるガイドチューブ1014自体の回転方向は不明である。このマーカー1018は、本質的に、中心線ベクトルC’に対するマーカー1018の配向に基づいて−180°〜+180°の「クロック位置」を提供する。したがって、単一マーカー1018は、完全な剛体追跡を可能にする追加の自由度を提供することができ、および/またはロボットおよびカメラの位置決めに関する仮定が有効であることを保証する監視マーカーとして機能することができる。
図16は、ロボット102のエンドエフェクタ1012(または本明細書に記載の他の任意のエンドエフェクタ)を所望の標的軌道にナビゲートおよび移動させるための方法1100のブロック図である。ロボットエンドエフェクタ1012またはガイドチューブ1014上の単一マーカー1018の別の使用は、ロボット102に取り付けられたフル追跡アレイなしでロボット102の自動安全移動を可能にする方法1100の一部である。この方法1100は、追跡カメラ200、326がロボット102に対して移動しないで(すなわち、それらが固定位置にある)、追跡システムの座標系およびロボットの座標系が共に登録され、ガイドチューブ1014の位置および配向が、各ロボット軸の符号化された位置にのみ基づいて、ロボットのデカルト座標系において正確に決定することができるように、ロボット102が較正されるとき、機能する。
この方法1100では、トラッカーとロボットの座標系を共に登録しなければならないが、これは、追跡システムのデカルト座標系からロボットのデカルト座標系への座標変換が必要であることを意味する。便宜上、この座標変換は、ロボット工学の分野で周知である4x4の並進行列および回転行列であり得る。この変換はTcrと呼ばれ、「変換−カメラからロボットに」を指す。この変換が分かれば、追跡される各マーカーに対しベクトル形式でx、y、z座標として受け取られる追跡データの新しいフレームに4x4行列を乗算することができ、結果のx、y、z座標はロボットの座標系にある。Tcrを得るためには、ロボットのフル追跡アレイが、ロボットの座標系で既知の位置にロボットに固定的に取り付けられている間に追跡され、次いで既知の剛体法が座標の変換を計算するために使用される。ロボット102のガイドチューブ1014に挿入された任意のツール608は、追加のマーカー1018も読み取られたときに、固定的に取り付けられたアレイと同じ剛体情報を提供することができることは明らかである。すなわち、ツール608は、ガイドチューブ1014内の任意の位置に、ガイドチューブ1014内の任意の回転で、挿入するだけで良い。固定された位置および配向に挿入する必要はない。したがって、追跡アレイ612を含む任意のツール608をガイドチューブ1014に挿入し、ツールのアレイ612とガイドチューブ1014の単一マーカー1018とを読み取ることにより、Tcrを決定することが可能である。同時に、それぞれの軸上のエンコーダからロボットの座標系におけるガイドチューブ1014の現在位置を決定できる。
ロボット102を標的軌道にナビゲートして移動させるための論理は、図16の方法1100において提供される。ループ1102に入る前に、変換Tcrが以前に記憶されたと仮定する。したがって、ループ1102に入る前に、ステップ1104において、ロボット基部106が固定された後、ロボットが静止している間にガイドチューブに挿入されたツールの追跡データの一つかまたはそれ以上のフレームが格納される。ステップ1106において、この静的データおよび以前の較正データから、カメラ座標からロボット座標Tcrへのロボットガイドチューブ位置の変換が計算される。Tcrは、カメラ200、326がロボット102に対して動かない限り有効であるべきである。カメラ200、326がロボット102に対して移動し、Tcrを再取得する必要がある場合、システム100、300、600は、ガイドチューブ1014内にツール608を挿入するようにユーザに促し、次いで必要な計算を自動的に実行ことができる。
方法1100のフローチャートでは、収集されるデータの各フレームは、患者210上のDRB1404の追跡された位置、エンドエフェクタ1014上の単一マーカー1018の追跡された位置、および各ロボット軸の位置のスナップショットからなる。ロボットの軸の位置から、エンドエフェクタ1012上の単一マーカー1018の位置が計算される。この計算された位置は、追跡システムから記録されたマーカー1018の実際の位置と比較される。値が一致すれば、ロボット102が既知の位置にあることを保証することができる。変換Tcrは、ロボット102の標的がロボットの座標系に関して提供されるように、DRB1404の追跡された位置に適用される。次いで、ロボット102は、標的に到達するために移動するように命令され得る。
ステップ1104、1106の後、ループ1102は、追跡システムからDRB1404の剛体情報を受信するステップ1108と、標的先端および軌道を画像座標から追跡システム座標に変換するステップ1110と、標的先端および軌道をカメラ座標からロボット座標に変換する(Tcrを適用する)ステップ1112とを含む。ループ1102はさらに、追跡システムからロボットのための単一の漂遊マーカー位置を受信するステップ1114と、単一の漂遊マーカーを追跡システム座標からロボット座標に変換する(格納Tcrを適用する)ステップ1116とを含む。ループ1102はまた、順運動学からロボット座標系における単一のロボットマーカー1018の現在位置を決定するステップ1118を含む。ステップ1116および1118からの情報は、変換された追跡された位置からの漂遊マーカー座標が、所定の公差よりも小さい計算された座標と一致するかどうかを決定する(ステップ1120)ために使用される。イエスであれば、ステップ1122に進み、標的x、y、zおよび軌道にロボット移動を計算して適用する。いいえの場合は、ステップ1124に進み、一旦停止し、処理を続行する前にガイドチューブ1014への完全なアレイ挿入を要求し、ステップ1126でアレイが挿入された後に、Tcrを再計算する。その後、ステップ1108、1114および1118を繰り返すように進む。
この方法1100は、位置を確認するために単一マーカー1018の連続的な監視が省略される方法に優る利点を有する。単一マーカー1018がなければ、Tcrを使用してエンドエフェクタ1012の位置を決定し、エンドエフェクタ1012を標的位置に送信することは可能であるが、ロボット102が実際に予想される場所にいることを確認することはできない。例えば、カメラ200、326が突き当たり、Tcrがもはや有効でない場合、ロボット102は誤った位置に移動することになる。このため、単一マーカー1018は安全性に関する価値を提供する。
ロボット102の所与の固定位置に対して、理論的には、追跡カメラ200、326を、単一の追跡されるマーカー1018は、アレイではなく単一の点であるので、移動されないままである、新しい位置に移動することが可能である。そのような場合、システム100、300、600は、単一マーカー1018の計算された位置と、追跡された位置が一致するので、何らエラーを検出しない。しかしながら、ロボットの軸がガイドチューブ1012を新しい位置に移動させると、計算された位置と追跡された位置は不一致となり、安全チェックが有効になる。
「監視マーカー」という用語が、例えば、DRB1404に対して固定位置にある単一マーカーを参照して使用することができる。この例では、DRB1404が突き当てられるか、またはそうでなければ取り外されると、監視マーカーの相対位置が変化し、外科医120に、ナビゲーションに問題がある可能性があることを警告することができる。同様に、本明細書に記載の実施形態では、ロボットのガイドチューブ1014上に単一マーカー1018を用いて、システム100、300、600は、カメラ200、326がロボット102に対して移動したかどうかを連続的にチェックすることができる。カメラ200、326が突き当たったり機能不全になったり、ロボットが誤動作したりするなどして、追跡システムの座標系のロボットの座標系への登録が失われた場合、システム100、300、600はユーザに警告し、修正を加えることができる。したがって、この単一マーカー1018は、ロボット102に対する監視マーカーと考えることもできる。
ロボット102に恒久的に取り付けられたフルアレイ(例えば、図7A−7Cに示されるエンドエフェクタ602上の複数の追跡マーカー702)の場合、ロボット監視マーカーのような単一マーカー1018のそのような機能は、カメラ200、326がロボット102に対して固定位置にあることが要求されず、Tcrはロボット102の追跡された位置に基づいて各フレームで更新されるので、必要ではない。完全なアレイの代わりに単一マーカー1018を使用する理由は、完全なアレイがよりかさばってじゃまであり、それによって、単一マーカー1018よりも外科医の視界および外科手術領域208へのアクセスが妨げられ、フルアレイに対する視線が、単一マーカー1018に対する視線よりも容易にブロックされるからである。
ここで図17A−17Bおよび図18A−18Bを参照すると、固定および可動追跡マーカー804、806の両方を含むインプラントホルダ608B、608Cなどの器具608が示される。インプラントホルダ608B、608Cは、ハンドル620と、ハンドル620から延在する外側シャフト622とを有してもよい。シャフト622は、図示されるように、ハンドル620に対して実質的に垂直に、または任意の他の適切な配向に配置され得る。内側シャフト626は、一方の端部にノブ628を有する外側シャフト622を通って延在することができる。インプラント10、12は、シャフト622に他方の端部で、当業者に公知である典型的な接続機構を使用して、インプラントホルダ608B、608Cの先端624で接続する。ノブ628は、例えば、インプラント10、12を拡張させまたは関節接合させるために回転させることができる。米国特許第8,709,086号および第8,491,659号は、本明細書で参照により盛込まれるが、拡張可能な融合装置および取り付け方法を記載している。
インプラントホルダ608B、608Cのようなツール608を追跡するとき、追跡アレイ612は、アレイ612を構成するまたは、そうでなければインプラントホルダ608B、608Cに取り付けられる、固定マーカー804と一つまたは複数の可動マーカー806の組み合わせを含むことができる。ナビゲーションアレイ612は、インプラントホルダ器具608B、608Cに対して既知の位置に配置される少なくとも一つまたは複数(例えば、少なくとも二つ)の固定位置マーカー804を含むことができる。これらの固定マーカー804は、器具の幾何学的形状に対してどの方向にも動くことができず、器具608が空間中でどこにあるかを定義するのに有用である。さらに、少なくとも一つのマーカー806が存在し、これは、固定マーカー804に対して所定の境界内で動くことができる(例えば、摺動、回転など)アレイ612または器具自体に取り付けることができる。システム100、300、600(例えば、ソフトウェア)は、可動マーカー806の位置をインプラント10の特定の位置、配向、または他の属性に関係づける(例えば、図17A〜17Bに示す拡張可能な椎体間スペーサの高さ、図18A〜18Bに示される関節のある椎体間スペーサの角度)。したがって、システムおよび/またはユーザは、可動マーカー806の位置に基づいてインプラント10、12の高さまたは角度を決定することができる。
図17A〜図17Bに示す実施形態では、四つの固定マーカー804を使用してインプラントホルダ608Bを画定し、第五の可動マーカー806を所定の経路内で摺動させて、インプラント高さ(例えば、収縮位置または拡張位置)にフィードバックを提供することができる。図17Aは、拡張可能なスペーサ10をその初期高さで示しており、図17Bは、可動マーカー806が異なる位置に並進された、拡張状態のスペーサ10を示す。この場合、可動マーカー806は、インプラント10が拡張されたときに固定マーカー804に近づくが、この移動が逆転してもよいし、そうでなければ異なってもよいと考えられる。マーカー806の直線並進の量は、インプラント10の高さに対応する。二つの位置のみが示されるが、これを連続的な機能として有することが可能であり、それにより、任意の所定の拡張高さを可動マーカー806の特定の位置に相関させることができる。
ここで図18A〜図18Bを参照すると、四つの固定マーカー804がインプラントホルダ608Cを画定するために使用され、第五の可動マーカー806がインプラント関節角度に対してフィードバックを提供するために所定の経路内で摺動するよう構成される。図18Aは、関節のあるスペーサ12をその初期線形状態で示しており、図18Bは、可動マーカー806が異なる位置に移動されたあるオフセット角での関節動作した状態にあるスペーサ12を示す。マーカー806の線形並進量は、インプラント12の関節角度に対応する。二つの位置だけが示されるが、これを連続機能として有することが可能であり、それによって、任意の所与の関節角度が可動マーカー806の特定の位置に相関されることができる。
これらの実施形態では、可動マーカー806は、位置に基づいてインプラント10、12の属性に関するフィードバックを提供するために連続的に摺動する。また、インプラント属性に関するさらなる情報を提供することができる可動マーカー806がなければならない周到な位置が存在し得ることも考えられる。この場合、全てのマーカー804、806の周到な構成は、特定の配向または特定の高さにおける、インプラントホルダ608B、608Cおよびインプラント10、12の特定の幾何学的形状と相関する。さらに、可動マーカー806の任意の動きは、任意の他のタイプのナビゲートされるインプラントの他の可変属性に使用することができる。
可動マーカー806の線形移動に関して図示および説明されるが、可動マーカー806は、単に摺動に限定されるべきではない。マーカー806の回転または他の動きがインプラント10、12に関する情報を提供するのに有用であり得る用途があり得る。一組の固定マーカー804と可動マーカー806との間の位置の相対的変化は、インプラント10、12または他のデバイスに関する関連情報となり得る。さらに、拡張可能で関節のあるインプラント10、12が例示されるが、器具608は、他の医療機器およびスペーサ、ケージ、プレート、ファスナ、釘、ねじ、ロッド、ピン、ワイヤ構造、縫合糸、アンカークリップ、ステープル、ステント、骨移植片、生物製剤、セメントなどの材料ともに機能することができる。
ここで図19Aを参照すると、ロボットエンドエフェクタ112は、他のタイプのエンドエフェクタ112と交換可能であることが想定される。さらに、各エンドエフェクタ112は、所望の外科施術に基づいて一つまたは複数の機能を実行することができると考えられる。例えば、ガイドチューブ114を有するエンドエフェクタ112は、本明細書で説明されるように器具608を案内するために使用されてもよい。さらに、エンドエフェクタ112は、例えば、外科用デバイス、器具、またはインプラントを制御する、異なるまたは代替のエンドエフェクタ112で置き換えることができる。
代替のエンドエフェクタ112は、ロボットに結合され、ロボットによって制御可能な一つまたは複数の装置または器具を含むことができる。非限定的な例として、図19Aに示すエンドエフェクタ112は、レトラクタ(例えば、米国特許第8,992,425号および第8,968,363号に開示される一つまたは複数のレトラクタ)、または以下のような外科用デバイスを挿入または設置するための一つまたは複数の機構を含むことができる。それは、拡張可能な椎間融合装置(米国特許第8,845,734号、第9,510,954号、および第9,456,903号に例示される拡張可能インプラントなど)、スタンドアロンの椎間融合装置(米国特許第9,364,343号および第9,480,579号に例示されるようなインプラントなど)、拡張可能な骨切除装置(米国特許第9,393,128号および第9,173,747号に例示される骨矯正インプラントなど)、関節のあるスペーサ(米国特許第9,259,327号に例示されるインプラントなど)、ファセットプロテーゼ(米国特許第9,539,031号に例示されるデバイスなど)、椎弓形成術装置(米国特許第9,486,253号に例示されたデバイスなど)、棘突起スペーサ(米国特許第9,592,082号に例示されるインプラントなど)、インフレータブル製品、多軸スクリュー、一平面スクリュー、椎弓根スクリュー、ポストスクリューなどを含むファスナ、骨固定プレート、ロッド構築物および変更デバイス(米国特許第8,882,803号に例示されるデバイスなど)、人工および天然ディスク、動作保存装置、インプラント、および脊髄刺激装置(米国特許第9,440,076号に例示される装置など)、ならびに他の外科用デバイスである。エンドエフェクタ112は、骨セメント、骨移植片、生きた細胞、医薬品、または外科手術標的への他の送達物を提供するために、ロボットに直接的または間接的に結合された一つまたは複数の器具を含むことができる。エンドエフェクタ112はまた、椎間板切除術、脊柱後弯形成、椎骨縫合、拡張、または他の外科施術を行うために設計された一つまたは複数の器具を含むことができる。
エンドエフェクタそれ自体および/またはインプラント、デバイスまたは器具は、マーカー118の場所および位置が三次元で識別されるように、一つまたは複数のマーカー118を含むことができる。マーカー118は、カメラ200に直接的または間接的に視認可能な、本明細書に記載される能動または受動マーカー118を含むことができると考えられる。したがって、例えば、インプラント10上に配置された一つまたは複数のマーカー118は、インプラント前、インプラント中およびインプラント後のインプラント10の追跡を提供することができる。
図19Bに示すように、エンドエフェクタ112は、ロボットアーム104に結合された器具608またはその一部を含むことができ(例えば、器具608は、図9A〜図9Cに示す結合機構によってロボットアーム104に結合され得る)、ロボットシステム100によって制御可能である。したがって、図19Bに示す実施形態では、ロボットシステム100は、インプラント10を患者に挿入し、拡張可能インプラント10を拡張または収縮させることができる。したがって、ロボットシステム100は、外科医を補助するか、または部分的にまたは完全に独立して動作するように構成することができる。したがって、ロボットシステム100は、その特定の機能または外科施術のために各代替エンドエフェクタ112を制御することができることが想定される。
[外科手術インプラント計画コンピュータおよび手術用ロボットシステムを備えたシステム]
図20は、一部の実施形態に従って作動するよう構成された手術用ロボットシステム100に接続された、外科手術インプラント計画コンピュータ2000を含む、外科手術システムのブロック図を示す。外科手術インプラント計画コンピュータ2000は、外科手術インプラント装置カタログサーバ2010に接続して、異なる寸法の骨ねじなどの外科手術インプラント装置の入手可能なタイプおよび特性を定義する情報を得ることができ、またさらに接続して患者医療画像サーバ2020から画像を取得することができ、接続して医療モデル画像サーバ2030からの解剖学的モデル画像を取得することができる。
図20を参照すると、外科手術インプラント計画コンピュータ2000は、初期医療画像に関する外科手術計画の自動生成を可能にし、および/または初期医療画像に対して外科手術インプラント装置を移植するために外科医によって開発された外科手術計画を使用する。外科手術インプラント計画コンピュータ2000は、標的の医療画像に示される骨に外科手術インプラント装置を移植するのに使用するための外科手術計画を自動的に変換する。外科手術インプラント計画コンピュータ2000は、手術用ロボットシステム100に変換した外科手術計画を提供して、手術用ロボットシステムにより外科手術エンドエフェクタ112の動きを制御し、患者の骨の位置に対する外科手術エンドエフェクタ112を位置決めし、外科手術インプラント装置の骨への移植を容易にする。
一つの例示的な実施形態では、外科医は、外科手術インプラント計画コンピュータ2000とインターフェースして、ねじが挿入される骨の代表的なスキャンまたは画像(集合的に「医療画像」、「画像スキャン」、および「画像」と称される)の骨ねじの位置に対する外科手術計画を生成できる。外科手術インプラント計画コンピュータ2000は、患者の脊柱のCTスキャンなどの患者医療画像サーバ2020からのできれば特定のまたは平均の身長、年齢および体重の被験者からの正常な脊柱の初期画像を得ることができるか、またはPacific Research,Inc.によるSawbonesモデルなどに基づいた画像を有しうる、医療モデル画像サーバ2030からの適切な解剖構造のモデル化された初期画像を得ることができる。ねじを予見可能に必要としうる場所で、初期画像に示される骨に対して、任意の予見可能な位置にねじを移植することができるかを特定する外科手術計画を作成することができる。この外科手術計画は、画像処理を通して利用可能な骨回路の場所を考慮するアルゴリズムによって、またはねじの適切な外科手術配置について知識を持つ個人によって手動で作成されうる。例えば、胸部腰仙脊椎の画像スキャンでは、外科手術計画は、画像中のT1−S3のすべての椎弓根において椎弓根スクリューを移植することができる場所を特定する、画像体積およびマーキング位置を外科医がスクロールすることによって作成されうる。対応するねじ位置を特定する初期画像および外科手術計画は、ローカルまたはリモートメモリーデータベースで外科手術インプラント計画コンピュータ2000によって保存され、後に呼び出されて、特定の識別された患者、またはより一般的に将来の新しい患者に使用される。
患者の新しい標的画像が受け取られ、ねじ計画が必要な時、外科医は外科手術インプラント計画コンピュータ2000とインターフェースして、標的画像に示される骨の一つまたは複数の領域にねじを挿入する場所を指定する。コンピュータ2000は、それに応じて初期画像、外科手術計画、および標的画像を取得し、定義された規則に従って、指定された位置での標的画像の輪郭に十分に一致するように初期画像の輪郭を変形する空間的変換を実行する。必要なモーフィング量を最小化するために、患者医療画像サーバ2020または医療モデル画像サーバ2030から取得した初期画像を、目標画像の年齢、性別、身長、体重、人種またはその他の要因に一致させて、近似値を提供するよう選択しうる。画像の異なるセクションは、初期画像からの各対象の特定の骨を標的画像十分に一致させるように、最適な操作に従うなどして、異なる変形を用いてモーフィングされうる。例えば、初期画像から標的画像の対応する三つのレベルまで腰椎の三つのレベルを一致させようとする場合、コンピュータ2000は、標的画像に示される各対応する椎骨と最適に一致するように、初期画像の各椎骨が独立して変形するように動作してもよい。さらに、キーポイント周辺の骨の異なる部分内で、初期画像および標的画像の対応する部分間の適合のために画定された規則を満たすために、異なる方法で延伸および回転させることができる。例えばモーフィングなどの変形するための動作は、一定のアスペクト比を維持するために変形される本体を必要としないアフィン変形を含みうる。
図21は、いくつかの例示的な実施形態による、標的画像内の骨の上のオーバーレイ用の初期画像において外科手術インプラント装置を骨に対して移植するための外科手術計画を変換する変形マトリクスを生成するためにディスプレイ装置に表示することができる一連の画像および外科手術インプラント計画コンピュータ2000によって実行される関連操作を示す。
図21を参照すると、画像は、初期画像2100、標的画像2110、初期画像2100および標的画像2110の最初のオーバーレイされた複合視野2120を含み、ここでは総水平スケーリング、総垂直スケーリング、回転および変換のみが許容され、および標的画像2110のオーバーレイされた複合視野2130を含み、これは初期画像2100により一致するように画像のサブセット内にさらに非対称に変形されている。初期画像2100は、骨2108、および外科手術ねじ2102の先端位置2106およびテール位置2104が骨2108への移植後に位置する初期外科手術計画を示す。上述のように、初期画像2100に示される最初の外科手術計画は、外科医が患者または別の患者(例えば、患者医療画像サーバ2020から)または医療モデル(例えば、医療モデル画像サーバ2030から)の初期画像2100における骨2108を見ることによって開発されるか、または骨2108の定義されたおよび/または決定された特徴に対して、ねじまたは他の装置の配置(好ましい深さ、好ましい角度など)に関する外科医のあらかじめ定義された好みに基づいて作成された一つまたは複数の規則を満たすように動作する間、初期画像2100に示される骨2108に関して、外科手術インプラント計画コンピュータ2000によって自動的に作成されてもよい。初期画像2100は、標的画像2110よりも顕著に小さく、初期的なオーバーレイ2120を達成するために、初期画像2100は、全体的な前後寸法と横方向寸法が標的画像2110のものと一致するようにスケールされる。
以下に説明されるように、外科手術インプラント計画コンピュータ2000は、CTスキャン、X線、またはその他の医療的撮像プロセスによって得られた患者の標的画像2110に示す骨2112と併用するために、外科手術計画で定義された主要な解剖学的領域2122内のインプラント位置をさらに非対称的に変形する。変形したインプラント位置、例えば、外科手術スクリュー2132の変形した先端部およびテール位置は、手術用ロボットシステム100に提供され、手術用ロボットシステム100により外科手術エンドエフェクタ112の動きを制御し、患者の骨に対する外科手術エンドエフェクタ112を位置決めし、外科手術ねじ2132の骨への移植を容易にする。
図22および23は、一部の例示的な実施形態による外科手術計画のための変形マトリクスを生成および使用するための、外科手術インプラント計画コンピュータ2000による動作のフローチャートを図示する。
図21および22を参照すると、コンピュータ2000は、骨の初期画像2100である2200を取得し、外科手術インプラント装置の一組の位置、例えばねじ2102の先端2106とテール2104、および初期画像2100において骨2108に対してオーバーレイされた対応する一組の位置の間のマッピングを定義するデータを含む初期位置データ構造2202を取得する。初期画像2100の骨2108に対する外科手術ねじ2102の先端部およびテールの位置は、初期位置データ構造のデータに基づいて決定されうる。初期画像にマップされる外科手術インプラント装置および関連する場所(例えば、先端、テール、その他の定義された位置および/または輪郭)のタイプは、外科手術インプラント装置カタログサーバ2010から取得されてもよく、また初期画像は、医療モデル画像サーバ2030および/または患者医療画像ジサーバ2020から取得されてもよい。コンピュータ2000はまた、患者医療画像サーバ2020から、患者の骨2112の標的画像2110である2204を取得する。
コンピュータ2000は、初期画像2100内の骨2108の一部分2122の輪郭を変形する変形マトリクスを生成2206し、標的画像2110の骨2112の対応する部分の輪郭に適合するように定義された規則を満たし、ここでオーバーレイ画像2120の例示的部分は図21の2112に図示される。変形マトリクスは、初期画像2100の部分2122における骨2108の表面輪郭を画定するポイントのどれだけの群が、標的画像2110の部分2122における骨2112の対応する表面輪郭に一致するために定義された規則を満たすように、個別に移動または集合的に延伸および/または回転する必要があるかに基づいて生成されうる。定義された規則は、骨2108をモーフィングすることに対応して、部分2122内の骨2112のそれぞれの表面輪郭の最適な嵌合を達成しうる。モーフィングの操作には、限定されないが、本体が一定のアスペクト比を維持するために形成されることを必要としないアフィン変形が含まれる。
オーバーレイされた複合画像2120は、標的画像2110内の骨2112と同一の全体サイズをおおよそ持つように、初期画像2100で骨2108を、例えば引き伸ばすなどして、変形することによって生成されうる。変形したオーバーレイされた複合物視野2130は、ターゲット画像2110内の骨2112の対応する輪郭により一致させるように、初期画像2110内の骨2108の前面および後面の外面および脊柱管の表面に沿った複数の輪郭を、例えば伸張および回転させるなどのモーフィングによってさらに変形することによって生成され得る。
次に、コンピュータ2000は、例えばねじ2102などの外科手術インプラント装置の初期位置データ構造に変形マトリクスを適用すること、またはねじ先端2106およびねじテール2104などの初期位置データ構造のキーポイントに変形マトリクスを適用することに基づいて、2208変形位置データを生成する。この違いは、異なるように変形された二つの領域2122および2124を横切るねじ全体を変形すると曲がったねじ2132が得られるが、先端とテールのみを変形して、これらの点を直線で再接続すると、まっすぐなねじ2132が得られるために生じる。コンピュータ2000は、変形した位置データ構造に基づいて決定される標的画像2110内の骨2112上の位置にオーバーレイされた、例えば、ねじ2132などの外科手術インプラント装置のグラフィカル表現をディスプレイ装置上に表示2214する。
一実施形態では、外科手術インプラント計画コンピュータ2000は、外科医が見て必要に応じて調整するために、患者の標的画像上の自動計画ねじ位置を表示表示するように構成されうる。コンピュータ2000は、画定された既知のねじ先端およびテール座標に基づいて、骨2108の寸法に基づいて、および外科手術インプラント装置カタログサーバ2010から得た、入手可能なねじの特徴データに基づいて、ねじの長さを自動的に決定する。コンピュータ2000は、初期画像2100内の骨に対するオリジナルのねじの長さと、標的画像2110内の骨2112に対する変形したねじの長さとの間に生じる、決定されたスケーリングに基づいて、ねじの直径を自動的にスケールするように構成されうる。例えば、例えば、初期画像2100において50mmのねじが骨2108に適合するが、骨2112に一致するように骨2108を変形した後、ねじの長さが40mmに減少した場合、この減少はねじの長さの20%の減少に相当する。コンピュータ2000は、それに対応してねじの直径を20%減少させるように構成されうる。代替的にまたは追加的に、コンピュータ2000は、様々な骨の画定領域に対応する様々な長さのねじと共に使用するためにどのねじ径が選択されたかを識別する、様々な長さのねじを有する実際の患者のグループについて提供された履歴リポジトリのデータにアクセスしうる。代替的または追加的に、コンピュータ2000は、表面適合性、通過するねじが自動的に測定されうるねじが通過する領域内で利用可能な空間の量、および自動的に選択されるねじの最適直径について、初期画像2100の変換中に評価されるターゲット画像2110の骨輪郭の位置について既知の情報を使用することができる。
例示的実施形態において、外科手術ねじ2102は、初期画像の骨に対する初期位置データ構造によって画定される先端位置とテール位置とを有し、コンピュータ2000は、変形マトリクスに基づいて標的画像2100の骨2108に対して画定される外科手術ねじの先端位置とテール位置との間の距離をスケーリングする(図22の2210)。さらなる実施形態では、コンピュータ2000は、外科手術ねじの先端位置とテール位置との間の距離のスケーリングに基づいて、外科手術ねじの直径をスケーリングする(図22の図2212)。
上述のように、骨上の異なる部分におけるキーポイントに沿った輪郭は、異なる方法で延伸および回転して、初期画像および標的画像の対応する部分間の適合のために画定された規則を満たすことができる。図21では、オーバーレイ画像2120内の別の部分2124が示されており、ここで骨2108の輪郭は、部分2124内でも標的画像2110内の対応する骨2112にさらに厳密に一致するように変形されうる。オーバーレイ画像2120の部分2124内で実行される変形に基づいて、同一または別の変形マトリクスを生成または改良することができる。例えば、良好な椎弓根スクリューの配置は、脊柱管のサイズおよび正中線からの椎弓根のオフセットも維持しながら、椎弓根の幅が重なり合うように、初期画像形状を椎骨の後部領域の目標画像形状に合わせることが望ましい場合がある。こうした目標は、異なる変形マトリクスで変形される椎骨の異なる部分を必要とする場合があり、また椎骨全体の単一変形マトリクスの使用を遮断することができる。
領域間の境界での連続性を維持しながら、初期画像の個々の領域を変換して標的画像の対応する領域に一致させるための一般化された方法は、画像が変形される動画ビデオをデジタル作成するのに用いられる技術と同様の技術を用いて適用できる(例えば、http://www.learnopencv.com/face−morph−using−opencv−cpp−python/参照)。このモーフィング技術は、初期画像から標的画像への目印の対応を有する一連のポイントを使用し、ドローネ三角形分割を用いて画像領域または体積を個別領域に分割し、次いで各三角形(2D)または四面体(3D)に対してアフィン変形を適用して、初期画像から標的画像への各三角形領域または体積を適合させる。現在の用途では、例えば、理想的な脊椎の初期画像体積を、新しい患者の脊椎の標的画像体積に一致させるために、棘突起、椎弓板、横突起、椎弓根、および椎体などの主要な目印を、パターン認識および画像処理によって初期画像および標的画像内で自動的に識別できるか、またはユーザが画像内をスクロールしてこれらの位置をマーキングして、点対応集合を作成することによって手動で識別される。既知の技術を使用して、最良の適合のためのドローネ三角形分割およびアフィン変形が自動的に生成されうる。先端ポイントおよびテールポイントがその中にある四面体に対応するアフィン変形は、その後ねじの先端ポイントおよびテールポイントに適用される。ねじ本体は、その円筒形状を変える可能性があるため、変形しない。代わりに、変形した先端ポイントおよびテールポイントを使用して新しいねじ本体が位置付けて、標的ねじ計画を達成する。
一部のさらなる実施形態では、変形マトリクスを生成するための動作2206は、初期画像2100の骨2108の一部の輪郭のサイズおよび/または回転角度を変更することを含み得、標的画像2110における骨2112の対応する部分の輪郭のサイズおよび/または回転角度に適合させるために定義された規則を満たす。さらに、上述のように、動作は繰り返されて、初期画像2100における骨2108の複数の部分の輪郭のサイズおよび/または回転角度を変更し、標的画像2110内の骨2112の対応する複数の部分の輪郭のサイズおよび/または回転角度に適合させるために定義された規則を満たす。
一つのさらなる実施形態において、初期画像2100の骨2108の部分の輪郭のサイズおよび/または回転角度を変更するための動作は、初期画像2100内の骨2108の部分の輪郭のサイズおよび/または回転角度の最適な変形を適用して、オーバーレイ複合画像2120および/またはさらなる変形したオーバーレイ複合画像2130に示されるように、標的画像2110内の骨2112の対応する部分の輪郭のサイズおよび/または回転角度を適合するための定義された規則を満たすことを含み得る。別のさらなる実施形態において、初期画像2100の骨2108の部分の輪郭のサイズおよび/または回転角度を変更するための動作は、初期画像2100内の骨2108の部分の輪郭のサイズおよび/または回転角度のアフィン変形を適用して、標的画像2110内の骨2112の対応する部分の輪郭のサイズおよび/または回転角度を適合するための定義された規則を満たすことを含み得る。
さらなる実施形態では、変形マトリクスを初期位置データ構造に適用することに基づいて変形された位置データ構造を生成するための動作は、初期位置データ構造で定義された外科手術インプラント装置上の最初の位置の一つに対し、初期画像2100の骨2108に対する初期位置データ構造によって定義された対応する第一の位置の一つを変形するために、変形マトリクスを、標的画像2110内の骨2112に対する画定された変形された第一の位置に適用することと、変形した位置データ構造内の変形した第一の位置を、外科手術インプラント装置上の第一の位置の一つと関連付けて保存することとを含みうる。
動作はさらに、初期画像2100内の骨2108の別の部分2124の輪郭を変形する別の変形マトリクスを生成することをさらに含んで、標的画像2110内の骨2112の対応する別の部分2124の輪郭に適合するように画定された規則を満たすことができる。変形マトリクスを初期位置データ構造に適用することに基づいて変形された位置データ構造を生成するための動作は、初期位置データ構造で定義された外科手術インプラント装置上の第二の位置の一つに対し、初期画像2100の骨2108に対する初期位置データ構造によって定義された対応する第二の位置の一つを変形するために、変形マトリクスを、標的画像2110内の骨2112に対する画定された変形された第二の位置に適用することと、変形した位置データ構造内の変形した第二の位置を、外科手術インプラント装置上の第二の位置の一つと関連付けて保存することとをさらに含みうる。
ここで、図23のフローチャートを参照して、初期画像2100に示される骨2108へのねじ2102上の位置のマッピングを、標的画像2110に示される骨2112へのねじ2102上の位置の対応するマッピングに変換するために実行され得る例示的な動作を示す。適合するように定義された規則を満たすために、初期画像2100内の骨2108の第一の部分の輪郭を、標的画像2110内の骨2112の対応する第一の部分の輪郭に変換する、第一の変形マトリクス2300が生成される。第一の変形マトリクスは、初期位置データ構造で画定された外科手術ねじ上の先端位置に適用される2302。変形した先端位置は次に、変形した位置データ構造に保存される2304。適合するように定義された規則を満たすために、初期画像2100内の骨2108の第二の部分の輪郭を、標的画像2110内の骨2112の対応する第二の部分の輪郭に変換する、第二の変形マトリクス2306が生成される。第二の変形マトリクスは、初期位置データ構造で定義された外科手術ねじ上のテール位置に適用され2308、変形したテール位置は、次いで変形した位置データ構造にに保存される2310。
解剖学的モデルを使用してねじまたは他の装置を患者の骨に埋め込むための外科手術計画を自動的に生成するための動作が一部のシナリオで想定されるが、一部の患者にとって許容可能な解決策を提供しない場合がある。例えば、骨のコリドーは、ねじの先端およびテールが初期画像(例えば、解剖学的モデルまたはその他の患者に対応する)内に位置付けられる場所の間に直線的な接続とすることができるが、患者の標的画像における患者の骨の対応するコリドーは過度に湾曲しうる。様々なこうしたシナリオが、図24に示す骨の画像に図示されており、ここで外科手術インプラント装置(例えば、ねじ)は骨上のオーバーレイとして表示される。
図24を参照すると、画像2400は、ねじ、ロッド、またはその他の装置2402を移植できる直線のコリドーを持つ骨2404を図示する。鋭利なコントラストでは、画像2410は、インプラント装置2402が移植されうる実質的に湾曲したコリドーを有する骨2412を図示する。しかし、インプラント装置2402が表面を貫通し、湾曲した領域を通して骨2412の外側に延びることは、医学的に許容されるものではない。本明細書の実施形態によると、外科手術インプラント計画コンピュータ2000は、インプラント装置2402の位置を調節して骨部2412内に完全に延長することによって、こうした湾曲した領域を特定および補正するように構成されうる。画像2420の実施例では、装置2402骨2412内に移植される場所に対して外科手術計画を生成する場合、コンピュータ2000は、骨2412の外に出ないように、位置2402’からインプラント装置2402の位置に内向きに移動する。
図25は、外科手術プランを生成する時に骨湾曲または他の骨の窪みを補正するために、外科手術インプラント計画コンピュータ2000が実施しうる対応する操作のフローチャートである。図25を参照すると、距離は、標的画像内の変形した位置データ構造および骨の隣接する表面によって画定される外科手術インプラント装置上の位置間で決定される2200。決定された距離に応答して、コンピュータ2000は2204を調節し、ここで外科手術インプラント装置のグラフィカル表現は、骨の標的画像上のオーバーレイとして表示される。
外科手術計画を生成するための操作は、外科医の好みに基づいて定義される規則に基づいてインプラント装置の位置を付勢または制限することを含みうる。コンピュータ2000は、標的イメージ内の骨の表面に対する外科手術インプラント装置の貫通の深さおよび貫通角度を定義する一組の規則を取得して2202、その一連の規則を使用して調整し2204、ここで外科手術インプラント装置のグラフィカル表現は、骨の標的画像上のオーバーレイとして表示される。例えば、一部の外科医は、腰部の下部において腰椎のねじを後ろから前までまっすぐに移植することを好むが、その他の外科医は横方向から中間部に移植されたねじを有することを好む場合がある。代替的にまたは追加的に、一部の外科医は、椎体の深さの50%に椎弓根スクリューを貫通させることを好むが、その他の外科医は椎体の深さの75%に椎弓根スクリューを貫通させることを好む場合がある。スクリュー配置およびインプラント装置の他の好みに対する外科医のこれらおよびその他の好みは、外科医が初期画像に対して作成する外科手術計画で保存でき、また外科手術計画は、標的画像に向けるための手術計画の変形中にコンピュータ2000によって使用される。コンピュータ2000は、予測可能なすべてのねじおよび/または他の装置インプラント位置を計画するプロセスを実行することを好まない外科医を、特定された好みに最も近い選択肢の定義済みセット(例えば、図)から代わりに選択することを可能にしうる。
このようにして、初期医療画像に関して作成される、自動的に生成される予測外科手術計画および/または外科医の初期外科手術計画を、標的医療画像に示される患者の骨に外科手術インプラント装置を移植するのに使用するための変形された計画に変換する、外科手術システムが提供される。こうした自動的な計画は、手術に必要な時間を減少させ、計画の精度を高めることができる。変形した外科手術計画は、外科医によるレビューのために表示されてもよく、および/または患者の骨に対する手術用ロボットシステムの外科手術エンドエフェクタの位置決めを制御するために、手術用ロボットシステムに提供されてもよい。
本明細書に記載されるロボットおよび関連するシステムは、背骨または他の骨の用途を参照して一般に説明されるが、外科手術システムは、他の外科手術への用途、例えば、外傷または他の整形外科手術(例えば、髄内釘、プレートなどの配置)、頭蓋、神経、心胸郭、血管、結腸直腸、腫瘍、歯および他の外科手術および処置も考えられるが、これらに限定されない。
[外科手術インプラント計画コンピュータの構成要素]
図26は、一部の例示的な実施形態に従って動作するように構成された外科手術インプラント計画コンピュータ2000の構成要素のブロック図を示す。コンピュータ2000は、ディスプレイ装置2630、無線および/または有線ネットワークインターフェース回路2640、少なくとも一つのプロセッサ回路2610(プロセッサ)、および少なくとも一つのメモリ回路2620(メモリ)を含みうる。プロセッサ2610は、メモリ2620、ディスプレイ装置2630、およびネットワークインターフェース回路2640に接続される。メモリ2620は、プロセッサ2610により実行されるプログラムコード2622を保存し、動作を実行する。プロセッサ2610は、一般的な目的および/または専用の目的プロセッサ(例えば、マイクロプロセッサおよび/またはデジタル信号プロセッサ)などの一つまたは複数のデータ処理回路を含んでもよく、一つまたは複数のデータネットワークにわたって配置または分配されてもよい。プロセッサ2610は、コンピュータ可読媒体として以下に記述されるメモリ2620のプログラムコード2622間のコンピュータプログラム命令を実行し、外科手術インプラント計画コンピュータ2000について本明細書に開示される一つまたは複数の実施形態について、いくつかまたはすべての動作および方法を実行するように構成される。ネットワークインターフェース回路2640は、有線ネットワーク(例えば、イーサネット、USBなど)および/または無線ネットワーク(例えば、Wi−Fi、Bluetooth(登録商標)、携帯など)を介して、サーバ2010、2020、および/または2030などの別の電子装置、および手術用ロボットシステム100と通信するように構成される。
[さらなる定義および実施形態]
本発明の概念の様々な実施形態の上記の説明において、本明細書で使用される用語は、特定の実施形態を説明する目的のみのものであり、本発明の概念を限定するものではないことを理解されたい。他に定義されない限り、本明細書で使用される全ての用語(技術用語および科学用語を含む)は、本発明の概念が属する当業者によって一般に理解されるのと同じ意味を有する。一般的に使用される辞書に定義されているもののような用語は、明細書および関連技術の文脈における意味と一致する意味と有すると解釈されるべきであり、本明細書において明確に定義されていない限り、理想的または過度に形式的に解釈されるうべきではないことも理解されよう。
ある要素が、別の要素に「接続されている(connected)」、「結合されている(coupled)」「応答している(responsive)」、またはその変形として称される場合、別の要素の直接接続され、結合され、または、応答してもよく、あるいは、介在要素が存在してもよい。対照的に、ある要素が別の要素に「直接接続されている(directly connected)」、「直接結合されている(directly coupled)」、「直接応答している(directly responsive)」、またはその変形として称される場合、介在要素は存在しない。同一番号は、全体を通して同一要素を指す。別段に特定または限定されていない限り、「装着される(mounted)」、「接続される(connected)」、「支持される(supported)」および「結合される(coupled)」という用語およびそれらの変形は、広範に使用され、直接的および間接的な取り付け、接続、支持および結合の両方を包含する。さらに、「接続される(connected)」および「結合される(coupled)」は、物理的または機械的な接続または結合に限定されない。本明細書で使用されているように、単数形「一つの(a、an)」および「その(the)」は、文脈が明らかにそうでないことを示さない限りは、複数形も含むものとする。周知の機能または構成は、簡潔さおよび/または明瞭さのために、詳細に説明され得ない。用語「および/または(and/or)」は、関連して列挙した項目の一つまたは複数の組み合わせのいずれかおよびすべてを含む。
用語第一、第二、第三等が様々な要素/動作を説明するために本明細書において使用され得るが、これらの要素/動作はこれらの用語に限定されるべきではないことが理解されよう。これらの用語は、ある要素/動作を別の要素/動作から区別するためにのみ使用される。よって、いくつかの実施形態における第一要素/動作は、本発明概念の教示から逸脱することなく、他の実施形態において第二の要素/動作と称されてもよい。同一参照番号または同一参照指定子は、明細書全体を通して、同一または類似の要素を示す。
本明細書中で使用される場合、用語「含む(comprise)」、「含む(comprising)」、「含む(comprises)」、「含む(include)」、「含む(including)」、「含む(includes)」、「有する(have)」、「有する(has)」、「有する(having)」またはそれらの変形は、オープンエンドであり、一つまたは複数の述べられた特徴、整数、要素、ステップ、構成要素、機能を含むが、一つまたは複数の他の特徴、整数、要素、ステップ、構成要素、機能またはそれらのグループの存在または追加を排除するものではない。さらに、本明細書で使用されるように、ラテン語の句「例示的なグラシア」に由来する一般的な略語「e.g.」は、前述のアイテムの一般的な例を導入または特定するために使用されてもよく、そのような項目を限定することを意図しない。ラテン語句「id est」に由来する一般的な略語「i.e.」を使用し、より一般的な暗唱から特定の項目を指定することができる。
例示的な実施形態は、本明細書において、コンピュータ実装方法、装置(システムおよび/または装置)および/またはコンピュータプログラム製品のブロック図および/またはフローチャート図を参照して説明される。ブロック図および/またはフローチャート図のブロック、およびブロック図および/またはフローチャート図のブロックの組み合わせは、一つまたは複数のコンピュータ回路によって実行されるコンピュータプログラム命令によって実装できることが理解される。これらのコンピュータプログラム命令は、汎用コンピュータ回路、専用コンピュータ回路、および/または他のプログラム可能データ処理回路のプロセッサ回路に供給され、コンピュータおよび/または他のプログラム可能なデータ処理装置のプロセッサを介して実行されるこれらの命令が、トランジスタ、メモリ位置に格納された値、およびブロック図および/またはフローチャートブロックまたはブロックに指定された機能/動作を実現するための回路内の他のハードウェア構成要素を変換し、制御し、故に、ブロック図および/またはフローチャートブロックまたはブロックに指定された機能/動作を実現するための手段(機能)および/または構造を作成することができる。
これらのコンピュータプログラム命令はまた、コンピュータまたは他のプログラム可能なデータ処理装置に特定のやり方で機能するよう指示する固定のコンピュータ可読媒体に保存することができ、これによりコンピュータ可読媒体に保存されたこれらの命令は、ブロック図および/またはフローチャートブロックまたはブロックで指定された機能/動作を実装する命令を含む製造品を生成することができる。したがって、本発明の概念の実施形態は、「回路」、「モジュール」またはその変形と総称することができる、デジタル信号プロセッサなどのプロセッサ上で動作するハードウェアおよび/またはソフトウェア(ファームウェア、常駐ソフトウェア、マイクロコードなどを含む)で実施することができる。
また、いくつかの代替実施例では、ブロックに記されている機能/動作が、フローチャートに記載された順序から外れてもよいことにも留意されたい。例えば、連続して示された二つのブロックは、実際には実質的に同時に実行されてもよく、あるいは、関連する機能/動作に応じてブロックが時々逆の順序で実行されてもよい。さらに、フローチャートおよび/またはブロック図の所与のブロックの機能性は、複数のブロックに分離されてもよく、および/またはフローチャートおよび/またはブロック図の二つ以上のブロックの機能性が少なくとも部分的に統合されてもよい。最後に、図示されたブロック間に他のブロックが追加/挿入されてもよく、および/またはブロック/動作が本発明の概念の範囲から逸脱することなく省略されてもよい。さらに、図のいくつかは、通信の主要な方向を示すために通信経路上に矢印を含むが、図示された矢印とは反対の方向に通信が行われてもよいことを理解されたい。
本発明の概念のいくつかの実施形態が前述の明細書に開示されているが、本発明の概念の多くの変更および他の実施形態が、発明の概念に関係することが想定され、前述の説明および関連する図面に提示された教示の利益を享受する。したがって、本発明の概念は、上に開示された特定の実施形態に限定されず、多くの修正および他の実施形態が添付の特許請求の範囲内に含まれることが意図されることが理解される。一実施形態の特徴は、本明細書に記載された異なる実施形態の特徴と組み合わせることができ、または使用することがさらに想定される。さらに、特定の用語が、本明細書および以下の特許請求の範囲で用いられているが、それらは包括的で説明的な意味でのみ使用され、記載された発明概念または以下の特許請求の範囲を限定する目的で使用されるものではない。本明細書に引用された各特許および特許公報の開示全体は、あたかもそのような各特許または特許公報が参照により個々に本明細書に組み込まれているかのように、その全体が参照により本明細書に組み込まれる。本発明の概念の様々な特徴および/または潜在的な利点は、添付の特許請求の範囲に記載されている。

Claims (20)

  1. 患者の骨に対して外科手術インプラント装置を配置するための外科手術インプラント計画コンピュータによる方法であって、
    骨の初期画像を取得することと、
    前記外科手術インプラント装置上の一組の位置と、前記初期画像の前記骨に対する対応する一組の位置との間のマッピングを定義するデータを含む初期位置データ構造を取得することと、
    前記患者の前記骨の標的画像を取得することと、
    前記初期画像の前記骨の一部分の輪郭を変形する変形マトリクスを生成して、前記標的画像の前記骨の対応する部分の輪郭に適合するように定義された規則を満たすことと、
    前記変形マトリックスを前記初期位置データ構造に適用することに基づいて変形した位置データ構造を生成することと、
    前記変形した位置データ構造に基づいて決定された前記骨の前記標的画像上の位置にオーバーレイされた前記外科手術インプラント装置のグラフィカル表現を表示することと、を含む、方法。
  2. 前記外科手術インプラント装置が、外科手術ねじを備え、
    前記初期位置データ構造の前記データに基づいて、前記初期画像の前記骨に対する前記外科手術ねじの先端およびテール位置を決定することをさらに含む、請求項1に記載の方法。
  3. 前記変形マトリクスの前記生成が、
    前記初期画像の前記骨の前記部分の前記輪郭のサイズおよび/または回転角度を変更して、前記標的画像の前記骨の前記対応する部分の前記輪郭のサイズおよび/または回転角度に適合するように、前記定義された規則を満たすことを含む、請求項1に記載の方法。
  4. 前記初期画像の前記骨の複数の部分の輪郭の前記サイズおよび/または前記回転角度の前記変更を繰り返して、前記標的画像の前記骨の対応する複数の部分の輪郭の前記サイズおよび/または前記回転角度に適合するように前記定義された規則を満たすことをさらに含む、請求項3に記載の方法。
  5. 前記初期画像の前記骨の前記部分の前記輪郭の前記サイズおよび/または前記回転角度の前記変更が、
    前記初期画像の前記骨の前記部分の前記輪郭の前記サイズおよび/または前記回転角度の最適変形を適用して、前記標的画像の前記骨の前記対応する部分の前記輪郭の前記サイズおよび/または前記回転角度に適合するように、前記定義された規則を満たすことを含む、請求項3に記載の方法。
  6. 前記初期画像の前記骨の前記部分の前記輪郭の前記サイズおよび/または前記回転角度の前記変更が、
    前記初期画像の前記骨の前記部分の前記輪郭の前記サイズおよび/または前記回転角度のアフィン変形を適用して、前記標的画像の前記骨の前記対応する部分の前記輪郭の前記サイズおよび/または前記回転角度に適合するように、前記定義された規則を満たすことを含む、請求項3に記載の方法。
  7. 前記変形マトリクスを前記初期位置データ構造に適用することに基づいて、前記変形した位置データ構造の前記生成が、
    前記初期位置データ構造で定義された前記外科手術インプラント装置上の前記第一の位置の一つに対し、前記変形マトリクスを適用して、前記初期画像における前記骨に対して前記初期位置データ構造によって画定される対応する最初の一つの位置を、前記標的画像の前記骨に対して画定される変形した第一の位置に変形することと、
    前記変形した位置データ構造に、前記変形した第一の位置を、前記外科手術インプラント装置上の前記第一の前記位置と関連付けて保存することとを含む、請求項1に記載の方法。
  8. 前記初期画像の前記骨の別の部分の輪郭を変形する別の変形マトリクスを生成して、前記標的画像内の前記骨の対応する別の部分の輪郭に適合するように定義された規則を満たすことと、
    前記変形マトリクスを前記初期位置データ構造に適用することに基づいて、前記変形した位置データ構造の前記生成が、
    前記初期位置データ構造で定義された前記外科手術インプラント装置上の前記位置の第二の一つに対し、前記他の変形マトリクスを適用して、前記初期画像における前記骨に対して前記初期位置データ構造によって画定される対応する第二の一つの位置を、前記標的画像の前記骨に対して画定される変形した第二の位置に変形することと、
    前記変形した位置データ構造に、前記変形した第二の位置を、前記外科手術インプラント装置上の前記第二の前記位置と関連付けて保存することとをさらに含む、請求項7に記載の方法。
  9. 前記外科手術インプラント装置が、前記初期画像の前記骨に対して前記初期位置データ構造で定義される先端位置をおよびテール位置を有する外科手術ねじを備え、
    前記変形マトリクスを前記初期位置データ構造に適用することに基づいて、前記変形した位置データ構造の前記生成が、
    前記初期画像の前記骨の第一の部分の輪郭を変形する第一の変形マトリクスを生成して、前記標的画像の前記骨の対応する第一の部分の輪郭に適合するように前記定義された規則を満たすことと、
    前記初期位置データ構造で定義された前記外科手術ねじ上の前記先端位置に対し、前記第一の変形マトリクスを適用して、前記初期画像における前記骨に対して前記初期位置データ構造によって画定される対応する第一の位置を、前記標的画像の前記骨に対して画定される変形した第一の位置に変形することと、
    前記変形した位置データ構造に、前記変形した第一の位置を、前記外科手術ねじ上の前記先端位置と関連付けて保存することと、
    前記初期画像の前記骨の第二の部分の輪郭を変形する第二の変形マトリクスを生成して、前記標的画像の前記骨の対応する第二の部分の輪郭に適合するように定義された規則を満たすことと、
    前記初期位置データ構造で定義された前記外科手術ねじ上の前記テール位置に対し、前記第二の変形マトリクスを適用して、前記初期画像の前記骨に対して前記初期位置データ構造によって画定される対応する第二の位置を、前記標的画像の前記骨に対して画定される変形した第二の位置に変形することと、
    前記変形した位置データ構造に、前記変形した第二の位置を、前記外科手術ねじ上の前記テール位置と関連付けて保存することと、を含む、請求項7に記載の方法。
  10. 前記外科手術インプラント装置が、前記初期画像の前記骨に対して前記初期位置データ構造によって定義される先端位置をおよびテール位置を有する外科手術ねじを備え、
    前記変形マトリクスを前記初期位置データ構造に適用することに基づく前記変形した位置データ構造の前記生成が、前記変形マトリクスに基づいて、前記標的画像の前記骨に対して画定される前記外科手術ねじの前記先端位置とテール位置との間の距離をスケーリングすることを含む、請求項1に記載の外科手術インプラント計画コンピュータ。
  11. 前記変形マトリクスを前記初期位置データ構造に適用することに基づいて、前記変形した位置データ構造の前記生成が、
    前記外科手術ねじの前記先端位置と前記テール位置との間の前記距離の前記スケーリングに基づいて、前記外科手術ねじの直径をスケールすることをさらに含む、請求項10に記載の方法。
  12. 前記変形した位置データ構造を手術用ロボットシステムに提供して、前記変形した位置データ構造のデータに基づいて、前記患者の前記骨上の位置に対して前記手術用ロボットシステムの外科手術エンドエフェクタの位置決めを制御することをさらに含む、請求項1に記載の方法。
  13. 前記骨の前記標的画像の基準座標系における前記変形した位置データ構造によって画定された位置を、前記外科手術エンドエフェクタの別の基準座標系に変形することと、
    前記外科手術エンドエフェクタの前記手術用ロボットシステムによって移動を制御して、前記変形した位置に基づいて前記患者の前記骨の前記位置に対して前記外科手術エンドエフェクタを位置決めし、前記患者の前記骨における前記外科手術インプラント装置の移植を容易にすることをさらに含む、請求項12に記載の方法。
  14. 前記変形した位置データ構造および前記標的画像の前記骨の隣接した表面によって画定される前記外科手術インプラント装置上の位置間の距離を決定することと、
    前記決定された距離に応答し、前記外科手術インプラント装置の前記グラフィカル表現が、前記骨の前記標的画像上のオーバーレイとして表示される場所を調節することと、をさらに含む、請求項1に記載の方法。
  15. 前記標的画像の前記骨の表面に対する前記外科手術インプラント装置の貫通の深さおよび前記貫通の角度を定義する一連の規則を取得することと、
    前記一組の規則に応答し、前記外科手術インプラント装置の前記グラフィカル表現が、前記骨の前記標的画像上のオーバーレイとして表示される場所を調節することと、をさらに含む、請求項1に記載の方法。
  16. 外科手術インプラント計画コンピュータであって、
    少なくとも一つのネットワークサーバに接続された少なくとも一つのネットワークインターフェースと、
    ディスプレイ装置と、
    少なくとも一つのネットワークインターフェースおよび前記ディスプレイ装置に接続された少なくとも一つのプロセッサと、
    少なくとも一つのメモリを備え、前記少なくとも一つのプロセッサによって実行されるプログラム命令を記憶して、動作を実行する少なくとも一つのメモリは、
    前記少なくとも一つのサーバから前記少なくとも一つのネットワークインターフェースを介して骨の初期画像を取得することと、
    前記少なくとも一つのサーバから前記少なくとも一つのネットワークインターフェースを介して、前記外科手術インプラント装置上の一組の位置と、前記初期画像の前記骨に対する対応する一組の位置との間のマッピングを定義するデータを含む初期位置データ構造を取得することと、
    前記少なくとも一つのサーバから前記少なくとも一つのネットワークインターフェースを介して前記患者の前記骨の標的画像を取得することと、
    前記初期画像の前記骨の一部分の輪郭を変形する変形マトリクスを生成して、前記標的画像の前記骨の対応する部分の輪郭に適合するように定義された規則を満たすことと、
    前記変形マトリックスを前記初期位置データ構造に適用することに基づいて変形した位置データ構造を生成することと、
    前記変形した位置データ構造に基づいて決定された前記骨の前記標的画像上の位置にオーバーレイされた前記外科手術インプラント装置のグラフィカル表現を前記ディスプレイ装置上に表示することと、を含む、外科手術インプラント計画コンピュータ。
  17. 前記外科手術インプラント装置が、前記初期画像の前記骨に対して前記初期位置データ構造によって定義される先端位置をおよびテール位置を有する外科手術ねじを備え、
    前記変形マトリクスを前記初期位置データ構造に適用することに基づく前記変形した位置データ構造の前記生成が、前記変形マトリクスに基づいて、前記標的画像の前記骨に対して画定される前記外科手術ねじの前記先端位置とテール位置との間の距離をスケーリングすることを含む、請求項16に記載の外科手術インプラント計画コンピュータ。
  18. 前記変形した位置データ構造を、少なくとも一つのネットワークインターフェースを介して、手術用ロボットシステムに提供して、前記変形した位置データ構造のデータに基づいて、前記患者の前記骨上の位置に対して前記手術用ロボットシステムの外科手術エンドエフェクタの位置決めを制御することをさらに含む、請求項16に記載の外科手術インプラント計画コンピュータ。
  19. 外科手術システムであって、
    外科手術インプラント計画コンピュータであって、
    少なくとも一つのネットワークサーバに接続された少なくとも一つのネットワークインターフェースと、
    ディスプレイ装置と、
    少なくとも一つのネットワークインターフェースおよび前記ディスプレイ装置に接続された少なくとも一つのプロセッサと、
    少なくとも一つのメモリを備え、前記少なくとも一つのプロセッサによって実行されるプログラム命令を記憶して、動作を実行する少なくとも一つのメモリは、
    前記少なくとも一つのサーバから前記少なくとも一つのネットワークインターフェースを介して骨の初期画像を取得することと、
    前記少なくとも一つのサーバから前記少なくとも一つのネットワークインターフェースを介して、前記外科手術インプラント装置上の一組の位置と、前記初期画像の前記骨に対する対応する一組の位置との間のマッピングを定義するデータを含む初期位置データ構造を取得することと、
    前記少なくとも一つのサーバから前記少なくとも一つのネットワークインターフェースを介して前記患者の前記骨の標的画像を取得することと、
    前記初期画像の前記骨の一部分の輪郭を変形する変形マトリクスを生成して、前記標的画像の前記骨の対応する部分の輪郭に適合するように定義された規則を満たすことと、
    前記変形マトリックスを前記初期位置データ構造に適用することに基づいて変形した位置データ構造を生成することと、
    前記変形した位置データ構造に基づいて決定された前記骨の前記標的画像上の位置にオーバーレイされた前記外科手術インプラント装置のグラフィカル表現を前記ディスプレイ装置上に表示することと、を含み、
    手術用ロボットシステムであって、
    外科手術エンドエフェクタを位置付けるように構成されたロボットアームと、
    前記ロボットアームに接続されたコントローラであって、動作を実行するように構成された前記コントローラが、
    前記骨の前記標的画像の基準座標系における前記変形した位置データ構造によって画定された位置を、前記外科手術エンドエフェクタの別の基準座標系に変形することと、
    前記外科手術エンドエフェクタの移動を制御して、前記変形した位置に基づいて前記患者の前記骨の位置に対して前記外科手術エンドエフェクタを位置決めし、前記患者の前記骨における前記外科手術インプラント装置の移植を容易にすることを含む、コントローラを備える、手術用ロボットシステムと、を備える、外科システム。
  20. 前記外科手術インプラント装置が、前記初期画像の前記骨に対して前記初期位置データ構造によって定義される先端位置をおよびテール位置を有する外科手術ねじを備え、
    前記変形マトリクスを前記初期位置データ構造に適用することに基づく前記変形した位置データ構造の生成する前記動作が、前記変形マトリクスに基づいて、前記標的画像の前記骨に対して画定される前記外科手術ねじの前記先端位置とテール位置との間の距離をスケーリングすることを含み、
    前記外科手術エンドエフェクタの移動を制御する前記動作が、前記変形した位置に基づいて前記患者の前記骨の位置に対して前記外科手術エンドエフェクタを位置決めし、前記患者の前記骨における前記外科手術インプラント装置の移植を容易にする、請求項19に記載の外科手術システム。
JP2019088923A 2018-05-10 2019-05-09 外科手術のロボットガイダンスに関連するシステムおよび方法 Active JP6894466B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/975,846 2018-05-10
US15/975,846 US11317971B2 (en) 2012-06-21 2018-05-10 Systems and methods related to robotic guidance in surgery

Publications (2)

Publication Number Publication Date
JP2019202130A true JP2019202130A (ja) 2019-11-28
JP6894466B2 JP6894466B2 (ja) 2021-06-30

Family

ID=66429230

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019088923A Active JP6894466B2 (ja) 2018-05-10 2019-05-09 外科手術のロボットガイダンスに関連するシステムおよび方法

Country Status (3)

Country Link
EP (1) EP3566669A1 (ja)
JP (1) JP6894466B2 (ja)
CN (1) CN110464457B (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021126521A (ja) * 2020-02-17 2021-09-02 グローバス メディカル インコーポレイティッド 患者の骨を画像化するための画像化デバイスの最適な3次元位置および配向を判定するシステムおよび方法

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020115152A1 (en) 2018-12-05 2020-06-11 Medos International Sarl Surgical navigation system providing attachment metrics
CN110946652B (zh) * 2019-11-29 2021-11-12 北京工业大学 一种骨螺钉的钉道规划方法和装置
EP4011311A1 (en) * 2020-12-14 2022-06-15 Incremed AG Method for planning the nail path of a pedicle bone screw
CN113781496B (zh) * 2021-08-06 2024-02-27 北京天智航医疗科技股份有限公司 基于cbct脊椎图像的椎弓根螺钉通道自动规划系统和方法
CN115115813B (zh) * 2022-03-03 2023-08-22 中国人民解放军总医院第四医学中心 人体骨骼标准体位的智能构建方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013114823A1 (ja) * 2012-01-31 2013-08-08 富士フイルム株式会社 手術支援装置、手術支援方法および手術支援プログラム
JP2014036700A (ja) * 2012-08-10 2014-02-27 Arthro Design Kk 関節置換術用ナビゲーション装置,そのプログラム,手術支援装置
JP2016043211A (ja) * 2014-08-27 2016-04-04 富士フイルム株式会社 画像位置合せ装置、方法およびプログラム
WO2017186799A1 (en) * 2016-04-28 2017-11-02 Koninklijke Philips N.V. Determining an optimal placement of a pedicle screw
JP2018011938A (ja) * 2016-05-18 2018-01-25 グローバス メディカル インコーポレイティッド 追跡マーカを用いた外科用ロボット自動化

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002000093A2 (en) * 2000-06-27 2002-01-03 Insightec-Image Guided Treatment Ltd. Registration of target object images to stored image data
US20030011624A1 (en) * 2001-07-13 2003-01-16 Randy Ellis Deformable transformations for interventional guidance
US8353933B2 (en) 2007-04-17 2013-01-15 Gmedelaware 2 Llc Facet joint replacement
GB0504172D0 (en) * 2005-03-01 2005-04-06 King S College London Surgical planning
US7674296B2 (en) 2005-04-21 2010-03-09 Globus Medical, Inc. Expandable vertebral prosthesis
US8992425B2 (en) 2006-06-06 2015-03-31 Globus Medical, Inc. Surgical retractor system
US8926664B1 (en) 2006-11-07 2015-01-06 Globus Medical, Inc. Laminoplasty fixaction devices
US8221430B2 (en) * 2007-12-18 2012-07-17 Otismed Corporation System and method for manufacturing arthroplasty jigs
US8328872B2 (en) 2008-09-02 2012-12-11 Globus Medical, Inc. Intervertebral fusion implant
US8545566B2 (en) 2008-10-13 2013-10-01 Globus Medical, Inc. Articulating spacer
US8721723B2 (en) 2009-01-12 2014-05-13 Globus Medical, Inc. Expandable vertebral prosthesis
EP2396741B1 (en) * 2009-02-13 2019-05-08 Biomet Manufacturing, LLC Method and apparatus for manufacturing an implant
US8882803B2 (en) 2009-04-01 2014-11-11 Globus Medical, Inc. Orthopedic clamp and extension rod
US9402656B2 (en) 2009-09-11 2016-08-02 Globus Medical, Inc. Spinous process fusion devices
US8709086B2 (en) 2009-10-15 2014-04-29 Globus Medical, Inc. Expandable fusion device and method of installation thereof
US8062375B2 (en) 2009-10-15 2011-11-22 Globus Medical, Inc. Expandable fusion device and method of installation thereof
US8685098B2 (en) 2010-06-25 2014-04-01 Globus Medical, Inc. Expandable fusion device and method of installation thereof
US10588647B2 (en) * 2010-03-01 2020-03-17 Stryker European Holdings I, Llc Computer assisted surgery system
US8968363B2 (en) 2010-03-11 2015-03-03 Globus Medical, Inc. Tissue retractor and methods of use
US8845734B2 (en) 2010-09-03 2014-09-30 Globus Medical, Inc. Expandable fusion device and method of installation thereof
US8491659B2 (en) 2010-09-03 2013-07-23 Globus Medical, Inc. Expandable fusion device and method of installation thereof
JP2015528713A (ja) 2012-06-21 2015-10-01 グローバス メディカル インコーポレイティッド 手術ロボットプラットフォーム
US11395706B2 (en) * 2012-06-21 2022-07-26 Globus Medical Inc. Surgical robot platform
US9826981B2 (en) * 2013-03-13 2017-11-28 Biomet Manufacturing, Llc Tangential fit of patient-specific guides
US9456906B2 (en) 2013-03-15 2016-10-04 Globus Medical, Inc. Expandable intervertebral implant
US9440076B2 (en) 2013-03-15 2016-09-13 Globus Medical, Inc. Spinal cord stimulator system
JP6619414B2 (ja) * 2014-07-07 2019-12-11 スミス アンド ネフュー インコーポレイテッド 位置決めの精度
EP3229722B1 (en) * 2014-12-08 2023-03-22 Think Surgical, Inc. Implant based planning, digitizing, and registration for total joint arthroplasty
US10070928B2 (en) * 2015-07-01 2018-09-11 Mako Surgical Corp. Implant placement planning
WO2017019382A1 (en) * 2015-07-24 2017-02-02 Zimmer, Inc. System and method to locate soft tissue for preoperative planning
CN105411679B (zh) * 2015-11-23 2017-07-14 中国科学院深圳先进技术研究院 一种穿刺规划路径纠正方法及装置
CN109310476B (zh) * 2016-03-12 2020-04-03 P·K·朗 用于手术的装置与方法
US20170312032A1 (en) * 2016-04-27 2017-11-02 Arthrology Consulting, Llc Method for augmenting a surgical field with virtual guidance content
CN106691600A (zh) * 2016-11-21 2017-05-24 胡磊 一种脊柱椎弓根钉植入定位装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013114823A1 (ja) * 2012-01-31 2013-08-08 富士フイルム株式会社 手術支援装置、手術支援方法および手術支援プログラム
JP2014036700A (ja) * 2012-08-10 2014-02-27 Arthro Design Kk 関節置換術用ナビゲーション装置,そのプログラム,手術支援装置
JP2016043211A (ja) * 2014-08-27 2016-04-04 富士フイルム株式会社 画像位置合せ装置、方法およびプログラム
WO2017186799A1 (en) * 2016-04-28 2017-11-02 Koninklijke Philips N.V. Determining an optimal placement of a pedicle screw
JP2018011938A (ja) * 2016-05-18 2018-01-25 グローバス メディカル インコーポレイティッド 追跡マーカを用いた外科用ロボット自動化

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021126521A (ja) * 2020-02-17 2021-09-02 グローバス メディカル インコーポレイティッド 患者の骨を画像化するための画像化デバイスの最適な3次元位置および配向を判定するシステムおよび方法

Also Published As

Publication number Publication date
EP3566669A1 (en) 2019-11-13
JP6894466B2 (ja) 2021-06-30
CN110464457A (zh) 2019-11-19
CN110464457B (zh) 2023-04-18

Similar Documents

Publication Publication Date Title
US11819283B2 (en) Systems and methods related to robotic guidance in surgery
JP6840815B2 (ja) 追跡マーカーを備えた手術用ロボットオートメーション
US20210282874A1 (en) Surgical robotic automation with tracking markers
US11864839B2 (en) Methods of adjusting a virtual implant and related surgical navigation systems
US20190029765A1 (en) Surgical robotic systems providing transfer of registration and related methods and computer program products
JP6894466B2 (ja) 外科手術のロボットガイダンスに関連するシステムおよび方法
JP6936282B2 (ja) ロボットアームの衝突を回避するための手術用ロボットの制御
EP3636195B1 (en) Surgical robotic automation with tracking markers
CN110013313B (zh) 具有目标轨迹偏差监视的外科手术机器人系统及相关方法
JP6970154B2 (ja) 追跡マーカーを備えた手術用ロボットオートメーション
CN111317572A (zh) 具有跟踪标记的手术机器人自动化
US11717350B2 (en) Methods for robotic assistance and navigation in spinal surgery and related systems
JP7082090B2 (ja) 仮想インプラントを調整する方法および関連する手術用ナビゲーションシステム
JP6979049B2 (ja) 自然基準を使用した共登録を提供するロボットシステムおよび関連方法
EP3586785A1 (en) Surgical robotic automation with tracking markers
EP3636394A1 (en) Robotic system for spinal fixation elements registration with tracking markers
JP7258107B2 (ja) 3d画像化スピン中に撮影された2d画像を用いた自動セグメント化
EP3865069B1 (en) System and method of determining optimal 3-dimensional position and orientation of imaging device for imaging patient bones
JP2021041166A (ja) 追跡マーカを用いる外科用ロボット自動化

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190509

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200306

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200310

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200610

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210129

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210525

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210603

R150 Certificate of patent or registration of utility model

Ref document number: 6894466

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150