JP2019122871A - 不整列時のマスターとスレーブと間の向きマッピング - Google Patents

不整列時のマスターとスレーブと間の向きマッピング Download PDF

Info

Publication number
JP2019122871A
JP2019122871A JP2019090638A JP2019090638A JP2019122871A JP 2019122871 A JP2019122871 A JP 2019122871A JP 2019090638 A JP2019090638 A JP 2019090638A JP 2019090638 A JP2019090638 A JP 2019090638A JP 2019122871 A JP2019122871 A JP 2019122871A
Authority
JP
Japan
Prior art keywords
orientation
slave
master
surgical instrument
master tool
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019090638A
Other languages
English (en)
Other versions
JP6843180B2 (ja
Inventor
リャオ,シェン−シン
Hsien-Hsin Liao
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intuitive Surgical Operations Inc
Original Assignee
Intuitive Surgical Operations Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intuitive Surgical Operations Inc filed Critical Intuitive Surgical Operations Inc
Publication of JP2019122871A publication Critical patent/JP2019122871A/ja
Application granted granted Critical
Publication of JP6843180B2 publication Critical patent/JP6843180B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B34/37Master-slave robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B34/35Surgical robots for telesurgery
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/70Manipulators specially adapted for use in surgery
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361Image-producing devices, e.g. surgical cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J3/00Manipulators of master-slave type, i.e. both controlling unit and controlled unit perform corresponding spatial movements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1612Programme controls characterised by the hand, wrist, grip control
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1679Programme controls characterised by the tasks executed
    • B25J9/1689Teleoperation
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00681Aspects not otherwise provided for
    • A61B2017/00725Calibration or performance testing
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B2034/301Surgical robots for introducing or steering flexible instruments inserted into the body, e.g. catheters or endoscopes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/70Manipulators specially adapted for use in surgery
    • A61B34/74Manipulators with manual electric input means
    • A61B2034/742Joysticks
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • A61B2090/367Correlation of different images or relation of image positions in respect to the body creating a 3D dataset from 2D images using position information
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/40Robotics, robotics mapping to robotics vision
    • G05B2219/40405Master slave position control
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/45Nc applications
    • G05B2219/45117Medical, radio surgery manipulator
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/45Nc applications
    • G05B2219/45123Electrogoniometer, neuronavigator, medical robot used by surgeon to operate

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Surgery (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Robotics (AREA)
  • General Health & Medical Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Animal Behavior & Ethology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Pathology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Orthopedic Medicine & Surgery (AREA)
  • Manipulator (AREA)
  • Ophthalmology & Optometry (AREA)

Abstract

【課題】従来技術の問題を解決する。【解決手段】コントローラが、マスター−スレーブ整列プロセスの完了後に、マスターツールグリップの向き及びスレーブ手術器具先端の向きを格納し、追従に入る。追従中、コントローラは、マスターツールグリップからのスレーブ手術器具先端の各々の命令される動きを処理して、追従に入る前のマスターツールグリップとスレーブ手術器具先端との間のあらゆる整列誤差を補償する。この処理の結果は、スレーブ手術器具先端の動きが、マスターツールグリップとスレーブ手術器具先端との間の初期的なスウーピング向き不整列にも拘わらず、マスターツールグリップの動きに直観的に対応することである。【選択図】図1

Description

(関連出願の参照)
この出願は、2015年6月10日に出願された「MASTER-TO-SLAVE ORIENTATION MAPPING WHEN MISALIGNED」という名称の米国仮特許出願第62/173,844号の優先権及び利益を主張し、その全文を本明細書中に参照として援用する。
この発明の態様(aspects)は、手術システムに関し、より具体的には、手術システム中のマスターツールグリップの向き及びスレーブ手術器具先端の向きが初期的に整列させられていないときに、それらの向きを制御することに関する。
最小侵襲的な遠隔操作ロボットシステムのような手術システムは、身体に対する外傷の減少、素早い回復、より短い入院のような、多くの利益を患者にもたらす。典型的には、手術システムにおいて、外科医は、マスターツールと呼ぶことがあるマスターツールマニピュレータを用いて、スレーブ手術器具と呼ぶ手術器具の動きを制御する。
1つの遠隔操作手術システムでは、マスターツールマニピュレータのマスターツールグリップが、スレーブ手術器具を制御するために人間工学的であり且つ直感的であるよう特別に設計される。外科医は自分の人差し指及び親指を用いて特定の方法でマスターツールグリップを保持するので、標的化(targeting)及び把持(grasping)は、直感的な指向動作(pointing motion)及びピンチ動作(pinching motion)を含む。
スレーブ手術器具の直感的な制御を可能にするために、マスターツールグリップは、手術システム中の立体視ビューアのビューフレーム内でスレーブ手術器具先端と向きが整列させられるのが理想的である。スレーブ手術器具先端の動きは、理想的には、遠隔操作を介してマスターツールの動きに追従し、運動の向き及び絶対的な向きの両方において一貫する、即ち、手術器具先端の動きは、マスターツールグリップの動きに追従する。マスターツールとスレーブ手術器具先端との間で向き整列が達成されないならば、スレーブ手術器具先端は、外科医がマスターツールで指し示すのと同じ絶対的な向きを指すことも、外科医がマスターツールで指し示すのと同じ軸に沿ってロールすることもない。
1つの態様において、マスターツールマニピュレータは、ジンバルアセンブリ内のモータを用いて、外科医の視点(eye view)座標中のマスターツールグリップの配向軸をカメラビュー座標中の関連するスレーブ手術器具先端と能動的に整列させる。この整列は、追従(following)がマスターツールの動きとスレーブ手術器具の動きとの間で噛み合わせられる前に自動的に起こる。
具体的には、従来的な遠隔操作手術システムで追従に入る前に、システムは、カメラフレーム内のスレーブ手術器具先端の向きを、アイフレーム(eye frame)と呼ぶことがある視点フレーム(eye-view frame)内のマスターツールグリップの向きと整列させようとする。典型的には、遠隔操作手術システムは、(ツール交換、カメラクラッチ、スレーブクラッチ、4アームシステムにおけるアームの交換等の後に)マスターツールグリップとスレーブ手術器具先端との間の向きの整列が損なわれることがあるモードから移行するときにはいつでも、マスター−スレーブ整列を行う。
マスター−スレーブ整列プロセスでは、マスターツールのグリップのx−y−z位置を変更せずに、視点フレーム内のマスターツールグリップの向きをカメラビューフレーム内のスレーブ手術器具先端の向きに一致させるよう、マスター手首ジョイント角度のセットが計算される。次に、マスター手首ジョイントは、モータを用いて計算される角度に一致するように命令される。
これはマスターツールグリップの向きとスレーブ手術器具先端の向きとの整列をもたらすはずである。しかしながら、モータがマスターツールにおいて手首ジョイントを位置決めしている間に、外科医がマスターツールグリップを強く把持し過ぎるならば、マスターツールグリップとスレーブ手術器具チップとの間に変位及び向き誤差の両方が存在することがある。
マスターツールグリップにおける手首ジョイントが、マスターツールグリップの向きとスレーブ手術器具先端の向きとを整列させるように命令された後に、遠隔操作手術システムは、使用者が追従に入るのを可能にする前に、マスターの向きとスレーブの向きとが一致していることを再度確認する。向きが一致していないならば、警告メッセージが表示され、マスター−スレーブ整列が再度試みられる。このプロセスは、マスターツールグリップの向きとスレーブ手術器具先端の向きの整列が受け入れ可能な許容範囲内になるまで、例えば、マスターとスレーブとの間の向き不整列が10度未満になるまで、繰り返される。
マスターツールが回転させられるときに、スレーブ手術先端が同じように回転していると外科医が典型的に知覚するよう、向き不整列は小さな角度偏差に制限される。(図4C及び4D、並びに、向き不整列が、許容される小さな角度偏差よりも大きい場合に、マスターツールグリップが回転されるときにスレーブ手術器具先端が予期されない方法で回転することを実証する、以下の関連する議論を参照のこと。)
マスターツールグリップの向きとスレーブ手術器具先端の向きとの間の整列の誤差が、許容される小さな位置不整列よりも小さいとき、マスターツールグリップ及びスレーブ手術器具先端は整列させられていると考えられ、遠隔操作手術システムは追従に入る。マスターツールグリップ及びスレーブ手術器具先端をそのような小さな向き不整列で整列させる必要は、しばしば、外科医が追従に入るのを遅くする。
手術システムは、スレーブ手術器具先端を有するスレーブ手術器具と、マスターツールグリップを含むマスターツールマニピュレータとを含む。マスターツールグリップは、コントローラによってスレーブ手術器具先端に連結される。スレーブ手術器具先端とマスターツールグリップとの間で必要とされる向き整列は緩和されるので、コントローラは、通常、マスターツールグリップとスレーブ手術器具先端との間の如何なる向き不整列にも関係なく、スレーブ手術器具先端の動きがマスターツールグリップの動きに追従する追従に入る。
よって、小さな向き不整列を達成するマスター−スレーブ整列プロセスの従来技術の複数の繰返しは除去されるか、或いは有意に減少させられる。更に、追従に入る直前のマスターツールグリップとスレーブ手術器具先端との間の如何なるスウーピング向き不整列にも拘わらず、スレーブ手術器具先端の動きはマスターツールグリップの動きに直観的に追従し、追従中にマスターツールグリップの回転と関連付けられる予想外の動きはない。
1つの態様において、コントローラは、マスターツールマニピュレータから第1の命令を受信して、スレーブ手術器具先端の所望の向きを含む第2の命令をスレーブ手術器具に送信するように、構成される。コントローラは、マスターツールグリップの向きを用いてスレーブ手術器具先端の所望の向きを生成するように更に構成される。マスターツールグリップの向きは、第1の命令に含められる。
コントローラによって生成されるスレーブ手術器具先端の所望の向きは、マスターツールグリップとスレーブ手術器具チップとの間にスウーピング向き不整合があるときでさえも、マスターツールグリップとスレーブ手術器具先端との間で同じ知覚される回転を維持する。ここで、同じ知覚される回転は、マスターツールグリップの回転がマスターツールグリップの本体固定軸(body-fixed axis)の周りにあると知覚されるならば、スレーブ手術器具の回転がスレーブ手術器具先端の対応する本体固定軸の周りにあると知覚されることを意味する。例えば、マスターツールグリップの回転がマスターツールグリップの本体固定x軸の周りにあると知覚されるならば、スレーブ手術器具の回転はスレーブ手術器具先端の対応する本体固定x軸の周りにあると知覚され、或いはマスターツールグリップの回転がマスターツールグリップの本体固定y軸の周りにあると知覚されるならば、スレーブ手術器具の回転はスレーブ手術器具先端の対応する本体固定y軸の周りにあると知覚され、或いはマスターツールグリップの回転がマスターツールグリップの本体固定z軸の周りにあると知覚されるならば、スレーブ手術器具の回転はスレーブ手術器具先端の対応する本体固定z軸の周りにあると知覚される。
これはアイフレーム内の空間固定軸についてのマスターの回転がカメラフレーム内の同じ空間固定軸についてのスレーブ回転をもたらす従来的なシステムと対照的である。追従に入るときにマスターツールグリップとスレーブ手術器具先端との間の向きオフセットが大きいことが許可される場合、マスターツールグリップの指向方向についてのマスターグリップの回転は、スレーブビューフレームに投影されるマスター指向方向についての円形のスレーブ手術器具先端の動きをもたらし得る。よって、従来的なシステムにおいて、マスターツールグリップ及びスレーブ手術器具チップは、スウーピング向き不整列のために同じ知覚された動きを有さなかった。
1つの態様において、コントローラは、メモリと、方向制御モジュールとを含む。メモリは、スレーブ手術器具先端の基本向きをカメラフレーム内に格納し、アイフレームの基本向きをマスターフレーム内に格納するように、構成される。コントローラは、マスターツールマニピュレータから第1の命令を受信するように構成される。マスターツールマニピュレータからの第1の命令は、アイフレーム内のマスターツールグリップの現在の向きを含む。コントローラは、スレーブ手術器具の所望の向きを含む第2の命令をスレーブ手術器具に送信するように更に構成される。
コントローラを1つのユニット又は複数の異なるユニットで作製し得ることが理解されるべきである。コントローラが異なるユニットの間で分割されるとき、それらのユニットは1つの場所に集中されてよく、或いは手術システムに亘って分散させられてよい。
向き制御モジュールは、アイフレーム内のマスターツールグリップの現在の向きを受信して、スレーブ手術器具の所望の向きを生成するように構成される。また、向き制御モジュールは、マスターツールグリップの格納された基本向き及びスレーブ手術器具先端の格納された基本向きを取り出すようにも構成される。
向き制御モジュールは、カメラフレーム内のスレーブ手術器具先端の格納された基本向き及び相対的な回転行列に基づきカメラフレーム内のスレーブ手術器具先端の所望の向きを生成するように更に構成される。相対的な回転行列は、マスターフレーム内のアイフレームの相対的な回転を表す。向き制御モジュールは、スレーブ手術器具の所望の向きを生成するときの、マスターツールグリップとスレーブ手術器具先端との間の如何なるスウーピング向き不整列をも補償する。よって、スレーブ手術器具先端の動きは、如何なる予想外の動きも伴わずに、マスターツールグリップの動きに直観的に追従する。
本明細書において、スウーピング向き不整列は、従来的なシステムにおいて、マスターツールグリップがマスターツールグリップの対応する軸について回転させられるときに手術器具先端についての知覚可能な円内で動く手術器具の先端をもたらす、向き不整列である。従来的なシステムは、スレーブ手術器具先端の所望の向きを、マスターツールグリップの現在の向きと、カメラ基準フレーム内のスレーブ手術器具先端の基本向きと、アイフレーム内のマスターツールグリップの基本向きの転置の積として定義することによって特徴付けられる。
1つの態様において、相対的な回転行列は、アイフレーム内のマスターツールグリップの現在の向きと、マスターフレーム内のアイフレームの格納された向きとの組み合わせである。
コントローラは、マスター−スレーブ整列モジュールも含む。マスター−スレーブ整列モジュールは、マスターツールに命令を送信して、マスターツールグリップを移動させて、アイフレーム内のマスターツールグリップの向きをカメラフレーム内のスレーブ手術用器具先端の向きと整列させるように、構成される。また、マスターツールがマスターツールグリップを移動させた後、マスター−スレーブ整列モジュールは、アイフレーム内のマスターツールグリップの向きとカメラフレーム内のスレーブ手術器具先端の向きとの間の向き整列誤差を決定するように構成される。更に、マスター−スレーブ整列モジュールは、向き整列誤差が最大の許容されるスウーピング向き不整列以下であるか否かを決定するように構成される。1つの態様において、最大の許容されるスウーピング向き不整列は限定的であるので、例えば、ピッチ及びヨーが混乱されないように、回転がどの軸の周りであるかについての混乱がない。一例として、最大の許容されるスウーピング向き不整列は、1つの態様において、50度である。
1つの態様において、マスター−スレーブ整列モジュールは、向き整列誤差が最大の許容されるスウーピング向き整列誤差よりも大きい場合に限り、命令を送信すること、向き整列誤差を決定すること、向き整列誤差が最大の許容されるスウーピング向き不整列よりも小さいか否かを決定することを繰り返すように更に構成される。ここで、最大の許容されるスウーピング向き整列誤差は、最大の許容されるスウーピング向き不整列の異なる言い方である。
1つの態様において、コントローラは、マスター−スレーブ整列モジュールに連結される記憶装置モジュールも含む。記憶装置モジュールは、向き整列誤差が最大の大きさの整列誤差よりも小さい場合にマスターツールグリップを移動させた後に、アイフレーム内のマスターツールグリップの向き及びカメラフレーム内のスレーブ手術器具先端の向きを受信するように構成される。記憶装置モジュールは、メモリ内に、アイフレーム内のマスターツールグリップの向きをマスターフレーム内のアイフレームの基本向きとしてメモリ内に格納し、カメラ基準内のスレーブ手術器具先端の向きをカメラ基準内のスレーブ手術器具先端の基本向きとして格納するようにも、構成される。
1つの態様において、手術システムは、遠位端を有する内視鏡を含む。カメラフレームは、内視鏡の遠位端に対して定められる。手術システムは、ビューアとマスターツールマニピュレータとを含む外科医コンソールも含む。
手術システムにおけるスレーブマニピュレータのマスターツールグリップの整列との手術システムにおけるスレーブ手術器具のスレーブ手術器具先端の整列を制御する方法は、コントローラによって、アイフレーム内の向きを用いてスレーブ手術器具先端の所望の向きを生成することを含み、スレーブ手術器具先端の所望の向きは、マスターツールグリップとスレーブ手術器具先端との間のスウーピング向き不整列を伴って、マスターツールグリップとスレーブ外科用器具先端との間の同じ知覚される回転を維持する。
1つの態様において、生成することは、コントローラによって、アイフレーム内のマスターツールグリップの現在の向き及び回転オフセットに基づきカメラフレーム内のスレーブ手術器具先端の所望の向きを生成することを含み、回転オフセットは、カメラフレーム内のスレーブ手術器具先端の格納された向きとマスターフレーム内のアイフレームの格納された向きとの組み合わせである。方法は、コントローラによって、スレーブ手術器具先端の所望の向きを含む命令をスレーブ手術器具に送信することを更に含み、命令に応答してスレーブ手術器具によってスレーブ手術器具先端を所望の向きに移動させることを更に含む。
1つの態様において、生成することの前に、方法は、マスターツールマニピュレータに命令を送信して、マスターツールグリップを移動させて、アイフレーム内のマスターツールグリップの向きをカメラフレーム内のスレーブ手術器具先端の向きと整列させる。マスターツールマニピュレータがマスターツールグリップを移動させた後、方法は、アイフレーム内のマスターツールグリップの向きとカメラフレーム内のスレーブ手術器具先端の向きとの間の向き整列誤差を決定する。次に、方法は、向き整列誤差が最大の許容されるスウーピング向き不整列以下であるか否かを決定する。
他の態様では、コンピュータ支援医療システムが、マスターツールグリップと、スレーブ手術器具先端と、コントローラと、メモリとを含む。マスターフレームのロール軸は、マスターツールグリップの長さに沿って定められる。マスターフレームは、マスターツールグリップの向きと関連付けられ、マスターフレームは、本体固定マスターフレーム(body-fixed master frame)である。
スレーブフレームのロール軸は、スレーブ手術器具先端の長さに沿って定められる。スレーブフレームは、スレーブ手術器具先端の向きと関連付けられ、スレーブフレームは、本体固定スレーブフレームであり、
メモリは、コントローラに命令して行為を実行させる非一時的指令を含み、それらの行為は、マスターツールグリップのロールに対応する入力を受信するステップと、入力に応答して、スレーブ手術器具先端をロールさせる命令を生成するステップであって、その命令は、スレーブ手術器具先端を本体固定スレーブフレームのロール軸に対して直交する任意の軸の周りで回転させることなく、スレーブ手術器具先端を本体固定スレーブフレームのロール軸の周りで回転させることであるステップと、その命令に応答して、スレーブ手術用器具先端を本体固定スレーブフレームのロール軸の周りに回転させるステップとを含む。
アイフレーム内のマスターフレームのロール軸とカメラフレーム内のスレーブフレームのロール軸との間に向き不整列が存在するコンピュータ支援医療システムの状態のための方法であって、マスターフレームは、マスターマニピュレータのマスターツールグリップと関連付けられ、スレーブフレームは、スレーブ手術器具先端と関連付けられ、マスターツールグリップのロール軸は、マスターツールグリップの長さに沿って定められ、スレーブ手術器具先端のロール軸は、スレーブ手術器具先端の長さに沿って定められ、方法は、マスターフレームのロール軸の周りのマスターツールグリップのロールに対応する入力を受信することを含み、マスターフレームは、本体固定マスターフレームである。方法は、その入力に応答して、スレーブ手術器具先端をロールさせる命令を生成することを含み、その命令は、スレーブ手術器具先端を本体固定スレーブフレームのロール軸に対して直交する任意の軸の周りで回転させることなく、スレーブ手術器具先端を本体固定スレーブフレームのロール軸の周りで回転させることであり、方法は、その命令に応答して、スレーブ手術器具先端を本体固定スレーブフレームのロール軸の周りで回転させることを含む。
向き制御モジュールを含む追従モジュールを備える遠隔操作サーボコントローラを含む手術システムの概略図である。
図1の外科医コンソールの部分の概略図である。
1つの態様において図1のコントローラによって実施されるプロセスを例示するプロセスフロー図である。
図1のコントローラが用いる様々なフレームを例示している。 図1のコントローラが用いる様々なフレームを例示している。 図1のコントローラが用いる様々なフレームを例示している。
マスターとスレーブとの間に不整列があるときの従来的なシステムの向きの相対的制御の問題を例示している。 マスターとスレーブとの間に不整列があるときの従来的なシステムの向きの相対的制御の問題を例示している。 マスターとスレーブとの間に不整列があるときの従来的なシステムの向きの相対的制御の問題を例示している。 マスターとスレーブとの間に不整列があるときの従来的なシステムの向きの相対的制御の問題を例示している。
不整列があるときにマスター及びスレーブを制御するために図1のコントローラによって実行されるプロセスが従来的なシステムの制約を克服することを例示している。 不整列があるときにマスター及びスレーブを制御するために図1のコントローラによって実行されるプロセスが従来的なシステムの制約を克服することを例示している。 不整列があるときにマスター及びスレーブを制御するために図1のコントローラによって実行されるプロセスが従来的なシステムの制約を克服することを例示している。 不整列があるときにマスター及びスレーブを制御するために図1のコントローラによって実行されるプロセスが従来的なシステムの制約を克服することを例示している。
空間固定フレームが利用されるときにマスターツールグリップの知覚される動きを繰り返さないスレーブ手術器具先端をもたらすマスターツールグリップとスレーブ手術器具先端との間の向き不整列を例示している。 空間固定フレームが利用されるときにマスターツールグリップの知覚される動きを繰り返さないスレーブ手術器具先端をもたらすマスターツールグリップとスレーブ手術器具先端との間の向き不整列を例示している。
1つの態様において図1のコントローラによって実施されるプロセスを例示するより詳細なプロセスフロー図である。
図面中、図番の1桁目は、その図番の要素が最初に現れる図を示している。
本発明の態様は、システム100と呼ぶことがある遠隔操作手術システム100内のマスターツールグリップ及びスレーブ手術器具先端のための従来技術のマスター−スレーブ整列(master-slave alignment)プロセスが、スウーピング向き整列誤差(swooping orientation alignment error)、即ち、マスターツールグリップとスレーブ手術器具先端との間の大きな不整列をもたらす場合があることを予想する。マスターツールグリップの向きとスレーブ手術器具先端との向きが整列させられるまでマスター−スレーブ整列プロセスを繰り返すことに関連する先行技術の遅延を回避するために、コントローラ150は、追従(following)に入り得る、即ち、スウーピング向き整列誤差が許容可能である前の、マスターツールグリップの向きとスレーブ手術器具先端の向きとの間の許容可能な整列誤差についての基準を緩和する。追従に入り得る前のマスターツールグリップの向きとスレーブ手術器具先端の向きとの間の受け入れ可能な整列誤差についての緩和基準は、マスターツールグリップの向きとスレーブ手術器具先端の向きとの間のより精密な整列を必要とした先行技術プロセスと比較して、追従に入り得る前のマスター−スレーブ整列プロセスの所要の反復回数を減少させる。
本明細書において、スウーピング向き不整列(swooping orientation misalignment)は、上述の従来のシステムにおいて、マスターツールグリップの指向方向(pointing direction)についてのマスターツールグリップの回転が、スレーブビューフレーム(slave view frame)に投影されるマスターツールグリップ指向方向についての円形のスレーブ手術器具先端の回転を引き起こす、向き不整列である。従来のシステムは、スレーブ手術器具先端の所望の向きを、マスターツールグリップの現在の向き、カメラ基準フレーム(camera reference frame)内のスレーブ手術器具先端の基本向き(base orientation)、及びアイフレーム(eye frame)内のスレーブ手術器具先端の基本向き転置の積として定義することによって特徴付けられる。
従来のシステムは、スレーブ手術器具先端とマスターツールグリップとの間の向き誤差(orientation error)を小さな向き誤差に限定したので、スレーブ手術器具先端の円運動はユーザに知覚可能でなく、よって、従来のシステムにおける小さな向き誤差について、スレーブ手術器具先端及びマスターツールグリップは、同じ知覚された動きを有した。しかしながら、小さな向き誤差についての要求が緩和されると、スレーブ手術器具先端及びマスターツールグリップの知覚された動きは、もはや同じでない。
以下により完全に説明するように、コントローラ150は、マスター−スレーブ整列プロセスの完了後、マスターツールグリップ及びスレーブ手術器具先端の基本向きを格納し、追従に入る。本明細書において用いるとき、「追従」(“following”)は、システム100のユーザによって外科医コンソール114(コンソール114の一例)のマスターツールのマスターツールグリップを動かすことが、マスターツールグリップを動かすのと同じ方法でスレーブ手術器具先端を動かすために、ツール112(「手術ツール112」及び「スレーブ手術器具112」を含む例)に命令を送信するコントローラ150をもたらす、遠隔操作手術システム100の状態である。よって、追従中、スレーブ手術器具先端の動きは、追従を開始したときのマスターツールグリップとスレーブ手術器具先端との間の向き不整合に拘わらず、マスターツールグリップの動きに追従する。
追従中、追従に入る前のマスターツールグリップとスレーブ手術器具先端との間の如何なる整列誤差をも補償するために、マスターツールマニピュレータからのスレーブ手術器具先端のそれぞれの命令された動きは、コントローラ150によって、以下により完全に記載するような特別な方法において回転させられる。この回転の結果は、マスターツールグリップとスレーブ手術器具先端との間の初期的な向き不整合に拘わらず、スレーブ手術器具先端の動きがマスターツールグリップの動きに直感的に対応することである。スレーブ手術器具先端の動きは、ユーザがマスターツールグリップの動きに基づいて期待するものである。何故ならば、システム100のユーザが知覚するマスターツールグリップの動きは、ユーザが知覚するスレーブ手術器具の動きと同じである、即ち、マスターツールグリップ及びスレーブ手術器具先端は同じ知覚される動きを有するからである。
これは、図4A乃至図4Dに関して以下により完全に記載するような幾つかの状況において、マスターツールグリップの動きに追従するときに大きな初期的な不整列が手術器具先端の予想外の動きをもたらした、従来のシステムと対照的である。具体的には、マスターツールグリップ及びスレーブ手術器具先端の知覚される動きは異なった。何故ならば、アイフレーム内の空間固定軸についてのマスターツールグリップの回転は、カメラのフレーム内の同じ空間固定軸についてのスレーブ器具先端の回転をもたらしたからである。追従に入るときに、マスターツールグリップとスレーブ手術器具先端との間でオフセットさせられる向きが大きいことが許可される場合、マスターツールグリップの指向方向についてのマスターツールグリップの回転が、スレーブビューフレームに投影されるマスター指向方向についての円形のスレーブ手術器具先端の運動をもたらし得る。図4C及び4D並びに以下の付随する説明を参照のこと。
より具体的には、1つの態様において、コントローラ150(図1)は、マスターツールマニピュレータ(図示されていないが、マスターツールマニピュレータ370(図3C)を参照のこと)から第1の命令133を受信し、スレーブ手術器具112の所望の向きを含む第2の命令135をスレーブ手術器具112に送信する。コントローラ150は、マスターツールグリップの向きを用いてスレーブ手術器具先端の所望の向きを生成するように構成される。マスターツールグリップの向きは、第1の命令133に含められる。本明細書では、「第2の命令135」を「制御命令135」と呼ぶことがある。本明細書では、「マスター移動命令133」は第1の命令133の一例であり、「スレーブ移動命令135」は第2の命令135の一例である。
コントローラ150によって生成されるスレーブ手術器具先端の所望の向きは、マスターツールグリップとスレーブ手術器具との間にスウーピング向き不整合があるときでさえも、マスターツールグリップとスレーブ手術器具先端との間で同じ知覚される回転を維持する。ここで、同じ知覚される回転は、マスターツールグリップの回転がマスターツールグリップの本体固定軸の周りにあると知覚されるならば、スレーブ手術器具の回転がスレーブ手術器具先端の対応する本体固定軸の周りにあることを意味する。例えば、マスターツールグリップの回転がマスターツールグリップの本体固定x軸の周りにあると知覚されるならば、スレーブ手術器具の回転はスレーブ手術器具先端の対応する本体固定x軸の周りにあると知覚され、或いは、マスターツールグリップの回転がマスターツールグリップの本体固定y軸の周りにあると知覚されるならば、スレーブ手術器具の回転はスレーブ手術器具先端の対応する本体固定y軸の周りにあると知覚され、或いは、マスターツールグリップの回転がマスターツールグリップの本体固定z軸の周りにあると知覚されるならば、スレーブ手術器具の回転はスレーブ手術器具先端の対応する本体固定z軸の周りにあると知覚される。
丁度説明したように、これは、向きオフセットが大きいことが許容されるときに、マスターツールグリップの指向方向についてのマスターツールグリップの回転が、ビューフレームに投影されるマスター指向方向についての円形のスレーブ手術器具先端の動きをもたらし得る、従来のシステムと対照的である。よって、従来のシステムにおけるマスターツールグリップ及びスレーブ手術器具先端は、スウーピング向き誤差について同じ知覚される動きを有していなかった。
手術システム100では、ユーザ、典型的には、外科医が、コンソール114に座って、マスターツールグリップ(図示せず)を親指と人差し指との間で把持するので、標的化(targeting)及び把持(grasping)は、直感的な位置指示動作(pointing motion)及びピンチ動作(pinching motion)を含む。マスターツールグリップは、マスターツールと呼ぶことがあるマスターツールマニピュレータの部分である。コントローラ150は、マスターツールグリップの動きを用いて、以下により完全に記載するように、スレーブ手術器具112の先端を移動させ、例えば、手術器具のエンドエフェクタを移動させる。
コンソール114(図1及び図2A)は、ビューアと呼ぶことがあるマスターディスプレイを含み、マスターディスプレイは、患者111の手術部位103の少なくとも立体画像210(図2A)を表示する。立体画像210は、典型的に、手術部位103の画像203、スレーブ手術器具112の部分の画像212、及びスレーブ手術器具112の先端の画像212Tを含む。コンソール114は、1つ又はそれよりも多くのフットペダル(図示せず)も含む。
コンソール114(図1)は、コントローラ150に接続され、次いで、コントローラ150は、ロボットアーム113を含む複数のロボットアームを支持するカート110に接続される。スレーブ手術器具112は、ロボットアーム113によって保持され、位置付けられる。図1には示されていないが、立体画像210を提供するために、典型的には、他のロボットアームによって保持される内視鏡が用いられる。
外科医は快適に座って、手術を通じてコンソール114にあるマスターディスプレイを見る。外科医は、少なくともマスターツールグリップ230(図2A)を操作することによって、医療処置を実行する。マスターツールグリップ230は、ピンチャー(pinchers)と呼ぶことがある2つのレバー231,232を含み、外科医は、典型的に、2つのレバーを親指と人差し指との間で把持する。マスターツールは、少なくともマスターツールグリップ230の現在の向きを含むマスター動作命令133を提供する。マスター動作命令133を第1の命令と呼ぶことがある。
マスターツールからのマスター動作命令133に応答して、コントローラ150、例えば、コントローラ150の遠隔操作サーボコントローラ160が、スレーブ手術器具112にスレーブ動作命令135を送信する。スレーブ動作命令135に応答して、スレーブ手術器具112は、スレーブ手術器具112の先端を、スレーブ動作命令135において指示されるように位置決めする。スレーブ動作命令135を第2の命令と呼ぶことがある。
典型的には、コンソール114は、少なくとも2つのマスターツールを含み、各マスターツールは、異なる手術器具を制御する。ここでは、マスターツールグリップ30を備える単一のマスターツールが考察される。この記述を考慮して、任意の所望の数のマスターツールについて本発明の態様を実施し得る。
マスターディスプレイは、外科医が手術部位103を実際に直接見下ろしていると感じるように、マスターディスプレイに見られる画像210(図2A)が方向付けられるように、外科医の手の近くでコンソール114(図1)に位置付けられる。ツール112の画像212は、外科医の手が配置される場所に実質的に配置されるように見えるか、或いはツール112が自分の手の位置に基づいていると外科医が期待するように実質的に方向付けられるように見える。しかしながら、典型的に、外科医は、画像210を見ている間にマスターツールグリップ230の位置又は向きを見ることができない。
内視鏡からのリアルタイム画像は、外科医が恰も実質的にトゥループレゼンス(true presence)において作業空間を見るように、その関連するマスターツールグリップ230を通じてツール112の手術器具エンドエフェクタを操作し得るように、透視画像210(例えば、立体画像210)に投影される。トゥループレゼンスによって、画像の表現が、手術器具を物理的に操作している操作者の視点をシミュレートする真の透視画像であることを意味する。よって、コントローラ150は、透視画像が、内視鏡が開放空洞処置の間に外科医の眼球レベルからツール112を直接見るならば外科医が見る画像であるように、ツール112の座標を知覚位置に変換する。
コントローラ150は、システム100内の様々な機能を実行する。コントローラ150は、内視鏡から画像を受け取り、外科医が見る立体画像を生成する。コントローラ150は、遠隔操作サーボコントローラ160を用いて、スレーブ動作命令135を通じてマスターツールグリップ230の機械的動作を関連するスレーブ手術器具に伝えるので、外科医はツール112を効果的に操作することができる。コントローラ150及び遠隔操作サーボコントローラ160は、以下により完全に記載する態様を除いて、従来のシステムと類似する。
コントローラ150として記載しているが、コントローラ150は、実際には任意の数のモジュールによって実施されてよく、各モジュールは、コンポーネントの任意の組み合わせを含んでよいことが理解されるべきである。各モジュール及び各コンポーネントは、ハードウェア、プロセッサ上で実行されるソフトウェア、及びファームウェア、又はこれらの3つの任意の組み合わせを含んでよい。本明細書において記載するような、コントローラ150の機能及び作用は、1つのモジュールによって実行されてよく、或いは異なるモジュールの間で分割されてよく、或いはモジュールの異なるコンポーネントの間で分割されてさえよい。異なるモジュール又はコンポーネントの間で分割されるとき、モジュール又はコンポーネントは、1つの場所に集中されられてよく、或いは分散処理目的のためにシステム100に亘って分散されてよい。よって、コントローラ150は、単一の物理的実体を必要とするものと解釈されるべきでない。何故ならば、幾つかの態様において、コントローラ150は、システム100に亘って分散されるからである。
一度に使用される手術器具の数、結果的に、システム100において使用される手術器具の数は、一般的に、数ある要因の中でも、実行される医療処置及び手術室内の空間制約に依存する。処置中に使用されている手術器具のうちの1つ又はそれよりも多くを交換する必要があるならば、補助者が手術器具を取り外し、その手術器具を異なる手術器具と交換してよい。
システム100内に2つのマスターツールだけがあるとき、及び外科医が2つのマスターツールに連結された2つのスレーブ手術器具と異なるスレーブ手術器具の動きを制御することを欲するとき、外科医は、2つのスレーブ手術器具の一方又は両方を所定の場所に係止する。次に、外科医は、マスターツールの一方又は両方をロボットアームの他方によって保持される他のスレーブ手術器具と関連付け、次に、コントローラ150は、それらの手術器具に関してアクティブになる。
コントローラ150によって実行される行為(acts)の議論を容易にするために、様々なフレームが使用される。フレームは、3つの空間軸、例えば、x軸、y軸、及びz軸と、3つの向き、例えば、ピッチ、ヨー、及びロールとを含む、デカルト座標系である。向きの各々は、空間軸のうちの1つについての回転である。
第1のフレームをアイフレーム(eye frame)と呼ぶ。1つの態様において、アイフレームの原点(origin)は、外科医が外科医コンソール114内で手術部位103を見ているときに外科医の眼が通常位置する位置に対応するように、選択される。マスター動作命令133において、マスターツールグリップ230の位置及び向きは、1つの態様では、アイフレーム内で特定される。アイフレーム内のマスターツールグリップ230の位置及び向きを決定する技術は知られている。例えば、本明細書中に参照として援用する、(2003年12月30日に付与された「Camera Referenced Control In a Minimally Invasive Surgical Apparatus」を開示する)米国特許第6,671,581B2号明細書を参照のこと。
第2のフレームをマスターフレーム(master frame)と呼ぶ。1つの態様において、マスターフレームの原点は、マスターツールグリップ230上の点として選択される。
第3のフレームをカメラフレーム(camera frame)と呼ぶ。1つの態様において、カメラフレームの原点は、内視鏡の遠位端上の位置と対応するように選択される。1つの態様において、スレーブ動作命令135では、スレーブ手術器具の先端の所望の向きが、カメラフレームにおいて特定される。カメラフレーム内のスレーブ手術器具先端の位置及び向きを決定する技法は知られている。例えば、従前に参考として援用した、米国特許第6,671,581B2号を参照のこと。
第4のフレームをスレーブフレーム(slave frame)と呼ぶ。1つの態様において、スレーブフレームの原点は、スレーブ手術器具先端上の点として選択される。
図2Bは、追従プロセス(following process)が開始される直前に、マスターツールの整列及びスレーブ手術器具先端の整列との相対的な回転を使用する、追従プロセスのプロセスフロー図である。追従プロセスは、コントローラ150内の追従モジュール130(following module)によって実施される。
この追従プロセスにおいて、スレーブ手術器具先端の動きは、スレーブ手術器具先端の如何なる予期せぬ動きをも伴わずに、マスターツールの動きに追従する。以下により完全に記載するように、相対的な回転を同様に使用した従来の追従プロセスは、マスターツール及びスレーブ手術器具先端が追従プロセスに入る際にずれるときに、スレーブ手術器具先端の予期しない回転を引き起こした。
この態様において、追従有効化確認プロセス270(FOLLOWING ENABLED check process)(図2B)は、システム100がマスターツールグリップ230とスレーブ手術器具先端との間の追従を可能にしたか否かを決定する。1つの態様において、追従有効化確認モジュール270は、追従モジュール130(図1及び図2B)によって実装される。追従モジュール130は、コントローラ150に含められ、よって、コントローラ150は、追従が有効にされているか否かを決定する。同様に、図2Bの追従セッションに関して記載する他のプロセス及び行為の各々は、コントローラ150の遠隔操作サーボコントローラ160によって実行され、よって、コントローラ150は、プロセス及び行為を実行すると言える。
追従が有効にされるならば、追従有効化確認プロセス270は、マスターツールマニピュレータからの各マスター動作命令133を新しいスレーブ向き生成プロセス280(GENERATE NEW SLAVE ORIENTATION process)に伝え、さもなければ、何もしない。追従有効化確認プロセス270は、追従が有効にされているか否かを決定するために、コントローラ150が継続的にポーリングする(poll)ことを必要とするものと解釈されてはならない。追従有効化確認プロセス270は、追従が有効にされるまで追従を開始することができないことを例示的に示すに過ぎない。例えば、追従有効化イベントを受信するときに追従プロセスを開始するイベントハンドラ(event handler)によって、追従が有効にされているか否かの決定を行うことができる。
新しいスレーブ向き生成プロセス280は、マスターツール命令内の情報及び格納された方向131、例えば、格納された方向mRe’及びcRs’を用いて、カメラフレーム内のスレーブ手術器具先端の所望の向きcRs_desを生成する。格納された向きmRe’及びcRs’を基本向きと呼ぶ。新しいスレーブ向き生成プロセス280は、コントローラ150に含められる方向制御モジュール134によって実施される。
マスター動作命令133は、アイフレーム内のマスターツールグリップ230の向きeRmを含む。向きeRmをアイフレーム内のマスターツールグリップの現在の向き(current orientation)と呼ぶことがある。
向きmRe’及びcRs’は、追従セッションと呼ぶことがある追従プロセスが開始される前にメモリ265内に格納される。ここで、向き参照番号のプライム表記(prime notion)は、その向きが追従セッションに入る前の瞬間の対応する向き状態のスナップショットであり、1つの態様において、格納される向きは同じ追従セッションにおいて変化しない固定量であることを示す。
格納される向きmRe’は、現在の追従セッションが開始される前のマスターフレーム内のアイフレームの最後の向きである。この態様では、アイフレームを静止的に保持し、従来のシステムにおけるようにマスターツールグリップの動きを考慮する代わりに、マスターツールグリップは静止したままであり、アイフレームは動いていると仮定される。これはマスターツールグリップの動きを表す代替的な技法である。
格納される向きcRs’は、現在の追従セッションが開始される前のカメラフレーム内のスレーブ手術器具先端の最後の向きである。向きmRe’及びcRs’は追従セッションが開始される前に格納されるので、向きmRe’及びcRs’を基本向き(base orientations)と呼ぶ。何故ならば、それらは追従セッション中の向きの変化の基準となる向きである、即ち、スレーブ手術器具先端の新しい向きは、スレーブ手術器具先端の格納された基本向きcRs’に対して決定されるからである。
新しいスレーブ向き生成プロセス280は、アイフレーム内のマスターツールグリップの回転オフセットRoffset及び現在の向きeRmに基づき、カメラフレーム内のスレーブ手術器具先端の所望の向きcRs_desを生成する。例えば、カメラフレーム内のスレーブ手術器具先端の所望の向きcRs_desは、以下のように定義される。
Figure 2019122871
回転オフセットRoffsetは、カメラフレーム内のスレーブ手術器具先端の格納された向きcRs’とマスターフレーム内のアイフレームの格納された向きmRe’との組み合わせである。1つの態様では、以下に更に完全に議論するように、以下の通りであり、
Figure 2019122871
よって、以下の通りである。
Figure 2019122871
先に述べたように、最後の式の所望の向きcRs_desは、カメラフレーム内のスレーブ手術器具先端の所望の向きcRs_desが、2つの格納された向きとアイフレーム内のマスターツールグリップの現在の向きとの組み合わせであることを明示する。更に、(mRe’*eRm)は相対的な回転行列R2(rotation matrix)の転置であることを以下に明示する。よって、カメラフレーム内のスレーブ手術器具先端の所望の向きcRs_desは、カメラフレーム内のスレーブ手術器具先端の格納された向きcRsと相対的な回転行列R2の転置との積である。相対的な回転行列R2は、マスターフレーム340におけるアイフレーム330の相対的な回転を表す。
カメラフレーム内のスレーブ手術器具先端の格納された向きcRs’と相対回転行列R2の転置との積を用いて、カメラフレーム内のスレーブ手術器具先端のcRs_desを決定することは、追従に入れられるときのマスターツールグリップ230と手術器具ツール先端との間の如何なる向き整列誤差をも補償する。更に、以下により完全に議論するように、このプロセスは、手術器具ツール先端の如何なる予期しない動きをももたらさないので、手術器具先端の動きは、マスターツールグリップ230の動きに直感的に追従すると言える。
新しいスレーブ向き生成プロセス280が、カメラフレーム内のスレーブ手術器具先端の所望の向きcRs_desを生成した後、スレーブ動作命令送信プロセス290(SEND SLAVE MOVE COMMAND process)は、所望の向きcRs_desを含む、命令135と呼ぶことがあるスレーブ動作命令135を、スレーブ手術器具マニピュレータ222又は他のスレーブ機器コントローラに送信する。命令135に応答して、スレーブ手術器具マニピュレータ222は、スレーブ手術器具先端を所望の向きに動かす。スレーブ手術器具が器具先端の向きを変更する命令にどのように応答するかは知られているので、スレーブ手術器具による器具先端の向きの変化は、更に詳細に考慮されていない。スレーブ動作命令135を送信した後、スレーブ動作命令送信プロセス290は、追従有効化確認プロセス270に戻る。
システム100が最初に始動するときに図2Bの追従プロセスに入り、システム100が追従を無効にするまで継続する。追従がシステム100によって無効にさるとき、1つの態様において、マスター−スレーブ整列プロセス250(MASTER-SLAVE ALIGNMENT process)中のスウーピング向き誤差許容確認プロセス(SWOOPING ORIENTATION ERROR ACCEPTABLE check process)(図示しないが、図6のプロセス620を参照のこと)は、アイフレーム内のマスターツールグリップの向きとカメラフレーム内のスレーブ手術器具先端との間の向き不整列が、最大の許容されるスウーピング向き不整列(maximum permitted swooping orientation misalignment)以下であるか否かを決定する。
スウーピング向き誤差許容確認プロセスが、アイフレーム内のマスターツールグリップの向きとカメラフレーム内のスレーブ手術器具先端との間の向き不整列が、最大の許容されるスウーピング向き不整列以下であると決定するならば、向き格納プロセス260(STORE ORIENTATIONS process)は、カメラフレーム内のスレーブ手術器具先端の現在の向きを受信し且つ格納し、マスターフレーム内のアイフレームの向きであるアイフレーム内のマスターツールグリップの現在の向きの転置を受信し且つ格納する。1つの態様において、プロセス260と呼ぶことがある向き格納プロセス260は、記憶装置モジュール261によって実施される。記憶装置モジュール261は、コントローラ150に含められる。プロセス260がひとたび完了すると、追従セッションが有効にされる。
システム100の初期始動の間に、並びに、スウーピング向き誤差許容確認プロセスが、向き不整列が最大の許容されるスウーピング向き不整列よりも大きいと決定するときに、マスター−スレーブ整列プロセス250は、外科医コンソール114内のマスターツールに命令を送信して、アイフレーム内のマスターツールグリップ230の向きがカメラフレーム内のスレーブ手術器具先端の向きと一致するように、マスターツールグリップ230を動かす。マスターツールグリップ230の向きを変えるためにマスターツール内のモータを使用することは知られているので、更に詳細に考慮されない。マスターツール位置決めプロセス(POSITION MASTER TOOL process)(図示しないが、図6のプロセス610を参照のこと)がひとたび完了すると、スウーピング向き誤差許容確認プロセスが繰り返される。
マスター−スレーブ整列プロセス250の終了時のより大きな許容される不整列は、殆どの場合、マスター−スレーブ整列プロセス250が一度だけ実行され、次に、追従プロセスに入ることを意味する。よって、多数の不整列の警告の故に外科医が以前に経験したフラストレーションは、排除されないとしても、最小限に抑えられる。
コントローラ150は、少なくとも1つの、典型的には、複数のプロセッサを含み、プロセッサは、追従セッションの間に、コントローラ150の処理サイクル速度によって決定される連続的なベース(continual basis)で、マスターツール動作入力命令に応答してスレーブ手術器具先端の新しい対応する位置及び向きを決定することが理解されるであろう。コントローラ150の典型的な処理サイクル速度は、約1300Hzである。よって、マスターツールが1つの位置から次の位置に移動させられるとき、スレーブ手術器具先端の対応する所望の動きは、約1300Hzで決定される。もちろん、コントローラ150は、コントローラ内で使用されるプロセッサ又は複数のプロセッサに依存して、任意の適切な処理サイクル速度を有し得る。
上述の本発明の態様を更に詳細に記載する前に、各々の基準フレームの具体的な例を図3A乃至図3Cに提示する。次に、本発明の態様をより明確に例示するのを助けるために、従来的なシステム及びスウーピング向き不整列についてのそれらの欠点を議論する。最後に、上記の本発明の態様をより詳細に考察し、従来的なシステムと比較する。
図3Aにおいて、カメラフレーム310は、その原点315が内視鏡314の視認端316に位置付けられるように、位置付けられる。この態様において、カメラフレーム310は、デカルト座標系であり、例えば、x軸Xc、y軸Yc、及びz軸Zcを含む。z軸についての回転はロールと呼ばれる。x軸についての回転Xcはピッチと呼ばれ、y軸についての回転はヨーと呼ばれる。本来的に、x軸Xc及びy軸Ycは、z軸Zcに対して垂直な平面内に位置付けられる。特定の軸との向きの関連付けは例示的であるに過ぎず、限定的であることを意図しない。特定の軸と回転との間の関連付けは、関連付けが基準フレームの各々において一貫して定められる限り、本明細書で記載するものと異なり得る。
便利には、カメラフレーム310のz軸Zcは、内視鏡314の視認軸317に沿って軸方向に延びる。図3Aにおいて、視認軸317は、内視鏡314のシャフト軸と同軸に整列して示されているが、視認軸317は、内視鏡314の長手軸に対して角度を有し得ることも理解されるべきである。よって、内視鏡314は、角度付き内視鏡であることもできる。内視鏡314は、典型的に、その長手軸について角度的に変位可能である。x軸、y軸、及びz軸は、内視鏡の長手軸についての内視鏡304の角変位と共振して(in sympathy with)長手軸について角度的に変位するよう、内視鏡304の視認軸317に対して固定される。
遠隔操作サーボコントローラ160がスレーブ位置及び向きを決定するのを可能にするために、スレーブフレーム320がスレーブ手術器具先端312Tに定められ或いは取り付けられる。図3Aの例において、スレーブフレーム320は、枢動接続部326にその原点325を有する。この態様において、スレーブフレーム320は、デカルト座標系であり、例えば、x軸Xs、y軸Ys、及びz軸Zを含む。z軸Zsについての回転はロールと呼ばれる。x軸Xsについての回転はピッチと呼ばれ、y軸Ysについての回転はヨーと呼ばれる。本来的に、x軸Xs及びy軸Ysは、z軸Zsに対して垂直な平面内に位置付けられる。
便利には、スレーブフレームの軸のうちの1つ、例えば、z軸Zsは、器具先端312Tの対称軸等に沿って延びるように定められる。スレーブ手術器具112の向きは、カメラフレーム310に対する枢動接続部326にその原点を有するスレーブフレーム320の向きによって定められる。同様に、スレーブ手術器具112の位置は、カメラフレーム310の原点315に対するスレーブフレーム320の原点の位置によって定められる。
アイフレーム330(図3B)の原点335は、原点335が、外科医が外科医コンソール114内のビューア302で手術部位を見ているときに外科医の眼が通常位置付けられる位置336と対応するように、選択される。この態様において、アイフレーム330は、デカルト座標系であり、例えば、x軸Xe、y軸Ye、及びz軸Zeを含む。z軸Zeについての回転はロールと呼ばれる。x軸Xeについての回転はピッチと呼ばれ、y軸Yeについての回転はヨーと呼ばれる。本来的に、x軸Xe及びy軸Yeは、z軸Zeに対して垂直な平面内に位置する。
z軸Zeは、ビューア302を通じて手術部位を見るときに、軸337によって示される、外科医の視線に沿って延びる。便利には、y軸Yeは、ビューア302に対して概ね垂直に延びるように選択され、x軸Xeは、ビューア302に対して概ね水平に延びるように選択される。
コントローラ150がアイフレーム330内のマスターツールグリップ230の位置及び向きを決定するのを可能にするために、マスターフレーム340の原点345を定めるマスターツールグリップ230(図3B及び3C)上の点が選択される。1つの態様において、この点はマスターツールマニピュレータ370の第1の回転軸347とマスターツールマニピュレータ370の第2の回転軸348との間の交点349で選択される(米国特許第6,671,581B2号の図6A中の点3Aも参照のこと)。
この態様において、マスターフレーム340は、デカルト座標系であり、例えば、x軸Xm、y軸Ym、及びz軸Zmを含む。z軸Zmについての回転はロールと呼ばれる。x軸Xmについての回転はピッチと呼ばれ、y軸Ymについての回転はヨーと呼ばれる。本来的に、x軸Xm及びy軸Ymは、z軸Zmに対して垂直な平面内に位置する。
マスターツールグリップ230上のマスターフレーム340のz軸Zmは、回転軸348に沿って同軸に延びるピンチャー231及び232の対称軸に沿って延びるよう選択される。アイフレーム330内のマスターツールグリップ230の向きは、アイフレーム330に対するマスターフレーム340の向きによって定められる。アイフレーム330内のマスターツールグリップの位置は、アイフレーム330の原点に対する原点345の位置によって定められる。マスターフレームとアイフレームとの間のマッピングが知られている。例えば、米国特許第6,671,581B2号を参照のこと。
マスターツールグリップ動作とスレーブ手術器具先端動作との間の制御は、アイフレーム330内のマスターツールグリップ230の位置ePmとカメラフレーム310内のスレーブ手術器具先端312Tの位置cPs及びcRsとを使用して達成される。ここで、位置ePmは、(ePmのeによって表される)アイフレーム330内の(ePmのmによって表される)マスターフレーム340の原点345のx、y、z位置を備える、(ePmのPによって表される)3×1行列である。同様に、位置cPsは、(cPmのcによって表される)カメラフレーム310内の(cPsのsによって表される)スレーブフレーム320の原点325のx、y、z位置を備える、(cPsのPによって表される)3×1行列である。向きeRmは、(eRmのeによって表される)アイフレーム330内の(eRmのmで表される)マスターフレーム340の向きを特定する(eRmのRによって表される)3×3回転行列である。同様に、向きcRsは、(cRmのcによって表される)カメラフレーム310内の(cRsのsによって表される)スレーブフレーム320の向きを特定する(cRsのRによって表される)3×3回転行列である。
従来的なシステムは、背景技術において上述したように、マスターツールグリップとスレーブ手術器具とを整列させることを試みた。このシステムにおいて、追従に入る直前の向き整列の不一致は、小さな向き不整列に限定されていた。向きの処理に関して、以前のシステム挙動を「ビューフレームセントリック」(“view-frame centric”)と最良に記載し得る。追従に入る前に、従来的なシステムは、アイフレーム内にマスターツールグリップの向きeRm’を格納し、カメラフレーム内にスレーブ手術器具先端の向きcRs’を格納した。向きeRm’及び向きcRs’を回転行列として格納した。
従来的なシステムでは、オフセット行列Roffset_priorが、2つの格納された向きを乗算することによって、例えば、回転行列を乗算することによって、格納された向きから生成された。即ち、以下の通りである。
Figure 2019122871
sRc=cRsであることが知られており、それはsRc’=cRs’を意味し、よって、回転オフセットは、以下の通りである。
Figure 2019122871
以下において、マスターツールグリップは、アイフレーム内で表される、追加的な回転を受ける。
Figure 2019122871
よって、現在の向きeRmは、アイフレーム内の相対的なマスター回転行列R1及び格納された向きeRm’の積と等しいものとして定められる。
従来的なシステムにおいて、カメラフレーム内のスレーブ手術器具先端の所望のスレーブ向きcRs_desは、以下のように定められた。
Figure 2019122871
回転オフセットの上記定義Roffsetを前の式に代入すると以下がもたらされる。
Figure 2019122871
追加的な回転eRmの上記定義を前の式に代入すると以下がもたらされる。
Figure 2019122871
しかしながら、回転行列は、直交行列(orthogonal matrices)であることが知られている。即ち、以下の通りである。
Figure 2019122871
よって、以下の通りである。
Figure 2019122871
効果的には、マスターツールグリップが動かされるときにスレーブ手術器具の動作を制御する動作命令を送信するために、従来的なシステムは、先ず、アイフレーム内の相対的なマスター回転行列R1を計算する。例えば、上から、相対的なマスター回転行列は、以下のように定められる。
Figure 2019122871
Figure 2019122871
しかしながら、以下の通りである。
Figure 2019122871
Figure 2019122871
アイフレーム内の相対的なマスター回転行列R1を計算するために、従来的なシステムは、格納された向きeRm’の転置によって現在の回転行列eRmに乗算した。
所望のスレーブ向きcRs_desを得るために、従来的なシステムは、次に、カメラフレーム310内のスナップショットスレーブ向きcRs’に同じ相対的なマスター回転行列R1を適用した。所望のスレーブ向きcRs_desを決定するこのプロセスを、「ビューフレームセントリック」と呼ぶ。何故ならば、システムはアイフレーム内のマスターツールグリップの動きのデルタをモニタリングし、そのデルタをカメラフレーム内のスレーブ手術器具で複製するからである。アイフレーム内のマスターツールグリップとカメラフレーム内のスレーブ手術器具先端との間の不整列に対する動きの使用は、システムが追従に入る直前にスウーピング向き不整列を許容するならば、従来的なシステムのユーザを混乱させる動きを創り出す。
図4Aは、従来的なシステムにおけるマスター−スレーブ整列に続く、アイフレーム330内のマスターツールグリップの場所Lmのグラフィック表示である。議論の容易さのために、場所Lmは、Xe−Ye平面内にある。場所Lmは、(ePm’,eRm’)として保存される。場所Lmは、眼球フレーム330に対する空間内に定められ、よって、従来的なシステムにおいて、フレーム340は、空間固定座標系である。図4Bは、マスター−スレーブ整列に続く、カメラフレーム310内のスレーブ手術器具先端の場所Lsのグラフィック表示である。場所Lsは、Xc−Yc平面内にある。場所Lsは、(cPs’,cRs’)として保存される。この例において、場所Lsは、カメラフレーム310に対する空間内に定められ、よって、従来的なシステムにおいて、フレーム320は、空間固定座標系である。マスター−スレーブ整列の終了時に、マスターツールグリップとのスレーブ手術器具先端の不整列は、システムによって以前に許容されたものよりも大きい。
ひとたび追従に入ると、外科医は、図4Cに例示するように、マスターツールグリップを回転させる。回転はXe−Ye平面内の空間固定x軸Xsmについてのものである。アイフレームの空間固定軸Xsmについてのマスターツールグリップの回転は、カメラフレーム内の同じ空間固定軸Xssについてのスレーブ器具先端の回転をもたらす。向きオフセットが大きくなることが許容されるとき、マスターツールグリップの指示方向についてのマスターツールグリップの回転は、スレーブビューフレーム上に投影されるマスター指向方向についての円形のスレーブ手術器具先端運動をもたらし得る。しかしながら、外科医は、スレーブ手術器具先端がXc−Yc平面内でx軸Xssについて回転することを予期する可能性が高い。
スウープ向き不整列を伴って、先行技術のシステムは、今しがた記載したマスターツールグリップの回転に応答して所望のスレーブ向きcRs_desを決定する。初期的な無機の変位の故に、スレーブ手術器具先端は、予想されるように回転しない。何故ならば、相対的に回転がスレーブ手術器具先端に加えられるとき、スレーブ手術器具先端の回転はもはやXc−Yc平面内にないからである。Xc−Yc平面内で回転するよりもむしろ、スレーブ手術器具先端は、カメラフレーム310内で円形の経路401に沿って回転する。図4Dにおいて、破線402は、マスターツールグリップ230及びスレーブ手術器具先端312Tが整列させられた場合のスレーブ手術器具先端312Tの場所を表している。2つが整列させられるならば、その軸のうちの1つについてマスターツールグリップの回転は、その軸からの空間変位を伴わずに、その軸のうちの同じ1つについて回転するスレーブ手術器具先端をもたらす。しかしながら、スウープ向き不整列の故に、スレーブ手術器具の回転の経路は、経路401によって示されるように、軸から変位させられる。
よって、この例において、マスターツールグリップの軸Xsmについて平面内でマスターツールグリップを回転させることの知覚される動きは、平面内で破線402によって示される対応する軸について回転する手術器具先端の知覚される動きをもたらさない。むしろ、今しがた記載したように、スレーブ手術器具先端の動きは、円形の経路401に沿う。円形の経路401は、Xc−Yc平面に対して垂直な平面内にある。故に、従来的なシステムにおけるスウープ向き不整列について、マスターツールグリップの知覚される回転及びスレーブ手術器具先端の知覚される回転は同じでない。
より一般的には、前述のように、アイフレーム内の空間固定軸についてのマスターツールグリップの回転は、カメラフレーム内の同じ空間固定軸についてのスレーブ手術器具先端の回転をもたらす。向きオフセットが大きいことが許容されるとき、マスターツールグリップの指向方向についてのマスターツールグリップの回転は、従来的なシステムのスレーブビューフレーム上に投影されるマスター指向方向についての円形のスレーブ手術器具先端運動をもたらし得る。
結果的に、従来的なシステムでは、最大整列誤差が小さな向きの不整列からスウーピング向き不整列に増加するならば、スレーブ手術器具の不自然な回転をもたらす。遠隔操作サーボコントローラ160内の向き制御モジュール134は、追従セッションが開始されるときにスウーピング向き不整列がある場合の従来的なシステムの問題を解消する。
向き制御モジュール134は、従来的なシステムと関連付けられる問題を解消する。第1に、マスターツールグリップとスレーブ手術器具先端との間の不整列があるか否かを確認するための基準は緩和される。追従が有効にされるときに、マスターツールグリップ230とスレーブ手術器具先端312Tとの間のスウーピング向き不整列が許容される。
最大の許容される向き不整列は、殆どの場合、マスター−スレーブ整列プロセス250が1回だけ実行され、次に、追従プロセスに入れられることを意味する。よって、多数の不整列の警告の故に外科医が以前に従来的なシステムに経験したフラストレーションは、排除されないとしても、最小限に抑えられる。
第2に、大きな初期的な向き不整列にも拘わらず、スレーブ手術器具先端312Tの動きは、マスターツールグリップ230の動きに直観的に追従する。マスターツールグリップ230の回転と関連付けられる予期しない動きはない。よって、追従に入った後のスウーピング向き不整列にも拘わらず、マスターツールグリップ230の知覚される回転は、スレーブ手術器具先端312Tの知覚される回転と同じである。マスターツールグリップ230の回転がマスターツールグリップ230の本体固定軸(body-fixed axis)についてであるならば、スレーブ手術器具先端312Tの回転はスレーブ手術器具先端312Tの同じ本体固定軸についてであるので、マスター及びスレーブの動きはユーザにとって直観的である。
スウーピング向き不整列が許容されるときの従来的なシステムの挙動に取り組むために、「マニピュレータセントリック」アプローチ(“manipulator centric” approach)が、向き制御モジュール134において採用される。マニピュレータセントリックでは、マスターツールグリップの動きにおける任意のデルタ、任意の相対的な変化が、位置が固定されたマスターツールグリップ230に対して動くアイフレーム330で定められる。すなわち、マスターフレーム340は、本体固定フレームである。具体的には、マスターフレーム340におけるアイフレーム330の向きmReは、相対回転行列R2と格納された向きmRe’との積に等しいものとして定められる。すなわち、以下の通りである。
Figure 2019122871
アイフレーム330において見られるようなマスターフレーム340の向きeRmに対して行列転置を実行することによってマスターフレーム340において見られるようなアイフレーム330の向きmReを得ることは取るに足らないことに留意のこと。即ち、以下の通り。
Figure 2019122871
また、回転行列は、直交行列である。即ち、以下の通りであり、
Figure 2019122871
ここで、Iは、単位行列(identity matrix)である。
よって、mRe’=eRm’である。この態様では、マスター−スレーブ整列プロセス250からの向きeRm’は転置され、向きmRe’は向き格納プロセス260において格納される。
この態様において、オフセット行列Roffsetは、2つの格納された向きを乗算することによって、例えば、2つの格納された回転行列を乗算することによって、格納された向きから生成される。
Figure 2019122871
この態様において、カメラフレーム内の所望のスレーブ向きcRs_desは、以下のように定められる。
Figure 2019122871
回転オフセットRoffsetの上記定義を式(2)に代入すると以下がもたらされる。
Figure 2019122871
Figure 2019122871
この追加的な回転eRmの定義を式(3)に代入すると以下がもたらされる。
Figure 2019122871
しかしながら、以下の通りである。
Figure 2019122871
よって、以下の通りである。
Figure 2019122871
しかしながら、上記のように、回転行列は、直交行列である。即ち、以下の通りである。
Figure 2019122871
よって、以下の通りである。
Figure 2019122871
式(4)は、カメラフレームにおける所望のスレーブ向きcRs_desが、カメラフレームにおけるスレーブ手術器具先端の相対的な回転行列R2と基本向きcRs’との組み合わせであることを示している。よって、所望のスレーブ向きは、カメラフレーム内のスレーブ手術器具先端の基本向きcRs’に対して定められる。
式(4)は、マスターツールグリップ230が動いたことを示すメッセージに応答してカメラフレームにおける所望のスレーブ向きcRs_desを決定するために用いられる。向き制御モジュール134は、先ず、マスターフレーム340における転置された相対的な回転行列R2Tを計算する。例えば、上から、相対的な行列R2は、以下のように定められる。
Figure 2019122871
Figure 2019122871
しかしながら、以下の通りである。
Figure 2019122871
Figure 2019122871
Figure 2019122871
Figure 2019122871
Figure 2019122871
よって、式(6)における使用のために相対的な回転行列R2の転置を計算するために、向き制御モジュール134は、マスターツール電流回転行列eRmと格納された向きmRe’とを乗算する。
所望のスレーブ向きcRs_desを得るために、向き制御モジュール134は、相対的な回転R2の転置をカメラフレーム310内のスナップショットスレーブ向きcRs’に適用する。所望のスレーブ向きcRs_desを決定するこのプロセスをマニピュレータセントリックと呼ぶ。何故ならば、システムは、位置が固定されたマスターツールグリップに対するアイフレーム330の動きのデルタをモニタリングし、そのデルタをカメラフレーム310内のスレーブ手術器具112で複製するからである。所望のスレーブ向きcRs_desを生成するこの方法は、マスターツールグリップ230とスレーブ手術器具先端312Tとの間の不整列が従来的なシステムよりも有意に大きくあり得るとしても、スレーブ手術器具先端(図4D)の予想されない動きの問題を解消する。
一例として、追従に入る直前のマスターツールグリップ230とスレーブ手術器具先端312Tとの間の不整列が図4A及び図4Bに関して上述したものと同じであると仮定する。ひとたび追従に入ると、外科医は、図5Aに例示するように、マスターツールグリップ230を回転させる。その回転は、Xe−Ye平面内の本体固定x軸Xbmである。ここで、マスターフレームのx軸Xmは本体固定軸であり、例えば、回転はマスターツールグリップに固定されたx軸に関して定められる。外科医は、スレーブ手術器具先端がXe−Ye平面内で本体固定x軸Xbsについて回転する、すなわち、スレーブフレームのx軸Xsは固定され、回転はx軸について定められると予測する可能性が高い。
図4Dに例示する動きと異なり、この実施を用いて、システム100は、マスターフレーム340におけるアイフレーム330の相対的な動きを効果的に記載する。何故ならば、マスターフレーム340は本体固定フレームと考えられ、スレーブ側で同じ関係を維持するからである。本体固定マスターx軸Xbmについての回転は、図5Bに例示するように、本体固定スレーブx軸Xbsについての回転を所望に生成する。
図5A及び図5Bに示すように、コントローラ150によって生成されるスレーブ手術器具先端の所望の向きcRs_desは、マスターツールグリップ230とスレーブ手術器具先端312Tとの間にスウーピング向き不整列があるときでさえも、マスターツールグリップ230(図5A)とスレーブ手術器具先端312T(図5B)との間の同じ知覚される回転を維持する。ここで、マスターツールグリップ230の回転は、Xe−Ye平面内にあるものとして知覚され、スレーブ手術器具先端312Tの回転は、マスターツールグリップ230の知覚された動きがスレーブ手術器具先端312Tの知覚される動きと同じであるよう、対応するXc−Yc平面内にあるものとして知覚される。
より一般的には、コントローラ150によって生成されるスレーブ手術器具先端の所望の向きcRs_desは、マスターツールグリップ230(図5A)とスレーブ手術器具先端312Tとの間の同じ知覚される回転を維持する。前に説明したように、同じ知覚される回転は、マスターツールグリップの回転がマスターツールグリップの本体固定軸の周りにあると知覚されるならば、スレーブ手術器具の回転はスレーブ手術器具先端の本体固定軸の周りにあると知覚されることを意味する。例えば、マスターツールグリップの回転がマスターツールグリップの本体固定x軸の周りにあると知覚されるならば、スレーブ手術器具の回転はスレーブ手術器具先端の対応する本体固定x軸の周りにあると知覚され、或いは、マスターツールグリップの回転がマスターツールグリップの本体固定y軸の周りにあると知覚されるならば、スレーブ手術器具の回転はスレーブ手術器具先端の対応する本体固定y軸の周りにあると知覚され、マスターツールグリップの回転がマスターツールグリップの本体固定z軸の周りにあると知覚されるならば、スレーブ手術器具の回転はスレーブ手術器具先端の対応する本体固定z軸の周りにあると知覚される。
x軸の周りの回転が図4A乃至図4Dに示されているが、y軸の周りの回転及びz軸の周りの回転について同じ挙動が従来的なシステム及びシステム100において見られる。よって、本明細書における説明は、ピッチ、ヨー、及びロールの各々に当て嵌まる。しかしながら、y軸及びz軸の各々についての記述及び例示は提示されない。何故ならば、それはx軸に関する記述と重複するからである。当業者は、軸の各々について図4A乃図4D並びに図5A及び図5Bの記述の反復がなくても、y軸及びz軸についての回転への適用を理解する。
それにも拘わらず、別の例が提示される。先行技術のシステムでは、追従に入る前に、アイフレーム330内のマスターフレーム340のz軸Zmとカメラフレーム310内のスレーブフレーム320のz軸Zsとの間に向き不整合がある。具体的には、マスターフレーム340のz軸Zmは、アイフレーム330のz軸Zeと一致するのに対し、スレーブフレーム320のz軸Zsは、カメラフレーム310のz軸Zcから変位させられる。スレーブフレーム320のz軸Zsは、Yc−Zc平面内にある。
上で説明したように、従来的なシステムでは、マスターフレーム340の軸とスレーブフレーム320の軸は、空間固定される(spaced fixed)。よって、従来的なシステムにおいて、マスターフレーム340のz軸Zmは、間固定軸Zsmであり、スレーブフレーム320のz軸Zsは、空間固定z軸Zssである。
ひとたび追従に入ると、外科医は、図5Cに例示するように、マスターツールグリップを回転させる。その回転は、Ze−Ye平面内の空間固定されたz軸Zsmについてである。アイフレーム内の空間固定軸Zsmについてのマスターツールグリップの回転は、カメラフレーム内の同じ空間固定軸Zssについてのスレーブ手術器具先端の回転をもたらす。向きオフセットが大きいことが許容されるとき、マスターツールグリップの指示方向についてのマスターツールグリップの回転は、スレーブビューフレーム上に投影されるマスター指向方向についての円形のスレーブ手術器具先端の動きをもたらし得る。しかしながら、外科医は、スレーブ手術器具先端がZc−Yc平面内でそのz軸Zssについて回転すると予測する可能性が高い。
スウーピング向き不整列を用いて、先行技術のシステムは、今しがた記載したマスターツールグリップの回転に応答して、所望のスレーブ向きcRs_desを依然として決定する。初期的な大きな向きの変異の故に、スレーブ手術器具先端は、予想通りに回転しない。何故ならば、相対的に回転がスレーブ手術器具先端に加えられると、スレーブ手術器具先端の回転は、もはやZc−Yc平面内にないからである。Zc−Yc平面内で回転するのでなく、スレーブ手術器具先端は、むしろカメラフレーム310の円形の経路501に沿って回転する。スウーピング向き不整列の故に、スレーブ手術器具の回転の経路は、経路501によって示すように、軸Zcから変位させられる。
よって、この例において、マスターツールグリップの空間固定軸Zsmについてマスターツールグリップを回転させる知覚された動きは、対応する軸Zcについて回転する手術器具先端の知覚された動きをもたらさない。むしろ、今しがた述べたように、スレーブ手術器具先端の動きは、円形の経路501に沿う。円形の経路501は、Zc−Yc平面に対して垂直な平面内にある。故に、従来的なシステムにおけるスウーピング向き不整列について、マスターツールグリップの知覚される回転及びスレーブ手術器具先端の知覚される回転は同じでない。
より一般的には、前に説明したように、アイフレームの空間固定軸についてのマスターツールグリップの回転は、カメラフレーム内の同じ空間固定軸についてのスレーブ手術器具先端の回転をもたらす。向きオフセットが大きいことが許容されるとき、マスターツールグリップの指向方向についてのマスターツールグリップの回転は、従来的なシステムのスレーブビューフレームに投影されるマスター指向方向についての円形のスレーブ手術器具先端の動きをもたらし得る。
図5Dに例示する動きと異なり、この実施を用いるならば、システム100は、マスターフレーム340におけるアイフレーム330の相対的な動きを効果的に記載する。何故ならば、マスターフレーム340は本体固定フレームと考えられ、スレーブ側で同じ関係を維持するからである。本体固定z軸Zbmについての回転は、図5Fに例示するように、本体固定スレーブz軸についての回転を所望に生成する。
図5E及び図5Fに示すように、コントローラ150によって生成されるスレーブ手術器具先端の所望の向きcRs_desは、マスターツールグリップ230とスレーブ手術器具先端312Tとの間にスウーピング向き不整列があるときでも、マスターツールグリップ230(図5E)とスレーブ手術器具先端312T(図5F)との間の同じ知覚される回転を維持する。ここで、マスターツールグリップ230の回転は、Ze−Ye平面内にあるものとして知覚され、スレーブ手術器具先端312Tの回転は、マスターツールグリップ230の知覚される動きがスレーブ手術器具先端312Tの知覚される動きと同じであるよう、対応するZc−Yc平面内にあるものとして知覚される。
図6は、コントローラ150によって実行されるプロセス600の1つの態様についてのより詳細なプロセスフロー図である。議論の容易さのために、プロセス600は、線形プロセスとして示されている。これは例示的であるに過ぎず、限定的であることを意図しない。以下の開示を考慮して、プロセス600は、以下に記載するように実施されることができ、或いは、代替的に、例えば、行為の一部又は全部が並行して実行された状態で実施されることができる。
ユーザ、典型的には、外科医が、外科医コンソール114でセッションを先ず開始すると、マスター−スレーブ整列プロセス250が開始させられる。マスター−スレーブ整列プロセス250は、遠隔操作サーボコントローラ160に含められるマスター−スレーブ整列モジュール132によって実施される。遠隔操作サーボコントローラ160は、コントローラ150に含められる。よって、マスター−スレーブ整列プロセス250に関して以下に記載する行為の各々は、コントローラ150によって実行されるので、遠隔操作サーボコントローラの明示は任意的である。
マスター−スレーブ整列プロセス250のマスターツール位置決めプロセス610は、従来的なシステムにおけるプロセスと等しい。スレーブ手術器具先端312Tの場所(位置及び向き)はカメラフレーム310内で決定され、次に、マスターツール位置決めプロセス610が遠隔操作サーボコントローラ160に命令を送信して、マスターツールグリップ230をアイフレーム330内の対応する所望の場所(位置及び向き)に移動させる。これが1つの態様においてどのように行われるかについての背景技術の上記記載を参照のこと。
しかしながら、外科医がマスターツールグリップ230を強く握り過ぎるならば、遠隔操作サーボコントローラ160は、マスターツールグリップ230を所望の場所に動かさないことがある。よって、この場合には、アイフレーム330内のマスターツールグリップ230の場所とカメラフレーム310内のスレーブ手術器具先端312Tの場所との間に不整合がある。マスターツールを位置決めするプロセス610がひとたび完了すると、処理は、マスター−スレーブ整列プロセス250におけるスウーピング向き誤差許容可能確認プロセス620に移る。
スウーピング向き誤差許容可能確認プロセス620は、カメラフレーム310内のスレーブ手術器具先端312Tとアイフレーム330内のマスターツールグリップ230との間の任意の向き不整列が、最大の許容される向き不整列以下であるか否か、すなわち、最大の許容されるスウーピング向き誤差以下であるか否かを決定する。最大の向き不整列が数度以下であることを必要とする従来技術のシステムと異なり、向き整列の制限は有意に緩和される。
1つの態様では、2つの要因を用いて最大の許容されるスウーピング向き不整列を選択する。第1の要因は、マスター−スレーブ整列プロセス250が繰り返される間に、手術システム100の殆どのユーザが待つことを強制されないのに十分な程に、最大の許容されるスウーピング向き不整列を大きくすることである。第2の要因は、外科医による様々な軸についての動きの間の混同を避けるために、最大の許容されるスウーピング向き不整列を選択することである。例えば、最大の許容されるスウーピング向き不整列が90度であるならば、マスターツールグリップのヨー運動は、スレーブ手術器具先端のピッチ運動として現れ、それは外科医にとって紛らわしい可能性が最も高い。
例えば、多くの未経験のユーザに手術システム100を使用させ、マスター−スレーブ整列プロセス250の完了後の最大の向き不整列を決定させることによって、第1の要因を決定することができる。経験の少ないユーザは、マスターツールグリップを最も強く握る傾向があり、それはより大きな向き不整列をもたらす傾向があることが観察された。実験が示したことは、約50度の最大の許容されるスウーピング向き不整列が、様々な軸についての動きの間で混乱をもたらさないことである。
しかしながら、50度の使用は例示的であるに過ぎず、限定的であることを意図しない。この開示を考慮すると、当業者は手術システム100のユーザに適した最大の許容される向き不整列を選択し得る。例えば、ある状況において、最大の許容される向きは60度以上に延ばされてよいが、手術システム100の全てのユーザが経験豊富なユーザである状況において、最大の許容されるスウーピング向きは30度以下に下げられてよい。
いずれの場合においても、最大の許容されるスウーピング向き誤差は、従来的なシステムの最大の許容される小さな向き不整列よりも大きい。ここで、スウーピング向き不整列は、以下のように定められる。スウーピング向き不整列は、カメラフレーム内のスレーブ手術器具先端の所望のスレーブ向きcRs_desが以下のように定められるときのような向き不整列である。
Figure 2019122871
アイフレーム330内のマスターツールグリップ230の指向方向についてのマスターツールグリップ230の回転は、スレーブビューフレームに投影されるマスター指向方向についてのユーザに知覚できる円内を動く、スレーブ手術器具先端312Tをもたらす。この所望のスレーブ向きcRs_desの定義が使用され、最大の許容されるスウーピング向き不整列が従来技術の小さな不整列に限定されるとき、手術器具先端312Tのあらゆる円形の動きは、ユーザによって知覚されない。
よって、スウーピング向き不整列は、従来的な最大の許容される小さな向き不整列よりも大きい。この定義は、追従に入るために許容される不整列を得るために、新しい最大の許容されるスウーピング向き不整列がマスター−スレーブ整列プロセス250の反復回数を制限するという事実と一致する。本明細書では、最大の許容される向き不整列を従来的なシステムの最大の許容される小さな向き不整列から区別するために、システム100の最大の許容される向き不整列を最大の許容されるスウーピング向き誤差(maximum permitted swooping orientation error)と呼ぶ。
1つの態様では、上述のように、スウーピング向き誤差許容可能確認プロセス620は、アイフレーム330内のマスターツールグリップ230とカメラフレーム310内のスレーブ手術器具との間のいずれかの向き不整列が最大の許容される向き誤差以下であるか否かを決定する。スウーピング向き誤差許容可能確認プロセス620は、先ず、向き不整列の不整列角を以下のように決定する。
Figure 2019122871
Figure 2019122871
ここで、acosは、逆余弦関数である。向き不整列の不整列角が最大の許容されるスウーピング向き誤差以下であるならば、スウーピング向き誤差許容可能確認プロセス620は、処理を場所格納プロセス630(STORE LOCATIONS process)に移し、さもなければ、スウーピング向き誤差許容可能確認プロセス620は、処理をマスターツール位置決めプロセス610に戻す。よって、1つの態様では、向き不整列の向き不整列角が50度以下であるならば、スウーピング向き誤差許容可能確認プロセス620は、処理を場所格納プロセス630に移す。
プロセス630と呼ぶことがある場所格納プロセス630(STORE ORIENTATIONS process)は、1つの態様において、向き格納プロセス260を含む。1つの態様において、場所格納プロセス630は、記憶装置モジュール261によって実施される。
1つの態様では、先ず、eRm’を転置してmRe’を得て、次に、マスターツールグリップ230の場所Lm(ePm’,mRe’)をメモリ265に格納し、スレーブ手術器具先端312Tの場所Ls(cPs’,cRs’)をメモリ265に格納する。格納場所プロセス630がひとたび完了すると、追従が有効にされ、追従プロセス690に入る。
1つの態様において、追従プロセス690は、遠隔操作サーボコントローラ160に含められる追従モジュール130によって実施される。遠隔操作サーボコントローラ160は、コントローラ150に含められる。よって、追従プロセス690に関して以下に記載する行為の各々は、コントローラ150によって実行される。
追従プロセス690において、追従が有効にされるならば、追従有効化確認プロセス270(FOLLOWING ENABLED check process)が、マスターツールマニピュレータからの各マスター動作命令133を新しいスレーブ位置生成プロセス660に伝え、さもなければ、何もしない。
プロセス660と呼ぶことがある新しいスレーブ位置生成プロセス660は、カメラフレーム310内のスレーブ手術器具先端312Tの新しい所望の位置cPs_desを決定する。マスター動作命令133は、眼座標フレーム330(eye coordinate frame)内のマスターツールグリップ230の位置ePmを含む。マスターツールグリップ230の位置における相対的な位置変化Δを決定するために、格納された位置ePm’がプロセス660によってメモリ265から取り出され、位置ePmから減算される。即ち、以下の通りである。
Figure 2019122871
ここで、Δは、3×1行列である。新しい所望の位置cPs_desは、以下の通りである。
Figure 2019122871
新しい所望の位置cPs_desの決定後、新しいスレーブ位置生成プロセス660が新しいスレーブ向き生成プロセス280に移る。
プロセス280と呼ぶことがある新しいスレーブ向き生成プロセス280は、カメラフレーム310内のスレーブ手術器具先端312Tの新しい所望の向きcRs_desを決定する。上述の通り、以下の通りである。
Figure 2019122871
Figure 2019122871
よって、新しいスレーブ向き生成プロセス280は、格納された向きmRe’と格納された向きcRs’を取り出し、次に、向きcRs’、mRe’、及びeRmを互いに乗算して、新しい所望の向きcRs_desを生成する。図5A及び図5Bに関して説明したように、コントローラ150によって生成されるスレーブ手術器具先端の所望の向きcRs_desは、マスターツールグリップ230とスレーブ手術器具先端312Tとの間にスウーピング向き不整列があるときでさえも、マスターツールグリップ230とスレーブ手術器具先端312Tとの間の同じ知覚される回転を維持する。新しい所望の向きcRs_desの決定後、新しいスレーブ向き生成プロセス280は、スレーブ動作命令送信プロセス290に移行する。
新しいスレーブ向き生成プロセス280がカメラフレーム内のスレーブ手術器具先端の所望の向きcRs_desを生成した後、スレーブ動作命令送信プロセス290は、所望の位置cPs_desを含む命令135と呼ぶことがあるスレーブ動作命令135を、スレーブ手術器具マニピュレータ222に送信する。命令135に応答して、スレーブ手術器具マニピュレータ222は、スレーブ手術器具112の手術器具先端312Tを所望の場所に移動させる。この態様では、スレーブ動作命令135の送信後、スレーブ動作命令送信プロセス290は、追従無効化確認プロセス640(FOLLOWING DISABLED check process)に移行する。
追従がシステム100によって無効にされるならば、追従無効化確認プロセス640は、大きな向き誤差許容可能確認プロセス620に移行し、さもなければ、新しいスレーブ位置生成プロセス660に戻る。追従無効化確認プロセス640は、処理がプロセス690によって実行されるサイクル毎に無効にされたか否かを決定するためにポーリングすることがプロセス690によって要求されていると解釈されてならない。例えば、追従プロセス690は、イベントハンドラが追従無効化イベントを受信し、次にイベントハンドラが追従プロセス690を無効化するまで、可能にされ得る。
本発明の態様及び実施形態を例示する上記の記述及び添付の図面は限定として理解されてならない。請求項が保護される発明を定義する。この記述及び請求項の精神及び範囲から逸脱することなく、様々な機械的、構成的、構造的、電気的、及び動作的な変更が行われてよい。幾つかの場合には、本発明の態様を曖昧にするのを避けるために、周知の回路、構造、及び技法は詳細に示されず或いは記載されない。
更に、この記述の用語は、本発明を限定することを意図しない。例えば、「下」(“beneath”)、「下」(“below”)、「下方」(“lower”)、「上」(“above”)、「上方」(“upper”)、「近位」(“proximal”)、「遠位」(“distal”)等のような、空間的に相対的な用語は、図に例示するような他の要素又は構成に対する1つの要素又は構成の関係を記載するために用いられることがある。これらの空間的に相対的な用語は、図に示す位置及び向きに加えて、使用中又は動作中のデバイスの異なる位置及び向きを包含することが意図されている。例えば、図中の装置が逆にされるならば、他の要素又は構成の「下」(“below”)又は「下」(“beneath”)に記載する要素は、他の要素又は構成の「上」(“above”)又は「上」(“over”)にある。よって、例示的な用語「下」(“below”)は、上(above)及び下(below)の両方の位置及び向きを包含し得る。デバイスは、他の方向に向けられてよく(90度又は他の向きに回転されてよく)、本明細書で使用される空間的に相対的な記述子は相応して解釈される。
単数形「a」、「an」、及び「the」は、文脈が他を示さない限り、複数形も含むことを意図する。「含む」(“comprises”)、「含む」(“comprising”)、「含む」(“includes”)等は、述べられる構成、ステップ、動作、要素、及び/又はコンポーネントの存在を特定するが、1つ又はそれよりも多くの他の構成、ステップ、動作、要素、コンポーネント、及び/又は群の存在又は追加を排除しない。
全ての例及び例示的な参考文献は非限定的であり、請求項を本明細書に記載される特定の実施及び実施形態並びにそれらの均等物に限定するために用いられてならない。あらゆる見出しは専ら書式化のためであり、主題を制限するために決して用いられてならない。何故ならば、1つの見出しの下にある文章(text)は、1つ又はそれよりも多くの見出しの下にある文章を相互参照することがあり、或いはそれに当て嵌まることがあるからである。最後に、この開示を考慮して、1つの態様又は実施形態に関連して記載される特定の構成は、たとえ図面に具体的に示されていないか或いは文章に具体的に記載されていないとしても、本発明の他の開示の態様又は実施形態に適用されてよい。
メモリは統一的な構造として例示されているが、これは全てのメモリが同じ物理的場所にあることを必要とするものとして解釈されてならない。メモリの全部又は部分は、プロセッサと異なる物理的場所にあり得る。メモリは、揮発性メモリ、不揮発性メモリ、又はそれらの2つの任意の組み合わせを指す。
プロセッサは、プロセッサによって実行される指令を含むメモリに連結される。これはコンピュータシステム内で達成されることができ、或いは、代替的に、モデム及びアナログ回線、又はデジタルインターフェース及びデジタル搬送回線を介した他のコンピュータへの接続を介して達成されることができる。
本明細書において、コンピュータプログラム製品は、本明細書に記載の方法及び/又はプロセスの任意の1つ又は任意の組み合わせに必要とされるコンピュータ可読コードを格納するように構成された媒体を含み、或いは、本明細書に記載の方法及び/又はプロセスの任意の1つ又は任意の組み合わせのためのコンピュータ可読媒体は、コンピュータプログラム製品内に格納される。コンピュータプログラム製品の幾つかの例は、CD−ROMディスク、DVDディスク、フラッシュメモリ、ROMカード、フロッピーディスク、磁気テープ、コンピュータハードドライブ、ネットワーク上のサーバ、及びコンピュータ可読プログラムコードを表すネットワークを通じて送信される信号である。有形のコンピュータプログラム製品は、本明細書に記載の方法及び/又はプロセスの任意の1つ又は任意の組み合わせのためのコンピュータ可読指令を格納するように構成される媒体を含み、或いは、本明細書に記載の方法及び/又はプロセスの任意の1つ又は任意の組み合わせのためのコンピュータ可読指令が、有形のコンピュータプログラム製品に格納される。有形のコンピュータプログラム製品は、CD−ROMディスク、DVDディスク、フラッシュメモリ、ROMカード、フロッピーディスク、磁気テープ、コンピュータハードドライブ及び他の物理的記憶媒体である。
この開示を考慮して、本明細書に記載の方法及び/又はプロセスの任意の1つ又は任意の組み合わせのための命令は、ユーザの関心のコンピュータプログラミング言語及びオペレーティングシステムを用いる多種多様なコンピュータシステム構成において実装され得る。

Claims (1)

  1. 追従モードに入る前に、アイフレーム内のマスターツールグリップの軸の向きとカメラフレーム内のスレーブ器具先端の対応する軸の向きとの間の相対的な向きを決定するステップと、
    前記追従モードに入った後に、前記マスターツールグリップの前記軸の前記向きと前記スレーブ器具先端の前記対応する軸の前記向きとの間の向き不整列が、最大許容向き誤差よりも大きいか否かを決定するステップと、
    該決定に応答して、
    前記マスターツールグリップから命令を受信して前記スレーブ器具先端を移動させるステップであって、前記命令は、前記スレーブ器具先端の所望の向きを示す、ステップと、
    前記スレーブ器具先端の前記所望の向きと前記相対的な向きとに基づいて新しいスレーブ向きを生成するステップと、
    該新しいスレーブ向きに基づいて前記スレーブ器具先端を方向付けるステップとを含む、
    方法。
JP2019090638A 2015-06-10 2019-05-13 不整列時のマスターとスレーブと間の向きマッピング Active JP6843180B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201562173844P 2015-06-10 2015-06-10
US62/173,844 2015-06-10

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2017556742A Division JP6552642B2 (ja) 2015-06-10 2016-06-10 不整列時のマスターとスレーブと間の向きマッピング

Publications (2)

Publication Number Publication Date
JP2019122871A true JP2019122871A (ja) 2019-07-25
JP6843180B2 JP6843180B2 (ja) 2021-03-17

Family

ID=57504239

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2017556742A Active JP6552642B2 (ja) 2015-06-10 2016-06-10 不整列時のマスターとスレーブと間の向きマッピング
JP2019090638A Active JP6843180B2 (ja) 2015-06-10 2019-05-13 不整列時のマスターとスレーブと間の向きマッピング

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2017556742A Active JP6552642B2 (ja) 2015-06-10 2016-06-10 不整列時のマスターとスレーブと間の向きマッピング

Country Status (6)

Country Link
US (3) US10524871B2 (ja)
EP (2) EP3307198B1 (ja)
JP (2) JP6552642B2 (ja)
KR (3) KR102512881B1 (ja)
CN (2) CN113397709A (ja)
WO (1) WO2016201207A1 (ja)

Families Citing this family (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9566414B2 (en) 2013-03-13 2017-02-14 Hansen Medical, Inc. Integrated catheter and guide wire controller
US9283046B2 (en) 2013-03-15 2016-03-15 Hansen Medical, Inc. User interface for active drive apparatus with finite range of motion
US10849702B2 (en) 2013-03-15 2020-12-01 Auris Health, Inc. User input devices for controlling manipulation of guidewires and catheters
US11020016B2 (en) 2013-05-30 2021-06-01 Auris Health, Inc. System and method for displaying anatomy and devices on a movable display
WO2015088647A1 (en) 2013-12-11 2015-06-18 Covidien Lp Wrist and jaw assemblies for robotic surgical systems
EP2923669B1 (en) 2014-03-24 2017-06-28 Hansen Medical, Inc. Systems and devices for catheter driving instinctiveness
WO2016025134A2 (en) 2014-08-13 2016-02-18 Covidien Lp Robotically controlling mechanical advantage gripping
US10159536B2 (en) 2015-01-09 2018-12-25 Titan Medical Inc. Alignment difference safety in a master-slave robotic system
CN114052918A (zh) 2015-02-19 2022-02-18 柯惠Lp公司 机器人手术系统的输入装置的重定位方法
US10716639B2 (en) 2015-03-10 2020-07-21 Covidien Lp Measuring health of a connector member of a robotic surgical system
EP3302335A4 (en) 2015-06-03 2019-02-20 Covidien LP OFFSET INSTRUMENT DRIVE UNIT
CN113397709A (zh) 2015-06-10 2021-09-17 直观外科手术操作公司 当错开时的主从取向映射
JP6761822B2 (ja) 2015-06-16 2020-09-30 コヴィディエン リミテッド パートナーシップ ロボット外科用システムトルク変換検知
JP6719487B2 (ja) 2015-06-23 2020-07-08 コヴィディエン リミテッド パートナーシップ ロボット外科手術アセンブリ
EP3352699B1 (en) 2015-09-25 2023-08-23 Covidien LP Robotic surgical assemblies and instrument drive connectors thereof
ITUB20154977A1 (it) 2015-10-16 2017-04-16 Medical Microinstruments S R L Strumento medicale e metodo di fabbricazione di detto strumento medicale
EP3364907B1 (en) 2015-10-23 2021-06-02 Covidien LP Surgical system for detecting gradual changes in perfusion
EP3376988B1 (en) 2015-11-19 2023-08-23 Covidien LP Optical force sensor for robotic surgical system
US11576562B2 (en) 2016-04-07 2023-02-14 Titan Medical Inc. Camera positioning method and apparatus for capturing images during a medical procedure
CA3022139A1 (en) 2016-05-26 2017-11-30 Covidien Lp Instrument drive units
AU2017269262B2 (en) 2016-05-26 2021-09-09 Covidien Lp Robotic surgical assemblies
CN114504387A (zh) 2016-06-03 2022-05-17 柯惠Lp公司 用于机器人手术系统的被动轴系统
EP3463163A4 (en) 2016-06-03 2020-02-12 Covidien LP ROBOTIC SURGICAL SYSTEM WITH AN EMBEDDED IMAGER
US11446099B2 (en) 2016-06-03 2022-09-20 Covidien Lp Control arm for robotic surgical systems
WO2017210497A1 (en) 2016-06-03 2017-12-07 Covidien Lp Systems, methods, and computer-readable program products for controlling a robotically delivered manipulator
US11037464B2 (en) * 2016-07-21 2021-06-15 Auris Health, Inc. System with emulator movement tracking for controlling medical devices
WO2018152141A1 (en) 2017-02-15 2018-08-23 Covidien Lp System and apparatus for crush prevention for medical robot applications
EP3629979A4 (en) 2017-05-24 2021-02-17 Covidien LP PRESENCE DETECTION FOR ELECTROSURGICAL TOOLS IN A ROBOTIC SYSTEM
EP3629981A4 (en) 2017-05-25 2021-04-07 Covidien LP SYSTEMS AND METHODS FOR DETECTION OF OBJECTS WITHIN A FIELD OF VIEW OF AN IMAGE CAPTURING DEVICE
CN110662507A (zh) 2017-05-25 2020-01-07 柯惠Lp公司 具有自动引导的机器人手术系统
US11510747B2 (en) 2017-05-25 2022-11-29 Covidien Lp Robotic surgical systems and drapes for covering components of robotic surgical systems
AU2018328098A1 (en) 2017-09-05 2020-03-19 Covidien Lp Collision handling algorithms for robotic surgical systems
US11583358B2 (en) 2017-09-06 2023-02-21 Covidien Lp Boundary scaling of surgical robots
US10145747B1 (en) * 2017-10-10 2018-12-04 Auris Health, Inc. Detection of undesirable forces on a surgical robotic arm
KR20230142642A (ko) * 2017-11-16 2023-10-11 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 원격조작을 위한 마스터/슬레이브 정합 및 제어
WO2019103954A1 (en) 2017-11-21 2019-05-31 Intuitive Surgical Operations, Inc. Systems and methods for master/tool registration and control for intuitive motion
CN110831534B (zh) 2017-12-08 2023-04-28 奥瑞斯健康公司 用于医疗仪器导航和瞄准的系统和方法
WO2019136062A1 (en) 2018-01-04 2019-07-11 Covidien Lp Systems and assemblies for mounting a surgical accessory to robotic surgical systems, and providing access therethrough
US11189379B2 (en) 2018-03-06 2021-11-30 Digital Surgery Limited Methods and systems for using multiple data structures to process surgical data
AU2019232675B2 (en) 2018-03-08 2020-11-12 Covidien Lp Surgical robotic systems
EP3781367A4 (en) 2018-04-20 2022-04-20 Covidien LP SYSTEMS AND METHODS FOR POSITIONING A SURGICAL ROBOT CARRIAGE
EP3781073A4 (en) 2018-04-20 2022-01-26 Covidien LP COMPENSATION OF OBSERVER MOTION IN ROBOTIC SURGICAL SYSTEMS WITH STEREOSCOPIC DISPLAYS
IT201800005471A1 (it) 2018-05-17 2019-11-17 Sistema robotico per chirurgia, particolarmente microchirurgia
EP3793465A4 (en) 2018-05-18 2022-03-02 Auris Health, Inc. CONTROL DEVICES FOR ROBOTIC ACTIVATION REMOTE CONTROL SYSTEMS
EP3817683A4 (en) 2018-07-03 2022-04-20 Covidien LP SYSTEMS, METHODS AND COMPUTER READABLE MATERIALS FOR DETECTING IMAGE DEGRADATION DURING SURGICAL PROCEDURES
CN112739282A (zh) 2018-09-17 2021-04-30 柯惠Lp公司 手术机器人系统
CN109223183A (zh) * 2018-09-30 2019-01-18 深圳市精锋医疗科技有限公司 手术机器人的启动方法、可读取存储器及手术机器人
CN111012511B (zh) * 2018-10-09 2021-06-18 成都博恩思医学机器人有限公司 一种腹腔镜手术机器人的手术器械控制方法
US11109746B2 (en) 2018-10-10 2021-09-07 Titan Medical Inc. Instrument insertion system, method, and apparatus for performing medical procedures
US11586106B2 (en) 2018-12-28 2023-02-21 Titan Medical Inc. Imaging apparatus having configurable stereoscopic perspective
US11717355B2 (en) 2019-01-29 2023-08-08 Covidien Lp Drive mechanisms for surgical instruments such as for use in robotic surgical systems
US11576733B2 (en) 2019-02-06 2023-02-14 Covidien Lp Robotic surgical assemblies including electrosurgical instruments having articulatable wrist assemblies
US11484372B2 (en) 2019-02-15 2022-11-01 Covidien Lp Articulation mechanisms for surgical instruments such as for use in robotic surgical systems
US11872007B2 (en) 2019-06-28 2024-01-16 Auris Health, Inc. Console overlay and methods of using same
IT202000002548A1 (it) 2020-02-10 2021-08-10 Medical Microinstruments Spa Assieme di chirurgia robotica, arena operatoria e metodo
CN111857038A (zh) * 2020-06-28 2020-10-30 上海中船三井造船柴油机有限公司 一种机架在数控龙门铣床上的参数化加工方法
USD963851S1 (en) 2020-07-10 2022-09-13 Covidien Lp Port apparatus
US20240108427A1 (en) * 2021-03-11 2024-04-04 Covidien Lp Surgical robotic system for realignment of wristed instruments
US11948226B2 (en) 2021-05-28 2024-04-02 Covidien Lp Systems and methods for clinical workspace simulation
CN113349939B (zh) * 2021-07-12 2023-03-21 哈尔滨思哲睿智能医疗设备股份有限公司 被动主手式主从控制手术机器人的性能测试方法及系统
WO2023185699A1 (zh) * 2022-03-26 2023-10-05 深圳市精锋医疗科技股份有限公司 一种手术机器人和控制方法
JP2024048213A (ja) * 2022-09-27 2024-04-08 川崎重工業株式会社 操作装置、手術支援システムおよび操作装置の制御方法
CN117017507B (zh) * 2023-10-09 2023-12-19 华中科技大学同济医学院附属协和医院 一种穿刺手术机器人的精密主从控制系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013510671A (ja) * 2009-11-13 2013-03-28 インテュイティブ サージカル オペレーションズ, インコーポレイテッド 低侵襲遠隔操作外科手術器具のための患者側外科医インターフェース
JP2014518775A (ja) * 2011-05-13 2014-08-07 インテュイティブ サージカル オペレーションズ, インコーポレイテッド ツールの動作を制御するのに使用されるフレームの位置及び向きの推定

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5631973A (en) * 1994-05-05 1997-05-20 Sri International Method for telemanipulation with telepresence
US5855583A (en) * 1996-02-20 1999-01-05 Computer Motion, Inc. Method and apparatus for performing minimally invasive cardiac procedures
US6364888B1 (en) * 1996-09-09 2002-04-02 Intuitive Surgical, Inc. Alignment of master and slave in a minimally invasive surgical apparatus
US6843793B2 (en) * 1998-02-24 2005-01-18 Endovia Medical, Inc. Surgical instrument
US6468265B1 (en) * 1998-11-20 2002-10-22 Intuitive Surgical, Inc. Performing cardiac surgery without cardioplegia
US6799065B1 (en) * 1998-12-08 2004-09-28 Intuitive Surgical, Inc. Image shifting apparatus and method for a telerobotic system
US6424885B1 (en) 1999-04-07 2002-07-23 Intuitive Surgical, Inc. Camera referenced control in a minimally invasive surgical apparatus
US10820949B2 (en) * 1999-04-07 2020-11-03 Intuitive Surgical Operations, Inc. Medical robotic system with dynamically adjustable slave manipulator characteristics
US8079950B2 (en) * 2005-09-29 2011-12-20 Intuitive Surgical Operations, Inc. Autofocus and/or autoscaling in telesurgery
US7689320B2 (en) * 2005-12-20 2010-03-30 Intuitive Surgical Operations, Inc. Robotic surgical system with joint motion controller adapted to reduce instrument tip vibrations
US7741802B2 (en) * 2005-12-20 2010-06-22 Intuitive Surgical Operations, Inc. Medical robotic system with programmably controlled constraints on error dynamics
WO2007111749A2 (en) * 2005-12-20 2007-10-04 Intuitive Surgical, Inc. Method for handling an operator command exceeding a medical device state limitation in a medical robotic system
US8620473B2 (en) * 2007-06-13 2013-12-31 Intuitive Surgical Operations, Inc. Medical robotic system with coupled control modes
US8473031B2 (en) * 2007-12-26 2013-06-25 Intuitive Surgical Operations, Inc. Medical robotic system with functionality to determine and display a distance indicated by movement of a tool robotically manipulated by an operator
US8864652B2 (en) * 2008-06-27 2014-10-21 Intuitive Surgical Operations, Inc. Medical robotic system providing computer generated auxiliary views of a camera instrument for controlling the positioning and orienting of its tip
US8423186B2 (en) * 2009-06-30 2013-04-16 Intuitive Surgical Operations, Inc. Ratcheting for master alignment of a teleoperated minimally-invasive surgical instrument
IT1401669B1 (it) * 2010-04-07 2013-08-02 Sofar Spa Sistema di chirurgia robotizzata con controllo perfezionato.
JP5612971B2 (ja) * 2010-09-07 2014-10-22 オリンパス株式会社 マスタスレーブマニピュレータ
SG11201507613QA (en) * 2013-03-15 2015-10-29 Synaptive Medical Barbados Inc Intelligent positioning system and methods therefore
US9827054B2 (en) * 2014-03-14 2017-11-28 Synaptive Medical (Barbados) Inc. Intelligent positioning system and methods therefore
DE102013110847B3 (de) 2013-10-01 2015-01-22 gomtec GmbH Steuervorrichtung und Verfahren zum Steuern eines Robotersystems mittels Gestensteuerung
WO2016137527A1 (en) * 2015-02-24 2016-09-01 Sri International Hyperdexterous system user interface
CN113397709A (zh) 2015-06-10 2021-09-17 直观外科手术操作公司 当错开时的主从取向映射

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013510671A (ja) * 2009-11-13 2013-03-28 インテュイティブ サージカル オペレーションズ, インコーポレイテッド 低侵襲遠隔操作外科手術器具のための患者側外科医インターフェース
JP2014518775A (ja) * 2011-05-13 2014-08-07 インテュイティブ サージカル オペレーションズ, インコーポレイテッド ツールの動作を制御するのに使用されるフレームの位置及び向きの推定

Also Published As

Publication number Publication date
EP3307198B1 (en) 2022-11-16
US20210322117A1 (en) 2021-10-21
KR102653344B1 (ko) 2024-04-02
KR102512881B1 (ko) 2023-03-23
JP2018515198A (ja) 2018-06-14
US10524871B2 (en) 2020-01-07
US20180078321A1 (en) 2018-03-22
CN107735225A (zh) 2018-02-23
KR20180006922A (ko) 2018-01-19
US11083532B2 (en) 2021-08-10
US20200085522A1 (en) 2020-03-19
EP4159153A1 (en) 2023-04-05
EP3307198A1 (en) 2018-04-18
CN113397709A (zh) 2021-09-17
CN107735225B (zh) 2021-07-06
KR20230042405A (ko) 2023-03-28
KR20240042571A (ko) 2024-04-02
JP6552642B2 (ja) 2019-07-31
EP3307198A4 (en) 2019-01-09
WO2016201207A1 (en) 2016-12-15
JP6843180B2 (ja) 2021-03-17

Similar Documents

Publication Publication Date Title
JP6843180B2 (ja) 不整列時のマスターとスレーブと間の向きマッピング
US11179221B2 (en) Medical device with active brake release control
US11130231B2 (en) System and method for instrument disturbance compensation
KR102252641B1 (ko) 모드 전환 시의 진동을 감쇠시키기 위한 명령 성형
Mitsuishi et al. Master–slave robotic platform and its feasibility study for micro‐neurosurgery
US10485616B2 (en) Hybrid robotic surgery with power assisted motion
US10758313B2 (en) Controlling roll for a device in a computer-assisted medical system
JP2017514542A (ja) 基準目標に合わせるシステム及び方法
US9872738B2 (en) Methods, systems, and devices for control of surgical tools in a robotic surgical system
US20190125480A1 (en) Roll control based on pitch and yaw inputs for a device in a computer-assisted medical system
Zhang et al. Direct manipulation of tool‐like masters for controlling a master–slave surgical robotic system
WO2017114860A1 (en) Decoupled spatial positioning and orienting control of a remote-center-of-motion

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190611

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190611

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200519

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200817

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210216

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210222

R150 Certificate of patent or registration of utility model

Ref document number: 6843180

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250