JP7041068B6 - 剛性近位部及びフレキシブル遠位部を有するハイブリッドロボットを制御するための制御ユニット、システム、及び方法 - Google Patents

剛性近位部及びフレキシブル遠位部を有するハイブリッドロボットを制御するための制御ユニット、システム、及び方法 Download PDF

Info

Publication number
JP7041068B6
JP7041068B6 JP2018548395A JP2018548395A JP7041068B6 JP 7041068 B6 JP7041068 B6 JP 7041068B6 JP 2018548395 A JP2018548395 A JP 2018548395A JP 2018548395 A JP2018548395 A JP 2018548395A JP 7041068 B6 JP7041068 B6 JP 7041068B6
Authority
JP
Japan
Prior art keywords
flexible distal
proximal
robot
deployment path
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018548395A
Other languages
English (en)
Other versions
JP2019512315A5 (ja
JP7041068B2 (ja
JP2019512315A (ja
Inventor
アレクサンドラ ポポヴィッチ
デイビッド ポール ヌーナン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2019512315A publication Critical patent/JP2019512315A/ja
Publication of JP2019512315A5 publication Critical patent/JP2019512315A5/ja
Publication of JP7041068B2 publication Critical patent/JP7041068B2/ja
Application granted granted Critical
Publication of JP7041068B6 publication Critical patent/JP7041068B6/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B34/32Surgical robots operating autonomously
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107Visualisation of planned trajectories or target regions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2051Electromagnetic tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2055Optical tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25User interfaces for surgical systems
    • A61B2034/252User interfaces for surgical systems indicating steps of a surgical procedure
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B2034/301Surgical robots for introducing or steering flexible instruments inserted into the body, e.g. catheters or endoscopes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/374NMR or MRI
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/376Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
    • A61B2090/3762Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy using computed tomography systems [CT]

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Robotics (AREA)
  • Gynecology & Obstetrics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Pathology (AREA)
  • Endoscopes (AREA)
  • Manipulator (AREA)
  • Prostheses (AREA)

Description

低侵襲手術では、患者の体内における外科医の器用さを改善するために、操縦可能な装置がしばしば使用される。ある公知の操縦可能な装置は、遠位端に複数の関節及び腱を含み、近位端に駆動システムを含む。この装置は、さらに、ロボットポジショナを使用して位置決めされ得る。ロボットによる位置決めは、解剖学的構造に対する装置の動きの追跡を可能にする。
外科手術で使用される操縦可能な装置の別のタイプは外科用画像取得装置であり、例えば、偏向先端を有する内視鏡、又はロボット内視鏡などである。このような内視鏡は、臨床医が直視するために解剖学的構造を外科的に露出させることなく、患者の内部解剖学的構造を見ることを可能にする細長いカメラアセンブリである。内視鏡は、狭い元から存在する開口部又は皮膚における小さな切開部を通ることができ、結果として、内視鏡の補助なしの視覚化及び介入と比較して、患者に与える外傷を低減することができる。
既知の器用な装置の制御は困難である。臨床医(例えば、外科医又は他のユーザ)は、通常は支点(例えば、身体への入口地点)を中心とする繊細でない近位端の動作と、体内における複雑で繊細な動作とを組み合わせなければならない。この問題へのアプローチは操作の繊細な装置のロボットによる位置決めであるが、これは、手術室における設置面積を増大させ、また、手術の費用及び所要時間を増加させる。近位端が撮像装置の視野内にない場合、この問題はさらに悪化する(例えば、内視鏡が患者の体内でのみ画像を撮影し、Cアーム等のポータブル撮像システムの視野が装置全体を撮像するには小さすぎ、オペレータが放射線を浴びる可能性がある)。また、器用な装置で位置が達成された後、手のふるえ及び手の不随意運動により、位置ずれが生じ得る。
例えば、大動脈弁置換術は、患者の心臓弁を人工弁で置換する処置である。弁置換のための低侵襲手術は、胸部の小さな切開部を介して、患者の鼓動する心臓内に人工弁を配置することを含む。大動脈弁置換術の従来の手術は、部分的に、患者の左心室壁を通る開口部を心臓の外側から作り、開口部を通してイントロデューサシースを挿入し、バルーンカテーテルをイントロデューサシースを通して左心室に通し、プッシャー及びスリーブを使用してバルーンカテーテル及びバルーンカテーテルに取り付けられた人工弁を前進させ、人工弁を大動脈弁輪内に配置することを含む。しかし、従来の手術は、(小さい切開部における)患者の表面から、患者の肋骨間及び心臓を通り、(鼓動する心臓内の)大動脈弁に至る、弁の手動による直線的配置を前提とする。これは、いくつかの理由から非常に困難である。例えば、直線は、解剖学的環境の乏しい近似である。より詳細には、大動脈弁置換術には3つの主要な関心位置、すなわち患者進入位置、心臓進入位置、及び弁自体の位置が存在する。これらの3つの主要な位置は同一直線上に存在しない。また、直線に沿った配置は、肋骨、心筋、心臓内部の肉柱形成などの他の解剖学的特徴によって制約を受け得る。さらに、特に、視覚的フィードバックが悪く、解剖学的構造が常に動いている(例えば、心臓の鼓動及び弁のフラップ)場合、直線経路を計画するために外科医が全ての解剖学的ランドマークをマッピングすることは困難である。さらに、X線及び超音波の視野は、典型的には心臓のみを撮像するように制限されているので、心臓の外側における画像ガイドは存在しない。
したがって、医療画像及び追跡情報の組み合わせを用いて、剛性近位部及びフレキシブル遠位部を有する手術用ロボットを制御するための装置、システム、方法、及びコンピュータ可読記憶媒体を提供することが望ましい可能性がある。
ある代表的実施形態によれば、遠隔運動中心(RCM)を有する剛性近位部、フレキシブル遠位部、及び画像取得装置を備えるロボットを含むロボットシステムのための制御ユニットが提供される。前記制御ユニットはプロセッサを備え、前記プロセッサは、前記画像取得装置から画像を受け取り、前記受け取られた画像に基づき、第1の目標位置への第1の展開経路を生成し、前記受け取られた画像に基づき、前記第1の目標位置から第2の目標位置への第2の展開経路を生成し、前記第1の展開経路に沿った前記剛性近位部の配置のための第1の誘導情報を生成し、前記第2の展開経路に沿った前記フレキシブル遠位部の配置のための第2の誘導情報を生成し、前記剛性近位部を前記第1目標位置に誘導するために前記第1の誘導情報を前記剛性近位部に配備し、前記フレキシブル遠位部を前記第2の目標位置に誘導するために前記第2の誘導情報を前記フレキシブル遠位部に配備する。
他の代表的実施形態によれば、ロボットシステムはロボットと制御ユニットとを含む。前記ロボットは、遠隔運動中心(RCM)を有する剛性近位部、フレキシブル遠位部、及び少なくとも1つの画像取得装置を備える。前記制御ユニットは、前記少なくとも1つの画像取得装置から画像を受け取り、前記画像に基づき、第1の目標位置への第1の展開経路を生成し、前記画像に基づき、前記第1の目標位置から第2の目標位置への第2の展開経路を生成し、前記第1の展開経路に沿った前記剛性近位部の配置のための第1の誘導情報を生成し、前記第2の展開経路に沿った前記フレキシブル遠位部の配置のための第2の誘導情報を生成する。
他の代表的実施形態によれば、ロボットシステムを制御するためにプロセッサによって実行される機械可読命令が格納された非一時的コンピュータ可読記憶媒体が提供される。前記ロボットシステムは制御ユニットとロボットとを有し、前記ロボットは、遠隔運動中心(RCM)を有する剛性近位部、フレキシブル遠位部、及び少なくとも1つの画像取得装置を備える。前記機械可読命令は、ターゲットにアクセスするための前記ロボットの前記剛性近位部及び前記フレキシブル遠位部の制御方法を実行するように構成され、前記方法は、前記剛性近位部のための、患者の手術部位内の関心領域への第1の展開経路を生成するステップと、前記剛性近位部を、前記第1の展開経路上で前記関心領域に移動させるステップと、前記剛性近位部を通して、前記フレキシブル遠位部を展開させるステップと、前記関心領域内の前記フレキシブル遠位部の位置を追跡するステップと、前記フレキシブル遠位部のための、前記ターゲットへの第2の展開経路を生成するステップと、前記フレキシブル遠位部を、前記第2の展開経路上で前記ターゲットまで移動させるステップとを含む。
添付図面と併せて以下の詳細な説明を読むことにより、代表的実施形態が最も良く理解されるであろう。各種の特徴は必ずしも縮尺通りに描かれているわけではないことに留意されたい。実際には、寸法は、議論の明瞭化のために任意に増減されている可能性がある。適用可能で好都合な場合、同様な参照番号は同様な要素を指す。
図1Aは、ある代表的実施形態に係る手術用ロボットシステムを示す概略的ブロック図である。 図1Bは、代表的実施形態に係る、手術用ロボットシステム内のロボットのフレキシブル遠位部の斜視図である。 図2Aは、代表的実施形態に係る、図1Aに示す手術用ロボットシステムにおけるロボットの動作の詳細を示す模式図である。 図2Bは、代表的実施形態に係る、図1Aに示す手術用ロボットシステムにおけるロボットの動作の詳細を示す模式図である。 図3は、代表的実施形態に係る、患者の心臓にアクセスするための手術用ロボットシステムの斜視図である。 図4は、代表的実施形態に係る、ターゲットにアクセスするためのロボットの剛性近位部及びフレキシブル遠位部の制御方法における様々な動作を示すフローチャートである。
以下の詳細な説明では、限定ではなく説明を目的として、本教示の完全な理解を提供するために具体的詳細を開示する代表的な実施形態について記載する。しかしながら、本開示の利益を享受した当業者は、本明細書に開示される具体的詳細から逸脱する本教示に係る他の実施形態が、添付の特許請求の範囲内にとどまることを理解するであろう。さらに、代表的実施形態の説明を曖昧にしないために、周知の装置及び方法の説明が省略され得る。このような方法及び装置は、本発明の教示の範囲内にあることは明らかである。
本明細書で使用する用語は、具体的実施形態を説明するためのものに過ぎず、限定を意図するものではないことを理解されたい。あらゆる定義された用語は、本教示の技術分野において一般的に理解され受け入れられている定義された用語の技術的及び科学的意味に追加されたものである。
本明細書及び添付の特許請求の範囲で使用される場合、用語「a」、「an」、及び「the」は、文脈上特に明記されない限り、指示対象の単数及び複数の両方を含む。したがって、例えば、「装置(a device)」とは、1つの装置及び複数の装置を含む。
本明細書で使用される場合、2つ以上の部分又は構成要素が「結合されている」という記述は、部分が直接的又は(リンクが生じる限り)間接的に、すなわち1つ又は複数の中間部分又は要素を介して、互いに結合され又はともに動作することを意味する。
添付図面において、方向に関する用語/語句及び相対的用語/語句を使用して、様々な要素の互いの関係が記述され得る。これらの用語/語句は、図面に描かれている向きに加えて、装置及び/又は要素の異なる向きを包含するように意図されている。
添付図面において、「上」、「下」、「頂部」、「底部」、「上側」、及び「下側」等の相対的用語が、様々な要素の互いの関係を示すために使用され得る。これらの相対的用語は、図面に描かれている向きに加えて、装置及び/又は要素の異なる向きを包含するように意図されている。例えば、図面の視点に関して装置が反転された場合、例えば、別の要素の「上」にあると記載された要素は、反転後はその要素の「下」にある。同様に、装置が図面の視点に対して90°回転された場合、別の要素の「上」又は「下」にあると記載された要素は、その要素に「隣接」することになる。ここで、「隣接する」とは、別の要素に当接すること、又は要素間に1つ以上の層、材料、構造などが介在することを意味する。
本明細書及び添付の特許請求の範囲において使用される場合、通常の意味に加えて、「実質的な」又は「実質的に」という用語は、許容される限界又は程度を意味する。例えば、「実質的に取り消される」とは、当業者が許容できるとみなす取り消しであることを意味する。
まず、図1を参照して、本教示の特徴に係る手術用ロボットシステム100について説明する。具体的には、外科用ロボットシステム100は、限定はされないが、例えば、低侵襲心臓手術(例えば、冠動脈バイパス移植及び僧帽弁置換術)、低侵襲性腹部手術(例えば、前立腺切除術又は胆嚢摘出術を行うための腹腔鏡検査)、及び自然開口部越経管腔的内視鏡手術(NOTES)などを含む医療処置のために利用され得る。
図1Aは、剛性近位部102及びフレキシブル遠位部103を有するハイブリッドロボット101を備える外科用ロボットシステム100を概略的に示す。一般的に、剛性近位部102は、患者の体の表面にある第1の入口地点E1を介して患者Pの体腔内に進められる。剛性近位部102は、画像を用いて手術部位Sにおける関心領域ROI(例えば、患者の心臓等の内臓器官)に誘導され、フレキシブル遠位部103は、第2の入口地点E2(第1の目標位置とも呼ばれる)を介して、剛性近位部102から関心領域ROIへと展開される。その後、フレキシブル遠位部103は、画像を用いて関心領域ROI内の領域内のターゲットT(例えば、患者の心臓の大動脈弁等の内臓器官内に存在する特徴又は物体)(第2の目標位置とも称される)に誘導される。ターゲットTに到達した後、フレキシブル遠位部103は、様々な診断、外科手術又は治療処置(例えば、大動脈弁置換など)を行うことができる。ロボット101の剛性近位部102及びフレキシブル遠位部103は、以下で説明するように、制御ユニット106の制御下で作動されてもよく、又は一実施形態では、剛性近位部102は、臨床医(ユーザ)によって患者Pの身体への入口地点E1に手動で配置されて操作されるハンドヘルドイントロデューサであってもよい。
ロボット101の剛性近位部102は、第1の入口地点E1にRCM(remote center of motion)を有し、これにより、剛性近位部102が第1の入口地点E1(「ピボット点」)を中心に回動することができる。言い換えれば、RCMは、患者Pの体の表面に配置され、複数の自由度に沿った移動のために構成される。他の実施形態では、ロボット101の剛性近位部102は、第2の入口地点E2にRCMを有し、RCMがRIOの表面に配置されてもよく、これにより、複数の自由度に沿った移動を可能にし得る。RCMが体Pの表面に位置する実施形態では、RCMがRIOの表面に位置する実施形態よりも、第1の入口地点E1の開口部が小さくてもよい。これは、RCMがRIOの表面に位置する場合、剛性近位部102は患者Pの体内で回動するので、剛性近位部102が、動作角度に対応する患者Pの体の表面における距離、及び第1の入口地点E1と第2の入口地点E2との間の距離を移動するための空間が第1の入口地点E1に必要だからである。様々な実施形態において、剛性近位部102は、入出力(I/O)回路108を介して受信される制御ユニット106からの命令によって操作されるか、又は臨床医によって手動で操作され、剛性近位部102が手術部位S内の所望の関心領域ROIに誘導される。
本教示によれば、剛性近位部102の動きが追跡され、この動きに基づいて、遠位部103の位置を調節し、ターゲットTに対する遠位部103の正確な位置を保証することができる。近位部102は、説明的には、フレキシブル遠位部103及び特定の外科処置又は治療処置を実施するのに有用な構成要素を通すことができる管状部分を含む。例えば、かかる構成要素は、近位部102を通して供給され得る様々なエンドエフェクタ、撮像装置、及び他の構成要素又はデバイス(例えば、人工心臓弁又はステント)を含み得る。
手術用ロボットシステム100は、患者Pの体内のロボット101の剛性近位部102及びフレキシブル遠位部103の少なくとも一部の位置のリアルタイム画像を提供するディスプレイ104を備える。後に詳述されるように、ディスプレイ104は、I/O回路108及び/又はプロセッサ130を介して、画像取得装置114からリアルタイム画像を受信し得る。画像取得装置114は、近位部102及びフレキシブル遠位部103、フレキシブル遠位部103、関心領域ROI(例えば、心臓又は他の器官等の解剖学的物体)、及び/又は手術部位SにおけるターゲットT(例えば、解剖学的物体内のある箇所又はその一部)の1つ又は複数のライブ画像を取得するように構成され得る。
画像取得装置114は、例えばCアームを備え、ここで、Cアームとは撮像スキャナインテンシファイアであり、C構成を有することからそのように呼ばれている。当業者には明らかであるように、CアームはX線撮影能力を有し、外科手術中のX線透視撮影のために使用することができる。より一般的には、画像取得装置114は、リアルタイム撮像を提供するために、当業者の知識の範囲内の様々な手術中撮像装置のうちの1つを含み得る。これらのリアルタイム(すなわち、手術中)画像は、以下で説明されるようなレジストレーションを行うために、手術前画像と合わせて使用され得る。第2の画像取得装置114として想定される撮像装置は、限定はされないが、コンピュータ断層撮影(CT)装置、超音波撮像装置、磁気共鳴撮像(MRI)装置、陽電子放射断層撮影(PET)装置、単一光子放射断層撮影(SPECT)撮像装置を含む。これらの画像はリアルタイムで取得され得る。
一般的に、フレキシブル遠位部103は、少なくとも2つのリンク、及びそれらの間の少なくとも1つのジョイント(関節)を含む。代表的実施形態に関連してより詳細に後述されるように、ロボット101は、例えば関心領域ROI内の1つ又は複数の運動度(degrees of motion)における操作のために、フレキシブル遠位部103の1つ又は複数の関節を制御するように構造的に構成される。例えば、フレキシブル遠位部103は、限定はされないが、2つのリンク及び1つの関節を備えるデバイス、スネーク状のデバイス、又は操縦可能なカテーテルを含む多数の装置のうちの1つであり得る。実際には、当業者に理解されるように、フレキシブル遠位部103は、1つ又は複数の自由度において動くように構成される。一般的には、フレキシブル遠位部103は、直線的に前進(すなわち、1自由度)し、平面移動(すなわち、2自由度)し、回転する。より一般的には、フレキシブル遠位部103は、スネーク状ロボットの場合、複数の自由度、例えば6以上を有し得る。
一例として、フレキシブル遠位部103は、フレキシブル遠位部103の遠位端103’を所望の位置(例えば、ターゲットT)に適切に配置するように制御される複数のリンク及び関節を含む。複数のリンク及び複数の関節を備える装置としてのフレキシブル遠位部103の例が図1Bに示されている。
図1Bを参照すると、フレキシブル遠位部103はロボット101のスネーク状ロボット部分であり、代表的実施形態によれば、それぞれが各関節142によって接続された複数のリンク141を含む。複数のリンク141はそれぞれ剛性セグメントを備え、関節142はそれぞれ、歯車アセンブリを備え得る。例示的には、各関節142は、1自由度と3自由度(ロール、ピッチ、及びヨー)との間で実装され得る。以下により詳細に説明するように、制御ユニット106は、モータ制御の実行、及びフレキシブル遠位部103の位置及び向きデータの収集を行うように構成される。あるいは、フレキシブル遠位部103は、例えば、参照によりその開示が本明細書に詳細に組み込まれるWallaceらによる米国特許第8,409,136号(2013年4月2日)に記載されているようなカテーテルロボットであってもよい。
理解されるように、フレキシブル遠位部103は、特定のロボット手技のために望まれるエンドエフェクタ(図示せず)を含み得る。一例として、フレキシブル遠位部103に接続されたエンドエフェクタは、グリッパ又はツールホルダを備え得る。同様に、フレキシブル遠位部103は、腹腔鏡器具、腹腔鏡、スクリュー配置のためのツール、前方視認カメラ、又は生検若しくは治療用の針などのツールを含むことができる。当業者の知識の範囲内の他の外科用装置及びツールも、フレキシブル遠位部103とともに使用され得る。
ディスプレイ104は、本明細書でより完全に説明するように、画像及びデータを表示するように適合された出力デバイス及び/又はユーザインターフェイスを備える。ディスプレイ104は、手術用ロボットシステム100の様々な要素に隣接して、これらの要素とともに臨床医の近くに配置され得る1つ以上のディスプレイを含み得る。ディスプレイ104は、例えば画像取得装置114によって提供される手術部位Sのライブ画像及び/又は術前画像を表示するように構成される。ディスプレイ104は、視覚的、聴覚的、又は触覚的なデータを出力し得る。ディスプレイ104の例は、限定はされないが、コンピュータモニタ、テレビス画面、タッチスクリーン、触覚電子ディスプレイ、点字スクリーン、陰極線管(CRT)、蓄積管、双安定ディスプレイ、電子ペーパー、ベクトルディスプレイ、フラットパネルディスプレイ、蛍光表示管(VF)、発光ダイオード(LED)ディスプレイ、エレクトロルミネセンスディスプレイ(ELD)、プラズマディスプレイパネル(PDP)、液晶ディスプレイ(LCD)、有機発光ダイオードディスプレイ(OLED)、プロジェクタ、及びヘッドマウントディスプレイ(HMD)を含む。
制御ユニット106は、手術用ロボットシステム100の様々な構成要素からの入力を受け取り、かつ、構成要素に出力(例えば、命令又はコマンド)を供給するように構成される。制御ユニット106は、以下により詳細に説明するように、手術用ロボットシステム100の様々な構成要素からの入力を受け取り、また、プロセッサ130に出力を供給しかつプロセッサ130からの入力を受け取るI/O回路108を備える。プロセッサ130はまた、処理を可能にするためのメモリ134と、(同じメモリでも別々のメモリであってもよい)コンピュータ可読媒体(CRM)136とを備える。プロセッサ130は、一般的に、例えば、I/O回路108を介して画像取得装置114から画像を受信し、また、取得された画像を処理してメモリ134及び/又はCRM136に保存するように構成される。したがって、プロセッサ130は、画像取得装置114によって取得された患者Pの内部を基本的に視覚的マッピングするデータベースを構築することができる。他の実施形態では、内部画像を提供するために追加の画像取得装置が含まれてもよい。このような追加の画像取得装置は、例えば、経食道心エコー検査(TEE)プローブ又は内視鏡を含み、内部画像は、追加画像取得装置によって横断される患者Pの内部部分を含み得る。プロセッサ130によって構築されたデータベースを使用して、第1の入口地点E1から第2の入口地点E2までの経路(例えば、第1の目標位置への第1の展開経路DP1)、及び第2の入口地点E2から関心領域ROI内のターゲットTまでの経路(例えば、第2の目標位置への第2の展開経路DP2)が決定され得る。プロセッサ130は、表示のためにI/O回路108を介してディスプレイ104に画像を送信する。
追加画像取得装置が内視鏡(図示せず)を備える場合、内視鏡画像が提供される。内視鏡は、独立して又は制御ユニット106の制御下で動作する内視鏡コントローラによって制御され得る。特定の代表的実施形態では、内視鏡は管と、検査対象の器官又は物体を照らするための光送達システムとを含み、例えば、光源は通常体外に存在し、通常、光は光ファイバシステムを介して指向される。また、対物レンズから観察者に画像を伝達するレンズ系が含まれてもよく、典型的には、剛性内視鏡の場合はリレーレンズ系、又はファイバスコープの場合は光ファイバの束である。また、接眼レンズを備えていないビデオスコープも考えられ、この場合、カメラが画像をスクリーン(例えば、ディスプレイ104)に送信して画像を取得する。内視鏡の追加チャネルは、医療機器又はマニピュレータの進入を可能にし得る。
本発明のための内視鏡の例は、限定はされないが、任意の種類のスコープ、フレキシブル又は剛性(例えば、内視鏡、関節鏡、気管支鏡、胆道鏡、結腸鏡、膀胱鏡、十二指腸鏡、胃鏡、子宮鏡、腹腔鏡、鼻腔鏡、S状結腸鏡、洞穴鏡、胸腔鏡など)、及び画像システムを備えたスコープに類似した任意の装置を含む。撮像はローカルであり、表面画像は、光ファイバ、レンズ、又は小型(例えばCCDベースの)撮像システムを用いて光学的に取得され得る。
追加画像取得装置は制御ユニット106に接続されてもよく、制御ユニット106の構成要素であってもよい。追加画像取得装置は、最終的にディスプレイ104に供給される画像を提供し、また、前方光学的視野又は斜め光学的視野を有する任意の種類のカメラを含み、所定のフレームレート(例えば、毎秒30フレーム)で2次元デジタルビデオフレームのシーケンスを取得可能であり、また、各デジタルビデオフレームをI/O回路108を介して制御ユニット106に供給可能であり得る。特に、追加画像取得装置は、その視野内でフレキシブル遠位部103の画像を取得することができるように配置され及び方向付けられ得る。一部の実施形態では、追加画像取得装置は、モータによって作動されるカメラを含み、ロボット101のために計画された器具経路に沿って配置され得る。
プロセッサ130は、本明細書に説明される様々な機能を実行するためにソフトウェア(例えば、マイクロコード)を使用してプログラム可能な1つ以上のマイクロプロセッサを備え得る。特に、プロセッサ130は、2つ以上のプロセッサ又は処理コアを備え得る。プロセッサ130は、例えば、マルチコアプロセッサであってもよい。制御ユニット106はまた、単一のコンピュータシステム(図示せず)内に、又は手術用ロボットシステム100に関連づけられた複数のコンピュータシステム(図示せず)にかけて分散されたプロセッサの集合を含み得る。理解されるであろうように、多くのプログラムの命令が、同じ計算装置に集約された、又は複数の計算装置にわたって分散されたプロセッサ130によって実行され得る。本開示の様々な実施形態においてプロセッサ130として採用され得る構成要素の例は、限定はされないが、従来のマイクロプロセッサ、マイクロ制御ユニット、特定用途向け集積回路(ASIC)、及び/又はフィールドプログラマブルゲートアレイ(FPGA)を含む。
メモリ134及び/又はCRM136は、手術用ロボットシステム100の様々な構成要素の機能の過程で集められた様々な種類のデータを保存するように構成され得る。これらのデータは、以下により詳細に説明するように集められた画像データ及び追跡データを含む。メモリ134及び/又はCRM136はまた、術前画像データなどの術前データを記憶してもよい。以下により詳細に説明するように、これらのデータは、ロボット101の動作中に剛性近位部102及びフレキシブル遠位部103の位置を追跡するために使用され得る。さらに、メモリ134及びCRM136はそれぞれ、手術用ロボットシステム100を制御するために、並びに画像データ及び追跡データを含む様々なデータを保存するためにプロセッサ130によって実行されるように構成されたマシン可読命令を保存する非一時的コンピュータ可読媒体を含む。例えば、これらの命令(プログラム)はメモリ134内で符号化され、プロセッサ130上で実行されると、本明細書に説明される機能の少なくとも一部を実行する。特に、本明細書では、用語「プログラム」又は「コンピュータプログラム」は、制御ユニット106をプログラムするために使用され得る様々な種類のコンピュータコード(例えば、ソフトウェア又はマイクロコード)を指すために一般的な意味で使用される。
メモリ134及びCRM136は、非揮発性コンピュータメモリ又は揮発性コンピュータメモリ、又は両者を含み、限定はされないが、ランダムアクセスメモリ(RAM)、リードオンリメモリ(ROM)、プログラマブルリードオンリーメモリ(PROM)、電気的プログラマブルリードオンリーメモリ(EPROM)、電気的消去可能プログラマブルリードオンリーメモリ(EEPROM)、ユニバーサルシリアルバス(USB)ドライブ、フロッピーディスク、コンパクトディスク(CD)、光ディスク、磁気テープ等、スマートカード、デジタルビデオディスク(DVD)、CD-ROM、及びソリッドステートハードドライブを含む。例えば、メモリ134などの様々な記憶媒体は、プロセッサ130内に固定されていてもよく、又は輸送可能、例えば、本明細書に記載されている本教示の様々な側面を実施するためにプロセッサ130に1つ又は複数のプログラムがロード可能であってもよい。
ロボット101は追加座標系を導入するので、ロボット101をある所望の基準系と位置合わせ(位置及び向き)することは、保証及び維持が困難である。なぜなら、作業空間及び動作の制約下で配置されるからである。以下でより詳細に説明するように、臨床医によって同位置合わせを精神的に実行する必要なく、既知のレジストレーション方法及び装置を用いて、異種の座標系の不整合が実行される。このために、ロボット101及びその具体的構成要素を撮像システムにレジストレーションするための様々な方法及び装置が現存する。一例として、レジストレーションは、画像内に映るフレキシブル遠位部103の特徴を、術前に集められた対応する特徴とマッチングすることによって実行され得る。ターゲットTは、画像内のターゲットTの位置をマーキングすることによって臨床医又は外科医によって識別されてもよい。別の実施形態では、ターゲットTは、当該技術分野で知られている特徴マッチング及び物体認識手段によって自動的に検出され得る。ターゲットTは、その後、レジストレーションを使用して画像からロボット座標系に計算され得る。レジストレーションの例は、共同所有されるPopovicの米国特許第9,095,252号(2015年8月4日)、Trovatoらの米国特許出願公開第2011/0282151号(2011年11月17日)、Thienphrapaらによる米国特許出願公開第2014/0212025号(2014年7月31日)、Popovicらによる米国特許出願公開第2015/0010225号、米国特許出願公開第2015/0073265号(2015年1月8日)、Popovicらによる米国特許出願公開第2015/0126859号(2015年5月7日)、及びElhawaryらによる米国特許出願公開第2015/0202015号(2015年7月23日)に開示されており、これらの全てが、参照により本明細書に詳細に援用される。
追跡システム120は、ロボット101の剛性近位部102及びフレキシブル遠位部103に関する追跡情報を生成するように構成される。追跡システム120は、当業者によって理解されるように、光学追跡システム、機械的追跡システム、電磁追跡システム、及び形状検出追跡システムのうちの1つ又は複数であってもよい。追跡システム120と協働させるために、無線周波数(RF)センサ、LEDセンサ、パッシブマーカ、反射マーカなどのセンサ又はタグが、ロボット101の近位部102に、又はフレキシブル遠位部103の端部103’の近位に、又はこれらの両方に含まれてもよい。形状検出追跡システムは、例えば、Ramamurthyらによる米国特許第9186046号に記載されており、その開示が参照により本明細書に詳細に援用される。
追跡システム120は、剛性近位部102及びフレキシブル遠位部103の現在位置のフィードバックを提供するために、制御ユニット106に情報を提供する。これは、関心領域ROIに対する剛性近位部102の位置の調整、及びターゲットTに対するフレキシブル遠位部103の位置の調整を可能にする。剛性近位部102及びフレキシブル遠位部103の追跡、並びに画像取得装置114によって実現されるレジストレーションからのデータを通じて、プロセッサ130は最終的に、ターゲットTに対するフレキシブル遠位部103の位置を決定するように構成される。特に、メモリ132内のソフトウェアは、例えば、プロセッサ130がターゲットTに対するフレキシブル遠位部103の現在位置を計算することを可能にする。これらの計算に基づいて、プロセッサ130は、ターゲットTに対してより良い位置に移動するために必要な命令/コマンドをフレキシブル遠位部103に提供する。一実施形態では、これらのコマンドは、フレキシブル遠位部103による望ましくない動きを補償する(及び実質的に無効にする)ために、剛性近位部102における又は臨床医からのふるえに起因する運動を補償するように機能する。
手術用ロボットシステム100は、ユーザインターフェイス110を備える。ユーザインターフェイス110は、ディスプレイ104と同様に、ハードウェアインターフェイス(図示せず)及びI/O回路108を介して制御ユニット106に模式的に結合されている。ハードウェアインターフェイスは、プロセッサ130が、手術用システムの様々な構成要素と相互作用すること、及び、外部の計算デバイス(図示せず)及び/又は装置を制御することを可能にする。ハードウェアインターフェイスは、プロセッサが制御信号又は命令を手術用ロボットシステム100の様々な構成要素、並びに外部計算デバイス及び/又は装置に送信することを可能にし得る。また、ハードウェアインターフェイスは、プロセッサが手術用ロボットシステム100の様々な構成要素、並びに外部計算デバイス及び/又は装置とデータを交換することを可能にし得る。ハードウェアインターフェイスの例としては、限定はされないが、ユニバーサルシリアルバス、IEEE1394ポート、パラレルポート、IEEE1284ポート、シリアルポート、RS-232ポート、IEEE-488ポート、Bluetooth(登録商標)接続、無線ローカルエリアネットワーク接続、TCP/IP接続、イーサネット(登録商標)接続、制御電圧インターフェイス、MIDIインターフェイス、アナログ入力インターフェイス、及びデジタル入力インターフェイスなどがある。
ユーザインターフェイス110は、臨床医がコンピュータ(図示せず)又はコンピュータシステム(図示せず)を介して手術用ロボットシステム100とインタラクトすることを可能にする。ユーザインターフェイス110は、例えば、タッチスクリーン、キーボード、マウス、トラックボール、及び/又はタッチパッドを含み得る。一般的に、ユーザインターフェイス110は、情報又はデータを臨床医に提供し、かつ/又は、臨床医から情報又はデータを受け取り得る。ユーザインターフェイス110は、臨床医からの入力をコンピュータが受け取り、また、コンピュータからユーザに出力を提供することを可能にし得る。言い換えれば、後により明らかにされるように、ユーザインターフェイス110は、オペレータがコンピュータを制御又は操作することを可能にし、また、ユーザインターフェイス110は、臨床医の制御又は操作の効果をコンピュータが表示することを可能にし得る。ディスプレイ104又はそのグラフィカルユーザインターフェイス上のデータ又は情報の表示は、情報を臨床医に提供することの一例である。タッチスクリーン、キーボード、マウス、トラックボール、タッチパッド、ポインティングスティック、グラフィックタブレット、ジョイスティック、ゲームパッド、ウェブカム、ヘッドセット、ギアスティック、ステアリングホイール、ワイヤードグローブ、無線リモコン、及び加速度計を介するデータの受け取りはいずれも、オペレータからの情報又はデータの受け取りを可能にするユーザインターフェイス110の構成要素の例である。
上述したように、制御ユニット106は、I/O回路108を含む。他の機能も備えるが、I/O回路108は、制御ユニット106の外部の要素及びデバイスへの通信を制御する。I/O回路108は、プロセッサ130とやり取りされる入出力信号又はデータを解釈するのに必要なロジックを含むインターフェイスとして機能する。例えば、I/O回路108は、ロボット101の剛性近位部102及びフレキシブル遠位部103に関連する医療画像を例えば画像取得装置114から受け取るよう構成された第1の入力部と、追跡システム120からロボット101の近位部102及びフレキシブル遠位部103の追跡情報を受け取るよう構成された第2の入力部とを含み得る。I/O回路108は、ロボット101に関連する医療画像をディスプレイ104のディスプレイに提供するように構成された出力部を含み得る。
代表的実施形態はまた、患者の体への入口に配置される近位部102、及び患者の体内の手術部位Sに配置されるフレキシブル遠位部103備えるロボット101を含む手術用ロボットシステム100を制御するためにプロセッサ130によって実行される機械可読命令が格納された非一時的コンピュータ可読記憶媒体(例えば、メモリ134/CRM136)を対象とし得る。機械可読命令は、メモリ132に保存され、ハンドヘルドイントロデューサ102の動きを相殺する方法500を実行するように構成される。
説明のために、関心領域ROIは、例えば、患者の心臓であると仮定され得る。この場合、フレキシブル遠位部103の端部103’の位置は、ディスプレイ104において提供される画像によって臨床医によって決定され得る。したがって、端部103’に配置されたエンドエフェクタを使用して、第2の入口地点E2における心臓(関心領域ROI)の正確な位置に切開が形成され得る。次いで、臨床医は、フレキシブル遠位部103の端部103’をさらに、置換されるべき大動脈弁(ターゲットT)の位置に誘導し得る。その後、弁が交換され、ここでも再び、上述の様々な画像取得及びレジストレーション方法を使用して、心臓の正確な位置が制御ユニット106によって決定される。
追跡システム120からのデータのみに基づいて、又は第2の画像取得装置114からのデータとの組み合わせに基づいて、プロセッサ130は、フレキシブル遠位部103の実質的無効化運動が、フレキシブル遠位部103の端部103’での震動を打ち消すことができるように、ロボット101のフレキシブル遠位部103へのコマンドを介して近位部102の散発的な動き(例えば、臨床医のふるえに起因するもの)を相殺し得る。代表的実施形態では、位置相殺モードでは、フレキシブル遠位部103に関連する画像が画像取得装置114を使用して取得される。上述のように、画像は、X線画像、コーンビームCT画像、超音波画像、又は内視鏡画像であってもよい。フレキシブル遠位部103の形状及び姿勢、並びに/又は手術部位S内のレジストレーションはそれによって決定され、また、ディスプレイ104上に表示され得る。例えば、画像ベースレジストレーション及びツール追跡レジストレーションを含む、術前手術計画及び術中画像に対する手術ツールのリアルタイム追跡が、上記米国特許及び特許出願公開公報に開示されている。解剖学的構造を画像内で視認することができるので、解剖学的構造に対するフレキシブル遠位部103の相対位置もまた知ることができ、制御ユニット106により算出された位置を使用して、解剖学的ターゲットT(この例では置換されるべき弁の位置)に到達するためにフレキシブル遠位部103を利用することができる。
上述したように、生検又は心臓切除などの処置の間、フレキシブル遠位部103を同じ位置に保つために、制御ユニット106は、追跡システム120、及び場合によっては画像取得装置114からの追跡情報を使用して、追跡システム120からのロボット101の近位部102の位置を連続的に更新する。言い換えれば、フレキシブル遠位部103は、患者Pの外部の剛性近位部102の動きを相殺するよう、患者Pの内部で動くように制御される。
代表的実施形態では、制御ユニット106は、所定の入口地点、所定の第2の展開経路DP2、及び解剖学的ターゲットTに応じて、フレキシブル遠位部103の関節(例えば、関節142)のロボット101運動パラメータを計算し得る。かかるパラメータは、フレキシブル遠位部103を、心筋の所定の第2の入口地点E2及び計画された第2の展開経路DP2と位置合わせし得る。制御ユニット106は、フレキシブル遠位部103を計画された第2の入口地点E2及び第2の展開経路DP2と位置合わせする計算された関節運動パラメータに応じて制御コマンドを生成し、該ロボット制御コマンドをロボット101に伝達し得る。
プロセッサ130は、ハードウェア、ソフトウェア、及びファームウェアの組み合わせを使用して、記載の機能及び動作を実行し得る。プロセッサ130は、例えば画像取得装置114からの、剛性近位部102及び手術部位Sにおける又はその近傍のフレキシブル遠位部103に関連する画像を処理して、フレキシブル遠位部103を手術部位Sにおける対応する解剖学的構造とレジストレーションするよう構成される。図2A及び図2Bを参照して説明されたように、プロセッサ130は、追跡システム120からのロボット101の近位部102の追跡情報を処理して、RCMを中心とする動きを決定するように構成される。プロセッサ130は、さらに、I/O回路108を介してディスプレイ104に画像を送信するよう構成され得る。
上記から理解されるように、画像取得装置114、追跡システム120、メモリ134/CRM136に記憶された様々なデータ及びソフトウェア、及びプロセッサ130の動作の協働機能により、制御ユニット106は、手術部位Sにおける手術用ロボット101のフレキシブル遠位部103及びターゲットTに関連するライブ画像及び術前画像の取得及び処理を制御するための1つ又は複数の制御コマンドを提供し、ロボット101の近位部102及び/又はフレキシブル遠位部103に関連する追跡情報を使用してターゲットTに対してフレキシブル遠位部103をさらに制御するよう構成される。以下に説明する実施例では、代表的実施形態の手術用ロボットシステム100の様々な特徴についてさらに説明する。これらの実施例は単なる例であり、何らの限定も意図するものではないことに留意されたい。
図2A及び図2Bは、代表的実施形態に係る、図1Aに示す手術用ロボットシステムにおけるロボットの動作の詳細を示す模式図である。具体的には、図2Aは、剛性近位部102のRCMが患者の体の表面に位置する場合のロボットの動作を示し、図2Bは、剛性近位部102のRCMが関心領域ROI(例えば、内部器官)の表面に位置する場合のロボットの動作を示す。
図2Aに示すように、ロボット101の剛性近位部102は、制御ユニット106の制御下で又は手動で、第1の入口地点E1(例えば、手術用ポート)を介して患者Pに挿入される。剛性近位部102のRCMは、患者の体の表面上の第1の入口地点E1に位置し、これは、剛性近位部102が患者の体の表面に対して様々な角度(例えば、A1及びA2)で回動することを可能にし、それにより、関心領域ROI(例えば、内部器官)内のターゲットTへのフレキシブル遠位部103によるアクセスを許容するように剛性近位部102が配置される。剛性近位部102は、第2の入口地点E2を介して関心領域ROIに挿入され得る。挿入後、フレキシブル遠位部103は、ターゲットTにアクセスするよう展開される。
一実施形態では、プロセッサ(例えば、図1Aのプロセッサ130)は、少なくとも1つの画像取得装置(例えば、画像取得装置114)から画像を受け取り、(少なくとも部分的に)受け取られた画像に基づき、剛性近位部102が第1の入口地点E1から第2の入口地点E2へと辿るための第1の展開経路(例えば、第1の展開経路DP1)を生成し、コントローラ(例えば、制御ユニット106)が第1の展開経路に沿って剛性近位部102を展開するための命令を提供する。また、プロセッサは、(少なくとも部分的に)受け取られた画像に基づき、フレキシブル遠位部103が第2の入口地点E2からターゲットTへと辿るための第2の展開経路(例えば、第2の展開経路DP2)を生成し、コントローラが剛性近位部102の端部からフレキシブル遠位部103を第2の展開経路に沿って展開するための命令を提供する。
図2Bを参照して、剛性近位部102が第2の入口地点E2を中心に回動する点を除き動作は同様であるが、患者の体の表面における剛性近位部102の回動運動を許容するために第1の入口地点E1においてより大きい切開部が必要とされる。すなわち、ロボット101の剛性近位部102は、制御ユニット106の制御下で又は手動で、第1の入口地点E1を介して患者Pに挿入される。剛性近位部102のRCMは、患者の体内の関心領域ROI(例えば、内部器官)の表面上の第2の入口地点E2に位置し、これは、剛性近位部102が関心領域ROIの表面に対して様々な角度(例えば、B1及びB2)で回動することを可能にし、それにより、関心領域ROI内のターゲットTへのフレキシブル遠位部103によるアクセスを許容するように剛性近位部102が配置される。
上記したように、一実施形態では、プロセッサ(例えば、プロセッサ130)は、少なくとも1つの画像取得装置(例えば、画像取得装置114)から画像を受け取り、(少なくとも部分的に)受け取られた画像に基づき、剛性近位部102が第1の入口地点E1から第2の入口地点E2へと辿るための第1の展開経路を生成し、コントローラ(例えば、制御ユニット106)が第1の展開経路に沿って剛性近位部102を展開するための命令を提供する。また、プロセッサは、(少なくとも部分的に)受け取られた画像に基づき、フレキシブル遠位部103が第2の入口地点E2からターゲットTへと辿るための第2の展開経路を生成し、コントローラが剛性近位部102の端部からフレキシブル遠位部103を第2の展開経路に沿って展開するための命令を提供する。
図3は、代表的実施形態に係る、患者の心臓にアクセスするための手術用ロボットシステムの斜視図であり、手術用ロボットシステムはここでは大動脈弁置換のために使用される。大動脈弁置換術は、本教示の範囲から逸脱することなく、他の種類の医療処置及び外科手術のために使用され得る手術用ロボットシステム101の実施例である。
図3を参照して、手術用ロボットシステム301は、剛性近位部102及びフレキシブル遠位部103を有するロボット101を備える。図示の実施形態では、剛性近位部102のRCMは患者Pの体の表面に位置する。剛性近位部102は、例えばコントローラによって又は手動で操作され、第1の入口地点E1(例えば、 2つのリブ間に初期切開部が形成される)及び第2の入口地点E2を通って心臓301に進入する。フレキシブル遠位部103は、剛性近位部102を通って展開され、人工弁を心室305内に配備するために使用される。
手術用ロボットシステム301は、画像検出器314-1及びソース314-2を有するCアーム撮像システムである画像取得装置314をさらに含む。画像取得装置314は、心臓310及びロボット101のライブ及び/又は術前画像を提供する。画像データは、追跡システム(例えば、追跡システム120)からの追跡データとともに、プロセッサ(例えば、プロセッサ130)は、剛性近位部102が第1の入口地点E1から第2の入口地点E2へと辿るための展開経路、及びフレキシブル遠位部103が第2の入口地点E2から心室305(ターゲット)へと辿るための展開経路を決定及び監視することを可能にする。図示の実施形態では、心臓301のライブ撮像を提供するために、プローブ311及びトランスデューサ312を有する経食道心エコー検査(TEE)プローブ310がさらに含まれる。
図4は、代表的実施形態に係る手術用ロボットシステム100によって実行され得る制御及び誘導方法400の動作を示すフローチャートである。以下の説明では、例を提供するために、方法400が図1Aに示される手術用ロボットシステム100のバージョンによって実行されると仮定する。したがって、図4に示される動作の全て又は一部が、プロセッサ130によって又はプロセッサ130の制御下で実行され得る。しかしながら、方法は、本教示の範囲から逸脱することなく、手術用ロボットシステムの他の実施形態を使用して実施されてもよい。
この実施形態では、剛性近位部102は、RCMが患者Pへの第1の入口地点E1(例えば、肋骨間)に配置されるように構成されていると仮定する。この構成は、肋骨及び胸部筋肉への損傷を最小限に抑えるが、フレキシブル遠位部103が展開される前に実行される剛性近位部102の動作をいくらか制限する。動作401において、剛性近位部102の(患者の身体上の)初期位置が決定される。剛性近位部102は、例えば臨床医によって、剛性近位部の手動又はマスター/スレーブ制御を用いて、初期位置に位置合わせされ、剛性近位部102が第1の入口地点E1を介して体腔内に配置される。
剛性近位部102は、体腔を通って手術部位Sに向かって前進する。剛性近位部102が、X線画像のような画像取得装置114によって提供される画像において視認されると、本明細書で提供されるレジストレーション方法を含む任意の方法を使用して、剛性近位部102が関心領域ROI(例えば、この例では患者の心臓)とレジストレーションされる。例えば、画像ベースレジストレーション及びツール追跡レジストレーションを含む、術前手術計画及び術中画像に対する手術ツールのリアルタイム追跡が、参照により本明細書に詳細に援用される、共同所有のPopovicによる米国特許出願公開第2012/0294498号(2012年11月22日)に開示されている。
動作403において、剛性近位部102のために、RCM(例えば、第1の入口地点E1)から関心領域ROIの入口地点(例えば、第2の入口地点E2)までの第1の展開経路DP1が生成される。第1の展開経路DP1は、例えば画像取得装置114によって提供される画像を介して知られる第1の入口地点E1及び関心領域ROIの境界の位置に基づき、プロセッサ130によって生成され得る。一実施形態では、第1の展開経路DP1は、例えば、プロセッサ130及び/又は画像取得装置114によって提供されるデータ及び/又は画像を使用して臨床医によって決定され得る。
剛性近位部102は、制御ユニット106の制御下で自動展開を用いて、剛性近位部102が第2の入口地点E2を介して関心領域ROIに進入するまで、ロボット101の動作によって決定された第1の展開経路DP1に沿って動かされる(動作404)。例えば、第1の展開経路DP1に沿う剛性近位部102の配置のために、第1の誘導情報が生成され得る。一般的に、誘導情報は、ロボット101の画像取得装置114へのレジストレーションを含み、また、患者Pの体内の決定された展開経路に対応する3次元空間における座標、及びロボットを座標に移動させるためのコマンドなどのデータを提供し得る。あるいは、臨床医は、例えば画像取得装置114からのライブ画像を使用して、決定された第1の展開経路DP1に沿って剛性近位部102を手動で動かすことができる。
動作405において、フレキシブル遠位部103は、剛性近位部102を通って関心領域ROI内に展開される。この例では、フレキシブル遠位部103は心臓に導入されるので、X線及び超音波下で視認可能である。例えば心臓のクローズアップライブ撮像を提供するために、フレキシブル遠位部103は画像取得装置114からのx線にレジストレーションされ、また、Philips Electronicsから入手可能なEchoNavigator(登録商標)を使用して、上述のTEEプローブ310などの超音波TEEプローブ(任意選択可能)からの超音波にレジストレーションされ得る。
フレキシブル遠位部の位置は、関心領域ROI内で追跡される(動作406)。動作407において、フレキシブル遠位部103のために、フレキシブル遠位部103の追跡位置からターゲットT(例えば、心筋)までの第2の展開経路DP2が生成される。第2の展開経路DP2は、例えば画像取得装置114によって提供される画像を介して知られる第2の入口地点E2及びターゲットTの位置に基づき、プロセッサ130によって生成され得る。
動作408において、フレキシブル遠位部103の遠位先端が、第2展開経路DP2に沿ってターゲットTに移動される。例えば、フレキシブル遠位部103を移動させるために、フレキシブル遠位部103を第2展開経路DP2に沿って配置するための第2の誘導情報が生成され得る。本例では、第2の展開経路DP2及び/又は第2の誘導情報を生成するために、X線画像及び超音波画像のうちの少なくとも1つにおいて心臓の大動脈弁の弁輪が検出され、かかるライブ画像を用いて、ロボット101のフレキシブル遠位部が制御され、フレキシブル遠位部の遠位先端が弁輪に又は弁輪に対して垂直に配置され得る。目標位置に到達すると、治療装置が展開される。上述したように、治療装置は、心臓の左心室を通過したバルーンカテーテル及び人工弁を含み、人工弁を大動脈弁輪内に適切に配置するために、プッシャー及びスリーブを使用してバルーンカテーテル及び人工弁が前進させられられ、取り付けされる。
他の実施形態では、剛性近位部102は、RCMが関心領域ROI(例えば心臓)への第2の入口地点E2に配置されるように構成される。この実施形態では、胸腔における第1の入口地点E1は、剛性近位部102の小さな動きを可能にするために、より大きな切開部でなければならない。これにより、展開後、フレキシブル遠位部103の再配置が可能になる。
一連の展開動作は、図4を参照して上述した実施形態と同じである。しかしながら、本実施形態では、フレキシブル遠位部103の再配置を容易にするために最後の動作が加えられる。例えば、第2の展開経路DP2の計画が到達不能な経路をもたらす場合、ロボット101の剛性近位部102は、関心領域ROIへの第2の入口地点E2を中心として回動することによってフレキシブル遠位部デバイスを到達可能な位置に再配置することができる。
特定の実施形態では、方法400は、医療画像をディスプレイ104に送信するステップをさらに含み得る。本明細書において、ディスプレイ構成は、任意の適切な技術下で画像、追跡される手術ツール、及び他のエンドエフェクタを表示するように構造的に構成された任意のデバイスとして広義に定義される。ディスプレイの例には、コンピュータモニタ、テレビ画面、タッチスクリーン、プロジェクタ、及びヘッドマウントディスプレイ(HMD)などがある。
本教示は、スマートシステム及びデバイスに向かう技術的進歩の一部である。適用可能なアプリケーションには、術前CT、(特に、作業空間が見えにくい低侵襲手術における)外科手術ナビゲーション、及び解剖学的ターゲット及び腫瘍の発見に関するライブビデオの拡張現実が含まれる。
この開示に関連して、様々な構造及び構成要素は様々な手段で実装され得ることに留意されたい。さらに、様々な材料、構造、及びパラメータは、単なる例示であって、限定的な意味は有さない。この開示に関連して、当業者は、添付の特許請求の範囲の枠内において、各自のアプリケーション及び該アプリケーションに必要な材料及び機器を決定しつつ、本教示を実施することができる。

Claims (21)

  1. 遠隔運動中心(RCM)を有する剛性近位部、フレキシブル遠位部、及び少なくとも1つの画像取得装置を備えるロボットを含むロボットシステムのための制御ユニットであって、前記制御ユニットは、
    プロセッサを備え、前記プロセッサは、
    前記少なくとも1つの画像取得装置から画像を受け取り、
    前記受け取られた画像に基づき、第1の目標位置への第1の展開経路を生成し、
    前記受け取られた画像に基づき、前記第1の目標位置から第2の目標位置への第2の展開経路を生成し、
    前記第1の展開経路に沿った前記剛性近位部の配置のための第1の誘導情報を生成し、
    前記第2の展開経路に沿った前記フレキシブル遠位部の配置のための第2の誘導情報を生成し、
    前記第1の誘導情報を使用して前記剛性近位部を前記第1の目標位置に誘導し前記第2の誘導情報を使用して前記フレキシブル遠位部を前記第2の目標位置に誘導する、制御ユニット。
  2. 前記第1の目標位置は、患者内の手術部位における関心領域の入口地点を含む、請求項1に記載の制御ユニット。
  3. 前記第2の目標位置は、前記手術部位における前記関心領域内のターゲットを含む、請求項2に記載の制御ユニット。
  4. 前記関心領域は、前記患者の内部器官を含み、前記ターゲットは、前記内部器官の一部内のある位置を含む、請求項3に記載の制御ユニット。
  5. 前記RCMは、前記患者の身体への入口地点に位置する、請求項3に記載の制御ユニット。
  6. 前記RCMは、前記手術部位における前記内部器官の入口地点に位置する、請求項に記載の制御ユニット。
  7. 前記第1の展開経路は直線状であり、前記第2の展開経路は非直線状である、請求項1に記載の制御ユニット。
  8. 前記第1及び第2の誘導情報は、前記画像取得装置への前記ロボットのレジストレーションを含む、請求項1に記載の制御ユニット。
  9. ロボットを備えるロボットシステムであって、前記ロボットは、
    遠隔運動中心(RCM)を有する剛性近位部と、
    フレキシブル遠位部と、
    少なくとも1つの画像取得装置とを有し、
    前記ロボットシステムはさらに制御ユニットを備え、前記制御ユニットは、
    前記少なくとも1つの画像取得装置から画像を受け取り、
    前記画像に基づき、第1の目標位置への第1の展開経路を生成し、
    前記画像に基づき、前記第1の目標位置から第2の目標位置への第2の展開経路を生成し、
    前記第1の展開経路に沿った前記剛性近位部の配置のための第1の誘導情報を生成し、
    前記第2の展開経路に沿った前記フレキシブル遠位部の配置のための第2の誘導情報を生成する、ロボットシステム。
  10. 前記第1の展開経路は直線状であり、前記第2の展開経路は非直線状である、請求項9に記載のロボットシステム。
  11. 前記第1の目標位置は、患者の手術部位内の関心領域への入口地点であり、前記第2の目標位置は、前記関心領域内のターゲットの地点である、請求項9に記載のロボットシステム。
  12. 前記剛性近位部の前記RCMは、前記患者の身体への入口地点に位置する、請求項11に記載のロボットシステム。
  13. 前記RCMは、前記関心領域への入口地点に位置する、請求項11に記載のロボットシステム。
  14. 前記関心領域は前記患者の心臓であり、前記ターゲットは人工弁で置換される大動脈弁である、請求項11に記載のロボットシステム。
  15. 前記少なくとも1つの画像取得装置は、
    前記心臓に隣接して配置されるプローブ及びトランスデューサを有し、前記心臓のライブ撮像を提供する経食道心エコー(TEE)プローブと、
    前記手術部位を撮像するためのX線を有するCアームとを備える、請求項14に記載のロボットシステム。
  16. ロボットシステムを制御するためにプロセッサによって実行される機械可読命令が格納された非一時的コンピュータ可読記憶媒体であって、前記ロボットシステムは制御ユニットとロボットとを有し、前記ロボットは、遠隔運動中心(RCM)を有する剛性近位部、フレキシブル遠位部、及び少なくとも1つの画像取得装置を備え、前記機械可読命令は、ターゲットにアクセスするための前記ロボットの前記剛性近位部及び前記フレキシブル遠位部の制御方法を実行するように構成され、前記制御方法は、
    前記剛性近位部のための、患者の手術部位内の関心領域への第1の展開経路を生成するステップと、
    前記剛性近位部を、前記第1の展開経路上で前記関心領域に移動させるステップと、
    前記剛性近位部を通して、前記フレキシブル遠位部を展開させるステップと、
    前記関心領域内の前記フレキシブル遠位部の位置を追跡するステップと、
    前記フレキシブル遠位部のための、前記ターゲットへの第2の展開経路を生成するステップと、
    前記フレキシブル遠位部を、前記第2の展開経路上で前記ターゲットまで移動させるステップとを含む、非一時的コンピュータ可読記憶媒体。
  17. 前記制御方法はさらに、
    最初に、前記患者に対する前記剛性近位部の初期位置を決定するステップと、
    前記剛性近位部を、前記患者の前記手術部位における前記関心領域にレジストレーションするステップとを含み、
    前記第1の展開経路は、前記剛性近位部の前記レジストレーションに基づき生成される、請求項16に記載の非一時的コンピュータ可読記憶媒体。
  18. 前記第1の展開経路は、前記少なくとも1つの画像取得装置によって提供される画像に基づく、前記患者の体内への前記剛性近位部の第1の入口地点の既知の位置、及び前記関心領域の境界の既知の位置に基づいてプロセッサによって生成される、請求項16に記載の非一時的コンピュータ可読記憶媒体。
  19. 前記第2の展開経路は、前記少なくとも1つの画像取得装置によって提供される画像に基づく、前記関心領域への前記剛性近位部の第2の入口地点の既知の位置、及び前記ターゲットの既知の位置に基づいて前記プロセッサによって生成される、請求項18に記載の非一時的コンピュータ可読記憶媒体。
  20. 前記制御方法はさらに、
    前記少なくとも1つの画像取得装置によって提供される画像をディスプレイに送信するステップを含む、請求項16に記載の非一時的コンピュータ可読記憶媒体。
  21. 前記関心領域内の前記フレキシブル遠位部の位置を追跡するステップは、光学的追跡、機械的追跡、電磁追跡システム、及び形状検出追跡のうちの少なくとも1つを含む、請求項16に記載の非一時的コンピュータ可読記憶媒体。
JP2018548395A 2016-03-17 2017-03-17 剛性近位部及びフレキシブル遠位部を有するハイブリッドロボットを制御するための制御ユニット、システム、及び方法 Active JP7041068B6 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201662309758P 2016-03-17 2016-03-17
US62/309,758 2016-03-17
PCT/EP2017/056435 WO2017158180A1 (en) 2016-03-17 2017-03-17 Control unit, system and method for controlling hybrid robot having rigid proximal portion and flexible distal portion

Publications (4)

Publication Number Publication Date
JP2019512315A JP2019512315A (ja) 2019-05-16
JP2019512315A5 JP2019512315A5 (ja) 2020-04-23
JP7041068B2 JP7041068B2 (ja) 2022-03-23
JP7041068B6 true JP7041068B6 (ja) 2022-05-30

Family

ID=58347403

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018548395A Active JP7041068B6 (ja) 2016-03-17 2017-03-17 剛性近位部及びフレキシブル遠位部を有するハイブリッドロボットを制御するための制御ユニット、システム、及び方法

Country Status (5)

Country Link
US (1) US20190069955A1 (ja)
EP (1) EP3429496A1 (ja)
JP (1) JP7041068B6 (ja)
CN (1) CN109069207B (ja)
WO (1) WO2017158180A1 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10512511B2 (en) 2013-07-24 2019-12-24 Centre For Surgical Invention And Innovation Multi-function mounting interface for an image-guided robotic system and quick release interventional toolset
CN108472095B (zh) * 2015-12-29 2021-11-02 皇家飞利浦有限公司 用于机器人外科手术的使用虚拟现实设备的系统、控制器和方法
CN111491583A (zh) 2017-11-13 2020-08-04 皇家飞利浦有限公司 用于解剖结构介入的多级机器人
IT201800005507A1 (it) * 2018-05-18 2019-11-18 Robot per chirurgia mininvasiva
CN110537983B (zh) * 2019-09-26 2021-05-14 重庆博仕康科技有限公司 光磁一体穿刺手术导航平台
US20230000558A1 (en) * 2019-12-02 2023-01-05 Think Surgical, Inc. System and method for aligning a tool with an axis to perform a medical procedure
KR20220131311A (ko) * 2020-01-23 2022-09-27 프로맥소 인크. 생검용 mri 안내형 로봇 시스템 및 방법
DE102020212086A1 (de) * 2020-09-25 2022-03-31 Siemens Healthcare Gmbh Ermitteln der Qualität einer Positionierung eines in einen Patientenkörper eingeführten Objekts
CN112932669B (zh) * 2021-01-18 2024-03-15 广州市微眸医疗器械有限公司 一种执行视网膜层防渗漏隧道的机械臂控制方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080177279A1 (en) 2007-01-09 2008-07-24 Cyberheart, Inc. Depositing radiation in heart muscle under ultrasound guidance
JP2013505106A (ja) 2009-09-23 2013-02-14 インテュイティブ サージカル オペレーションズ, インコーポレイテッド 湾曲カニューレおよびロボットマニピュレーター
WO2014139024A1 (en) 2013-03-15 2014-09-18 Synaptive Medical (Barbados) Inc. Planning, navigation and simulation systems and methods for minimally invasive therapy
JP2015524309A (ja) 2012-08-02 2015-08-24 コーニンクレッカ フィリップス エヌ ヴェ ロボット遠隔運動中心のコントローラ定義

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7697972B2 (en) * 2002-11-19 2010-04-13 Medtronic Navigation, Inc. Navigation system for cardiac therapies
US7972298B2 (en) 2004-03-05 2011-07-05 Hansen Medical, Inc. Robotic catheter system
US10258425B2 (en) * 2008-06-27 2019-04-16 Intuitive Surgical Operations, Inc. Medical robotic system providing an auxiliary view of articulatable instruments extending out of a distal end of an entry guide
US9370627B2 (en) * 2007-02-20 2016-06-21 Siemens Medical Solutions Usa, Inc. Needle guidance with a dual-headed laser
EP2626006B1 (en) 2007-08-14 2019-10-09 Koninklijke Philips N.V. Robotic instrument systems utilizing optical fiber sensors
US8315689B2 (en) * 2007-09-24 2012-11-20 MRI Interventions, Inc. MRI surgical systems for real-time visualizations using MRI image data and predefined data of surgical tools
US8663130B2 (en) * 2008-05-28 2014-03-04 Technion Researh & Development Foundation Ltd. Ultrasound guided robot for flexible needle steering
WO2010046802A1 (en) 2008-10-20 2010-04-29 Koninklijke Philips Electronics, N.V. Image-based localization method and system
US8784800B2 (en) * 2009-03-09 2014-07-22 Medtronic, Inc. Method of delivering cell therapy to a target site
EP2523621B1 (en) 2010-01-13 2016-09-28 Koninklijke Philips N.V. Image integration based registration and navigation for endoscopic surgery
RU2624107C2 (ru) 2011-09-13 2017-06-30 Конинклейке Филипс Н.В. Автоматическое онлайновое совмещение между роботом и изображениями
EP2811889B1 (en) 2012-02-06 2018-11-28 Koninklijke Philips N.V. Invisible bifurcation detection within vessel tree images
EP2838412B1 (en) * 2012-04-19 2020-09-09 Koninklijke Philips N.V. Guidance tools to manually steer endoscope using pre-operative and intra-operative 3d images
US20150126859A1 (en) 2012-06-15 2015-05-07 Koninklijke Philips N.V. Guided incision planning for endoscopic minimally invasive surgery
US20140188440A1 (en) * 2012-12-31 2014-07-03 Intuitive Surgical Operations, Inc. Systems And Methods For Interventional Procedure Planning
CN106061422B (zh) * 2014-02-26 2019-10-01 皇家飞利浦有限公司 用于执行经腔冠状动脉旁路术的系统及其操作方法
CN106061402B (zh) * 2014-02-26 2019-10-25 皇家飞利浦有限公司 用于执行管腔外冠状动脉旁路手术的系统及其操作方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080177279A1 (en) 2007-01-09 2008-07-24 Cyberheart, Inc. Depositing radiation in heart muscle under ultrasound guidance
JP2013505106A (ja) 2009-09-23 2013-02-14 インテュイティブ サージカル オペレーションズ, インコーポレイテッド 湾曲カニューレおよびロボットマニピュレーター
JP2015524309A (ja) 2012-08-02 2015-08-24 コーニンクレッカ フィリップス エヌ ヴェ ロボット遠隔運動中心のコントローラ定義
WO2014139024A1 (en) 2013-03-15 2014-09-18 Synaptive Medical (Barbados) Inc. Planning, navigation and simulation systems and methods for minimally invasive therapy

Also Published As

Publication number Publication date
US20190069955A1 (en) 2019-03-07
EP3429496A1 (en) 2019-01-23
JP7041068B2 (ja) 2022-03-23
CN109069207B (zh) 2021-09-10
CN109069207A (zh) 2018-12-21
WO2017158180A1 (en) 2017-09-21
JP2019512315A (ja) 2019-05-16

Similar Documents

Publication Publication Date Title
JP6835850B2 (ja) 手術ロボットの制御のためのシステム、制御ユニット、及び方法
JP7041068B6 (ja) 剛性近位部及びフレキシブル遠位部を有するハイブリッドロボットを制御するための制御ユニット、システム、及び方法
US11759266B2 (en) Robotic systems for determining a roll of a medical device in luminal networks
US11413099B2 (en) System, controller and method using virtual reality device for robotic surgery
AU2018378810B2 (en) System and method for medical instrument navigation and targeting
JP2022502179A (ja) 内視鏡支援経皮的医療処置のためのシステム及び方法
RU2692206C2 (ru) Роботизированное управление эндоскопом на основе анатомических признаков
CN105992568A (zh) 手术仪器可见性的机器人控制
US20200281666A1 (en) Steerable catheter flexible robotic system for use with endoscopes
US20230363826A1 (en) Pre-docking pose optimization
KR20230058119A (ko) 로봇으로 제어가능한 필드 발생기

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200312

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200312

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210310

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210322

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20210611

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210921

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220210

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220310

R150 Certificate of patent or registration of utility model

Ref document number: 7041068

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150