JP2021511892A - ユーザ関与の監視を伴うロボット外科用システム - Google Patents

ユーザ関与の監視を伴うロボット外科用システム Download PDF

Info

Publication number
JP2021511892A
JP2021511892A JP2020541902A JP2020541902A JP2021511892A JP 2021511892 A JP2021511892 A JP 2021511892A JP 2020541902 A JP2020541902 A JP 2020541902A JP 2020541902 A JP2020541902 A JP 2020541902A JP 2021511892 A JP2021511892 A JP 2021511892A
Authority
JP
Japan
Prior art keywords
surgeon console
handle
user
movement
surgical system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020541902A
Other languages
English (en)
Inventor
ウィリアム ペイン,
ウィリアム ペイン,
Original Assignee
コヴィディエン リミテッド パートナーシップ
コヴィディエン リミテッド パートナーシップ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by コヴィディエン リミテッド パートナーシップ, コヴィディエン リミテッド パートナーシップ filed Critical コヴィディエン リミテッド パートナーシップ
Publication of JP2021511892A publication Critical patent/JP2021511892A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B34/37Master-slave robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B34/35Surgical robots for telesurgery
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/70Manipulators specially adapted for use in surgery
    • A61B34/74Manipulators with manual electric input means
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/70Manipulators specially adapted for use in surgery
    • A61B34/76Manipulators having means for providing feel, e.g. force or tactile feedback
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/70Manipulators specially adapted for use in surgery
    • A61B34/77Manipulators with motion or force scaling
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/03Automatic limiting or abutting means, e.g. for safety
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017Electrical control of surgical instruments
    • A61B2017/00216Electrical control of surgical instruments with eye tracking or head position tracking control
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2055Optical tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2065Tracking using image or pattern recognition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/70Manipulators specially adapted for use in surgery
    • A61B34/74Manipulators with manual electric input means
    • A61B2034/742Joysticks
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/371Surgical systems with images on a monitor during operation with simultaneous use of two cameras
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/50Supports for surgical instruments, e.g. articulated arms
    • A61B2090/502Headgear, e.g. helmet, spectacles

Abstract

ユーザ関与の監視を伴うロボット外科用システムは、ロボットアセンブリと、外科医コンソールと、追跡デバイスと、を含む。ロボットアセンブリは、外科用器具に結合されたロボットアームを含む。外科医コンソールは、ディスプレイデバイスと、ロボットアセンブリ、ロボットアーム、または外科用器具のうちの少なくとも1つに通信可能に結合されたハンドルと、を含む。追跡デバイスは、ユーザ位置基準点の画像を捕捉するように構成された画像捕捉デバイスを含む。外科医コンソールまたは追跡デバイスのうちの少なくとも1つは、画像に基づいてユーザ位置基準点の位置を計算することと、計算された位置に基づいて、ユーザが外科医コンソールに関与しているかどうかを判定することと、ユーザが外科医コンソールに関与していないという判定に応答して、ロボット外科用システムをセーフモードで動作させることと、を行うように構成されている。【選択図】図3

Description

ロボット外科用システムは人気が高まっており、ロボット外科用システムを使用する際の人間工学および快適性は、オープンコンソールアーキテクチャを介して改善されている。外科医がロボット外科用システムを操作するために没入型ディスプレイ装置内に頭を入れる必要があるクローズドコンソールアーキテクチャとは対照的に、オープンコンソールアーキテクチャにより、外科医は、他の外科医および手術室のスタッフとのよりオープンな通信を維持しながら外科医コンソールを使用することができる。オープンコンソールアーキテクチャにより、外科医は、手術室内で発生するイベントをより認識しやすくなり、外科医を、外科的処置の過程で発生する可能性のある緊急事態に対処するためにより適切な位置に配置することもできる。
しかしながら、オープンコンソールアーキテクチャにより、外科医は、クローズドコンソールアーキテクチャを使用する場合よりも、外科医コンソールの関与に気を取られやすい可能性がある。したがって、オープンコンソールアーキテクチャを有するロボット外科用システムは、安全上のリスクを増大させる可能性がある。したがって、ロボット外科用システムとの関与による外科医の注意散漫に起因する安全上のリスクを軽減するためのシステム、デバイス、および方法が必要である。
一態様では、本開示は、ユーザ関与の監視を伴うロボット外科用システムについて説明する。ロボット外科用システムは、ロボットアセンブリと、外科医コンソールと、追跡デバイスと、を含む。ロボットアセンブリは、外科用器具に結合されたロボットアームを含む。外科医コンソールは、ハンドルと、ディスプレイデバイスと、を含む。ハンドルは、ロボットアセンブリ、ロボットアーム、または外科用器具のうちの少なくとも1つに通信可能に結合されている。追跡デバイスは、ユーザ位置基準点の画像を捕捉するように構成された画像捕捉デバイスを含む。外科医コンソールまたは追跡デバイスのうちの少なくとも1つは、捕捉された画像に基づいて、ディスプレイデバイスに対するユーザ位置基準点の位置を計算することと、計算された位置に基づいて、ユーザが外科医コンソールに関与しているか、または関与していないかどうかを判定することと、ユーザが外科医コンソールに関与していないという判定に応答して、ロボット外科用システムをセーフモードで動作させることと、を行うように構成されている。
実施形態では、外科医コンソールまたは追跡デバイスのうちの少なくとも1つは、ディスプレイデバイスに対する、3次元座標空間内の、ユーザ位置基準点の位置または配向のうちの少なくとも1つに対応する場所データを生成することによって、ユーザ位置基準点の位置を計算するようにさらに構成されている。
実施形態では、ユーザが外科医コンソールに関与しているか、または関与していないかどうかの判定において、外科医コンソールまたは追跡デバイスのうちの少なくとも1つは、ディスプレイデバイスに対するユーザ位置基準点の位置および配向に基づいて、差角を計算することと、差角を第1の閾値角度と比較することと、差角が第1の閾値角度より大きいという判定に応答して、ユーザが外科医コンソールに関与していないと判定することと、を行うようにさらに構成されている。
実施形態では、外科医コンソールまたは追跡デバイスのうちの少なくとも1つは、ディスプレイデバイスに対する、ユーザ位置基準点の位置および配向に基づいて、複数の第1の閾値角度から第1の閾値角度を選択するようにさらに構成されている。
実施形態では、外科医コンソールまたは追跡デバイスのうちの少なくとも1つは、ユーザ位置基準点の位置および配向に基づいて、ディスプレイデバイスに対する、ユーザ位置基準点の移動の方向を計算することと、ユーザ位置基準点の移動の方向に基づいて、第1の閾値角度を選択することと、を行うようにさらに構成されている。
実施形態では、ユーザが外科医コンソールに関与しているか、または関与していないかどうかの判定において、外科医コンソールまたは追跡デバイスのうちの少なくとも1つは、差角が第1の閾値角度未満であるという判定に応答して、差角が第1の閾値角度よりも小さい第2の閾値角度未満であるかどうかを判定することと、差角が第2の閾値角度未満であるという判定に応答して、ユーザが外科医コンソールに関与していると判定することと、を行うようにさらに構成されている。
実施形態では、外科医コンソールまたは追跡デバイスのうちの少なくとも1つは、ユーザが外科医コンソールに関与しているという判定に応答して、ロボット外科用システムをセーフモードから退出させるようにさらに構成されている。
実施形態では、外科医コンソールまたは追跡デバイスのうちの少なくとも1つは、ロボット外科用システムがセーフモードで動作するとき、ユーザが外科医コンソールに関与しているという判定に応答して、ユーザが関与しているという判定の後、閾値量の時間の経過後、ロボット外科用システムをセーフモードから退出させるようにさらに構成されている。
実施形態では、ロボット外科用システムは、コンピューティングデバイスをさらに含む。外科医コンソールまたは追跡デバイスのうちの少なくとも1つは、ロボット外科用システムがセーフモードで動作するとき、ハンドルの以前の位置からのハンドルの移動を制限することと、ロボットアセンブリ、ロボットアーム、または外科用器具のうちの少なくとも1つの移動を制限するための命令を、コンピューティングデバイスに送信することと、を行うようにさらに構成されている。コンピューティングデバイスは、命令を受信することと、命令を、ロボットアセンブリ、ロボットアーム、または外科用器具のうちの少なくとも1つに送信することと、を行うように構成されている。ロボットアーム、ロボットアセンブリ、または外科用器具のうちの少なくとも1つは、命令を受信することと、命令に応答して、ロボットアセンブリ、ロボットアーム、または外科用器具のうちの少なくとも1つの移動を制限することと、を行うように構成されている。
実施形態では、外科医コンソールまたは追跡デバイスのうちの少なくとも1つは、ロボット外科用システムがセーフモードで動作するとき、ハンドルの移動が、ハンドルに通信可能に結合されたロボットアームの対応する移動を引き起こすことを防止するようにさらに構成されている。
実施形態では、外科医コンソールまたは追跡デバイスのうちの少なくとも1つは、ハンドルの移動の量を検出することと、ハンドルの移動の量に基づいて、ハンドルの移動に応答して引き起こされる、ロボットアセンブリ、ロボットアーム、または外科用器具のうちの少なくとも1つの移動の量を判定することと、ロボットアセンブリ、ロボットアーム、または外科用器具のうちの少なくとも1つを、判定された移動の量だけ移動させることと、を行うようにさらに構成されている。ロボット外科用システムがセーフモードで動作するとき、引き起こされるロボットアセンブリ、ロボットアーム、または外科用器具のうちの少なくとも1つの移動の量の判定は、下方スケーリング係数を適用することを含む。
実施形態では、外科医コンソールまたは追跡デバイスのうちの少なくとも1つは、ハンドルの移動の速度を計算することと、速度に基づいて、下方スケーリング係数を変更することと、を行うようにさらに構成されている。
実施形態では、外科医コンソールは、ハンドルに対応する複数のモータを含み、モータの各々は、ハンドルに動作可能に結合されており、かつハンドルの移動方向に関連付けられている。ロボット外科用システムがセーフモードで動作するとき、外科医コンソールまたは追跡デバイスのうちの少なくとも1つは、ハンドルの移動の速度を計算することと、ハンドルの移動の方向を計算することと、ハンドルの移動の速度に基づいて、ハンドルの移動の方向とは反対方向の力を計算することと、ハンドルの複数のモータの中から、ハンドルの移動の方向とは反対の方向に関連付けられたモータを識別することと、ハンドルの移動の方向とは反対の方向に計算された力を生成するために、ハンドルの移動の方向とは反対の方向に識別されたモータを作動させることと、を行うようにさらに構成されている。
実施形態では、外科医コンソールは、複数のモータであって、ハンドルに動作可能に結合され、ハンドルの移動の複数の方向にそれぞれ関連付けられている、複数のモータをさらに含む。外科医コンソールまたは追跡デバイスのうちの少なくとも1つは、ユーザが外科医コンソールに関与していないという判定に応答して、ハンドルの第1の位置を識別することと、ハンドルの第1の位置からハンドルによって移動した距離を計算することと、ハンドルの移動の方向を計算することと、距離に基づいて、ハンドルの移動の方向とは反対方向の力を計算することと、ハンドルの複数のモータの中から、ハンドルの移動の方向とは反対の方向に関連付けられたモータを識別することと、ハンドルの移動の方向とは反対の方向に計算された力を生成するために、ハンドルの移動の方向とは反対の方向に識別されたモータを作動させることと、を行うようにさらに構成されている。
実施形態では、外科医コンソールは、ハンドルが第1の位置に配置されるまで、ハンドルの移動の方向と反対方向にモータを作動させるようにさらに構成されている。
実施形態では、ロボット外科用システムは、複数のマーカを含むアイウェアをさらに含み、ユーザ位置基準点は、複数のマーカのうちの少なくとも1つを含む。
実施形態では、ユーザ位置基準点は、ユーザの目、頭、または別の部分のうちの少なくとも1つを含む。
実施形態では、ディスプレイデバイスは、自動立体視ディスプレイデバイスである。
別の態様によれば、本開示は、ユーザ関与の監視を伴う別のロボット外科用システムについて説明する。ロボット外科用システムは、ロボットアセンブリおよび外科医コンソールを含む。ロボットアセンブリは、外科用器具に結合されたロボットアームを含む。外科医コンソールは、ロボットアセンブリ、ロボットアーム、または外科用器具のうちの少なくとも1つに通信可能に結合されたハンドルを含む。ハンドルは、容量センサまたは光学センサの少なくとも1つを含む。外科医コンソールは、容量センサまたは光学センサのうちの少なくとも1つから、ユーザによるハンドルとの接触に関するデータを受信することと、ハンドルとの接触に関連するデータに基づいて、ユーザが外科医コンソールに関与しているか、または関与していないかどうかを判定することと、ユーザが外科医コンソールに関与していないという判定に応答して、ロボット外科用システムをセーフモードで動作させることと、を行うように構成されている。
実施形態では、外科医コンソールは、ユーザが外科医コンソールに関与していないかどうかの判定において、ユーザがハンドルに接触していないことを、ハンドルとの接触に関連するデータが示すことに応答して、ユーザが外科医コンソールに関与していないと判定するようにさらに構成される。
本開示のロボット外科用システムおよび方法の様々な態様および特徴について、図面を参照して本明細書で以下に記載される。
本明細書の例示的な実施形態による例示的なロボット外科用システムを示す図である。 図1のロボット外科用システムの例示的な光学追跡デバイスを示す図である。 図1のロボット外科用システムの例示的な光学追跡デバイスを示す図である。 ユーザ関与を監視するために、図1のロボット外科用システムがどのように使用され得るかの例示的な態様を示す図である。 ユーザ関与を監視するために、図1のロボット外科用システムがどのように使用され得るかの例示的な態様を示す図である。 ユーザ関与を監視するために、図1のロボット外科用システムがどのように使用され得るかの例示的な態様を示す図である。 ユーザがその外科医コンソールに関与しているか、または関与していないかどうかに基づいて、図1のロボット外科用システムの動作モードを制御するための例示的な方法を示すフローチャートである。 ユーザが図1のロボット外科用システムの外科医コンソールに関与しているか、または関与していないかどうかを判定するための例示的な方法を示すフローチャートである。 ユーザが図1のロボット外科用システムの外科医コンソールに関与しているか、または関与していないかどうかを判定するための別の例示的な方法を示すフローチャートである。 1つ以上の安全な動作モードで図1のロボット外科用システムを動作させるための例示的な方法を示すフローチャートである。 図1のロボット外科用システムの1つ以上の安全な動作モードを終了するための例示的な方法を示すフローチャートである。
本開示は、外科的ロボット処置中のロボット外科用システムとの関与による外科医の注意散漫から生じる安全上のリスクを軽減するロボット外科用システム、デバイス、方法、およびコンピュータ可読媒体を対象とする。より具体的には、本開示は、ロボット外科用システムを使用しているユーザが関与していないことを識別し、ユーザが関与していないとき、ロボット外科用システムを1つ以上のセーフモードで動作させ、それにより、ユーザが患者を意図せずに傷つけるか、さもなければ注意散漫な間にロボット外科用システムを作動させることによって、外科的処置を危険にさらすリスクを軽減するためのシステムおよび方法に関する。本明細書に記載のシステムおよび方法は、外科医コンソールのディスプレイに対するユーザ位置を追跡し、追跡されたユーザ位置に基づいて、オープンコンソールアーキテクチャであっても、ユーザが外科医コンソールに関与していないかどうかを判定するための様々な技法を提供する。ユーザが外科医コンソールに関与していない場合、ロボット外科用システムは、1つ以上のセーフモードで操作される。本明細書に記載の技術、技法、および実施形態を利用して、ユーザは、ロボット手術を実行するためのより安全な動作環境を提供され、患者は、ロボット外科用システムを介して外科的治療を受けるためのより安全な環境を与えられる。
ここで本開示の実施形態が図面を参照して詳細に記載され、図面の中で同様の参照番号は、いくつかの図の各々において同一のまたは対応する要素を示す。本明細書で使用される場合、「ユーザ」および「臨床医」という用語は、医師、外科医、看護師、技術者、医療助手、または同様のサポート要員、または本明細書に記載のロボット外科用システムを使用できる任意の他の人物を指す。さらに、図面中および続く説明において、例えば、前側、後側、上側、下側、頂部、底部、および類似の方向性の用語などの用語は、単に説明の便宜のために使用されており、本開示を限定することを意図するものではない。以下の記載では、周知の機能または構成は、本開示を不必要に詳細に示して不明瞭にすることを避けるために、詳細には記載されていない。
図1Aは、本明細書の例示的な実施形態による例示的なロボット外科用システム100を示す。一般に、外科用システム100は、ユーザが外科用システム100の外科医コンソールに関与しているかどうかを判定することと、その判定に基づいて、1つ以上のセーフモード、および通常モードとも呼ばれる1つ以上の非セーフモードを含む、システムが動作するように構成されている様々な動作モードのうちの1つで動作することと、を行うように構成されている。図6に示され、以下で説明されるように、システム100が動作するように構成されているセーフモードのタイプは、限定されないが、(1)外科用システム100のハンドルおよびロボットアセンブリのロックに基づくセーフモード、(2)ハンドルの移動が対応するロボットアセンブリの移動を引き起こすことを防止することに基づくセーフモード、(3)ハンドルの移動の速度に基づくセーフモード、(4)ハンドルの速度に基づく対抗力に基づくセーフモード、および(5)位置ベースの対抗力に基づくセーフモードを含む。ユーザがロボット外科用システム100に関与しているか、または関与していないかどうかを判定し、それに応答して、外科用システム100を非セーフモードまたはセーフモードで動作させる追加の詳細が図2〜図7の文脈で本明細書に提供されている。図1Aに示されるシステム100の特定の数の構成要素、ならびにその配置および構成は、例示の目的のみのために提供され、限定するものとして解釈されないものとする。例えば、本明細書の様々な実施形態は、図1Aに示される構成要素の全てよりも少ないかまたは多い構成要素を使用する。さらに、図1Aに示されるシステム100は、本明細書の様々な例示的実施形態が適用可能な例示的な文脈として提供される。
システム100は、外科的処置中に患者104が横たわる手術台102、追跡デバイス160、外科的処置中にユーザが対話する外科医コンソール170、コンピューティングデバイス180、および1つ以上のロボットアセンブリ190を含む。追跡デバイス160、外科医コンソール170、およびコンピューティングデバイス180は、本明細書の様々な実施形態では、有線通信経路として、および/または無線通信経路として実施され得る通信経路106を介して、互いに、および1つ以上のロボットアセンブリ190に通信的に結合される。
1つ以上のロボットアセンブリ190の各々は、複数のサブユニット191、192、193、および194を含む。サブユニット191は、カートユニットであり、サブユニット192は、セットアップアームユニットであり、サブユニット193は、ロボットアームユニットであり、サブユニット194は、器具駆動ユニットである。サブユニット191、192、193、194は、互いに直接的または間接的に動作可能に結合され、1つ以上の通信経路(図1Aには図示せず)を介して互いに直接的または間接的に通信可能に結合される。カートユニット191は、外科的処置を受けている患者104の範囲内で手術台102に隣接して配置され、手術台102または患者104の側面に沿って、手術台102または患者104に向かうまたは離れるように構成される。器具駆動ユニット194は、1つ以上の対応する外科用器具(図1Aには図示せず)、および/または実行される特定の外科的処置に応じて、交換可能にそれに固定され得る画像捕捉デバイス(図1Aには図示せず)に結合可能である。例示的なタイプの外科用器具は、限定されないが、プローブ、エンドエフェクタ、グラスパ、ナイフ、はさみなどを含む。限定されないが、例示的なタイプの画像捕捉デバイスは、内視鏡カメラ、腹腔鏡カメラ、任意のタイプの画像捕捉装置、または画像捕捉装置に結合された器具を含む。
コンピューティングデバイス180は、1つ以上のプロセッサ118および1つ以上のメモリユニット120を含み、1つ以上のプロセッサ118は、1つ以上のメモリユニット120に動作可能に結合される。様々な実施形態では、コンピューティングデバイス180は、外科医コンソール170と統合されてもよく、または手術室の内部または近くに配設されたコンピューティングタワーなどのスタンドアロンデバイスであってもよい。1つ以上のプロセッサ118は、本明細書に記載の技法または動作または命令を実施または実行するように適合される任意のタイプの好適なプロセッサであってもよい。1つ以上のメモリユニット120は、1つ以上のプロセッサ118によって実行される命令136(一例ではソフトウェア)などの命令を記憶し、本明細書に記載の技法は、1つ以上のメモリユニット120に記憶された命令を実行する1つ以上のプロセッサ118に応答して、コンピューティングデバイス180によって実施される。1つ以上のメモリユニット120は、機械命令、データなどを記憶するのに適した任意のタイプのハードウェアデバイスであってもよい。
外科医コンソール170は、通信リンク138、ディスプレイデバイス122、1つ以上のハンドル112A、112B(集合的にハンドル112)、1つ以上のプロセッサ133、1つ以上のメモリユニット134、フットペダル128、およびハンドル112A用のモータ132Aおよびハンドル112B用のモータ132Bなど、ハンドル112が動くように構成されている方向に対応する少なくとも1つのモータを含む。ディスプレイデバイス122は、タッチディスプレイであってもよく、またはユーザのタッチを介して入力を受信するように構成されたタッチスクリーンを含んでいてもよい。いくつかの実施形態では、ディスプレイデバイス122は、限定されないが、セーフモードの設定およびユーザが外科医コンソール170に関与していないかどうかを判定する際に使用される閾値データを含む、外科用システム100の様々な設定の入力を受信するように構成されているグラフィカルユーザインターフェース(GUI)を表示するように構成されている。ディスプレイデバイス122は、ロボットアセンブリ190に結合された画像捕捉デバイスから患者104の上または内部の手術部位に関連する画像を含む、外科医コンソール170によって受信された画像を表示するように構成されていてもよい。いくつかの実施形態では、ディスプレイデバイス122は、2次元(2D)ディスプレイデバイスである。いくつかの実施形態では、ディスプレイデバイス122は、外科医コンソール170によって受信された1つ以上の立体画像を表示して、ユーザが1つ以上の立体画像を3次元(3D)画像として見ることができるように構成されている。いくつかの実施形態では、ディスプレイデバイス122は、自動立体視ディスプレイデバイスである。
ユーザは、外科的処置中にハンドル112を使用して外科医コンソール170と対話する。いくつかの実施形態では、ハンドル112Aは左ハンドルであり、ハンドル112Bは右ハンドルであり、それぞれユーザの左手および右手によって操作される。ハンドル112Aは、いくつかの実施形態では、様々な触覚部124Aおよび/またはアクチュエータ126Aを含み、これらは、操作、切断、またはそうでなければ、治療による組織抵抗、器具による組織への圧力、組織温度、組織インピーダンスなど、様々な組織パラメータまたは状態に関連するフィードバックをユーザに提供する。同様に、ハンドル112Bは、いくつかの実施形態では、触覚部124Aおよび/またはアクチュエータ126Aと同様に構成される様々な触覚部124Bおよび/またはアクチュエータ126Bを含む。触覚部124Aおよび124Bは、本明細書では集合的に触覚部124と呼ばれる。アクチュエータ126Aおよび126Bは、本明細書で集合的にアクチュエータ126と呼ばれる。理解できるように、そのような触覚部124は、実際の動作状態をシミュレートする強化された触覚フィードバックを外科医に提供する。触覚部124は、振動モータ、電気活性ポリマー、圧電デバイス、静電デバイス、亜音速音波表面作動デバイス、逆電気振動、またはユーザに触覚フィードバックを提供できる任意の他のデバイスを含んでもよい。上で言及されるように、ハンドル112はまた、例えば、実際の手術状態をシミュレートする外科医の能力をさらに高める繊細な組織操作および/または治療に用いられ得る、様々な異なるアクチュエータ126も含んでもよい。
外科医コンソール170は、ハンドル112に動作可能に結合された1つ以上のセンサ130Aおよび130B(集合的に130)を含む。例えば、センサ130Aは、ハンドル112Aに動作可能に結合されてもよく、センサ130Bは、ハンドル112Bに動作可能に結合されてもよい。センサ130Aおよび130Bの1つ以上は、それらが動作可能に結合されているハンドルの動きに関連するメトリックを判定するように構成され得る。ハンドル112の動きに関連するメトリックの例示的なタイプは、限定されないが、ハンドル112の移動の方向、ハンドル112の移動の速度、ハンドル112の移動の距離などを含む。いくつかの実施形態では、外科医コンソール170は、ハンドル112の動きに関連するメトリックデータを、コンピューティングデバイス180、および/またはロボットアセンブリ190など外科用システム100のロボットアセンブリに送信する。センサ130Aおよび130Bのうちの1つ以上は、容量センサおよび/または光学センサでもよく、外科医コンソール170は、センサ130Aおよび130Bの容量センサおよび/または光学センサから受信されたデータに基づいて、ユーザがハンドル112Aまたはハンドル112Bに接触しているかどうかを判定するように構成され得る。
ハンドル112の各々は、ハンドル112が移動するように構成されている移動の各方向について、少なくとも1つのモータに動作可能に結合され、関連付けられている。そのようなモータの例は、それぞれハンドル112Aおよびハンドル112B用のモータ132Aおよびモータ132B(集合的にモータ132)である。モータ132Aの各モータは、ハンドル112Aに動作可能に結合され、モータ132Aの各モータは、ハンドル112Aが動くように構成されている移動の方向に関連付けられている。同様に、モータ132Bの各モータは、ハンドル112Bに動作可能に結合され、モータ132Bの各モータは、ハンドル112Bが動くように構成される移動の方向に関連付けられている。方向に関連付けられたモータ132の各モータは、関連付けられた方向にハンドル112の移動を引き起こすために、関連付けられた方向に作動し、関連付けられた方向へのハンドル112の移動に抵抗するために、関連付けられた方向とは反対の方向に作動するように構成されている。例えば、ハンドル112Aが左方向に動くように構成されている場合、モータ132Aの少なくとも1つのモータが左方向に関連付けられている。ハンドル112Aを左方向に動かすことが望ましい場合、外科医コンソール170は、ハンドル112Aの左方向への移動を支援するために、左方向に対応する方向に、左方向に関連付けられたモータを作動させ、ハンドル112Aの左方向への移動に抵抗することが望ましい場合、外科医コンソール170は、左方向へのハンドル112Aの移動に抵抗するために、左方向に関連付けられたモータを、左方向とは反対の方向に対応する方向に作動させる。モータ132は、様々な速度で作動するように構成されている。
フットペダル128は、ユーザから外科医コンソール170への1つ以上の入力を受信するように構成されている。フットペダル128は、2つ以上の位置に配置されるように構成されており、フットペダル128の位置は、外科医コンソール170への入力に関連付けられている。フットペダル128の位置の選択は、外科医コンソール170への関連入力を提供する。いくつかの実施形態では、ユーザは、フットペダル128を使用して、外科用システム100の1つ以上の構成要素に関連する設定および/または構成データを更新するための入力を提供する。外科医コンソール170は、フットペダル128を介して受信された入力に基づいて設定および/または構成データを更新し、更新された設定および/または構成データをコンピューティングデバイス180および/またはロボットアセンブリ190など1つ以上のロボットアセンブリに送信するように構成される。いくつかの実施形態では、フットペダル128の位置のうちの1つは、フットペダル128の休止位置になるように構成され、フットペダル128が休止位置にあるとき、フットペダル128が休止位置にあることを示す入力信号は、外科医コンソール170に送信される。いくつかの実施形態では、フットペダル128は瞬間的なフットペダルスイッチであり、外科医コンソール170への入力は、フットペダル128をダブルタップするなど、フットペダル128による一連のやり取りに基づいて送信される。外科医コンソール170は、フットペダル128を介して受信された入力を、コンピューティングデバイス180および/またはロボットアセンブリ190など、外科用システム100のロボットアセンブリに送信する。
図1Aは、追跡デバイス160および外科医コンソール170を、通信経路および通信リンク138、167を介して互いに通信可能に結合された別個の構成要素として示しているが、この構成は、単に例示的な例として提供されている。他の実施形態では、追跡デバイス160は、外科医コンソール170に統合される。したがって、追跡デバイス160および/または外科医コンソール170によって実行されるものとして本明細書に記載の機能は、様々な他の実施形態では、追跡デバイス160によって、外科医コンソール170によって、それらの任意の組み合わせによって、および/またはプロセッサ133または165、および/またはメモリ134または166など、それらの構成要素の任意の組み合わせによって実行されてもよい。
一実施形態では、追跡デバイス160は、1つ以上の画像捕捉デバイス161、1つ以上のプロセッサ165、1つ以上のメモリ166、および1つ以上の通信リンク167を含む。外科医コンソール170は、リアルタイムまたはほぼリアルタイムで、ユーザ位置基準点(例えば、ユーザまたはユーザが着用しているアイウェア163の一部)を識別し、追跡することと、ユーザが外科医コンソール170に関与しているか、または関与していないかどうかを判定することと、判定の結果に基づいて、外科用システム100を非セーフモードまたはセーフモードで動作させることと、を行うように構成されている。本明細書で使用される場合、ユーザ位置基準点という用語は、一般に、外科医コンソール170が、ユーザに面するディスプレイデバイス122の前面によって画定される座標系などの基準座標系に対するユーザの位置および/もしくは配向を計算し、ならびに/または追跡する基礎として利用することができる、ユーザの少なくとも一部および/またはオブジェクト(眼鏡など)の少なくとも一部を指す。様々な実施形態では、ユーザ位置基準点は、ユーザもしくはオブジェクトの単一の部分を含んでもよく、またはユーザもしくはオブジェクトの複数の部分を含んでもよい。この文脈で本明細書で使用される場合、「ユーザの一部」という用語は、限定されないが、目、目内の瞳孔、頭、顔などを含む、ユーザの任意の解剖学的部分を指す。1つ以上の画像捕捉デバイス161の例示的なタイプは、図1Bに示される画像捕捉デバイス161aおよび161bである。図1Bに示されるように、画像捕捉デバイス161aおよび161bは、互いに離れて配置されている。外科医コンソール170は、画像捕捉デバイス161を動かして、1つ以上の期間にわたってユーザ部分基準点を追跡させるように構成されている。いくつかの実施形態では、1つ以上の画像捕捉デバイス161は、ハウジングユニット162などのハウジングユニット内に収容され、ハウジングユニット162は、外科医コンソール170内に含まれるか、または外科医コンソール170に取り付けられる。
いくつかの実施形態では、外科医コンソール170は、1つ以上の顔および/または特徴認識アルゴリズムにおいて訓練され、画像捕捉デバイス161によって捕捉された1つ以上の画像に1つ以上の顔および/または特徴認識アルゴリズムを適用することによって、ユーザの目、瞳孔、頭部、顔などを検出するように構成されている。いくつかの実施形態では、外科医コンソール170は、ユーザ位置基準点の光学追跡を実行するように構成され、1つ以上の画像捕捉デバイス161は、レンズの前に赤外線(IR)パスフィルタ(図1A〜1Cには図示せず)を備え、レンズの周りにIR発光ダイオード(LED)のリング(図1A〜1Cには図示せず)を備える。ユーザ位置基準点を光学的に追跡する際、外科医コンソール170は、IR LEDを使用してIR光で所望の空間を定期的に照明し、1つ以上の画像捕捉デバイス161を使用して、ユーザの一部またはユーザが着用するアイウェア163などのオブジェクト上に配置されたマーカからのIR光の反射を検出することによって、ユーザの位置基準点を識別し、追跡する。その上に配置された反射マーカであり得るマーカ164a、164b、164c、164d、164e(集合的に164)を含むアイウェア163の例示的なタイプが図1Cに示されている。
外科医コンソール170は、1つ以上のプロセッサ133と、1つ以上のメモリユニット134と、を含む。1つ以上のプロセッサ133は、1つ以上のメモリユニット134に動作可能に結合される。1つ以上のプロセッサ133は、本明細書に記載の技法または動作または命令を実施または実行するように適合される任意のタイプの好適なプロセッサであってもよい。1つ以上のメモリユニット134は、1つ以上のプロセッサ133によって実行される命令(図1Aには図示せず)を記憶し、本明細書に記載の技法は、1つ以上のプロセッサ133が1つ以上のメモリユニット134に記憶された命令を実行することに応答して、外科医コンソール170によって実行されてもよい。1つ以上のメモリユニット134は、機械命令、データなどを記憶するのに適した任意のタイプのハードウェアデバイスであってもよい。
ロボットアセンブリ190のプロセッサ118、133、165およびプロセッサ(図1Aには図示せず)(集合的に、外科用システム100のプロセッサ)は、ファームウェア、メモリ、または他の記憶装置、またはそれらの組み合わせにおける命令に従って、本明細書に記載の技法を実行するようにプログラムされたハードウェアプロセッサであってもよい。同様に、外科用システム100のプロセッサはまた、本明細書に記載された技法または操作を実行するように永続的にプログラムされている1つ以上の特定用途向け集積回路(ASIC)、フィールドプログラマブルゲートアレイ(FPGA)であってもよい。外科用システム100のプロセッサはまた、中央処理装置(CPU)、デジタル信号プロセッサ(DSP)、マイクロプロセッサ、または本明細書に記載の操作または技法を実行するためにハードワイヤードロジックまたはプログラムロジック、またはその両方を組み込んだ任意の他のデバイスであってもよい。
ロボットアセンブリ190のメモリユニット120、134、166およびメモリユニット(図1Aには図示せず)(集合的に、ロボット外科用システム100のメモリユニット)は、ランダムアクセスメモリ(RAM)(例えば、ダイナミックランダムアクセスメモリ(DRAM)、スタティックランダムアクセスメモリ(SRAM)など)などの揮発性メモリであってもよい。ロボット外科用システム100のメモリユニットは、読み取り専用メモリ(ROM)(例えば、プログラマブル読み取り専用メモリ(EPROM)、電気的消去可能プログラマブル読み取り専用メモリ(EEPROM)、不揮発性RAM(NVRAMなど))などの不揮発性メモリであってもよい。外科用システム100のメモリユニットはまた、磁気、光学、または電気媒体であり得る。理解されるように、ロボット外科用システム100の実装形態のプロセッサおよびメモリユニットは、例示のためだけに提供されており、限定的と解釈されないものとする。例えば、本開示のいずれかの実施形態の手順は、ハードウェアコンポーネント、ファームウェアコンポーネント、ソフトウェアコンポーネント、および/またはそれらの任意の組み合わせによって実装されてもよい。
次に図2Aを参照すると、本明細書の1つ以上の実施形態による、ディスプレイデバイス122および1つ以上の画像捕捉デバイス161の例示的な配置が示されている。1つ以上の画像捕捉デバイス161は、画像捕捉デバイス161とディスプレイデバイス122との間の位置関係がわかるようにディスプレイデバイス122に位置的に固定され、外科医コンソール170、追跡デバイス160、および/またはコンピューティングデバイス180は、画像捕捉デバイス161とディスプレイデバイス122との間の位置関係に部分的に基づいて、ユーザが外科医コンソール170に関与しているか、または関与していないかどうかを判定するように構成されている。いくつかの実施形態では、画像捕捉デバイス161とディスプレイデバイス122との間の位置関係は、例えばユーザによって外科医コンソール170への入力として提供される。外科医コンソール170は、部屋の地面または床など、外科医コンソール170が配置される環境の固定位置に対するディスプレイデバイス122の配向に基づいて、1つ以上の画像捕捉デバイス161とディスプレイデバイス122との間の位置関係を計算するように構成され得る。
リアルタイムで1つ以上の期間にわたってユーザ位置基準点を追跡する際に、外科医コンソール170は、各期間におけるディスプレイデバイス122に対するユーザ位置基準点の位置を計算する。ディスプレイデバイス122に対するユーザ位置基準点の位置は、1つ以上の画像捕捉デバイス161とディスプレイデバイス122との間の位置関係に関するデータに部分的に基づいて計算される。ディスプレイデバイス122に対するユーザ位置基準点の位置を計算する際に、外科医コンソール170は、ユーザ位置基準点の位置および配向を計算する。ユーザ位置基準点の位置は、3次元座標空間、例えばx、y、z座標空間で計算され、ユーザ位置基準点の配向は、ユーザ位置基準点のロール、ピッチ、およびヨー角を計算することによって計算される。ユーザ位置基準点の位置および配向は、ディスプレイデバイス122に対して計算される。
ユーザ位置基準点の位置および配向を使用して、外科医コンソール170は、θΔ差角を計算する。本明細書で使用される場合、「差角」という用語は、ディスプレイデバイス122の前面に垂直または垂直な仮想線206と、(例えば、3つのマーカ164に対応する3つのユーザ位置基準点)追跡されているユーザ位置基準点によって形成される平面に垂直な仮想線207との間の角度である。そのような差角θΔの一例は、図2Aにおける差角θΔ201として示されている。通常の仮想線207は、外科医が見ている方向と実質的に整合している。図2A、図2B、図2Cの例では、ユーザは、マーカ164が配置されたアイウェア163を着用しており、そのうちの少なくとも3つのマーカ164は、ユーザ位置基準点を表し、外科医コンソール170は、ユーザ位置基準点の光学追跡を実行している。外科医コンソール170は、マーカ164によって形成される平面に垂直な仮想線207と、ディスプレイデバイス122の前面に垂直な仮想線206との間の相対的な角度を計算することによって、差角θΔ201を計算する。
ユーザの頭が動くと、マーカ164によって形成される平面に垂直な仮想線207の位置は、第1の位置(例えば、図2Aに示される位置)から第2の位置(例えば、図2Aまたは図2Bに示される位置)に変化し、それに応じて、図2Bおよび図2Cに示されるように、差角θΔ201変化する。外科医コンソール170は、ユーザの目のように、ユーザの特徴を検出することによって、ユーザ位置基準点を追跡している実施形態では、外科医コンソール170は、ユーザの検出された特徴に垂直であり、ディスプレイデバイス122の前面に垂直な仮想線206の位置、および2つの仮想線の計算された位置の間の角度を計算することによって、差角θΔ201を計算する(図2A〜2Cには図示せず)。検出された特徴は、ディスプレイデバイス122に対して移動すると、検出された特徴に対して垂直な仮想線の位置が変化し、それに応じて差角θΔ201が変化する。
外科医コンソール170は、差角θΔ201に部分的に基づいて、ユーザが外科医コンソールに関与しているか、または関与していないかどうかを判定するように構成されている。ユーザが外科医コンソール170に関与しているか、または関与していないかどうかに関する外科医コンソール170による判定の追加の詳細は、図3、図4、および図5の文脈で本明細書に提供されている。
図3は、本明細書の例示的な実施形態による、ユーザが外科医コンソール170に関与しているか、または関与していないかどうかに基づいて、ロボット外科用システム100の動作モードを制御するための方法を示す。ステップ302において、外科医コンソール170は、セーフモードまたは通常モード(セーフモード以外の任意のモード)など、外科医コンソール170が現在動作しているモードを判定する。外科医コンソール170が、外科医コンソール170が現在通常モードで動作していると判定した場合(ステップ302において「通常モード」)、処理はブロック304に進む。ブロック304において、外科医コンソール170は、ユーザが外科医コンソール170に関与しているか、または関与していないかどうかを判定する。外科医コンソール170がステップ304で判定を行う方法の例示的な態様は、図4および図5に関連して以下に提供される。一般に、外科医コンソール170は、ユーザの頭または目の位置(例えば、ディスプレイデバイス122に対する)、手の位置(例えば、ハンドルとの接触112)、またはそれらの任意の組み合わせを追跡することによって、ユーザが外科医コンソール170に関与しているか、または関与していないかどうかを判定してもよい。外科医コンソール170が、ユーザが外科医コンソール170に関与している(ブロック304において「関与」)と判定した場合、処理はブロック306に進み、外科医コンソール170は、通常モードで動作し続ける。外科医コンソール170が、ユーザが外科医コンソール170に関与していないと判定した場合(ブロック304において「関与していない」)、処理はブロック308に進み、外科医コンソール170は、通常モードでの動作を停止し、セーフモード(以下で説明されるセーフモードなど)で動作を開始する。処理は、ステップ306および308の各々から、以下で説明されるステップ316に進む。
再びステップ302を参照すると、外科医コンソール170が現在セーフモードで動作していると外科医コンソール170が判定した場合(ステップ302において「セーフモード」)、処理はブロック310に進む。ブロック310において、外科医コンソール170は、ユーザが外科医コンソール170に関与しているか、または関与していないかどうかを判定する。外科医コンソール170がステップ304でどのように判定を行うかの例示的な態様は、図4および図5に関連して以下に提供される。ユーザが外科医コンソール170に関与していないと外科医コンソール170が判定した場合(ブロック310において「関与していない」)、処理はブロック312に進み、外科医コンソール170は、セーフモードで動作し続ける。ユーザが外科医コンソール170に関与していると外科医コンソール170が判定した場合(ブロック310において「関与している」)、処理はブロック314に進み、外科医コンソール170は、セーフモードでの動作を停止し、通常モードで動作を開始する。ステップ312および314の各々から、処理はステップ316に進む。
ステップ316において、外科医コンソール170は、例えば、ユーザが外科医コンソール170をシャットダウンするコマンドを入力したかどうかを判定することによって、外科医コンソール170の動作を終了するかどうかを判定する。外科医コンソール170の動作が終了されるべきであると外科医コンソール170が判定した場合(316において「はい」)、外科医コンソール170は、非アクティブ状態(例えば、パワーダウン状態またはスリープ状態)に入り、方法300は終了する。外科医コンソール170の動作が終了されないと外科医コンソール170が判定した場合(316において「いいえ」)、処理は、上で説明されるようにステップ302に戻る。
図4は、ユーザが図1のロボット外科用システム100の外科医コンソール170に関与しているか、または関与していないかどうかを判定するための例示的な方法を示すフローチャートである。ステップ402において、外科医コンソール170は、様々な方法のうちの1つでユーザ位置基準点を検出する。例えば、ユーザ位置基準点がユーザの一部(頭、目など)である一実施形態では、外科医コンソール170は、画像捕捉デバイス161を介して、ユーザの一部を含む画像を捕捉し、捕捉された画像に対して1つ以上の既知の画像認識アルゴリズムを実行することによって、ユーザ位置基準点を検出してもよい。ユーザ位置基準点が、ユーザによって着用されたアイウェア163の一部である一実施形態(マーカ164のうちの3つに対応する1つ以上のユーザ位置基準点など)では、外科医コンソール170は、画像捕捉デバイス161を介してマーカ164を含む画像を捕捉し、捕捉された画像に対して1つ以上の画像認識アルゴリズムを実行することによって、ユーザ位置基準点を検出してもよい。
ステップ404において、外科医コンソール170は、ディスプレイデバイス122に対する検出されたユーザ位置基準点の位置を計算する。ステップ406において、外科医コンソール170は、ディスプレイデバイス122に対する検出されたユーザ位置基準点の配向を計算する。画像捕捉デバイス161がIRパスフィルタおよびIR LEDを備え、外科医コンソール170が光学追跡を実行するように構成される実施形態では、外科医コンソール170は、ディスプレイデバイス122に対する1つ以上のマーカの位置および配向を計算し、1つ以上のマーカの位置および配向に基づいて、ユーザ位置基準点および/またはユーザの一部の位置および配向を計算する。
ステップ408において、外科医コンソール170は、それぞれ、ステップ404および406において計算されたユーザ位置基準点の位置および配向に基づいて、差角θΔ201を計算する。上で説明されるように、差角θΔ201を計算する際、外科医コンソール170は、ユーザ位置基準点によって画定される平面に垂直な仮想線の位置、およびディスプレイデバイス122の前面に垂直な仮想線の位置を計算し、位置間の角度θΔ201を差角として計算する。ステップ410において、外科医コンソール170は、ステップ404および406でそれぞれ計算されたユーザ位置基準点の位置および配向に基づいて、ユーザ位置基準点の移動方向を計算する。いくつかの実施形態では、外科医コンソール170は、現在の時間インスタンスにおけるユーザ位置基準点の位置および配向を以前の時間インスタンスの位置および配向と比較することによって、ユーザ位置基準点の移動方向を計算する。
ステップ412において、外科医コンソール170は、ユーザの一部の移動の方向に基づいて、第1の閾値角度θt1を選択する(例えば、図2Bおよび図2Cを参照して、上方向ではθt1u202、下方向ではθt1d204)。ユーザ位置基準点の可能な各移動方向、またはユーザ位置基準点の可能な移動方向の少なくともサブセットは、閾値角度に関連付けられ、閾値角度とユーザ位置基準点の移動方向との間の関連付けは、メモリユニット134のうちの1つなど、外科医コンソール170の記憶ユニットに記憶されているルールのセット、または外科医コンソール170に動作可能に結合された記憶デバイスにおいて指定される。例えば、上、下、左、右など、移動の各基本的方向が第1の閾値角度に関連付けられている場合、ルールのセットは、上、下、左、右の各々ついて対応する第1の閾値角度θt1を指定し、外科医コンソール170は、ルールのセットを使用して、ユーザ位置基準点の計算された移動方向に対応する第1の閾値角度を選択する。
いくつかの実施形態では、1つの移動方向に関連付けられた閾値角度は、別の移動方向に関連付けられた閾値角度とは異なるサイズのものである。例えば、下への移動方向に関連付けられた閾値角度(例えば、図2Cを参照して、θt1d204)は、右への移動方向(図2Cには図示せず)に関連付けられた閾値角度よりも大きくてもよい。特定の移動方向の閾値角度のサイズは、外科用システム100の構成要素がその方向に配置されているかどうか、およびその構成要素のディスプレイデバイス122からの距離に部分的に基づいている。例えば、フットペダル128がディスプレイデバイス122の下に配置されている場合、下方向の閾値角度のサイズは、そのユーザを、外科医コンソール170から離れたユーザとして識別することなく、フットペダル128を見ているユーザに対応するのに十分大きいものとする。いくつかの実施形態では、特定の移動方向の閾値角度のサイズは、外科医コンソール170のユーザがその方向で外科用システム100の構成要素と対話する可能性に依存する。例えば、第2のディスプレイデバイスがディスプレイデバイス122の右側に配置されているが、第2のディスプレイデバイスが外科医コンソール170のユーザにいかなる有用な情報も提供しない場合、ユーザは、外科医コンソール170への関与を依然として意図している間、第2のディスプレイデバイスを見る可能性は低い。したがって、第2のディスプレイデバイスが配置される方向、この例では右方向に関連付けられた閾値角度は、第2のディスプレイデバイスを見ているユーザに対応するのに十分な大きさであるものとする。しかしながら、第2のディスプレイデバイスがユーザに有用な情報を提供する、またはユーザが対話する場合、ユーザは、第2のディスプレイデバイスを見る可能性が高く、その方向の閾値角度のサイズは、第2のディスプレイデバイスを見ているユーザに対応するのに十分な大きさであるものとする。
いくつかの実施形態では、外科医コンソール170は、ディスプレイデバイス122に面しているユーザに対して、外科医コンソール170に動作可能かつ通信可能に結合されている追加の構成要素の位置および配向を識別し、追加の構成要素の位置および配向に基づいて、その方向に関連付けられた閾値角度を増加させるように構成される。例えば、デフォルト数のディスプレイデバイスに加えて、ディスプレイデバイスが、外科医コンソール170に面しているユーザの右側に、外科医コンソール170に動作可能かつ通信可能に結合される場合、外科医コンソール170は、ディスプレイデバイス122に面している、または外科医コンソール170を使用しているユーザに対する追加のディスプレイデバイスの位置および配向に基づいて、ユーザの右方向に関連付けられた閾値角度を増加させる。いくつかの実施形態では、外科医コンソール170に動作可能かつ通信可能に結合される追加の構成要素の位置および配向は、入力として外科医コンソール170に提供され、外科医コンソール170は、追加の構成要素が配置されている外科医コンソール170のユーザに対する方向を判定し、その方向に関連付けられた閾値角度のサイズの増加を計算し、計算されたサイズの増加によってその閾値角度を増加させる。
したがって、移動の異なる方向に対して異なる閾値角度を指定することにより、外科医コンソール170は、ユーザが外科医コンソール170に関与しているとき、ユーザが外科医コンソール170に関与していないと誤って識別する可能性を低減する。そのような誤った識別を低減させることは、外科用システム100がセーフモードで開始および動作することを誤って引き起こすことをさらに減少させ、外科用システム100の全体的な効率を改善する。
いくつかの実施形態では、移動の各方向はまた、第2の閾値角度θt2に関連付けられており(例えば、図2Bおよび図2Cを参照して、上方向ではθt2u203、下方向ではθt2d205)、第1の閾値角度θt1よりも小さく(例えば、上方向ではθt1u202、下方向ではθt1d204)、ルールのセットは、移動の各方向について関連付けられた第2の閾値角度θt2を指定する。そのような実施形態では、ステップ414において、外科医コンソール170は、ルールのセットを使用して、ステップ410で計算されたユーザ位置基準点の移動の方向に対応して第2の閾値角度θt2を選択する。第2の閾値角度θt2は、外科医コンソール170に関与していないと識別されたユーザが外科医コンソール170に再度関与するかどうかを判定するために使用される。第1の閾値角度θt1よりも小さな第2の閾値角度θt2を提供することによって、外科用システム100は、外科用システム100がセーフモードで動作するのと非セーフモードで動作するのとの間に迅速に揺動することを防止するバッファを作成する。
ステップ416において、外科医コンソール170は、それぞれステップ404および406において計算されたユーザ位置基準点の位置および配向に基づいて、ステップ408で計算された差角θΔ201が第1の閾値角度θt1よりも大きいことを比較する。差角θΔ201が第1の閾値角度θt1よりも大きいと外科医コンソール170が判定した場合(ステップ416において「θΔ>θt1」)、ステップ418において、外科医コンソール170は、ユーザが関与していないと判定する。いくつかの実施形態では、図3のステップ308および/または312に関連して上で説明されるように、外科医コンソール170は、ユーザが関与していないと識別したことに応答して、例えば、選択されたセーフモードに関連付けられたステップを開始し、処理することによって、外科用システム100に、選択されたセーフモードで動作させる。
いくつかの実施形態では、外科医コンソール170は、メモリユニット134または外科医コンソール170に動作可能に結合された記憶デバイスに記憶されたインジケータで構成され、その値は、外科用システム100がセーフモードで動作しているか、非セーフモードで動作しているかを示し、本明細書では「セーフモードインジケータ」と呼ばれ、外科医コンソール170は、セーフモードインジケータの値に少なくとも部分的に基づいて、外科用システム100がセーフモードで動作しているかどうかを判定する。外科医コンソール170は、外科用システム100がセーフモードで動作させられるとき、またはユーザが外科医コンソール170に関与していないと識別されたとき、外科用システム100がセーフモードで動作していることを示すために、セーフモードインジケータの値を更新するように構成されている。セーフモードインジケータの例は、限定されないが、フラグ変数を含み、その値は、例えば、フラグ変数の値を、外科用システム100がセーフモードで動作していることを示すには1(1)に、外科用システム100が非セーフモードで動作していることを示すにはゼロ(0)に設定することにより、外科用システム100がセーフモードで動作しているかどうかを示すために、外科医コンソール170が更新する。
いくつかの実施形態では、外科医コンソール170は、例えば、外科医コンソール170に動作可能に結合されたメモリユニット134または記憶デバイスなど、外科医コンソール170のメモリユニットに記憶されたルールのセットに指定されたデフォルトのセーフモードを選択するように構成されている。いくつかの実施形態では、各々がランキングに関連付けられている複数のセーフモードのリストは、外科医コンソール170に動作可能に結合された1つ以上のメモリユニット134または記憶デバイスに記憶され、外科医コンソール170は、セーフモードに関連付けられたランキングに基づく複数のセーフモードのリストから選択するように構成されている。いくつかの実施形態では、外科医コンソール170は、外科用システム100が動作するように構成され、ユーザがセーフモードを選択し、その選択をGUIを使用して外科医コンソール170への入力として提供する様々なセーフモードのリストを提示するGUIを提供する。外科用システム100が動作するように構成されているいくつかのセーフモードの追加の詳細は、図6および図7の文脈で本明細書に提供されている。
ステップ416において、差角θΔ201が第1の閾値角度θt1以下である(ステップ416において「θΔ≦θt1」)と外科医コンソール170が判定した場合、第2の閾値角度θt2が移動の方向に関連付けられ、第2の閾値角度θt2が選択される実施形態では、外科医コンソール170はステップ420に進む。ステップ420において、外科医コンソール170は、差角θΔを第2の閾値角度θt2と比較する。差角Δθが第2の閾値角度θt2未満であると外科医コンソールが判定した場合(ステップ420において「θΔ<θt2」)、ステップ422において、外科医コンソール170は、ユーザが関与していると判定する。実施形態では、外科医コンソール170は、ユーザが関与しているかどうかを判定するために、ユーザのXYZ位置をさらに判定し得る(すなわち、外科医コンソール170に対する3次元空間内のユーザの頭、顔、または3Dグラスの位置を判定する)。例えば、外科医コンソール170に対するユーザのXYZ位置を判定することにより、外科医コンソール170は、ユーザが外科医コンソールから遠すぎるかどうかを判定し、そのことを示す通知を提供することができる。加えて、複数の個人が外科医コンソール170の所定の距離内にある実施形態では、外科医コンソール170は、正しい個人(すなわち、ユーザ)が追跡され、ユーザの後ろに立っている別の個人が、外科医コンソール170に関与していると判定されないことを確実にすることができる。
差角θΔが第2の閾値角度θt2以下である(ステップ420において「θΔ≧θt2」)と外科医コンソール170が判定した場合、ステップ424において、外科医コンソール170は、外科用システム100がセーフモードで動作しているかどうかを判定する。いくつかの実施形態では、外科医コンソール170は、ユーザの変位が所定の閾値よりも大きいかどうかをさらに判定してもよい。加えて、または代替的に、外科医コンソール170は、変位勾配を判定してもよい。変位勾配および/または変位が所定の閾値よりも大きいかどうかを判定することにより、外科医コンソール170は、外科医コンソール170の関与ゾーンに複数の個人が存在し、ユーザ以外の個人の移動が誤ってユーザに帰属される、またはトラッカがあるユーザから別のユーザにジャンプする場合のように、あまりにも短い期間に変位が大きすぎるかどうかを判定してもよい。変位が所定の閾値よりも大きいと判定された場合、または変位勾配が、トラッカが個人間でジャンプした可能性があることを示す場合、セーフモードがアクティブ化され得る。外科用システム100がセーフモードで動作していると外科医コンソール170が判定した場合(ステップ424において「はい」)、ステップ418において、外科医コンソール170は、ユーザが外科医コンソール170に関与していないと識別する。外科用システム100がセーフモードで動作していないと外科医コンソール170が判定した場合(ステップ424において「いいえ」)、ステップ422において、外科医コンソール170は、ユーザが外科医コンソール170と関与している(または、場合によっては、再度関与している)と識別する。図3のステップ306および/または314に関連して上で説明されるように、外科医コンソール170は、ユーザが関与していると識別したことに応答して、例えば、通常モードに関連付けられたステップを開始し、処理することによって、外科用システム100に、通常の(非セーフ)モードで動作させる。いくつかの実施形態では、ステップ420において、外科医コンソール170は、ユーザが外科医コンソール170に再度関与していると識別する前に、閾値時間待機するように構成されている。外科医コンソール170がセーフモードインジケータで構成されている実施形態では、外科医コンソール170は、ユーザが外科医コンソール170に再度関与または関与していると識別された時点で、または外科医システム100がセーフモードから退出する時点で、外科医システム100がセーフモードで動作していないことを示すために、セーフモードインジケータの値を更新する。
図5は、外科医コンソール170のユーザが外科医コンソール170に関与しているか、または関与していないかどうかを判定する別の例示的な方法500を示す。様々な実施形態では、外科医コンソール170は、方法300(図3)および/または方法400(図4)を個々に、または相互に組み合わせて使用することにより、ユーザが外科医コンソール170に関与しているか、または関与していないかどうかを判定するように構成されてもよい。
ステップ502において、外科医コンソール170のプロセッサ133は、ユーザが外科医コンソール170の1つ以上のハンドル112に接触しているかどうかを示す1つ以上のセンサ130からデータを取得する。ステップ504において、外科医コンソール170は、ステップ502で取得されたデータに基づいて、ユーザがハンドル112に接触しているかどうかを判定する。特に、例えば、外科医コンソール170は、ステップ504において、ハンドル112Aに結合され、ハンドル112Aとのユーザの接触を識別するように構成された容量センサおよび/または光学センサなど、1つ以上のセンサ130Aからの出力に基づいて、ユーザがハンドル112Aに接触しているかどうかを判定してもよい。そのようなセンサ130Aからの例示的なタイプの出力は、限定されないが、ユーザがセンサに結合されたハンドル112Aに接触しているときの高信号または1(1)、およびユーザがハンドル112Aに接触していないときの低信号またはゼロ(0)を含む。例えば、センサ130Aは、ユーザがハンドル112Aに接触しているときに高信号または1(1)を外科医コンソール170のプロセッサ133に送信し、ユーザがハンドル112Aに接触していないときに低信号またはゼロ(0)を送信するように構成された容量センサであり、外科医コンソール170は、プロセッサ133によって容量センサ130Aから高信号または1が受信された場合、ユーザがハンドル112Aに接触していると判定し、プロセッサ133によって容量センサ130Aから低信号またはゼロ(0)が受信された場合、ユーザはハンドル112Aに接触していないと判定する。いくつかの実施形態では、外科医コンソール170は、ユーザが同時にハンドル112の大部分に接触している場合、ユーザが外科医コンソール170に接触していると判定する。例えば、外科医コンソール170が3つのハンドル112を含み、ユーザがハンドル112の大部分に接触している場合、ユーザが外科医コンソール170に接触していると外科医コンソールが判定するように構成されている場合、外科医コンソール170は、ユーザが少なくとも2つのハンドル112と同時に接触している場合、ユーザは外科医コンソール170に接触していること判定する。同様に、外科医コンソール170が2つのハンドル112を含む場合、外科医コンソール170は、ユーザが外科医コンソール170のハンドル112の大部分であるハンドル112の両方に接触している場合、ユーザが外科医コンソール170に接触していると判定する。
ステップ506において、ユーザが外科医コンソール170に接触していないと外科医コンソール170が判定した場合(ステップ506において「いいえ」)、ステップ510において、外科医コンソール170は、ユーザを外科医コンソール170に関与していないと識別する。ステップ506において、ユーザが外科医コンソール170に接触していると外科医コンソール170が判定した場合(ステップ506において「はい」)、ステップ508において、外科医コンソール170は、ユーザが外科医コンソール170に再度関与していると識別する。
上で説明されるように、外科用システム100は、個々に、または任意の組み合わせで、1つ以上のセーフモードで動作するように構成され、これらのセーフモードの追加の詳細が、図6および図7の文脈で本明細書に提供されている。特に、図6および図7は、(1)クラッチングセーフモード、(2)ロックセーフモード、(3)スケーリング係数セーフモード、(4)ハンドル速度に基づく対抗力セーフモード、および(5)ハンドル位置に基づく対抗力セーフモードの5つの例示的な安全な動作モードのうちの1つ以上で図1のロボット外科用システム100を動作させるための例示的な方法600を示すフローチャートを示す。いくつかの実施形態では、外科用システム100は、ユーザが外科医コンソール170に関与しているか、または関与していないかどうかに関する判定(例えば、図3のステップ304および/または310、図4の方法400、および/または図5の方法500を参照)に基づいて、方法600に従ってセーフモードのうちの1つ以上に入る(例えば、図3のステップ308を参照)、またはそこに留まる(例えば、図3のステップ312を参照)ように構成されている。次に図6を参照すると、ステップ602において、外科医コンソール170は、例えば、上記のセーフモードインジケータの値に基づいて、入るべき、または留まるべきセーフモードを判定する。いくつかのセーフモードは、ロボットアセンブリ190またはそのサブユニット191、192、193、および194のうちの1つを制御する文脈で本明細書に記載されているが、様々な実施形態では、セーフモードは、複数のロボットアセンブリ190および/またはそのサブユニット191、192、193、および194を同時に制御することを含む。
外科医コンソール170が、クラッチングセーフモードに入る、またはそこに留まると判定した場合(ステップ602の「クラッチング」)、処理はステップ604に進む。外科用システム100が非セーフモードで動作している間、外科医コンソール170は、外科医コンソール170のハンドル112の移動に関連するデータを、ハンドル112に通信可能に結合されたロボットアセンブリ190のサブユニット191、192、193、および194のうちの1つ以上に送信することにより、ロボットアセンブリ190のサブユニット191、192、193、および194のうちの1つ以上を移動させ、ハンドル112の移動に関連するデータを受信したサブユニット191、192、193、194のうちの1つ以上は、受信されたデータに部分的に基づいて移動する。
ステップ604において、外科用システム100がクラッチングセーフモードで動作している間、外科医コンソール170の各ハンドル112について、外科医コンソール170は、例えば、サブユニット191、192、193、および/または194へのハンドル112の移動に関連したデータの送信を防止することによって、ハンドル112の移動が、そのハンドル112に通信可能に結合されたロボットアセンブリ190のサブユニット191、192、193、および194のうちの1つ以上の対応する移動を引き起こすことを防止する。いくつかの実施形態では、外科医コンソール170は、メモリユニット134または外科医コンソール170に動作可能に結合された記憶デバイスに記憶されたインジケータで構成され、その値は、クラッチングセーフモードが有効か無効かを示し、本明細書では「クラッチングセーフモードインジケータ」と呼ばれ、外科医コンソール170は、移動変換インジケータの値に部分的に基づいて、ハンドル112の移動に関連するデータを送信するかどうかを判定する。クラッチングセーフモードが無効であることを示すクラッチングセーフモードインジケータの値の例は、1(1)または1のシーケンス(「11111」など)であり、クラッチングセーフモードが有効であることを示すクラッチングセーフモードインジケータの値の例は、ゼロ(0)またはゼロのシーケンス(例えば、「00000」)である。いくつかの実施形態では、クラッチングセーフモードインジケータの値の各ビットは、外科医コンソール170のハンドル112に関連付けられ、外科医コンソール170は、特定のハンドル112の移動データを、そのハンドル112に関連付けられたビットの値に部分的に基づいて、送信するかどうかを判定する。例えば、値のゼロ番目のビットは、ハンドル112Aに関連付けられ、値の第1のビットは、ハンドル112Bに関連付けられ、外科医コンソール170は、ゼロ番目のビットが高い(1)か低い(0)かに基づいて、ハンドル112Aの移動に関連するデータを送信するかどうかを判定し、外科医コンソール170は、第1のビットが高いか低いかに基づいて、ハンドル112Bの移動に関連するデータを送信するかどうかを判定する。
外科医コンソール170は、ハンドル112の移動から通信可能に結合されたロボットアームの移動への移動の変換が無効であるときにクラッチングセーフモードが有効であることを示すために、クラッチングセーフモードインジケータの値を更新するように構成されている。ステップ604から、処理はステップ606に進み、そこで、外科医コンソール170は、外科医コンソール170がセーフモード(この場合、クラッチングセーフモードであることを示すアラートをユーザに提供する。ステップ606で提供され得るアラートの例は、限定されないが、上記のアラートと同様に、視覚的および/または聴覚的アラートを含む。
再びステップ602を参照すると、外科医コンソール170がロッキングセーフモードに入る、またはそこに留まると判定した場合(ステップ602において「ロッキング」)、処理はステップ608に進む。ステップ608において、外科医コンソール170は、外科医コンソール170の各ハンドル112をその位置にロックし、ハンドル112のそれらの位置からの移動を防止する。いくつかの実施形態では、外科医コンソール170は、ハンドル112をロックするときに各ハンドル112の位置を識別し、ハンドル112の位置に関連するデータを外科医コンソール170のメモリユニット134、または外科医コンソール170に動作可能に結合された記憶デバイスに記憶する。いくつかの実施形態では、外科医コンソール170は、モータ132Aおよび132Bなど、ハンドル112のモータおよびアクチュエータの移動を防止することによって、ハンドル112をそれらの位置にロックする。例えば、外科医コンソール170は、モータにサーボをかける、またはトルクを加えて、ハンドル112を格納位置に戻し、ロックされている各サブユニット191、192、193、194が格納位置を維持するようにすることができる。ステップ610において、外科医コンソール170は、ロック命令をサブユニット191、192、193、194の各々に送信することによって、ハンドル112に通信可能に結合されたサブユニット191、192、193、194の各々をその位置にロックさせる。上で説明されるように、外科医コンソール170は、コンピューティングデバイス180を介してロボットアセンブリ190に通信可能に結合され、外科医コンソール170は、サブユニット191、192、193、194をロックするための命令を、コンピューティングデバイス180に送信し、その命令をロボットアセンブリ190に送信することによって、ロボットアセンブリ190に送信する。いくつかの実施形態では、外科医コンソール170は、外科用システム100の各ロボットアセンブリ190に直接通信可能に結合され、外科医コンソール170は、ロボットアームをそれらの位置にロックするための命令を、ハンドル112に通信可能に結合されたロボットアームのロボットアセンブリ190に直接送信する。命令を受信する各ロボットアセンブリは、命令の受信に応答して、そのロボットアームを所定の位置にロックする。
ステップ610から、処理はステップ606に進み、そこで、外科医コンソール170は、セーフモード(この例ではロッキングセーフモード)がアクティブ化されていることを示すアラートをユーザに提供する。いくつかの実施形態では、外科医コンソール170は、ハンドル112および通信可能に結合されたロボットアームがロックされていることを示す視覚的アラートを提供する。視覚的アラートの一例は、限定されないが、ディスプレイデバイス122など、外科医コンソール170の1つ以上のディスプレイデバイスに表示されるグラフィカルアイテムを含む。視覚的アラートの別の例は、ハンドル112および通信可能に結合されたロボットアームがロックされているときに電源が投入される外科医コンソール170上の発光ダイオード(LED)を含む。いくつかの実施形態では、外科医コンソール170は、音声記録などの聴覚アラート、および/またはハンドル112および通信可能に結合されたロボットアームがロックされていることを示す振動または他の物理的フィードバックなどの触覚アラートを提供するように構成されている。
再びステップ602を参照すると、外科医コンソール170が、スケーリング係数セーフモードに入る、またはそこに留まると判定した場合(ステップ602において「スケーリング係数」)、処理はステップ612に進む。ステップ612において、外科医コンソール170は、外科医コンソール170のハンドル112の移動を検出する。上で説明されるように、各ハンドル112は、ハンドル112の移動およびハンドル112の移動の速度を検出し、ハンドル112が移動したかどうか、および/またはハンドル112の速度を示す値を出力するように構成された1つ以上のセンサ130に動作可能かつ通信可能に結合される。ハンドル112に結合された1つ以上のセンサ130の出力値に基づいて、外科医コンソール170は、ハンドル112の移動を検出する。ステップ614において、外科医コンソール170は、ハンドル112が移動される速度を計算する。上で説明されるように、外科医コンソール170は、ハンドル112に結合され、ハンドル112の移動を感知するように構成された1つ以上のセンサ130を介して経時的に感知されるハンドルの複数の位置に基づいて速度を計算する。
ステップ616において、外科医コンソール170は、ステップ614で計算されたハンドル112の移動の速度に基づいて、セーフモードスケーリング係数のリストからスケーリング係数を選択する。本明細書で使用される場合、「スケーリング係数」という用語は、ハンドル112の移動と、ハンドル112に通信可能に結合された1つ以上のサブユニット191、192、193、および194によって引き起こされる対応する移動との間の比を指す。例えば、3:1のスケーリング係数は、ハンドル112の3インチの移動を、通信可能に結合されたサブユニット191、192、193、および/または194の1インチの移動に変換することを示す。同様に、50:1のスケーリング係数は、ハンドル112の5インチの移動を、通信可能に結合されたサブユニット191、192、193、および/または194の0.1インチの移動に変換することを示す。セーフモードスケーリング係数は、外科用システム100がスケーリング係数セーフモードで動作している場合に外科医コンソール170が使用するように構成されている、ルールまたは構成データのセットで指定されたスケーリング係数である。ルールまたは構成データのセットは、各セーフモードスケーリング係数の速度または速度の範囲をさらに指定し、メモリユニット134の1つ以上のメモリユニットまたは外科医コンソール170に動作可能に結合された記憶デバイスに記憶される。いくつかの実施形態では、セーフモードスケーリング係数のリストからスケーリング係数を選択する際に、外科医コンソール170は、ハンドル112の計算された速度または計算された速度を含む速度の範囲に最も近い速度を識別し、関連付けられたスケーリング係数を選択する。他の実施形態では、外科医コンソール170は、ハンドル112の移動の速度を計算し、計算された速度に基づいて下方スケーリング係数を修正する。
ステップ618において、外科医コンソール170は、ステップ616で選択されたセーフモードスケーリング係数を、スケーリングされた距離を計算するためにハンドル112が移動した距離に適用し、スケーリングされた距離を、受信されたスケーリングされた距離に部分的に基づいて移動するハンドル112に通信的に結合された1つ以上のサブユニット191、192、193、または194に送信する。選択されたセーフモードスケーリング係数は、いくつかの例では、非セーフモードスケーリング係数と比較して、ハンドル112の所与の移動量について、サブユニット191、192、193、または194の1つ以上の少量の移動量を引き起こす、下方へのスケーリング係数であってもよい。いくつかの実施形態では、外科医コンソール170は、選択されたセーフモードスケーリング係数、およびハンドル112が移動した距離を、サブユニット191、192、193、および/または194の特定の1つ以上に送信し、スケーリングされた距離は、ロボットアームが移動したことに部分的に基づいて計算される。ステップ710の後、外科医コンソール170は、ステップ302(図3Aに示される)に戻る。ステップ618から、処理はステップ606に進み、そこで外科医コンソール170は、ハンドル速度に基づくセーフモードが有効であることを示す視覚的および/または聴覚的アラートをユーザに提供する。
再びステップ602を参照すると、外科医コンソール170が、ハンドル速度に基づいて対抗力セーフモードに入る、またはそこに留まると判定した場合(ステップ602において「対抗力(速度ベース)」)、処理はステップ620に進む。ステップ620において、外科医は、1つ以上のハンドル112の移動を検出する。外科医コンソール170は、ステップ612について上で説明されるものと同様の様態で、ハンドル112の移動を検出する。ステップ622において、外科医コンソール170は、ハンドル112に動作可能かつ通信可能に結合されている1つ以上のセンサ130を使用して、ハンドル112の移動の速度を計算する。
ステップ624において、外科医コンソール170は、ハンドル112の移動の方向を計算する。上で説明されるように、1つ以上のセンサ130は、ハンドル112の1つ以上の方向への移動方向を感知するように構成されており、外科医コンソール170は、1つ以上のセンサ130からの出力に基づいて、例えば、ハンドル112の前の位置に対して、ハンドル112の移動方向を計算する。
ステップ626において、外科医コンソール170は、ハンドル112の移動の計算された速度およびハンドル112の移動の計算された方向に基づいて、ハンドル112の計算された移動方向とは反対方向にハンドル112に加えられる対抗力を計算する。ステップ628において、外科医コンソール170は、ハンドル112のモータ132のうち、626で計算された対抗力が加えられる方向に関連付けられたモータを識別し、ステップ630において、外科医コンソール170は、計算されたハンドルの移動方向と反対の方向にステップ626で計算された対抗力を生成するのに十分な速度で、ハンドル112の計算された移動方向と反対の方向に識別されたモータを作動させ、それによってハンドル112の任意の移動を大幅に減少させる。したがって、外科医コンソール170は、ハンドル112の移動方向とは反対方向にユーザに十分な力を提供し、それにより、外科用システム100がセーフモードで動作しているという触覚フィードバックをユーザに提供する。ステップ630から、処理はステップ606に進み、セーフモード(この例では、速度に基づく対抗力セーフモード)が作動したというアラートを提供する。
再びステップ602を参照すると、外科医コンソール170が、ハンドル位置に基づいて対抗力セーフモードに入る、またはそこに留まると判定した場合(ステップ602において「対抗力(位置ベース)」)、処理はステップ632に進む。ステップ632において、各ハンドル112について、外科医コンソール170は、外科用システム100がハンドル位置に基づいて対抗力セーフモードで動作させられるときのハンドル112の位置を識別する。外科医コンソール170は、ハンドル112の識別された位置を、外科医コンソール170に動作可能に結合されたメモリユニット134またはデータ記憶デバイスに記憶する。
ステップ634において、外科医コンソール170は、ステップ632で識別されたそれぞれの位置からのハンドル112の1つ以上の移動を検出する。ステップ634において、外科医コンソール170は、移動したハンドル112が移動した距離を計算する。上で説明されるように、ハンドル112に結合された1つ以上のセンサ130は、ハンドル112が移動する距離を感知するように構成され、外科医コンソール170は、1つ以上のセンサ130からのデータを使用してハンドル112が移動した距離を計算する。
ステップ636において、外科医コンソール170は、ハンドル112の移動の方向を計算し、ステップ638において、ハンドル112の移動の計算された速度および/またはハンドル112の移動の計算された方向に基づいて、外科医コンソール170は、ハンドルの計算された移動方向とは反対方向にハンドル112に加えられる対抗力を計算する。ステップ628において、外科医コンソール170は、ハンドル112のモータ132のうち、計算された移動方向に関連付けられたモータを識別し、ステップ630において、外科医コンソール170は、識別されたモータを、計算されたハンドル移動方向とは反対の方向に計算された対抗力を生成するのに十分な速度で回転させ、ハンドル112がステップ632で識別された位置に戻るまでモータを作動させ続け、それにより、ハンドル112の任意の移動を減少させ、動きが抵抗されていることを示すフィードバックをユーザに提供し、それにより、外科用システム100がセーフモードで動作していることをユーザにアラートする。
図7は、図1のロボット外科用システム100の1つ以上の安全な動作モードを終了するための例示的な方法700を示すフローチャートである。ステップ702において、外科医コンソール170は、例えば、上で説明されるセーフモードインジケータの値に基づいて、どのセーフモードから退出するかを判定する。外科医コンソール170が、クラッチングセーフモードから退出すると判定した場合(ステップ702の「クラッチング」)、処理はステップ704に進む。ステップ704において、外科医コンソール170の各ハンドル112について、外科医コンソール170は、ハンドル112の移動に関連するデータをサブユニット191、192、193、または194に送信することを可能にすることによって、ハンドル112の移動から、ハンドル112に通信可能に結合されたサブユニット191、192、193、および/または194の移動の変換を可能にする。外科医コンソール170がクラッチングセーフモードインジケータで構成される実施形態では、外科医コンソール170は、クラッチングセーフモードインジケータの値を、クラッチングセーフモードが無効であることを示す値に更新する。ステップ706において、外科医コンソール170は、クラッチングセーフモードが無効にされていること、および/または通常(非セーフ)モードが有効にされていることを示すアラートをユーザに提供する。
外科医コンソール170がロッキングセーフモードから退出すると判定した場合(ステップ702において「ロッキング」)、処理はステップ708に進む。ステップ708において、外科医コンソール170は、外科医コンソール170の各ハンドル112をロック解除する。いくつかの実施形態では、外科医コンソール170は、ユーザがハンドル112を動かすことに応答して、非セーフモード構成に従ってハンドル112に関連付けられたモータ132を作動させることによって、各ハンドル112をロック解除する。例えば、外科医コンソール170は、外科医が再度関与している(例えば、外科医コンソール170を見ている)と判定されたとき、および/またはボタンもしくはペダルを作動する、ハンドル112の特定の動きを実行するなど、ユーザが所定のアクションを実行した後、各ハンドル112をロック解除し得る。ステップ710において、外科医コンソール170は、ハンドル112に通信可能に結合された各サブユニット191、192、193、または194を、例えば、コンピューティングデバイス180に、サブユニット191、192、193、または194をロック解除する命令を送信することによって、ロック解除させ、または、それに応答して、コンピューティングデバイス180は、命令をサブユニット191、192、193、または194に送信する。ロボットアセンブリ190が外科医コンソール170に直接接続される実施形態では、外科医コンソール170は、ハンドル112に通信可能に結合されたロボットアームのロボットアセンブリ190にロボットアームを直接解放するための命令を送信する。命令を受信する各ロボットアセンブリは、命令の受信に応答して、そのサブユニット191、192、193、194をロック解除する。
ステップ706において、外科医コンソール170は、セーフモードを退出したこと、および/または通常モード(非セーフモード)に入ったことを示すアラートをユーザに提供する。一例では、アラートは、ハンドル112およびハンドル112に通信可能に結合されたロボットアームがロック解除されていることを示すことを含む。ユーザに提供されるアラートは、いくつかの実施形態では、視覚的アラートであり、いくつかの実施形態では、聴覚的アラートである。視覚的アラートの例には、限定されないが、外科医コンソール170の1つ以上のディスプレイデバイスに表示されるグラフィカルアイテムおよび外科医コンソール170上のLEDを含む。
再びステップ702を参照すると、外科医コンソール170が、スケーリング係数セーフモードから退出すると判定した場合(ステップ702において「スケーリング係数」)、処理はステップ712に進む。ステップ712において、外科医コンソール170は、通常の(非セーフモード)動作中に使用されるように、スケーリング係数を1:1値など所定の値にリセットする。
外科医コンソール170が、ハンドル速度に基づく対抗力セーフモードまたはハンドル位置に基づく対抗力セーフモードのいずれかから退出すると判定した場合(ステップ702において、「対抗力(速度ベース)」または「対抗力(位置ベース)」)、処理はステップ714に進む。ステップ714において、外科医コンソール170は、図6のステップ630で開始されたモータの作動を停止する。ステップ714から、処理はステップ706に進み、そこでセーフモードが無効にされており、通常モードが有効にされていることを示すアラートが生成される。
「一例では」、「例では」、「いくつかの例では」、「一実施形態では」、「実施形態では」、「いくつかの実施形態では」、または「他の実施形態では」という語句は、各々、本開示による同じまたは異なる実施形態のうちの1つ以上のことを指す場合がある。「AまたはB」という形式の語句は、「(A)、(B)、(AおよびB)」を意味する。「A、B、またはCのうちの少なくとも1つ」という形式の語句は、「(A)、(B)、(C)、(AおよびB)、(AおよびC)、(BおよびC)、または(A、B、およびC)」を意味する。
本明細書で説明するシステムはまた、1つ以上のコントローラを利用して、様々な情報を受信し、受信した情報を変換して出力を生成することができる。コントローラは、メモリ内に記憶された一連の命令を実行することが可能な、任意のタイプのコンピューティングデバイス、演算回路、または任意のタイプのプロセッサまたは処理回路を含み得る。コントローラは、複数のプロセッサおよび/またはマルチコア中央処理装置(CPU)を含んでもよく、マイクロプロセッサ、デジタル信号プロセッサ、マイクロコントローラ、プログラマブルロジックデバイス(PLD)、フィールドプログラマブルゲートアレイ(FPGA)、および/または同類のものなどの任意のタイプのプロセッサを含んでもよい。コントローラはまた、1つ以上のプロセッサによって実行されると、1つ以上のプロセッサに1つ以上の方法および/またはアルゴリズムを実行させるデータおよび/または命令を記憶するメモリも含んでもよい。
本明細書で説明される方法、プログラム、アルゴリズム、またはコードのいずれもが、プログラミング言語またはコンピュータプログラムに変換されるか、または表現されてもよい。「プログラミング言語」および「コンピュータプログラム」は、コンピュータへの命令を特定するために使用される任意の言語を含み、これらの言語およびその派生物は(限定されないが)Assembler、Basic、Batch files、BCPL、C、C+、C++、Delphi、Fortran、Java(登録商標)、JavaScript(登録商標)、Machine code、オペレーティングシステムコマンド言語、Pascal、Perl、PL1、スクリプト言語、Visual Basic、プログラム自体を特定するメタ言語、および全ての第1、第2、第3、第4、第5世代、またはそれ以降のコンピュータ言語を含む。また、データベースおよび他のデータスキーマ、ならびに任意の他のメタ言語も含まれる。解釈され、コンパイルされ、またはコンパイルおよび解釈されたアプローチの両方を使用する言語間で、区別はなされない。プログラムのコンパイル済みバージョンとソースバージョンとの間でも、区別はなされない。このため、プログラミング言語が、プログラミング言語が複数の状態(ソース、コンパイル済み、オブジェクト、またはリンク等)で存在し得る、プログラムへの参照は、かかる状態のいずれか、および全てへの参照である。プログラムへの参照は、実際の命令および/またはそれらの命令の意図を包含し得る。
本明細書に記載の方法、プログラム、アルゴリズム、またはコードのいずれも、1つ以上の機械可読媒体またはメモリ上に含まれ得る。収容されるコードまたは命令は、搬送波信号、赤外線信号、デジタル信号、および他の同様の信号によって表されることができる。
上記の説明は、単に本開示の例示的なものであることが理解されるべきである。様々な代替例および変更例が本開示から逸脱することなく当業者によって想到され得る。したがって、本開示は、全てのこのような代替、修正および変形を包含することが意図される。添付された図面を参照して説明された実施形態は、本開示の一定の例を説明するためにのみ提示される。上記および/または添付の特許請求の範囲に説明されたものとは実質的ではない部分で異なる他の要素、ステップ、方法および技術はまた、本開示の範囲内にあるように意図される。

Claims (20)

  1. ユーザ関与の監視を伴うロボット外科用システムであって、
    外科用器具に結合されたロボットアームを含むロボットアセンブリと、
    外科医コンソールであって、
    前記ロボットアセンブリ、前記ロボットアーム、または前記外科用器具のうちの少なくとも1つに通信可能に結合されたハンドルと、
    ディスプレイデバイスと、を含む、外科医コンソールと、
    ユーザ位置基準点の画像を捕捉するように構成された画像捕捉デバイスを含む追跡デバイスと、を含み、
    前記外科医コンソールまたは前記追跡デバイスのうちの少なくとも1つは、
    前記捕捉された画像に基づいて、前記ディスプレイデバイスに対する前記ユーザ位置基準点の位置を計算することと、
    前記計算された位置に基づいて、ユーザが前記外科医コンソールに関与しているか、または関与していないかどうかを判定することと、
    前記ユーザが前記外科医コンソールに関与していないという判定に応答して、前記ロボット外科用システムをセーフモードで動作させることと、を行うように構成されている、ロボット外科用システム。
  2. 前記外科医コンソールまたは前記追跡デバイスのうちの少なくとも1つは、前記ディスプレイデバイスに対する、3次元座標空間内の、前記ユーザ位置基準点の前記位置または配向のうちの少なくとも1つに対応する場所データを生成することによって、前記ユーザ位置基準点の前記位置を計算するようにさらに構成されている、請求項1に記載のロボット外科用システム。
  3. 前記ユーザが前記外科医コンソールに関与しているか、または関与していないかどうかの前記判定において、前記外科医コンソールまたは前記追跡デバイスのうちの少なくとも1つは、
    前記ディスプレイデバイスに対する前記ユーザ位置基準点の前記位置および配向に基づいて、差角を計算することと、
    前記差角を第1の閾値角度と比較することと、
    前記差角が前記第1の閾値角度より大きいという判定に応答して、前記ユーザが前記外科医コンソールに関与していないと判定することと、を行うようにさらに構成されている、請求項2に記載のロボット外科用システム。
  4. 前記外科医コンソールまたは前記追跡デバイスのうちの少なくとも1つは、前記ディスプレイデバイスに対する、前記ユーザ位置基準点の前記位置および前記配向に基づいて、複数の第1の閾値角度から前記第1の閾値角度を選択するようにさらに構成されている、請求項3に記載のロボット外科用システム。
  5. 前記外科医コンソールまたは前記追跡デバイスのうちの少なくとも1つは、
    前記ユーザ位置基準点の前記位置および前記配向に基づいて、前記ディスプレイデバイスに対する、前記ユーザ位置基準点の移動の方向を計算することと、
    前記ユーザ位置基準点の前記移動の方向に基づいて、前記第1の閾値角度を選択することと、を行うようにさらに構成されている、請求項3に記載のロボット外科用システム。
  6. 前記ユーザが前記外科医コンソールに関与しているか、または関与していないかどうかの前記判定において、前記外科医コンソールまたは前記追跡デバイスのうちの少なくとも1つは、
    前記差角が前記第1の閾値角度未満であるという判定に応答して、前記差角が前記第1の閾値角度よりも小さい第2の閾値角度未満であるかどうかを判定することと、
    前記差角が前記第2の閾値角度未満であるという判定に応答して、前記ユーザが前記外科医コンソールに関与していると判定することと、を行うようにさらに構成されている、請求項3に記載のロボット外科用システム。
  7. 前記外科医コンソールまたは前記追跡デバイスのうちの少なくとも1つは、前記ユーザが前記外科医コンソールに関与しているという前記判定に応答して、前記ロボット外科用システムを前記セーフモードから退出させるようにさらに構成されている、請求項6に記載のロボット外科用システム。
  8. 前記外科医コンソールまたは前記追跡デバイスのうちの少なくとも1つは、前記ロボット外科用システムが前記セーフモードで動作するとき、
    前記ユーザが前記外科医コンソールに関与しているという判定に応答して、前記ユーザが関与しているという前記判定の後、閾値量の時間の経過後、前記ロボット外科用システムを前記セーフモードから退出させるようにさらに構成されている、請求項1に記載のロボット外科用システム。
  9. コンピューティングデバイスをさらに含み、
    前記外科医コンソールまたは前記追跡デバイスのうちの少なくとも1つは、前記ロボット外科用システムが前記セーフモードで動作するとき、
    前記ハンドルの以前の位置からの前記ハンドルの移動を制限することと、
    前記ロボットアセンブリ、前記ロボットアーム、または前記外科用器具のうちの少なくとも1つの移動を制限するための命令を、前記コンピューティングデバイスに送信することと、を行うようにさらに構成されており、
    前記コンピューティングデバイスは、
    前記命令を受信することと、
    前記命令を、前記ロボットアセンブリ、前記ロボットアーム、または前記外科用器具のうちの少なくとも1つに送信することと、を行うように構成されており、
    前記ロボットアーム、前記ロボットアセンブリ、または前記外科用器具のうちの少なくとも1つは、
    前記命令を受信することと、
    前記命令に応答して、前記ロボットアセンブリ、前記ロボットアーム、または前記外科用器具のうちの少なくとも1つの移動を制限することと、を行うように構成されている、請求項1に記載のロボット外科用システム。
  10. 前記外科医コンソールまたは前記追跡デバイスのうちの少なくとも1つは、前記ロボット外科用システムが前記セーフモードで動作するとき、
    前記ハンドルの移動が、前記ハンドルに通信可能に結合された前記ロボットアームの対応する移動を引き起こすことを防止するようにさらに構成されている、請求項1に記載のロボット外科用システム。
  11. 前記外科医コンソールまたは前記追跡デバイスのうちの少なくとも1つは、
    前記ハンドルの移動の量を検出することと、
    前記ハンドルの前記移動の量に基づいて、前記ハンドルの前記移動に応答して引き起こされる、前記ロボットアセンブリ、前記ロボットアーム、または前記外科用器具のうちの少なくとも1つの移動の量を判定することと、
    前記ロボットアセンブリ、前記ロボットアーム、または前記外科用器具のうちの少なくとも1つを、前記判定された移動の量だけ移動させることと、を行うようにさらに構成されており、
    前記ロボット外科用システムが前記セーフモードで動作するとき、引き起こされる前記ロボットアセンブリ、前記ロボットアーム、または前記外科用器具のうちの少なくとも1つの前記移動の量の前記判定は、下方スケーリング係数を適用することを含む、請求項1に記載のロボット外科用システム。
  12. 前記外科医コンソールまたは前記追跡デバイスのうちの少なくとも1つは、
    前記ハンドルの移動の速度を計算することと、
    前記速度に基づいて、前記下方スケーリング係数を変更することと、を行うようにさらに構成されている、請求項11に記載のロボット外科用システム。
  13. 前記外科医コンソールは、前記ハンドルに対応する複数のモータを含み、前記モータの各々は、前記ハンドルに動作可能に結合されており、かつ前記ハンドルの移動方向に関連付けられており、
    前記ロボット外科用システムが前記セーフモードで動作するとき、前記外科医コンソールまたは前記追跡デバイスのうちの少なくとも1つは、
    前記ハンドルの移動の速度を計算することと、
    前記ハンドルの前記移動の方向を計算することと、
    前記ハンドルの前記移動の前記速度に基づいて、前記ハンドルの前記移動の前記方向とは反対方向の力を計算することと、
    前記ハンドルの前記複数のモータの中から、前記ハンドルの前記移動の前記方向とは反対の前記方向に関連付けられたモータを識別することと、
    前記ハンドルの前記移動の前記方向とは反対の前記方向に前記計算された力を生成するために、前記ハンドルの前記移動の前記方向とは反対の前記方向に前記識別されたモータを作動させることと、を行うようにさらに構成されている、請求項1に記載のロボット外科用システム。
  14. 前記外科医コンソールは、
    複数のモータであって、前記ハンドルに動作可能に結合され、前記ハンドルの移動の複数の方向にそれぞれ関連付けられている、複数のモータをさらに含み、
    前記外科医コンソールまたは前記追跡デバイスのうちの少なくとも1つは、前記ユーザが前記外科医コンソールに関与していないという前記判定に応答して、
    前記ハンドルの第1の位置を識別することと、
    前記ハンドルの前記第1の位置から前記ハンドルによって移動した距離を計算することと、
    前記ハンドルの前記移動の方向を計算することと、
    前記距離に基づいて、前記ハンドルの前記移動の前記方向とは反対方向の力を計算することと、
    前記ハンドルの前記複数のモータの中から、前記ハンドルの前記移動の前記方向とは反対の前記方向に関連付けられたモータを識別することと、
    前記ハンドルの前記移動の前記方向とは反対の前記方向に前記計算された力を生成するために、前記ハンドルの前記移動の前記方向とは反対の前記方向に前記識別されたモータを作動させることと、を行うようにさらに構成されている、請求項1に記載のロボット外科用システム。
  15. 前記外科医コンソールは、
    前記ハンドルが前記第1の位置に配置されるまで、前記ハンドルの前記移動の前記方向と前記反対方向に前記モータを作動させるようにさらに構成されている、請求項14に記載のロボット外科用システム。
  16. 複数のマーカを含むアイウェアをさらに含み、前記ユーザ位置基準点は、前記複数のマーカのうちの少なくとも1つを含む、請求項1に記載のロボット外科用システム。
  17. 前記ユーザ位置基準点は、前記ユーザの目、頭、または別の部分のうちの少なくとも1つを含む、請求項1に記載のロボット外科用システム。
  18. 前記ディスプレイデバイスは、自動立体視ディスプレイデバイスである、請求項1に記載のロボット外科用システム。
  19. ユーザ関与の監視を伴うロボット外科用システムであって、
    外科用器具に結合されたロボットアームを含むロボットアセンブリと、
    前記ロボットアセンブリ、前記ロボットアーム、または前記外科用器具のうちの少なくとも1つに通信可能に結合されたハンドルを含む、外科医コンソールと、を含み、
    前記ハンドルは、容量センサまたは光学センサのうちの少なくとも1つを含み、
    前記外科医コンソールは、
    前記容量センサまたは前記光学センサのうちの少なくとも1つから、ユーザによる前記ハンドルとの接触に関するデータを受信することと、
    前記ハンドルとの接触に関連する前記データに基づいて、前記ユーザが前記外科医コンソールに関与しているか、または関与していないかどうかを判定することと、
    前記ユーザが前記外科医コンソールに関与していないという判定に応答して、前記ロボット外科用システムをセーフモードで動作させることと、を行うように構成されている、ロボット外科用システム。
  20. 前記外科医コンソールは、前記ユーザが前記外科医コンソールに関与していないかどうかの前記判定において、前記ユーザが前記ハンドルに接触していないことを、前記ハンドルとの前記接触に関連する前記データが示すことに応答して、前記ユーザが前記外科医コンソールに関与していないと判定するようにさらに構成される、請求項19に記載のロボット外科用システム。
JP2020541902A 2018-02-02 2019-02-01 ユーザ関与の監視を伴うロボット外科用システム Pending JP2021511892A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201862625714P 2018-02-02 2018-02-02
US62/625,714 2018-02-02
PCT/US2019/016241 WO2019152771A1 (en) 2018-02-02 2019-02-01 Robotic surgical systems with user engagement monitoring

Publications (1)

Publication Number Publication Date
JP2021511892A true JP2021511892A (ja) 2021-05-13

Family

ID=67478976

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020541902A Pending JP2021511892A (ja) 2018-02-02 2019-02-01 ユーザ関与の監視を伴うロボット外科用システム

Country Status (5)

Country Link
US (1) US20210030498A1 (ja)
EP (1) EP3745985A4 (ja)
JP (1) JP2021511892A (ja)
CN (1) CN110545748A (ja)
WO (1) WO2019152771A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4076259A4 (en) * 2019-12-17 2023-09-20 Covidien LP ROBOTIC SURGICAL SYSTEMS WITH USER INTERVENTION MONITORING
US11571269B2 (en) * 2020-03-11 2023-02-07 Verb Surgical Inc. Surgeon disengagement detection during termination of teleoperation
CN112370165A (zh) * 2020-11-05 2021-02-19 李志强 一种操作手柄控制系统、方法、操作手柄及医疗设备
DE102021204494A1 (de) * 2021-05-04 2022-11-10 Kuka Deutschland Gmbh Verfahren und System zum Steuern eines Teleroboters
WO2023038918A1 (en) * 2021-09-09 2023-03-16 Covidien Lp Surgical robotic system with user engagement monitoring
CN115005976B (zh) * 2022-08-03 2022-11-18 杭州德适生物科技有限公司 一种外科手术用智能机械手

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130030571A1 (en) * 2010-04-07 2013-01-31 Sofar Spa Robotized surgery system with improved control
JP2013022651A (ja) * 2011-07-15 2013-02-04 Olympus Corp マニピュレータシステム
WO2017210101A1 (en) * 2016-06-03 2017-12-07 Covidien Lp Systems, methods, and computer-readable storage media for controlling aspects of a robotic surgical device and viewer adaptive stereoscopic display

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6587750B2 (en) * 2001-09-25 2003-07-01 Intuitive Surgical, Inc. Removable infinite roll master grip handle and touch sensor for robotic surgery
EP1915963A1 (en) * 2006-10-25 2008-04-30 The European Atomic Energy Community (EURATOM), represented by the European Commission Force estimation for a minimally invasive robotic surgery system
US8521331B2 (en) * 2009-11-13 2013-08-27 Intuitive Surgical Operations, Inc. Patient-side surgeon interface for a minimally invasive, teleoperated surgical instrument
WO2012127404A2 (en) * 2011-03-18 2012-09-27 Ecole Polytechnique Federale De Lausanne (Epfl) Ergonomic handle for haptic devices
KR101802464B1 (ko) * 2011-08-03 2017-11-28 주식회사 미래컴퍼니 수술용 로봇의 마스터 암 구조 및 수술용 마스터 로봇의 제어방법
US20140024889A1 (en) * 2012-07-17 2014-01-23 Wilkes University Gaze Contingent Control System for a Robotic Laparoscope Holder
US9283048B2 (en) * 2013-10-04 2016-03-15 KB Medical SA Apparatus and systems for precise guidance of surgical tools
US20170329402A1 (en) * 2014-03-17 2017-11-16 Spatial Intelligence Llc Stereoscopic display
KR102327948B1 (ko) * 2014-03-17 2021-11-17 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 원격 조종 의료 시스템을 위한 구조적 조절 시스템 및 방법
US10245112B2 (en) * 2016-06-27 2019-04-02 Corindus, Inc. Interlocking system and method for joysticks in a catheter procedure system
KR101706994B1 (ko) * 2016-10-17 2017-02-17 (주)미래컴퍼니 수술 로봇 시스템 및 그 복강경 조작 방법
EP3554412A4 (en) * 2016-12-15 2020-08-05 Intuitive Surgical Operations Inc. ACTUATED HANDLES FOR CONTROL DEVICE
JP7053811B2 (ja) * 2017-09-29 2022-04-12 シー・アール・バード・インコーポレーテッド 医療用超音波対象物を追跡するための装置および方法
JP2019091267A (ja) * 2017-11-15 2019-06-13 オムロン株式会社 脇見判定装置、脇見判定方法、およびプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130030571A1 (en) * 2010-04-07 2013-01-31 Sofar Spa Robotized surgery system with improved control
JP2013022651A (ja) * 2011-07-15 2013-02-04 Olympus Corp マニピュレータシステム
WO2017210101A1 (en) * 2016-06-03 2017-12-07 Covidien Lp Systems, methods, and computer-readable storage media for controlling aspects of a robotic surgical device and viewer adaptive stereoscopic display

Also Published As

Publication number Publication date
CN110545748A (zh) 2019-12-06
EP3745985A4 (en) 2022-03-16
EP3745985A1 (en) 2020-12-09
WO2019152771A1 (en) 2019-08-08
US20210030498A1 (en) 2021-02-04

Similar Documents

Publication Publication Date Title
JP2021511892A (ja) ユーザ関与の監視を伴うロボット外科用システム
US20210157403A1 (en) Operating room and surgical site awareness
US11007023B2 (en) System and method of registration between devices with movable arms
US20230157776A1 (en) Systems and methods for constraining a virtual reality surgical system
US11612450B2 (en) Camera control for surgical robotic systems
US9687301B2 (en) Surgical robot system and control method thereof
JP2022116156A (ja) 立体ビューワのための視線追跡を統合する医療装置、システム、及び方法
US11918299B2 (en) Systems and methods for detection of objects within a field of view of an image capture device
KR102364736B1 (ko) 크리티컬 리전을 가지는 수술 과정을 모니터링하기 위한 시스템 및 방법
JP7130003B2 (ja) 画像捕捉デバイスの視野内の物体の検出のためのシステムおよび方法
CN111616803B (zh) 具有用户接合监视的机器人手术系统
US20140194699A1 (en) Single port surgical robot and control method thereof
JP6137924B2 (ja) 回診支援ロボットおよび回診支援ロボットの制御プログラム
CN114041103A (zh) 用于计算机辅助手术系统的操作模式控制系统和方法
US20230010350A1 (en) Robotic surgical systems with user engagement monitoring
CN117202869A (zh) 用于提供输入设备重新定位提醒的方法和装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220131

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230131

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230202

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230417

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230626

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20240131