JP6180692B1 - 医療用マニピュレータシステム - Google Patents

医療用マニピュレータシステム Download PDF

Info

Publication number
JP6180692B1
JP6180692B1 JP2017525128A JP2017525128A JP6180692B1 JP 6180692 B1 JP6180692 B1 JP 6180692B1 JP 2017525128 A JP2017525128 A JP 2017525128A JP 2017525128 A JP2017525128 A JP 2017525128A JP 6180692 B1 JP6180692 B1 JP 6180692B1
Authority
JP
Japan
Prior art keywords
manipulator
mode
unit
visual field
medical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017525128A
Other languages
English (en)
Other versions
JPWO2017115425A1 (ja
Inventor
啓能 並木
啓能 並木
満彰 長谷川
満彰 長谷川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Application granted granted Critical
Publication of JP6180692B1 publication Critical patent/JP6180692B1/ja
Publication of JPWO2017115425A1 publication Critical patent/JPWO2017115425A1/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/70Manipulators specially adapted for use in surgery
    • A61B34/74Manipulators with manual electric input means
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00006Operational features of endoscopes characterised by electronic signal processing of control signals
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00147Holding or positioning arrangements
    • A61B1/00149Holding or positioning arrangements using articulated arms
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/70Manipulators specially adapted for use in surgery
    • A61B34/76Manipulators having means for providing feel, e.g. force or tactile feedback
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361Image-producing devices, e.g. surgical cameras
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00045Display arrangement
    • A61B1/0005Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107Visualisation of planned trajectories or target regions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2055Optical tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2059Mechanical position encoders
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B2034/301Surgical robots for introducing or steering flexible instruments inserted into the body, e.g. catheters or endoscopes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • A61B2090/365Correlation of different images or relation of image positions in respect to the body augmented reality, i.e. correlating a live optical image with another image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25User interfaces for surgical systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1679Programme controls characterised by the tasks executed
    • B25J9/1692Calibration of manipulator
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/39Robotics, robotics to robotics hand
    • G05B2219/39389Laparoscopic surgery, camera on center of operated part, view around, scale

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Heart & Thoracic Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Biomedical Technology (AREA)
  • Medical Informatics (AREA)
  • Robotics (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biophysics (AREA)
  • Optics & Photonics (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Gynecology & Obstetrics (AREA)
  • Mechanical Engineering (AREA)
  • Manipulator (AREA)
  • Microscoopes, Condenser (AREA)
  • Endoscopes (AREA)

Abstract

第一マニピュレータ及び第二マニピュレータを備えた医療用マニピュレータシステムを制御するための複数の制御モードは、操作部による第二マニピュレータの操作を許可する第一モードと、操作部による操作指令に対して所定の制限を加えた上で制限の範囲内で第二マニピュレータの操作を許可する第二モードと、操作部による第二マニピュレータの操作を禁止する第三モードと、を含み、医療用マニピュレータシステムに設けられた判別部は、第二マニピュレータの所定の一部が第一マニピュレータによる視野領域の内にある場合に第一モードを選択し、上記所定の一部が視野領域の外にあり且つ第一マニピュレータと第二マニピュレータとの距離が所定値以下である場合に第二モードを選択し、上記所定の一部が視野領域の外にあり且つ第一マニピュレータと第二マニピュレータとの距離が前記所定値を超えている場合に第三モードを選択する。

Description

本発明は、医療用マニピュレータシステムに関する。
従来、処置対象部位を内視鏡により観察しながらこの部位に対して処置具を用いて手術を行う医療用マニピュレータシステムが知られている。
たとえば、内視鏡画像の表示領域の外側に設定された境界領域に内視鏡の視野外に位置する処置具の位置及び配向を表示させる技術が特許文献1に開示されている。
特許文献1に開示された技術によれば、内視鏡の視野外に位置する処置具の位置及び配向を操作者に容易に把握させ、内視鏡の視野外の処置具を視野内へと容易に移動させることができる。
特表2009−542362号公報
特許文献1に開示された技術では、内視鏡の視野外に位置する処置具は、内視鏡画像により視認できない状態であっても操作者によって自在に移動可能である。しかしながら、この場合、処置具の移動を妨げる障害物が視野外に位置していたとしてもこの障害物の存在を把握できないので、内視鏡の視野外で処置具と障害物とが衝突する可能性を考慮しつつ視野外で処置具を移動させる操作が必要である。このため、特許文献1に開示された技術では、内視鏡の視野外における処置具の移動が、視野から外れた処置具を視野内に戻すような単純な移動に限られてしまうので、使い勝手が悪い。
本発明は、使い勝手の良い医療用マニピュレータシステムを提供することを目的とする。
本発明の一態様は、撮像部を有する第一マニピュレータと、エンドエフェクタを有する第二マニピュレータと、前記撮像部が撮像した映像を表示する表示部と、前記第一マニピュレータ又は前記第二マニピュレータを操作するための操作指令を発する操作部と、複数の制御モードから1つのモードを選択して前記操作指令に基づいて前記第一マニピュレータ又は前記第二マニピュレータを制御する制御部と、を備え、前記制御部は、前記第一マニピュレータに設定された所定部位の位置を第一位置として取得するとともに前記第二マニピュレータに設定された所定部位の位置を第二位置として取得する位置情報取得部と、前記撮像部が撮像した映像を取得し、視野領域を算出する視野領域取得部と、前記視野領域,前記第一位置,及び前記第二位置に基づいて前記複数の制御モードから1つのモードを選択する判別部と、を有し、前記複数の制御モードは、前記操作部による前記第二マニピュレータの操作を許可する第一モードと、前記操作部による前記操作指令に対して所定の制限を加えた上で前記制限の範囲内で前記第二マニピュレータの操作を許可する第二モードと、前記操作部による前記第二マニピュレータの操作を禁止する第三モードと、を含み、前記判別部は、前記第二位置が前記視野領域の内にある場合に前記第一モードを選択し、前記第二位置が前記視野領域の外にあり且つ前記第一位置と前記第二位置との距離が所定値以下である場合に前記第二モードを選択し、前記第二位置が前記視野領域の外にあり且つ前記第一位置と前記第二位置との距離が前記所定値を超えている場合に前記第三モードを選択する医療用マニピュレータシステムである。
前記表示部は、前記撮像部が撮像した前記映像を表示する視野表示部と、前記第二マニピュレータの存在に対応する指標を表示可能な補助表示部と、を有していてもよい。
前記第二モードは、前記第一モードにおける前記第二マニピュレータの動作速度よりも低速で前記第二マニピュレータを動作させるように前記第二マニピュレータの動作速度を制限してもよい。
前記第二モードは、前記第二マニピュレータの動作可能方向を前記第一モードよりも制限してもよい。
前記第二モードは、前記動作可能方向を前記第二位置が前記視野領域に向かう方向のみに制限してもよい。
上記態様の医療用マニピュレータシステムは、前記第二モードにおける制限の内容を設定する設定手段をさらに有していてもよい。
前記第二マニピュレータは、前記第二マニピュレータが物体に接触したことを検知可能な接触検知手段をさらに有し、前記第二モードは、前記第二マニピュレータと前記物体とが接触したことを前記接触検知手段が検知したときに、前記第二マニピュレータと前記物体とが接触したことを操作者に報知し、且つ、前記操作部による前記第二マニピュレータの操作を禁止してもよい。
本発明の医療用マニピュレータシステムは、撮像部の視野領域外に第二マニピュレータが位置していても第一マニピュレータとの距離が所定値以下であれば所定の制限の下で第二マニピュレータを動作させることができるので、撮像部の視野外に第二マニピュレータがあっても上記の制限の範囲で自由に第二マニピュレータの操作が可能であり、使い勝手が良い。
本発明の一実施形態の医療用マニピュレータシステムのブロック図である。 同実施形態の医療用マニピュレータシステムの一部を示すブロック図である。 同実施形態の医療用マニピュレータシステムによって規定される視野空間及び境界空間を示す模式図である。 同実施形態の医療用マニピュレータシステムによって規定される視野空間及び境界空間を示す模式図である。 同実施形態の医療用マニピュレータシステムの表示部に表示される画像を示す模式図である。 同実施形態の医療用マニピュレータシステムの表示部に表示される画像を示す模式図である。 同実施形態の医療用マニピュレータシステムの表示部に表示される画像を示す模式図である。 複数の制御モードから1つのモードを選択するため条件を説明するための表である。 同実施形態の変形例の医療用マニピュレータシステムのブロック図である。 同実施形態の他の変形例の医療用マニピュレータシステムのブロック図である。 同実施形態の他の変形例の医療用マニピュレータシステムのブロック図である。 同変形例の医療用マニピュレータシステムの表示部に表示される画像の例を示す模式図である。 同実施形態の他の変形例の医療用マニピュレータシステムによって規定される視野空間及び境界空間を示す模式図である。 同変形例の医療用マニピュレータシステムの表示部に表示される画像の例を示す模式図である。 複数の制御モードから1つのモードを選択するため条件を説明するための表である。
本発明の一実施形態について説明する。図1は、本実施形態の医療用マニピュレータシステムのブロック図である。
図1に示すように、本実施形態の医療用マニピュレータシステム1は、撮像部3を有する第一マニピュレータ2と、所定の基準座標系における第一マニピュレータ2の位置及び姿勢を検知する第一位置姿勢検知部4と、前記第一マニピュレータ2を駆動させる第一駆動部6と、エンドエフェクタ8を有する第二マニピュレータ7と、上記の基準座標系における第二マニピュレータ7の位置及び姿勢を検知する第二位置姿勢検知部9と、第二マニピュレータ7を駆動させる第二駆動部11と、第一マニピュレータ2の撮像部3に接続された画像処理装置12と、第一マニピュレータ2及び第二マニピュレータ7を操作するための操作部13と、操作部13に対する操作入力に基づいて第一マニピュレータ2及び第二マニピュレータ7を制御する制御部15と、制御部15に接続された表示部22とを備えている。
第一マニピュレータ2は、体内の処置対象部位を撮像部3を用いて観察するためのマニピュレータである。第一マニピュレータ2の撮像部3は、撮像対象物を撮像して電気信号を画像処理装置12へ送信するように、画像処理装置12に電気的に接続されている。
第一位置姿勢検知部4は、第一マニピュレータ2を保持する第一多関節アーム5を有している。第一多関節アーム5は、第一マニピュレータ2の位置及び姿勢を検知するためのエンコーダ(不図示)を含む。第一多関節アーム5に設けられたエンコーダは、制御部15に接続されている。
第一駆動部6は、第一マニピュレータ2の撮像部3を移動させるためのアクチュエータ(不図示)を有している。第一駆動部6のアクチュエータは、本実施形態では第一多関節アーム5の各関節に配されている。第一駆動部6は、制御部15からの制御信号に従ってアクチュエータにより第一多関節アーム5を駆動することによって、第一マニピュレータ2を駆動する。
なお、第一マニピュレータ2の撮像部3の視野方向を変更するための別のアクチュエータ(不図示)が第一マニピュレータ2に配されていてもよく、この場合、このアクチュエータは第一駆動部6の一部として制御部15により制御される。
第二マニピュレータ7は、体内の処置対象部位をエンドエフェクタ8を用いて外科的に処置するためのマニピュレータである。
第二マニピュレータ7のエンドエフェクタ8は、第二駆動部11によって駆動されるように、第二駆動部11に接続されている。たとえば本実施形態のエンドエフェクタ8は、第二駆動部11によって開閉動作する鉗子や鋏である。なお、エンドエフェクタ8は、機械的に駆動されるものでなくてもよい。たとえばエンドエフェクタ8は、電気メスや超音波メスなどであってもよい。
第二位置姿勢検知部9は、第二マニピュレータ7を保持する第二多関節アーム10を有している。第二多関節アーム10は、第二マニピュレータ7の位置及び姿勢を検知するためのエンコーダ(不図示)を含む。第二多関節アーム10に設けられたエンコーダは、制御部15に接続されている。
なお、第二マニピュレータ7においてエンドエフェクタ8が首振り等の動作をすることができる場合には、第二位置姿勢検知部9のエンコーダは、第二マニピュレータ7自身の位置及び姿勢を検知するための第一のエンコーダと、エンドエフェクタ8の位置及び姿勢を検知するための第二のエンコーダとを含んでいてもよい。
第二駆動部11は、第二マニピュレータ7全体を移動させるためのアクチュエータ(不図示)と、第二マニピュレータ7のエンドエフェクタ8を駆動するためのアクチュエータ(不図示)とを有している。第二マニピュレータ7全体を移動させるためのアクチュエータは、本実施形態では第二多関節アーム10の各関節に配されている。エンドエフェクタ8を駆動するためのアクチュエータは、本実施形態では第二多関節アーム10の遠位端に配されている。第二駆動部11は、制御部15からの制御信号に従って各アクチュエータによりエンドエフェクタ8及び第二多関節アーム10を駆動することによって、第二マニピュレータ7を駆動する。
画像処理装置12は、撮像部3から送信された電気信号を受け付けて、この電気信号を映像信号に変換する。画像処理装置12は、映像信号を制御部15へと出力する。なお、画像処理装置12は、映像信号を制御部15に加えて表示部22にも出力できるように、複数系統の出力を備えていてもよい。
操作部13は、第一マニピュレータ2及び第二マニピュレータ7を操作する操作者が用いる入力デバイスである。操作部13は、操作者による入力に対応した操作指令を発する。操作部13が発した操作指令は、制御部15へと出力される。たとえば、第二マニピュレータ7を操作するための本実施形態の操作部13は、第二マニピュレータ7の遠位部分及びエンドエフェクタ8と相似形のマスタアーム14を有している。マスタアーム14を操作者が移動させることにより、第二マニピュレータ7全体を移動させることができる。マスタアーム14においてエンドエフェクタ8に対応する部位を操作者が動作させることにより、エンドエフェクタ8を動作させることができる。また、マスタアーム14は、操作者がマスタアーム14を動作させるために必要な力量を変更するための抵抗手段(不図示)を有している。
図2は、本実施形態の医療用マニピュレータシステムの一部を示すブロック図である。図3及び図4は、本実施形態の医療用マニピュレータシステムによって規定される視野空間及び境界空間を示す模式図である。図5、図6及び図7は、本実施形態の医療用マニピュレータシステムの表示部に表示される画像を示す模式図である。
図1に示すように、制御部15は、第一マニピュレータ2及び第二マニピュレータ7を制御するために、第一マニピュレータ2、第一位置姿勢検知部4、第一駆動部6、第二マニピュレータ7、第二位置姿勢検知部9、第二駆動部11、画像処理装置12、及び操作部13に、電気的に接続されている。
図2に示すように、制御部15は、位置情報取得部16と、視野領域取得部17と、画像生成部18と、画像重畳部19と、制御信号出力部20と、判別部21とを有している。
位置情報取得部16は、第一位置姿勢検知部4に設けられたエンコーダを参照し、第一マニピュレータ2の位置及び姿勢の情報を取得する。また、位置情報取得部16は、第二位置姿勢検知部9に設けられたエンコーダを参照し、第二マニピュレータ7の位置及び姿勢を取得する。本実施形態では、位置情報取得部16は、基準座標系における第一マニピュレータ2の撮像部3の部位を第一位置P1(図3および図4参照)として取得し、基準座標系における第二マニピュレータ7のエンドエフェクタ8の部位を第二位置P2(図3及び図4参照)として取得する。
本実施形態における基準座標系は、本実施形態の医療用マニピュレータに対して設定された所定の位置を原点とする直交座標系である。
第一位置P1の情報は撮像部3の位置の座標及びその姿勢の情報を含み、第二位置P2の情報はエンドエフェクタ8の位置の座標及びその姿勢の情報を含む。
視野領域取得部17は、画像処理装置12が出力した映像信号を受け付ける。すなわち、視野領域取得部17は、撮像部3が撮像した映像を画像処理装置12を介して取得する。
また、視野領域取得部17は、撮像部3の画角等の光学特性並びに撮像部3の位置及び姿勢(第一位置P1の情報)に基づいて、撮像部3が配される体内の空間内に視野空間S1(図3及び図4参照)を規定する。たとえば、視野領域取得部17は、撮像部3の画角等の光学特性並びに撮像部3の位置及び姿勢(第一位置P1の情報)に基づいて、基準座標系における視野空間S1の位置を算出する。視野空間S1は、撮像部3によって撮像可能な範囲のうち視野中心を含む一部であってもよいし、撮像部3の画角によって規定される空間であってもよい。
視野空間S1は、表示部22に表示される画像において、撮像部3の撮像視野(視野領域A1,図5参照)と対応する。
視野領域取得部17は、視野空間S1の周囲に、境界空間S2(図3及び図4参照)を規定する。たとえば、境界空間S2の外延は、第二マニピュレータ7の可動範囲に基づいて設定される。また、境界空間S2の外延は、例えば、第二マニピュレータ7が配される体内の部位において第二マニピュレータ7が移動可能な空間の形状に基づいて設定されてもよい。体内で第二マニピュレータ7が移動可能な空間の形状に基づく境界空間S2の外延の設定は、空間の形状を計測した結果に基づいていてもよいし、第二マニピュレータ7が配される体内の臓器の概略形状として一般的な形状に基づいていてもよい。
境界空間S2は、表示部22に表示される画像において、視野領域A1の周囲に位置する撮像視野外の領域(境界領域A2,図5参照)と対応する。
画像生成部18は、第二マニピュレータ7を撮像部3の視野方向から見た状態を示す画像をコンピュータグラフィックスによって生成する(図6参照)。たとえば、画像生成部18は、基準座標系における撮像部3の位置及び姿勢並びに基準座標系における第二マニピュレータ7の位置及び姿勢に基づいて、画像上における第二マニピュレータ7の描画位置及び第二マニピュレータ7の姿勢を算出して第二マニピュレータ7の形状を模した指標Mを含む画像を生成する。画像生成部18が生成する画像は、第二マニピュレータ7のうち少なくともエンドエフェクタ8に対応する形状の指標Mを含む。
本実施形態では、画像生成部18は、エンドエフェクタ8が視野空間S1外且つ境界空間S2内に位置している場合には指標Mを含む画像を生成し、エンドエフェクタ8が視野空間S1内に位置している場合には指標Mを含まない画像を生成する。
画像生成部18は、エンドエフェクタ8の形状を模した指標Mを含む立体画像(たとえば操作者の左目と右目に対応するように視差を考慮して構成された一組の画像)を生成してもよい。
画像生成部18は、指標Mに加えて背景を含む画像を生成してもよい。画像生成部18が生成する画像における背景は、例えば、本実施形態の医療用マニピュレータシステム1を用いて処置を行う対象となる患者に対して予め行った画像診断によって得られた画像(CT画像やMRI画像等)や、第一マニピュレータ2の撮像部3が撮像した過去の画像に基づいて再構成した画像などであってよい。
画像重畳部19は、画像処理装置12が制御部15へ出力した映像信号と画像生成部18が生成した画像とを統合して構成された重畳画像を表示部22へ出力する。画像重畳部19は、表示部22における表示可能領域の全域のうちの一部を、撮像部3により撮像された映像の表示領域(表示上の視野領域A1)として設定する。さらに、画像重畳部19は、表示部22における表示可能領域のうち視野領域A1以外の領域を、画像生成部18が生成した画像の表示領域(表示上の境界領域A2)として設定する。たとえば、本実施形態の画像重畳部19は、画像生成部18により生成された画像の中央に画像処理装置12からの映像が位置するように、画像生成部18により生成された画像の上に画像処理装置12からの映像を重ねて表示部22へと出力する。これにより、図5に示すように、表示部22における表示可能領域の中央部分が視野領域A1となり、視野領域A1の外側が境界領域A2となる。
図2に示すように、制御信号出力部20は、操作部13に対する操作入力に従って第一マニピュレータ2を動作させるための制御信号を生成して第一駆動部6へと出力する。
また、制御信号出力部20は、操作部13に対する操作入力に従って第二マニピュレータ7を動作させるための制御信号を生成して第二駆動部11へと出力する。さらに、制御信号出力部20は、複数の制御モードのうち判別部21により選択された1つのモードに従って、操作部13による操作指令に対する制限内容を変更する制御信号を操作部13へと出力する。
複数の制御モードは、操作部13による第二マニピュレータ7の操作を許可する第一モードと、操作部13による操作指令に対して所定の制限を加えた上で制限の範囲内で第二マニピュレータ7の操作を許可する第二モードと、操作部13による第二マニピュレータ7の操作を禁止する第三モードとを含む。
第一モードでは、抵抗手段は抵抗として機能せず、操作者が自在にマスタアーム14を操作することができる。
第二モードにおける所定の制限とは、第二マニピュレータ7の動作に関して第一モードよりも使い勝手を良くするための制限である。本実施形態の第二モードにおける所定の制限とは、第二マニピュレータ7の移動速度が第一モードにおける第二マニピュレータ7の移動速度よりも低速となるような制限である。たとえば、第二モードが選択された場合、操作部13のマスタアーム14に対する操作の入力に対して抵抗手段が抵抗を高めることでマスタアーム14への入力の速度を低下させることにより、第二マニピュレータ7の移動速度を低下させる。
第三モードにおける操作の禁止とは、操作部13のマスタアーム14が動作不能となるように抵抗手段が抵抗を高める制御である。
判別部21は、撮像部3が位置する空間における撮像部3の位置(第一位置P1)とエンドエフェクタ8の位置(第二位置P2)との位置関係に対応した複数の条件に基づいて、上記の第一モード、第二モード、及び第三モードから1つのモードを選択する。
図8は、複数の制御モードから1つのモードを選択するため条件を説明するための表である。
本実施形態の判別部21は、第二位置P2が視野空間S1の内にある場合(表示部22の表示上では第二位置P2が視野領域A1内にある場合)(図5参照)に第一モードを選択する。
また、本実施形態の判別部21は、第二位置P2が視野空間S1の外(表示部22の表示上では第二位置P2が視野領域A1の外)にあり且つ第一位置P1と第二位置P2との距離(撮像部3の視野方向に対して直交する面に沿って測った距離)が所定値以下である場合(図6参照)に第二モードを選択する。
また、本実施形態の判別部21は、第二位置P2が視野空間S1の外(表示部22の表示上では第二位置P2が視野領域A1の外)にあり且つ第一位置P1と第二位置P2との距離(撮像部3の視野方向に対して直交する面に沿って測った距離)が前記所定値を超えている場合(図7参照)に第三モードを選択する。
第一位置P1と第二位置P2との距離に関する前記所定値とは、例えば、撮像部3の視野方向に対して直交し且つ第二位置P2を含む面における撮像部3の視野中心から境界領域A2の外延までの距離である。なお、前記所定値は、一定値には限られない。たとえば、境界領域A2が円形である場合(境界空間S2の外延が円柱状や円錐状である場合)には前記所定値は一定値である。また、例えば、境界領域A2が円形以外の場合には、前記所定値は、境界領域A2の外延と視野中心との間の距離であり、部位により異なる。
本実施形態において、境界空間S2の外延は、組織の形状に対応して、予め、あるいは体内組織の計測結果に基づいて、決定される。このため、本実施形態では、境界空間S2の外延よりも内側の空間は、エンドエフェクタ8を移動させてもエンドエフェクタ8が体内の組織等に接触しにくいと見做すことができる。
表示部22は、制御部15の画像重畳部19によって構成された重畳画像を表示する。表示部22は、重畳画像を表示可能な表示パネル23を有している。この表示パネル23に重畳画像が表示されている状態において、表示パネル23は、撮像部3が撮像した映像を表示する部位である視野表示部22aと、第二マニピュレータ7の存在に対応する指標Mを表示可能な部位である補助表示部22bとに区別できる。
表示部22は、制御部15から出力された画像と画像処理装置12から出力された画像とのいずれか一方を選択に応じて表示できるように、複数の入力系統及びセレクタを有していてもよい。
本実施形態の医療用マニピュレータシステム1の作用について説明する。
本実施形態の医療用マニピュレータシステム1の使用時には、医療用マニピュレータシステム1は、撮像部3とエンドエフェクタ8との位置関係に基づいて、判別部21が制御モードを切り替える。
エンドエフェクタ8が視野領域A1内にあるとき(図5参照)には、判別部21は複数の制御モードから第一モードを選択するので、エンドエフェクタ8は操作部13における操作に従って自在に移動可能である。
エンドエフェクタ8が視野領域A1外且つ境界領域A2内にあるとき(図6参照)には、判別部21は複数の制御モードから第二モードを選択するので、エンドエフェクタ8はその移動速度が制限されつつも自在に移動可能である。
エンドエフェクタ8が境界領域A2外にあるとき(図7参照)には、判別部21は複数の制御モードから第三モードを選択するので、エンドエフェクタ8は操作部13による操作に反応せず停止する。
なお、第一モード、第二モード、及び第三モードのいずれにおいても、操作部13を用いて第一マニピュレータ2を動作させることは可能である。従って、第一モード又は第二モードで制御されている状態から第三モードへ移行してエンドエフェクタ8が停止した場合、第一マニピュレータ2を動作させて視野空間S1内又は境界空間S2内に第二マニピュレータ7が位置する状態に操作者が復帰させれば、第三モードから第一モード又は第二モードへ移行して第二マニピュレータ7及びそのエンドエフェクタ8の操作を再開できる。復帰のさせ方は、操作部13を介して操作しても良いし、手で直接第一マニピュレータ2の位置を変えるなどしても良い。
第二マニピュレータ7が視野空間S1外且つ境界空間S2内に位置している状態では、第二マニピュレータ7は、撮像部3からの映像には含まれない。たとえば、エンドエフェクタ8が視野空間S1外且つ境界空間S2内に位置している状態では、エンドエフェクタ8は、視野領域A1には表示されず、境界領域A2内にコンピュータグラフィックスによる指標Mとして描画される。
本実施形態の医療用マニピュレータシステム1は、第二マニピュレータ7のエンドエフェクタ8が視野空間S1外に位置していても、エンドエフェクタ8が境界空間S2内に位置していれば所定の制限(第二モード)の下で第二マニピュレータ7を動作させることができる。エンドエフェクタ8が視野空間S1外且つ境界空間S2内に位置しているときには、表示部22に表示される重畳画像における境界領域A2内に、エンドエフェクタ8を示す指標Mが表示される。このため、エンドエフェクタ8が撮像部3により撮像されていなくてもエンドエフェクタ8の位置及び姿勢を把握しやすい。その結果、本実施形態の医療用マニピュレータシステム1は、撮像部3の視野外に第二マニピュレータ7があっても上記の制限の範囲で自由に第二マニピュレータ7の操作が可能であり、使い勝手が良い。
また、エンドエフェクタ8が境界空間S2外へ移動したときにエンドエフェクタ8の移動が停止するので、エンドエフェクタ8が体内の組織などに意図せず接触する可能性を低く抑えることができる。
(変形例1)
上記実施形態の変形例について説明する。以下の各変形例において、上記の実施形態に開示された構成要素と同様の構成要素には、上記実施形態と同一の符号を付し、重複する説明を省略する。
本変形例の医療用マニピュレータシステム1(図1参照)は、第二マニピュレータ7が境界空間S2内でその外延に近づくに従って第二マニピュレータ7の移動可能速度が漸次低下するように第二マニピュレータ7が制御される点で、上記実施形態と異なっている。
一例として、本変形例では、エンドエフェクタ8が境界空間S2の外延に近づくに従ってマスタアーム14の抵抗手段による抵抗が漸次大きくなるように、制御部15が抵抗手段を制御する。これにより、マスタアーム14は、エンドエフェクタ8が境界空間S2の外延に近づくに従って、徐々に移動させにくくなる。逆に、制御部15は、エンドエフェクタ8が境界空間S2から離れて視野空間S1へ向かって移動するに従って、抵抗手段による抵抗を漸次小さく変更するように抵抗手段を制御する。これにより、エンドエフェクタ8が境界空間S2から離れて視野空間S1へ向かって移動するに従って、マスタアーム14の移動させにくさは徐々に解消される。
本変形例では、第一モードから第二モードに移行した時点における第二マニピュレータ7の移動速度は第一モードにおける移動速度と略等しく、第二モードから第三モードに移行する直前では第二マニピュレータ7は略停止状態である。このため、本変形例では、視野領域A1から外れて境界領域A2へ進入した時の第二マニピュレータ7の移動速度の変化がなめらかなので、使い勝手が良い。
(変形例2)
上記実施形態の他の変形例について説明する。図9は、本変形例の医療用マニピュレータシステムのブロック図である。
図9に示すように、本変形例の医療用マニピュレータシステム1は、第二マニピュレータ7が、第二マニピュレータ7が物体に接触したことにより物体が第二マニピュレータ7を押し返す力量を検知する触覚センサ24(接触検知手段)を有し、マスタアーム14が、第二マニピュレータ7のセンサが検知した力量を操作者の手に伝えるフィードバック手段(不図示)を有している。
本変形例の医療用マニピュレータシステム1は、第一モードにおいて、触覚センサ24が検知した力量に対して所定の対応関係を有してフィードバック手段が動作する。たとえば、第二マニピュレータ7が体内の組織に接触した時の弾力に対応して、マスタアーム14を操作する操作者がこの組織に直接触れたのと同程度の弾力を感じるように、フィードバック手段がマスタアーム14から操作者に力量を伝える。
また、本変形例の医療用マニピュレータシステム1は、第二モードにおいて、触覚センサ24が検知した力量に対して、第一モードにおいて操作者が感じるよりも大きな力量をマスタアーム14から操作者に伝える。
本変形例では、第二モードにおいて、操作者は、視野空間S1外且つ境界空間S2内にエンドエフェクタ8が位置していることを表示部22を用いて把握することができる。しかしながら、撮像部3が撮像した画像にはエンドエフェクタ8が表示されていないので、慎重を期して、触覚に頼って手さぐり状態で第二マニピュレータ7を動作させる。第二モードでは、第二マニピュレータ7が物体に接触したことを第一モードよりも知覚しやすいので、境界空間S2内で第二マニピュレータ7を移動させる際の使い勝手が良い。
なお、本変形例において、医療用マニピュレータシステム1が第二モードで動作している時に触覚センサ24が第二マニピュレータ7と物体との接触を検知した場合に、第二マニピュレータ7と物体とが接触した旨を制御部15が操作者に報知(視覚や聴覚により知覚可能なものも含む)するとともに、操作部13による第二マニピュレータ7の操作を制御部15が禁止してもよい。また、この場合、操作部13による第二マニピュレータ7の操作を制御部15が禁止することに代えて、第二マニピュレータ7と物体との接触が解消する方向にのみ第二マニピュレータ7が移動可能となるように第二モードにおいて第二マニピュレータ7の移動可能方向が制限されてもよい。
(変形例3)
上記実施形態のさらに他の変形例について説明する。
本変形例では、第二モードにおける動作として、上記実施形態,変形例1,及び変形例2に開示した動作から1つを選択して設定することができる。
たとえば、操作部13が、第二モードにおける動作を選択するためのスイッチ(不図示)を有している。
本変形例の医療用マニピュレータシステム1では、操作者の好みに合わせて第二モードにおける動作を選択できるので、使い勝手が良い。
(変形例4)
上記実施形態のさらに他の変形例について説明する。図10は、本変形例の医療用マニピュレータシステムのブロック図である。
図10に示すように、本変形例の医療用マニピュレータシステム1は、第一マニピュレータ2及び第二マニピュレータ7に加えて第三マニピュレータ25を有している。
第三マニピュレータ25は、体内を観察する内視鏡等の観察装置であり、撮像部26を有している。このため、本変形例では、第三マニピュレータ25によって、第一マニピュレータ2の撮像部3とは異なる視点から処置対象部位を観察することができる。
また、第三マニピュレータ25は、第一多関節アーム5と同様の第三多関節アーム28(第三位置姿勢検知部27)と、第一駆動部6と同様の第三駆動部29とを有しており、制御部15によって制御される。
たとえば、本変形例の医療用マニピュレータシステム1の制御部15は、第二マニピュレータ7を移動させる制御と同様に、第一モード、第二モード、及び第三モードのうちのいずれか1つのモードに従って第三マニピュレータ25を制御する。本実施形態の第三マニピュレータ25は、第二モードにおける動作の制限及び第三モードにおける動作の禁止の制約を受ける点において、第二マニピュレータ7と同様のマニピュレータである。
本変形例の医療用マニピュレータシステム1では、処置対象部位に対して処置をする器具(第二マニピュレータ7)と処置対象部位を撮像部3とは異なる視点から観察する器具(第三マニピュレータ25)とを併用することができ、いずれの器具も第二モードにおいて一定の制限の範囲で自由に操作が可能であるので、使い勝手が良い。
なお、本変形例では、第一マニピュレータ2と共に使用される他のマニピュレータの構成に対応して第二モードにおける制御の仕方が異なっていてもよい。たとえば、エンドエフェクタ8として鋭利なナイフを有する第二マニピュレータ7の場合、エンドエフェクタ8が体内の組織に意図せず接触すると組織を傷つける可能性があるので、第一モードから第二モードへ移行した時にこの第二マニピュレータ7が略停止状態となる程度に動作速度が低下するようになっていてもよい。また、例えば第二マニピュレータ7が体内の組織に接触しても悪影響が少ない場合には、第三モードにおいて第二マニピュレータ7の操作の一部を許可するように制御部15が第二マニピュレータ7の動作を制御してもよい。
また、第一モードから第二モードへ移行した時に、エンドエフェクタ8が視野領域A1内に進入する方向にのみ第二マニピュレータ7が移動可能となるように、第二モードにおいて第二マニピュレータ7の移動方向が制限されるようになっていてもよい。
(変形例5)
上記実施形態のさらに他の変形例について説明する。図11は、本変形例の医療用マニピュレータシステムのブロック図である。図12は、本変形例の医療用マニピュレータシステムの表示部に表示される画像の例を示す模式図である。
図11に示すように、本変形例では、上記の画像重畳部19に代えて、撮像部3が撮像した映像と画像生成部18が生成した画像とをそれぞれ別の表示パネル23に表示させる画像出力部30を有している。表示部22は、撮像部3が撮像した映像を表示する視野表示部22aとなる第一パネル23Aと、第二マニピュレータ7の存在に対応する指標Mを表示可能な補助表示部22bとなる第二パネル23Bとを有している。
本変形例では、例えば、撮像部3が撮像した映像と指標Mを含む画像とが異なる表示パネル23(第一パネル23A,第二パネル23B)に表示されるようになっているので、撮像部3が撮像した映像と指標Mを含む画像とにおける視野方向が互いに異なっていても違和感が少ない。たとえば、図12に示すように、第一マニピュレータ2と第二マニピュレータ7とを含んだ俯瞰画像をコンピュータグラフィックスとして画像生成部18(図11参照)が生成し、第一マニピュレータ2と第二マニピュレータ7との位置関係をわかりやすく第二パネル23Bに示すことができる。さらに、制御部15は、処置対象部位の位置の目安となる目印線L1を第二パネル23Bに描画してもよい。この目印線L1は、例えば、撮像部3が撮像した画像を解析して撮像部3と処置対象物との距離を測定した結果に基づいて第二パネル23B上に描画される。
また、本変形例では、撮像部3が撮像した画像を表示する第一パネル23Aを正面に配し、上記の俯瞰画像を表示する第二パネル23Bを下側に配置するとよい。この場合、撮像部3が撮像している処置対象部位を正面に捉えて処置を行い、処置対象部位を含む領域における各マニピュレータの位置関係を確認する際には視線を下に落とすことで第一マニピュレータ2及び第二マニピュレータ7を上から見下ろす自然な姿勢で俯瞰することができる。
(変形例6)
上記実施形態のさらに他の変形例について説明する。図13は、本変形例の医療用マニピュレータシステムによって規定される視野空間及び境界空間を示す模式図である。図14は、本変形例の医療用マニピュレータシステムの表示部に表示される画像の例を示す模式図である。
図13及び図14に示すように、本変形例では、視野空間S1(表示部23における視野領域A1に対応)の一部が境界空間S2(表示部23における境界領域A2に対応)の外にある点で上記の実施形態と異なっている。
本変形例において、境界空間S2は、第二マニピュレータ7を操作者の意図に沿って動作させることができる範囲として規定されている。また、本変形例において、視野空間S1は、第二マニピュレータ7の移動とは独立して、観察対象となる部位の位置に対応して撮像部3の位置及び姿勢に基づいて規定されている。このため、境界空間S2の外延近傍に撮像部3の視野中心を設定すると、「視野空間S1内であるとともに境界空間S2外である」という空間が生じる。
本変形例では、視野空間S1内であるとともに境界空間S2外であるような空間が第二マニピュレータ7の可動域に含まれている場合には、制御部15は、この空間内で第二マニピュレータ7を第一モードで動作させる。すなわち、視野空間S1内であるとともに境界空間S2外である空間は、撮像部3を用いて組織と第二マニピュレータ7との位置関係を容易に把握できるので、第二マニピュレータ7の制御に関する制限をしない。
本変形例では、視野空間S1に対応する視野領域A1及び境界空間S2に対応する境界領域A2を両方とも表示部22に表示させるために、表示部22における表示可能領域の中に図14に示すように視野領域A1及び境界領域A2を表示させる。この場合、第二マニピュレータ7が境界領域S2の外で動作をしていることを操作者が容易に把握することができ、また、第二マニピュレータ7をどちらに移動させるのがより適切であるかを操作者が容易に判断できる。
なお、本変形例では、第二マニピュレータ7が境界領域S2の外で動作をしていることを操作者に報知する点で上記実施形態の第一モードとは異なる制御が行われてもよい。たとえば、制御部15は、第二マニピュレータ7が境界領域S2の外で動作をしていることを操作者に報知しながら、抵抗手段を抵抗として機能させずに操作者が自在にマスタアーム14を操作することができる第四モード(図15参照)を制御モードに含んでいてもよい。この場合、判別部21は、第二位置P2が視野空間S1の中(表示部22の表示上では第二位置P2が視野領域A1の中)にあり且つ第一位置P1と第二位置P2との距離(撮像部3の視野方向に対して直交する面に沿って測った距離)が前記所定値を超えている場合に第四モードを選択する。
以上、本発明の実施形態について図面を参照して詳述したが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。
たとえば、上記実施形態及びその各変形例における第二モードによる制限が適宜組み合わされていてもよい。たとえば、第一モードから第二モードへ移行した時に、第二マニピュレータ7の移動速度が低下するとともに触覚センサ24に基づくフィードバック力量を増加させてもよい。
また、第二モードにおいて第二マニピュレータ7が境界空間S2の外延に近づくに従って制限内容が漸次厳しくなるようになっていてもよい。たとえば、第二マニピュレータ7のエンドエフェクタ8の位置に関して、境界空間S2内で視野空間S1に近い位置にエンドエフェクタ8があれば第二マニピュレータ7の動作速度の制限のみをかけ、境界空間S2内でその外延に近い位置にエンドエフェクタ8があれば第二マニピュレータ7の動作速度の制限に加えて第二マニピュレータ7の動作方法の制限もかけるようになっていてもよい。
なお、上記具体的な構成に対する設計変更等は上記事項には限定されない。
本発明は、マニピュレータシステムに利用可能である。
1 医療用マニピュレータシステム
2 第一マニピュレータ
3 撮像部
4 第一位置姿勢検知部
5 第一多関節アーム
6 第一駆動部
7 第二マニピュレータ
8 エンドエフェクタ
9 第二位置姿勢検知部
10 第二多関節アーム
11 第二駆動部
12 画像処理装置
13 操作部
14 マスタアーム
15 制御部
16 位置情報取得部
17 視野領域取得部
18 画像生成部
19 画像重畳部
20 制御信号出力部
21 判別部
22 表示部
22a 視野表示部
22b 補助表示部
23 表示パネル
24 触覚センサ
25 第三マニピュレータ
26 撮像部
27 第三位置姿勢検知部
28 第三多関節アーム
29 第三駆動部
30 画像出力部

Claims (7)

  1. 撮像部を有する第一マニピュレータと、
    エンドエフェクタを有する第二マニピュレータと、
    前記撮像部からの映像を表示する表示部と、
    前記第一マニピュレータ又は前記第二マニピュレータを操作するための操作指令を発する操作部と、
    複数の制御モードから1つのモードを選択して前記操作指令に基づいて前記第一マニピュレータ又は前記第二マニピュレータを制御する制御部と、
    を備え、
    前記制御部は、
    前記第一マニピュレータに設定された所定部位の位置を第一位置として取得するとともに前記第二マニピュレータに設定された所定部位の位置を第二位置として取得する位置情報取得部と、
    前記撮像部が撮像した映像を取得し、視野領域を算出する視野領域取得部と、
    前記視野領域,前記第一位置,及び前記第二位置に基づいて前記複数の制御モードから1つのモードを選択する判別部と、
    を有し、
    前記複数の制御モードは、
    前記操作部による前記第二マニピュレータの操作を許可する第一モードと、
    前記操作部による前記操作指令に対して所定の制限を加えた上で前記制限の範囲内で前記第二マニピュレータの操作を許可する第二モードと、
    前記操作部による前記第二マニピュレータの操作を禁止する第三モードと、
    を含み、
    前記判別部は、
    前記第二位置が前記視野領域の内にある場合に前記第一モードを選択し、
    前記第二位置が前記視野領域の外にあり且つ前記第一位置と前記第二位置との距離が所定値以下である場合に前記第二モードを選択し、
    前記第二位置が前記視野領域の外にあり且つ前記第一位置と前記第二位置との距離が前記所定値を超えている場合に前記第三モードを選択する
    療用マニピュレータシステム。
  2. 前記表示部は、
    前記撮像部が撮像した前記映像を表示する視野表示部と、
    前記第二マニピュレータの存在に対応する指標を表示可能な補助表示部と、
    を有する請求項1に記載の医療用マニピュレータシステム。
  3. 前記第二モードは、前記第一モードにおける前記第二マニピュレータの動作速度よりも低速で前記第二マニピュレータを動作させるように前記第二マニピュレータの動作速度を制限する
    請求項1に記載の医療用マニピュレータシステム。
  4. 前記第二モードは、
    前記第二マニピュレータの動作可能方向を前記第一モードよりも制限する
    請求項1に記載の医療用マニピュレータシステム。
  5. 前記第二モードは、
    前記動作可能方向を前記第二位置が前記視野領域に向かう方向のみに制限する
    請求項4に記載の医療用マニピュレータシステム。
  6. 前記第二モードにおける制限の内容を設定する設定手段をさらに有する請求項1に記載の医療用マニピュレータシステム。
  7. 前記第二マニピュレータは、前記第二マニピュレータが物体に接触したことを検知可能な接触検知手段をさらに有し、
    前記第二モードは、前記第二マニピュレータと前記物体とが接触したことを前記接触検知手段が検知したときに、前記第二マニピュレータと前記物体とが接触したことを操作者に報知し、且つ、前記操作部による前記第二マニピュレータの操作を禁止する
    請求項1に記載の医療用マニピュレータシステム。
JP2017525128A 2015-12-28 2015-12-28 医療用マニピュレータシステム Active JP6180692B1 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2015/086539 WO2017115425A1 (ja) 2015-12-28 2015-12-28 医療用マニピュレータシステム

Publications (2)

Publication Number Publication Date
JP6180692B1 true JP6180692B1 (ja) 2017-08-16
JPWO2017115425A1 JPWO2017115425A1 (ja) 2017-12-28

Family

ID=59225376

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017525128A Active JP6180692B1 (ja) 2015-12-28 2015-12-28 医療用マニピュレータシステム

Country Status (3)

Country Link
US (1) US11051897B2 (ja)
JP (1) JP6180692B1 (ja)
WO (1) WO2017115425A1 (ja)

Families Citing this family (275)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9060770B2 (en) 2003-05-20 2015-06-23 Ethicon Endo-Surgery, Inc. Robotically-driven surgical instrument with E-beam driver
US20070084897A1 (en) 2003-05-20 2007-04-19 Shelton Frederick E Iv Articulating surgical stapling instrument incorporating a two-piece e-beam firing mechanism
US11896225B2 (en) 2004-07-28 2024-02-13 Cilag Gmbh International Staple cartridge comprising a pan
US9072535B2 (en) 2011-05-27 2015-07-07 Ethicon Endo-Surgery, Inc. Surgical stapling instruments with rotatable staple deployment arrangements
US7669746B2 (en) 2005-08-31 2010-03-02 Ethicon Endo-Surgery, Inc. Staple cartridges for forming staples having differing formed staple heights
US11484312B2 (en) 2005-08-31 2022-11-01 Cilag Gmbh International Staple cartridge comprising a staple driver arrangement
US7934630B2 (en) 2005-08-31 2011-05-03 Ethicon Endo-Surgery, Inc. Staple cartridges for forming staples having differing formed staple heights
US10159482B2 (en) 2005-08-31 2018-12-25 Ethicon Llc Fastener cartridge assembly comprising a fixed anvil and different staple heights
US11246590B2 (en) 2005-08-31 2022-02-15 Cilag Gmbh International Staple cartridge including staple drivers having different unfired heights
US20070106317A1 (en) 2005-11-09 2007-05-10 Shelton Frederick E Iv Hydraulically and electrically actuated articulation joints for surgical instruments
US11793518B2 (en) 2006-01-31 2023-10-24 Cilag Gmbh International Powered surgical instruments with firing system lockout arrangements
US20120292367A1 (en) 2006-01-31 2012-11-22 Ethicon Endo-Surgery, Inc. Robotically-controlled end effector
US7753904B2 (en) 2006-01-31 2010-07-13 Ethicon Endo-Surgery, Inc. Endoscopic surgical instrument with a handle that can articulate with respect to the shaft
US20110295295A1 (en) 2006-01-31 2011-12-01 Ethicon Endo-Surgery, Inc. Robotically-controlled surgical instrument having recording capabilities
US8820603B2 (en) 2006-01-31 2014-09-02 Ethicon Endo-Surgery, Inc. Accessing data stored in a memory of a surgical instrument
US8708213B2 (en) 2006-01-31 2014-04-29 Ethicon Endo-Surgery, Inc. Surgical instrument having a feedback system
US8186555B2 (en) 2006-01-31 2012-05-29 Ethicon Endo-Surgery, Inc. Motor-driven surgical cutting and fastening instrument with mechanical closure system
US7845537B2 (en) 2006-01-31 2010-12-07 Ethicon Endo-Surgery, Inc. Surgical instrument having recording capabilities
US8992422B2 (en) 2006-03-23 2015-03-31 Ethicon Endo-Surgery, Inc. Robotically-controlled endoscopic accessory channel
US10568652B2 (en) 2006-09-29 2020-02-25 Ethicon Llc Surgical staples having attached drivers of different heights and stapling instruments for deploying the same
US11980366B2 (en) 2006-10-03 2024-05-14 Cilag Gmbh International Surgical instrument
US8840603B2 (en) 2007-01-10 2014-09-23 Ethicon Endo-Surgery, Inc. Surgical instrument with wireless communication between control unit and sensor transponders
US8684253B2 (en) 2007-01-10 2014-04-01 Ethicon Endo-Surgery, Inc. Surgical instrument with wireless communication between a control unit of a robotic system and remote sensor
US11291441B2 (en) 2007-01-10 2022-04-05 Cilag Gmbh International Surgical instrument with wireless communication between control unit and remote sensor
US20080169333A1 (en) 2007-01-11 2008-07-17 Shelton Frederick E Surgical stapler end effector with tapered distal end
US7669747B2 (en) 2007-03-15 2010-03-02 Ethicon Endo-Surgery, Inc. Washer for use with a surgical stapling instrument
US8931682B2 (en) 2007-06-04 2015-01-13 Ethicon Endo-Surgery, Inc. Robotically-controlled shaft based rotary drive systems for surgical instruments
US11564682B2 (en) 2007-06-04 2023-01-31 Cilag Gmbh International Surgical stapler device
US7753245B2 (en) 2007-06-22 2010-07-13 Ethicon Endo-Surgery, Inc. Surgical stapling instruments
US11849941B2 (en) 2007-06-29 2023-12-26 Cilag Gmbh International Staple cartridge having staple cavities extending at a transverse angle relative to a longitudinal cartridge axis
US9179912B2 (en) 2008-02-14 2015-11-10 Ethicon Endo-Surgery, Inc. Robotically-controlled motorized surgical cutting and fastening instrument
US7819298B2 (en) 2008-02-14 2010-10-26 Ethicon Endo-Surgery, Inc. Surgical stapling apparatus with control features operable with one hand
US8573465B2 (en) 2008-02-14 2013-11-05 Ethicon Endo-Surgery, Inc. Robotically-controlled surgical end effector system with rotary actuated closure systems
US7866527B2 (en) 2008-02-14 2011-01-11 Ethicon Endo-Surgery, Inc. Surgical stapling apparatus with interlockable firing system
RU2493788C2 (ru) 2008-02-14 2013-09-27 Этикон Эндо-Серджери, Инк. Хирургический режущий и крепежный инструмент, имеющий радиочастотные электроды
US8636736B2 (en) 2008-02-14 2014-01-28 Ethicon Endo-Surgery, Inc. Motorized surgical cutting and fastening instrument
US11986183B2 (en) 2008-02-14 2024-05-21 Cilag Gmbh International Surgical cutting and fastening instrument comprising a plurality of sensors to measure an electrical parameter
US10390823B2 (en) 2008-02-15 2019-08-27 Ethicon Llc End effector comprising an adjunct
US8210411B2 (en) 2008-09-23 2012-07-03 Ethicon Endo-Surgery, Inc. Motor-driven surgical cutting instrument
US11648005B2 (en) 2008-09-23 2023-05-16 Cilag Gmbh International Robotically-controlled motorized surgical instrument with an end effector
US9386983B2 (en) 2008-09-23 2016-07-12 Ethicon Endo-Surgery, Llc Robotically-controlled motorized surgical instrument
US9005230B2 (en) 2008-09-23 2015-04-14 Ethicon Endo-Surgery, Inc. Motorized surgical instrument
US8608045B2 (en) 2008-10-10 2013-12-17 Ethicon Endo-Sugery, Inc. Powered surgical cutting and stapling apparatus with manually retractable firing system
US9301755B2 (en) 2010-09-30 2016-04-05 Ethicon Endo-Surgery, Llc Compressible staple cartridge assembly
US11812965B2 (en) 2010-09-30 2023-11-14 Cilag Gmbh International Layer of material for a surgical end effector
US11298125B2 (en) 2010-09-30 2022-04-12 Cilag Gmbh International Tissue stapler having a thickness compensator
US9629814B2 (en) 2010-09-30 2017-04-25 Ethicon Endo-Surgery, Llc Tissue thickness compensator configured to redistribute compressive forces
US9592050B2 (en) 2010-09-30 2017-03-14 Ethicon Endo-Surgery, Llc End effector comprising a distal tissue abutment member
US10945731B2 (en) 2010-09-30 2021-03-16 Ethicon Llc Tissue thickness compensator comprising controlled release and expansion
US9351730B2 (en) 2011-04-29 2016-05-31 Ethicon Endo-Surgery, Llc Tissue thickness compensator comprising channels
US11849952B2 (en) 2010-09-30 2023-12-26 Cilag Gmbh International Staple cartridge comprising staples positioned within a compressible portion thereof
US9386988B2 (en) 2010-09-30 2016-07-12 Ethicon End-Surgery, LLC Retainer assembly including a tissue thickness compensator
US8695866B2 (en) 2010-10-01 2014-04-15 Ethicon Endo-Surgery, Inc. Surgical instrument having a power control circuit
BR112013027794B1 (pt) 2011-04-29 2020-12-15 Ethicon Endo-Surgery, Inc Conjunto de cartucho de grampos
RU2014143258A (ru) 2012-03-28 2016-05-20 Этикон Эндо-Серджери, Инк. Компенсатор толщины ткани, содержащий множество слоев
CN104334098B (zh) 2012-03-28 2017-03-22 伊西康内外科公司 包括限定低压强环境的胶囊剂的组织厚度补偿件
US9101358B2 (en) 2012-06-15 2015-08-11 Ethicon Endo-Surgery, Inc. Articulatable surgical instrument comprising a firing drive
US9282974B2 (en) 2012-06-28 2016-03-15 Ethicon Endo-Surgery, Llc Empty clip cartridge lockout
US9226751B2 (en) 2012-06-28 2016-01-05 Ethicon Endo-Surgery, Inc. Surgical instrument system including replaceable end effectors
US20140001231A1 (en) 2012-06-28 2014-01-02 Ethicon Endo-Surgery, Inc. Firing system lockout arrangements for surgical instruments
BR112014032776B1 (pt) 2012-06-28 2021-09-08 Ethicon Endo-Surgery, Inc Sistema de instrumento cirúrgico e kit cirúrgico para uso com um sistema de instrumento cirúrgico
US9289256B2 (en) 2012-06-28 2016-03-22 Ethicon Endo-Surgery, Llc Surgical end effectors having angled tissue-contacting surfaces
RU2672520C2 (ru) 2013-03-01 2018-11-15 Этикон Эндо-Серджери, Инк. Шарнирно поворачиваемые хирургические инструменты с проводящими путями для передачи сигналов
US9629629B2 (en) 2013-03-14 2017-04-25 Ethicon Endo-Surgey, LLC Control systems for surgical instruments
BR112015026109B1 (pt) 2013-04-16 2022-02-22 Ethicon Endo-Surgery, Inc Instrumento cirúrgico
US9801626B2 (en) 2013-04-16 2017-10-31 Ethicon Llc Modular motor driven surgical instruments with alignment features for aligning rotary drive shafts with surgical end effector shafts
JP6416260B2 (ja) 2013-08-23 2018-10-31 エシコン エルエルシー 動力付き外科用器具のための発射部材後退装置
US20150053746A1 (en) 2013-08-23 2015-02-26 Ethicon Endo-Surgery, Inc. Torque optimization for surgical instruments
BR112016021943B1 (pt) 2014-03-26 2022-06-14 Ethicon Endo-Surgery, Llc Instrumento cirúrgico para uso por um operador em um procedimento cirúrgico
US9826977B2 (en) 2014-03-26 2017-11-28 Ethicon Llc Sterilization verification circuit
JP6532889B2 (ja) 2014-04-16 2019-06-19 エシコン エルエルシーEthicon LLC 締結具カートリッジ組立体及びステープル保持具カバー配置構成
US9801628B2 (en) 2014-09-26 2017-10-31 Ethicon Llc Surgical staple and driver arrangements for staple cartridges
CN106456176B (zh) 2014-04-16 2019-06-28 伊西康内外科有限责任公司 包括具有不同构型的延伸部的紧固件仓
US20150297225A1 (en) 2014-04-16 2015-10-22 Ethicon Endo-Surgery, Inc. Fastener cartridges including extensions having different configurations
JP6612256B2 (ja) 2014-04-16 2019-11-27 エシコン エルエルシー 不均一な締結具を備える締結具カートリッジ
BR112017004361B1 (pt) 2014-09-05 2023-04-11 Ethicon Llc Sistema eletrônico para um instrumento cirúrgico
US10016199B2 (en) 2014-09-05 2018-07-10 Ethicon Llc Polarity of hall magnet to identify cartridge type
US11311294B2 (en) 2014-09-05 2022-04-26 Cilag Gmbh International Powered medical device including measurement of closure state of jaws
US10105142B2 (en) 2014-09-18 2018-10-23 Ethicon Llc Surgical stapler with plurality of cutting elements
US11523821B2 (en) 2014-09-26 2022-12-13 Cilag Gmbh International Method for creating a flexible staple line
US9924944B2 (en) 2014-10-16 2018-03-27 Ethicon Llc Staple cartridge comprising an adjunct material
US10517594B2 (en) 2014-10-29 2019-12-31 Ethicon Llc Cartridge assemblies for surgical staplers
US11141153B2 (en) 2014-10-29 2021-10-12 Cilag Gmbh International Staple cartridges comprising driver arrangements
US9844376B2 (en) 2014-11-06 2017-12-19 Ethicon Llc Staple cartridge comprising a releasable adjunct material
US10736636B2 (en) 2014-12-10 2020-08-11 Ethicon Llc Articulatable surgical instrument system
US9987000B2 (en) 2014-12-18 2018-06-05 Ethicon Llc Surgical instrument assembly comprising a flexible articulation system
MX2017008108A (es) 2014-12-18 2018-03-06 Ethicon Llc Instrumento quirurgico con un yunque que puede moverse de manera selectiva sobre un eje discreto no movil con relacion a un cartucho de grapas.
US9943309B2 (en) 2014-12-18 2018-04-17 Ethicon Llc Surgical instruments with articulatable end effectors and movable firing beam support arrangements
US9844374B2 (en) 2014-12-18 2017-12-19 Ethicon Llc Surgical instrument systems comprising an articulatable end effector and means for adjusting the firing stroke of a firing member
US10085748B2 (en) 2014-12-18 2018-10-02 Ethicon Llc Locking arrangements for detachable shaft assemblies with articulatable surgical end effectors
US9844375B2 (en) 2014-12-18 2017-12-19 Ethicon Llc Drive arrangements for articulatable surgical instruments
US11154301B2 (en) 2015-02-27 2021-10-26 Cilag Gmbh International Modular stapling assembly
US10548504B2 (en) 2015-03-06 2020-02-04 Ethicon Llc Overlaid multi sensor radio frequency (RF) electrode system to measure tissue compression
US10441279B2 (en) 2015-03-06 2019-10-15 Ethicon Llc Multiple level thresholds to modify operation of powered surgical instruments
JP2020121162A (ja) 2015-03-06 2020-08-13 エシコン エルエルシーEthicon LLC 測定の安定性要素、クリープ要素、及び粘弾性要素を決定するためのセンサデータの時間依存性評価
US9993248B2 (en) 2015-03-06 2018-06-12 Ethicon Endo-Surgery, Llc Smart sensors with local signal processing
US10213201B2 (en) 2015-03-31 2019-02-26 Ethicon Llc Stapling end effector configured to compensate for an uneven gap between a first jaw and a second jaw
US10238386B2 (en) 2015-09-23 2019-03-26 Ethicon Llc Surgical stapler having motor control based on an electrical parameter related to a motor current
US10105139B2 (en) 2015-09-23 2018-10-23 Ethicon Llc Surgical stapler having downstream current-based motor control
US20170086829A1 (en) 2015-09-30 2017-03-30 Ethicon Endo-Surgery, Llc Compressible adjunct with intermediate supporting structures
US11890015B2 (en) 2015-09-30 2024-02-06 Cilag Gmbh International Compressible adjunct with crossing spacer fibers
US10292704B2 (en) 2015-12-30 2019-05-21 Ethicon Llc Mechanisms for compensating for battery pack failure in powered surgical instruments
BR112018016098B1 (pt) 2016-02-09 2023-02-23 Ethicon Llc Instrumento cirúrgico
US11213293B2 (en) 2016-02-09 2022-01-04 Cilag Gmbh International Articulatable surgical instruments with single articulation link arrangements
US11224426B2 (en) 2016-02-12 2022-01-18 Cilag Gmbh International Mechanisms for compensating for drivetrain failure in powered surgical instruments
US10448948B2 (en) 2016-02-12 2019-10-22 Ethicon Llc Mechanisms for compensating for drivetrain failure in powered surgical instruments
US10426467B2 (en) 2016-04-15 2019-10-01 Ethicon Llc Surgical instrument with detection sensors
US10357247B2 (en) 2016-04-15 2019-07-23 Ethicon Llc Surgical instrument with multiple program responses during a firing motion
US10828028B2 (en) 2016-04-15 2020-11-10 Ethicon Llc Surgical instrument with multiple program responses during a firing motion
US10492783B2 (en) 2016-04-15 2019-12-03 Ethicon, Llc Surgical instrument with improved stop/start control during a firing motion
US11607239B2 (en) 2016-04-15 2023-03-21 Cilag Gmbh International Systems and methods for controlling a surgical stapling and cutting instrument
US11317917B2 (en) 2016-04-18 2022-05-03 Cilag Gmbh International Surgical stapling system comprising a lockable firing assembly
US10363037B2 (en) 2016-04-18 2019-07-30 Ethicon Llc Surgical instrument system comprising a magnetic lockout
US20170296173A1 (en) 2016-04-18 2017-10-19 Ethicon Endo-Surgery, Llc Method for operating a surgical instrument
US10675026B2 (en) 2016-12-21 2020-06-09 Ethicon Llc Methods of stapling tissue
JP7010956B2 (ja) 2016-12-21 2022-01-26 エシコン エルエルシー 組織をステープル留めする方法
US10624635B2 (en) 2016-12-21 2020-04-21 Ethicon Llc Firing members with non-parallel jaw engagement features for surgical end effectors
US10835247B2 (en) 2016-12-21 2020-11-17 Ethicon Llc Lockout arrangements for surgical end effectors
US20180168619A1 (en) 2016-12-21 2018-06-21 Ethicon Endo-Surgery, Llc Surgical stapling systems
US20180168615A1 (en) 2016-12-21 2018-06-21 Ethicon Endo-Surgery, Llc Method of deforming staples from two different types of staple cartridges with the same surgical stapling instrument
US11419606B2 (en) 2016-12-21 2022-08-23 Cilag Gmbh International Shaft assembly comprising a clutch configured to adapt the output of a rotary firing member to two different systems
US11191539B2 (en) 2016-12-21 2021-12-07 Cilag Gmbh International Shaft assembly comprising a manually-operable retraction system for use with a motorized surgical instrument system
JP6983893B2 (ja) 2016-12-21 2021-12-17 エシコン エルエルシーEthicon LLC 外科用エンドエフェクタ及び交換式ツールアセンブリのためのロックアウト構成
US20180168625A1 (en) 2016-12-21 2018-06-21 Ethicon Endo-Surgery, Llc Surgical stapling instruments with smart staple cartridges
CN110114014B (zh) 2016-12-21 2022-08-09 爱惜康有限责任公司 包括端部执行器闭锁件和击发组件闭锁件的外科器械系统
US11653914B2 (en) 2017-06-20 2023-05-23 Cilag Gmbh International Systems and methods for controlling motor velocity of a surgical stapling and cutting instrument according to articulation angle of end effector
US10779820B2 (en) 2017-06-20 2020-09-22 Ethicon Llc Systems and methods for controlling motor speed according to user input for a surgical instrument
US11517325B2 (en) 2017-06-20 2022-12-06 Cilag Gmbh International Closed loop feedback control of motor velocity of a surgical stapling and cutting instrument based on measured displacement distance traveled over a specified time interval
US10881399B2 (en) 2017-06-20 2021-01-05 Ethicon Llc Techniques for adaptive control of motor velocity of a surgical stapling and cutting instrument
US11382638B2 (en) 2017-06-20 2022-07-12 Cilag Gmbh International Closed loop feedback control of motor velocity of a surgical stapling and cutting instrument based on measured time over a specified displacement distance
US10307170B2 (en) 2017-06-20 2019-06-04 Ethicon Llc Method for closed loop control of motor velocity of a surgical stapling and cutting instrument
US10993716B2 (en) 2017-06-27 2021-05-04 Ethicon Llc Surgical anvil arrangements
US11324503B2 (en) 2017-06-27 2022-05-10 Cilag Gmbh International Surgical firing member arrangements
US10765427B2 (en) 2017-06-28 2020-09-08 Ethicon Llc Method for articulating a surgical instrument
USD906355S1 (en) 2017-06-28 2020-12-29 Ethicon Llc Display screen or portion thereof with a graphical user interface for a surgical instrument
EP3420947B1 (en) 2017-06-28 2022-05-25 Cilag GmbH International Surgical instrument comprising selectively actuatable rotatable couplers
US10639037B2 (en) 2017-06-28 2020-05-05 Ethicon Llc Surgical instrument with axially movable closure member
US11564686B2 (en) 2017-06-28 2023-01-31 Cilag Gmbh International Surgical shaft assemblies with flexible interfaces
US11058424B2 (en) 2017-06-28 2021-07-13 Cilag Gmbh International Surgical instrument comprising an offset articulation joint
US10932772B2 (en) 2017-06-29 2021-03-02 Ethicon Llc Methods for closed loop velocity control for robotic surgical instrument
CN110996825B (zh) * 2017-07-13 2023-12-05 直观外科手术操作公司 用于在多个器械臂之间切换控制权的系统和方法
US11471155B2 (en) 2017-08-03 2022-10-18 Cilag Gmbh International Surgical system bailout
US11304695B2 (en) 2017-08-03 2022-04-19 Cilag Gmbh International Surgical system shaft interconnection
US11974742B2 (en) 2017-08-03 2024-05-07 Cilag Gmbh International Surgical system comprising an articulation bailout
US11944300B2 (en) 2017-08-03 2024-04-02 Cilag Gmbh International Method for operating a surgical system bailout
JP6964758B2 (ja) * 2017-08-10 2021-11-10 インテュイティブ サージカル オペレーションズ, インコーポレイテッド 遠隔手術システムでの器具の使用可能寿命の延長
US12029512B2 (en) 2017-08-10 2024-07-09 Intuitive Surgical Operations, Inc. Increased usable instrument life in telesurgical systems
US10743872B2 (en) 2017-09-29 2020-08-18 Ethicon Llc System and methods for controlling a display of a surgical instrument
US11134944B2 (en) 2017-10-30 2021-10-05 Cilag Gmbh International Surgical stapler knife motion controls
US10842490B2 (en) 2017-10-31 2020-11-24 Ethicon Llc Cartridge body design with force reduction based on firing completion
US10779826B2 (en) 2017-12-15 2020-09-22 Ethicon Llc Methods of operating surgical end effectors
US10835330B2 (en) 2017-12-19 2020-11-17 Ethicon Llc Method for determining the position of a rotatable jaw of a surgical instrument attachment assembly
US10743868B2 (en) 2017-12-21 2020-08-18 Ethicon Llc Surgical instrument comprising a pivotable distal head
US11311290B2 (en) 2017-12-21 2022-04-26 Cilag Gmbh International Surgical instrument comprising an end effector dampener
US11291440B2 (en) 2018-08-20 2022-04-05 Cilag Gmbh International Method for operating a powered articulatable surgical instrument
US11207065B2 (en) 2018-08-20 2021-12-28 Cilag Gmbh International Method for fabricating surgical stapler anvils
US11324501B2 (en) 2018-08-20 2022-05-10 Cilag Gmbh International Surgical stapling devices with improved closure members
JP7163115B2 (ja) * 2018-09-12 2022-10-31 キヤノン株式会社 ロボットシステム、ロボットシステムの制御方法、物品の製造方法、制御装置、操作装置、撮像装置、制御プログラム及び記録媒体
JP7248271B2 (ja) * 2018-09-14 2023-03-29 国立大学法人 東京大学 情報処理装置、ロボットハンド制御システム、及びロボットハンド制御プログラム
US11696761B2 (en) 2019-03-25 2023-07-11 Cilag Gmbh International Firing drive arrangements for surgical systems
US11426251B2 (en) 2019-04-30 2022-08-30 Cilag Gmbh International Articulation directional lights on a surgical instrument
US11452528B2 (en) 2019-04-30 2022-09-27 Cilag Gmbh International Articulation actuators for a surgical instrument
US11648009B2 (en) 2019-04-30 2023-05-16 Cilag Gmbh International Rotatable jaw tip for a surgical instrument
US11432816B2 (en) 2019-04-30 2022-09-06 Cilag Gmbh International Articulation pin for a surgical instrument
US11903581B2 (en) 2019-04-30 2024-02-20 Cilag Gmbh International Methods for stapling tissue using a surgical instrument
US11471157B2 (en) 2019-04-30 2022-10-18 Cilag Gmbh International Articulation control mapping for a surgical instrument
US12004740B2 (en) 2019-06-28 2024-06-11 Cilag Gmbh International Surgical stapling system having an information decryption protocol
US11627959B2 (en) 2019-06-28 2023-04-18 Cilag Gmbh International Surgical instruments including manual and powered system lockouts
US11399837B2 (en) 2019-06-28 2022-08-02 Cilag Gmbh International Mechanisms for motor control adjustments of a motorized surgical instrument
US11638587B2 (en) 2019-06-28 2023-05-02 Cilag Gmbh International RFID identification systems for surgical instruments
US11497492B2 (en) 2019-06-28 2022-11-15 Cilag Gmbh International Surgical instrument including an articulation lock
US11298127B2 (en) 2019-06-28 2022-04-12 Cilag GmbH Interational Surgical stapling system having a lockout mechanism for an incompatible cartridge
US11298132B2 (en) 2019-06-28 2022-04-12 Cilag GmbH Inlernational Staple cartridge including a honeycomb extension
US11229437B2 (en) 2019-06-28 2022-01-25 Cilag Gmbh International Method for authenticating the compatibility of a staple cartridge with a surgical instrument
US11771419B2 (en) 2019-06-28 2023-10-03 Cilag Gmbh International Packaging for a replaceable component of a surgical stapling system
US11291451B2 (en) 2019-06-28 2022-04-05 Cilag Gmbh International Surgical instrument with battery compatibility verification functionality
US11361176B2 (en) 2019-06-28 2022-06-14 Cilag Gmbh International Surgical RFID assemblies for compatibility detection
US11478241B2 (en) 2019-06-28 2022-10-25 Cilag Gmbh International Staple cartridge including projections
US11684434B2 (en) 2019-06-28 2023-06-27 Cilag Gmbh International Surgical RFID assemblies for instrument operational setting control
US11523822B2 (en) 2019-06-28 2022-12-13 Cilag Gmbh International Battery pack including a circuit interrupter
US11660163B2 (en) 2019-06-28 2023-05-30 Cilag Gmbh International Surgical system with RFID tags for updating motor assembly parameters
US11464601B2 (en) 2019-06-28 2022-10-11 Cilag Gmbh International Surgical instrument comprising an RFID system for tracking a movable component
US11853835B2 (en) 2019-06-28 2023-12-26 Cilag Gmbh International RFID identification systems for surgical instruments
US11376098B2 (en) 2019-06-28 2022-07-05 Cilag Gmbh International Surgical instrument system comprising an RFID system
US11553971B2 (en) 2019-06-28 2023-01-17 Cilag Gmbh International Surgical RFID assemblies for display and communication
US11426167B2 (en) 2019-06-28 2022-08-30 Cilag Gmbh International Mechanisms for proper anvil attachment surgical stapling head assembly
US11464512B2 (en) 2019-12-19 2022-10-11 Cilag Gmbh International Staple cartridge comprising a curved deck surface
US11559304B2 (en) 2019-12-19 2023-01-24 Cilag Gmbh International Surgical instrument comprising a rapid closure mechanism
US11701111B2 (en) 2019-12-19 2023-07-18 Cilag Gmbh International Method for operating a surgical stapling instrument
US11446029B2 (en) 2019-12-19 2022-09-20 Cilag Gmbh International Staple cartridge comprising projections extending from a curved deck surface
US11576672B2 (en) 2019-12-19 2023-02-14 Cilag Gmbh International Surgical instrument comprising a closure system including a closure member and an opening member driven by a drive screw
US11529137B2 (en) 2019-12-19 2022-12-20 Cilag Gmbh International Staple cartridge comprising driver retention members
US12035913B2 (en) 2019-12-19 2024-07-16 Cilag Gmbh International Staple cartridge comprising a deployable knife
US11607219B2 (en) 2019-12-19 2023-03-21 Cilag Gmbh International Staple cartridge comprising a detachable tissue cutting knife
US11844520B2 (en) 2019-12-19 2023-12-19 Cilag Gmbh International Staple cartridge comprising driver retention members
US11529139B2 (en) 2019-12-19 2022-12-20 Cilag Gmbh International Motor driven surgical instrument
US11911032B2 (en) 2019-12-19 2024-02-27 Cilag Gmbh International Staple cartridge comprising a seating cam
US11304696B2 (en) 2019-12-19 2022-04-19 Cilag Gmbh International Surgical instrument comprising a powered articulation system
US11504122B2 (en) 2019-12-19 2022-11-22 Cilag Gmbh International Surgical instrument comprising a nested firing member
US11291447B2 (en) 2019-12-19 2022-04-05 Cilag Gmbh International Stapling instrument comprising independent jaw closing and staple firing systems
USD975851S1 (en) 2020-06-02 2023-01-17 Cilag Gmbh International Staple cartridge
USD974560S1 (en) 2020-06-02 2023-01-03 Cilag Gmbh International Staple cartridge
USD975278S1 (en) 2020-06-02 2023-01-10 Cilag Gmbh International Staple cartridge
USD967421S1 (en) 2020-06-02 2022-10-18 Cilag Gmbh International Staple cartridge
USD966512S1 (en) 2020-06-02 2022-10-11 Cilag Gmbh International Staple cartridge
USD976401S1 (en) 2020-06-02 2023-01-24 Cilag Gmbh International Staple cartridge
USD975850S1 (en) 2020-06-02 2023-01-17 Cilag Gmbh International Staple cartridge
US20220031350A1 (en) 2020-07-28 2022-02-03 Cilag Gmbh International Surgical instruments with double pivot articulation joint arrangements
US11779330B2 (en) 2020-10-29 2023-10-10 Cilag Gmbh International Surgical instrument comprising a jaw alignment system
US11896217B2 (en) 2020-10-29 2024-02-13 Cilag Gmbh International Surgical instrument comprising an articulation lock
US12053175B2 (en) 2020-10-29 2024-08-06 Cilag Gmbh International Surgical instrument comprising a stowed closure actuator stop
USD1013170S1 (en) 2020-10-29 2024-01-30 Cilag Gmbh International Surgical instrument assembly
USD980425S1 (en) 2020-10-29 2023-03-07 Cilag Gmbh International Surgical instrument assembly
US11931025B2 (en) 2020-10-29 2024-03-19 Cilag Gmbh International Surgical instrument comprising a releasable closure drive lock
US11844518B2 (en) 2020-10-29 2023-12-19 Cilag Gmbh International Method for operating a surgical instrument
US11452526B2 (en) 2020-10-29 2022-09-27 Cilag Gmbh International Surgical instrument comprising a staged voltage regulation start-up system
US11534259B2 (en) 2020-10-29 2022-12-27 Cilag Gmbh International Surgical instrument comprising an articulation indicator
US11517390B2 (en) 2020-10-29 2022-12-06 Cilag Gmbh International Surgical instrument comprising a limited travel switch
US11617577B2 (en) 2020-10-29 2023-04-04 Cilag Gmbh International Surgical instrument comprising a sensor configured to sense whether an articulation drive of the surgical instrument is actuatable
US11717289B2 (en) 2020-10-29 2023-08-08 Cilag Gmbh International Surgical instrument comprising an indicator which indicates that an articulation drive is actuatable
CN116685285A (zh) * 2020-11-30 2023-09-01 直观外科手术操作公司 用于在机器人辅助系统的用户界面中提供合成指示器的系统
US11890010B2 (en) 2020-12-02 2024-02-06 Cllag GmbH International Dual-sided reinforced reload for surgical instruments
US11653920B2 (en) 2020-12-02 2023-05-23 Cilag Gmbh International Powered surgical instruments with communication interfaces through sterile barrier
US11944296B2 (en) 2020-12-02 2024-04-02 Cilag Gmbh International Powered surgical instruments with external connectors
US11744581B2 (en) 2020-12-02 2023-09-05 Cilag Gmbh International Powered surgical instruments with multi-phase tissue treatment
US11849943B2 (en) 2020-12-02 2023-12-26 Cilag Gmbh International Surgical instrument with cartridge release mechanisms
US11737751B2 (en) 2020-12-02 2023-08-29 Cilag Gmbh International Devices and methods of managing energy dissipated within sterile barriers of surgical instrument housings
US11678882B2 (en) 2020-12-02 2023-06-20 Cilag Gmbh International Surgical instruments with interactive features to remedy incidental sled movements
US11627960B2 (en) 2020-12-02 2023-04-18 Cilag Gmbh International Powered surgical instruments with smart reload with separately attachable exteriorly mounted wiring connections
US11653915B2 (en) 2020-12-02 2023-05-23 Cilag Gmbh International Surgical instruments with sled location detection and adjustment features
US11749877B2 (en) 2021-02-26 2023-09-05 Cilag Gmbh International Stapling instrument comprising a signal antenna
US11751869B2 (en) 2021-02-26 2023-09-12 Cilag Gmbh International Monitoring of multiple sensors over time to detect moving characteristics of tissue
US12108951B2 (en) 2021-02-26 2024-10-08 Cilag Gmbh International Staple cartridge comprising a sensing array and a temperature control system
US11925349B2 (en) 2021-02-26 2024-03-12 Cilag Gmbh International Adjustment to transfer parameters to improve available power
US11980362B2 (en) 2021-02-26 2024-05-14 Cilag Gmbh International Surgical instrument system comprising a power transfer coil
US11950779B2 (en) 2021-02-26 2024-04-09 Cilag Gmbh International Method of powering and communicating with a staple cartridge
US11812964B2 (en) 2021-02-26 2023-11-14 Cilag Gmbh International Staple cartridge comprising a power management circuit
US11701113B2 (en) 2021-02-26 2023-07-18 Cilag Gmbh International Stapling instrument comprising a separate power antenna and a data transfer antenna
US11950777B2 (en) 2021-02-26 2024-04-09 Cilag Gmbh International Staple cartridge comprising an information access control system
US11793514B2 (en) 2021-02-26 2023-10-24 Cilag Gmbh International Staple cartridge comprising sensor array which may be embedded in cartridge body
US11730473B2 (en) 2021-02-26 2023-08-22 Cilag Gmbh International Monitoring of manufacturing life-cycle
US11696757B2 (en) 2021-02-26 2023-07-11 Cilag Gmbh International Monitoring of internal systems to detect and track cartridge motion status
US11723657B2 (en) 2021-02-26 2023-08-15 Cilag Gmbh International Adjustable communication based on available bandwidth and power capacity
US11744583B2 (en) 2021-02-26 2023-09-05 Cilag Gmbh International Distal communication array to tune frequency of RF systems
US11806011B2 (en) 2021-03-22 2023-11-07 Cilag Gmbh International Stapling instrument comprising tissue compression systems
US11826012B2 (en) 2021-03-22 2023-11-28 Cilag Gmbh International Stapling instrument comprising a pulsed motor-driven firing rack
US11759202B2 (en) 2021-03-22 2023-09-19 Cilag Gmbh International Staple cartridge comprising an implantable layer
US11723658B2 (en) 2021-03-22 2023-08-15 Cilag Gmbh International Staple cartridge comprising a firing lockout
US11826042B2 (en) 2021-03-22 2023-11-28 Cilag Gmbh International Surgical instrument comprising a firing drive including a selectable leverage mechanism
US11717291B2 (en) 2021-03-22 2023-08-08 Cilag Gmbh International Staple cartridge comprising staples configured to apply different tissue compression
US11737749B2 (en) 2021-03-22 2023-08-29 Cilag Gmbh International Surgical stapling instrument comprising a retraction system
US12102323B2 (en) 2021-03-24 2024-10-01 Cilag Gmbh International Rotary-driven surgical stapling assembly comprising a floatable component
US11849944B2 (en) 2021-03-24 2023-12-26 Cilag Gmbh International Drivers for fastener cartridge assemblies having rotary drive screws
US11832816B2 (en) 2021-03-24 2023-12-05 Cilag Gmbh International Surgical stapling assembly comprising nonplanar staples and planar staples
US11896218B2 (en) 2021-03-24 2024-02-13 Cilag Gmbh International Method of using a powered stapling device
US11786239B2 (en) 2021-03-24 2023-10-17 Cilag Gmbh International Surgical instrument articulation joint arrangements comprising multiple moving linkage features
US11849945B2 (en) 2021-03-24 2023-12-26 Cilag Gmbh International Rotary-driven surgical stapling assembly comprising eccentrically driven firing member
US11744603B2 (en) 2021-03-24 2023-09-05 Cilag Gmbh International Multi-axis pivot joints for surgical instruments and methods for manufacturing same
US11793516B2 (en) 2021-03-24 2023-10-24 Cilag Gmbh International Surgical staple cartridge comprising longitudinal support beam
US11786243B2 (en) 2021-03-24 2023-10-17 Cilag Gmbh International Firing members having flexible portions for adapting to a load during a surgical firing stroke
US11944336B2 (en) 2021-03-24 2024-04-02 Cilag Gmbh International Joint arrangements for multi-planar alignment and support of operational drive shafts in articulatable surgical instruments
US11896219B2 (en) 2021-03-24 2024-02-13 Cilag Gmbh International Mating features between drivers and underside of a cartridge deck
US11857183B2 (en) 2021-03-24 2024-01-02 Cilag Gmbh International Stapling assembly components having metal substrates and plastic bodies
US11903582B2 (en) 2021-03-24 2024-02-20 Cilag Gmbh International Leveraging surfaces for cartridge installation
US11826047B2 (en) 2021-05-28 2023-11-28 Cilag Gmbh International Stapling instrument comprising jaw mounts
US11957337B2 (en) 2021-10-18 2024-04-16 Cilag Gmbh International Surgical stapling assembly with offset ramped drive surfaces
US11877745B2 (en) 2021-10-18 2024-01-23 Cilag Gmbh International Surgical stapling assembly having longitudinally-repeating staple leg clusters
US11980363B2 (en) 2021-10-18 2024-05-14 Cilag Gmbh International Row-to-row staple array variations
US12089841B2 (en) 2021-10-28 2024-09-17 Cilag CmbH International Staple cartridge identification systems
US11937816B2 (en) 2021-10-28 2024-03-26 Cilag Gmbh International Electrical lead arrangements for surgical instruments
IT202200006338A1 (it) * 2022-03-31 2023-10-01 Medical Microinstruments Inc Metodo per controllare un dispositivo slave, comandato da un dispositivo master movimentabile da un operatore in un sistema robotico per teleoperazione medica o chirurgica, in prossimità di limiti di movimento del dispositivo slave, e relativo sistema robotico
JP2023180371A (ja) * 2022-06-09 2023-12-21 株式会社メディカロイド 手術システム
WO2024126668A1 (en) * 2022-12-16 2024-06-20 Koninklijke Philips N.V. Device tracking and monitoring outside imaging field of view
EP4437993A1 (en) * 2023-03-30 2024-10-02 Koninklijke Philips N.V. Device tracking and monitoring outside imaging field of view
DE102022134159A1 (de) * 2022-12-20 2024-06-20 Karl Storz Se & Co. Kg System und computerimplementiertes Verfahren zur Steuerung mindestens einer Funktionalität eines chirurgischen Instruments

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009542362A (ja) * 2006-06-29 2009-12-03 インテュイティブ サージカル インコーポレイテッド コンピュータディスプレイ画面の境界領域に表示されるツール位置および識別指標
US20140046341A1 (en) * 2012-08-08 2014-02-13 Intuitive Surgical Operations, Inc. Auto exposure of a camera in a surgical robot
JP2015150340A (ja) * 2014-02-18 2015-08-24 オリンパス株式会社 マニピュレータ装置の制御方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6468265B1 (en) * 1998-11-20 2002-10-22 Intuitive Surgical, Inc. Performing cardiac surgery without cardioplegia
JP4624572B2 (ja) * 2001-01-30 2011-02-02 オリンパス株式会社 内視鏡
US9439556B2 (en) * 2010-12-10 2016-09-13 Wayne State University Intelligent autonomous camera control for robotics with medical, military, and space applications
US8911453B2 (en) * 2010-12-21 2014-12-16 Restoration Robotics, Inc. Methods and systems for directing movement of a tool in hair transplantation procedures
US9119655B2 (en) * 2012-08-03 2015-09-01 Stryker Corporation Surgical manipulator capable of controlling a surgical instrument in multiple modes
US10052157B2 (en) * 2011-08-21 2018-08-21 M.S.T. Medical Surgery Technologies Ltd Device and method for assisting laparoscopic surgery—rule based approach
WO2013027202A2 (en) * 2011-08-21 2013-02-28 M.S.T. Medical Surgery Technologies Ltd. Device and method for asissting laparoscopic surgery - rule based approach
US9204939B2 (en) * 2011-08-21 2015-12-08 M.S.T. Medical Surgery Technologies Ltd. Device and method for assisting laparoscopic surgery—rule based approach
JP6033444B2 (ja) * 2013-02-05 2016-11-30 オリンパス株式会社 ロボット支援型手術システムとその作動方法
EP3084747B1 (en) * 2013-12-20 2022-12-14 Intuitive Surgical Operations, Inc. Simulator system for medical procedure training
EP3119323B1 (en) * 2014-03-17 2019-08-28 Intuitive Surgical Operations, Inc. System and machine readable medium executing a method for recentering imaging devices and input controls
US11116383B2 (en) * 2014-04-02 2021-09-14 Asensus Surgical Europe S.à.R.L. Articulated structured light based-laparoscope

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009542362A (ja) * 2006-06-29 2009-12-03 インテュイティブ サージカル インコーポレイテッド コンピュータディスプレイ画面の境界領域に表示されるツール位置および識別指標
US20140046341A1 (en) * 2012-08-08 2014-02-13 Intuitive Surgical Operations, Inc. Auto exposure of a camera in a surgical robot
JP2015150340A (ja) * 2014-02-18 2015-08-24 オリンパス株式会社 マニピュレータ装置の制御方法

Also Published As

Publication number Publication date
WO2017115425A1 (ja) 2017-07-06
US11051897B2 (en) 2021-07-06
JPWO2017115425A1 (ja) 2017-12-28
US20180296290A1 (en) 2018-10-18

Similar Documents

Publication Publication Date Title
JP6180692B1 (ja) 医療用マニピュレータシステム
US12082897B2 (en) Systems and methods for constraining a field of view in a virtual reality surgical system
US10542908B2 (en) Surgical equipment control input visualization field
US12016522B2 (en) Medical safety control apparatus, medical safety control method, and medical support system
US10881268B2 (en) Device to set and retrieve a reference point during a surgical procedure
US20190022857A1 (en) Control apparatus and control method
CN113440263B (zh) 计算机辅助式远程操作系统中的次级器械控制
JP2007029232A (ja) 内視鏡手術操作支援システム
KR20120004479A (ko) 수술 로봇의 통합적 표현
JP2021019949A (ja) 手術システム
US11209954B2 (en) Surgical robotic system using dynamically generated icons to represent orientations of instruments
US11880513B2 (en) System and method for motion mode management
CN113271884A (zh) 用于与成像设备集成运动的系统和方法
CN113613576A (zh) 用于促进外科手术器械插入到外科手术空间中的系统和方法
JP5800609B2 (ja) 医療用マスタスレーブマニピュレータ
US12102406B2 (en) System and method for repositioning input control devices
US10729505B2 (en) Medical system
KR20160105963A (ko) 수술 로봇 시스템 및 그 동작 제한 방법
WO2023150449A1 (en) Systems and methods for remote mentoring in a robot assisted medical system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20170510

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170509

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170509

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20170509

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20170613

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170627

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170718

R151 Written notification of patent or utility model registration

Ref document number: 6180692

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250