JP6270537B2 - 医療用システム - Google Patents

医療用システム Download PDF

Info

Publication number
JP6270537B2
JP6270537B2 JP2014036824A JP2014036824A JP6270537B2 JP 6270537 B2 JP6270537 B2 JP 6270537B2 JP 2014036824 A JP2014036824 A JP 2014036824A JP 2014036824 A JP2014036824 A JP 2014036824A JP 6270537 B2 JP6270537 B2 JP 6270537B2
Authority
JP
Japan
Prior art keywords
joint
unit
image
treatment
medical system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014036824A
Other languages
English (en)
Other versions
JP2015160278A (ja
Inventor
雅敏 飯田
雅敏 飯田
直也 畠山
直也 畠山
浩志 若井
浩志 若井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2014036824A priority Critical patent/JP6270537B2/ja
Priority to EP15754565.8A priority patent/EP3111819B1/en
Priority to PCT/JP2015/055599 priority patent/WO2015129802A1/ja
Priority to CN201580007642.7A priority patent/CN105979848B/zh
Publication of JP2015160278A publication Critical patent/JP2015160278A/ja
Priority to US15/245,269 priority patent/US10863883B2/en
Application granted granted Critical
Publication of JP6270537B2 publication Critical patent/JP6270537B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00006Operational features of endoscopes characterised by electronic signal processing of control signals
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00045Display arrangement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00057Operational features of endoscopes provided with means for testing or calibration
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00059Operational features of endoscopes provided with identification means for the endoscope
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00064Constructional details of the endoscope body
    • A61B1/00071Insertion part of the endoscope body
    • A61B1/0008Insertion part of the endoscope body characterised by distal tip features
    • A61B1/00087Tools
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/005Flexible endoscopes
    • A61B1/0051Flexible endoscopes with controlled bending of insertion part
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B34/37Master-slave robots
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1679Programme controls characterised by the tasks executed
    • B25J9/1692Calibration of manipulator
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • G02B23/2476Non-optical details, e.g. housings, mountings, supports
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00681Aspects not otherwise provided for
    • A61B2017/00725Calibration or performance testing
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2065Tracking using image or pattern recognition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B2034/301Surgical robots for introducing or steering flexible instruments inserted into the body, e.g. catheters or endoscopes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body

Description

本発明は、医療用システムに関する。
ワイヤを介してモータの回転動力によりマニピュレータの処置具を駆動させる医療用システムが知られている。このような医療用システムでは、マニピュレータに有する一対の握り部品のうちの一方を、他方の握り部品の方に移動させ、そのときの握り部品の変位位置とトルク値とを測定することによりキャリブレーションが行われる。
米国特許出願公開第2008−0114494号明細書
ところが、軟性のマニピュレータの場合に、マニピュレータを処置対象部位まで案内する過程でマニピュレータが湾曲するので、マニピュレータの内部におけるワイヤの経路が変化する。特許文献1に開示された技術では、マニピュレータにおけるワイヤ経路の変化の影響を反映させたキャリブレーションが困難である。
本発明は、上記の問題を鑑みてなされたもので、ワイヤの特性変動があったとしてもキャリブレーションを行うことができる医療用システムを提供することを目的とする。
上記課題を解決するために、この発明は以下の手段を提案している。
本発明の一態様は、生体に対して処置をする処置部、前記処置部を移動させる関節部、前記関節部に接続された可撓管部、及び前記可撓管部に接続され前記関節部を変位させる駆動部を備えた処置具と、遠位端と近位端とを有し前記処置部が前記遠位端から突出可能となるように前記処置具を保持する可撓性の外套管、及び少なくとも前記関節部を撮像視野に含む少なくとも1の画像を取得可能な撮像部を備えた内視鏡装置と、前記処置具の動作を前記画像に基づいて制御する制御部と、を備え、前記制御部は、前記関節部を動作させるためのパラメータを有するテーブルと、前記パラメータに基づいて前記駆動部を制御する指令を前記駆動部に対して発する制御器と、前記関節部の位置と姿勢との少なくともいずれかを前記画像に基づいて算出する画像処理部と、前記画像処理部により算出された前記関節部の位置と姿勢との少なくともいずれかに基づいて前記関節部の変位を検出し前記指令と前記関節部の変位との差分を補償する補償値を生成して前記パラメータに前記補償値を繰り入れる補償量演算部と、を備え、前記補償値を用いて前記駆動部の動作量と前記関節部の変位との関係についてキャリブレーションを行う医療用システムである。
なお、上記の医療用システムにおいて、前記画像処理部は前記画像を用いたパターンマッチングにより前記関節部の関節角度を算出してもよい。
また、上記の医療用システムにおいて、前記画像処理部は前記画像において、最新の画像と時系列で直前に取得された画像との差分から前記関節部の変位を算出してもよい。
また、上記の医療用システムにおいて、前記制御部は、前記画像において前記関節部が特定できない場合に、前記画像に前記関節部が表示されるまで前記関節部を変位させてもよい。
また、上記の医療用システムにおいて、前記画像を表示可能な表示装置をさらに備え、
前記制御部は、前記画像において前記関節部が特定できない場合に前記関節部が前記撮像部の撮像視野の外に位置していると判定し、前記関節部の特定可能領域を前記画像に重ねた指示画像を前記画像に代えて前記表示装置へ出力し、前記表示装置は、前記画像に代えて前記指示画像を受信したときには前記指示画像を表示し、前記画像処理部は、前記関節部の特定可能領域内に前記関節部が位置した画像を用いて前記関節部の位置と姿勢との少なくともいずれかを算出してもよい。
また、上記の医療用システムにおいて、前記処置具は、前記処置具の構成を特定するための標識部を処置部と関節部との少なくともいずれかに有し、前記制御部は、前記標識部に基づいて前記処置具を判別してもよい。
また、上記の医療用システムにおいて、前記補償量演算部は、前記指令が発せられてから前記関節部の変位が開始するまでの間に前記駆動部が駆動された量に基づくヒステリシス幅を算出して前記補償値としてもよい。
また、上記の医療用システムにおいて、前記制御部は、前記標識部に基づいて判別された前記処置具に対応してパラメータを変更してもよい。
本発明によれば、ワイヤの特性変動があったとしても、キャリブレーションを行うことができる医療用システムを提供できる。
第1実施形態の医療用システムの全体構成の概略を示す斜視図である。 第1実施形態の医療用システムにおける内視鏡装置の斜視図である。 第1実施形態の医療用システムにおける処置具の一部破断斜視図である。 第1実施形態の医療用システムの一例のブロック構成図である。 第1実施形態の医療用システムの表示装置の画像の一例を示す図である。 第1実施形態の医療用システムのキャリブレーションを説明するフローチャートである。 第1実施形態の医療用システムのヒステリシス幅を測定する一例のフローチャートである。 第1実施形態の医療用システムの処置具先端角度情報を検出する一例のフローチャートである。 第1実施形態の医療用システムの処置具先端角度情報を検出する他例のフローチャートである。 第2実施形態の医療用システムのキャリブレーションを説明するフローチャートである。 第3実施形態の医療用システムのキャリブレーションを説明するフローチャートである。 第4実施形態の医療用システムのキャリブレーションを説明するフローチャートである。 第5実施形態の医療用システムのキャリブレーションを行う場合の先端部の斜視図である。 第5実施形態の医療用システムのキャリブレーションを行う場合の一例のフローチャートである。 第5実施形態の医療用システムのキャリブレーションを行う場合の他例のフローチャートである。 第6実施形態の医療用システムのキャリブレーションを行う場合の先端部の斜視図である。 第6実施形態の医療用システムのキャリブレーションを行う場合の一例のフローチャートである。 第6実施形態の医療用システムのキャリブレーションを行う場合の他例のフローチャートである。
以下、実施形態の医療用システムを図面を用いて説明する。なお、以下の図面においては、各部材を認識可能な大きさとするため、各部材の縮尺を適宜変更している。
(第1実施形態)
図1は、第1実施形態の医療用システムの全体構成の概略を示す斜視図である。本実施形態の医療用システムは、いわゆるマスタスレーブ方式のシステムである。すなわち、図1に示すように、医療用システム1は、操作者Opが処置のための操作をするマスタマニピュレータ2と、内視鏡装置3が設けられたスレーブマニピュレータ4と、マスタマニピュレータ2に対する操作に応じてスレーブマニピュレータ4を制御する制御部50(図4参照)とを持つ。
マスタマニピュレータ2は、操作者Opによって動かされるマスタアーム5と、内視鏡装置3を用いて撮影した映像等の画像情報(図4参照)59を表示するための表示装置6と、後述する制御部50の制御器7とを持つ。
マスタアーム5は、内視鏡装置3を動作させるために設けられた操作部である。また、詳細は図示しないが、マスタマニピュレータ2に設けられたマスタアーム5は、操作者Opの右手と左手とのそれぞれに対応して2つ設けられている。マスタアーム5は、少なくとも1自由度で体内に配される器具である処置具21に有する関節部22を動作させるために多関節構造を有している。
表示装置6は、内視鏡装置3に取り付けられた観察装置(図2参照)23によって撮影された処置対象部位の映像が表示される装置である。表示装置6には、処置対象部位とともに、処置具21の関節部22も表示される。
制御器7は、マスタアーム5の動作に基づいてスレーブマニピュレータ4を動作させるための操作指令を生成する。
スレーブマニピュレータ4は、患者が載置される載置台8と、載置台8の近傍に配置された多関節ロボット9と、多関節ロボット9に取り付けられた内視鏡装置3とを有する。多関節ロボット9は、マスタマニピュレータ2から発せられた操作指令に従って動作する。
図2は、第1実施形態の医療用システムにおける内視鏡装置の斜視図である。図2に示すように、内視鏡装置3は、挿入部24と、外套管駆動部(駆動部)25とを持つ。
挿入部24は、外套管26と、観察装置23と、を持つ。
外套管26は、患者の体内に挿入される軟性の長尺の部材である。外套管26は、遠位端と近位端とを有し、処置具21が挿通可能な処置具チャンネル29を有している。
観察装置23は、外套管26の遠位端から遠位側へ向けられた撮像視野が設定された装置であり、処置対象部位及び処置具21の画像を取得して表示装置6へと出力可能である。本実施形態では、観察装置23は、外套管26の遠位端部分の内部に配されている。観察装置23は、撮像部30および照明部31を有する。
撮像部30は、少なくとも関節部22を撮像視野に含む少なくとも1の画像を取得可能である。
照明部30は、撮像部30の撮像視野に向けて照明光を発する。
なお、観察装置23は、外套管26に対して着脱可能であってよい。たとえば、観察装置として公知の内視鏡装置が適用され、外套管26にこの公知の内視鏡装置を挿入可能な内視鏡チャンネルが形成されていてもよい。
処置具チャンネル29は、処置具21の処置部27が挿入部24の遠位端から突出可能となるように処置具21を保持する。
外套管駆動部25は、外套管26の近位側に設置されており、駆動により外套管26の遠位側を湾曲動作させることによって体内で観察装置23および処置具21に有する処置部27を所望の向きに向けることができる。
図3は、第1実施形態の医療用システムにおける処置具の一部破断斜視図である。図3に示すように、処置具21は、処置具駆動部(駆動部)32と、可撓管部である軟性部33と、先端部34と、を持つ。
処置具駆動部32は、モータ35と、エンコーダ36と駆動側回転体37と、ワイヤ38と、従動側回転体39とを備える。
モータ35は、関節部22および処置部27の自由度に対して1つずつ配されている。本実施形態では、一つの関節部22を湾曲動作させるための1つのモータ35についてのみ説明する。なお、処置具駆動部32は、不図示の他のモータによって不図示の他の関節部22および不図示の他の処置部27を独立して駆動させることができる。
モータ35のモータ軸は、不図示の減速機構を介して駆動側回転体37に接続されている。モータ35としては、ステッピングモータ等が採用されてもよい。
エンコーダ36(図4参照)は、モータ35の不図示のモータ軸に非接触で取り付けられている。エンコーダ36は、制御部50に電気的に接続される。
駆動側回転体37は、モータ35が発する駆動力により回転するたとえばプーリ等である。駆動側回転体37にはワイヤ38の一端部が架け渡されている。
ワイヤ38は、一端部がワイヤ38に架け渡され、中間部が軟性部33内に移動可能に収容され、他端部が従動側回転体39に架け渡された環状のワイヤである。
軟性部33は、柔軟な筒形状に形成されている。軟性部33の近位側には処置具駆動部32が配され、軟性部33の遠位側には処置部27が配されている。
処置具21の先端部34は、関節部22と、腕部40と、処置部27と、を持つ。
関節部22は、腕部40に連結されている。関節部22は、従動側回転体39から力量が伝達されることにより、腕部40を変位させる。関節部22が湾曲動作する構造は、関節構造に限られない。例えば、複数の湾曲コマが互いに回動自在に連接された関節構造であっても良い。
処置部27は、処置対象に対して処置をするための鉗子や切開ナイフである。
また、本実施形態では、処置具21の先端部34は、処置具21の種類を特定するための標識部Xを有する。標識部Xは、たとえば印刷や刻印として腕部40に配されている。
処置具21では、モータ35の回転に伴い、駆動側回転体37が回転され、ワイヤ38を介して従動側回転体39が回転される。そのため、従動側回転体39の回転によって関節部22が湾曲動作を行う。このとき、エンコーダ36からの回転信号は、制御部50によって処理され、モータ駆動量の情報として取り込まれる。
図4は、第1実施形態の医療用システムの一例のブロック構成図である。なお、このブロック図は、以下の各実施形態に援用される。
図4に示すように、医療用システム1の制御部50は、マスタ制御部51と、スレーブ制御部52と、キャリブレーション部53と、画像処理部54と、補償量演算部55と、処置具情報記憶部56と、パラメータテーブル57と、制御器7と、を持つ。
マスタ制御部51は、マスタマニピュレータ2における操作入力(入力)58を受け付けて処理する。
スレーブ制御部52は、マスタ制御部51からの指令に基づいて多関節ロボット9と内視鏡装置3と処置具21とに対する駆動信号を出力する。
キャリブレーション部53は、処置具21の動作における補償用のパラメータを生成する。なお、キャリブレーション部53は、マスタ制御部51とスレーブ制御部52とのどちらに属していてもよく、マスタ制御部51とスレーブ制御部52とから独立していてもよい。
画像処理部54は、撮像部30が取得した画像情報59の解析を行う。ここで、画像処理部54は、関節部22の位置と姿勢との少なくともいずれかを画像情報59に基づいて算出する。本実施形態における画像処理部54は、画像情報59を用いた画像認識により関節部22の関節角度を算出する。
補償量演算部55は、画像処理部54により算出された関節部22の位置と姿勢との少なくともいずれかに基づいて関節部22の変位を検出し、入力(指令)58と関節部22の変位との差分を補償する補償値を生成してパラメータに補償値を繰り入れる。具体的には、本実施形態の補償量演算部55は、後述するヒステリシス幅を補償値としてパラメータに繰り入れる。補償量演算部55は、指令が発せられてから関節部22の変位が開始するまでの間に、処置具駆動部32が駆動された量に基づくヒステリシス幅を算出し、関節部22の変位が開始した後に補償値を確定してパラメータに繰り入れる。
処置具情報記憶部56は、処置具21の個体情報やパターンマッチング画像など、キャリブレーションに必要な個別データを保持する。
パラメータテーブル57は、制御器7が参照するパラメータを有する。パラメータテーブル57には、医療用システム1の立ち上げ時に初期パラメータがロードされる。パラメータテーブル57にロードされた初期パラメータは、補償量演算部55によりキャリブレーションごとに更新され、制御器7に参照されるパラメータとなる。
制御器7は、キャリブレーション部53において更新されパラメータテーブル57に記憶されたパラメータを利用してモータ35に出力を出す。
制御部50は、撮像部30によって得られた画像情報59を利用してキャリブレーション部53を介してキャリブレーションを行う。ここで、撮像部30の撮像視野に処置具21が写っていない場合には、処置具21に対して好適にキャリブレーションを行うことができる位置まで処置具21を移動させるように制御部50は処置具21の位置を制御する。たとえば、制御部50は、画像情報59において関節部22が特定できない場合に、画像情報59に関節部22が表示されるまで関節部22を変位させる。
また、別の制御方法として、制御部50は、画像情報59において関節部22が特定できない場合に、関節部22が撮像部30の撮像視野の外に位置していると判定し、関節部22の特定可能領域を画像情報59に重ねた指示画像情報を画像情報59に代えて表示装置6へ出力してもよい。すなわち、この制御方法では、医療用システム1の使用者に対して処置具21の移動を促すことで、処置具21がキャリブレーション可能な範囲内に入るように制御部50が使用者の操作を支援する。画像情報59に代えて指示画像情報を受信したときには、表示装置6によって指示画像情報が表示される。処置具21の関節部22が撮像部30の撮像視野内における上記特定可能領域に配された後、画像処理部54は、関節部22の特定可能領域内に関節部22が位置した画像情報59を用いて関節部22の位置と姿勢との少なくともいずれかを算出する。
図5は、第1実施形態の医療用システムの表示装置の画像の一例を示す図である。図5に示すように、表示装置6に表示されている画像情報59に基づいて、キャリブレーション部53がキャリブレーションを行う。たとえば、制御部50は、関節部22における屈曲点を仮想的な特徴点として画像情報59から画像認識により設定し、各関節部22における屈曲角度を算出する。
図6は、第1実施形態の医療用システムのキャリブレーションを説明するフローチャートである。図6に示すように、処置具先端キャリブレーションでは、まず、ヒステリシス幅Δθが計測される[ヒステリシス幅計測](ステップST101)。ここで、ヒステリシス幅Δθの測定とは、指令が発せられてから関節部22の変位が開始するまでの間に、処置具駆動部32が駆動された量に基づいた値である。
次に、パラメータテーブル57に記憶されたパラメータを参照[テーブル参照](ステップST102)し、ヒステリシス値が更新される[パラメータ更新](ステップST103)。ここで、ヒステリシス値とは、ヒステリシス幅Δxを変数に含む関数からなるパラメータ要素として定義されている。たとえば、ヒステリシス値は、以下の数式(1)によって表される。
Figure 0006270537
上記の数式(1)における記号uは、ヒステリシス値であり、本実施形態における補償値である。ヒステリシス値は、パラメータテーブル57に記憶されることにより、更新後のパラメータとして制御器7の動作時に読み込まれる。
そして、更新されたヒステリシス値を用いてキャリブレーションが行われることになる。なお、ヒステリシス幅は、図7に示すフローチャートによって得られる。
図7は、第1実施形態の医療用システムのヒステリシス幅を測定する一例を示すフローチャートである。
図7に示すように、ヒステリシス幅の計測においては、撮像部30によって、少なくとも関節部22を撮像視野に含む少なくとも1の画像が取得される[画像取得開始](ステップST201)。たとえば、撮像部30により取得された画像は、関節部22を画像内に含んだ状態で表示装置6に表示される。
撮像部30による撮像が行われている状態で、処置具駆動部32のモータ35が駆動を開始される[モータ駆動開始](ステップST202)。モータ35の駆動に伴い、関節部22は、移動を開始される。しかしながら、ワイヤ38の伸びやたるみ、あるいはワイヤ38の外面に対する摩擦力等によって、モータ35の駆動と関節部22の屈曲との間に遅れその他の差異が生じることがある。たとえば、モータ35が駆動されても、モータ35が一定の回転角に達するまで関節部22が全く動作しない場合もある。
モータ35の駆動が開始された時点から、処置具先端角度情報の検出が開始される[処置具先端角度情報を検出](ステップST203)。すなわち、移動中の関節部22の動きが検出される。処置具先端角度情報は、後述するパターンマッチングやオプティカルフローにより検出可能である。
ここで、関節部22に動きがあったか否かが検出される[処置先端部が動いた](ステップST204)。
このとき、関節部22に動きがない場合、処置具先端角度情報が繰り返し検出される[処置具先端角度情報を検出](ステップST203)。
これに対して、関節部22に動きがあった場合、モータ35の駆動が一旦停止される[モータ駆動停止](ステップST205)。
なお、先端部34の初期値が既知である場合には、先端部34を一方向へ移動させることでヒステリシス幅を算出可能である。先端部34の初期値が不明である場合には、対向する2方向(たとえば左右方向)へ先端部34を往復移動させることで初期値不明のままヒステリシス幅を算出可能である。たとえば、先端部34を所定の一方向に移動させるためにモータ35を動作させ、先端部34の微小動作が検出されたときのモータ35の動作量を記憶し、続いて上記所定の一方向と反対方向に移動させるためにモータ35を動作させ、先端部34の微小動作が検出されたときのモータ35の動作量を記憶する。この過程で取得された2つの動作量の情報から、ヒステリシス幅を算出できる。
そして、補償量演算部55によって、指令が発せられてから関節部22の変位が開始するまでの間に、処置具駆動部32が駆動された量に基づくヒステリシス幅を算出して、ヒステリシス値を確定し、補償値uとする[ヒステリシス幅を算出](ステップST206)。このように、関節部22が微小動作するまでモータ35が駆動され、処置具駆動部32が駆動された量に基づいてヒステリシス幅が算出される。
図8は、第1実施形態の医療用システムの処置具先端角度情報を検出する一例のフローチャートである。
図8に示すように、まず、内視鏡装置3の撮像部30によって画像情報59が取得される[内視鏡画像を取得](ステップST301)。
次に、標識部Xに基づいてあらかじめ設定されているパターンを参照したパターンマッチングにより、取得された画像情報59から処置具21の画像情報59が抽出される[パターンマッチにより画像から処置具を抽出](ステップST302)。
続いて、抽出された画像情報59から特徴点が抽出される[特徴点を抽出](ステップST303)。
そして、抽出された特徴点から処置具21の先端部34の角度情報が算出される[処置具先端角度情報を算出](ステップST304)。
図9は、第1実施形態の医療用システムの処置具先端角度情報を検出する他例のフローチャートである。図9に示すように、内視鏡装置3により取得された画像情報59をオプティカルフロー方式で処理する。つまり、画像処理部54によって、画像情報59において、最新の画像情報59と時系列で直前に取得された画像情報59との差分から関節部22の変位を算出する。すなわち、まず、内視鏡装置3の最新の画像情報59が取得される。その後に、直前の内視鏡装置3の画像情報59が取得され、両画像情報59の偏差が算出されることにより、内視鏡先端の移動方向と移動距離が算出される[最新の内視鏡画像情報と直前の内視鏡画像情報の差分から内視鏡先端の移動方向と移動距離を算出](ステップST401)。
次に、処置具21の先端部34の角度の変位量が算出される[処置具先端部の角度の変位量を算出](ステップST402)。
以上に説明した第1実施形態によれば、制御部50が、パラメータテーブル57と、制御器7と、画像処理部54と、補償量演算部55と、を持つので、ワイヤ38の特性変動によって生じる処置具21の先端部34の動作の変化を考慮したキャリブレーションができる。これにより、軟性である本実施形態の内視鏡装置3において処置対象部位に処置具21の先端部34が案内されたときに適切なキャリブレーションを行うことができる。
また、第1実施形態によれば、画像処理部54によって、パターンマッチングあるいはオプティカルフローを使用して処置具21の関節部22の屈曲角度を算出できるので、処置対象部位を観察するために必須な撮像部30をキャリブレーションのための構成として利用できる。このため、関節部22の関節角度を検出するエンコーダ等を必要とせず、簡易な構成で精度の高いキャリブレーションができる。
また、第1実施形態によれば、制御部50は、画像情報59において関節部22が特定できない場合に、画像情報59に関節部22が表示されるまで関節部22を変位させるために、キャリブレーションができないという事態を回避できる。
また、関節部22の特定可能領域を画像情報59に重ねた指示画像を画像情報59に代えて表示装置6へ出力して使用者による処置具21の移動を促す場合には、処置具21の操作が処置具21の使用者に委ねられているので、処置具21の移動を安定して行える。なお、処置具21が使用者によって適切な位置に移動されたときに自動的にキャリブレーションが開始されてもよく、この場合には、使用者に求める操作が簡略化できる。
また、第1実施形態によれば、制御部50は、処置具21を標識部Xに基づいて判別するために、簡単な画像処理によって処置具21を検出することができる。
なお、上記実施形態では、パターンマッチングとオプティカルフローとのいずれかが採用される例を示したが、パターンマッチングとオプティカルフローとの両方の画像処理が可能な構成を有していてもよい。たとえば、標識部Xが識別可能でありパターンマッチング画像がある場合にはパターンマッチングが採用され、標識部Xが識別不能である場合や適切なパターンマッチング画像がない場合にはオプティカルフローが採用されてよい。すなわち、パターンマッチングとオプティカルフローとのどちらを採用するかが状況に応じて選択される構成を有していてもよい。
また、第1実施形態によれば、補償量演算部55は、指令が発せられてから関節部22の変位が開始するまでの間に処置具駆動部32が駆動された量に基づくヒステリシス幅を算出して補償値を設定するために、処置具21の先端部34における実測値を利用した適切な補償値を取得することができる。
また、第1実施形態によれば、制御部50は、標識部Xに基づいて判別された処置具21に対応してパラメータを変更するために、処置具21の正確な検出を行うことができる。
(第2実施形態)
次に、本発明の第2実施形態について説明する。
図10は、第2実施形態の医療用システムのキャリブレーションを説明するフローチャートである。なお、以下の各実施形態において、第1実施形態と同一の部位には同一の符号を付してその説明は省略し、異なる点についてのみ説明する。
図10に示すように、本実施形態では、制御部50におけるキャリブレーション手順が上記実施形態と異なっている。本実施形態におけるキャリブレーションでは、処置具21の先端部34の切り返しの指令が発生してから、この指令に応じて処置具21の先端部34が切り返しを始めた遅れ時間を用いている。なお、本実施形態において、「切り返し」とは、所定の一方向に先端部34が変位している状態から先端部34が逆方向に変位するように変位方向が切り替わることをいう。
本実施形態におけるキャリブレーションでは、まず、切り返しの指令が発生された時のカウント値が取得される[切り返し入力発生時カウント取得](ステップST501)。カウント値の取得は、たとえば、不図示のタイマーをゼロにリセットしてカウントアップを開始することで切り返しの指令が発生された時点をゼロとする。
次に、切り返しの指令によって処置具21の先端部34が切り返しを始めた時のカウント値が取得される[処置具切り返し時カウント取得](ステップST502)。処置具21の先端部34が切り返しを始めたことは、上記第1実施形態で説明したパターンマッチングやオプティカルフローを用いて先端部34の変位を検出することで検出可能である。
続いて、切り返しの指令が発生してから、処置具21の先端部34が切り返しを始めた時までの遅れ時間が取得される[遅れ時間取得](ステップST503)。本実施形態では、切り返しの指令が発生されたときにゼロでリセットされたタイマーにおけるカウント値が遅れ時間として取得される。
そして、パラメータテーブル57が参照され[テーブル参照](ステップST504)、続いて遅れ時間に対する補償値が更新される[遅れ時間に対する補償値を更新](ステップST505)。ここで、遅れ時間は、以下の数式(2)によって表される位相進みフィルタ、数式(3)によって表される制御補償によって補償することができる。なお、時定数から位相進みフィルタを設定してもよい。
Figure 0006270537
Figure 0006270537
上記の数式(3)において、uは補償値となる。
第2実施形態によれば、切り返しの指令が発生してから、処置具21の先端部34が切り返しを始めた時までの遅れ時間がパラメータテーブル57によって参照されて、遅れ時間に対する補償値が更新されることにより、ワイヤ38の特性変動があったとしても、キャリブレーションを行うことができる。
(第3実施形態)
次に、本発明の第3実施形態について説明する。
図11は、第3実施形態の医療用システムのキャリブレーションを説明するフローチャートである。本実施形態では、制御部50におけるキャリブレーション手順が上記実施形態と異なっている。図11に示すように、本実施形態におけるキャリブレーションでは、指令により処置具21の先端部34を変位させる振幅と、実際に処置具21の先端部34が変位した振幅(角度応答)との比に基づいて補償量が変更される。
本実施形態では、まず、入力値が参照される[入力値参照](ステップST601)。
次に、処置具21の先端部34の振幅量が計測される[処置具先端部振幅計測](ステップST602)。
続いて、計測された振幅量がパラメータテーブル57で参照され[テーブル参照](ステップ603)、補償係数が更新される[補償係数を更新](ステップST604)。補償係数に基づいた補償値は、下記の数式(4)に定義された式におけるuとして表される。
Figure 0006270537
上記の数式(4)におけるαは、補償係数であり、以下の数式(5)によって表される。例えば、指令による振幅に対する実際の先端部34の振幅が1/2であれば、補償係数αは2となり、補償値uは上記の数式(4)から2θrefとなる。
Figure 0006270537
第3実施形態によれば、指令と処置具21の先端部34の角度応答の振幅比に基づいて補償量が変更されることにより、ワイヤ38の特性変動があったとしても、キャリブレーションを行うことができる。
(第4実施形態)
次に、本発明の第4実施形態について説明する。
図12は、第4実施形態の医療用システムのキャリブレーションを説明するフローチャートである。本実施形態では、制御部50におけるキャリブレーション手順が上記実施形態と異なっている。
図12に示すように、この場合のキャリブレーションでは、入力と角度応答から弾性を有するモデルを仮定し、このモデルを用いてパラメータテーブル57が変更される。ここで、先端部34は、軟性部33に蓄積されている弾性復元力やワイヤ38に有する弾性反発力によって弾性特性を有する。そのため、軟性部33およびワイヤ38に有する弾性特性によって振幅が減少する。すなわち、まず、エンコーダ36によるモータ35の駆動量が参照される[モータ駆動量参照](ステップST701)。
次に、処置具21の先端部34の応答が検出される[処置具先端の応答検出](ステップST702)。
続いて、あらかじめ用意されているモデルとの比較が行われる[モデルと比較](ステップST703)。ここで、モデルとしては、以下の数式(6)、数式(7)によって表される。なお、以下の数式(6)、数式(7)において、θは先端部34の角度、θmはモータ35の角度、θ’は先端部34の角速度、Jは先端部34の慣性モーメント、Jmはモータ35の慣性モーメント、Fはモータ35が発生するトルク、keは先端部34の回転方向の環境剛性、cは回転方向の粘性摩擦係数、fdは先端部34にかかる摩擦トルク、kは回転方向に換算したワイヤ38の剛性を示す。
また、先端部34の検出が位置の場合もあり、この場合、以下の数式(6)、数式(7)において、θは先端部3の位置、θmはモータ35の位置、θ’は先端部34の速度、Jは先端部34の質量、Jmはモータ35の質量、Fはモータ35が発生する力、keは先端部34の並進方向の環境剛性、cは並進方向の粘性摩擦係数、fdは先端部34にかかる摩擦力、kはワイヤ38の剛性を示す。
Figure 0006270537
Figure 0006270537
そして、モデル内のパラメータが更新される[モデル内パラメータを更新]ステップST704)。
モデル内のパラメータは、画像情報から得た先端角度情報と、モデル出力とを一致させるように繰り返し計算を行うことで得ることができる。
補償値uは、モデル内のパラメータを用いて、下記の数式(8)、数式(9)により求めることができる。
Figure 0006270537
Figure 0006270537
上記数式(8)において、fdは先端部34にかかる摩擦トルク、kは回転方向に換算したワイヤ38の剛性を示す。
この場合、モデルの出力と指令出力とを一致させることにより、補償量を決定することができる。
第4実施形態によれば、入力と角度応答から仮定されたモデルを用いてパラメータテーブル57が変更されることにより、ワイヤ38の特性変動があったとしても、キャリブレーションを行うことができる。
なお、上記数式(6),数式(7)により表されるモデルは一例であり、他の関数によりモデルが定義されてもよい。
(第5実施形態)
次に、本発明の第5実施形態について説明する。
図13は、第5実施形態の医療用システムのキャリブレーションを行う場合の先端部の斜視図である。本実施形態では、処置具チャンネル29の中心線方向における先端部34の進退量に対するキャリブレーションを制御部50が行う点で上記実施形態と異なっている。
図13に示すように、処置部27は、処置具駆動部32によって位置A1と位置A2との間のストローク長さL1で進退移動される。
図14は、第5実施形態の医療用システムのキャリブレーションを行う場合の一例のフローチャートである。図14に示すように、まず、内視鏡装置3の画像情報59が取得される[内視鏡画像を取得](ステップST801)。
次に、パターンマッチングにより内視鏡装置3の画像情報59から処置具21が検出される[パターンマッチングにより画像から処置具を検出](ステップST802)。
続いて、検出された処置具21において識別部(特徴点)Xが抽出される[特徴点を抽出](ステップST803)。
そして、抽出された識別部Xを用いて処置具21の進退量が算出される[処置具進退量を算出](ステップST804)。
図15は、第5実施形態の医療用システムのキャリブレーションを行う場合の他例のフローチャートである。
本実施形態におけるキャリブレーションは、上記第1実施形態で説明したオプティカルフローを利用してもよい。すなわち、図15に示すように、まず、内視鏡装置3の最新の画像情報59が取得される。その後に、直前の内視鏡装置3の画像情報59が取得され、両画像情報59の偏差が算出されることにより、内視鏡先端の移動方向と移動距離が算出される[最新の内視鏡画像情報と直前の内視鏡画像情報の差分から内視鏡先端の移動方向と移動距離を算出](ステップST901)。
次に、処置具21の先端部34の進退量が算出される[処置具進退量を算出](ステップST902)。
第5実施形態によれば、処置部27の内視鏡装置3の画像情報59における進退量を用いてキャリブレーションが行われることにより、ワイヤ38の特性変動があったとしても、キャリブレーションを行うことができる。
(第6実施形態)
次に、本発明の第6実施形態について説明する。
図16は、第6実施形態の医療用システムのキャリブレーションを行う場合の先端部の斜視図である。本実施形態では、処置具チャンネル29の中心線に直交する方向における先端部34の平行移動量に対するキャリブレーションを制御部50が行う点で上記実施形態と異なっている。
図16に示すように、この場合、関節部22に代えて、処置部27の内視鏡装置3の画像情報59における平行移動量を用いてキャリブレーションが行われる。処置部27は、処置具駆動部32によって位置B1と位置B2との間のストローク長さL2で平行移動される。
図17は、第6実施形態の医療用システムのキャリブレーションを行う場合の一例のフローチャートである。図17に示すように、まず、内視鏡装置3の画像情報59が取得される[内視鏡画像を取得](ステップST1101)。
次に、パターンマッチングにより内視鏡装置3の画像情報59から処置具21が検出される[パターンマッチングにより画像から処置具を検出](ステップST1102)。
続いて、検出された処置具21において識別部(特徴点)Xが抽出される[特徴点を抽出](ステップST1103)。
そして、抽出された識別部Xを用いて処置具21の平行移動量が算出される[処置具平行移動を算出](ステップST1104)。
図18は、第6実施形態の医療用システムのキャリブレーションを行う場合の他例のフローチャートである。本実施形態におけるキャリブレーションは、上記第1実施形態で説明したオプティカルフローを利用してもよい。すなわち、図18に示すように、まず、内視鏡装置3の最新の画像情報59が取得される。その後に、直前の内視鏡装置3の画像情報59が取得され、両画像情報59の偏差が算出されることにより、内視鏡先端の移動方向と移動距離が算出される[最新の内視鏡画像情報と直前の内視鏡画像情報の差分から内視鏡先端の移動方向と移動距離を算出](ステップST1201)。
次に、処置具21の先端部34の平行移動量が算出される[処置平行移動量を算出](ステップST1202)。
第6実施形態によれば、処置部27の内視鏡装置3の画像情報59における平行移動量を用いてキャリブレーションが行われることにより、ワイヤ38の特性変動があったとしても、キャリブレーションを行うことができる。
以上、本発明の実施形態及びその変形例について図面を参照して詳述したが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。
また、上述の各実施形態において示した構成要素は適宜に組み合わせて構成することが可能である。
1 医療用システム
2 マスタマニピュレータ
3 内視鏡装置
4 スレーブマニピュレータ
5 マスタアーム
6 表示装置
7 載置台
8 多関節ロボット
21 処置具
22 関節部
23 観察装置
24 挿入部
25 外套管駆動部(駆動部)
26 外套管
27 処置部
29 処置具チャンネル
30 撮像部
31 照明部
32 処置具駆動部(駆動部)
33 軟性部
34 先端部
35 モータ
36 エンコーダ
37 駆動側回転体
38 ワイヤ
39 従動側回転体
40 腕部
50 制御部
51 マスタ制御部
52 スレーブ制御部
53 キャリブレーション部
54 画像処理部
55 補償量演算部
56 処置具情報記憶部
57 パラメータテーブル(テーブル)
58 入力(操作入力)
59 画像情報
Op 操作者
X 標識部

Claims (8)

  1. 生体に対して処置をする処置部、前記処置部を移動させる関節部、前記関節部に接続された可撓管部、及び前記可撓管部に接続され前記関節部を変位させる駆動部を備えた処置具と、
    遠位端と近位端とを有し前記処置部が前記遠位端から突出可能となるように前記処置具を保持する可撓性の外套管、及び少なくとも前記関節部を撮像視野に含む少なくとも1の画像を取得可能な撮像部を備えた内視鏡装置と、
    前記処置具の動作を前記画像に基づいて制御する制御部と、
    を備え、
    前記制御部は、
    前記関節部を動作させるためのパラメータを有するテーブルと、
    前記パラメータに基づいて前記駆動部を制御する指令を前記駆動部に対して発する制御器と、
    前記関節部の位置と姿勢との少なくともいずれかを前記画像に基づいて算出する画像処理部と、
    前記画像処理部により算出された前記関節部の位置と姿勢との少なくともいずれかに基づいて前記関節部の変位を検出し前記指令と前記関節部の変位との差分を補償する補償値を生成して前記パラメータに前記補償値を繰り入れる補償量演算部と、
    を備え
    前記補償値を用いて前記駆動部の動作量と前記関節部の変位との関係についてキャリブレーションを行う
    医療用システム。
  2. 請求項1に記載の医療用システムであって、
    前記画像処理部は前記画像を用いたパターンマッチングにより前記関節部の関節角度を算出する
    医療用システム。
  3. 請求項1に記載の医療用システムであって、
    前記画像処理部は前記画像において、最新の画像と時系列で直前に取得された画像との差分から前記関節部の変位を算出する
    医療用システム。
  4. 請求項1から請求項3のいずれか一項に記載の医療用システムであって、
    前記制御部は、前記画像において前記関節部が特定できない場合に、前記画像に前記関節部が表示されるまで前記関節部を変位させる
    医療用システム。
  5. 請求項1から請求項3のいずれか一項に記載の医療用システムであって、
    前記画像を表示可能な表示装置をさらに備え、
    前記制御部は、前記画像において前記関節部が特定できない場合に前記関節部が前記撮像部の撮像視野の外に位置していると判定し、前記関節部の特定可能領域を前記画像に重ねた指示画像を前記画像に代えて前記表示装置へ出力し、
    前記表示装置は、前記画像に代えて前記指示画像を受信したときには前記指示画像を表示し、
    前記画像処理部は、前記関節部の特定可能領域内に前記関節部が位置した画像を用いて前記関節部の位置と姿勢との少なくともいずれかを算出する
    医療用システム。
  6. 請求項1から請求項5のいずれか一項に記載の医療用システムであって、
    前記処置具は、前記処置具の構成を特定するための標識部を処置部と関節部との少なくともいずれかに有し、
    前記制御部は、前記標識部に基づいて前記処置具を判別する
    医療用システム。
  7. 請求項1から請求項6のいずれか一項に記載の医療用システムであって、
    前記補償量演算部は、前記指令が発せられてから前記関節部の変位が開始するまでの間に前記駆動部が駆動された量に基づくヒステリシス幅を算出して前記補償値とする
    医療用システム。
  8. 請求項6に記載の医療用システムであって、
    前記制御部は、前記標識部に基づいて判別された前記処置具に対応して前記パラメータを変更する
    医療用システム。
JP2014036824A 2014-02-27 2014-02-27 医療用システム Active JP6270537B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2014036824A JP6270537B2 (ja) 2014-02-27 2014-02-27 医療用システム
EP15754565.8A EP3111819B1 (en) 2014-02-27 2015-02-26 Medical system and treatment tool calibration method
PCT/JP2015/055599 WO2015129802A1 (ja) 2014-02-27 2015-02-26 医療用システム及び処置具のキャリブレーション方法
CN201580007642.7A CN105979848B (zh) 2014-02-27 2015-02-26 医疗用系统以及处置器具的校准方法
US15/245,269 US10863883B2 (en) 2014-02-27 2016-08-24 Medical system and treatment tool calibrating method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014036824A JP6270537B2 (ja) 2014-02-27 2014-02-27 医療用システム

Publications (2)

Publication Number Publication Date
JP2015160278A JP2015160278A (ja) 2015-09-07
JP6270537B2 true JP6270537B2 (ja) 2018-01-31

Family

ID=54009116

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014036824A Active JP6270537B2 (ja) 2014-02-27 2014-02-27 医療用システム

Country Status (5)

Country Link
US (1) US10863883B2 (ja)
EP (1) EP3111819B1 (ja)
JP (1) JP6270537B2 (ja)
CN (1) CN105979848B (ja)
WO (1) WO2015129802A1 (ja)

Families Citing this family (60)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8672837B2 (en) 2010-06-24 2014-03-18 Hansen Medical, Inc. Methods and devices for controlling a shapeable medical device
US20130303944A1 (en) 2012-05-14 2013-11-14 Intuitive Surgical Operations, Inc. Off-axis electromagnetic sensor
US9452276B2 (en) 2011-10-14 2016-09-27 Intuitive Surgical Operations, Inc. Catheter with removable vision probe
US20140148673A1 (en) 2012-11-28 2014-05-29 Hansen Medical, Inc. Method of anchoring pullwire directly articulatable region in catheter
US9057600B2 (en) 2013-03-13 2015-06-16 Hansen Medical, Inc. Reducing incremental measurement sensor error
US9014851B2 (en) 2013-03-15 2015-04-21 Hansen Medical, Inc. Systems and methods for tracking robotically controlled medical instruments
US9271663B2 (en) 2013-03-15 2016-03-01 Hansen Medical, Inc. Flexible instrument localization from both remote and elongation sensors
US9629595B2 (en) 2013-03-15 2017-04-25 Hansen Medical, Inc. Systems and methods for localizing, tracking and/or controlling medical instruments
US11020016B2 (en) 2013-05-30 2021-06-01 Auris Health, Inc. System and method for displaying anatomy and devices on a movable display
EP2923669B1 (en) 2014-03-24 2017-06-28 Hansen Medical, Inc. Systems and devices for catheter driving instinctiveness
EP3200718A4 (en) 2014-09-30 2018-04-25 Auris Surgical Robotics, Inc Configurable robotic surgical system with virtual rail and flexible endoscope
US10314463B2 (en) * 2014-10-24 2019-06-11 Auris Health, Inc. Automated endoscope calibration
JP6348854B2 (ja) * 2015-02-03 2018-06-27 富士フイルム株式会社 内視鏡用プロセッサ装置、内視鏡システム及び内視鏡システムの非接触給電方法
AU2016323982A1 (en) 2015-09-18 2018-04-12 Auris Health, Inc. Navigation of tubular networks
US10143526B2 (en) 2015-11-30 2018-12-04 Auris Health, Inc. Robot-assisted driving systems and methods
WO2017167971A1 (en) 2016-03-31 2017-10-05 Koninklijke Philips N.V. Image guided robotic system for tumor aspiration
US9931025B1 (en) 2016-09-30 2018-04-03 Auris Surgical Robotics, Inc. Automated calibration of endoscopes with pull wires
DE102016225613A1 (de) * 2016-12-20 2018-06-21 Kuka Roboter Gmbh Verfahren zum Kalibrieren eines Manipulators eines diagnostischen und/oder therapeutischen Manipulatorsystems
US10244926B2 (en) 2016-12-28 2019-04-02 Auris Health, Inc. Detecting endolumenal buckling of flexible instruments
KR102558061B1 (ko) 2017-03-31 2023-07-25 아우리스 헬스, 인코포레이티드 생리적 노이즈를 보상하는 관강내 조직망 항행을 위한 로봇 시스템
CN110831498B (zh) 2017-05-12 2022-08-12 奥瑞斯健康公司 活检装置和系统
US10022192B1 (en) 2017-06-23 2018-07-17 Auris Health, Inc. Automatically-initialized robotic systems for navigation of luminal networks
WO2019005696A1 (en) 2017-06-28 2019-01-03 Auris Health, Inc. DETECTION OF ELECTROMAGNETIC DISTORTION
WO2019005872A1 (en) 2017-06-28 2019-01-03 Auris Health, Inc. INSTRUMENT INSERTION COMPENSATION
EP3644885B1 (en) 2017-06-28 2023-10-11 Auris Health, Inc. Electromagnetic field generator alignment
US10426559B2 (en) 2017-06-30 2019-10-01 Auris Health, Inc. Systems and methods for medical instrument compression compensation
WO2019008942A1 (ja) * 2017-07-03 2019-01-10 富士フイルム株式会社 医療画像処理装置、内視鏡装置、診断支援装置、医療業務支援装置、及び、レポート作成支援装置
CN107322589B (zh) * 2017-07-14 2020-06-19 西安交通大学 一种可变刚度的柔性手术臂的气动控制系统
US10145747B1 (en) 2017-10-10 2018-12-04 Auris Health, Inc. Detection of undesirable forces on a surgical robotic arm
US11058493B2 (en) 2017-10-13 2021-07-13 Auris Health, Inc. Robotic system configured for navigation path tracing
US10555778B2 (en) 2017-10-13 2020-02-11 Auris Health, Inc. Image-based branch detection and mapping for navigation
JP7362610B2 (ja) 2017-12-06 2023-10-17 オーリス ヘルス インコーポレイテッド コマンド指示されていない器具の回動を修正するシステムおよび方法
AU2018384820A1 (en) 2017-12-14 2020-05-21 Auris Health, Inc. System and method for estimating instrument location
KR20200101334A (ko) 2017-12-18 2020-08-27 아우리스 헬스, 인코포레이티드 관강내 조직망 내 기구 추적 및 항행을 위한 방법 및 시스템
EP3752085A4 (en) 2018-02-13 2021-11-24 Auris Health, Inc. SYSTEM AND METHOD FOR TRAINING A MEDICAL INSTRUMENT
JP7214747B2 (ja) 2018-03-28 2023-01-30 オーリス ヘルス インコーポレイテッド 位置センサの位置合わせのためのシステム及び方法
KR102500422B1 (ko) 2018-03-28 2023-02-20 아우리스 헬스, 인코포레이티드 기구의 추정된 위치를 디스플레이하기 위한 시스템 및 방법
US10932812B2 (en) * 2018-03-30 2021-03-02 Spectranetics Llc Calibrated power-driven surgical cutting device
EP3801190A4 (en) 2018-05-30 2022-03-02 Auris Health, Inc. SYSTEMS AND METHODS FOR SENSOR-BASED BRANCH LOCATION PREDICTION
MX2020012898A (es) 2018-05-31 2021-02-26 Auris Health Inc Navegacion de redes tubulares basada en trayecto.
KR102455671B1 (ko) 2018-05-31 2022-10-20 아우리스 헬스, 인코포레이티드 이미지-기반 기도 분석 및 매핑
EP3801280A4 (en) 2018-05-31 2022-03-09 Auris Health, Inc. ROBOTIC SYSTEMS AND LUMINAL NETWORK NAVIGATION METHODS THAT DETECT PHYSIOLOGICAL NOISE
EP3856064A4 (en) 2018-09-28 2022-06-29 Auris Health, Inc. Systems and methods for docking medical instruments
EP3860497A1 (en) * 2018-10-04 2021-08-11 Intuitive Surgical Operations, Inc. Systems and methods for device verification and sensor calibration
WO2021038469A1 (en) 2019-08-30 2021-03-04 Auris Health, Inc. Systems and methods for weight-based registration of location sensors
WO2021038495A1 (en) 2019-08-30 2021-03-04 Auris Health, Inc. Instrument image reliability systems and methods
CN114641252B (zh) 2019-09-03 2023-09-01 奥瑞斯健康公司 电磁畸变检测和补偿
EP4084721A4 (en) 2019-12-31 2024-01-03 Auris Health Inc IDENTIFICATION OF AN ANATOMIC FEATURE AND AIMING
KR20220123076A (ko) 2019-12-31 2022-09-05 아우리스 헬스, 인코포레이티드 경피 접근을 위한 정렬 기법
KR20220123087A (ko) 2019-12-31 2022-09-05 아우리스 헬스, 인코포레이티드 경피 접근을 위한 정렬 인터페이스
US20220110703A1 (en) * 2020-01-17 2022-04-14 Korea Advanced Institute Of Science And Technology Method of determining hysteresis of surgical robot, method of compensating for the same, and endoscopic surgical apparatus
CN112057171B (zh) * 2020-09-04 2021-08-17 北京科迈启元科技有限公司 机械臂与手术执行器连接件
EP4247290A1 (en) * 2020-11-20 2023-09-27 Auris Health, Inc. Automated procedure evaluation
KR102555196B1 (ko) * 2021-05-17 2023-07-14 주식회사 로엔서지컬 와이어 히스테리시스 보상 기능을 갖는 수술 도구 장치 및 그 제어방법
WO2022269797A1 (ja) * 2021-06-23 2022-12-29 オリンパス株式会社 マニピュレータシステム、計測装置およびマニピュレータの制御方法
WO2023021538A1 (ja) * 2021-08-16 2023-02-23 オリンパスメディカルシステムズ株式会社 マニピュレータシステム、制御装置及び形状推定方法
JP2023030681A (ja) * 2021-08-23 2023-03-08 国立研究開発法人国立がん研究センター 内視鏡画像の処置具の先端検出装置、内視鏡画像の処置具の先端検出方法、及び内視鏡画像の処置具の先端検出プログラム
KR102616257B1 (ko) * 2021-10-18 2023-12-22 주식회사 로엔서지컬 가요성 튜브의 히스테리시스 보상 제어장치 및 그 방법
CN114378819B (zh) * 2022-01-18 2022-07-26 上海健康医学院 一种消化内镜微创手术机器人主从手控制方法和装置
KR102478344B1 (ko) * 2022-07-06 2022-12-16 주식회사 에어스메디컬 의료용 로봇의 제어를 모니터링 하기 위한 방법, 프로그램 및 장치

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS58217015A (ja) * 1982-06-11 1983-12-16 Fujitsu Ltd ロボツトのヒステリシスの補正方法
JP2743613B2 (ja) * 1991-05-10 1998-04-22 神鋼電機株式会社 移動ロボットの制御方法
JPH10174686A (ja) 1996-12-17 1998-06-30 Toshiba Corp ワイヤ駆動機構および超音波プローブ
JP3973504B2 (ja) * 2002-07-15 2007-09-12 株式会社日立製作所 牽引位置決め装置
US7386365B2 (en) 2004-05-04 2008-06-10 Intuitive Surgical, Inc. Tool grip calibration for robotic surgery
US10555775B2 (en) * 2005-05-16 2020-02-11 Intuitive Surgical Operations, Inc. Methods and system for performing 3-D tool tracking by fusion of sensor and/or camera derived data during minimally invasive robotic surgery
JP4794934B2 (ja) 2005-07-22 2011-10-19 オリンパスメディカルシステムズ株式会社 内視鏡
JP4458492B2 (ja) * 2006-03-29 2010-04-28 学校法人早稲田大学 手術支援ロボットの動作制御システム及び位置検出装置
US9718190B2 (en) * 2006-06-29 2017-08-01 Intuitive Surgical Operations, Inc. Tool position and identification indicator displayed in a boundary area of a computer display screen
JP2008104854A (ja) 2006-10-25 2008-05-08 Terumo Corp 医療用マニピュレータ
US8157793B2 (en) 2006-10-25 2012-04-17 Terumo Kabushiki Kaisha Manipulator for medical use
BRPI0808578A2 (pt) * 2007-04-11 2014-09-09 Forth Photonics Ltd "uma estrutura de suporte e uma estação de trabalho incorporado a estrutura de suporte para aperfeiçoar, objetivar e documentar in vivo exames do útero"
JP5237608B2 (ja) 2007-10-25 2013-07-17 オリンパスメディカルシステムズ株式会社 医療装置
JP5028219B2 (ja) 2007-10-30 2012-09-19 オリンパスメディカルシステムズ株式会社 マニピュレータ装置および医療機器システム
JP4580973B2 (ja) * 2007-11-29 2010-11-17 オリンパスメディカルシステムズ株式会社 処置具システム
JP2010035768A (ja) * 2008-08-04 2010-02-18 Olympus Medical Systems Corp 能動駆動式医療機器
US9259274B2 (en) 2008-09-30 2016-02-16 Intuitive Surgical Operations, Inc. Passive preload and capstan drive for surgical instruments
US8594841B2 (en) * 2008-12-31 2013-11-26 Intuitive Surgical Operations, Inc. Visual force feedback in a minimally invasive surgical procedure
JP5085684B2 (ja) * 2010-05-19 2012-11-28 オリンパスメディカルシステムズ株式会社 処置具システム及びマニピュレータシステム
CN103140159A (zh) * 2011-05-12 2013-06-05 奥林巴斯医疗株式会社 医疗用控制装置
JP2014000301A (ja) * 2012-06-20 2014-01-09 Fujifilm Corp 光源装置及び内視鏡システム

Also Published As

Publication number Publication date
EP3111819A1 (en) 2017-01-04
US10863883B2 (en) 2020-12-15
CN105979848A (zh) 2016-09-28
JP2015160278A (ja) 2015-09-07
EP3111819B1 (en) 2018-12-12
US20160360947A1 (en) 2016-12-15
WO2015129802A1 (ja) 2015-09-03
CN105979848B (zh) 2018-02-13
EP3111819A4 (en) 2017-11-29

Similar Documents

Publication Publication Date Title
JP6270537B2 (ja) 医療用システム
JP7022400B2 (ja) 手術支援装置、その制御方法、プログラム並びに手術支援システム
JP6091410B2 (ja) 内視鏡装置の作動方法及び内視鏡システム
US20190290109A1 (en) Automated endoscope calibration
EP2879609B2 (en) Controller definition of a robotic remote center of motion
US11540699B2 (en) Medical manipulator system
JP2015159926A (ja) 医療用システム
WO2009084345A1 (ja) 医療機器システム
CN104394792A (zh) 手术支援装置
EP3648652A1 (en) A laparoscopic adapter, an echocardiography probe and a method for coupling the adapter to the probe
JP6149175B1 (ja) 手術支援装置、その制御方法、プログラム並びに手術支援システム
KR101284087B1 (ko) 시각센서를 이용한 수술용 로봇, 그 수술용 로봇의 위치 및 각도 분석방법, 그 수술용 로봇의 제어방법, 그 수술용 로봇의 위치 및 각도 분석시스템 및 그 수술용 로봇의 제어 시스템
CN107249501B (zh) 医疗用主从机械手系统
WO2017212474A1 (en) Endoscope -like devices comprising sensors that provide positional information
JP6388686B2 (ja) 手術支援装置、その制御方法、プログラム並びに手術支援システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160606

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170606

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170725

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20170726

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171205

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20171226

R151 Written notification of patent or utility model registration

Ref document number: 6270537

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250