JP5384108B2 - 遠隔操作システム - Google Patents

遠隔操作システム Download PDF

Info

Publication number
JP5384108B2
JP5384108B2 JP2008521275A JP2008521275A JP5384108B2 JP 5384108 B2 JP5384108 B2 JP 5384108B2 JP 2008521275 A JP2008521275 A JP 2008521275A JP 2008521275 A JP2008521275 A JP 2008521275A JP 5384108 B2 JP5384108 B2 JP 5384108B2
Authority
JP
Japan
Prior art keywords
tool
unit
distance
remote
control system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008521275A
Other languages
English (en)
Other versions
JPWO2007145327A1 (ja
Inventor
順一 島田
敦 西川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yanchers
Original Assignee
Yanchers
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yanchers filed Critical Yanchers
Priority to JP2008521275A priority Critical patent/JP5384108B2/ja
Publication of JPWO2007145327A1 publication Critical patent/JPWO2007145327A1/ja
Application granted granted Critical
Publication of JP5384108B2 publication Critical patent/JP5384108B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/70Manipulators specially adapted for use in surgery
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017Electrical control of surgical instruments
    • A61B2017/00212Electrical control of surgical instruments using remote controls
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B2034/301Surgical robots for introducing or steering flexible instruments inserted into the body, e.g. catheters or endoscopes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/06Measuring instruments not otherwise provided for
    • A61B2090/061Measuring instruments not otherwise provided for for measuring dimensions, e.g. length
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361Image-producing devices, e.g. surgical cameras
    • A61B2090/3614Image-producing devices, e.g. surgical cameras using optical fibre
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots

Landscapes

  • Health & Medical Sciences (AREA)
  • Surgery (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Robotics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Pathology (AREA)
  • Manipulator (AREA)

Description

本発明は、隔壁の向こう側の空間内にある対象物に対して操作を行う遠隔操作システムに関する。この遠隔操作システムは、人体への侵襲をできるかぎり少なくし、しかも正確に手術を行うことのできる手術システムに好適に適用することができる。
人に対する外科的治療(手術)においては、長い間、医師が目で見ながら、メス等の術具を手で操作して対象箇所の開創、切除等の処置を行っていた。
しかし、対象器官等に関する生物学的及び解剖学的情報の蓄積及び医療技術の向上に伴い、手術対象が小範囲且つ微細となってきた。一方、電子技術の進歩に伴い撮像システムも小型化、高精細化が進み、色再現性の点でも医療現場での使用に十分堪えうるようになってきた。その結果、外科手術においても光ファイバを用いて体内を撮影し、それを大画面に投影しつつ、医師がその画面を見ながら術具を操作するという内視鏡手術も近年広く行われるようになってきた。
更には、術具の操作についても、マニピュレータにより遠隔的に行うことが模索され、各種の具体的方法が提案されている。例えば、特許文献1には、内視鏡を組み込んだマニピュレータを駆動するシステムが開示されている。このシステムでは、マニピュレータの操作は、制御用スティック又は音声認識装置を介して行われる。
特許文献2には、患者への侵襲を最小限に抑えるため、棒状のマニピュレータを、体壁の挿入孔を支点として動作させるポイントロックシステムが開示されている。このシステムでは、操作者がフェイスマウンテッドディスプレイ(FMD)を装着し、そこに映し出される映像を見ながら操作入力装置を操作して処置用マニピュレータを駆動する。また、観察用マニピュレータは、医師の頭部の動きをFMDに設けられた3次元デジタイザが検出し、それにより動き及び位置が制御される。
特許文献3には、操作者の負担を軽減するため、マニピュレータの支持機構に工夫を加えたシステムが開示されている。従って、このシステムにおいては操作者はマニピュレータを直接操作する。なお、内視鏡映像は外部画面で見るようになっている。
非特許文献1には、手術具先端の側面に3点の発光点を設け、その3点の映像に基づいて、手術具の先端から照射されるレーザ光の体内照射点(レーザスポット)と手術具先端の間の距離を測定し、その距離が所定値となるように手術具を制御する方法が開示されている。
特開平06-030896号公報 特開平08-215205号公報 特開2003-052716号公報 "Autonomous 3-D Positioning of Surgical Instruments in Robotized Laparoscopic Surgery Using Visual Servoing", A. Krupa, et al., IEEE Trans. on Robotics and Automation, Vol. 19 (2003), No. 5, pp. 842-853
以上説明した通り、従来の手術システムではいずれもマニピュレータの操作は、操作者(施術者、医師)が直接行う(特許文献3)か、操作入力装置を用いて行う(特許文献1、2)ようになっている。一方、内視鏡による術部の映像は、外部画面で見る(特許文献1、3)か、或いはFMD又はHMD(ヘッドマウンテッドディスプレイ)で見るようになっている(特許文献2)。
しかし、FMDやHMDを装着すると、周囲の状況が全く或いは不完全にしか視認できない。通常、手術は複数人でチームを組んで行うことが多いが、施術者(医師)が周囲の状況を十分に把握していないとチームメンバー間の意思疎通が不十分となり、スムーズな手術遂行が困難となる。
一方、外部画面を見ながら操作入力装置を操作するという動作は、従来から行われていた目視しつつ術具を操作するという動作と比べると、視認箇所と操作箇所が異なるという点で不自然なものであり、十分に細かい動作を行うことができないという欠点があった。
非特許文献1では、手術具を対象臓器の表面から所定の距離に近づけるまでのプロセスが扱われ、それ以降は操作者が外部画面を見ながら手動で又は操作入力装置を用いて手術具を操作して手術を行うことが予定されている。
また、上述のように対象物を目視せずにその対象物に対して操作を行うことは、手術装置以外の遠隔操作装置においても行われる。例えば、酸素、水、埃等を排除した環境下で対象物の加工を行う必要がある場合、それらを排除した容器内に対象物を収容し、加工に用いる工具を容器外から遠隔操作することがある。このように、容器などの隔壁により操作者と対象物が隔てられており、それにより操作者が対象物を目視で十分に確認することができない場合には、上述の手術装置と同様の問題が発生しうる。また、操作者が対象物から遠い場所に居る場合、対象物が肉眼では確認することができないほど小さい場合、あるいは肉眼では確認することができない微細な加工を行う場合などにも同様の問題が発生しうる。
そこで本発明が解決しようとする課題は、視認箇所と操作箇所をできるだけ近づけて自然な動作を可能とし、しかも正確な操作を行うことができる手術システムなどの遠隔操作システムを提供することである。
上記課題を解決するために成された本発明に係る遠隔操作システムは、対象物に対して操作を行う遠隔操作システムにおいて、
a) 前記対象物を撮影する撮影具と、
b) 前記対象物を照射するスポット光照射部を先端に有する操作具と、
c) 前記操作具の位置を変化させる駆動部と、
d) 前記撮影具により撮影された映像を表示する外部表示部と、
e) 操作者が、外部表示部の表示に対応した位置を指示するための入力部と、
f) 入力部を介して指示された位置と、前記スポット光照射部により前記対象物に照射されたスポット光の位置の間の距離を計算する距離計算部と、
g) 前記距離に基づき、操作具先端が前記指示位置に近づくように駆動部を制御する制御部と、
を備えることを特徴とする。
前記制御部は、前記距離が小さくなるように手術具を移動させ、前記距離が所定値以下になった後に、手術具の先端を指示位置に近づけるように駆動部を制御する機能を有するようにしてもよい。
本発明に係る遠隔操作システムは、隔壁の向こう側の空間内にある対象物に対して操作を行う場合に好適に用いることができる。そのような遠隔操作システムは、
a) 前記対象物を撮影する撮影具と、
b) 前記隔壁に設けられた単孔を通して前記空間に挿入される、先端にスポット光照射部を有する棒状の操作具と、
c) 前記操作具の位置を変化させる駆動部と、
d) 撮影具により撮影された映像を表示する外部表示部と、
e) 操作者が、外部表示部の表示に対応した位置を指示するための入力部と、
f) 入力部を介して指示された位置と、前記スポット光照射部により前記対象物に照射されたスポット光の位置の間の距離を計算する距離計算部と、
g) 前記距離に基づき、操作具先端が前記指示位置に近づくように駆動部を制御する制御部と、
を備えることを特徴とする。
前記隔壁がある場合において、前記制御部は、
まず前記距離が小さくなるように操作具を前記単孔を中心として回動させ、
前記距離が所定値以下になった後に、操作具をその軸方向に移動させる、
ように駆動部を制御する機能を有するようにしてもよい。
前記制御部は、前記指示位置が移動したときに前記距離が所定値以下である状態が維持されるように前記駆動部を制御する機能を有するようにしてもよい。このような機能は隔壁の有無に関わらず用いることができる。
本発明に係る遠隔操作システムは、前記操作具を手術具とすることにより、手術システムとして用いることができる。この場合、前記対象物は患者の患部に該当する。また、隔壁がある場合に用いるシステムにおいては、前記隔壁は患者の体壁に該当する。
本発明に係る遠隔操作システム(手術システムを含む)では、操作者(施術者)は外部表示部の画面を見ながら、入力部を用いてその画面の表示に対応した位置を指示することにより、制御部が操作具(手術具)先端から発せられるスポット光照射点と指示点との距離を近づけるように制御を行う。このため、操作者が見なければならないのは外部表示部の画面だけとなる。外部表示部は、操作者以外の者も見ることができる。また、操作者は外部表示部以外に周囲の状況を適宜見ることにより、周囲の状況を判断して適切なチームプレイを行うことができる。
操作者は、入力部を用いて操作を行うことにより、制御部及び駆動部の働きにより操作具(手術具)を意のままに動かせることができる。
以下、手術システムを例として、従来の手術システムと比較しつつ、本発明の遠隔操作システムの操作性の良い点を説明する。従来の手術システムでは、操作入力装置で操作した結果は手術具の動きとして画面に現れるだけであるが、本発明では、それに加えて、入力部を用いた操作の結果も画面上に現れる。従来の手術システムでは、施術者が操作入力部で入力を行うと、その結果がそのまま手術具の動きとなってしまうため、慎重な操作が必要であったが、本発明では手術具の動きの目標点(指示点)と実際の位置の双方が画面上に表示されるため、手術具の実際の動きが不適切な場合には、目標点(指示点)を変更することにより、適切な対応を行うことができるようになる。
本発明は、操作者が対象物の近くで操作をする場合に限らず、操作者が対象物から遠く離れた場所にいる場合にも適用することができる。その場合、少なくとも外部表示部及び入力部は操作者側に配置し(操作者側装置)、撮影具、操作具及び駆動部は対象物側に配置する(対象物側装置)。距離計算部及び制御部は操作者側装置、対象物側装置のいずれに設けてもよい。そして、操作者側装置と対象物側装置をLANやインターネットなどの通信回線を用いて接続する。この通信回線を通して、撮影具からの撮影データを外部表示部へ、また、入力部からの入力情報を(制御部、距離計算部を通して)駆動部へ伝達する。これにより、操作者は対象物の近くで操作をするのと同じ感覚で、遠く離れた場所にある対象物に対して操作をすることができる。
本発明の第1実施形態である手術システムの概略構成図。 本発明の第2実施形態である手術システムの概略構成図。 本発明の一実施例におけるツールと手術対象の関係を示す概略構成図。 上記実施例におけるツール駆動の方法を示す説明図。 上記実施例におけるツール駆動の別の方法を示す説明図。
符号の説明
11…手術具(ツール)
12…撮影具(内視鏡)
13…駆動部
14…撮像部
15…制御部
16…外部表示部
17…入力部
17a…タッチパネル
17b…マウス
18…患者
19…手術具挿入単孔
21…患者側装置
22…施術者側装置
23…インターネット
本発明に係る遠隔操作システムの第1の実施形態である手術システムを図1に示す。本システムは、棒状の手術具(操作具)11、撮影具12、駆動部13、撮像部14、制御部15、外部表示部16、入力部17等を備えている。本システムでは、入力部は、外部表示部の画面上に取り付けられたタッチパネル17aと、制御部に接続されたマウス17b、及び図示せぬキーボード等から成る。手術具11と撮影具12は患者18の体腔にそれぞれ単孔19を介して挿入され、手術具11は駆動部13により回動、進退移動等の動きが付与される。撮影具12は撮像部14によりその動きが制御され、また、撮影した映像は撮像部14で信号化され、制御部15に送られる。制御部15は、撮影具12で撮影された映像を外部表示部16に表示するとともに、入力部17を介した施術者の指示に基づき、駆動部13を用いて手術具11の動き及び処理を制御する。手術具11による処理とは、例えば手術具11がレーザーメスである場合には、レーザーによる照射、切除、切断、焼灼等であり、手術具11が電気メスである場合には切除、切断、焼灼等である。
このシステムの動作の一例は次の通りである。施術者が撮影具12を体内に挿入すると、その映像が外部表示部16に表示される。その状態で手術具11を体内に挿入し、駆動部13をセットすることにより、駆動部13による手術具11の駆動を可能とする。外部表示部16の画面を見ながら施術者が画面上のタッチパネル17aで目標点を指示すると、制御部15は画面上で、指示された目標点と手術具11の先端点との位置の差を検出し、手術具11の先端が目標点に近づくように、手術具11の動きを計算する。計算結果は駆動部13に送られ、駆動部13はそれに従って手術具11の動きを制御する。この制御により手術具11の先端点が目標点に近づき、一致すると、施術者は手術具11に対して、タッチパネル17a上で必要な処理を指示する。この指示を受けた制御部15は、駆動部13を介して手術具11にその処理を実行させる。こうして、施術者は、画面16を見ながら、画面16上で指示をするだけで、所望の手術を行うことができる。
なお、ここでは入力部17としてタッチパネル17aの例で説明したが、マウス17bを用いた場合も全く同様であり、施術者は専ら画面16を見ながら、画面16上で指示を与えることができる。
本発明に係る遠隔操作システムの第2の実施形態を図2に示す。本実施形態では、施術者が患者から遠く離れた場所にいる場合に使用できるように、以下のように構成されている。患者側には、第1の実施形態のものと同様の手術具11、撮影具12、駆動部13、撮像部14及び患者側制御部15Aを患者側装置21として配置する。一方、施術者側には、第1の実施形態のものと同様の外部表示部16及び入力部17並びにそれらを制御するための施術者側制御部15Bを施術者側装置22として配置する。そして、患者側装置21と施術者側装置22をインターネット23により接続する。
第2実施形態のシステムは、情報の伝送に通信回線(LAN,インターネット等)を使用する点を除いて第1実施形態のシステムと同じ構成を有するため、第2実施形態のシステムの動作は第1実施形態のものと同様である。そのため、施術者は患者がすぐ近くに居る場合と同じ感覚で、遠く離れた場所に居る患者に対して手術をすることができる。
ここまでは手術システムを例に説明したが、本発明はもちろん手術システム以外の遠隔操作システムに適用することができる。例えば、上述のように酸素、水、埃等を排除した環境下で対象物の加工を行う場合、それらを排除した容器内に対象物を収容したうえで、本発明のシステムを用いて容器外から工具を遠隔操作することができる。本発明によれば、対象物を収容可能な比較的小さい容器を用いることができるため、建設、維持及び運転に多額のコストを要するクリーンルームを用いる場合よりもコストを抑えることができる。
また、体壁や容器などの隔壁がない場合においても、本発明に係る遠隔操作システムを好適に用いることができる。例えば、肉眼では確認することができないほど小さい対象物を加工する場合や、肉眼では確認することができない微細な加工を行う場合には、外部表示部において対象物あるいは加工部分を拡大表示することにより、操作者が操作具の動きを入力部から精密に指示することができ、それにより精密な加工が可能となる。
本発明の具体的実施例を図3〜図5を用いて説明する。本実施例のシステムの基本的構成は前記第1実施形態及び第2実施形態の手術システムと同じである。以下では、その制御方法について、順を追って説明する。なお、以下では上記手術具をツール、駆動部をロボット、撮影具を内視鏡、外部表示部をディスプレイと呼ぶ。
[1]問題設定
ディスプレイ上に表示される画像には、3種の点座標がある(図4(a))。
(1) 操作者より指示される画面上の目標点座標D(xd,yd)
(2) ツール先端点の画像座標S(xs,ys)
(3) ツール11に装着されたレーザスポット点の画像座標P(xp,yp)
ここで注意すべきことは、操作者が画面上で目標点を与えても、奥行きの座標zdが決定できないので、対応する対象物(体内)の3D座標は決まらないということである。従って、この状態ではツール先端を目標点に3D位置決めすることはできない。
そこで、ツール11の先端にレーザポインタ(レーザ発射部)を取り付け、画像上でそのレーザスポット点を目標点に位置決めすることで、ツール先端を目標点に3D位置決めすることが可能になる。
[2] ツールの移動速度とレーザスポット点の画像速度の関係
ツール11はロボットで把持され、制御されるが、前記の通り、ツール11は体表に穿孔された単孔に挿入されているため(図3)、その挿入点Aによる運動学的拘束を受け、運動学的自由度は次の通り4となる。
・挿入点Aを中心とする球面(回動)運動 2自由度
・ツール軸まわりの回転 1自由度
・ツール軸に沿った並進 1自由度
よって、ツール11を制御するロボットには4つの関節があればよい。
ここで、ロボットの速度制御について考える。いま、挿入点Aを中心とするツール先端の2自由度の回動速度を(ωxy)、ツールの軸まわりの回転速度をωz、ツールの軸に沿った並進速度をvzとすると、レーザスポット点P(xp,yp)は(ωz,vz)に無関係であり、(ωxy)のみに依存する。すると、レーザスポット点P(xp,yp)の画像速度
Figure 0005384108
と、ツール先端の回動速度の関係(ωxy)の関係は、
Figure 0005384108
となる。ここに、Jはイメージヤコビ行列(ヤコビアン)であり、
Figure 0005384108
と表される。
一般に、ヤコビ行列Jは、カメラ(内視鏡)パラメータ、カメラ(内視鏡)12とツール11の位置関係、ツール11とターゲット(レーザスポット点)間の距離に依存して変動するが、本実施例の場合、ほぼ固定して制御することが可能であるため、事前のキャリブレーションによりJを固定することが可能となる。すなわち、ロボット(ツール)の回動速度(ωxy)を変化させたとき、レーザスポット点P(xp,yp)がどのように変化するかを予め校正しておけばよい。
[3]レーザスポット点P(xp,yp)を目標点D(xd,yd)に近づける手順
P(xp,yp)をD(xd,yd)に近づけるには、
Figure 0005384108
(但し、k1, k2>0)
という画像速度でレーザスポット点P(xp,yp)を動かせばよい。そのためには、
Figure 0005384108
という回動速度をロボット(ツール)の手先に与えればよい。
そこで、次の(1)〜(4)の手順により近づけることになる。
(1) 画像処理により、レーザスポット点P(xp,yp)を検出する。
(2) ロボット(ツール)の回動速度(ωxy)を、
Figure 0005384108
により計算する。
(3) 計算された回動速度(ωxy)を実現するように、ロボットの各関節の角速度を制御する。
(4) 終了条件
レーザスポット点P(xp,yp)と目標点D(xd,yd)の間の距離
Figure 0005384108
が所定の値εp以下になったとき、すなわち、
Figure 0005384108
を満たせば終了する(図4(b))。さもなければ(1)に戻る。
[4]ツール先端点S(xs,ys)を目標点D(xd,yd)に近づける手順
S(xs,ys)を目標点D(xd,yd)に近づけるには、両者間の距離
Figure 0005384108
に比例した速度、すなわちk3・dsd(但し、k3>0)という速度でツールを体内に挿入(軸に沿って並進)すればよい。
そこで、上記同様、次のような手順で近づけることになる。
(1) 画像処理により、ツール先端点S(xs,ys)を検出
(2) ツールの並進速度vz
Figure 0005384108
により計算する。
(3) 計算された並進速度vzを実現するように、ロボットの各関節の角速度を制御する。
(4) 終了条件
Figure 0005384108
が満たされれば終了する(図4(c))。さもなければ(1)に戻る。
実際には、レーザスポット点P(xp,yp)と目標点D(xd,yd)の間の距離dpdが所定値εp0(ただし、εp0p)以下になったときは、[3]と[4]の処理(動き)は同時並行的に行うことができる(図5(b)→(c)(d))。
本発明のシステムでは、ツール先端点Sが目標点Dに近づいた後、或いは、ツール先端点Sが目標点Dに近づく間、更にはレーザスポット点Pが目標点Dに近づく間であっても、操作者(施術者)が画面上で指示点Dを移動させると、ツール先端点S(及びレーザスポット点P)もそれに追従して移動する。従って、その間、ツールを手術可能状態にしておく(すなわち、照射、切除、切断、焼灼等が可能な状態にしておく)ことにより、施術者が画面上で指示するのみで照射、切除、切断、焼灼等の施術が可能となる。
[5]制御プログラムの構成
上記のようなツール(ロボット)の制御を行うためのプログラムは、次のような要素で構成することができる。
(1) 画像処理パート
画像からレーザスポット点P(xp,yp)及びツール先端点S(xs,ys)を検出する(リアルタイム)プログラム
(2) ロボット制御パート
ツールの4自由度の回動・並進速度(ωxyz,vz)を実現するように、ロボットの各関節角速度を制御するプログラム
(3) タッチパネル ユーザインタフェース パート
目標点を検出するプログラム、校正プロセス、オンライン制御プロセスの切替、各パラメータの設定などのユーザインタフェース(すべてタッチパネルで設定)
(4) 校正によりヤコビ行列Jを作成するプログラム
(5) レーザスポット点P(xp,yp)を目標点D(xd,yd)に近づけるための制御プログラム
(6) ツール先端点S(xs,ys)を目標点D(xd,yd)に近づけるための制御プログラム
なお、入力部をマウスとした場合には、(3)は、マウス ユーザインタフェース パートとなる。
本実施例ではツールが単孔に拘束されるという条件の下でツールの運動学的自由度を4としたが、ツールが単孔に拘束されない場合には、ツールの運動学的自由度を5以上として解析を行い、その結果に基づいてツールを操作することができる。また、本実施例では上記条件下での運動学的自由度に合わせてロボットの関節の数を4としたが、ロボット若しくはツールの関節の数又は両者を合わせた数を5以上とすることも、もちろん可能である。

Claims (14)

  1. 対象物に対して操作を行う遠隔操作システムにおいて、
    a) 前記対象物を撮影する撮影具と、
    b) 前記対象物を照射するスポット光照射部を先端に有する操作具と、
    c) 前記操作具の位置を変化させる駆動部と、
    d) 前記撮影具により撮影された映像を表示する外部表示部と、
    e) 操作者が、前記外部表示部表示された映像上で軌跡を入力することにより、該表示に対応した位置を指示するための入力部と、
    f) 入力部を介して指示された位置と、前記スポット光照射部により前記対象物に照射されたスポット光の位置の間の距離である第1距離を計算すると共に、前記指示位置と前記操作具先端の間の距離である第2距離を計算する距離計算部と、
    g) 前記スポット光位置を前記指示位置に近づける処理と、前記操作具先端を前記指示位置に近づける処理を同時並行で行い、前記指示位置が移動したときに前記第1距離が所定値以下である状態が維持されるように駆動部を制御する制御部と、
    を備えることを特徴とする遠隔操作システム。
  2. 更に、前記制御部が該操作具を軸まわりにも回転させることを特徴とする請求項1に記載の遠隔操作システム。
  3. 前記対象物が患者の患部であり、前記操作具が手術具であることを特徴とする請求項1又は2に記載の遠隔操作システム。
  4. 隔壁の向こう側の空間内にある対象物に対して操作を行う遠隔操作システムにおいて、
    a) 前記対象物を撮影する撮影具と、
    b) 前記隔壁に設けられた単孔を通して前記空間に挿入される、先端にスポット光照射部を有する棒状の操作具と、
    c) 前記操作具の位置を変化させる駆動部と、
    d) 撮影具により撮影された映像を表示する外部表示部と、
    e) 操作者が、前記外部表示部表示された映像上で軌跡を入力することにより、該表示に対応した位置を指示するための入力部と、
    f) 入力部を介して指示された位置と、前記スポット光照射部により前記対象物に照射されたスポット光の位置の間の距離である第1距離を計算すると共に、前記指示位置と前記操作具先端の間の距離である第2距離を計算する距離計算部と、
    g) 前記スポット光位置を前記指示位置に近づける処理と、前記操作具先端を前記指示位置に近づける処理を同時並行で行い、前記指示位置が移動したときに前記第1距離が所定値以下である状態が維持されるように駆動部を制御する制御部と、
    を備えることを特徴とする遠隔操作システム。
  5. 更に、前記制御部が該操作具を軸まわりにも回転させることを特徴とする請求項4に記載の遠隔操作システム。
  6. 前記撮影具によって撮影された画像上の前記スポット位置の情報を前記駆動部の回動に係わる駆動パラメータに変換するヤコビ行列に基づいて前記駆動パラメータを変化させることにより前記操作具の動きを制御することを特徴とする請求項4又は5に記載の遠隔操作システム。
  7. 前記制御部が、前記撮影具によって撮影された画像上の操作具先端部の位置情報に基づいて前記操作具の進入・後退にかかわる前記駆動部の駆動パラメータを変化させることにより前記操作具の動きを制御することを特徴とする請求項4〜6のいずれかに記載の遠隔操作システム。
  8. 前記対象物が患者の患部であり、前記隔壁が患者の体壁であって、
    前記操作具が手術具である、
    ことを特徴とする請求項4〜7のいずれかに記載の遠隔操作システム。
  9. 前記入力部が、前記外部表示部に装着されたタッチパネルであることを特徴とする請求項1〜8のいずれかに記載の遠隔操作システム。
  10. 前記制御部が、前記操作具の動きを速度制御により制御することを特徴とする請求項1〜9のいずれかに記載の遠隔操作システム。
  11. 前記操作具先端が移動する間、前記操作具が前記対象物に対して所定の操作を行うことを特徴とする請求項1〜10のいずれかに記載の遠隔操作システム。
  12. 前記所定操作が前記対象物の切除、切断若しくは焼灼又は前記対象物へのレーザ光の照射であることを特徴とする請求項11に記載の遠隔操作システム。
  13. 請求項1〜12のいずれかに記載の遠隔操作システムのうち少なくとも前記外部表示部及び前記入力部を有することを特徴とする遠隔操作システム用操作者側装置。
  14. 請求項1〜12のいずれかに記載の遠隔操作システムのうち少なくとも前記撮影具、前記操作具前記駆動部及び前記制御部を有することを特徴とする遠隔操作システム用対象物側装置。
JP2008521275A 2006-06-15 2007-06-15 遠隔操作システム Expired - Fee Related JP5384108B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008521275A JP5384108B2 (ja) 2006-06-15 2007-06-15 遠隔操作システム

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2006166381 2006-06-15
JP2006166381 2006-06-15
PCT/JP2007/062147 WO2007145327A1 (ja) 2006-06-15 2007-06-15 遠隔操作システム
JP2008521275A JP5384108B2 (ja) 2006-06-15 2007-06-15 遠隔操作システム

Publications (2)

Publication Number Publication Date
JPWO2007145327A1 JPWO2007145327A1 (ja) 2009-11-12
JP5384108B2 true JP5384108B2 (ja) 2014-01-08

Family

ID=38831840

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008521275A Expired - Fee Related JP5384108B2 (ja) 2006-06-15 2007-06-15 遠隔操作システム

Country Status (4)

Country Link
US (1) US8734431B2 (ja)
EP (1) EP2057955A4 (ja)
JP (1) JP5384108B2 (ja)
WO (1) WO2007145327A1 (ja)

Families Citing this family (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9072535B2 (en) 2011-05-27 2015-07-07 Ethicon Endo-Surgery, Inc. Surgical stapling instruments with rotatable staple deployment arrangements
US8708213B2 (en) 2006-01-31 2014-04-29 Ethicon Endo-Surgery, Inc. Surgical instrument having a feedback system
US8186555B2 (en) 2006-01-31 2012-05-29 Ethicon Endo-Surgery, Inc. Motor-driven surgical cutting and fastening instrument with mechanical closure system
US7845537B2 (en) 2006-01-31 2010-12-07 Ethicon Endo-Surgery, Inc. Surgical instrument having recording capabilities
US8840603B2 (en) 2007-01-10 2014-09-23 Ethicon Endo-Surgery, Inc. Surgical instrument with wireless communication between control unit and sensor transponders
US8684253B2 (en) 2007-01-10 2014-04-01 Ethicon Endo-Surgery, Inc. Surgical instrument with wireless communication between a control unit of a robotic system and remote sensor
US11672531B2 (en) 2007-06-04 2023-06-13 Cilag Gmbh International Rotary drive systems for surgical instruments
US11986183B2 (en) 2008-02-14 2024-05-21 Cilag Gmbh International Surgical cutting and fastening instrument comprising a plurality of sensors to measure an electrical parameter
US8573465B2 (en) 2008-02-14 2013-11-05 Ethicon Endo-Surgery, Inc. Robotically-controlled surgical end effector system with rotary actuated closure systems
US9585657B2 (en) 2008-02-15 2017-03-07 Ethicon Endo-Surgery, Llc Actuator for releasing a layer of material from a surgical end effector
US8210411B2 (en) 2008-09-23 2012-07-03 Ethicon Endo-Surgery, Inc. Motor-driven surgical cutting instrument
US11849952B2 (en) 2010-09-30 2023-12-26 Cilag Gmbh International Staple cartridge comprising staples positioned within a compressible portion thereof
US9788834B2 (en) 2010-09-30 2017-10-17 Ethicon Llc Layer comprising deployable attachment members
US9629814B2 (en) 2010-09-30 2017-04-25 Ethicon Endo-Surgery, Llc Tissue thickness compensator configured to redistribute compressive forces
US11309081B2 (en) 2010-10-13 2022-04-19 Gholam A. Peyman Telemedicine system with dynamic imaging
US10456209B2 (en) * 2010-10-13 2019-10-29 Gholam A. Peyman Remote laser treatment system with dynamic imaging
KR101181613B1 (ko) * 2011-02-21 2012-09-10 윤상진 사용자 지정에 따라 결정되는 변위 정보에 기초하여 수술을 수행하는 수술용 로봇 시스템과 그 제어 방법
JP5796982B2 (ja) * 2011-03-31 2015-10-21 オリンパス株式会社 手術用システムの制御装置及び制御方法
MX368026B (es) 2013-03-01 2019-09-12 Ethicon Endo Surgery Inc Instrumento quirúrgico articulable con vías conductoras para la comunicación de la señal.
WO2014199413A1 (ja) * 2013-06-13 2014-12-18 テルモ株式会社 医療用マニピュレータおよびその制御方法
JP6526670B2 (ja) * 2013-08-23 2019-06-05 エシコン エルエルシーEthicon LLC 外科用器具のための対話型ディスプレイ
US20150053737A1 (en) 2013-08-23 2015-02-26 Ethicon Endo-Surgery, Inc. End effector detection systems for surgical instruments
JP6000928B2 (ja) * 2013-10-24 2016-10-05 オリンパス株式会社 医療用マニピュレータおよび医療用マニピュレータの初期化方法
US10013049B2 (en) 2014-03-26 2018-07-03 Ethicon Llc Power management through sleep options of segmented circuit and wake up control
CN106456158B (zh) 2014-04-16 2019-02-05 伊西康内外科有限责任公司 包括非一致紧固件的紧固件仓
CN106413614B (zh) 2014-05-30 2021-04-16 百派德股份有限公司 双极电刀致动器
KR102284639B1 (ko) * 2014-06-26 2021-08-02 한국과학기술원 펜 형태의 인터페이스를 이용한 수술 도구 제어 시스템
US10105142B2 (en) 2014-09-18 2018-10-23 Ethicon Llc Surgical stapler with plurality of cutting elements
US9924944B2 (en) 2014-10-16 2018-03-27 Ethicon Llc Staple cartridge comprising an adjunct material
CN107072692B (zh) * 2014-10-23 2020-03-24 柯惠Lp公司 使用手术端口组件控制手术器械的方法和装置
US11154301B2 (en) 2015-02-27 2021-10-26 Cilag Gmbh International Modular stapling assembly
DE102015109368A1 (de) * 2015-06-12 2016-12-15 avateramedical GmBH Vorrichtung und Verfahren zur robotergestützten Chirurgie sowie Positionierhilfseinheit
US11890015B2 (en) 2015-09-30 2024-02-06 Cilag Gmbh International Compressible adjunct with crossing spacer fibers
CN105242687A (zh) * 2015-10-29 2016-01-13 桂林创研科技有限公司 一种无人机遥控方法
USD778442S1 (en) 2015-11-19 2017-02-07 Bipad, Llc Bipolar electrosurgery actuator system
US10357247B2 (en) 2016-04-15 2019-07-23 Ethicon Llc Surgical instrument with multiple program responses during a firing motion
CN106256310B (zh) * 2016-08-18 2018-04-13 中国科学院深圳先进技术研究院 自动调节鼻内镜位姿的方法和系统
US10646268B2 (en) 2016-08-26 2020-05-12 Bipad, Inc. Ergonomic actuator for electrosurgical tool
US10588632B2 (en) 2016-12-21 2020-03-17 Ethicon Llc Surgical end effectors and firing members thereof
US11134944B2 (en) 2017-10-30 2021-10-05 Cilag Gmbh International Surgical stapler knife motion controls
US10842490B2 (en) 2017-10-31 2020-11-24 Ethicon Llc Cartridge body design with force reduction based on firing completion
US10835330B2 (en) 2017-12-19 2020-11-17 Ethicon Llc Method for determining the position of a rotatable jaw of a surgical instrument attachment assembly
CN108186121B (zh) * 2018-01-08 2020-09-11 苏风波 一种外科随动机器手臂
EP3866717A1 (en) * 2018-10-15 2021-08-25 Intuitive Surgical Operations, Inc. Systems and methods for sterilization and storage of a sterilized teleoperated component
JP6951717B2 (ja) * 2020-03-12 2021-10-20 株式会社セオコーポレーション 無影灯
US11723658B2 (en) 2021-03-22 2023-08-15 Cilag Gmbh International Staple cartridge comprising a firing lockout

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02198784A (ja) * 1989-01-23 1990-08-07 Nissan Motor Co Ltd アーク溶接ロボットの教示位置確認装置
JP2002253574A (ja) * 2001-03-01 2002-09-10 Hitachi Ltd 手術支援装置
JP2005308613A (ja) * 2004-04-23 2005-11-04 Honda Motor Co Ltd 3次元形状測定方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5417210A (en) 1992-05-27 1995-05-23 International Business Machines Corporation System and method for augmentation of endoscopic surgery
JPH08215205A (ja) 1995-02-13 1996-08-27 Olympus Optical Co Ltd 医療用マニピュレータ
US6021342A (en) * 1997-06-30 2000-02-01 Neorad A/S Apparatus for assisting percutaneous computed tomography-guided surgical activity
DE19842239A1 (de) * 1998-09-15 2000-03-16 Siemens Ag Medizintechnische Einrichtung
JP3605057B2 (ja) 2001-08-10 2004-12-22 株式会社東芝 医療用マニピュレータシステム
US7542791B2 (en) * 2003-01-30 2009-06-02 Medtronic Navigation, Inc. Method and apparatus for preplanning a surgical procedure

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02198784A (ja) * 1989-01-23 1990-08-07 Nissan Motor Co Ltd アーク溶接ロボットの教示位置確認装置
JP2002253574A (ja) * 2001-03-01 2002-09-10 Hitachi Ltd 手術支援装置
JP2005308613A (ja) * 2004-04-23 2005-11-04 Honda Motor Co Ltd 3次元形状測定方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JPN6008028524; A.Krupa, et al.: 'Autonomous 3-D Positioning of Surgical Instruments in Robotized Laparoscopic Surgery Using Visual Se' IEEE Trans. on Robotics and Automation Vol.19(2003), No.5, pp.842-853 *

Also Published As

Publication number Publication date
US20090187288A1 (en) 2009-07-23
EP2057955A4 (en) 2016-04-20
US8734431B2 (en) 2014-05-27
EP2057955A1 (en) 2009-05-13
JPWO2007145327A1 (ja) 2009-11-12
WO2007145327A1 (ja) 2007-12-21

Similar Documents

Publication Publication Date Title
JP5384108B2 (ja) 遠隔操作システム
US11903665B2 (en) Systems and methods for offscreen indication of instruments in a teleoperational medical system
US10660716B2 (en) Systems and methods for rendering onscreen identification of instruments in a teleoperational medical system
US20220047343A1 (en) Systems and methods for onscreen identification of instruments in a teleoperational medical system
JP6714085B2 (ja) ロボット手術のために仮想現実デバイスを使用するシステム、コントローラ、及び方法
US20220249193A1 (en) Systems and methods for presenting augmented reality in a display of a teleoperational system
JP7316762B2 (ja) 外科手術システム及び外科手術システムの制御方法
EP0571827B1 (en) System and method for augmentation of endoscopic surgery
JP7478143B2 (ja) 解剖学的境界を規定するためのグラフィカルユーザインターフェイス
KR20140110685A (ko) 싱글 포트 수술 로봇의 제어 방법
CN114760903A (zh) 用于在外科手术期间控制图像捕获设备的方法、装置、以及系统
US20220323157A1 (en) System and method related to registration for a medical procedure
WO2024145414A1 (en) Systems and methods for guided tool change resiliency
WO2024145341A1 (en) Systems and methods for generating 3d navigation interfaces for medical procedures
KR102720969B1 (ko) 원격조작 의료 시스템에서 기구의 스크린상 식별정보를 렌더링하기 위한 시스템 및 방법
WO2023150449A1 (en) Systems and methods for remote mentoring in a robot assisted medical system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100615

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100615

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20100615

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20100615

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120529

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20120618

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20120618

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20120620

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120730

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120814

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20121120

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130220

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130402

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20130408

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20130510

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131002

R150 Certificate of patent or registration of utility model

Ref document number: 5384108

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees