JP6848785B2 - 手術システム、制御方法、及び制御装置 - Google Patents
手術システム、制御方法、及び制御装置 Download PDFInfo
- Publication number
- JP6848785B2 JP6848785B2 JP2017183151A JP2017183151A JP6848785B2 JP 6848785 B2 JP6848785 B2 JP 6848785B2 JP 2017183151 A JP2017183151 A JP 2017183151A JP 2017183151 A JP2017183151 A JP 2017183151A JP 6848785 B2 JP6848785 B2 JP 6848785B2
- Authority
- JP
- Japan
- Prior art keywords
- unit
- orientation
- image
- condition
- surgical
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0075—Apparatus for testing the eyes; Instruments for examining the eyes provided with adjusting devices, e.g. operated by control lever
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/02—Subjective types, i.e. testing apparatus requiring the active assistance of the patient
- A61B3/08—Subjective types, i.e. testing apparatus requiring the active assistance of the patient for testing binocular or stereoscopic vision, e.g. strabismus
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/13—Ophthalmic microscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/14—Arrangements specially adapted for eye photography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/25—User interfaces for surgical systems
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B46/00—Surgical drapes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B46/00—Surgical drapes
- A61B46/20—Surgical drapes specially adapted for patients
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/20—Surgical microscopes characterised by non-optical aspects
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/20—Surgical microscopes characterised by non-optical aspects
- A61B90/25—Supports therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61F—FILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
- A61F9/00—Methods or devices for treatment of the eyes; Devices for putting-in contact lenses; Devices to correct squinting; Apparatus to guide the blind; Protective devices for the eyes, carried on the body or in the hand
- A61F9/007—Methods or devices for eye surgery
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J13/00—Controls for manipulators
- B25J13/08—Controls for manipulators by means of sensing devices, e.g. viewing or touching devices
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/24—Base structure
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
- G02B21/367—Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D3/00—Control of position or direction
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D3/00—Control of position or direction
- G05D3/12—Control of position or direction using feedback
- G05D3/20—Control of position or direction using feedback using a digital comparing device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
- G06T7/0014—Biomedical image inspection using an image reference approach
- G06T7/0016—Biomedical image inspection using an image reference approach involving temporal comparison
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/19—Sensors therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
- A61B17/02—Surgical instruments, devices or methods, e.g. tourniquets for holding wounds open; Tractors
- A61B17/0231—Surgical instruments, devices or methods, e.g. tourniquets for holding wounds open; Tractors for eye surgery
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2059—Mechanical position encoders
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2065—Tracking using image or pattern recognition
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/30—Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
- A61B2090/309—Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure using white LEDs
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/39—Markers, e.g. radio-opaque or breast lesions markers
- A61B2090/3954—Markers, e.g. radio-opaque or breast lesions markers magnetic, e.g. NMR or MRI
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/14—Arrangements specially adapted for eye photography
- A61B3/145—Arrangements specially adapted for eye photography by video means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10056—Microscopic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30041—Eye; Retina; Ophthalmic
Description
1.第1の実施形態
1−1.顕微鏡手術システムの構成
1−2.駆動制御システムの構成
1−3.制御方法の処理手順
2.第2の実施形態
2−1.駆動制御システムの構成
2−2.制御方法の処理手順
3.変形例
3−1.学習による位置姿勢条件の更新
3−2.位置姿勢条件に含まれる指示の他の例
3−3.画像の見た目についての指示の登録方法の他の例
3−4.位置姿勢条件の指定方法の他の例
3−5.顕微鏡部の移動に対する制限
4.補足
(1−1.顕微鏡手術システムの構成)
図1を参照して、本開示の第1の実施形態に係る顕微鏡手術システムの構成について説明する。図1は、第1の実施形態に係る顕微鏡手術システムの概略的な一構成例を示す図である。図1を参照すると、顕微鏡手術システム3000は、顕微鏡装置3100と、制御装置3200と、表示装置3300と、から構成される。
図3を参照して、以上説明した顕微鏡手術システム3000に適用される、第1の実施形態に係る駆動制御システムの構成について説明する。図3は、第1の実施形態に係る駆動制御システムの機能構成の一例を示す機能ブロック図である。
図8を参照して、第1の実施形態に係る制御方法の処理手順について説明する。図8は、第1の実施形態に係る制御方法の処理手順の一例を示すフロー図である。なお、図8に示す各処理は、上述した図3に示す駆動制御システム1の制御部140によって実行される処理に対応している。
本開示の第2の実施形態について説明する。上述した第1の実施形態に係る初期動作制御では、顕微鏡部3110によって得られた現在の撮像画像の状態が、術前に設定された位置姿勢条件に対応する所望の撮像画像の状態に近いと判断された場合に、駆動制御システム1における一連の処理が終了していた。つまり、第1の実施形態に係る初期動作制御では、設定された位置姿勢条件を満たすように顕微鏡部3110の位置及び姿勢が制御された時点で、駆動制御システム1による顕微鏡部3110の駆動制御が終了する。一方、手術中には、患者3405の随意運動や術者3401による処置によって、眼が移動してしまうことがある。このような場合においては、術式や位置姿勢条件の内容によっては、眼が移動した場合であっても更に位置姿勢条件が満たされるように、当該眼の移動に追従するように顕微鏡部3110の位置及び姿勢が制御され続けることが好ましいことがある。
図13を参照して、上述した顕微鏡手術システム3000に適用される、第2の実施形態に係る駆動制御システムの構成について説明する。図13は、第2の実施形態に係る駆動制御システムの機能構成の一例を示す機能ブロック図である。
図14を参照して、第2の実施形態に係る制御方法の処理手順について説明する。図14は、第2の実施形態に係る制御方法の処理手順の一例を示すフロー図である。なお、図14に示す各処理は、図13に示す第2の実施形態に係る駆動制御システム2の制御部150によって実行される処理に対応している。
以上説明した第1及び第2の実施形態のいくつかの変形例について説明する。
以上の説明では、位置姿勢条件を駆動制御システム1、2に事前に登録し、その中から初期動作制御及び追従動作制御を行う際に適宜選択していた。しかしながら、このように予め位置姿勢条件を登録しておく方式では、実際に初期動作制御又は追従動作制御手術を行った結果、予め登録された位置姿勢条件に対応する撮像画像と、実際に見たい画像との間に差異が存在することも想定され得る。この場合には、初期動作制御又は追従動作制御によって予め登録された位置姿勢条件を満たすように顕微鏡部3110が移動された後、真に所望の撮像画像が得られるように、術者が手動で当該顕微鏡部3110の位置及び姿勢を修正する作業が生じることとなる。
上記の説明では、位置姿勢条件に含まれる指示として、画像の見た目及び撮影方向を挙げていた。ただし、第1及び第2の実施形態はかかる例に限定されない。例えば、位置姿勢条件には、画像の見た目及び撮影方向についての指示のいずれか一方のみが含まれてもよい。また、位置姿勢条件には他の指示が含まれてもよい。例えば、位置姿勢条件には、上述した画像の見た目及び/又は撮影方向に代えて、又はこれらに加えて、倍率、顕微鏡部と床との距離、顕微鏡部と眼との距離、及び/又は顕微鏡部3110の光軸周りの向き等についての指示が含まれてもよい。
上記の説明では、図5−図7に例示したGUIを用いて画像の見た目についての指示を登録していた。ただし、第1及び第2の実施形態はかかる例に限定されず、画像の見た目についての指示の登録には、他のGUIが用いられてもよい。なお、以下に説明する各GUIに係る表示についての表示制御は、図3及び図13に示す駆動制御システム1、2の制御部140、150によって実行され得る。また、これらのGUIに係る表示が表示される表示画面は、術前情報取得部110を構成する表示装置の表示画面であってもよいし、駆動制御システム1、2に別途設けられる表示装置の表示画面であってもよい。
上記の説明では、図4に例示したGUIを用いて位置姿勢条件が指定されていた。ただし、第1及び第2の実施形態はかかる例に限定されず、位置姿勢条件の指定は、他の方法によって行われてもよい。
第1の実施形態に係る初期動作制御及び第2の実施形態に係る追従動作制御では、位置姿勢条件を満たすように自動で顕微鏡部3110が移動する制御が行われる。第1及び第2の実施形態では、安全の観点から、この初期動作制御及び追従動作制御における顕微鏡部3110の移動に対して各種の制限が設定されてもよい。
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
(1)
術前に設定された位置姿勢条件を満たすように、術中に顕微鏡部によって撮影された術部の撮像画像に基づいて、前記顕微鏡部を支持するアーム部を駆動させ、前記顕微鏡部の位置及び姿勢を制御する制御部、
を備え、
前記位置姿勢条件は、前記位置姿勢条件に対応する所望の撮像画像を得るための、前記術部に対する前記顕微鏡部の位置及び姿勢を規定する条件である、
制御装置。
(2)
前記位置姿勢条件は、術部の画像の見た目についての指示を少なくとも含む、
前記(1)に記載の制御装置。
(3)
前記術部の画像の見た目についての指示は、前記撮像画像における前記術部の位置についての内容、前記撮像画像における前記術部の大きさについての内容、前記撮像画像における前記術部の形状についての内容、及び前記撮像画像における頭頂方向についての内容のうちの少なくともいずれかを含む、
前記(2)に記載の制御装置。
(4)
前記位置姿勢条件は、撮影方向についての指示、前記撮像画像における倍率についての指示、前記顕微鏡部と床との距離についての指示、及び前記顕微鏡部と前記術部との距離についての指示のうちの少なくともいずれかを含む、
前記(1)〜(3)のいずれか1項に記載の制御装置。
(5)
前記術部は眼である、
前記(1)〜(4)のいずれか1項に記載の制御装置。
(6)
前記位置姿勢条件は、前記眼の画像の見た目についての指示を少なくとも含み、
前記眼の画像の見た目についての指示は、前記撮像画像における前記眼の角膜輪部の位置についての内容、前記撮像画像における前記眼の角膜輪部の大きさについての内容、前記撮像画像における前記眼の角膜輪部の形状についての内容、及び前記撮像画像における頭頂方向についての内容のうちの少なくともいずれかを含む、
前記(5)に記載の制御装置。
(7)
前記位置姿勢条件は、特定の指標を最大化又は最小化する旨の指示を含む、
前記(1)〜(6)のいずれか1項に記載の制御装置。
(8)
前記術部は眼であり、
前記特定の指標は徹照であり、
前記徹照を最大化する旨の指示は、網膜からの反射光の輝度が最大であること、又は前記眼の眼軸と前記顕微鏡部の光軸とが所定の位置関係にあることを含む、
前記(7)に記載の制御装置。
(9)
術中に撮影された前記撮像画像が、術前に設定された前記位置姿勢条件に対応する前記所望の撮像画像に近付くまで、前記顕微鏡部の位置及び姿勢が制御される、
前記(1)〜(8)のいずれか1項に記載の制御装置。
(10)
術中に撮影された前記撮像画像が、術前に設定された前記位置姿勢条件に対応する前記所望の撮像画像に近付いたことは、それぞれの画像から抽出される特徴量を比較することにより判定される、
前記(9)に記載の制御装置。
(11)
終了指示が入力されるまで、術前に設定された前記位置姿勢条件を満たすように前記顕微鏡部の位置及び姿勢が制御される、
前記(1)〜(8)のいずれか1項に記載の制御装置。
(12)
前記術部を含む術部近傍を俯瞰した撮像画像に基づいて、前記位置姿勢条件を満たすように前記顕微鏡部を支持する前記アーム部が駆動され、前記顕微鏡部の位置及び姿勢が制御される、
前記(1)〜(11)のいずれか1項に記載の制御装置。
(13)
予め登録された前記位置姿勢条件の中から、一の前記位置姿勢条件が設定され、
設定された前記位置姿勢条件を満たすように、前記顕微鏡部の位置及び姿勢を制御する、
前記(1)〜(12)のいずれか1項に記載の制御装置。
(14)
設定された前記位置姿勢条件を満たすように前記顕微鏡部の位置及び姿勢が制御された後、前記顕微鏡部の位置及び姿勢が修正された場合に、修正後の前記顕微鏡部の位置及び姿勢に基づいて、設定された前記位置姿勢条件の登録内容が更新される、
前記(13)に記載の制御装置。
(15)
前記制御部は、予め登録された前記位置姿勢条件を示すアイコンを表示画面に表示させる、
前記(13)又は(14)に記載の制御装置。
(16)
プロセッサが、術前に設定された所望の撮像画像を得るための術部に対する顕微鏡部の位置及び姿勢を規定する条件である位置姿勢条件を満たすように、術中に前記顕微鏡部によって撮影された前記術部の撮像画像に基づいて、前記顕微鏡部を支持するアーム部を駆動させ、前記顕微鏡部の位置及び姿勢を制御する、
制御方法。
(17)
術部の撮像画像を撮影する顕微鏡部と、
前記顕微鏡部を支持するアーム部と、
術前に設定された所望の撮像画像を得るための前記術部に対する前記顕微鏡部の位置及び姿勢を規定する条件である位置姿勢条件を満たすように、術中に前記顕微鏡部によって撮影された前記術部の撮像画像に基づいて、前記アーム部を駆動させ、前記顕微鏡部の位置及び姿勢を制御する、制御装置と、
を備える、
手術用顕微鏡装置。
110 術前情報取得部
120 術中情報取得部
130 駆動部
140、150 制御部
141 位置姿勢条件設定部
142 状態認識部
143 状態比較部
144 駆動制御部
153 終了判定部
3000 顕微鏡手術システム
3100 顕微鏡装置
3110 顕微鏡部
3120 アーム部
3121a 第1関節部
3121b 第2関節部
3121c 第3関節部
3121d 第4関節部
3121e 第5関節部
3121f 第6関節部
3123a 第1リンク
3123b 第2リンク
3123c 第3リンク
3123d 第4リンク
3123e 第5リンク
3123f 第6リンク
3130 ベース部
3200 制御装置
3300 表示装置
Claims (25)
- 術部の画像を撮像する撮像部と、
前記撮像部を支持するアーム部と、
前記術部の所望の画像を得るための前記撮像部の位置及び姿勢の条件として、予め登録された位置姿勢条件を記憶する記憶部と、
ユーザからの操作入力を受け付ける操作部と、
前記操作部に対する操作入力に応じて、前記記憶部から前記位置姿勢条件を取得し、術中に前記撮像部によって撮像される前記術部の画像が前記所望の画像に対応する画像となるように、取得した前記位置姿勢条件に基づいて、前記アーム部を駆動させ、前記撮像部の位置及び姿勢を制御する制御部と、
を備える、手術システム。 - 前記位置姿勢条件は、ユーザごとに前記記憶部に記録される、
請求項1に記載の手術システム。 - 前記位置姿勢条件は、施術の種類ごとに前記記憶部に記録される、
請求項1又は2に記載の手術システム。 - 前記制御部は、前記撮像部の光軸が空間上の所定の点を常に向くように、前記アーム部を駆動させる、
請求項1〜3のいずれか1項に記載の手術システム。 - 前記撮像部は、立体視に対応する右目用及び左目用の画像信号を取得する、
請求項1〜4のいずれか1項に記載の手術システム。 - 前記撮像部は、AF(Auto Focus)機能を備える、
請求項1〜5のいずれか1項に記載の手術システム。 - 前記撮像部により撮像される前記術部の画像を表示する表示部をさらに備える、
請求項1〜6のいずれか1項に記載の手術システム。 - 前記位置姿勢条件は、前記術部の画像の見た目についての指示を少なくとも含む、
請求項1〜7のいずれか1項に記載の手術システム。 - 前記術部の画像の見た目についての指示は、前記画像における前記術部の位置についての内容、前記画像における前記術部の大きさについての内容、前記画像における前記術部の形状についての内容、及び前記画像における頭頂方向についての内容のうちの少なくともいずれかを含む、
請求項8に記載の手術システム。 - 前記位置姿勢条件は、撮影方向についての指示、前記画像における倍率についての指示、前記撮像部と床との距離についての指示、及び前記撮像部と前記術部との距離についての指示のうちの少なくともいずれかを含む、
請求項1〜9のいずれか1項に記載の手術システム。 - 前記術部は眼である、
請求項1〜10のいずれか1項に記載の手術システム。 - 前記位置姿勢条件は、前記眼の画像の見た目についての指示を少なくとも含み、
前記眼の画像の見た目についての指示は、前記画像における前記眼の角膜輪部の位置についての内容、前記画像における前記眼の角膜輪部の大きさについての内容、前記画像における前記眼の角膜輪部の形状についての内容、及び前記画像における頭頂方向についての内容のうちの少なくともいずれかを含む、
請求項11に記載の手術システム。 - 前記位置姿勢条件は、特定の指標を最大化又は最小化する旨の指示を含む、
請求項1〜12のいずれか1項に記載の手術システム。 - 前記術部は眼であり、
前記特定の指標は徹照であり、
前記徹照を最大化する旨の指示は、網膜からの反射光の輝度が最大であること、又は前記眼の眼軸と前記撮像部の光軸とが所定の位置関係にあることを含む、
請求項13に記載の手術システム。 - 前記制御部は、術中に撮像された前記術部の画像が術前に設定された前記位置姿勢条件に対応する前記所望の画像に近付くまで、前記撮像部の位置及び姿勢を制御する、
請求項1〜14のいずれか1項に記載の手術システム。 - 前記制御部は、術中に撮像された前記術部の画像が術前に設定された前記位置姿勢条件に対応する前記所望の画像に近付いたことを、それぞれの画像から抽出される特徴量を比較することにより判定する、
請求項15に記載の手術システム。 - 前記制御部は、終了指示が入力されるまで、術前に設定された前記位置姿勢条件を満たすように前記撮像部の位置及び姿勢を制御する、
請求項1〜16のいずれか1項に記載の手術システム。 - 前記制御部は、前記術部を含む術部近傍を俯瞰した画像に基づいて、前記位置姿勢条件を満たすように前記撮像部を支持する前記アーム部を駆動し、前記撮像部の位置及び姿勢を制御する、
請求項1〜17のいずれか1項に記載の手術システム。 - 前記制御部は、予め登録された複数の前記位置姿勢条件の中から一の前記位置姿勢条件を設定し、
設定された前記位置姿勢条件を満たすように、前記撮像部の位置及び姿勢を制御する、
請求項1〜18のいずれか1項に記載の手術システム。 - 前記制御部は、設定された前記位置姿勢条件を満たすように前記撮像部の位置及び姿勢が制御された後、前記撮像部の位置及び姿勢が修正された場合に、修正後の前記撮像部の位置及び姿勢に基づいて、設定された前記位置姿勢条件の登録内容を更新する、
請求項19に記載の手術システム。 - 前記制御部は、前記ユーザによって前記撮像部の位置及び姿勢が修正されたことに基づいて、前記予め登録された位置姿勢条件を更新する、
請求項1〜20のいずれか1項に記載の手術システム。 - 前記制御部は、予め登録された複数の前記位置姿勢条件の中から一の前記位置姿勢条件を指定するためのGUIを通じて指定された前記位置姿勢条件を満たすように、前記撮像部の位置及び姿勢を制御する、
請求項19に記載の手術システム。 - 前記制御部は、前記GUIとして、予め登録された前記位置姿勢条件を示すアイコンを表示画面に表示させる、
請求項22に記載の手術システム。 - プロセッサが、
ユーザからの操作入力を受け付ける操作部に対する前記操作入力に応じて、術部の所望の画像を得るための、前記術部の画像を撮像する撮像部の位置及び姿勢の条件として、予め登録された位置姿勢条件を記憶する記憶部から前記位置姿勢条件を取得することと、
術中に前記撮像部によって撮像される前記術部の画像が前記所望の画像に対応する画像となるように、取得した前記位置姿勢条件に基づいて、前記撮像部を支持するアーム部を駆動させ、当該撮像部の位置及び姿勢を制御することと、
を含む、制御方法。 - ユーザからの操作入力を受け付ける操作部に対する前記操作入力に応じて、術部の所望の画像を得るための、前記術部の画像を撮像する撮像部の位置及び姿勢の条件として、予め登録された位置姿勢条件を記憶する記憶部から前記位置姿勢条件を取得し、術中に前記撮像部によって撮像される前記術部の画像が前記所望の画像に対応する画像となるように、取得した前記位置姿勢条件に基づいて、前記撮像部を支持するアーム部を駆動させ、当該撮像部の位置及び姿勢を制御する制御部を備える、制御装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016067323 | 2016-03-30 | ||
JP2016067323 | 2016-03-30 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017539390A Division JP6217890B1 (ja) | 2016-03-30 | 2017-02-07 | 制御装置、制御方法及び手術用顕微鏡装置 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2018029980A JP2018029980A (ja) | 2018-03-01 |
JP2018029980A5 JP2018029980A5 (ja) | 2020-03-12 |
JP6848785B2 true JP6848785B2 (ja) | 2021-03-24 |
Family
ID=59963802
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017539390A Active JP6217890B1 (ja) | 2016-03-30 | 2017-02-07 | 制御装置、制御方法及び手術用顕微鏡装置 |
JP2017183151A Active JP6848785B2 (ja) | 2016-03-30 | 2017-09-25 | 手術システム、制御方法、及び制御装置 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017539390A Active JP6217890B1 (ja) | 2016-03-30 | 2017-02-07 | 制御装置、制御方法及び手術用顕微鏡装置 |
Country Status (5)
Country | Link |
---|---|
US (3) | US10595955B2 (ja) |
EP (2) | EP3266403B1 (ja) |
JP (2) | JP6217890B1 (ja) |
CN (2) | CN110786819B (ja) |
WO (1) | WO2017169135A1 (ja) |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3266403B1 (en) * | 2016-03-30 | 2020-04-15 | Sony Corporation | Control device, control method, and operating microscope device |
DE102016122004B4 (de) * | 2016-11-16 | 2024-03-21 | Carl Zeiss Meditec Ag | Verfahren zur Darstellung von Bildern eines digitalen Operationsmikroskops und digitales Operationsmikroskop-System |
US11513332B2 (en) | 2016-11-29 | 2022-11-29 | Sony Olympus Medical Solutions Inc. | Microscope apparatus and control method |
FR3076994B1 (fr) * | 2018-01-25 | 2022-03-11 | Keranova | Dispositif et procede de controle du deplacement d'un appareil de therapie oculaire incluant un bras support articule |
JP7094744B2 (ja) * | 2018-03-23 | 2022-07-04 | ソニー・オリンパスメディカルソリューションズ株式会社 | 医療用観察装置 |
DE102018206406B3 (de) * | 2018-04-25 | 2019-09-12 | Carl Zeiss Meditec Ag | Mikroskopiesystem und Verfahren zum Betrieb eines Mikroskopiesystems |
WO2020008652A1 (ja) * | 2018-07-06 | 2020-01-09 | 株式会社ニコン | 支持装置及び手術支援システム |
US20220096163A1 (en) | 2019-01-31 | 2022-03-31 | Intuitive Surgical Operations, Inc. | Camera control systems and methods for a computer-assisted surgical system |
JP7299046B2 (ja) * | 2019-03-25 | 2023-06-27 | ソニー・オリンパスメディカルソリューションズ株式会社 | 医療用観察制御装置及び医療用観察システム |
JP7250592B2 (ja) * | 2019-03-29 | 2023-04-03 | 株式会社トプコン | 眼科装置 |
EP3744285A1 (en) * | 2019-05-27 | 2020-12-02 | Leica Instruments (Singapore) Pte. Ltd. | Microscope system and method for controlling a surgical microcope |
FR3098710B1 (fr) * | 2019-07-19 | 2021-12-31 | Keranova | Appareil de decoupe a coupleur optique incluant un correcteur de polarisation |
JP2021022840A (ja) * | 2019-07-29 | 2021-02-18 | ソニー株式会社 | 医療用観察システム、制御装置、および制御方法 |
JP7322356B2 (ja) | 2019-07-30 | 2023-08-08 | 株式会社トプコン | 眼科装置及び眼科システム |
KR102274167B1 (ko) * | 2019-09-05 | 2021-07-12 | 큐렉소 주식회사 | 로봇의 위치 가이드 장치, 이의 방법 및 이를 포함하는 시스템 |
JP2023511407A (ja) | 2020-01-22 | 2023-03-17 | フォトニック メディカル インク. | 開放視野マルチモード深度検知校正デジタルルーペ |
TWI730721B (zh) * | 2020-04-14 | 2021-06-11 | 國立臺北教育大學 | 利用混合實境的教學系統 |
US11448868B2 (en) * | 2020-05-07 | 2022-09-20 | Kgg Inc | Ergonomic EZ scope digital imaging system |
USD1002014S1 (en) * | 2020-08-31 | 2023-10-17 | MAQUET CARDIOPULMONARY GmbH | Universal holder system |
USD993420S1 (en) * | 2020-09-30 | 2023-07-25 | Karl Storz Se & Co. Kg | Robotic arm for exoscopes |
CN112437229A (zh) * | 2020-11-10 | 2021-03-02 | 苏州爱医斯坦智能科技有限公司 | 一种画面追踪方法、装置、电子设备及存储介质 |
CN114504385A (zh) * | 2022-01-18 | 2022-05-17 | 上海术航机器人有限公司 | 手术机器人末端姿态调整方法、系统、设备和介质 |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4989253A (en) * | 1988-04-15 | 1991-01-29 | The Montefiore Hospital Association Of Western Pennsylvania | Voice activated microscope |
JP3321198B2 (ja) * | 1992-06-22 | 2002-09-03 | オリンパス光学工業株式会社 | 顕微鏡静止画像観察システム |
IT1274405B (it) * | 1995-04-28 | 1997-07-17 | San Raffaele Centro Fond | Dispositivo di posizionamento e centramento automatico di testa ottica di microscopio |
US6661571B1 (en) * | 1999-09-21 | 2003-12-09 | Olympus Optical Co., Ltd. | Surgical microscopic system |
JP4630564B2 (ja) * | 2004-03-30 | 2011-02-09 | 国立大学法人浜松医科大学 | 手術支援装置、方法及びプログラム |
CN1299650C (zh) * | 2005-03-11 | 2007-02-14 | 天津大学 | 具有力感觉的显微外科手术机器人控制系统 |
CN2860384Y (zh) * | 2005-11-24 | 2007-01-24 | 苏州六六视觉科技股份有限公司 | 视频立体成像手术显微装置 |
US9392931B2 (en) * | 2010-03-22 | 2016-07-19 | Brainlab Ag | Controlling a surgical microscope |
US8398236B2 (en) * | 2010-06-14 | 2013-03-19 | Alcon Lensx, Inc. | Image-guided docking for ophthalmic surgical systems |
DE102010055772B4 (de) * | 2010-12-23 | 2014-06-05 | Carl Zeiss Meditec Ag | Anordnung und Verfahren zur quantitativen Bestimmung des Blutflusses innerhalb von Blutgefäßen |
JP5711531B2 (ja) | 2010-12-24 | 2015-05-07 | 株式会社トプコン | 試料ステージ装置、及び電子線装置 |
JP2013046649A (ja) * | 2011-08-29 | 2013-03-07 | Topcon Corp | 眼科手術用顕微鏡 |
EP3028635B1 (en) * | 2011-12-30 | 2017-10-18 | Mako Surgical Corp. | System for image-based robotic surgery |
CN104411248B (zh) * | 2012-06-28 | 2017-09-26 | 皇家飞利浦有限公司 | 在内窥镜外科手术中用于最佳图像采集的c型臂轨迹规划 |
CN102793583B (zh) * | 2012-08-31 | 2014-11-05 | 深圳市长江力伟股份有限公司 | 一种用于外科手术的可佩戴式显微装置及其控制电路 |
DE102012222578A1 (de) | 2012-12-07 | 2014-06-12 | Leica Microsystems (Schweiz) Ag | Operationsmikroskop |
EP2967348B1 (en) * | 2013-03-15 | 2022-03-23 | Synaptive Medical Inc. | Intelligent positioning system |
JP6272885B2 (ja) | 2013-09-24 | 2018-01-31 | ソニー・オリンパスメディカルソリューションズ株式会社 | 医療用ロボットアーム装置、医療用ロボットアーム制御システム、医療用ロボットアーム制御方法及びプログラム |
CN103815972A (zh) | 2014-02-26 | 2014-05-28 | 上海齐正微电子有限公司 | 腹胸腔镜的手术区域自动跟踪系统及方法 |
KR20170035831A (ko) * | 2014-03-14 | 2017-03-31 | 시냅티브 메디컬 (바베이도스) 아이엔씨. | 인텔리전트 포지셔닝 시스템과 그것의 방법들 |
JP2015192697A (ja) * | 2014-03-31 | 2015-11-05 | ソニー株式会社 | 制御装置および制御方法、並びに撮影制御システム |
CN116172789A (zh) * | 2014-10-17 | 2023-05-30 | 卡尔蔡司医疗技术股份公司 | 用于短脉冲激光眼科手术的系统 |
US10702353B2 (en) * | 2014-12-05 | 2020-07-07 | Camplex, Inc. | Surgical visualizations systems and displays |
EP3383247A4 (en) * | 2015-11-25 | 2019-06-26 | Camplex, Inc. | SURGICAL VISUALIZATION SYSTEMS AND DISPLAYS |
WO2017138208A1 (ja) * | 2016-02-10 | 2017-08-17 | オリンパス株式会社 | 内視鏡システム |
EP3266403B1 (en) * | 2016-03-30 | 2020-04-15 | Sony Corporation | Control device, control method, and operating microscope device |
JP6880606B2 (ja) * | 2016-08-30 | 2021-06-02 | 株式会社ニデック | 眼科用手術顕微鏡 |
WO2018078470A1 (en) * | 2016-10-25 | 2018-05-03 | Novartis Ag | Medical spatial orientation system |
US20180368656A1 (en) * | 2017-05-24 | 2018-12-27 | Camplex, Inc. | Surgical visualization systems and displays |
-
2017
- 2017-02-07 EP EP17755408.6A patent/EP3266403B1/en active Active
- 2017-02-07 US US15/556,367 patent/US10595955B2/en active Active
- 2017-02-07 CN CN201911102080.0A patent/CN110786819B/zh active Active
- 2017-02-07 CN CN201780000978.XA patent/CN107438413B/zh active Active
- 2017-02-07 JP JP2017539390A patent/JP6217890B1/ja active Active
- 2017-02-07 EP EP20152258.8A patent/EP3659540B1/en active Active
- 2017-02-07 WO PCT/JP2017/004385 patent/WO2017169135A1/ja active Application Filing
- 2017-09-25 JP JP2017183151A patent/JP6848785B2/ja active Active
- 2017-12-18 US US15/845,431 patent/US10716471B2/en active Active
-
2020
- 2020-06-04 US US16/892,323 patent/US11730365B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20180092705A1 (en) | 2018-04-05 |
JP6217890B1 (ja) | 2017-10-25 |
CN107438413B (zh) | 2019-12-06 |
CN107438413A (zh) | 2017-12-05 |
US10716471B2 (en) | 2020-07-21 |
EP3659540A1 (en) | 2020-06-03 |
EP3266403B1 (en) | 2020-04-15 |
EP3266403A1 (en) | 2018-01-10 |
EP3659540B1 (en) | 2022-12-14 |
CN110786819B (zh) | 2022-07-26 |
WO2017169135A1 (ja) | 2017-10-05 |
CN110786819A (zh) | 2020-02-14 |
EP3266403A4 (en) | 2018-07-25 |
JP2018029980A (ja) | 2018-03-01 |
US20200288975A1 (en) | 2020-09-17 |
JPWO2017169135A1 (ja) | 2018-04-05 |
US20180104018A1 (en) | 2018-04-19 |
US10595955B2 (en) | 2020-03-24 |
US11730365B2 (en) | 2023-08-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6848785B2 (ja) | 手術システム、制御方法、及び制御装置 | |
JP6939778B2 (ja) | 制御装置、制御方法及び手術システム | |
US20180263710A1 (en) | Medical imaging apparatus and surgical navigation system | |
JP7115493B2 (ja) | 手術アームシステム及び手術アーム制御システム | |
US20190053857A1 (en) | Medical information processing apparatus, information processing method, and medical information processing system | |
CN109715106B (zh) | 控制装置、控制方法及医疗系统 | |
JP7480477B2 (ja) | 医療用観察システム、制御装置及び制御方法 | |
JP7286948B2 (ja) | 医療用観察システム、信号処理装置及び医療用観察方法 | |
WO2020080209A1 (ja) | 医療用観察システム、医療用観察装置及び医療用観察方法 | |
WO2018088113A1 (ja) | 関節駆動用アクチュエータ及び医療用システム | |
JPWO2018100828A1 (ja) | 顕微鏡装置及び制御方法 | |
EP3603562B1 (en) | Medical observation apparatus and observation field correction method | |
JPWO2018096763A1 (ja) | 顕微鏡装置及び制御方法 | |
WO2018043205A1 (ja) | 医療用画像処理装置、医療用画像処理方法、プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190208 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20190214 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190222 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20190515 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190522 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200128 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200128 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210202 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210215 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6848785 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |