JP6463428B2 - ジェスチャ制御機能を有する手術用顕微鏡、および、手術用顕微鏡のジェスチャ制御を行う方法 - Google Patents
ジェスチャ制御機能を有する手術用顕微鏡、および、手術用顕微鏡のジェスチャ制御を行う方法 Download PDFInfo
- Publication number
- JP6463428B2 JP6463428B2 JP2017157117A JP2017157117A JP6463428B2 JP 6463428 B2 JP6463428 B2 JP 6463428B2 JP 2017157117 A JP2017157117 A JP 2017157117A JP 2017157117 A JP2017157117 A JP 2017157117A JP 6463428 B2 JP6463428 B2 JP 6463428B2
- Authority
- JP
- Japan
- Prior art keywords
- movement
- surgical microscope
- gesture
- optical imaging
- imaging device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 43
- 230000033001 locomotion Effects 0.000 claims description 161
- 238000001514 detection method Methods 0.000 claims description 118
- 238000012634 optical imaging Methods 0.000 claims description 60
- 230000003993 interaction Effects 0.000 claims description 36
- 230000003287 optical effect Effects 0.000 claims description 21
- 238000003384 imaging method Methods 0.000 claims description 17
- 230000008859 change Effects 0.000 claims description 16
- 238000007689 inspection Methods 0.000 claims description 12
- 230000002452 interceptive effect Effects 0.000 claims description 11
- 230000000007 visual effect Effects 0.000 claims description 10
- 238000013507 mapping Methods 0.000 claims description 9
- 238000004364 calculation method Methods 0.000 claims description 8
- 230000004044 response Effects 0.000 claims description 4
- 230000005019 pattern of movement Effects 0.000 claims 1
- 210000003811 finger Anatomy 0.000 description 22
- 230000008901 benefit Effects 0.000 description 15
- 238000005286 illumination Methods 0.000 description 15
- 230000000875 corresponding effect Effects 0.000 description 11
- 230000006870 function Effects 0.000 description 11
- 230000001276 controlling effect Effects 0.000 description 7
- 238000001356 surgical procedure Methods 0.000 description 6
- 230000004913 activation Effects 0.000 description 3
- 238000011109 contamination Methods 0.000 description 2
- 230000009849 deactivation Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000003213 activating effect Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 210000004247 hand Anatomy 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000004091 panning Methods 0.000 description 1
- 230000010287 polarization Effects 0.000 description 1
- 238000002271 resection Methods 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- 210000003813 thumb Anatomy 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/25—User interfaces for surgical systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/0004—Microscopes specially adapted for specific applications
- G02B21/0012—Surgical microscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/20—Surgical microscopes characterised by non-optical aspects
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/18—Arrangements with more than one light path, e.g. for comparing two specimens
- G02B21/20—Binocular arrangements
- G02B21/22—Stereoscopic arrangements
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/32—Micromanipulators structurally combined with microscopes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/364—Projection microscopes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
- A61B2017/00017—Electrical control of surgical instruments
- A61B2017/00207—Electrical control of surgical instruments with hand gesture control or hand gesture recognition
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/368—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements details of associated display arrangements, e.g. mounting of LCD monitor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Analytical Chemistry (AREA)
- Chemical & Material Sciences (AREA)
- Optics & Photonics (AREA)
- Surgery (AREA)
- Human Computer Interaction (AREA)
- General Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Multimedia (AREA)
- Robotics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Pathology (AREA)
- Microscoopes, Condenser (AREA)
Description
Claims (14)
- 視野(9)を有し、少なくとも部分的に前記視野(9)内に位置する検査領域(11)をイメージングする光学イメージング装置(3)を含む、
手術用顕微鏡(1)において、
前記手術用顕微鏡(1)は、
対象物(29)の動き(65)を非接触で検出するジェスチャ検出ユニット(17)をさらに含み、
前記ジェスチャ検出ユニット(17)は、信号路(76)を介して前記光学イメージング装置(3)に接続されており、
前記ジェスチャ検出ユニット(17)は、前記対象物(29)の前記動き(65)に基づいて、前記信号路(76)を介して制御信号(77)を前記光学イメージング装置(3)へ出力するように構成されており、
前記光学イメージング装置(3)は、前記制御信号(77)に基づいてその状態を変更するように構成されており、
前記ジェスチャ検出ユニット(17)は、前記検査領域(11)と前記光学イメージング装置(3)との間に位置し、かつ前記検査領域(11)から離間した3次元の検出領域(21)を有し、
前記ジェスチャ検出ユニット(17)のジェスチャ検出は、前記検出領域(21)内での前記対象物(29)の前記動き(65)に制限されている、
ことを特徴とする手術用顕微鏡(1)。 - 前記検出領域(21)は、少なくとも部分的に前記検査領域(11)に重なる、
請求項1記載の手術用顕微鏡(1)。 - 前記ジェスチャ検出ユニット(17)は、前記検出領域(21)内での前記対象物(29)の3次元の動き(65)を区別する運動検出モジュール(78)をさらに含み、
前記運動検出モジュール(78)は、運動データ線路(79)を介して前記ジェスチャ検出ユニット(17)に接続されており、
前記運動検出モジュール(78)は、前記対象物(29)の前記動き(65)に基づいて、前記運動データ線路(79)を介して運動データ信号(80)を前記ジェスチャ検出ユニット(17)へ出力するように構成されている、
請求項1または2記載の手術用顕微鏡(1)。 - 前記ジェスチャ検出ユニット(17)は、前記運動データ線路(79)を介して前記運動検出モジュール(78)に接続された関係マッピングユニット(81)をさらに含み、
前記関係マッピングユニット(81)は、前記対象物(29)の動き(65)と、前記信号路(76)を介して前記光学イメージング装置(3)へ供給される制御信号(77)との間の関係をマッピングするように構成されている、
請求項3記載の手術用顕微鏡(1)。 - 前記光学イメージング装置(3)は、制御信号(77)に応じて位置を変化させる可動機械要素(82)を含む、
請求項1から4までのいずれか1項記載の手術用顕微鏡(1)。 - 前記光学イメージング装置(3)は、該光学イメージング装置(3)に光学的に接続された投影ユニット(83)を含み、
前記投影ユニット(83)は、付加画像および/またはインタラクティブ画像(71)を、イメージングされた前記検査領域(11)に少なくとも部分的に重なる少なくとも1つのインタラクション部(73)へ投影するように構成されている、
請求項1から5までのいずれか1項記載の手術用顕微鏡(1)。 - 視野(9)を有し、少なくとも部分的に前記視野(9)内に位置する検査領域(11)をイメージングする光学イメージング装置(3)を含む手術用顕微鏡(1)のジェスチャ制御を行う方法であって、
ジェスチャ検出ユニット(17)によって、3次元の検出領域(21)における対象物(29)の動き(65)を非接触で検出するステップであって、前記検出領域(21)は、前記検査領域(11)と前記光学イメージング装置(3)との間に位置し、かつ前記検査領域(11)から離間しており、前記ジェスチャ検出ユニット(17)のジェスチャ検出は、前記検出領域(21)内での前記対象物(29)の前記動き(65)に制限されている、ステップと、
前記対象物(29)の前記動き(65)に基づいて前記光学イメージング装置(3)を制御するステップと
を含む、方法。 - 前記方法は、前記対象物(29)の距離および/または運動データを計算ユニットに供給するステップをさらに含む、
請求項7記載の方法。 - 前記方法は、検出された前記対象物(29)の前記動き(65)を区別するステップをさらに含む、
請求項7または8記載の方法。 - 前記方法は、前記対象物(29)の前記動き(65)を予め定められた動きのパターンと比較するステップをさらに含む、
請求項7から9までのいずれか1項記載の方法。 - 前記方法は、前記対象物(29)の前記動き(65)に基づいて、前記手術用顕微鏡(1)の可動機械要素(82)を制御するステップをさらに含む、
請求項7から10までのいずれか1項記載の方法。 - 前記方法は、
少なくとも1つの付加画像および/またはインタラクティブ画像(71)を、イメージングされた検査領域(11)の少なくとも1つのインタラクション部(73)へ投影するステップと、
前記対象物(29)の前記動き(65)を、予め定められたインタラクション運動のパターンと比較するステップと、
前記少なくとも1つのインタラクション部(73)内の前記対象物(29)の動き(65)に基づいて、前記光学イメージング装置(3)および/または前記手術用顕微鏡(1)を制御するステップと、
をさらに含む、
請求項7から11までのいずれか1項記載の方法。 - 前記方法は、
前記対象物(29)を光学的に検出するステップと、
前記対象物(29)のタイプを識別するために、検出された前記対象物(29)と予め定められた対象物のパターンとを比較するステップと、
前記対象物(29)の前記タイプに基づいて少なくとも2つの関係マップのいずれかを選択するステップと
をさらに含む、
請求項7から12までのいずれか1項記載の方法。 - 請求項7から13までのいずれか1項記載の方法を実行するように構成された、非一時性の記憶媒体。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP16184312.3 | 2016-08-16 | ||
EP16184312.3A EP3285107B2 (en) | 2016-08-16 | 2016-08-16 | Surgical microscope with gesture control and method for a gesture control of a surgical microscope |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018248138A Division JP7085982B2 (ja) | 2016-08-16 | 2018-12-28 | ジェスチャ制御機能を有する手術用顕微鏡、および、手術用顕微鏡のジェスチャ制御を行う方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018029961A JP2018029961A (ja) | 2018-03-01 |
JP6463428B2 true JP6463428B2 (ja) | 2019-02-06 |
Family
ID=56686738
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017157117A Active JP6463428B2 (ja) | 2016-08-16 | 2017-08-16 | ジェスチャ制御機能を有する手術用顕微鏡、および、手術用顕微鏡のジェスチャ制御を行う方法 |
JP2018248138A Active JP7085982B2 (ja) | 2016-08-16 | 2018-12-28 | ジェスチャ制御機能を有する手術用顕微鏡、および、手術用顕微鏡のジェスチャ制御を行う方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018248138A Active JP7085982B2 (ja) | 2016-08-16 | 2018-12-28 | ジェスチャ制御機能を有する手術用顕微鏡、および、手術用顕微鏡のジェスチャ制御を行う方法 |
Country Status (4)
Country | Link |
---|---|
US (3) | US11284948B2 (ja) |
EP (1) | EP3285107B2 (ja) |
JP (2) | JP6463428B2 (ja) |
CN (2) | CN112099215B (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3285107B2 (en) * | 2016-08-16 | 2024-02-28 | Leica Instruments (Singapore) Pte. Ltd. | Surgical microscope with gesture control and method for a gesture control of a surgical microscope |
WO2019029936A1 (en) | 2017-08-11 | 2019-02-14 | Brainlab Ag | MICROSCOPE ADJUSTMENT USING VIDEO |
DE102018206406B3 (de) * | 2018-04-25 | 2019-09-12 | Carl Zeiss Meditec Ag | Mikroskopiesystem und Verfahren zum Betrieb eines Mikroskopiesystems |
IL262619B (en) * | 2018-10-25 | 2020-05-31 | Beyeonics Surgical Ltd | System and method to automatically adjust illumination during a microsurgical procedure |
DE102018128848A1 (de) * | 2018-11-16 | 2020-05-20 | Olympus Winter & Ibe Gmbh | Verfahren und Vorrichtung zur Ausführung verschiedener Funktionen im Zusammenhang mit chirurgischen Geräten |
EP3674774A1 (en) * | 2018-12-27 | 2020-07-01 | Leica Instruments (Singapore) Pte. Ltd. | Digital microscope system, method for operating the same and computer program |
EP3744281B1 (en) * | 2019-05-27 | 2023-07-26 | Leica Instruments (Singapore) Pte. Ltd. | Microscope system and method for operating a surgical microscope |
EP3744286A1 (en) * | 2019-05-27 | 2020-12-02 | Leica Instruments (Singapore) Pte. Ltd. | Microscope system and method for controlling a surgical microscope |
US10758309B1 (en) | 2019-07-15 | 2020-09-01 | Digital Surgery Limited | Methods and systems for using computer-vision to enhance surgical tool control during surgeries |
US11048072B1 (en) * | 2019-12-31 | 2021-06-29 | Carl Zeiss Meditec Ag | Method of operating a surgical microscope and surgical microscope |
US20230350177A1 (en) * | 2020-01-08 | 2023-11-02 | Brainlab Ag | Robotic microscope and control thereof |
EP3848779A1 (en) | 2020-01-09 | 2021-07-14 | BHS Technologies GmbH | Head-mounted display system and method for controlling a medical imaging device |
CN111538269B (zh) * | 2020-04-27 | 2023-05-16 | 北京他山科技有限公司 | 一种非接触按钮传感器单元及触发的方法 |
US11601121B2 (en) | 2020-06-26 | 2023-03-07 | Intel Corporation | Bootstrapped switch circuit, a track-and-hold circuit, an analog-to-digital converter, a method for operating a track-and-hold circuit, a base station and a mobile device |
CN111999877A (zh) * | 2020-09-30 | 2020-11-27 | 微迪光学(无锡)有限公司 | 一种头戴式手势感应显微镜 |
DE102021204031A1 (de) * | 2021-04-22 | 2022-10-27 | Carl Zeiss Meditec Ag | Verfahren zum Betreiben eines Operationsmikroskops und Operationsmikroskop |
Family Cites Families (36)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040254454A1 (en) | 2001-06-13 | 2004-12-16 | Kockro Ralf Alfons | Guide system and a probe therefor |
EP1395194B1 (en) * | 2001-06-13 | 2007-08-29 | Volume Interactions Pte. Ltd. | A guide system |
DE10335369B4 (de) | 2003-07-30 | 2007-05-10 | Carl Zeiss | Verfahren zum Bereitstellen einer berührungslosen Gerätefunktionssteuerung und Vorrichtung zum Durchführen des Verfahrens |
JP4398352B2 (ja) | 2004-12-02 | 2010-01-13 | オリンパス株式会社 | 医療用立体撮像装置 |
DE102006010767B4 (de) | 2006-03-08 | 2008-04-17 | Carl Zeiss Surgical Gmbh | Mikroskopiesystem |
US20080136775A1 (en) * | 2006-12-08 | 2008-06-12 | Conant Carson V | Virtual input device for computing |
WO2010114843A1 (en) * | 2009-03-31 | 2010-10-07 | Charles Luley Associates, Inc. Dba Cla Medical | Injection of secondary images into microscope viewing fields |
US20100315335A1 (en) * | 2009-06-16 | 2010-12-16 | Microsoft Corporation | Pointing Device with Independently Movable Portions |
WO2011085815A1 (en) | 2010-01-14 | 2011-07-21 | Brainlab Ag | Controlling a surgical navigation system |
WO2011113483A1 (en) | 2010-03-17 | 2011-09-22 | Brainlab Ag | Flow control in computer-assisted surgery based on marker positions |
US20120274550A1 (en) * | 2010-03-24 | 2012-11-01 | Robert Campbell | Gesture mapping for display device |
DE102010003339B4 (de) | 2010-03-26 | 2012-02-02 | Leica Microsystems (Schweiz) Ag | Sterile Bedieneinheit mit Sensorbildschirm |
WO2012128305A1 (ja) * | 2011-03-23 | 2012-09-27 | ナノフォトン株式会社 | 顕微鏡 |
JP6074170B2 (ja) * | 2011-06-23 | 2017-02-01 | インテル・コーポレーション | 近距離動作のトラッキングのシステムおよび方法 |
US9330477B2 (en) | 2011-09-22 | 2016-05-03 | Digital Surgicals Pte. Ltd. | Surgical stereo vision systems and methods for microsurgery |
US10022041B2 (en) * | 2012-06-27 | 2018-07-17 | Camplex, Inc. | Hydraulic system for surgical applications |
US20140022171A1 (en) * | 2012-07-19 | 2014-01-23 | Omek Interactive, Ltd. | System and method for controlling an external system using a remote device with a depth sensor |
DE102012220195B4 (de) | 2012-11-06 | 2021-03-04 | Leica Microsystems Cms Gmbh | Widefield-Mikroskop oder Konfokalmikroskop |
US9928634B2 (en) * | 2013-03-01 | 2018-03-27 | Microsoft Technology Licensing, Llc | Object creation using body gestures |
KR20140138424A (ko) * | 2013-05-23 | 2014-12-04 | 삼성전자주식회사 | 제스쳐를 이용한 사용자 인터페이스 방법 및 장치 |
US9645652B2 (en) * | 2013-05-28 | 2017-05-09 | The Boeing Company | Ubiquitous natural user system for human-machine interaction |
JP6207240B2 (ja) * | 2013-06-05 | 2017-10-04 | キヤノン株式会社 | 情報処理装置及びその制御方法 |
WO2015012006A1 (ja) | 2013-07-22 | 2015-01-29 | オリンパスメディカルシステムズ株式会社 | 医療用携帯端末装置 |
EP3028198A2 (fr) * | 2013-08-01 | 2016-06-08 | Université Pierre et Marie Curie (Paris 6) | Dispositif de commande centralisé sans intermédiaire, avec ou sans contact, d'appareils médicaux distants |
US9597009B2 (en) * | 2013-12-19 | 2017-03-21 | Novartis Ag | Marker-based tool tracking |
DE102014001784A1 (de) * | 2014-02-12 | 2015-08-13 | Carl Zeiss Meditec Ag | Bedienelement für eine Positioniervorrichtung einer medizinischen Vorrichtung |
KR101534282B1 (ko) * | 2014-05-07 | 2015-07-03 | 삼성전자주식회사 | 포터블 디바이스의 사용자 입력 방법 및 상기 사용자 입력 방법이 수행되는 포터블 디바이스 |
US10595716B2 (en) * | 2014-05-09 | 2020-03-24 | X-Biomedical Inc. | Portable surgical methods, systems, and apparatus |
US9785247B1 (en) * | 2014-05-14 | 2017-10-10 | Leap Motion, Inc. | Systems and methods of tracking moving hands and recognizing gestural interactions |
DE102014106865A1 (de) | 2014-05-15 | 2015-11-19 | Carl Zeiss Meditec Ag | Bediensystem für ein Operationsmikroskop mit automatischer Folge- oder Ausrichtungsvorrichtung, Verfahren und Operationsmikroskop |
DE102014007909A1 (de) * | 2014-05-27 | 2015-12-03 | Carl Zeiss Meditec Ag | Chirurgisches Mikroskop |
US9465444B1 (en) * | 2014-06-30 | 2016-10-11 | Amazon Technologies, Inc. | Object recognition for gesture tracking |
CN106030495B (zh) * | 2015-01-30 | 2021-04-13 | 索尼深度传感解决方案股份有限公司 | 利用单个感测系统的基于多模式姿势的交互系统及方法 |
US10191553B2 (en) * | 2015-03-12 | 2019-01-29 | Dell Products, L.P. | User interaction with information handling systems using physical objects |
US20160331584A1 (en) * | 2015-05-14 | 2016-11-17 | Novartis Ag | Surgical tool tracking to control surgical system |
EP3285107B2 (en) * | 2016-08-16 | 2024-02-28 | Leica Instruments (Singapore) Pte. Ltd. | Surgical microscope with gesture control and method for a gesture control of a surgical microscope |
-
2016
- 2016-08-16 EP EP16184312.3A patent/EP3285107B2/en active Active
-
2017
- 2017-07-15 US US15/650,877 patent/US11284948B2/en active Active
- 2017-08-15 CN CN202011125243.XA patent/CN112099215B/zh active Active
- 2017-08-15 CN CN201710695931.1A patent/CN107765414B/zh active Active
- 2017-08-16 JP JP2017157117A patent/JP6463428B2/ja active Active
-
2018
- 2018-12-28 JP JP2018248138A patent/JP7085982B2/ja active Active
-
2022
- 2022-03-28 US US17/705,457 patent/US11744653B2/en active Active
-
2023
- 2023-07-17 US US18/222,511 patent/US20230355323A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
CN107765414A (zh) | 2018-03-06 |
JP7085982B2 (ja) | 2022-06-17 |
US20220211448A1 (en) | 2022-07-07 |
EP3285107A1 (en) | 2018-02-21 |
CN107765414B (zh) | 2020-11-10 |
US20180049811A1 (en) | 2018-02-22 |
US11284948B2 (en) | 2022-03-29 |
EP3285107B1 (en) | 2021-05-05 |
JP2019088808A (ja) | 2019-06-13 |
EP3285107B2 (en) | 2024-02-28 |
CN112099215B (zh) | 2022-11-01 |
CN112099215A (zh) | 2020-12-18 |
US20230355323A1 (en) | 2023-11-09 |
JP2018029961A (ja) | 2018-03-01 |
US11744653B2 (en) | 2023-09-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6463428B2 (ja) | ジェスチャ制御機能を有する手術用顕微鏡、および、手術用顕微鏡のジェスチャ制御を行う方法 | |
US20210382559A1 (en) | Ui for head mounted display system | |
US7091928B2 (en) | Intelligent eye | |
EP2275852B1 (en) | Microscope controller and microscope system having the microscope controller | |
BR112012025516B1 (pt) | sistema cirúrgico robotizado com controle aperfeiçoado | |
JP2021522940A (ja) | 仮想フットペダル | |
JP2021524096A (ja) | 足制御型カーソル | |
WO2018216501A1 (ja) | 制御装置、制御方法、および手術システム | |
US20230404699A1 (en) | System for a Microscope System and Corresponding Method and Computer Program | |
WO2021148346A1 (en) | Apparatuses, methods and computer programs for controlling a microscope system | |
US20220331038A1 (en) | User interface for controlling a surgical system | |
CA3117533A1 (en) | Ui for head mounted display system | |
US20230169698A1 (en) | Microscope system and corresponding system, method and computer program for a microscope system | |
WO2018087977A1 (ja) | 情報処理装置、情報処理方法、プログラム | |
JP7414590B2 (ja) | 制御装置および医療用観察システム | |
EP4125676A1 (en) | Systems and methods for facilitating automated operation of a device in a surgical space | |
JP7367041B2 (ja) | 頭部装着型ディスプレイシステムのためのui | |
JP6307860B2 (ja) | 撮像装置、撮像方法及びプログラム | |
JP2018102009A (ja) | 撮像装置、撮像制御装置、撮像方法、撮像制御方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180423 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180418 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20180711 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20180925 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181023 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181203 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181228 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6463428 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |