JP6195713B2 - 奥行きセンサーの使用によるアブレーターワークステーションのタッチフリー操作 - Google Patents
奥行きセンサーの使用によるアブレーターワークステーションのタッチフリー操作 Download PDFInfo
- Publication number
- JP6195713B2 JP6195713B2 JP2013002425A JP2013002425A JP6195713B2 JP 6195713 B2 JP6195713 B2 JP 6195713B2 JP 2013002425 A JP2013002425 A JP 2013002425A JP 2013002425 A JP2013002425 A JP 2013002425A JP 6195713 B2 JP6195713 B2 JP 6195713B2
- Authority
- JP
- Japan
- Prior art keywords
- gesture
- applicable
- filtering
- client
- movement
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000033001 locomotion Effects 0.000 claims description 97
- 238000000034 method Methods 0.000 claims description 35
- 238000001914 filtration Methods 0.000 claims description 23
- 238000002679 ablation Methods 0.000 claims description 12
- 238000004891 communication Methods 0.000 claims description 12
- 238000001514 detection method Methods 0.000 claims description 7
- 230000004886 head movement Effects 0.000 claims description 7
- 230000001815 facial effect Effects 0.000 claims description 2
- 230000009471 action Effects 0.000 description 14
- 230000006870 function Effects 0.000 description 10
- 230000008569 process Effects 0.000 description 3
- 230000000994 depressogenic effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000001356 surgical procedure Methods 0.000 description 2
- 208000005189 Embolism Diseases 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004883 computer application Methods 0.000 description 1
- 230000000881 depressing effect Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
- A61B18/04—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating
- A61B18/12—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by heating by passing a current through the tissue to be heated, e.g. high-frequency current
- A61B18/1206—Generators therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
- A61B2017/00017—Electrical control of surgical instruments
- A61B2017/00203—Electrical control of surgical instruments with speech control or speech recognition
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
- A61B2017/00017—Electrical control of surgical instruments
- A61B2017/00207—Electrical control of surgical instruments with hand gesture control or hand gesture recognition
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
- A61B2017/00017—Electrical control of surgical instruments
- A61B2017/00216—Electrical control of surgical instruments with eye tracking or head position tracking control
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
- A61B2017/00017—Electrical control of surgical instruments
- A61B2017/00221—Electrical control of surgical instruments with wireless transmission of data, e.g. by infrared radiation or radiowaves
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
- A61B2017/00973—Surgical instruments, devices or methods, e.g. tourniquets pedal-operated
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
- A61B2018/00571—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body for achieving a particular surgical effect
- A61B2018/00577—Ablation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
- A61B2018/00988—Means for storing information, e.g. calibration constants, or for preventing excessive use, e.g. usage, service life counter
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/25—User interfaces for surgical systems
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Surgery (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Otolaryngology (AREA)
- Human Computer Interaction (AREA)
- Plasma & Fusion (AREA)
- Biomedical Technology (AREA)
- General Physics & Mathematics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Description
本出願は、同一所有者になる同時係属中の、本出願と同一出願日に出願された「奥行きセンサーの使用による装置のタッチフリー操作」(TOUCH FREE OPERATION OF DEVICES BY USE OF DEPTH SENSORS)に対する米国特許出願第(BIO5312USNP)の関連出願であり、当該出願の全容及び開示内容を、本明細書にその全体が記載されているものと同様に明確に援用するものである。
本発明は、一般的に奥行きセンサー及び状況に応じて音声認識を使用することによる手術室の装置のタッチフリー操作に関する。
(1) アブレーターワークステーションのタッチフリー操作を行うためのシステムであって、
運動を検出するための奥行きセンサーと、
前記奥行きセンサーから前記検出された運動を受信し、前記検出された運動に基づいてジェスチャーを推測し、前記ジェスチャーをフィルタリングして適用可能なジェスチャーを受け取るように作動可能なモーションソフトウェアモジュールと、
前記適用可能なジェスチャーを前記アブレーターワークステーション内のクライアントコンピュータにて受信して前記適用可能なジェスチャーに基づいたクライアント論理回路にしたがってタスクを実行するように作動可能なクライアントソフトウェアモジュールと、を含む、システム。
(2) 前記タスクが、1又は2以上の電極の出力設定を変更すること、前記1又は2以上の電極について最大許容温度を変更すること、アブレーションモードを変更すること、アブレーションを行う前記1又は2以上の電極を選択すること、及びアブレーションを行う前記1又は2以上の電極を選択解除することの1つである、実施態様1に記載のシステム。
(3) 前記運動が、頭部の動作、手の動作、及び身体の動作の少なくとも1つであり、前記ジェスチャーが短い履歴に基づいて更に推測される、実施態様1に記載のシステム。
(4) 前記検出された運動を前記適用可能なジェスチャーとするためのハードウェアを更に含む、実施態様1に記載のシステム。
(5) 前記適用可能なジェスチャーが、顔認識を用いて許可を有すると判定された使用者によって行われる前記検出された運動、及び前記クライアント論理回路にしたがって認識されるジェスチャーの1又は2以上である、実施態様1に記載のシステム。
(6) 前記ジェスチャーのフィルタリングが、前記ジェスチャーが許可されたものであり、かつ有効なものであるか否かを判定することによって実行される、実施態様1に記載のシステム。
(7) 前記適用可能なジェスチャーを前記クライアントコンピュータにて受信するためのクライアント通信モジュールを更に含む、実施態様1に記載のシステム。
(8) 前記クライアントが前記適用可能なジェスチャーと共に音声入力に基づいて前記タスクを実行することを可能とするための前記音声入力を与える音声認識を更に含む、実施態様1に記載のシステム。
(9) アブレーターワークステーションのタッチフリー操作を行うための方法であって、
奥行きセンサーを使用して運動を検出する工程と、
前記検出された運動に基づいてジェスチャーを推測する工程と、
前記ジェスチャーをフィルタリングして適用可能なジェスチャーを受け取る工程と、
前記アブレーターワークステーション内のクライアントにて前記適用可能なジェスチャーを受信する工程と、
前記適用可能なジェスチャーに基づいたクライアント論理回路にしたがってタスクを実行する工程と、を含む方法。
(10) 前記タスクが、1又は2以上の電極の出力設定を変更すること、前記1又は2以上の電極について最大許容温度を変更すること、アブレーションモードを変更すること、アブレーションを行う前記1又は2以上の電極を選択すること、及びアブレーションを行う前記1又は2以上の電極を選択解除することの1つである、実施態様9に記載の方法。
(12) ハードウェアが作動している間に前記適用可能なジェスチャーが行われる、実施態様9に記載の方法。
(13) 前記適用可能なジェスチャーが、顔認識を用いて許可を有すると判定された使用者によって行われる前記検出された運動である、実施態様9に記載の方法。
(14) 前記適用可能なジェスチャーが、前記クライアント論理回路にしたがって認識されるジェスチャーである、実施態様9に記載の方法。
(15) 音声認識を用いた音声入力を与える工程を更に含み、前記実行する工程が、前記適用可能なジェスチャーと共に前記音声入力に基づいて行われる、実施態様9に記載の方法。
(16) 前記ジェスチャーをフィルタリングする工程が、前記ジェスチャーが許可されたものであり、かつ有効なものであるか否かを判定する工程を含む、実施態様9に記載の方法。
(17) アブレーターワークステーションのタッチフリー操作を行うための方法を実行するために機械により実行可能な命令のプログラムを記憶するためのコンピュータ読み取り可能な記憶装置であって、前記方法が、
奥行きセンサーを使用して運動を検出する工程と、
CPUを使用して、前記検出された運動に基づいてジェスチャーを推測する工程と、
前記ジェスチャーをフィルタリングして適用可能なジェスチャーを受け取る工程と、
前記アブレーターワークステーション内のクライアントにて前記適用可能なジェスチャーを受信する工程と、
前記適用可能なジェスチャーに基づいたクライアント論理回路にしたがってタスクを実行する工程と、を含む、装置。
(18) 前記タスクが、1又は2以上の電極の出力設定を変更すること、前記1又は2以上の電極について最大許容温度を変更すること、アブレーションモードを変更すること、アブレーションを行う前記1又は2以上の電極を選択すること、及びアブレーションを行う前記1又は2以上の電極を選択解除することの1つである、実施態様17に記載のプログラム。
(19) 前記運動が、頭部の動作、手の動作、及び身体の動作の少なくとも1つである、実施態様17に記載のプログラム。
(20) 前記適用可能なジェスチャーが、ハードウェアが作動している間に行われる動作、及び顔認識を用いて許可を有すると判定された使用者による動作の1つである、実施態様17に記載のプログラム。
(22) 音声認識を用いた音声入力を与える工程を更に含み、前記実行する工程が、前記適用可能なジェスチャーと共に前記音声入力に基づいて行われる、実施態様17に記載のプログラム。
Claims (15)
- アブレーターワークステーションのタッチフリー操作を行うためのシステムであって、
運動を検出するための奥行きセンサーと、
前記奥行きセンサーから前記検出された運動を受信し、前記検出された運動に基づいてジェスチャーを推測し、第1のフィルタリングを行って前記ジェスチャーをフィルタリングして適用可能なジェスチャーを受け取るように作動可能なモーションソフトウェアモジュールと、
前記適用可能なジェスチャーを前記アブレーターワークステーション内のクライアントコンピュータにて受信し、第2のフィルタリングを行って前記適用可能なジェスチャーをフィルタリングして、前記2のフィルタリングの結果に基づいたクライアント論理回路にしたがってタスクを実行するように作動可能なクライアントソフトウェアモジュールと、を含み、
前記ジェスチャーの前記第1のフィルタリングが、前記ジェスチャーが許可されたものであり、かつ有効なものであるか否かを判定することを含み、
前記適用可能なジェスチャーの前記第2のフィルタリングは、前記モーションソフトウェアモジュールから受信した前記適用可能なジェスチャーが、前記クライアントソフトウェアモジュール内において定義されているジェスチャーか否かを判定することを含み、
前記第1のフィルタリングが、特定の使用者によるジェスチャーのみを許容するように構成されており、前記第1のフィルタリングが、前記ジェスチャーが予測された位置の範囲内にない場合に、顔検出を用いて前記ジェスチャーが前記特定の使用者によって行われたか否かを判定するように構成されている、システム。 - 前記タスクが、1又は2以上の電極の出力設定を変更すること、前記1又は2以上の電極について最大許容温度を変更すること、アブレーションモードを変更すること、アブレーションを行う前記1又は2以上の電極を選択すること、及びアブレーションを行う前記1又は2以上の電極を選択解除することの1つである、請求項1に記載のシステム。
- 前記運動が、頭部の動作、手の動作、及び身体の動作の少なくとも1つであり、前記ジェスチャーが短い履歴に基づいて更に推測される、請求項1に記載のシステム。
- 前記検出された運動を前記適用可能なジェスチャーとするためのハードウェアを更に含む、請求項1に記載のシステム。
- 前記適用可能なジェスチャーが、顔認識を用いて許可を有すると判定された使用者によって行われる前記検出された運動、及び前記クライアント論理回路にしたがって認識されるジェスチャーの1又は2以上である、請求項1に記載のシステム。
- 前記適用可能なジェスチャーを前記クライアントコンピュータにて受信するためのクライアント通信モジュールを更に含む、請求項1に記載のシステム。
- 前記クライアントコンピュータが前記適用可能なジェスチャーと共に音声入力に基づいて前記タスクを実行することを可能とするための前記音声入力を提供する音声認識を更に含む、請求項1に記載のシステム。
- アブレーターワークステーションのタッチフリー操作を行うための方法であって、
奥行きセンサーを使用して運動を検出する工程と、
前記検出された運動に基づいてジェスチャーを推測する工程と、
第1のフィルタリングを行って前記ジェスチャーをフィルタリングして適用可能なジェスチャーを受け取る工程と、
前記アブレーターワークステーション内のクライアントにて前記適用可能なジェスチャーを受信する工程と、
第2のフィルタリングを行って前記適用可能なジェスチャーをフィルタリングして、前記2のフィルタリングの結果に基づいたクライアント論理回路にしたがってタスクを実行する工程と、を含み、
前記第1のフィルタリングを行って前記ジェスチャーをフィルタリングする工程が、前記ジェスチャーが許可されたものであり、かつ有効なものであるか否かを判定することを含み、
前記適用可能なジェスチャーの前記第2のフィルタリングは、前記適用可能なジェスチャーが、前記クライアント内において定義されているジェスチャーか否かを判定することを含み、
前記第1のフィルタリングが、特定の使用者によるジェスチャーのみを許容するように構成されており、前記第1のフィルタリングが、前記ジェスチャーが予測された位置の範囲内にない場合に、顔検出を用いて前記ジェスチャーが前記特定の使用者によって行われたか否かを判定するように構成されている、方法。 - 前記タスクが、1又は2以上の電極の出力設定を変更すること、前記1又は2以上の電極について最大許容温度を変更すること、アブレーションモードを変更すること、アブレーションを行う前記1又は2以上の電極を選択すること、及びアブレーションを行う前記1又は2以上の電極を選択解除することの1つである、請求項8に記載の方法。
- 前記運動が、頭部の動作、手の動作、及び身体の動作の少なくとも1つであり、前記ジェスチャーが短い履歴に基づいて更に推測される、請求項8に記載の方法。
- ハードウェアが作動している間に前記適用可能なジェスチャーが行われる、請求項8に記載の方法。
- 前記適用可能なジェスチャーが、顔認識を用いて許可を有すると判定された使用者によって行われる前記検出された運動である、請求項8に記載の方法。
- 前記適用可能なジェスチャーが、前記クライアント論理回路にしたがって認識されるジェスチャーである、請求項8に記載の方法。
- 音声認識を用いた音声入力を与える工程を更に含み、前記実行する工程が、前記適用可能なジェスチャーと共に前記音声入力に基づいて行われる、請求項8に記載の方法。
- 請求項8〜14のいずれか1項に記載の方法を実行するために機械により実行可能な命令のプログラムを記憶するためのコンピュータ読み取り可能な記憶装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US13/347,987 | 2012-01-11 | ||
US13/347,987 US9931154B2 (en) | 2012-01-11 | 2012-01-11 | Touch free operation of ablator workstation by use of depth sensors |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013143149A JP2013143149A (ja) | 2013-07-22 |
JP6195713B2 true JP6195713B2 (ja) | 2017-09-13 |
Family
ID=47594531
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013002425A Active JP6195713B2 (ja) | 2012-01-11 | 2013-01-10 | 奥行きセンサーの使用によるアブレーターワークステーションのタッチフリー操作 |
Country Status (9)
Country | Link |
---|---|
US (4) | US9931154B2 (ja) |
EP (2) | EP2614788B1 (ja) |
JP (1) | JP6195713B2 (ja) |
CN (2) | CN103207671A (ja) |
AU (1) | AU2013200053B2 (ja) |
CA (1) | CA2801493C (ja) |
DK (1) | DK2614788T3 (ja) |
ES (1) | ES2761248T3 (ja) |
IL (1) | IL224097B (ja) |
Families Citing this family (54)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8684962B2 (en) | 2008-03-27 | 2014-04-01 | St. Jude Medical, Atrial Fibrillation Division, Inc. | Robotic catheter device cartridge |
WO2009120992A2 (en) | 2008-03-27 | 2009-10-01 | St. Jude Medical, Arrial Fibrillation Division Inc. | Robotic castheter system input device |
US9161817B2 (en) | 2008-03-27 | 2015-10-20 | St. Jude Medical, Atrial Fibrillation Division, Inc. | Robotic catheter system |
US9241768B2 (en) | 2008-03-27 | 2016-01-26 | St. Jude Medical, Atrial Fibrillation Division, Inc. | Intelligent input device controller for a robotic catheter system |
US8343096B2 (en) | 2008-03-27 | 2013-01-01 | St. Jude Medical, Atrial Fibrillation Division, Inc. | Robotic catheter system |
US8641664B2 (en) | 2008-03-27 | 2014-02-04 | St. Jude Medical, Atrial Fibrillation Division, Inc. | Robotic catheter system with dynamic response |
US8317744B2 (en) | 2008-03-27 | 2012-11-27 | St. Jude Medical, Atrial Fibrillation Division, Inc. | Robotic catheter manipulator assembly |
US9330497B2 (en) | 2011-08-12 | 2016-05-03 | St. Jude Medical, Atrial Fibrillation Division, Inc. | User interface devices for electrophysiology lab diagnostic and therapeutic equipment |
WO2011123669A1 (en) | 2010-03-31 | 2011-10-06 | St. Jude Medical, Atrial Fibrillation Division, Inc. | Intuitive user interface control for remote catheter navigation and 3d mapping and visualization systems |
US9439736B2 (en) | 2009-07-22 | 2016-09-13 | St. Jude Medical, Atrial Fibrillation Division, Inc. | System and method for controlling a remote medical device guidance system in three-dimensions using gestures |
WO2013109525A1 (en) | 2012-01-20 | 2013-07-25 | Sly Ward | Use of human input recognition to prevent contamination |
US20140009372A1 (en) * | 2012-07-05 | 2014-01-09 | Zone24X7 Inc. | Failsafe content presentation for electronic signage applications |
IL221863A (en) * | 2012-09-10 | 2014-01-30 | Elbit Systems Ltd | Digital video photography system when analyzing and displaying |
US9436287B2 (en) * | 2013-03-15 | 2016-09-06 | Qualcomm Incorporated | Systems and methods for switching processing modes using gestures |
US20140358691A1 (en) * | 2013-06-03 | 2014-12-04 | Cloudwear, Inc. | System for selecting and receiving primary and supplemental advertiser information using a wearable-computing device |
DE102013108114B4 (de) * | 2013-07-30 | 2015-02-12 | gomtec GmbH | Eingabevorrichtung zur Gestensteuerung mit Schutzeinrichtung |
US9766855B2 (en) | 2013-09-10 | 2017-09-19 | Avigilon Corporation | Method and apparatus for controlling surveillance system with gesture and/or audio commands |
US9640198B2 (en) * | 2013-09-30 | 2017-05-02 | Biosense Webster (Israel) Ltd. | Controlling a system using voiceless alaryngeal speech |
DE102013110847B3 (de) * | 2013-10-01 | 2015-01-22 | gomtec GmbH | Steuervorrichtung und Verfahren zum Steuern eines Robotersystems mittels Gestensteuerung |
US20150199017A1 (en) * | 2014-01-10 | 2015-07-16 | Microsoft Corporation | Coordinated speech and gesture input |
EP3105676B1 (en) * | 2014-02-12 | 2022-10-19 | Nokia Technologies Oy | Method and apparatus for updating a firmware of an apparatus |
CN103978487B (zh) * | 2014-05-06 | 2017-01-11 | 宁波易拓智谱机器人有限公司 | 一种基于手势的通用机器人末端位置的操控方法 |
US10585485B1 (en) | 2014-11-10 | 2020-03-10 | Amazon Technologies, Inc. | Controlling content zoom level based on user head movement |
US10045825B2 (en) | 2015-09-25 | 2018-08-14 | Karl Storz Imaging, Inc. | Partial facial recognition and gaze detection for a medical system |
US11510741B2 (en) | 2017-10-30 | 2022-11-29 | Cilag Gmbh International | Method for producing a surgical instrument comprising a smart electrical system |
US11026713B2 (en) | 2017-10-30 | 2021-06-08 | Cilag Gmbh International | Surgical clip applier configured to store clips in a stored state |
US11304763B2 (en) * | 2017-12-28 | 2022-04-19 | Cilag Gmbh International | Image capturing of the areas outside the abdomen to improve placement and control of a surgical device in use |
US20190201042A1 (en) | 2017-12-28 | 2019-07-04 | Ethicon Llc | Determining the state of an ultrasonic electromechanical system according to frequency shift |
US11969216B2 (en) | 2017-12-28 | 2024-04-30 | Cilag Gmbh International | Surgical network recommendations from real time analysis of procedure variables against a baseline highlighting differences from the optimal solution |
US11969142B2 (en) | 2017-12-28 | 2024-04-30 | Cilag Gmbh International | Method of compressing tissue within a stapling device and simultaneously displaying the location of the tissue within the jaws |
US11998193B2 (en) | 2017-12-28 | 2024-06-04 | Cilag Gmbh International | Method for usage of the shroud as an aspect of sensing or controlling a powered surgical device, and a control algorithm to adjust its default operation |
US11464559B2 (en) | 2017-12-28 | 2022-10-11 | Cilag Gmbh International | Estimating state of ultrasonic end effector and control system therefor |
US12062442B2 (en) | 2017-12-28 | 2024-08-13 | Cilag Gmbh International | Method for operating surgical instrument systems |
US11257589B2 (en) | 2017-12-28 | 2022-02-22 | Cilag Gmbh International | Real-time analysis of comprehensive cost of all instrumentation used in surgery utilizing data fluidity to track instruments through stocking and in-house processes |
US20190206569A1 (en) | 2017-12-28 | 2019-07-04 | Ethicon Llc | Method of cloud based data analytics for use with the hub |
US20190201594A1 (en) | 2017-12-28 | 2019-07-04 | Ethicon Llc | Method of sensing particulate from smoke evacuated from a patient, adjusting the pump speed based on the sensed information, and communicating the functional parameters of the system to the hub |
US11076921B2 (en) | 2017-12-28 | 2021-08-03 | Cilag Gmbh International | Adaptive control program updates for surgical hubs |
US11986233B2 (en) | 2018-03-08 | 2024-05-21 | Cilag Gmbh International | Adjustment of complex impedance to compensate for lost power in an articulating ultrasonic device |
CN108908372A (zh) * | 2018-08-13 | 2018-11-30 | 四川桑瑞思环境技术工程有限公司 | 一种巡检系统 |
US11804679B2 (en) | 2018-09-07 | 2023-10-31 | Cilag Gmbh International | Flexible hand-switch circuit |
US11923084B2 (en) | 2018-09-07 | 2024-03-05 | Cilag Gmbh International | First and second communication protocol arrangement for driving primary and secondary devices through a single port |
US11684401B2 (en) | 2018-09-07 | 2023-06-27 | Cilag Gmbh International | Backplane connector design to connect stacked energy modules |
US20200078113A1 (en) | 2018-09-07 | 2020-03-12 | Ethicon Llc | Port presence detection system for modular energy system |
US11743665B2 (en) * | 2019-03-29 | 2023-08-29 | Cilag Gmbh International | Modular surgical energy system with module positional awareness sensing with time counter |
US11107236B2 (en) | 2019-04-22 | 2021-08-31 | Dag Michael Peter Hansson | Projected augmented reality interface with pose tracking for directing manual processes |
USD939545S1 (en) | 2019-09-05 | 2021-12-28 | Cilag Gmbh International | Display panel or portion thereof with graphical user interface for energy module |
US11857252B2 (en) | 2021-03-30 | 2024-01-02 | Cilag Gmbh International | Bezel with light blocking features for modular energy system |
US11968776B2 (en) | 2021-03-30 | 2024-04-23 | Cilag Gmbh International | Method for mechanical packaging for modular energy system |
US12004824B2 (en) | 2021-03-30 | 2024-06-11 | Cilag Gmbh International | Architecture for modular energy system |
US11980411B2 (en) | 2021-03-30 | 2024-05-14 | Cilag Gmbh International | Header for modular energy system |
US11950860B2 (en) | 2021-03-30 | 2024-04-09 | Cilag Gmbh International | User interface mitigation techniques for modular energy systems |
US12040749B2 (en) | 2021-03-30 | 2024-07-16 | Cilag Gmbh International | Modular energy system with dual amplifiers and techniques for updating parameters thereof |
US11963727B2 (en) | 2021-03-30 | 2024-04-23 | Cilag Gmbh International | Method for system architecture for modular energy system |
US11978554B2 (en) | 2021-03-30 | 2024-05-07 | Cilag Gmbh International | Radio frequency identification token for wireless surgical instruments |
Family Cites Families (33)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6368269B1 (en) | 1993-05-20 | 2002-04-09 | Tilane Corporation | Apparatus for concurrent actuation of multiple foot pedal operated switches |
US6243683B1 (en) | 1998-12-29 | 2001-06-05 | Intel Corporation | Video control of speech recognition |
JP2000347692A (ja) | 1999-06-07 | 2000-12-15 | Sanyo Electric Co Ltd | 人物検出方法、人物検出装置及びそれを用いた制御システム |
AU2001249874A1 (en) * | 2000-04-27 | 2001-11-12 | Medtronic, Inc. | System and method for assessing transmurality of ablation lesions |
US7110580B2 (en) * | 2000-05-19 | 2006-09-19 | Nextgenid, Inc. | Distributed biometric access control method and apparatus |
JP2004213087A (ja) * | 2002-12-26 | 2004-07-29 | Toshiba Corp | 個人認証装置および個人認証方法 |
ES2262423B1 (es) | 2005-02-18 | 2007-11-16 | Manuel Fernandez Guerrero | Sistema de activacion y desactivacion automatica de radiacion ionizante controlado por la mirada del operador. |
US7835498B2 (en) | 2005-02-18 | 2010-11-16 | Koninklijke Philips Electronics N. V. | Automatic control of a medical device |
US7346425B2 (en) * | 2005-04-27 | 2008-03-18 | Toshiba Kikai Kabushiki Kaisha | Control device for use in injection molding machine |
US8411034B2 (en) * | 2009-03-12 | 2013-04-02 | Marc Boillot | Sterile networked interface for medical systems |
WO2007127338A2 (en) | 2006-04-27 | 2007-11-08 | Bruce Reiner | Apparatus and method for utilizing biometrics in medical applications |
US8472665B2 (en) | 2007-05-04 | 2013-06-25 | Qualcomm Incorporated | Camera-based user input for compact devices |
US20080319507A1 (en) * | 2007-06-25 | 2008-12-25 | Reliant Technologies, Inc. | Tissue Treatment Device and Method of Restricting Use of Device |
CN101874404B (zh) | 2007-09-24 | 2013-09-18 | 高通股份有限公司 | 用于语音和视频通信的增强接口 |
US9772689B2 (en) | 2008-03-04 | 2017-09-26 | Qualcomm Incorporated | Enhanced gesture-based image manipulation |
WO2009137688A2 (en) | 2008-05-07 | 2009-11-12 | Carrot Medical Llc | Integration system for medical instruments with remote control |
US8315876B2 (en) | 2008-05-09 | 2012-11-20 | Plantronics, Inc. | Headset wearer identity authentication with voice print or speech recognition |
US20100013812A1 (en) | 2008-07-18 | 2010-01-21 | Wei Gu | Systems for Controlling Computers and Devices |
US20100053187A1 (en) * | 2008-09-04 | 2010-03-04 | Nokia Corporation | Method, Apparatus, and Computer Readable Medium for Editing an Avatar and Performing Authentication |
WO2010104752A2 (en) | 2009-03-08 | 2010-09-16 | Oprobe, Llc | Multi-function optical probe system for medical and veterinary applications |
EP2429438A1 (en) | 2009-04-24 | 2012-03-21 | Medtronic, Inc. | Electromagnetic navigation of medical instruments for cardiothoracic surgery |
US8253746B2 (en) | 2009-05-01 | 2012-08-28 | Microsoft Corporation | Determine intended motions |
US8390680B2 (en) | 2009-07-09 | 2013-03-05 | Microsoft Corporation | Visual representation expression based on player expression |
WO2011123669A1 (en) | 2010-03-31 | 2011-10-06 | St. Jude Medical, Atrial Fibrillation Division, Inc. | Intuitive user interface control for remote catheter navigation and 3d mapping and visualization systems |
KR20110055062A (ko) * | 2009-11-19 | 2011-05-25 | 삼성전자주식회사 | 로봇 시스템 및 그 제어 방법 |
KR101626159B1 (ko) | 2009-11-25 | 2016-05-31 | 엘지전자 주식회사 | 사용자 적응형 디스플레이 장치 및 디스플레이 방법 |
JP2011232964A (ja) | 2010-04-28 | 2011-11-17 | Casio Comput Co Ltd | 電気機器、及びその制御方法とプログラム |
US8296151B2 (en) * | 2010-06-18 | 2012-10-23 | Microsoft Corporation | Compound gesture-speech commands |
JP5601045B2 (ja) * | 2010-06-24 | 2014-10-08 | ソニー株式会社 | ジェスチャ認識装置、ジェスチャ認識方法およびプログラム |
US20120089392A1 (en) | 2010-10-07 | 2012-04-12 | Microsoft Corporation | Speech recognition user interface |
US8768006B2 (en) * | 2010-10-19 | 2014-07-01 | Hewlett-Packard Development Company, L.P. | Hand gesture recognition |
US8635560B2 (en) * | 2011-01-21 | 2014-01-21 | Blackberry Limited | System and method for reducing power consumption in an electronic device having a touch-sensitive display |
US9626498B2 (en) * | 2011-12-15 | 2017-04-18 | France Telecom | Multi-person gestural authentication and authorization system and method of operation thereof |
-
2012
- 2012-01-11 US US13/347,987 patent/US9931154B2/en active Active
-
2013
- 2013-01-02 IL IL224097A patent/IL224097B/en active IP Right Grant
- 2013-01-07 AU AU2013200053A patent/AU2013200053B2/en not_active Ceased
- 2013-01-09 CA CA2801493A patent/CA2801493C/en not_active Expired - Fee Related
- 2013-01-10 EP EP13150838.4A patent/EP2614788B1/en active Active
- 2013-01-10 DK DK13150838T patent/DK2614788T3/da active
- 2013-01-10 JP JP2013002425A patent/JP6195713B2/ja active Active
- 2013-01-10 ES ES13150838T patent/ES2761248T3/es active Active
- 2013-01-10 EP EP19193179.9A patent/EP3586777A1/en active Pending
- 2013-01-11 CN CN2013100115373A patent/CN103207671A/zh active Pending
- 2013-01-11 CN CN201911292852.1A patent/CN111513843A/zh active Pending
-
2018
- 2018-01-19 US US15/875,988 patent/US10052147B2/en active Active
- 2018-05-31 US US15/995,007 patent/US10653472B2/en active Active
-
2020
- 2020-05-07 US US16/869,360 patent/US11020165B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
CN111513843A (zh) | 2020-08-11 |
US20130176220A1 (en) | 2013-07-11 |
CA2801493A1 (en) | 2013-07-11 |
AU2013200053B2 (en) | 2015-09-03 |
US10653472B2 (en) | 2020-05-19 |
EP2614788A1 (en) | 2013-07-17 |
US20200261143A1 (en) | 2020-08-20 |
US9931154B2 (en) | 2018-04-03 |
AU2013200053A1 (en) | 2013-07-25 |
EP3586777A1 (en) | 2020-01-01 |
US20180271583A1 (en) | 2018-09-27 |
US11020165B2 (en) | 2021-06-01 |
ES2761248T3 (es) | 2020-05-19 |
CN103207671A (zh) | 2013-07-17 |
CA2801493C (en) | 2020-05-05 |
EP2614788B1 (en) | 2019-09-25 |
US20180140348A1 (en) | 2018-05-24 |
US10052147B2 (en) | 2018-08-21 |
DK2614788T3 (da) | 2019-11-11 |
IL224097B (en) | 2019-01-31 |
JP2013143149A (ja) | 2013-07-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6195713B2 (ja) | 奥行きセンサーの使用によるアブレーターワークステーションのタッチフリー操作 | |
JP6306236B2 (ja) | 奥行きセンサーの使用による装置のタッチフリー操作 | |
US10678329B2 (en) | Line-of-sight input device, and method of line-of-sight input | |
JP5837991B2 (ja) | 認証型ジェスチャ認識 | |
JP2019532543A5 (ja) | ||
JP2017509062A (ja) | 電子機器の制御方法 | |
JP5880199B2 (ja) | 表示制御装置、表示制御方法およびプログラム | |
KR102374448B1 (ko) | 사용자의 의도 예측 방법 및 이를 수행하기 위한 장치 | |
WO2014021005A1 (ja) | 画像処理システム、画像処理方法及びプログラム | |
KR101374316B1 (ko) | 시스루 디스플레이를 이용한 동작인식 장치 및 그 방법 | |
JP2019202354A (ja) | ロボット制御装置、ロボット制御方法及びロボット制御プログラム | |
JP5675196B2 (ja) | 情報処理装置及びその制御方法 | |
CN113590014B (zh) | 基于姿态动作的电梯召唤方法、装置和计算机设备 | |
CN105373327B (zh) | 一种信息处理方法和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20151022 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160819 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160830 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20161130 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170123 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20170314 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170616 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20170622 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170808 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170816 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6195713 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |