CN102958464A - 具有改进的控制器的自动化外科手术系统 - Google Patents

具有改进的控制器的自动化外科手术系统 Download PDF

Info

Publication number
CN102958464A
CN102958464A CN2011800273696A CN201180027369A CN102958464A CN 102958464 A CN102958464 A CN 102958464A CN 2011800273696 A CN2011800273696 A CN 2011800273696A CN 201180027369 A CN201180027369 A CN 201180027369A CN 102958464 A CN102958464 A CN 102958464A
Authority
CN
China
Prior art keywords
screen
zone
gaze
picture
surgical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800273696A
Other languages
English (en)
Other versions
CN102958464B (zh
Inventor
埃米利奥·鲁伊斯莫拉莱斯
达米恩·布拉塞
保罗·因韦尔尼齐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Asenses surgery (Italy) Co.,Ltd.
Original Assignee
Sofar SpA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sofar SpA filed Critical Sofar SpA
Priority to CN201610068554.4A priority Critical patent/CN105852972A/zh
Publication of CN102958464A publication Critical patent/CN102958464A/zh
Application granted granted Critical
Publication of CN102958464B publication Critical patent/CN102958464B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30—Surgical robots
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30—Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017—Electrical control of surgical instruments
    • A61B2017/00216—Electrical control of surgical instruments with eye tracking or head position tracking control
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30—Surgical robots
    • A61B34/37—Master-slave robots
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361—Image-producing devices, e.g. surgical cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Medical Informatics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • General Physics & Mathematics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Robotics (AREA)
  • Ophthalmology & Optometry (AREA)
  • Multimedia (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Physiology (AREA)
  • Dentistry (AREA)
  • Manipulator (AREA)
  • Endoscopes (AREA)
  • Electrotherapy Devices (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)

Abstract

一种自动化外科手术系统(10)，包括在预期用于外科医生的控制操纵台(12)的控制下动作的至少一个机械臂(11)。操纵台(12)包括用于检测外科医生的注视方向并用于依据检测到的注视方向来输入指令的眼部跟踪系统(21)。有利地，操纵台(22)包括具有用于观察手术区的至少一个区域(23)的屏幕(23)，且在可依据注视方向来执行的指令中，有利地具有用于在检测到落在屏幕的所述区域(23)内或外的注视方向时使机械臂(11)能够运动或使机械臂(11)不能运动的自动指令。

Description

具有改进的控制器的自动化外科手术系统
本发明涉及自动化外科手术系统，特别是用于微创手术例如内窥镜检查的自动化外科手术系统。
在现有技术中，已提出了用于执行外科手术，特别是腹腔镜手术的自动化系统。这些自动化系统包括由外科医生通过专门的操纵台控制的一个或多个机械臂(robot arm)。所述操纵台通常包括电视屏幕和合适的操纵器，在电视屏幕上显示手术区的画面(通常借助于内窥镜电视摄像机来记录)，外科医生借助于操纵器来执行机械臂的运动。操纵器可以是“反应的”类型的，使得外科医生也能够用他/她的手来感觉由自动化外科手术器械施加在患者的组织上的力。
通常，机械臂中的一个使电视摄像机移动，使得外科医生能够在手术期间改变其视角，同时一个或多个机械臂使手术器械(镊子、剪刀、手术刀、吸引器等)移动，外科医生用该手术器械来执行预期手术。
由于可用的控制器的数量和外科医生必须监视的手术参数的数量，对于外科医生来说，控制该系统是有些复杂的。除了机械臂的运动之外，外科医生还必须操作安装在臂上的外科手术器具(例如，控制镊子或剪刀的打开及关闭)并控制电视摄像机镜头，以便根据任何一个时刻的需要而具有手术区的更近或更远的画面。
通常，当正在看由电视摄像机显示的画面时，外科医生必须同时操作带有外科手术器具的两个机械臂，使得他/她的双手都被占用来控制相应的操纵器。
这妨碍了外科医生能够使用其它系统功能，除非他/她从外科手术器具控制器移开他/她的手。
也已提出其中某些功能可通过使用设置在操纵器上的踏板(pedal)或附加控制设备来激活使得其可以用手指来操作而无需放开操纵器本身的系统。然而，所有这些系统往往是不直观的，并且在任何情况下，当用外科手术操纵器来执行精确操纵时分散了外科医生的注意力。
另外的问题是由于某种原因(例如，为了执行另外的功能或观察在操纵台上或在手术区外的其它器械上显示的手术参数)，外科医生的注意力可能从手术区的画面分散。在这些情况下，外科医生可能没有注意到自动化外科手术器械的不正确或危险的运动，该不正确或危险的运动也可能由他/她在紧握操纵器时不自觉地执行。
为了避免这样的情况，已提出了使用外科医生必须操作来使机械手(robot)的运动激活/去激活(deactivate)的踏板，以便能够在从操纵器移开他/她的手和引导他/她的注意力离开手术区之前使运动去激活。然而，该踏板的及时操作取决于外科医生。
本发明的主要目的是提供一种自动化外科手术系统以及一种允许由外科医生更好和更安全地控制的控制方法，从而除了其它方面，确保系统的更好的操作安全性。
鉴于这个目标，已经根据本发明产生的想法是提供一种自动化外科手术系统，其包括至少一个机械臂，该机械臂在预期用于外科医生的控制系统的控制下动作，其特征在于，操纵台包括用于检测外科医生的注视方向且用于依据检测到的注视方向输入指令的眼部跟踪系统。
根据本发明的另外的想法是提供一种用于控制自动化外科手术系统的方法，该自动化外科手术系统包括在预期用于外科医生的操纵台的控制下动作的至少一个机械臂，其中外科医生的注视方向被检测，且外科手术系统的功能依据检测到的注视方向来控制。
为了更清楚地说明本发明的创新性原理及其相比于现有技术的优点，下面将借助于附图来描述应用这些原理的实施方式的实例。在附图中：
-图1示出了根据本发明的外科手术系统的示意图；
-图2示出了根据本发明的系统的框图。
参照附图，图1以示意图的形式示出了根据本发明提供的通常以10表示的自动化外科手术系统。
系统10包括至少一个机械臂11，其在由例如坐在舒适的工作位置中的外科医生来管理的控制操纵台12的控制下动作。操纵台也可安装在轮子上，以便其可以被容易地移位。
机械臂将是适合于特定用途的实质上已知的类型。在这里示出的系统10中，机械臂的数量是三个，然而无疑可以使用不同的数量。
机械臂(或每个机械臂)终止在能够支撑和操作用于在患者13上使用的外科手术器械的腕部件中。该器械通常将是用于内窥镜手术且特别是用于腹腔镜手术的已知器械。有利地，器械中的一个是记录手术区(在该特定情况下为患者的内部)的电视摄像机14，同时其它器械可以是合适的已知外科手术工具15、16(镊子、吸引器、手术刀等)。本文将不进一步描述和说明机械臂、器械以及用于操纵这些器械的致动器，因为其是已知的且可容易地被本领域技术人员想象到。本文也不进一步描述使用本系统而是可能的外科手术以及用于执行外科手术的方法，因为其可容易地被本领域技术人员想象到。
机械臂由合适的已知电子控制单元30来操作，以便执行通过操纵台12输入的运动。单元30将接收高水平运动指令(例如，被机械手支撑的工具的期望位置和倾角)并将执行这些高水平运动指令，将其转变成被发送到机械臂关节的单独电动机的相应的信号序列。机械臂也可设有已知的力传感器，单元30使用力传感器来防止由于臂与工作空间中的物体的碰撞而产生损害，且为了对操纵台处的操作员提供合适的反馈，如将在下面阐明的。有利地，操纵台和用于控制机械手的单元之间的连接可以是光纤类型的，以便减小与传输的信号干扰的可能性。
合适的机械臂和控制系统例如在WO2007/088208、WO2008/049898和WO2007/088206中描述。
为了执行外科手术器械的运动，操纵台可有利地包括一对已知操纵器17、18，该一对已知操纵器17、18可以被外科医生握住，并且其运动由外科手术器械借助于机械臂11的运动来合适地再现。有利地，操纵器可以是已知的“反应的”类型(即，具有提供加重运动和触觉传感的触觉接口)，使得外科医生也能够在操纵器上感觉到由自动化外科手术器械施加在患者的组织上的力。合适的触觉接口在自动化内窥镜外科手术的行业(sector)中是众所周知的。
通常，每个操纵器将操作一机械臂。有利地，在多于两个臂的情况下，控制器将设置在操纵台上，以便能够根据需要为每个操纵器分配所需的机械臂，如将在下面进一步解释的。还可设想例如也包括踏板设备20的键盘19和其它指令输入设备。如果设想用于特定器械等，则设备20可包括用于激活，例如单极器械和双极器械的动力供给、冲洗和抽吸功能的一个或多个踏板。
操纵台12还包括用于检测外科医生朝向操纵台的注视方向以及用于也根据检测到的注视方向控制外科手术系统的眼部运动跟踪系统21或所谓的“眼部跟踪器”。以这种方式，外科医生可借助于眼睛的运动来控制系统的功能。
有利地，操纵台包括具有用于显示手术区的图像的至少一个区域23的电视屏幕22。该图像由电视摄像机14提供，该图像可以用由计算机化系统24所生成的人造画面来补充(例如，以便为外科医生提供额外的信息和/或提高他/她对手术区的理解)，计算机化系统24本身是已知的，用于管理操纵台，这将在下面进一步描述。
如将在下面变得清楚的，计算机化系统24生成和管理人机界面(HMI)，人机界面允许外科医生与外科手术系统相互作用。
对于常见的二维观察来说，由内窥镜提供的画面可以直接在屏幕22上观察到。
然而，有利地，可设想用于观察手术区的三维系统。在这种情况下，电视摄像机14可以是已知的立体类型，其提供代表两个不同的“右手”和“左手”画面的合适的信号25、26，该画面被空间偏移地记录。信号25、26由电子设备27处理，使得3D画面可借助于立体观察系统显示给外科医生。
从各种已知的立体观察系统中，已发现偏振过滤系统(polarized filtersystem)是特别有利的；在该系统中，电子设备27包括已知的立体声调音器，其使从电视摄像机接收的右手画面和左手画面的行交替，以便将其交错显示在屏幕的观察区域23中。因此，屏幕上的画面的交替的奇数水平行和偶数水平行交替地代表由电视摄像机记录的右手画面和左手画面的行。
设有用于偶数交错行扫描行和奇数交错行扫描行的两种不同的偏振模式的已知过滤器设置在用于观察该交错画面的区域23中。为了观察该画面，外科医生戴着具有两种镜片的眼镜28，两种镜片以对应于过滤器在屏幕上的两种偏振模式的方式来偏振，以便只将属于由电视摄像机记录的原始的右手画面的画面的行朝向右眼引导，同时左眼只接收属于由电视摄像机记录的原始的左手画面的画面的行。
因此，将手术区的期望3D画面显示给外科医生是可能的。
如果需要的话，则使用类似的步骤，由计算机化系统24生成的人造立体画面也可以3D形式显示。
在任何情况下，借助于跟踪系统21来检测外科医生朝向屏幕22的注视方向并界定他/她正在看或没看屏幕的哪个区域是可能的。使用具有偏振眼镜的3D观察系统，没有对跟踪系统的干扰。此外，可以容易地设计具有用于3D观察的偏振镜片的眼镜，以便与正常的眼镜兼容。
已发现，当检测到落在屏幕外或至少再现手术区的屏幕区域外的注视方向时，发送使机械臂不能运动的指令对于跟踪系统来说是特别地有利的。以这种方式，提供了一种防止臂在没有外科医生的直接监督的情况下运动的安全系统。
因此，获得了用于激活机械手并且在用户正在看屏幕时保持机械手激活的所谓的“常闭(dead man)”功能。
有利地，为了额外的安全性，可设置另外的控制装置(例如在手柄上的按钮31或踏板设备20)，其中需要给予用于使能运动指令的双准许，使得为了重新激活运动，外科医生必须看屏幕上的画面并且还必须给出手动准许指令，同时运动可通过简单地不看画面来中断。
有利地，除了来自内窥镜的图像之外，屏幕22还示出了人机界面的至少部分。提供该界面的计算机化系统24在屏幕上显示了与系统指令相关的选择区域29。有利地，选择区域可设置在显示手术区的图像的同一屏幕22上。例如，这些选择区域可设置在屏幕的底部部分中，底部部分在用于观察手术区的区域23的下面。跟踪系统估计外科医生的注视方向，并且当其检测到落在该区域内的注视方向时，执行与选择区域相关的指令的选择。
与各种选择区域相关的指令可以是被认为有用的任何类型。例如，这些指令可从在执行自动化外科手术操作时经常使用的那些指令中选择。
已发现，如果与选择区域相关的指令包括用于将操纵器分配给机械臂的指令(特别是当操纵台包括两个操作操纵器以及多于两个机械臂时)，则是特别有利的。
因此，外科医生可不放开操纵器而是仅仅看在相应的选择区域处来交替控制两个操纵器上的各种机械臂。例如，外科医生可暂时切换到对具有电视摄像机的臂的控制，以便修改手术区的图像，且然后迅速地返回到对他/她正在使用来操作的机械臂的控制。
为了额外的安全性，有利地，操纵台可包括用于输入确认执行与所看的选择区域相关的指令的特殊指令的设备。有利地，该设备可以是按钮31，按钮31设置在一个或两个操纵器上，以便例如使用握住操纵器的手的拇指来按压。因此，通过眼部跟踪系统来容易地确认被眼睛激活的动作是可能的，例如，以选择与操纵器相关的机械手、打开/关闭外科手术器械和修改正被操作的机械手的设置。
按钮的另一用途还可以是控制器械(如果存在的话)上的扭转运动的自由度的用途。
也可能的是，有利地设想用于分配机械手的步骤可以通过在视觉上选择待分配的新的机械手的画面、借助于按钮确认选择以及然后将所选择的画面拖动到示出了当前分配给右手柄或左手柄的机械手的画面的位置中来执行。拖动通过保持按钮按下并将人的注视朝向机械手位置引导来执行。为了结束拖动操作，必须释放按钮，同时保持人的注视聚焦在以前指出的区域上。
眼部跟踪系统可以是本身是已知的许多类型中的一种。然而，已发现是特别地有利的眼部跟踪系统是包括用于记录至少外科医生的眼睛的画面的至少一个电视摄像机和用于依据所拍摄的画面计算注视方向的装置的系统。
如在图2中示意性地示出的，特别地，跟踪系统21可包括两个电视摄像机32、33，其以适当的距离相互并排地设置，以便记录外科医生的眼睛的两个空间地偏移的画面。因此，存在于跟踪系统21中的计算装置(例如，包括合适地编程的微处理器)可依据对两个记录画面的比较来执行对注视方向的三角测量。而且有利地，跟踪系统还可包括用于对眼睛的红外线照射的红外光源34，这有助于其在记录画面中的检测。
有利地，眼部跟踪系统可与监视器整合，使得如果监视器被移动，则眼部跟踪器可以继续正确地操作。
仍然参照图2，示意性地示出了操纵台的可能的有利实施方式的框图。在该实施方式中，为了清楚起见，系统被分成三个主要的功能块或组。
以40标示的第一个块包括直接参与在机械臂的运动中的部件。块40包含本身已知的第一工业计算机41，第一工业计算机41设有用于在给定的可预定义时间内执行与机械手的控制相关的指令的实时操作系统(例如，RT-LINUX)。计算机41经由通信网络42连接到机械手控制单元(或多个单元)30。计算机41从操纵器17和18接收运动指令，将运动指令发送到机械手并发出用于操作触觉反馈的操纵器的反应设备43的信号。需要即时系统响应的那些手动控制器，例如踏板20，如果除了其它方面还用来发送用于使机械手的运动停止的指令，则也被有利地连接到计算机41。
以44标示的第二功能块包括第二工业计算机45，第二工业计算机45生成并控制不需要严格地实时操作的人机界面(HMI)。眼部跟踪系统21、键盘19(需要时)和其它界面控制器连接到该第二计算机。计算机45还生成将被再现在屏幕22上(例如视觉控制区域31)的人造视频画面，并且可控制用于改变手术区画面的放大的任何功能。
计算机41和45形成用于控制操纵台的计算机化系统24。
计算机41和45以及机械手控制单元30可经由网络42彼此通信。由计算机45管理的HMI应用程序从而允许机械手被分配到操纵器以及显示关于每个机械手的数据，例如当前安装的器械、运动状态、反馈状态、插入患者体内的器械的旋转支点的位置、机械手状况、机械手连接状态、任何紧急情况等。
以46标示的第三功能块处理画面在屏幕上的再现，提供例如使用由记录手术区的电视摄像机14提供的信号和所生成的画面信号47的PiP(画中画)功能，以便显示HMI界面。第三块还包括用于三维观察的立体声调音器27。
有利地，为了PiP功能，监视器22设计有两个分开的输入端。主源在全屏模式下借助于例如DVI连接来显示，然而同时另一个视频输入(例如VGA连接)显示为嵌入窗口。主源(全屏)由从内窥镜系统接收的内窥镜的2维或3维的图像构成。第二源来自于生成人机界面(HMI)的计算机45。
在眼部跟踪系统21的校准期间，全屏图像也可(例如，借助于从HMI应用程序发送到监视器的串行指令)动态地切换到由计算机45生成的视频信号。
有利地，操纵台还可包括用于检测屏幕和外科医生的眼睛之间的距离的系统，以便依据检测到的距离中的变化来改变显示在屏幕上的手术区的画面的放大。
因此，外科医生可通过简单地朝着屏幕移动他/她的脸来直观地进行画面的放大，且反之亦然，通过移动他/她的脸远离屏幕来增大手术区的观察区域，从而减小放大。
距离检测系统可以以本身已知的各种方式来实现，例如使用遥测超声测量设备来实现。
然而，有利地，由于允许借助三角测量来计算外科医生的脸部的距离的立体记录系统，因此眼部跟踪系统21可以被使用。这与眼部跟踪系统的相关眼部检测功能一起允许执行对外科医生的观察点距屏幕的距离的准确的真实测量。
除放大之外，系统还可产生画面的移位，例如以便使画面居中或者借助于注视使画面向右、向左、向上或向下移位。
当手术区由安装在机械臂中的一个机械臂上的电视摄像机，优选内窥镜电视摄像机来记录时，已发现有利的是，注视检测跟踪系统还允许控制该电视摄像机的运动。当该功能被使能时(例如，通过借助于合适的区域29的视觉选择而输入相关的激活指令)，眼睛在手术区的画面上的运动引起机械臂的运动，以便移位以及将聚焦的区域在屏幕上有利地居中。电视摄像机的实际运动控制也可以仅仅接着按压确认踏板或按钮来执行，如上文已经描述的。以这种方式，外科医生可以在画面上自由地移动他/她的眼睛而不使观察框(viewing frame)移位，除非确认踏板或按钮同时被按压。如果上述运动和放大功能结合，则系统变得非常容易控制，注视运动使观察框在屏幕上移位，同时眼睛朝向或远离屏幕的运动使显示的画面放大或缩小。
当使用对手术区的三维观察时，距离检测系统还可用来在外科医生在离屏幕的最佳距离范围内时向该外科医生发信号。
实际上，通常，三维系统具有离屏幕的最佳距离间隔，在该情况下三维效果是最好的。
此外，3D和眼部跟踪系统的结合增加了关于位置和离屏幕的距离的某些限制，所述限制取决于外科医生、跟踪器和观察设备的位置。
操纵台的HMI应用程序可被设置，以便在外科医生位于相对于屏幕的最佳位置中时借助于各种已知的声学和/或光学系统指示给该外科医生。此外，提供指示相对于眼部跟踪器的距离是否足够的功能也是可能的。当3D和眼部跟踪器一起使用时，对于其二者来说，合适的工作空间可以是相同的，且同一个指示器可以执行两种功能。
眼部跟踪器21的工作区域将被大体上选择为使得比用于三维画面的最佳观察的区域大得多。例如，位于40cm和75cm之间的跟踪器的操作范围已被发现是有利的，具有在+30°和-10°的垂直角度范围内跟踪眼睛的可能性。最佳3D图像在离屏幕60-70cm处获得(在该范围中，信息将在右眼和左眼之间完美地区分)，且因此正好落在跟踪器的操作区域内。然而，假如外科医生遵守垂直限制，在该范围外，在3D中观察将仍然是可能的。如果超出屏幕的顶端和底端，就失去3D。
在这一点上，预定义的目的已经被如何实现是清楚的。使用所描述的控制系统和方法，控制具有触觉传感的机械臂、将由内窥镜以二维或三维的形式提供的图像与HMI应用程序显示在一起以及使用眼部运动跟踪器激活某些功能，这是可能的。由于眼部跟踪系统的使用，存在各种有趣的控制可能性。首先，在与眼部跟踪系统相关的各种功能中，具有如果外科医生没在看手术区的画面则能够使机械臂的运动安全地停止的可能性，其中机械臂的运动在检测到的注视方向未落在或落在屏幕的预定区域内时被自动地阻止或允许。
此外，HMI应用程序是直观且易于使用的，因为其可由外科医生的注视(连同或不连同激活确认设备)来控制。主要优点是，外科医生能够使用他/她的眼睛来选择机械臂并将机械臂分配给操纵器，而不从操纵器移开他/她的手。
显然地，对应用本发明的创新性原理的实施方式的以上描述通过这些创新性原理的实例的方式来提供，并且因此不能被视为限制本文所要求保护的权利的范围。例如，操纵台也使用经由地理网络或类似物的连接来形成用于自动化系统的远程操作外科手术工作站，该自动化系统可能在相同的房间中或在某距离处。主控制操纵台实际上是只要通信时间延迟有限那么也允许在手术室外部或在任何位置为患者动手术的远程控制设备。
远程外科手术系统将适合于任何类型的腹腔镜或类似手术。显然，本文中的术语“外科医生”被理解为意味着借助于操纵台控制机械手系统的任何人。
如现在可由本领域技术人员容易想象到的，必须注意，根据本发明的系统是模块化的，且可以例如被配置成使用更多的机械手(例如多达五个机械手)且还有一个或两个控制操纵台。

Claims (15)

1.一种自动化外科手术系统(10)，包括在预期用于外科医生的控制操纵台(12)的控制下动作的至少一个机械臂(11)，其特征在于，所述操纵台(12)包括眼部跟踪系统(21)，所述眼部跟踪系统(21)用于检测外科医生的注视方向并用于依据检测到的注视方向来输入指令。
2.根据权利要求1所述的系统，其特征在于，所述操纵台(12)包括具有用于观察手术区的至少一个区域(23)的屏幕(22)，且当检测到落在所述屏幕或所述屏幕的至少所述区域(23)外的注视方向时，所述跟踪系统(21)生成用于使至少一个机械臂(11)不能运动的指令。
3.根据权利要求1所述的系统，其特征在于，所述操纵台(12)包括屏幕(22)和人机界面，所述屏幕(22)具有用于观察手术区的至少一个区域，所述人机界面将与指令相关的选择区域(31)显示在所述屏幕上，所述跟踪系统估计外科医生的注视方向，并且当所述跟踪系统检测到落在所述选择区域(31)中的一个区域内的注视方向时，执行对与所述选择区域(31)中的所述一个区域相关的指令的选择。
4.根据权利要求3所述的系统，其特征在于，所述操纵台包括用于操作所述机械臂的操纵器(17、18)，且与所述选择区域(31)相关的所述指令包括用于使操纵器和机械臂相互分配的指令。
5.根据权利要求2所述的系统，其特征在于，所述屏幕(22)形成用于在3D中观察所述手术区的系统的部分。
6.根据权利要求1所述的系统，其特征在于，所述眼部跟踪系统包括用于记录至少外科医生的眼睛的画面的至少一个电视摄像机(32、33)以及用于依据所拍摄的画面计算所述注视方向的装置(21)。
7.根据权利要求1所述的系统，其特征在于，其包括用于检测外科医生的眼睛和显示所述手术区的画面的屏幕(22)之间的距离的系统(21)，该距离检测系统依据在检测到的距离上的变化来执行所述手术区的显示在所述屏幕(22)上的所述画面的放大和/或位置上的变化。
8.根据权利要求1所述的系统，其特征在于，所述操纵台(12)包括具有用于观察手术区的至少一个区域(23)的屏幕(22)，且当检测到落在所述屏幕或所述屏幕的至少所述区域(23)内的注视方向时，所述跟踪系统(21)生成用于使至少一个机械臂(11)能够运动的指令，该指令与用于确认使能够的手动指令结合来激活所述机械臂的运动。
9.根据权利要求1所述的系统，其特征在于，所述操纵台(12)包括具有用于观察手术区的至少一个区域(23)的屏幕(22)，所述手术区由被机械臂(11)移动的电视摄像机(14)来记录，电视摄像机(14)优选为内窥镜电视摄像机，依据检测到的注视方向，所述指令包括用于使该机械臂移动以改变所述电视摄像机的观察框的指令。
10.一种用于控制自动化外科手术系统的方法，所述自动化外科手术系统包括在预期用于外科医生的控制操纵台(12)的控制下动作的至少一个机械臂(11)，其中外科医生的注视方向被检测，且所述外科手术系统的功能依据检测到的注视方向来控制。
11.根据权利要求10所述的方法，其中手术区的画面显示在屏幕的至少一个区域上，且当检测到的注视方向未落在所述屏幕或至少所述屏幕区域内时，所述至少一个机械臂的运动被阻止，和/或当检测到的注视方向落在所述屏幕或至少所述屏幕区域内时，使所述至少一个机械臂能够运动，且优选地，确认使能够的另外的手动指令也被发送。
12.根据权利要求10所述的方法，其中与用于所述外科手术系统的指令相关的选择区域显示在屏幕上，且当检测到落在所述选择区域中的一个区域内的注视方向时，与该区域相关的指令被选择，且优选地，所选择的指令还借助于操作另外的手动确认设备来确认。
13.根据权利要求10所述的方法，其中从多个机械臂中选择的新的机械臂通过使用人的注视来选择所述新的臂显示在屏幕上的画面并借助于人的注视将该画面拖动到屏幕位置中而被分配给控制操纵器，所述屏幕位置显示被分配给该操纵器的所述机械手的所述画面。
14.根据权利要求10所述的方法，其中所述手术区的画面显示在屏幕上，外科医生的眼睛离所述屏幕的距离被检测，且所述画面的放大和/或位置依据检测到的距离来改变，和/或用信号表示检测到的距离是否在所述距离检测系统的预定义工作空间内和/或检测到的距离是否在所述手术区的所述画面的预定义观察空间内，优选地在3D中。
15.根据权利要求10所述的方法，其中所述手术区的由被机械臂(11)移动的电视摄像机，优选内窥镜电视摄像机记录的画面显示在屏幕上，且所述机械臂依据在所述屏幕的画面上检测到的注视方向来改变所述电视摄像机的观察框。
CN201180027369.6A 2010-04-07 2011-04-01 具有改进的控制器的自动化外科手术系统 Active CN102958464B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610068554.4A CN105852972A (zh) 2010-04-07 2011-04-01 具有改进的控制器的自动化外科手术系统

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
ITMI2010A000579A IT1401669B1 (it) 2010-04-07 2010-04-07 Sistema di chirurgia robotizzata con controllo perfezionato.
PCT/IB2011/051397 WO2011125007A1 (en) 2010-04-07 2011-04-01 Robotized surgery system with improved control
ITMI2010A000579 2011-04-07

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201610068554.4A Division CN105852972A (zh) 2010-04-07 2011-04-01 具有改进的控制器的自动化外科手术系统

Publications (2)

Publication Number Publication Date
CN102958464A true CN102958464A (zh) 2013-03-06
CN102958464B CN102958464B (zh) 2016-03-02

Family

ID=42935568

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201180027369.6A Active CN102958464B (zh) 2010-04-07 2011-04-01 具有改进的控制器的自动化外科手术系统
CN201610068554.4A Pending CN105852972A (zh) 2010-04-07 2011-04-01 具有改进的控制器的自动化外科手术系统

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201610068554.4A Pending CN105852972A (zh) 2010-04-07 2011-04-01 具有改进的控制器的自动化外科手术系统

Country Status (9)

Country Link
US (5) US9360934B2 (zh)
EP (2) EP2555703B1 (zh)
CN (2) CN102958464B (zh)
BR (2) BR122014005569B1 (zh)
CA (1) CA2795216C (zh)
ES (2) ES2953622T3 (zh)
IT (1) IT1401669B1 (zh)
RU (2) RU2727304C2 (zh)
WO (1) WO2011125007A1 (zh)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104055478A (zh) * 2014-07-08 2014-09-24 金纯� 基于视线追踪控制的医用内窥镜操控系统
CN104090659A (zh) * 2014-07-08 2014-10-08 金纯� 基于人眼图像和视线追踪的操作指针指示控制设备
CN105188592A (zh) * 2013-03-15 2015-12-23 Sri国际公司 超灵巧型手术系统
CN106456148A (zh) * 2014-03-19 2017-02-22 直观外科手术操作公司 使用眼球凝视跟踪的医疗装置、系统和方法
CN106659541A (zh) * 2014-03-19 2017-05-10 直观外科手术操作公司 集成眼球凝视跟踪用于立体观看器的医疗装置、系统和方法
CN107874834A (zh) * 2017-11-23 2018-04-06 苏州康多机器人有限公司 一种应用于腹腔镜机器人手术系统的3d开放式医生控制台
CN107920863A (zh) * 2015-08-13 2018-04-17 西门子医疗有限公司 用于控制包括成像模态的系统的设备和方法
CN108524011A (zh) * 2018-05-09 2018-09-14 杨琨 基于眼动仪原理的视野焦点指示系统及方法
CN109394252A (zh) * 2017-08-15 2019-03-01 西门子保健有限责任公司 用于操作医学成像设备的方法和医学成像设备
CN110403701A (zh) * 2019-08-30 2019-11-05 山东威高手术机器人有限公司 输入装置、微创外科手术机器人及微创外科手术控制方法
CN110831539A (zh) * 2017-04-28 2020-02-21 尼奥西斯股份有限公司 用于进行引导式口腔颌面部手术的方法以及相关联的系统
CN111281649A (zh) * 2020-03-03 2020-06-16 西安交通大学 一种眼科手术机器人系统及其控制方法
CN111616803A (zh) * 2019-12-17 2020-09-04 柯惠Lp公司 具有用户接合监视的机器人手术系统
CN112603546A (zh) * 2020-12-24 2021-04-06 哈尔滨思哲睿智能医疗设备有限公司 一种基于腹腔镜手术机器人的远程手术系统及控制方法
CN112932676A (zh) * 2013-03-15 2021-06-11 直观外科手术操作公司 用于管理多个零空间目标和饱和sli行为的系统和方法
CN113397709A (zh) * 2015-06-10 2021-09-17 直观外科手术操作公司 当错开时的主从取向映射
CN113873961A (zh) * 2019-05-17 2021-12-31 威博外科公司 用于断开和进入远程操作模式的联锁机构

Families Citing this family (228)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8219178B2 (en) 2007-02-16 2012-07-10 Catholic Healthcare West Method and system for performing invasive medical procedures using a surgical robot
US10893912B2 (en) 2006-02-16 2021-01-19 Globus Medical Inc. Surgical tool systems and methods
US10653497B2 (en) 2006-02-16 2020-05-19 Globus Medical, Inc. Surgical tool systems and methods
US10357184B2 (en) 2012-06-21 2019-07-23 Globus Medical, Inc. Surgical tool systems and method
EP1915963A1 (en) 2006-10-25 2008-04-30 The European Atomic Energy Community (EURATOM), represented by the European Commission Force estimation for a minimally invasive robotic surgery system
US8423182B2 (en) 2009-03-09 2013-04-16 Intuitive Surgical Operations, Inc. Adaptable integrated energy control system for electrosurgical tools in robotic surgical systems
IT1401669B1 (it) 2010-04-07 2013-08-02 Sofar Spa Sistema di chirurgia robotizzata con controllo perfezionato.
US8672837B2 (en) 2010-06-24 2014-03-18 Hansen Medical, Inc. Methods and devices for controlling a shapeable medical device
WO2012049623A1 (en) 2010-10-11 2012-04-19 Ecole Polytechnique Federale De Lausanne (Epfl) Mechanical manipulator for surgical instruments
US9308050B2 (en) 2011-04-01 2016-04-12 Ecole Polytechnique Federale De Lausanne (Epfl) Robotic system and method for spinal and other surgeries
JP6309447B2 (ja) * 2011-05-31 2018-04-11 インテュイティブ サージカル オペレーションズ， インコーポレイテッド ロボットによる手術用器具のエンドエフェクタの積極的な制御
EP2736680B1 (en) 2011-07-27 2015-09-16 Ecole Polytechnique Federale De Lausanne (EPFL) EPFL-TTO Mechanical teleoperated device for remote manipulation
US9314307B2 (en) 2011-10-21 2016-04-19 Intuitive Surgical Operations, Inc. Grip force control for robotic surgical instrument end effector
WO2013066790A1 (en) 2011-11-02 2013-05-10 Intuitive Surgical Operations, Inc. Method and system for stereo gaze tracking
US11857266B2 (en) 2012-06-21 2024-01-02 Globus Medical, Inc. System for a surveillance marker in robotic-assisted surgery
JP2015528713A (ja) 2012-06-21 2015-10-01 グローバス メディカル インコーポレイティッド 手術ロボットプラットフォーム
US11864745B2 (en) 2012-06-21 2024-01-09 Globus Medical, Inc. Surgical robotic system with retractor
US11116576B2 (en) 2012-06-21 2021-09-14 Globus Medical Inc. Dynamic reference arrays and methods of use
US11253327B2 (en) 2012-06-21 2022-02-22 Globus Medical, Inc. Systems and methods for automatically changing an end-effector on a surgical robot
US11317971B2 (en) 2012-06-21 2022-05-03 Globus Medical, Inc. Systems and methods related to robotic guidance in surgery
US11607149B2 (en) 2012-06-21 2023-03-21 Globus Medical Inc. Surgical tool systems and method
US11395706B2 (en) 2012-06-21 2022-07-26 Globus Medical Inc. Surgical robot platform
US10350013B2 (en) 2012-06-21 2019-07-16 Globus Medical, Inc. Surgical tool systems and methods
US10624710B2 (en) 2012-06-21 2020-04-21 Globus Medical, Inc. System and method for measuring depth of instrumentation
US11298196B2 (en) 2012-06-21 2022-04-12 Globus Medical Inc. Surgical robotic automation with tracking markers and controlled tool advancement
US11793570B2 (en) 2012-06-21 2023-10-24 Globus Medical Inc. Surgical robotic automation with tracking markers
US10231791B2 (en) 2012-06-21 2019-03-19 Globus Medical, Inc. Infrared signal based position recognition system for use with a robot-assisted surgery
US11974822B2 (en) 2012-06-21 2024-05-07 Globus Medical Inc. Method for a surveillance marker in robotic-assisted surgery
US11045267B2 (en) 2012-06-21 2021-06-29 Globus Medical, Inc. Surgical robotic automation with tracking markers
US10136954B2 (en) 2012-06-21 2018-11-27 Globus Medical, Inc. Surgical tool systems and method
US11864839B2 (en) 2012-06-21 2024-01-09 Globus Medical Inc. Methods of adjusting a virtual implant and related surgical navigation systems
US10758315B2 (en) 2012-06-21 2020-09-01 Globus Medical Inc. Method and system for improving 2D-3D registration convergence
US11399900B2 (en) 2012-06-21 2022-08-02 Globus Medical, Inc. Robotic systems providing co-registration using natural fiducials and related methods
US12004905B2 (en) 2012-06-21 2024-06-11 Globus Medical, Inc. Medical imaging systems using robotic actuators and related methods
US11857149B2 (en) 2012-06-21 2024-01-02 Globus Medical, Inc. Surgical robotic systems with target trajectory deviation monitoring and related methods
US20140024889A1 (en) * 2012-07-17 2014-01-23 Wilkes University Gaze Contingent Control System for a Robotic Laparoscope Holder
DE102012212780A1 (de) * 2012-07-20 2014-01-23 Siemens Aktiengesellschaft Bedieneinrichtung zur Eingabe von Bedienbefehlen zur Steuerung einer technischen Anlage
CN109846553B (zh) * 2012-09-17 2022-03-08 直观外科手术操作公司 针对远程操作的手术器械功能分配输入设备的方法和系统
US10864048B2 (en) 2012-11-02 2020-12-15 Intuitive Surgical Operations, Inc. Flux disambiguation for teleoperated surgical systems
US10631939B2 (en) 2012-11-02 2020-04-28 Intuitive Surgical Operations, Inc. Systems and methods for mapping flux supply paths
US20140148673A1 (en) 2012-11-28 2014-05-29 Hansen Medical, Inc. Method of anchoring pullwire directly articulatable region in catheter
CN105188590B (zh) 2012-12-10 2019-04-26 直观外科手术操作公司 图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免
US20140160004A1 (en) * 2012-12-11 2014-06-12 Biosense Webster (Israel), Ltd. Use of physician eye tracking during a procedure
US9167147B2 (en) 2013-02-15 2015-10-20 International Business Machines Corporation Mobile device field of view region determination
US9041645B2 (en) 2013-02-15 2015-05-26 International Business Machines Corporation Transparent display field of view region determination
US9057600B2 (en) 2013-03-13 2015-06-16 Hansen Medical, Inc. Reducing incremental measurement sensor error
US9271663B2 (en) 2013-03-15 2016-03-01 Hansen Medical, Inc. Flexible instrument localization from both remote and elongation sensors
US9629595B2 (en) 2013-03-15 2017-04-25 Hansen Medical, Inc. Systems and methods for localizing, tracking and/or controlling medical instruments
US9014851B2 (en) 2013-03-15 2015-04-21 Hansen Medical, Inc. Systems and methods for tracking robotically controlled medical instruments
US11020016B2 (en) 2013-05-30 2021-06-01 Auris Health, Inc. System and method for displaying anatomy and devices on a movable display
US9283048B2 (en) 2013-10-04 2016-03-15 KB Medical SA Apparatus and systems for precise guidance of surgical tools
FR3015222B1 (fr) 2013-12-24 2019-11-22 General Electric Company Procede de traitement d'images medicales par suivi de regard
EP3094272B1 (en) 2014-01-15 2021-04-21 KB Medical SA Notched apparatus for guidance of an insertable instrument along an axis during spinal surgery
US10039605B2 (en) 2014-02-11 2018-08-07 Globus Medical, Inc. Sterile handle for controlling a robotic surgical system from a sterile field
US10166061B2 (en) 2014-03-17 2019-01-01 Intuitive Surgical Operations, Inc. Teleoperated surgical system equipment with user interface
EP2923669B1 (en) 2014-03-24 2017-06-28 Hansen Medical, Inc. Systems and devices for catheter driving instinctiveness
WO2015162256A1 (en) 2014-04-24 2015-10-29 KB Medical SA Surgical instrument holder for use with a robotic surgical system
US10613627B2 (en) 2014-05-12 2020-04-07 Immersion Corporation Systems and methods for providing haptic feedback for remote interactions
EP3169252A1 (en) 2014-07-14 2017-05-24 KB Medical SA Anti-skid surgical instrument for use in preparing holes in bone tissue
WO2016054256A1 (en) 2014-09-30 2016-04-07 Auris Surgical Robotics, Inc Configurable robotic surgical system with virtual rail and flexible endoscope
US10314463B2 (en) 2014-10-24 2019-06-11 Auris Health, Inc. Automated endoscope calibration
US10179407B2 (en) * 2014-11-16 2019-01-15 Robologics Ltd. Dynamic multi-sensor and multi-robot interface system
WO2016097871A1 (en) 2014-12-19 2016-06-23 Distalmotion Sa Docking system for mechanical telemanipulator
WO2016097868A1 (en) 2014-12-19 2016-06-23 Distalmotion Sa Reusable surgical instrument for minimally invasive procedures
WO2016097873A2 (en) 2014-12-19 2016-06-23 Distalmotion Sa Articulated handle for mechanical telemanipulator
US11039820B2 (en) 2014-12-19 2021-06-22 Distalmotion Sa Sterile interface for articulated surgical instruments
WO2016097864A2 (en) 2014-12-19 2016-06-23 Distalmotion Sa Surgical instrument with articulated end-effector
US10013808B2 (en) 2015-02-03 2018-07-03 Globus Medical, Inc. Surgeon head-mounted display apparatuses
EP3258872B1 (en) 2015-02-18 2023-04-26 KB Medical SA Systems for performing minimally invasive spinal surgery with a robotic surgical system using a percutaneous technique
US10568709B2 (en) 2015-04-09 2020-02-25 Distalmotion Sa Mechanical teleoperated device for remote manipulation
US20160306420A1 (en) * 2015-04-17 2016-10-20 Charles Arthur Hill, III Method for Controlling a Surgical Camera through Natural Head Movements
WO2017015167A1 (en) 2015-07-17 2017-01-26 Deka Products Limited Partnership Robotic surgery system, mithod, and appratus
US10646298B2 (en) 2015-07-31 2020-05-12 Globus Medical, Inc. Robot arm and methods of use
US10058394B2 (en) 2015-07-31 2018-08-28 Globus Medical, Inc. Robot arm and methods of use
US10546193B2 (en) * 2015-08-07 2020-01-28 Apple Inc. Method and system to control a workflow and method and system for providing a set of task-specific control parameters
US10080615B2 (en) 2015-08-12 2018-09-25 Globus Medical, Inc. Devices and methods for temporary mounting of parts to bone
EP3340897A1 (en) 2015-08-28 2018-07-04 DistalMotion SA Surgical instrument with increased actuation force
US10687905B2 (en) 2015-08-31 2020-06-23 KB Medical SA Robotic surgical systems and methods
JP6525150B2 (ja) * 2015-08-31 2019-06-05 インターナショナル・ビジネス・マシーンズ・コーポレーションＩｎｔｅｒｎａｔｉｏｎａｌ Ｂｕｓｉｎｅｓｓ Ｍａｃｈｉｎｅｓ Ｃｏｒｐｏｒａｔｉｏｎ テレプレゼンス・ロボットに用いる制御シグナルを発生させるための方法、テレプレゼンス・システムおよびコンピュータ・プログラム
US10034716B2 (en) 2015-09-14 2018-07-31 Globus Medical, Inc. Surgical robotic systems and methods thereof
WO2017049163A1 (en) 2015-09-18 2017-03-23 Auris Surgical Robotics, Inc. Navigation of tubular networks
US10045825B2 (en) 2015-09-25 2018-08-14 Karl Storz Imaging, Inc. Partial facial recognition and gaze detection for a medical system
US9771092B2 (en) 2015-10-13 2017-09-26 Globus Medical, Inc. Stabilizer wheel assembly and methods of use
ITUB20155830A1 (it) * 2015-11-23 2017-05-23 R A W Srl "sistema di navigazione, tracciamento, e guida per il posizionamento di strumenti operatori"
US10143526B2 (en) * 2015-11-30 2018-12-04 Auris Health, Inc. Robot-assisted driving systems and methods
CN108472095B (zh) * 2015-12-29 2021-11-02 皇家飞利浦有限公司 用于机器人外科手术的使用虚拟现实设备的系统、控制器和方法
CN108472090B (zh) * 2015-12-29 2021-06-18 皇家飞利浦有限公司 用于控制外科手术机器人的系统、控制单元和方法
US10117632B2 (en) 2016-02-03 2018-11-06 Globus Medical, Inc. Portable medical imaging system with beam scanning collimator
US10448910B2 (en) 2016-02-03 2019-10-22 Globus Medical, Inc. Portable medical imaging system
US10842453B2 (en) 2016-02-03 2020-11-24 Globus Medical, Inc. Portable medical imaging system
US11058378B2 (en) 2016-02-03 2021-07-13 Globus Medical, Inc. Portable medical imaging system
US11883217B2 (en) 2016-02-03 2024-01-30 Globus Medical, Inc. Portable medical imaging system and method
US10866119B2 (en) 2016-03-14 2020-12-15 Globus Medical, Inc. Metal detector for detecting insertion of a surgical device into a hollow tube
EP3432780A4 (en) 2016-03-21 2019-10-23 Washington University VISUALIZATION IN VIRTUAL REALITY OR IN INCREASED REALITY OF 3D MEDICAL IMAGES
US10956544B1 (en) 2016-04-01 2021-03-23 Massachusetts Mutual Life Insurance Company Access control through head imaging and biometric authentication
US10733275B1 (en) * 2016-04-01 2020-08-04 Massachusetts Mutual Life Insurance Company Access control through head imaging and biometric authentication
US11267125B2 (en) * 2016-04-08 2022-03-08 Delta Electronics, Inc. Mechanism-parameter-calibration method for robotic arm system
EP3241518A3 (en) 2016-04-11 2018-01-24 Globus Medical, Inc Surgical tool systems and methods
US10551923B2 (en) 2016-05-04 2020-02-04 Worcester Polytechnic Institute Haptic glove as a wearable force feedback user interface
JP2019523663A (ja) * 2016-06-03 2019-08-29 コヴィディエン リミテッド パートナーシップ ロボット外科手術装置および視聴者適合型の立体視ディスプレイの態様を制御するためのシステム、方法、およびコンピュータ可読記憶媒体
US10568703B2 (en) * 2016-09-21 2020-02-25 Verb Surgical Inc. User arm support for use in a robotic surgical system
CA3035656A1 (en) 2016-09-23 2018-03-29 U.S. Patent Innovations Llc Robotic surgical system
US9931025B1 (en) 2016-09-30 2018-04-03 Auris Surgical Robotics, Inc. Automated calibration of endoscopes with pull wires
US10244926B2 (en) 2016-12-28 2019-04-02 Auris Health, Inc. Detecting endolumenal buckling of flexible instruments
EP3360502A3 (en) 2017-01-18 2018-10-31 KB Medical SA Robotic navigation of robotic surgical systems
US10813710B2 (en) 2017-03-02 2020-10-27 KindHeart, Inc. Telerobotic surgery system using minimally invasive surgical tool with variable force scaling and feedback and relayed communications between remote surgeon and surgery station
WO2018165047A1 (en) * 2017-03-06 2018-09-13 Intuitive Surgical Operations, Inc. Systems and methods for entering and exiting a teleoperational state
US11103311B2 (en) 2017-03-10 2021-08-31 Biomet Manufacturing, Llc Augmented reality supported knee surgery
US11071594B2 (en) 2017-03-16 2021-07-27 KB Medical SA Robotic navigation of robotic surgical systems
WO2018171851A1 (en) 2017-03-20 2018-09-27 3Dintegrated Aps A 3d reconstruction system
KR102558061B1 (ko) 2017-03-31 2023-07-25 아우리스 헬스, 인코포레이티드 생리적 노이즈를 보상하는 관강내 조직망 항행을 위한 로봇 시스템
US11058503B2 (en) 2017-05-11 2021-07-13 Distalmotion Sa Translational instrument interface for surgical robot and surgical robot systems comprising the same
KR102695556B1 (ko) 2017-05-12 2024-08-20 아우리스 헬스, 인코포레이티드 생검 장치 및 시스템
CN110650704B (zh) 2017-05-25 2023-05-26 柯惠Lp公司 用于检测图像捕获装置的视野内的物体的系统和方法
JP7130003B2 (ja) 2017-05-25 2022-09-02 コヴィディエン リミテッド パートナーシップ 画像捕捉デバイスの視野内の物体の検出のためのシステムおよび方法
US20210393331A1 (en) * 2017-06-15 2021-12-23 Transenterix Surgical, Inc. System and method for controlling a robotic surgical system based on identified structures
US10022192B1 (en) 2017-06-23 2018-07-17 Auris Health, Inc. Automatically-initialized robotic systems for navigation of luminal networks
JP7130682B2 (ja) 2017-06-28 2022-09-05 オーリス ヘルス インコーポレイテッド 器具挿入補償
US10426559B2 (en) 2017-06-30 2019-10-01 Auris Health, Inc. Systems and methods for medical instrument compression compensation
US10675094B2 (en) 2017-07-21 2020-06-09 Globus Medical Inc. Robot surgical platform
CN110475523B (zh) 2017-07-27 2023-06-27 直观外科手术操作公司 用于操纵器的关联过程和相关系统
US11974827B2 (en) 2017-07-27 2024-05-07 Intuitive Surgical Operations, Inc. Association processes and related systems for manipulators
US20200261160A1 (en) * 2017-09-05 2020-08-20 Covidien Lp Robotic surgical systems and methods and computer-readable media for controlling them
US10145747B1 (en) 2017-10-10 2018-12-04 Auris Health, Inc. Detection of undesirable forces on a surgical robotic arm
US10555778B2 (en) 2017-10-13 2020-02-11 Auris Health, Inc. Image-based branch detection and mapping for navigation
US11058493B2 (en) 2017-10-13 2021-07-13 Auris Health, Inc. Robotic system configured for navigation path tracing
US11357548B2 (en) 2017-11-09 2022-06-14 Globus Medical, Inc. Robotic rod benders and related mechanical and motor housings
US10898252B2 (en) 2017-11-09 2021-01-26 Globus Medical, Inc. Surgical robotic systems for bending surgical rods, and related methods and devices
US11794338B2 (en) 2017-11-09 2023-10-24 Globus Medical Inc. Robotic rod benders and related mechanical and motor housings
US11134862B2 (en) 2017-11-10 2021-10-05 Globus Medical, Inc. Methods of selecting surgical implants and related devices
AU2018380139B2 (en) 2017-12-06 2024-01-25 Auris Health, Inc. Systems and methods to correct for uncommanded instrument roll
JP7322026B2 (ja) 2017-12-14 2023-08-07 オーリス ヘルス インコーポレイテッド 器具の位置推定のシステムおよび方法
CA3079816C (en) * 2017-12-14 2023-02-14 Verb Surgical Inc. Multi-panel graphical user interface for a robotic surgical system
US11071595B2 (en) 2017-12-14 2021-07-27 Verb Surgical Inc. Multi-panel graphical user interface for a robotic surgical system
WO2019125964A1 (en) 2017-12-18 2019-06-27 Auris Health, Inc. Methods and systems for instrument tracking and navigation within luminal networks
US11690677B2 (en) * 2017-12-31 2023-07-04 Asensus Surgical Us, Inc. Use of eye tracking for tool identification and assignment in a robotic surgical system
CN108065904A (zh) * 2018-01-02 2018-05-25 京东方科技集团股份有限公司 内窥镜系统及其控制方法
EP3737326A4 (en) * 2018-01-10 2021-12-29 Covidien LP Determining positions and conditions of tools of a robotic surgical system utilizing computer vision
US20230010350A1 (en) * 2018-02-02 2023-01-12 Covidien Lp Robotic surgical systems with user engagement monitoring
US11998291B2 (en) * 2018-02-02 2024-06-04 Covidien Lp Robotic surgical systems with user engagement monitoring
CA3089681A1 (en) 2018-02-07 2019-08-15 Distalmotion Sa Surgical robot systems comprising robotic telemanipulators and integrated laparoscopy
KR102690164B1 (ko) 2018-02-13 2024-08-02 아우리스 헬스, 인코포레이티드 의료 기구를 구동시키기 위한 시스템 및 방법
US20190254753A1 (en) 2018-02-19 2019-08-22 Globus Medical, Inc. Augmented reality navigation systems for use with robotic surgical systems and methods of their use
EP3773309A4 (en) * 2018-03-26 2022-06-08 Covidien LP TELEMENTORATE CONTROL SETS FOR ROBOTIC SURGICAL SYSTEMS
WO2019191144A1 (en) 2018-03-28 2019-10-03 Auris Health, Inc. Systems and methods for registration of location sensors
WO2019191143A1 (en) 2018-03-28 2019-10-03 Auris Health, Inc. Systems and methods for displaying estimated location of instrument
US10573023B2 (en) 2018-04-09 2020-02-25 Globus Medical, Inc. Predictive visualization of medical imaging scanner component movement
DE102018110644B4 (de) * 2018-05-03 2024-02-15 Carl Zeiss Meditec Ag Digitales Mikroskop und digitales Mikroskopieverfahren
WO2019222395A1 (en) * 2018-05-16 2019-11-21 Intuitive Surgical Operations, Inc. System and method for hybrid control using eye tracking
WO2019231895A1 (en) 2018-05-30 2019-12-05 Auris Health, Inc. Systems and methods for location sensor-based branch prediction
WO2019231990A1 (en) 2018-05-31 2019-12-05 Auris Health, Inc. Robotic systems and methods for navigation of luminal network that detect physiological noise
EP3801348B1 (en) 2018-05-31 2024-05-01 Auris Health, Inc. Image-based airway analysis and mapping
CN110831481B (zh) 2018-05-31 2022-08-30 奥瑞斯健康公司 管状网络的基于路径的导航
US10895757B2 (en) 2018-07-03 2021-01-19 Verb Surgical Inc. Systems and methods for three-dimensional visualization during robotic surgery
JP6770025B2 (ja) 2018-07-12 2020-10-14 ファナック株式会社 ロボット
JP6856594B2 (ja) * 2018-09-25 2021-04-07 株式会社メディカロイド 手術システムおよび表示方法
JP6898285B2 (ja) * 2018-09-25 2021-07-07 株式会社メディカロイド 手術システムおよび表示方法
KR20210073542A (ko) 2018-09-28 2021-06-18 아우리스 헬스, 인코포레이티드 의료 기구를 도킹시키기 위한 시스템 및 방법
US12076100B2 (en) 2018-09-28 2024-09-03 Auris Health, Inc. Robotic systems and methods for concomitant endoscopic and percutaneous medical procedures
CN111134849B (zh) 2018-11-02 2024-05-31 威博外科公司 手术机器人系统
US11337742B2 (en) 2018-11-05 2022-05-24 Globus Medical Inc Compliant orthopedic driver
US11278360B2 (en) 2018-11-16 2022-03-22 Globus Medical, Inc. End-effectors for surgical robotic systems having sealed optical components
US11602402B2 (en) 2018-12-04 2023-03-14 Globus Medical, Inc. Drill guide fixtures, cranial insertion fixtures, and related methods and robotic systems
US11744655B2 (en) 2018-12-04 2023-09-05 Globus Medical, Inc. Drill guide fixtures, cranial insertion fixtures, and related methods and robotic systems
EP3671305A1 (en) * 2018-12-18 2020-06-24 Eberhard Karls Universität Tübingen Exoscope system and use of such an exoscope system
US11478318B2 (en) 2018-12-28 2022-10-25 Verb Surgical Inc. Methods for actively engaging and disengaging teleoperation of a surgical robotic system
US11918313B2 (en) 2019-03-15 2024-03-05 Globus Medical Inc. Active end effectors for surgical robots
US11419616B2 (en) 2019-03-22 2022-08-23 Globus Medical, Inc. System for neuronavigation registration and robotic trajectory guidance, robotic surgery, and related methods and devices
US11317978B2 (en) 2019-03-22 2022-05-03 Globus Medical, Inc. System for neuronavigation registration and robotic trajectory guidance, robotic surgery, and related methods and devices
US20200297357A1 (en) 2019-03-22 2020-09-24 Globus Medical, Inc. System for neuronavigation registration and robotic trajectory guidance, robotic surgery, and related methods and devices
US11571265B2 (en) 2019-03-22 2023-02-07 Globus Medical Inc. System for neuronavigation registration and robotic trajectory guidance, robotic surgery, and related methods and devices
US11382549B2 (en) 2019-03-22 2022-07-12 Globus Medical, Inc. System for neuronavigation registration and robotic trajectory guidance, and related methods and devices
US11806084B2 (en) 2019-03-22 2023-11-07 Globus Medical, Inc. System for neuronavigation registration and robotic trajectory guidance, and related methods and devices
US11204640B2 (en) * 2019-05-17 2021-12-21 Verb Surgical Inc. Methods for determining if teleoperation should be disengaged based on the user's gaze
US11045179B2 (en) 2019-05-20 2021-06-29 Global Medical Inc Robot-mounted retractor system
EP3975909B1 (en) * 2019-05-29 2024-01-10 Intuitive Surgical Operations, Inc. Operating mode control systems and methods for a computer-assisted surgical system
US11628023B2 (en) 2019-07-10 2023-04-18 Globus Medical, Inc. Robotic navigational system for interbody implants
US11850730B2 (en) 2019-07-17 2023-12-26 Asensus Surgical Us, Inc. Double eye tracker configuration for a robot-assisted surgical system
JP7214876B2 (ja) * 2019-08-09 2023-01-30 富士フイルム株式会社 内視鏡装置、制御方法、制御プログラム、及び内視鏡システム
WO2021038495A1 (en) 2019-08-30 2021-03-04 Auris Health, Inc. Instrument image reliability systems and methods
KR20220058569A (ko) 2019-08-30 2022-05-09 아우리스 헬스, 인코포레이티드 위치 센서의 가중치-기반 정합을 위한 시스템 및 방법
US11571171B2 (en) 2019-09-24 2023-02-07 Globus Medical, Inc. Compound curve cable chain
US11864857B2 (en) 2019-09-27 2024-01-09 Globus Medical, Inc. Surgical robot with passive end effector
US11426178B2 (en) 2019-09-27 2022-08-30 Globus Medical Inc. Systems and methods for navigating a pin guide driver
US11890066B2 (en) 2019-09-30 2024-02-06 Globus Medical, Inc Surgical robot with passive end effector
US11510684B2 (en) 2019-10-14 2022-11-29 Globus Medical, Inc. Rotary motion passive end effector for surgical robots in orthopedic surgeries
US11992373B2 (en) 2019-12-10 2024-05-28 Globus Medical, Inc Augmented reality headset with varied opacity for navigated robotic surgery
US12064189B2 (en) 2019-12-13 2024-08-20 Globus Medical, Inc. Navigated instrument for use in robotic guided surgery
CN118383870A (zh) 2019-12-31 2024-07-26 奥瑞斯健康公司 用于经皮进入的对准界面
WO2021137072A1 (en) 2019-12-31 2021-07-08 Auris Health, Inc. Anatomical feature identification and targeting
US11660147B2 (en) 2019-12-31 2023-05-30 Auris Health, Inc. Alignment techniques for percutaneous access
US11382699B2 (en) 2020-02-10 2022-07-12 Globus Medical Inc. Extended reality visualization of optical tool tracking volume for computer assisted navigation in surgery
US11207150B2 (en) 2020-02-19 2021-12-28 Globus Medical, Inc. Displaying a virtual model of a planned instrument attachment to ensure correct selection of physical instrument attachment
US11571269B2 (en) 2020-03-11 2023-02-07 Verb Surgical Inc. Surgeon disengagement detection during termination of teleoperation
JPWO2021206161A1 (zh) * 2020-04-10 2021-10-14
US11253216B2 (en) 2020-04-28 2022-02-22 Globus Medical Inc. Fixtures for fluoroscopic imaging systems and related navigation systems and methods
US11382700B2 (en) 2020-05-08 2022-07-12 Globus Medical Inc. Extended reality headset tool tracking and control
US11153555B1 (en) 2020-05-08 2021-10-19 Globus Medical Inc. Extended reality headset camera system for computer assisted navigation in surgery
US11510750B2 (en) 2020-05-08 2022-11-29 Globus Medical, Inc. Leveraging two-dimensional digital imaging and communication in medicine imagery in three-dimensional extended reality applications
CN111657842B (zh) * 2020-06-02 2021-08-31 首都医科大学附属北京地坛医院 一种探头控制方法及探头控制装置
US11317973B2 (en) 2020-06-09 2022-05-03 Globus Medical, Inc. Camera tracking bar for computer assisted navigation during surgery
US12070276B2 (en) 2020-06-09 2024-08-27 Globus Medical Inc. Surgical object tracking in visible light via fiducial seeding and synthetic image registration
US11382713B2 (en) 2020-06-16 2022-07-12 Globus Medical, Inc. Navigated surgical system with eye to XR headset display calibration
US11877807B2 (en) 2020-07-10 2024-01-23 Globus Medical, Inc Instruments for navigated orthopedic surgeries
US11793588B2 (en) 2020-07-23 2023-10-24 Globus Medical, Inc. Sterile draping of robotic arms
US11737831B2 (en) 2020-09-02 2023-08-29 Globus Medical Inc. Surgical object tracking template generation for computer assisted navigation during surgical procedure
US11523785B2 (en) 2020-09-24 2022-12-13 Globus Medical, Inc. Increased cone beam computed tomography volume length without requiring stitching or longitudinal C-arm movement
US11911112B2 (en) 2020-10-27 2024-02-27 Globus Medical, Inc. Robotic navigational system
US12076091B2 (en) 2020-10-27 2024-09-03 Globus Medical, Inc. Robotic navigational system
US11941814B2 (en) 2020-11-04 2024-03-26 Globus Medical Inc. Auto segmentation using 2-D images taken during 3-D imaging spin
US11717350B2 (en) 2020-11-24 2023-08-08 Globus Medical Inc. Methods for robotic assistance and navigation in spinal surgery and related systems
US20220218431A1 (en) 2021-01-08 2022-07-14 Globus Medical, Inc. System and method for ligament balancing with robotic assistance
US12042241B2 (en) 2021-03-31 2024-07-23 Moon Surgical Sas Co-manipulation surgical system having automated preset robot arm configurations
US11832909B2 (en) 2021-03-31 2023-12-05 Moon Surgical Sas Co-manipulation surgical system having actuatable setup joints
US11812938B2 (en) 2021-03-31 2023-11-14 Moon Surgical Sas Co-manipulation surgical system having a coupling mechanism removeably attachable to surgical instruments
US11844583B2 (en) 2021-03-31 2023-12-19 Moon Surgical Sas Co-manipulation surgical system having an instrument centering mode for automatic scope movements
US11819302B2 (en) 2021-03-31 2023-11-21 Moon Surgical Sas Co-manipulation surgical system having user guided stage control
WO2022208414A1 (en) 2021-03-31 2022-10-06 Moon Surgical Sas Co-manipulation surgical system for use with surgical instruments for performing laparoscopic surgery
DE102021113575A1 (de) 2021-05-25 2022-12-01 Olympus Winter & Ibe Gmbh Chirurgischer Roboter
US20240268628A1 (en) * 2021-06-03 2024-08-15 Sony Group Corporation Information processing apparatus, information processing system, information processing method, and program
US11857273B2 (en) 2021-07-06 2024-01-02 Globus Medical, Inc. Ultrasonic robotic surgical navigation
US11439444B1 (en) 2021-07-22 2022-09-13 Globus Medical, Inc. Screw tower and rod reduction tool
US12053150B2 (en) 2021-08-11 2024-08-06 Terumo Cardiovascular Systems Corporation Endoscopic vessel harvesting with thermal management and augmented reality display
US11918304B2 (en) 2021-12-20 2024-03-05 Globus Medical, Inc Flat panel registration fixture and method of using same
US12048493B2 (en) 2022-03-31 2024-07-30 Globus Medical, Inc. Camera tracking system identifying phantom markers during computer assisted surgery navigation
US11986165B1 (en) 2023-01-09 2024-05-21 Moon Surgical Sas Co-manipulation surgical system for use with surgical instruments for performing laparoscopic surgery while estimating hold force
US11832910B1 (en) 2023-01-09 2023-12-05 Moon Surgical Sas Co-manipulation surgical system having adaptive gravity compensation
US11844585B1 (en) 2023-02-10 2023-12-19 Distalmotion Sa Surgical robotics systems and devices having a sterile restart, and methods thereof

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004029786A1 (en) * 2002-09-25 2004-04-08 Imperial College Innovations Limited Control of robotic manipulation
US6847336B1 (en) * 1996-10-02 2005-01-25 Jerome H. Lemelson Selectively controllable heads-up display system
US20090248036A1 (en) * 2008-03-28 2009-10-01 Intuitive Surgical, Inc. Controlling a robotic surgical tool with a display monitor

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6405072B1 (en) * 1991-01-28 2002-06-11 Sherwood Services Ag Apparatus and method for determining a location of an anatomical target with reference to a medical apparatus
ATE228338T1 (de) * 1994-10-07 2002-12-15 Univ St Louis Chirurgische navigationsanordnung einschliesslich referenz- und ortungssystemen
US7228165B1 (en) * 2000-06-26 2007-06-05 Boston Scientific Scimed, Inc. Apparatus and method for performing a tissue resection procedure
US6793653B2 (en) * 2001-12-08 2004-09-21 Computer Motion, Inc. Multifunctional handle for a medical robotic system
DE10226539A1 (de) * 2002-06-14 2004-01-08 Leica Microsystems Ag Sprachsteuerung für Operationsmikroskope
EP1744670A2 (en) * 2004-03-22 2007-01-24 Vanderbilt University System and methods for surgical instrument disablement via image-guided position feedback
US20060074307A1 (en) 2004-05-10 2006-04-06 Tatsuo Igarashi Body cavity diagnostic system
US7501995B2 (en) 2004-11-24 2009-03-10 General Electric Company System and method for presentation of enterprise, clinical, and decision support information utilizing eye tracking navigation
JP2008529707A (ja) * 2005-02-18 2008-08-07 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 医療機器の自動制御
RU2295927C1 (ru) * 2005-07-11 2007-03-27 Государственное Образовательное Учреждение Высшего Профессионального Образования "Дальневосточный Государственный Медицинский Университет" Министерства Здравоохранения Российской Федерации ГОУ ВПО ДВГМУ МЗ РФ Роботизированная система для репозиции костных отломков при переломах костного скелета
US8079950B2 (en) 2005-09-29 2011-12-20 Intuitive Surgical Operations, Inc. Autofocus and/or autoscaling in telesurgery
US8577538B2 (en) * 2006-07-14 2013-11-05 Irobot Corporation Method and system for controlling a remote vehicle
EP1815949A1 (en) 2006-02-03 2007-08-08 The European Atomic Energy Community (EURATOM), represented by the European Commission Medical robotic system with manipulator arm of the cylindrical coordinate type
EP1815950A1 (en) 2006-02-03 2007-08-08 The European Atomic Energy Community (EURATOM), represented by the European Commission Robotic surgical system for performing minimally invasive medical procedures
DE102006011233B4 (de) * 2006-03-10 2011-04-28 Siemens Ag Verfahren und Vorrichtung zur Optimierung der Bilddarstellung an einer bildgebenden Einrichtung
US7591558B2 (en) * 2006-05-31 2009-09-22 Sony Ericsson Mobile Communications Ab Display based on eye information
US20080097798A1 (en) 2006-10-18 2008-04-24 The Crawford Group, Inc. Method and System for Creating and Processing Rental Vehicle Reservations Using Vouchers
EP1915963A1 (en) 2006-10-25 2008-04-30 The European Atomic Energy Community (EURATOM), represented by the European Commission Force estimation for a minimally invasive robotic surgery system
MY142560A (en) 2007-01-18 2010-12-15 Cimb Group Sdn Bhd A bond analysis system
US8155479B2 (en) * 2008-03-28 2012-04-10 Intuitive Surgical Operations Inc. Automated panning and digital zooming for robotic surgical systems
US20090307601A1 (en) * 2008-06-05 2009-12-10 Ibm Corporation Method for reflexive securing of computer displays
KR100998182B1 (ko) 2008-08-21 2010-12-03 (주)미래컴퍼니 수술용 로봇의 3차원 디스플레이 시스템 및 그 제어방법
EP2394235A2 (en) * 2009-02-06 2011-12-14 Oculis Labs, Inc. Video-based privacy supporting system
DE102009010263B4 (de) 2009-02-24 2011-01-20 Reiner Kunz Verfahren zur Navigation eines endoskopischen Instruments bei der technischen Endoskopie und zugehörige Vorrichtung
US9439736B2 (en) * 2009-07-22 2016-09-13 St. Jude Medical, Atrial Fibrillation Division, Inc. System and method for controlling a remote medical device guidance system in three-dimensions using gestures
US8521331B2 (en) * 2009-11-13 2013-08-27 Intuitive Surgical Operations, Inc. Patient-side surgeon interface for a minimally invasive, teleoperated surgical instrument
IT1401669B1 (it) 2010-04-07 2013-08-02 Sofar Spa Sistema di chirurgia robotizzata con controllo perfezionato.
US9557812B2 (en) * 2010-07-23 2017-01-31 Gregory A. Maltz Eye gaze user interface and calibration method
KR20140037122A (ko) * 2011-05-12 2014-03-26 임페리얼 이노베이션스 리미티드 최소 침습 수술을 위한 마스터/슬레이브 타입 의료 장치
US20140024889A1 (en) * 2012-07-17 2014-01-23 Wilkes University Gaze Contingent Control System for a Robotic Laparoscope Holder
CN102842301B (zh) * 2012-08-21 2015-05-20 京东方科技集团股份有限公司 显示画面调节装置、显示装置及显示方法
US9294433B1 (en) * 2012-11-02 2016-03-22 8X8, Inc. Multiple-master DNS system
KR20140112207A (ko) * 2013-03-13 2014-09-23 삼성전자주식회사 증강현실 영상 표시 시스템 및 이를 포함하는 수술 로봇 시스템
US11087271B1 (en) * 2017-03-27 2021-08-10 Amazon Technologies, Inc. Identifying user-item interactions in an automated facility
US11083601B1 (en) * 2017-07-10 2021-08-10 Braden William Thomas Leonard Prosthetic hand system
US10152141B1 (en) * 2017-08-18 2018-12-11 Osterhout Group, Inc. Controller movement tracking with light emitters
US11611608B1 (en) * 2019-07-19 2023-03-21 Snap Inc. On-demand camera sharing over a network

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6847336B1 (en) * 1996-10-02 2005-01-25 Jerome H. Lemelson Selectively controllable heads-up display system
WO2004029786A1 (en) * 2002-09-25 2004-04-08 Imperial College Innovations Limited Control of robotic manipulation
US20090248036A1 (en) * 2008-03-28 2009-10-01 Intuitive Surgical, Inc. Controlling a robotic surgical tool with a display monitor

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
DAVID P. NOONAN, GEORGE P. MYLONAS, ARA DARZI, GUANG-ZHONG YANG: "Gaze Contingent Articulated Robot Control for Robot Assisted Minimally Invasive Surgery", 《INTERNATIONAL CONFERENCE ON INTELLIGENT ROBOTS AND SYSTEMS》 *

Cited By (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105188592B (zh) * 2013-03-15 2018-07-27 Sri国际公司 超灵巧型手术系统
CN112932676A (zh) * 2013-03-15 2021-06-11 直观外科手术操作公司 用于管理多个零空间目标和饱和sli行为的系统和方法
CN105188592A (zh) * 2013-03-15 2015-12-23 Sri国际公司 超灵巧型手术系统
US10383699B2 (en) 2013-03-15 2019-08-20 Sri International Hyperdexterous surgical system
US10376337B2 (en) 2013-03-15 2019-08-13 Sri International Hyperdexterous surgical system
US10299883B2 (en) 2013-03-15 2019-05-28 Sri International Hyperdexterous surgical system
US10432922B2 (en) 2014-03-19 2019-10-01 Intuitive Surgical Operations, Inc. Medical devices, systems, and methods using eye gaze tracking for stereo viewer
CN111616666A (zh) * 2014-03-19 2020-09-04 直观外科手术操作公司 使用眼球凝视跟踪的医疗装置、系统和方法
US11792386B2 (en) 2014-03-19 2023-10-17 Intuitive Surgical Operations, Inc. Medical devices, systems, and methods using eye gaze tracking for stereo viewer
CN106659541A (zh) * 2014-03-19 2017-05-10 直观外科手术操作公司 集成眼球凝视跟踪用于立体观看器的医疗装置、系统和方法
US11438572B2 (en) 2014-03-19 2022-09-06 Intuitive Surgical Operations, Inc. Medical devices, systems and methods using eye gaze tracking for stereo viewer
CN110200702B9 (zh) * 2014-03-19 2022-05-31 直观外科手术操作公司 集成眼球凝视跟踪用于立体观看器的医疗装置、系统和方法
US10278782B2 (en) 2014-03-19 2019-05-07 Intuitive Surgical Operations, Inc. Medical devices, systems, and methods using eye gaze tracking
CN110200702B (zh) * 2014-03-19 2022-05-03 直观外科手术操作公司 集成眼球凝视跟踪用于立体观看器的医疗装置、系统和方法
CN106456148A (zh) * 2014-03-19 2017-02-22 直观外科手术操作公司 使用眼球凝视跟踪的医疗装置、系统和方法
CN106659541B (zh) * 2014-03-19 2019-08-16 直观外科手术操作公司 集成眼球凝视跟踪用于立体观看器的医疗装置、系统和方法
US11147640B2 (en) 2014-03-19 2021-10-19 Intuitive Surgical Operations, Inc. Medical devices, systems, and methods using eye gaze tracking
CN110200702A (zh) * 2014-03-19 2019-09-06 直观外科手术操作公司 集成眼球凝视跟踪用于立体观看器的医疗装置、系统和方法
US10965933B2 (en) 2014-03-19 2021-03-30 Intuitive Surgical Operations, Inc. Medical devices, systems, and methods using eye gaze tracking for stereo viewer
CN106456148B (zh) * 2014-03-19 2020-06-12 直观外科手术操作公司 使用眼球凝视跟踪的医疗装置、系统和方法
CN104055478B (zh) * 2014-07-08 2016-02-03 金纯� 基于视线追踪控制的医用内窥镜操控系统
CN104055478A (zh) * 2014-07-08 2014-09-24 金纯� 基于视线追踪控制的医用内窥镜操控系统
CN104090659B (zh) * 2014-07-08 2017-04-05 重庆金瓯科技发展有限责任公司 基于人眼图像和视线追踪的操作指针指示控制设备
CN104090659A (zh) * 2014-07-08 2014-10-08 金纯� 基于人眼图像和视线追踪的操作指针指示控制设备
CN113397709A (zh) * 2015-06-10 2021-09-17 直观外科手术操作公司 当错开时的主从取向映射
CN107920863A (zh) * 2015-08-13 2018-04-17 西门子医疗有限公司 用于控制包括成像模态的系统的设备和方法
CN107920863B (zh) * 2015-08-13 2021-12-31 西门子医疗有限公司 用于控制包括成像模态的系统的设备和方法
US10973595B2 (en) 2015-08-13 2021-04-13 Siemens Healthcare Gmbh Device and method for controlling a system comprising an imaging modality
CN110831539A (zh) * 2017-04-28 2020-02-21 尼奥西斯股份有限公司 用于进行引导式口腔颌面部手术的方法以及相关联的系统
CN109394252A (zh) * 2017-08-15 2019-03-01 西门子保健有限责任公司 用于操作医学成像设备的方法和医学成像设备
CN109394252B (zh) * 2017-08-15 2022-07-08 西门子保健有限责任公司 用于操作医学成像设备的方法和医学成像设备
CN107874834A (zh) * 2017-11-23 2018-04-06 苏州康多机器人有限公司 一种应用于腹腔镜机器人手术系统的3d开放式医生控制台
CN108524011A (zh) * 2018-05-09 2018-09-14 杨琨 基于眼动仪原理的视野焦点指示系统及方法
CN113873961A (zh) * 2019-05-17 2021-12-31 威博外科公司 用于断开和进入远程操作模式的联锁机构
CN110403701A (zh) * 2019-08-30 2019-11-05 山东威高手术机器人有限公司 输入装置、微创外科手术机器人及微创外科手术控制方法
CN111616803A (zh) * 2019-12-17 2020-09-04 柯惠Lp公司 具有用户接合监视的机器人手术系统
CN111616803B (zh) * 2019-12-17 2023-08-15 柯惠Lp公司 具有用户接合监视的机器人手术系统
CN111281649A (zh) * 2020-03-03 2020-06-16 西安交通大学 一种眼科手术机器人系统及其控制方法
CN112603546A (zh) * 2020-12-24 2021-04-06 哈尔滨思哲睿智能医疗设备有限公司 一种基于腹腔镜手术机器人的远程手术系统及控制方法

Also Published As

Publication number Publication date
BR112012025516A2 (pt) 2019-10-08
ITMI20100579A1 (it) 2011-10-08
RU2727304C2 (ru) 2020-07-21
US20160249992A1 (en) 2016-09-01
US9360934B2 (en) 2016-06-07
EP2555703B1 (en) 2018-07-25
BR122014005569B1 (pt) 2020-10-20
US11224489B2 (en) 2022-01-18
CN102958464B (zh) 2016-03-02
EP2555703A1 (en) 2013-02-13
US10251713B2 (en) 2019-04-09
US20130030571A1 (en) 2013-01-31
US11857278B2 (en) 2024-01-02
CA2795216C (en) 2019-07-30
WO2011125007A1 (en) 2011-10-13
CN105852972A (zh) 2016-08-17
IT1401669B1 (it) 2013-08-02
ES2692695T3 (es) 2018-12-04
ES2953622T3 (es) 2023-11-14
EP3395251B1 (en) 2023-05-31
CA2795216A1 (en) 2011-10-13
RU2015145035A (ru) 2019-01-10
RU2569699C2 (ru) 2015-11-27
US20190231456A1 (en) 2019-08-01
RU2012142510A (ru) 2014-05-20
BR122014005569A2 (pt) 2019-10-29
US20220192765A1 (en) 2022-06-23
US20240099791A1 (en) 2024-03-28
RU2015145035A3 (zh) 2019-04-26
EP3395251A1 (en) 2018-10-31
BR112012025516B1 (pt) 2020-11-17

Similar Documents

Publication Publication Date Title
CN102958464B (zh) 具有改进的控制器的自动化外科手术系统
US11754853B2 (en) Systems and methods for three-dimensional visualization during robotic surgery
US11977678B2 (en) Robotic system providing user selectable actions associated with gaze tracking
CN109275333B (zh) 用于控制机器人递送操纵器的系统、方法和计算机可读程序产品
JP2022036255A (ja) ロボット外科手術装置および視聴者適合型の立体視ディスプレイの態様を制御するためのシステム、方法、およびコンピュータ可読記憶媒体
KR20120004479A (ko) 수술 로봇의 통합적 표현
EP4031050A1 (en) Surgical virtual reality user interface
KR20120115484A (ko) 최소 침습 원격조종 수술 기구를 위한 환자측 의사 인터페이스
KR20160008172A (ko) 수술 장비 제어 입력 시각화 장치 및 방법
AU2003234910A1 (en) Medical cockpit system
CN103619280B (zh) 医疗用机械手系统
JP4383188B2 (ja) 立体観察システム
JPH07124165A (ja) 視線検出によるマニピュレータ制御システム
CN118043005A (zh) 用于控制内部体腔中的手术机器人组件的系统和方法
US20240233180A1 (en) Method and system for calibrating cameras
WO2024006492A1 (en) Systems and methods for stereoscopic visualization in surgical robotics without requiring glasses or headgear
KR20240033573A (ko) 다중 의료 영상 송출 및 수술 보조 기능을 제공하는 헤드셋 기반 비전장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20160721

Address after: Milan Italy

Patentee after: TRANSENTERIX ITALIA S.R.L

Address before: Rosa, Italy (Milan)

Patentee before: Sofar SPA

CP02 Change in the address of a patent holder

Address after: No. 3 Innovation Avenue 20126, Milan, Italy

Patentee after: TRANSENTERIX ITALIA S.R.L

Address before: Milan Italy

Patentee before: TRANSENTERIX ITALIA S.R.L

CP02 Change in the address of a patent holder
CP01 Change in the name or title of a patent holder

Address after: 3 innovation Avenue, Milan 20126, Italy

Patentee after: Asenses surgery (Italy) Co.,Ltd.

Address before: 3 innovation Avenue, Milan 20126, Italy

Patentee before: TRANSENTERIX ITALIA S.R.L.

CP01 Change in the name or title of a patent holder