CN110279427A - 图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免 - Google Patents

图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免 Download PDF

Info

Publication number
CN110279427A
CN110279427A CN201910317935.5A CN201910317935A CN110279427A CN 110279427 A CN110279427 A CN 110279427A CN 201910317935 A CN201910317935 A CN 201910317935A CN 110279427 A CN110279427 A CN 110279427A
Authority
CN
China
Prior art keywords
lever arm
controller
orientation
manipulation device
arm
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910317935.5A
Other languages
English (en)
Other versions
CN110279427B (zh
Inventor
L·布鲁赫姆
C·涅布莱尔
H·昆泽
M·阿兹安
J·索格
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens Healthcare Inc
Intuitive Surgical Operations Inc
Original Assignee
Siemens Healthcare Ltd
Intuitive Surgical Operations Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens Healthcare Ltd, Intuitive Surgical Operations Inc filed Critical Siemens Healthcare Ltd
Priority to CN201910317935.5A priority Critical patent/CN110279427B/zh
Publication of CN110279427A publication Critical patent/CN110279427A/zh
Application granted granted Critical
Publication of CN110279427B publication Critical patent/CN110279427B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/10Safety means specially adapted therefor
    • A61B6/102Protection against mechanical damage, e.g. anti-collision devices
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/44Constructional features of apparatus for radiation diagnosis
    • A61B6/4429Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units
    • A61B6/4435Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units the source unit and the detector unit being coupled by a rigid structure
    • A61B6/4441Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units the source unit and the detector unit being coupled by a rigid structure the rigid structure being a C-arm or U-arm
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/44Constructional features of apparatus for radiation diagnosis
    • A61B6/4429Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units
    • A61B6/4458Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units the source unit or the detector unit being attached to robotic arms
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361Image-producing devices, e.g. surgical cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1674Programme controls characterised by safety, monitoring, diagnostic
    • B25J9/1676Avoiding collision or forbidden zones
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00064Constructional details of the endoscope body
    • A61B1/00071Insertion part of the endoscope body
    • A61B1/0008Insertion part of the endoscope body characterised by distal tip features
    • A61B1/00087Tools
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00147Holding or positioning arrangements
    • A61B1/00149Holding or positioning arrangements using articulated arms
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • A61B1/00174Optical arrangements characterised by the viewing angles
    • A61B1/00183Optical arrangements characterised by the viewing angles for variable viewing angles
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00017Electrical control of surgical instruments
    • A61B2017/00216Electrical control of surgical instruments with eye tracking or head position tracking control
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2055Optical tracking systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2059Mechanical position encoders
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2065Tracking using image or pattern recognition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/30Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure
    • A61B2090/306Devices for illuminating a surgical field, the devices having an interrelation with other surgical devices or with a surgical procedure using optical fibres
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/371Surgical systems with images on a monitor during operation with simultaneous use of two cameras
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/376Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/378Surgical systems with images on a monitor during operation using ultrasound
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10STECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S901/00Robots
    • Y10S901/02Arm motion controller
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10STECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S901/00Robots
    • Y10S901/46Sensing device
    • Y10S901/47Optical

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Public Health (AREA)
  • Molecular Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Robotics (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Optics & Photonics (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Manipulator (AREA)

Abstract

本申请涉及图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免。运动控制的系统和方法包括偶联至计算机辅助外科装置的控制器,该计算机辅助外科装置具有偶联至具有工作端的可操纵装置的第一活动臂、和偶联至图像采集装置的第二活动臂。控制器被配置以接收第一活动臂的第一构型;接收第二活动臂的第二构型;从图像采集装置接收工作端的多个图像;确定工作端的位置和定向;确定第一活动臂位置和第一活动臂轨迹;确定第二活动臂位置和第二活动臂轨迹;确定活动臂的动作是否会导致活动臂之间不期望的关系;和发送运动命令至第一或第二活动臂,以避免不期望的关系。

Description

图像采集装置和可操纵装置活动臂受控运动过程中的碰撞 避免
本申请是分案申请,原申请的申请日为2013年12月10日,申请号为201380064534.4,发明名称为“图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免”。
相关申请的交叉引用
本申请要求享有2012年12月10日提交的美国临时申请号61/735,170和2013年12月10提交的美国非临时申请号14/101,769的优先权,其全部内容被引入本文作为参考。
技术领域
本发明总体上涉及机器人系统,并且具体地涉及图像采集装置和可操纵装置机器人臂受控运动过程中的碰撞避免。
背景技术
机器人系统和计算机辅助装置通常包括操纵器械以在工作位点执行任务的机器人或活动臂、和支撑采集工作位点图像的图像采集装置的至少一个机器人或活动臂。当机器人臂相互紧紧靠近操作时,存在这样的可能性:臂可能相互碰撞,并且由此导致臂损坏。当机器人臂一同操作时,可直接防止这种碰撞。然而,当机器人臂独立操作时,碰撞避免可远更具挑战性。
机器人臂包括通过一个或多个主动控制接头偶联在一起的多个连杆。在多种实施方式中,可提供多个主动控制接头。机器人臂还可包括一个或多个被动接头,其不被主动控制,但依从主动控制接头的运动。这种主动和被动接头可以是旋转或棱柱接头。可通过接头位置和连杆结构和偶联知识确定机器人臂的构型。
为避免机器人臂之间的碰撞,拥有臂构型信息和其各自在共同坐标系统中的位置信息是非常有用的。通过这种信息,控制其中一个机器人臂的运动的控制器可采取行动以避免与另一机器人臂碰撞。
控制器可采取以避免碰撞的一个行动是向指挥机器人臂的操作人员警示即将与另一机器人臂碰撞。作为这种警示系统的一个实例,U.S.2009/0192524 Al,名为"Synthetic Representation of a Surgical Robot"——其被引入本文作为参考,描述了安置了多个机器人臂的患者侧推车。作为这种警示系统的另一实例,U.S.2009/0326553,名为"Medical Robotic System Providing an Auxiliary View of ArticulatableInstruments Extending out of a Distal End of an Entry Guide"——其被引入本文作为参考,描述了具有延伸到进入引导件(entry guide)外的多种铰接器械的医疗机器人系统。作为这种警示系统的再一实例,U.S.2009/0234444 Al,名为"Method and Apparatusfor Conducting an Interventional Procedure Involving Heart Valves using aRobot-based X-ray Device"——其被引入本文作为参考,描述了这样的医疗机器人系统:其中X射线源和检测器安置在C-臂的相对端,从而可在利用导管控制机器人执行医疗程序期间采集患者解剖结构的X射线图像。
碰撞避免还可通过控制一个或多个机器人臂的运动的控制器自动进行。作为这种自动碰撞避免系统的实例,U.S.8,004,229,名为"Software center and highlyconfigurable robotic systems for surgery and other uses"——其被引入本文作为参考,描述了一种医疗机器人系统,其被配置以避免其机器人臂之间的碰撞。该机器人臂具有多余度,使得每个臂可有多种构型以实现其支持器械的预期位置和定向。每个控制器命令其相关机器人臂运动服从于二次约束,导致排除会导致与另一机器人臂碰撞的可能臂构型。
然而,当多个机器人臂被多个控制器控制时,如果多个控制器中多于一个试图避免碰撞,则可能造成混乱和无意的后果。这个问题在控制器之间没有或仅有有限的信息交流时加剧,如可以是机器人系统采用独立地操作的机器人臂时的情况。为避免机器人臂碰撞问题,可相继使用独立地操作的机器人臂,而非在工作位点同时使用。然而,在工作位点执行程序或任务期间同时使用机器人臂可以是有利的。
发明内容
因此,本发明的一个或多个方面的一个目的是其中实施的自动进行机器人臂碰撞避免的机器人系统和方法。
本发明的一个或多个方面的另一目的是其中实施的自动进行独立操作型机器人臂的碰撞避免的机器人系统和方法。
本发明的一个或多个方面的另一目的是其中实施的在不阻止任何机器人臂执行其目的任务的情况下自动进行机器人臂碰撞避免的机器人系统和方法。
这些和另外的目的通过本发明多种方面来实现,其中简而言之,一方面是机器人系统,包括:第一机器人臂,其支持可操纵装置,该可操纵装置具有工作端;和控制器,其被配置以控制第一机器人臂和第二机器人臂中至少一个的运动,同时避免第一和第二机器人臂之间的碰撞,其中第二机器人臂支持图像采集装置,该图像采集装置用于采集可操纵装置的工作端的多个图像,由此可生成可操纵装置的工作端的三维计算机模型;其中控制器被配置以避免第一和第二机器人臂之间的碰撞:通过利用可操纵装置的工作端的多个图像中的至少一个图像来确定可操纵装置的工作端相对于图像采集装置坐标系统的位置和定向,其中图像采集装置的坐标系统相应于采集图像的透视图;通过利用可操纵装置的工作端相对于图像采集装置坐标系统的确定的位置和定向来确定第一和第二机器人臂其中一个相对于共同坐标系统的构型和位置;和通过利用接收到的第一和第二机器人臂其中另一个的接头位置信息来确定第一和第二机器人臂其中另一个相对于共同坐标系统的构型和位置;通过利用第一和第二机器人臂相对于共同坐标系统的确定构型和位置来确定第一和第二机器人臂之间的即将的碰撞;和通过命令第一和第二机器人臂其中一个采取行动以避免即将的碰撞。
另一方面是机器人系统中实施的避免第一和第二机器人臂之间碰撞的方法,其中第一机器人臂支持可操纵装置,该可操纵装置具有工作端,其中第二机器人臂支持图像采集装置,以采集可操纵装置的工作端的多个图像,由此可生成可操纵装置的工作端的三维计算机模型,并且其中方法包括:利用可操纵装置的工作端的多个图像中的至少一个图像来确定可操纵装置的工作端相对于图像采集装置坐标系统的位置和定向,其中图像采集装置的坐标系统相应于采集图像的透视图;通过利用可操纵装置的工作端相对于图像采集装置坐标系统的确定位置和定向来确定第一和第二机器人臂其中一个相对于共同坐标系统的构型和位置;通过利用接收到的第一和第二机器人臂其中另一个的接头位置信息来确定第一和第二机器人臂其中另一个相对于共同坐标系统的构型和位置;利用第一和第二机器人臂相对于共同坐标系统的确定构型和位置来确定第一和第二机器人臂之间即将的碰撞;和命令第一和第二机器人臂其中一个采取行动以避免即将的碰撞。
另一方面是机器人系统,包括:第一机器人臂,其支持可操纵装置,该可操纵装置具有工作端;和处理器,其被编程以将第一机器人臂定位至第二机器人臂,该第二机器人臂支持图像采集装置,其中处理器通过如下进行定位:利用第一和第二机器人臂中至少一个的外部跟踪数据和运动学数据,在第一和第二机器人臂的初始位置处进行第一和第二机器人臂的低精度定位;利用由至少部分第一机器人臂的图像采集装置采集的至少一个图像和第一和第二机器人臂中至少一个的运动学数据,进行第一和第二机器人臂相对于第一设置位置的中精度定位,其中第一设置位置包括指示低精度定位的第一安全界限;和利用由可操纵装置的工作端的图像采集装置采集的至少一个图像和第一和第二机器人臂中至少一个的运动学数据,进行第一和第二机器人臂相对于第二设置位置的高精度定位,其中第二设置位置包括指示中精度定位的第二安全界限。
另一方面是通过定位第一和第二机器人臂的处理器实施的方法。第一机器人臂支持可操纵装置,该可操纵装置具有工作端。第二机器人臂支持图像采集装置。方法包括利用第一和第二机器人臂中至少一个的外部跟踪数据和运动学数据,在第一和第二机器人臂的初始位置处进行第一和第二机器人臂的低精度定位;利用由至少部分第一机器人臂的图像采集装置采集的至少一个图像和第一和第二机器人臂中至少一个的运动学数据,进行第一和第二机器人臂相对于第一设置位置的中精度定位,其中第一设置位置包括指示低精度定位的第一安全界限;和利用由可操纵装置的工作端的图像采集装置采集的至少一个图像和第一和第二机器人臂中至少一个的运动学数据,进行第一和第二机器人臂相对于第二设置位置的高精度定位,其中第二设置位置包括指示中精度定位的第二安全界限。
根据一些实施方式,运动控制系统包括控制器。控制器包括一个或多个处理器和偶联至一个或多个处理器的存储器。控制器偶联至计算机辅助外科装置,该计算机辅助外科装置具有第一活动臂,该第一活动臂偶联至可操纵装置,该可操纵装置具有工作端。控制器进一步偶联至第二活动臂,该第二活动臂偶联至图像采集装置,该图像采集装置独立于计算机辅助外科装置。控制器被配置以接收第一活动臂的一个或多个第一构型;接收第二活动臂的一个或多个第二构型;从图像采集装置接收工作端的第一多个图像;基于第一多个图像中的至少一个,确定工作端在共同坐标系统中的位置和定向;基于第一构型,确定第一活动臂在共同坐标系统中的第一活动臂位置和第一活动臂轨迹;基于第二构型,确定第二活动臂在共同坐标系统中的第二活动臂位置和第二活动臂轨迹;基于第一活动臂位置、第一活动臂轨迹、第二活动臂位置、和第二活动臂轨迹,确定第一活动臂动作、第二活动臂动作、或第一和第二活动臂一起动作是否会导致第一和第二活动臂之间不期望的关系;和发送第一运动命令至第一活动臂或第二活动臂以避免不期望的关系。
在一些实例中,共同坐标系统是图像采集装置的坐标系统,并且控制器进一步被配置以进一步基于工作端在共同坐标系统中的位置和定向来确定共同坐标系统中的第一活动臂位置。在一些实例中,共同坐标系统是计算机辅助外科装置的坐标系统,并且控制器进一步被配置以确定图像采集装置坐标系统中的第二活动臂位置,确定工作端在图像采集装置坐标系统中的位置和定向,和将第二活动臂位置和工作端的位置和定向从图像采集装置坐标系统变换至共同坐标系统。
在一些实例中,第一多个图像是来自图像采集装置的多个二维图像,并且控制器进一步被配置以根据二维图像确定工作端的位置和定向——甚至在可操纵装置的工作端被布置在图像采集装置和可操纵装置工作端之间的一个或多个对象阻挡时。在一些实例中,系统进一步包括查看器,其适于显示可操纵装置的工作端的工作空间的第二多个图像;和输入单元,其被配置以接收查看器上正在显示的图像内的用户指定目标区域的信息。控制器进一步被配置以发送第二运动命令至第二活动臂,使得图像采集装置采集用户指定目标区域的图像。
在一些实例中,输入单元包括视点跟踪单元,其被配置以跟踪用户在查看器显示屏上的视点,并且视点跟踪单元包括指示器,其可被用户操作以通过利用用户在显示屏上的当前凝视点来指示目标区域。在一些实例中,输入单元包括telestrator单元,其被配置以接收第二多个图像其中一个和在telestrator的显示屏上显示第二多个图像中的接收到的第二图像,并且telestrator单元包括标记单元,其可被用户操作以在第二多个图像中的显示图像上指示目标区域。
在一些实例中,系统进一步包括照相机,并且通过照相机采集第二多个图像。在一些实例中,系统进一步包括超声探头,并且通过超声探头采集第二多个图像。在一些实例中,第一活动臂具有多余自由度,使得针对可操纵装置工作端的每个可控位置和定向,第一活动臂具有第一多种可能的位置和定向;第二活动臂具有多余自由度,使得针对图像采集装置的每个可控位置和定向,第二活动臂具有第二多种可能的位置和定向;并且,发送至第一活动臂或第二活动臂的第一运动命令指挥第一活动臂移动至第一多种可能的位置和定向中的一种,或指挥第二活动臂移动至第二多种可能的位置和定向中的一种,避免不期望关系。
在一些实例中,控制器进一步被配置以基于第一活动臂位置和第一多种可能的位置和定向之间的差异和第二活动臂位置和第二多种可能的位置和定向之间的差异,确定发送第一运动命令至第一活动臂和第二活动臂中的哪一个,并且进行这种确定以最小化成本函数。
在一些实例中,第一运动命令指挥第一活动臂从第一活动臂位置移动至第一多种可能的位置和定向中的第一选定的一种位置和定向,或指挥第二活动臂从第二活动臂位置移动至第二多种可能的位置和定向中的第二选定的一种位置和定向——基于第一多种可能的位置和定向中的第一选定的一种位置和定向和第二多种可能的位置和定向中的第二选定的一种位置和定向之中哪个最小化成本函数。在一些实例中,不期望的关系选自第一活动臂和第二活动臂之间碰撞、第一活动臂和第二活动臂之间过于接近、和图像采集装置的目标区域被第一活动臂阻挡。
根据一些实施方式,控制医疗系统的运动的方法包括接收计算机辅助外科装置的第一活动臂的一个或多个第一构型,第一活动臂偶联至可操纵装置,该可操纵装置具有工作端;接收第二活动臂的一个或多个第二构型,第二活动臂偶联至图像采集装置,该图像采集装置独立于计算机辅助外科装置;从图像采集装置接收工作端的第一多个图像;基于第一多个图像中的至少一个,确定工作端在共同坐标系统中的位置和定向;基于第一构型,确定第一活动臂在共同坐标系统中的第一活动臂位置和第一活动臂轨迹;基于第二构型,确定第二活动臂在共同坐标系统中的第二活动臂位置和第二活动臂轨迹;基于第一活动臂位置、第一活动臂轨迹、第二活动臂位置、和第二活动臂轨迹,确定第一活动臂动作、第二活动臂动作、或第一和第二活动臂一起动作是否会导致第一和第二活动臂之间不期望的关系;和发送第一运动命令至第一活动臂或第二活动臂以避免不期望的关系。
在一些实例中,共同坐标系统是图像采集装置的坐标系统,并且方法进一步包括进一步基于工作端在共同坐标系统中的位置和定向来确定共同坐标系统中的第一活动臂位置。在一些实例中,共同坐标系统是计算机辅助外科装置的坐标系统,并且方法进一步包括确定图像采集装置坐标系统中的第二活动臂位置,确定工作端在图像采集装置坐标系统中的位置和定向,和将第二活动臂位置和工作端的位置和定向从图像采集装置坐标系统变换至共同坐标系统。
在一些实例中,第一多个图像是来自图像采集装置的多个二维图像,并且方法进一步包括根据二维图像确定工作端的位置和定向——甚至在可操纵装置的工作端被布置在图像采集装置和可操纵装置工作端之间的一个或多个对象阻挡时。在一些实例中,方法进一步包括确定第一运动命令从而最小化成本函数。
根据一些实施方式,运动控制系统包括跟踪系统和偶联至跟踪系统的控制器。控制器包括一个或多个处理器和偶联至一个或多个处理器的存储器。控制器偶联至计算机辅助外科装置,该计算机辅助外科装置具有第一活动臂,该第一活动臂偶联至可操纵装置,该可操纵装置具有工作端。控制器进一步偶联至第二活动臂,该第二活动臂偶联至图像采集装置,该图像采集装置独立于计算机辅助外科装置。控制器被配置以接收第一活动臂的第一运动学数据;接收第二活动臂的第二运动学数据;从跟踪系统接收第一活动臂的第一跟踪数据;从跟踪系统接收第二活动臂的第二跟踪数据;基于第一运动学数据和第一跟踪数据,确定第一活动臂的第一方位;基于第二运动学数据和第二跟踪数据,确定第二活动臂的第二方位;发送第一运动命令至第二活动臂,指挥第二活动臂移动到第一设置位置,采集至少部分可操纵装置的图像,同时在第一活动臂和第二活动臂之间保持第一安全界限,第一运动命令基于第一方位和第二方位;接收第一活动臂的第三运动学数据;接收第二活动臂的第四运动学数据;从图像采集装置接收一个或多个第一图像,该一个或多个第一图像采集至少部分可操纵装置;基于第三运动学数据和一个或多个第一图像,确定第一活动臂的第三方位;基于第四运动学数据和一个或多个第一图像,确定第二活动臂的第四方位;和发送第二运动命令至第二活动臂,指挥第二活动臂移动到不同于第一设置位置的第二设置位置,采集目标区域的图像,同时在第一活动臂和第二活动臂之间保持第二安全界限,第二运动命令基于第三方位和第四方位。
在一些实例中,控制器进一步被配置以接收第一活动臂的第五运动学数据;接收第二活动臂的第六运动学数据;从图像采集装置接收一个或多个第二图像,该一个或多个第二图像采集至少部分工作端;基于第五运动学数据和一个或多个第二图像,确定第一活动臂的第五方位;基于第六运动学数据和一个或多个第二图像,确定第二活动臂的第六方位;和发送第三运动命令至第二活动臂,指挥第二活动臂移动到不同于第一设置位置和第二设置位置的第三设置位置,采集工作端的图像,同时在第一活动臂和第二活动臂之间保持第三安全界限,第三运动命令基于第五方位和第六方位。
在一些实例中,第二安全界限是小于第一安全界限的数量级。在一些实例中,保持第一安全界限使第一活动臂和第二活动臂之间保持至少10厘米间隔,保持第二安全界限使第一活动臂和第二活动臂之间保持至少1厘米间隔。在一些实例中,第三安全界限是小于第二安全界限的数量级。在一些实例中,保持第二安全界限使第一活动臂和第二活动臂之间保持至少1厘米间隔,保持第三安全界限使第一活动臂和第二活动臂之间保持至少1毫米间隔。
在一些实例中,第一图像是来自图像采集装置的二维图像,并且控制器进一步被配置以根据二维图像确定可操纵装置的位置和定向——甚至在可操纵装置被布置在图像采集装置和可操纵装置工作端之间的一个或多个对象阻挡时。在一些实例中,第二图像是来自图像采集装置的二维图像,并且控制器进一步被配置以根据二维图像确定工作端的位置和定向——甚至在可操纵装置的工作端被布置在图像采集装置和可操纵装置工作端之间的一个或多个对象阻挡时。在一些实例中,系统进一步包括查看器,其适于显示从图像采集装置接收的一个或多个第二图像;和输入单元,其被配置以接收第二图像内的目标区域的信息。
在一些实例中,输入单元包括视点跟踪单元,其被配置以跟踪用户在查看器的显示屏上的视点,并且视点跟踪单元包括指示器,其可被用户操作以利用用户在显示屏上的当前凝视点来指示目标区域。在一些实例中,输入单元包括telestrator单元,其被配置以接收第二图像中的一个和在telestrator的显示屏上显示接收到的那个第二图像,并且telestrator单元包括标记单元,其可被用户操作以在显示的那个第二图像上指示目标区域。在一些实例中,系统进一步包括照相机,并且由照相机采集第二图像。在一些实例中,系统进一步包括超声探头,并且由超声探头采集第二图像。在一些实例中,第一运动命令最小化成本函数。
在一些实例中,第二活动臂具有多余自由度,使得针对图像采集装置的每个可控位置和定向,第二活动臂具有多种可能的位置和定向,发送至第二活动臂的第一运动命令指挥第二活动臂移动至多种可能的位置和定向中保持第一安全界限的一种位置和定向,发送至第二活动臂的第二运动命令指挥第二活动臂移动至多种可能的位置和定向中保持第二安全界限的一种位置和定向,和发送至第二活动臂的第三运动命令指挥第二活动臂移动至多种可能的位置和定向中保持第三安全界限的一种位置和定向。
根据一些实施方式,控制医疗系统的运动的方法包括接收计算机辅助外科装置的第一活动臂的第一运动学数据,第一活动臂偶联至可操纵装置,该可操纵装置具有工作端;接收第二活动臂的第二运动学数据,第二活动臂偶联至图像采集装置,图像采集装置独立于计算机辅助外科装置;从跟踪系统接收第一活动臂的第一跟踪数据;从跟踪系统接收第二活动臂的第二跟踪数据;基于第一运动学数据和第一跟踪数据,确定第一活动臂的第一方位;基于第二运动学数据和第二跟踪数据,确定第二活动臂的第二方位;发送第一运动命令至第二活动臂,指挥第二活动臂移动到第一设置位置,采集至少部分可操纵装置的图像,同时在第一活动臂和第二活动臂之间保持第一安全界限,第一运动命令基于第一方位和第二方位;接收第一活动臂的第三运动学数据;接收第二活动臂的第四运动学数据;从图像采集装置接收一个或多个第一图像,该一个或多个第一图像采集至少部分可操纵装置;基于第三运动学数据和一个或多个第一图像,确定第一活动臂的第三方位;基于第四运动学数据和一个或多个第一图像,确定第二活动臂的第四方位;和发送第二运动命令至第二活动臂,指挥第二活动臂移动到不同于第一设置位置的第二设置位置,采集目标区域的图像,同时在第一活动臂和第二活动臂之间保持第二安全界限,第二运动命令基于第三方位和第四方位。
在一些实例中,方法进一步包括接收第一活动臂的第五运动学数据;接收第二活动臂的第六运动学数据;从图像采集装置接收一个或多个第二图像,该一个或多个第二图像采集至少部分工作端;基于第五运动学数据和一个或多个第二图像,确定第一活动臂的第五方位;基于第六运动学数据和一个或多个第二图像,确定第二活动臂的第六方位;和发送第三运动命令至第二活动臂,指挥第二活动臂移动到不同于第一设置位置和第二设置位置的第三设置位置,采集工作端的图像,同时在第一活动臂和第二活动臂之间保持第三安全界限,第三运动命令基于第五方位和第六方位。
在一些实例中,方法进一步包括确定第三运动命令,以最小化成本函数。在一些实例中,第一图像是来自图像采集装置的二维图像,并且方法进一步包括根据二维图像确定可操纵装置的位置和定向——甚至在可操纵装置被布置在图像采集装置和可操纵装置工作端之间的一个或多个对象阻挡时。在一些实例中,第二图像是来自图像采集装置的二维图像,并且方法进一步包括根据二维图像确定工作端的位置和定向——甚至在可操纵装置的工作端被布置在图像采集装置和可操纵装置工作端之间的一个或多个对象阻挡时。
根据一些实施方式,机器人系统包括第一机器人臂,其支持可操纵装置,该可操纵装置具有工作端;和控制器,其被配置以控制第一机器人臂和第二机器人臂中至少一个的运动,同时避免第一和第二机器人臂之间碰撞。第二机器人臂支持图像采集装置,用于采集可操纵装置的工作端的多个图像,由此可生成可操纵装置的工作端的三维计算机模型。控制器被配置以通过如下避免第一和第二机器人臂之间碰撞:利用可操纵装置的工作端的多个图像中的至少一个图像来确定可操纵装置的工作端相对于图像采集装置坐标系统的位置和定向,其中图像采集装置的坐标系统相应于采集图像的透视图;利用可操纵装置的工作端相对于图像采集装置坐标系统的确定位置和定向来确定第一和第二机器人臂其中一个相对于共同坐标系统的构型和位置;和利用接收到的第一和第二机器人臂其中另一个的接头位置信息来确定第一和第二机器人臂其中另一个相对于共同坐标系统的构型和位置;利用第一和第二机器人臂相对于共同坐标系统的确定构型和位置来确定第一和第二机器人臂之间即将的碰撞;和命令第一和第二机器人臂其中一个采取行动以避免即将的碰撞。
在一些实例中,图像采集装置包括断层图像采集装置,用于采集多个二维图像,由此可辨别可操纵装置的工作端——甚至在可操纵装置的工作端被布置在图像采集装置和可操纵装置工作端之间的一个或多个对象阻挡时。在一些实例中,控制器被配置以通过利用第一机器人臂的构造和几何信息和可操纵装置工作端相对于图像采集装置坐标系统的确定位置和定向,确定第一机器人臂相对于图像采集装置坐标系统的构型和位置。
在一些实例中,控制器被配置以利用变换将图像采集装置坐标系统中的点转换至可操纵装置坐标系统,来确定第二机器人臂相对于可操纵装置坐标系统的构型和位置。利用可操纵装置的工作端相对于图像采集装置坐标系统的确定位置和定向,已确定变换。可操纵装置的坐标系统是共同坐标系统。在一些实例中,系统进一步包括查看器,其适于显示从可操纵装置工作端工作空间的采集图像衍生的图像;和输入单元,其被配置以接收查看器正在显示的图像内的用户指定目标区域的信息。控制器被配置以命令和控制第二机器人臂的运动,使得图像采集装置采集可操纵装置工作端的多个图像中的用户指定目标区域的图像。
在一些实例中,输入单元包括视点跟踪单元,其被配置以跟踪用户在查看器的显示屏上的视点。视点跟踪单元包括指示器,其可被用户操作以通过利用用户在显示屏上的当前凝视点来指示目标区域。在一些实例中,输入单元包括telestrator单元,其被配置以接收查看器上正在显示的图像和在telestrator的显示屏上显示接收到的图像。telestrator单元包括标记单元,其可被用户操作以在telestrator单元的显示屏正在显示的图像上指示目标区域。
在一些实例中,系统进一步包括照相机,并且由照相机采集可操纵装置工作端工作空间的采集图像。在一些实例中,系统进一步包括超声探头,并且由超声探头采集可操纵装置工作端工作空间的采集图像。在一些实例中,控制器与第一机器人臂关联以控制第一机器人臂的运动,同时避免与第二机器人臂碰撞,并且可操纵装置的坐标系统是共同坐标系统。在一些实例中,控制器与第二机器人臂关联以控制第二机器人臂的运动,同时避免与第一机器人臂碰撞,并且图像采集装置的坐标系统是共同坐标系统。
在一些实例中,第一机器人臂包括第一多个接头和第一多个连杆,其偶联在一起以提供第一机器人臂的多余自由度运动,使得针对可操纵装置工作端的每个可控位置和定向,第一机器人臂具有多种可能构型。控制器被配置以根据可操纵装置工作端的预期位置和定向和根据避免第一和第二机器人臂之间碰撞的二次约束,通过命令第一机器人臂配置成第一机器人臂多种可能构型中的一种,控制第一机器人臂的运动。
在一些实例中,第二机器人臂包括第二多个接头和第二多个连杆,其偶联在一起以提供第二机器人臂的多余自由度运动,使得针对图像采集装置的每个可控位置和定向,第二机器人臂具有多种可能构型。控制器被配置以根据图像采集装置的预期位置和定向和根据避免第一和第二机器人臂之间碰撞的二次约束,通过命令第二机器人臂配置成第二机器人臂多种可能构型中的一种,控制第二机器人臂的运动。
在一些实例中,第一机器人臂包括第一多个接头和第一多个连杆,其偶联在一起以提供第一机器人臂的多余自由度运动,使得针对可操纵装置工作端的每个可控位置和定向,第一机器人臂具有多种可能构型。第二机器人臂包括第二多个接头和第二多个连杆,其偶联在一起以提供第二机器人臂的多余自由度运动,使得针对图像采集装置的每个可控位置和定向,第二机器人臂具有多种可能构型。控制器被配置以控制第一和第二机器人臂其中一个的运动,该第一和第二机器人臂其中一个被配置成其多种可能构型中避免与第一和第二机器人臂其中另一个碰撞的一种。
在一些实例中,控制器被配置以通过处理第一和第二机器人臂的当前构型和其各自多种可能构型之间的差异以最小化成本函数,确定第一和第二机器人臂其中哪一个被配置成其多种可能构型中避免与第一和第二机器人臂其中另一个碰撞的构型。在一些实例中,控制器被配置以通过处理第一和第二机器人系统的所需接头运动以从其当前构型移动至其各自多种可能构型中的其他构型以最小化成本函数,确定第一和第二机器人臂其中哪一个被配置成其多种可能构型中避免与第一和第二机器人臂其中另一个碰撞的构型。
根据一些实施方式是避免第一和第二机器人臂之间碰撞的方法。第一机器人臂支持可操纵装置,该可操纵装置具有工作端。第二机器人臂支持图像采集装置,该图像采集装置用于采集可操纵装置工作端的多个图像,由此可生成可操纵装置工作端的三维计算机模型。方法包括:通过利用可操纵装置的工作端的多个图像中的至少一个图像,确定可操纵装置工作端相对于图像采集装置坐标系统的位置和定向,其中图像采集装置的坐标系统相应于采集图像的透视图;通过利用可操纵装置的工作端相对于图像采集装置坐标系统的确定位置和定向来确定第一和第二机器人臂其中一个相对于共同坐标系统的构型和位置;通过利用接收到的第一和第二机器人臂其中另一个的接头位置信息来确定第一和第二机器人臂其中另一个相对于共同坐标系统的构型和位置;利用第一和第二机器人臂相对于共同坐标系统的确定构型和位置来确定第一和第二机器人臂之间即将的碰撞;和命令第一和第二机器人臂其中一个采取行动以避免即将的碰撞。
根据一些实施方式,机器人系统包括支持可操纵装置的第一机器人臂,该可操纵装置具有工作端,和处理器,该处理器被编码以将第一机器人臂相对于支持图像采集装置的第二机器人臂定位。处理器如下进行定位:利用第一和第二机器人臂中至少一个的外部跟踪数据和运动学数据,在第一和第二机器人臂的初始位置处进行第一和第二机器人臂的低精度定位;利用由至少部分第一机器人臂的图像采集装置采集的至少一个图像和第一和第二机器人臂中至少一个的运动学数据,进行第一和第二机器人臂相对于第一设置位置的中精度定位,其中第一设置位置包括指示低精度定位的第一安全界限;和利用由可操纵装置的工作端的图像采集装置采集的至少一个图像和第一和第二机器人臂中至少一个的运动学数据,进行第一和第二机器人臂相对于第二设置位置的高精度定位,其中第二设置位置包括指示中精度定位的第二安全界限。
根据一些实施方式是通过处理器实施的定位第一和第二机器人臂的方法。第一机器人臂支持可操纵装置,该可操纵装置具有工作端。第二机器人臂支持图像采集装置。方法包括利用第一和第二机器人臂中至少一个的外部跟踪数据和运动学数据,在第一和第二机器人臂的初始位置处进行第一和第二机器人臂的低精度定位;利用由至少部分第一机器人臂的图像采集装置采集的至少一个图像和第一和第二机器人臂中至少一个的运动学数据,进行第一和第二机器人臂相对于第一设置位置的中精度定位,其中第一设置位置包括指示低精度定位的第一安全界限;和利用由可操纵装置的工作端的图像采集装置采集的至少一个图像和第一和第二机器人臂中至少一个的运动学数据,进行第一和第二机器人臂相对于第二设置位置的高精度定位,其中第二设置位置包括指示中精度定位的第二安全界限。
本发明不同方面的其他目的、特征和优势将通过下文对其优选实施方式的描述而显而易见,其描述应结合附图理解。
附图说明
图1示例应用本发明方面的机器人系统的框图。
图2示例在应用本发明方面的机器人系统中实施的、用于在图像采集装置机器人臂相对于可操纵装置机器人臂移动时进行图像采集装置机器人臂和可操纵装置机器人臂的多精度定位的方法的流程图。
图3示例在应用本发明方面的机器人系统中实施的、用于通过图像采集装置坐标系统的透视图自动避免独立地操作的机器人臂之间碰撞的方法的流程图。
图4示例在应用本发明方面的机器人系统中实施的、用于通过可操纵装置坐标系统的透视图自动避免独立地操作的机器人臂之间碰撞的方法的流程图。
图5示例在应用本发明方面的机器人系统中实施的、用于控制图像采集装置机器人臂以使其图像采集装置采集用户选定目标区域的图像同时避免与另一机器人臂碰撞的方法的流程图。
图6示例在应用本发明方面的机器人系统中实施的、用于根据动作计划控制图像采集装置机器人臂的运动同时避免与另一机器人臂碰撞的方法的流程图。
图7示例应用本发明方面的机器人系统中的用于避免以偶联-控制模式操作的两机器人臂碰撞的部分的框图。
图8示例利用本发明方面可用的多孔医疗机器人系统的操作室的透视图。
图9示例本发明方面可用的多孔医疗机器人系统的患者侧推车的前视图。
图10示例本发明方面可用的多孔医疗机器人系统中可用的器械的透视图。
图11示例应用本发明方面的机器人系统的控制台的前视图。
图12示例应用本发明方面的机器人系统中可用的图像采集系统的透视图。
图13示例本发明方面可用的单孔医疗机器人系统的患者侧推车的透视图。
图14示例本发明方面可用的单孔医疗机器人系统中所用的、带有延伸至其外的铰接器械的进入引导件的远端的透视图。
图15示例本发明方面可用的单孔医疗机器人系统中所用的进入引导件的剖视图。
具体实施方式
作为实例,图1示例机器人或计算机辅助系统1000的不同部件的框图,其中实施用于自动避免两个或更多个机器人或活动臂之间碰撞的方法2000、2500、和4000。图2描述定位机器人或活动臂的多步法。图3、4的提供描述了方法2000、2500,其一般可用于独立地操作的机器人或活动臂。图5-7的提供描述了方法4000,其一般可用于通过控制可操纵装置机器人或活动臂的控制器来控制图像采集装置机器人或活动臂的运动。方法2000、2500、和4000可用的机器人系统1000的实例参考图8-15来描述。图8-12的提供利用带有多个机器人或活动臂的患者侧推车3010描述了机器人或计算机辅助系统3000,该机器人或活动臂适于执行多孔进入至工作位点的程序。图13-15的提供描述了机器人系统3000的可选的患者侧推车4010,其中患者侧推车4010具有单个机器人或活动臂,其适于执行单孔进入至工作位点的程序。
在描述图1-7示例的方法2000、2500、4000的详细内容之前,先描述机器人或计算机辅助系统3000,以提供关于机器人或计算机辅助系统1000的实施的背景和另外的细节。虽然本文描述医疗机器人或计算机辅助外科系统作为机器人或计算机辅助系统1000的实例,但要理解在此请求保护的本发明的不同方面不限于这种类型的机器人或计算机辅助系统。
参考图8,示例操作室的透视图,其中向外科医生提供医疗机器人系统3000,以对患者执行医疗程序。这种情况下的医疗机器人系统是微创机器人外科(MIRS)系统,包括患者侧推车3010、图像采集系统3020、和控制台3030。
患者侧推车3010,参考图9详细描述,具有多个机器人臂以支持和操纵多个装置,如器械和至少一个内窥镜。在使用患者侧推车3010时,被多个机器人或活动臂支持的装置中每一个通过其专属的进入孔被引入患者。
控制台3030,参考图11详细描述,包括输入装置,用于指挥患者侧推车3010的多个机器人臂中的相关机器人臂的运动和其各自的支持装置的操作。控制台3030和患者侧推车3010通过线缆3031通信。
图像采集系统3020,参考图12详细描述,采集多个图像,如患者体内工作位点指定目标区域内的一个或多个对象的一系列二维图像投影。然后可在无需提前知道一个或多个对象的三维形状的情况下利用多个图像,以常规方式如计算机断层扫描中所用的方式,生成一个或多个对象的三维计算机模型。
控制单元3021可被提供在铰接操作台3040的下方或侧方,使得辅助人员可利用控制单元3021上提供的操纵杆或其他控制输入来手动控制图像采集系统3020的图像采集装置的运动。控制单元3021和图像采集系统3020通过线缆3022或利用无线技术通信。可选地,控制单元3021可被提供在另一地点,并以有线或无线移动实体与图像采集系统3020通信。控制单元3021可包括至少一个处理单元和存储器。在一些实例中,处理单元可控制控制单元3021中硬件和/或软件的操作和/或运行。处理单元可包括一个或多个中央处理单元(CPU)、多核处理器、微处理器、微控制器、数字信号处理器、现场可编程门阵列(FPGAs)、定制处理器/专用集成电路(ASIC)、和/或类似物。存储器可用于存储一个或多个软件和/或固件应用以及控制单元3021要用的各种数据结构。存储器还可包括一种或多种类型的机器可读介质。机器可读介质的一些常见形式可包括软盘、柔性盘(flexible disk)、硬盘、磁带、任何其他磁介质、CD-ROM、任何其他光学介质、打孔卡、纸带、任何其他带有孔图案的物理介质、RAM、PROM、EPROM、FLASH-EPROM、任何其他存储器芯片或盒、和/或适于处理器或计算机读取的任何其他介质。
可选地,图像采集系统3020的图像采集装置的运动可由操作根据本发明方面的控制台3030的输入装置中的相关输入装置的外科医生来控制。可选地,图像采集系统3020的图像采集装置的运动可通过控制台3030的处理器被自动控制,使得图像采集装置自动采集工作位点的用户指定目标区域的多个图像,同时避免与根据本发明方面的患者侧推车3010的机器人臂碰撞。控制台3030和图像采集系统3020通过线缆3050通信。
作为实例,图9示例患者侧推车3010的前视图。在一般应用中,机器人臂34、36支持器械33、35,机器人臂38支持立体内窥镜37。第四机器人臂32可被利用,使得另一器械31可连同器械33、35和内窥镜37被引入工作位点。可选地,第四机器人臂32可用于将第二内窥镜或另一图像采集装置如超声换能器引至工作位点。
每一个机器人或活动臂通常由偶联在一起并且通过可致动接头操纵的连杆构成。每一个机器人臂包括设置臂和装置操纵器。设置臂定位其支持的装置,使得枢转点位于其进入患者的进入孔处。然后装置操纵器可操纵其支持的装置,使得其可围绕枢转点枢转、插入和撤出进入孔、和围绕其轴线旋转。在此实例中,机器人臂被安置在患者侧推车3010的可移动底座3015上。可选地,机器人臂可附接至操作台一侧的滑块,操作室墙壁上的滑块或操作室房顶上的滑块。
作为实例,图10示例器械100,其可用于器械33、35或31。器械100包括接口机座(interface housing)108、轴104、工作端102、和包括一个或多个腕接头的腕机构106。接口机座108可拆卸地附接至机器人臂,从而机械地偶联于所附接的机器人臂的器械操纵器中的致动器(如马达)。线缆或杆——偶联于器械操纵器的致动器并且从接口机座108穿过轴104延伸至腕机构106的一个或多个腕接头和器械末端执行器102的夹钳——以常规方式致动腕接头和夹钳。器械操纵器还可操纵器械在进入孔处的围绕其枢转点的俯仰和偏转角旋转,操纵器械的围绕器械的轴线的翻滚角旋转,和根据处理器43命令,沿机器人臂上的轨迹插入和撤回器械。
作为实例,图11示例控制台3030的前视图。控制台3030具有左侧和右侧输入装置41、42,用户可分别用他/她的左手和右手抓握,来操纵患者侧推车3010的多种机器人或活动臂所支持的相关装置,优选地以六个自由度("DOF")操纵。带有脚趾和脚跟控制的脚踏板44被提供在控制台3030上,因此用户可控制与脚踏板关联的装置的运动和/或致动。处理器43被提供在控制台中,用于控制和其他目的。立体视觉显示器45也被提供在控制台中,使得用户可通过内窥镜37的立体照相机采集的图像在立体视觉下观看工作位点。左右目镜46和47,被提供在立体视觉显示器45中,使得用户可分别通过用户的左眼和右眼来观看显示器45中的左和右二维("2D")显示屏。
处理器43执行医疗机器人系统的不同功能。其执行的一个重要功能是转换和传递输入装置41、42的机械动作,以指挥其相关装置操纵器中的致动器致动其各自的接头,使得外科医生可有效操纵当时与输入装置41、42关联的装置,如工具器械31、33、35和内窥镜37。处理器43的另一功能是实施本文描述的方法、交叉偶联控制逻辑、和控制器。
虽然是以处理器进行描述,但要理解处理器43可通过硬件、软件和固件的任意组合来实施。而且,其如本文描述的功能可由一个单元来执行,或拆分到多个子单元,其中每一个可进而通过硬件、软件和固件的任意组合来实施。进一步,虽然是作为控制台一部分来显示或物理上邻近于控制台,但处理器43还可作为子单元遍及系统3000分布。
美国专利号6,659,939B2,名为"Cooperative MinimallyInvasive TelesurgicalSystem"——其被引入本文作为参考,提供了关于如本文描述的多孔医疗机器人系统的其他细节。
作为实例,图12示例图像采集系统3020,其具有安置于底座1106的机器人或活动臂1101。机器人臂1101包括转盘1107、第一连杆1102、第二连杆1103、腕机构1104、和C-臂1105。转盘1107可利用转盘接头1108相对于底座1106旋转(如箭头“a”所示)。第一连杆1102可利用肩式接头1109相对于转盘1107旋转(如箭头“b”所示)。第二连杆1103可利用肘式接头1110相对于第一连杆1102旋转(如箭头“c”所示)。腕机构1104可利用翻滚接头1111相对于第二连杆1103旋转(如箭头“d”所示)。C-臂1105可利用俯仰接头1112相对于腕机构1104旋转(如箭头"e"所示),并且可利用偏转接头1121相对于腕机构1104旋转(如箭头“j”所示)。
C-臂1105包括第一分支1113、第二分支1114、和中央部分1115。第一和第二分支1113、1114可利用延伸接头1120远离或朝向中央元件1115延伸(如箭头"f"所示)。第一分支1113具有布置在其远端的X射线检测器1116,第二分支1114具有布置在其远端的X射线源1117。X射线检测器1116可相对于第一分支1113的远端旋转(如箭头“g”所示)。X射线源1117可相对于第二分支1114的远端旋转(如箭头“h”所示)。在这种安排下,X射线源和X射线检测器被布置在C-臂1105的的相对端,从而形成图像采集装置。通过致动转盘接头1108、肩式接头1109、肘式接头1110、翻滚接头1111、俯仰接头1112、偏转接头1121、和延伸接头1120,C-臂1105可被相对于患者定位,使得C-臂1105可移动,从而图像采集装置(包括X射线源1117和X射线检测器1116)可采集患者体内工作位点的指定目标区域内的一个或多个对象的一系列二维投影。然后可以锥束计算机断层扫描的常规方式利用该系列二维投影生成一个或多个对象的三维计算机模型。
前文引入作为参考的美国公开申请2009/0234444Al提供了关于这种图像采集系统以及其在对患者执行医疗程序过程中的应用的其他细节。
作为实例,图13示例可选的患者侧推车4010,其可用于机器人系统3000,通过进入引导件200将多种铰接器械通过患者的单个进入孔引至工作位点。孔可以是微创切口或天然身体孔口。进入引导件200是被机器人臂4011支持和操纵的圆柱形结构,机器人臂4011安置在底座4015上并且包括设置臂4012和进入引导件操纵器4013。设置臂4012包括多个连杆和接头,用于在孔处定位进入引导件200。如该图所示,设置臂4012包括棱柱接头,用于调节设置臂4012的高度(如箭头“A”所示);和多个旋转接头,用于调节设置臂4012的水平位置(如箭头“B”和“C”所示)。进入引导件操纵器4013用于分别使进入引导件200(和同时布置在其中的铰接器械)在围绕枢转点偏转、俯仰和翻滚角旋转方面自动地枢转,如箭头D、E和F所示。铰接器械操纵器(未显示)位于机座4014中。
如图14所示,进入引导件200具有延伸到其远端外的铰接器械如铰接外科器械231、241和铰接立体摄像器械211(或其他图像采集装置器械)。摄像器械211具有位于其末端的一对立体图像采集元件311、312和光纤线缆313(其近端偶联于光源)。外科器械231、241具有工作端331、341。虽然仅显示两个器械231、241,但进入引导件200可引导在患者的工作位点执行医疗程序所需的另外的器械。例如,如图15中的进入引导件200的剖视图所示,通道351可用于穿过进入引导件200并且穿出其远端延伸另一铰接外科工具。通道431、441分别为铰接外科工具器械231、241所用,通道321为铰接摄像器械211所用。
当患者侧推车4010用于机器人系统3000时,控制台3030的立体视觉显示器45显示由铰接摄像器械211采集的立体图像获得的立体图像。而且,控制台3030的处理器43转换和传递输入装置41、42的机械动作,以致动装置如进入引导件200、铰接外科器械231、241、和铰接摄像器械211的接头,此时该接头与输入装置41、42关联。
每个铰接器械包括多个可致动接头和偶联于接头的多个连杆。作为实例,如图14所示,第二铰接器械241包括第一、第二、和第三连杆322、324、326,第一和第二接头323、325,和腕组件327。第一接头323偶联第一和第二连杆322、324,第二接头325偶联第二和第三连杆324、326,使得第二连杆324可围绕第一接头323以俯仰和偏转枢转,同时第一和第三连杆322、326保持相互平行。第一铰接器械231和照相机铰接器械211可类似的构造和操作。
美国专利号7,725,214,名为"Minimally Invasive Surgical System"——其被引入本文作为参考,提供关于本文描述的单孔医疗机器人系统的其他细节。
现再参考图1,示例机器人系统1000的部件的框图来描述本发明的多个方面。在此实例中,机器人系统1000具有第一可操纵装置1001、第一图像采集装置1002和照相机1003。第一可操纵装置1001可以是被患者侧推车3010的机器人臂支持和操纵的器械如器械33、35中的一个。可选地,第一可操纵装置1001可以是进入铰接器械延伸穿过的进入引导件,如进入被患者侧推车4010的机器人臂支持和操纵的进入引导件200。还显示了第二可操纵装置1004,其可以是如第一可操纵装置1001的另一装置。还显示了第二图像采集装置1005,其可提供不同于第一图像采集装置1002的成像模式。虽然基于示例目的显示了两个可操纵装置和两个图像采集装置,但要理解实际上机器人系统1000可包括更多或更少个每一种这样的装置,以对工作位点的对象执行任务或程序。还可包括另外的照相机。
装置控制器1021控制机器人臂1011的运动,以响应输入单元1031的命令来定位和定向第一可操纵装置1001的工作端。输入单元1031可以是用户操作的输入装置,如控制台3030的输入装置41、42中的一种或脚踏板44。可选地,输入单元1031可以是执行已存储的程序指令的处理器,如控制台3030的处理器43。可选地,输入单元1031可是通过总线1040与控制器1022、1023、1024、1025和/或输入单元1032、1033、1034、1035中的一个或多个通信的偶联控制逻辑,该控制器和/或输入单元与第一图像采集装置1002、照相机1003、第二可操纵装置1004、和第二图像采集装置1005关联。
同样,装置控制器1024控制机器人臂1014的运动,以响应输入单元1034的命令来定位和定向第二可操纵装置1004的工作端。输入单元1034可以是用户操作的输入装置,如控制台3030的输入装置41、42中的一个或脚踏板44。可选地,输入单元1034可以是执行已存储的程序指令的处理器,如控制台3030的处理器43。可选地,输入单元1034可是通过总线1040与控制器1021、1022、1023、1025和/或输入单元1031、1032、1033、1035中的一个或多个通信的偶联控制逻辑,该控制器和/或输入单元与第一可操纵装置1001、第一图像采集装置1002、照相机1003、和第二图像采集装置1005关联。
第一图像采集装置1002可被其机器人臂1012(或其他电动机构)操纵以采集处于工作位点的对象的多个二维图像层面或投影,由此可在不提前知道该对象形状的情况下利用成像模式如超声波、X射线荧光透视、计算机断层扫描(CT)、和磁共振成像(MRI)计算机生成该对象的三维模型。控制器1022控制机器人臂1012的运动,以响应输入单元1032的命令来定位和定向第一图像采集装置1002。输入单元1032可以是用户操作的输入装置,如控制台3030的输入装置41、42中的一种。可选地,输入单元1032可以是执行已存储的程序指令的处理器,如控制台3030处理器43。可选地,输入单元1032可以是通过总线1040与控制器1021、1023、1024、1025和/或输入单元1031、1033、1034、1035中的一个或多个通信的偶联控制逻辑,该控制器和/或输入单元与第一可操纵装置1001、照相机1003、第二可操纵装置1004、和第二图像采集装置1005关联。第一图像采集装置1002和其机器人臂1012可组合形成图像采集系统,如图像采集系统3020。
第二图像采集装置1005可与第一图像采集装置1002相似地构造和操作,采集处于工作位点的对象的多个二维图像投影,由此可在不提前知道该对象形状的情况下利用成像模式如超声波、X射线荧光透视、计算机断层扫描(CT)、和磁共振成像(MRI)计算机生成该对象的三维模型。一般,第一和第二图像采集装置1002、1005提供不同的成像模式。当与第一图像采集装置1002相似地构造时,控制器1025控制机器人臂1015的运动,以响应输入单元1035的命令来定位和定向第二图像采集装置1005。输入单元1035可以是用户操作的输入装置,如控制台3030的输入装置41、42中的一种。可选地,输入单元1035可以是执行已存储的程序指令的处理器,如控制台3030的处理器43。可选地,输入单元1035可是通过总线1040与控制器1021、1022、1023、1024和/或输入单元1031、1032、1033、1034中的一个或多个通信的偶联控制逻辑,该控制器和/或输入单元与第一可操纵装置1001、第一图像采集装置1002、照相机1003、和第二可操纵装置1004关联。第二图像采集装置1005和其机器人臂1015可组合形成图像采集系统,如图像采集系统3020。
可选地,第二图像采集装置1005可不同于第一图像采集装置1002构造。例如,第二图像采集装置1005可被第一和第二可操纵装置1001、1004中的一个支持、定位、和定向,而非具有其专属的机器人臂、控制器、和输入单元。这种第二图像采集装置的实例包括插入式(drop-in)超声探头或光学相干断层扫描探头。关于这种超声探头的详细内容,参见例如U.S.2007/0021738Al,名为"Laparoscopic Ultrasound Robotic Surgical System"——其被引入本文作为参考。
照相机1003可被机器人臂1013支持和操纵,采集工作位点的立体图像,如图9的内窥镜37。作为可选的实例,照相机1003可以是图14的铰接摄像器械211。控制器1023控制机器人臂1013(或铰接摄像器械211的接头)的运动,以响应输入单元1033的命令来定位和定向照相机1003的图像采集元件。输入单元1033可以是用户操作的输入装置,如控制台3030的输入装置41、42中的一种。可选地,输入单元1033可以是执行已存储的程序指令的处理器,如控制台3030的处理器43。可选地,输入单元1033可是通过总线1040与控制器1021、1022、1024、1025和/或输入单元1031、1032、1034、1035中的一个或多个通信的偶联控制逻辑,该控制器和/或输入单元与第一可操纵装置1001、图像采集装置1002、第二可操纵装置1004、和第二图像采集装置1005关联。
可选地,照相机1003可被第一和第二可操纵装置1001、1004中的一个支持、定位和定向,而非具有其专属的机器人臂、控制器、和输入单元。例如,照相机可以是栓系式照相机,其可通过可操纵装置拉动拴绳(一个或多个)来定向。在这种情况下,照相机不具有其专属的机器人臂、控制器、和输入单元。这种栓系式照相机的实例被描述于美国专利申请公开号2012/02900134,名为"Estimation of a Position and Orientation of a Frame Usedin Controlling Movement of a Tool"——其被引入本文作为参考。
机器人臂1011、1012、1013、1014、1015中的每一个均包括多个连杆和多个可致动接头,其位置和/或速度被多个接头传感器感应。来自每个机器人臂1011、1012、1013、1014、1015的多个接头传感器的信息基于控制目的被提供给其各自的控制器1021、1022、1023、1024、1025,并且可基于碰撞避免目的经总线1040被提供给其他控制器中的一个或多个,因为这种接头信息指示机器人臂1011、1012、1013、1014、1015的构型信息。
控制单元1021-1025中的每一个均可包括至少一个处理单元和存储器。在一些实例中,处理单元可控制各自的控制单元1021-1025的硬件和/或软件的操作和/或运行。每个处理单元可包括一个或多个中央处理单元(CPU)、多核处理器、微处理器、微控制器、数字信号处理器、现场可编程门阵列(FPGA)、定制处理器/专用集成电路(ASIC)、和/或类似物。存储器可用于存储将被各个控制单元1021-1025使用的一个或多个软件和/或固件应用以及不同的数据结构。存储器还可包括一种或多种类型的机器可读介质。机器可读介质的一些常见形式可包括软盘、柔性盘、硬盘、磁带、任何其他磁介质、CD-ROM、任何其他光学介质、打孔卡、纸带、任何其他带有孔图案的物理介质、RAM、PROM、EPROM、FLASH-EPROM、任何其他存储器芯片或盒、和/或适于处理器或计算机读取的任何其他介质。
机器人系统1000还包括立体查看器或显示器1051,用于显示通过图像处理器1050由立体照相机1003采集的图像生成的立体图像和/或通过图像处理器1050由第一图像采集装置1002和/或第二图像采集装置1005采集的一个或多个对象的多个二维图像层面生成的一个或多个对象的三维计算机模型。在显示器1051上同时显示从照相机1003以及第一和第二图像采集装置1002、1005的一者或两者获得的图像之前,图像处理器1050定位图像,使得一个或多个对象的三维计算机模型被适当叠加在从立体照相机1003采集的图像获得的立体图像中的一个或多个对象的图像上,并相对于其定位。
作为实例,图3、4分别示例可在机器人系统1000中实施的、避免独立操作的图像采集装置和可操纵装置机器人臂之间碰撞的方法2000、2500的流程图。虽然基于说明目的显示为两种不同的方法,但要理解方法2000、2500是取自不同角度的基本上相同的方法。具体地,方法2000来自图像采集装置坐标系统的角度,并且可通过图像采集装置控制器进行,而方法2500来自可操纵装置坐标系统的角度,并且可通过可操纵装置控制器进行。
虽然本文描述方法时仅述及一个可操纵装置,但要理解在图像采集装置的视野中可看到多于一个装置的工作端时,那些装置中的每一个均根据该方法如所述可操纵装置处理,从而可避免其机器人臂和图像采集装置机器人臂之间的碰撞。例如,当机器人系统1000是图8的医疗机器人系统3000并且其包括图9的患者侧推车3010时,图像采集装置3020采集的图像中可见的可操纵装置31、33、35、37中的每一个均执行两种方法2000、2500的相关框。另一方面,当机器人系统1000是图8的医疗机器人系统3000并且其包括图13的患者侧推车4010时,进入引导件操纵器4013执行方法2000、2500的相关框,而延伸到进入引导件200外的铰接器械的工作端如进入引导件200的工作端处理。
为避免混乱和无意的结果,仅执行方法2000、2500中的一个来避免机器人臂之间碰撞。而且,优选装置控制器中仅一个执行碰撞避免方法。可预先确立、用户选择、或通过特定标准选择进行这种行动的控制器。
作为用户说明的实例,当机器人系统1000是图8的医疗机器人系统3000并且其包括图9的患者侧推车3010时,外科医生可与立体查看器45上显示的菜单互动,以选择控制单元3021执行方法2000或处理器43执行方法2500。如前所述,控制单元3021控制机器人臂1101的运动,机器人臂1101支持和操纵图像采集系统3020的图像采集装置1116、1117。另一方面,处理器43实施控制机器人臂34的运动的控制器,机器人臂34支持和操纵器械33,器械33可以是基于此实例目的的可操纵装置。
当机器人系统1000是图8的医疗机器人系统3000并且其包括图13的患者侧推车4010时,则方法2000、2500所述的可操纵装置是进入引导件200,而非铰接器械211、231、241中的一个。在这种情况下,其是进入引导件操纵器4013,其有与图像采集系统3020的机器人臂1101碰撞或被机器人臂1101撞击的风险。铰接器械211、231、241不具有任何机器人臂在患者身体外延伸的显著部分。其仅具有操纵器,该操纵器的运动总体上限制在进入引导件操纵器4013的机座区域4014内,如图13所示。显然,图像采集系统3020的机器人臂1101和进入引导件操纵器4013之间的碰撞避免可比图像采集系统3020的机器人臂1101和患者侧推车3010的机器人臂32、34、36、38之间的碰撞避免简单。这不仅因为患者侧推车3010有更多机器人臂32、34、36、38会与图像采集系统3020的机器人臂1101碰撞,而且因为患者侧推车3010的机器人臂32、34、36、38可比患者侧推车4010进入引导件机器人操纵器4013移动更频繁。
作为实例,图2示例在机器人系统1000中实施的、用于定位图像采集装置机器人臂和可操纵装置机器人臂的方法9000的流程图。利用此方法,在图像采集装置机器人臂移动接近可操纵装置机器人臂时进行较高精度定位。这种多步法以安全的方式提供高精度定位。
在框9001中,方法利用外部跟踪系统和机器人臂运动学数据,进行图像采集装置机器人臂和可操纵装置机器人臂在其初始位置处相对于共同坐标系统的低精度定位(例如,在数十厘米的精度范围内)。作为实例,外部跟踪系统可以是发送器/接收器类型,其通常利用策略地布置在图像采集装置和可操纵装置的机器人臂的已知方位上的发送器、和布置在发送器的传输距离内的一个或多个接收器。作为另一实例,外部跟踪系统可以是光学类型,其通常利用策略地布置在图像采集装置和可操纵装置的机器人臂的已知方位上的光学可辨目标、和经布置具有目标无阻挡视界的一个或多个光学检测器。可提供运动学数据——例如,通过布置以感应图像采集装置机器人臂和可操纵装置机器人臂的接头位置的编码器。然后可利用机器人臂构造、形状、和尺寸知识以常规方式组合接头位置,估测机器人臂的构型。
在框9002中,图像采集装置移向可操纵装置机器人臂以取得低风险设置位置,该低风险设置位置足够接近以使图像采集装置被图像采集装置机器人臂支持以采集至少部分可操纵装置机器人臂的图像,同时足够远离可操纵装置机器人臂以确保图像采集装置机器人臂不与可操纵装置机器人臂碰撞。在确定低风险设置位置时,方法还通过确保图像采集装置机器人臂和可操纵装置机器人臂之间不发生碰撞的第一安全界限考虑当前低精度水平的定位。例如,第一安全界限可保持图像采集装置机器人臂和可操纵装置机器人臂之间至少10厘米的距离,造成在确定这两个机器人臂的相对位置时的当前低精度。图像采集装置机器人臂的运动可如下进行:例如,通过操作人员在机器人臂控制器的协助下通过机器人臂控制器命令这种运动,来阻止不安全的运动。例如,机器人臂控制器可通过触觉装置如操纵杆向操作人员提供力反馈,从而提供抵抗不安全运动的阻力。可选地,其可通过机器人臂控制器以直接模式或交叉偶联模式自动进行。
在框9003中,方法利用至少部分可操纵装置机器人臂的一个或多个采集图像和机器人臂的运动学数据,进行图像采集装置机器人臂和可操纵装置机器人臂在其当前位置处相对于共同坐标系统的中精度定位(例如,在厘米精度范围内)。
在框9004中,方法然后等待操作人员的命令来启动图像采集装置机器人臂的运动以采集用户指定目标区域的图像。
在框9005中,图像采集装置移向可操纵装置机器人臂以取得图像采集设置位置,该图像采集设置位置足够接近以使图像采集装置被图像采集装置机器人臂支持以采集用户指定目标区域的图像,同时足够远离可操纵装置机器人臂以确保图像采集装置机器人臂不与可操纵装置机器人臂碰撞。在确定图像采集设置位置时,方法通过确保图像采集装置机器人臂和可操纵装置机器人臂之间不发生碰撞的第二安全界限考虑当前中精度水平的定位。例如,第二安全界限可保持图像采集装置机器人臂和可操纵装置机器人臂之间至少1厘米的距离,造成在确定这两个机器人臂的相对位置时的当前中精度。图像采集装置机器人臂的运动可如下进行——例如,通过操作人员在机器人臂控制器的协助下通过机器人臂控制器命令这种运动,来阻止不安全的运动。例如,机器人臂控制器可通过触觉装置如操纵杆向操作人员提供力反馈,从而提供抵抗不安全运动的阻力。可选地,该运动可直接通过图像采集装置控制器或通过与可操纵装置控制器偶联的控制模式来自动进行。
在框9006中,方法命令图像采集装置机器人臂相对于目标区域移动和命令被图像采集装置机器人臂支持的图像采集装置在这种运动过程中采集目标区域的图像,同时避免图像采集装置机器人臂和可操纵装置机器人臂碰撞。除采集目标区域的图像外,图像采集装置还至少采集被可操纵装置机器人臂支持的可操纵装置的工作端的图像。在这种情况下,可操纵装置的工作端接近目标区域,从而处于图像采集装置的视野内。在图像采集过程中,方法利用可操纵装置工作端的采集图像中的一个或多个和机器人臂的运动学数据,进行图像采集装置机器人臂和可操纵装置机器人臂在其当前位置相对于共同坐标系统的至少一个高精度定位(例如,在毫米精度范围内)。
描述框9006的方面的另外的细节如下参考图3、4来描述,描述框9005、9006的方面的另外的细节如下参考图5来描述。
现参考图3的方法2000,在框2001中,方法(优选通过图像采集装置控制器1022进行)接收支持和操纵图像采集装置的机器人臂的构型信息。当机器人臂包括通过多个接头偶联在一起的多个连杆时,机器人臂构型可由接头的感应位置和构成机器人臂的连杆和其他结构的已知几何确定。如前参考图1所述,这种机器人臂构型信息可由图像采集装置机器人臂中的多个传感器提供,如偶联于接头致动器的编码器。可选地,其可以是图像采集装置控制器1022响应输入装置1032的命令而命令的接头位置。
在框2002中,方法确定是否是时候进行图像采集装置相对于可操纵装置的定位。这种定位可在方法开始时进行一次,或其可定期进行以纠正可随时产生的任何定位误差。如果框2002中的确定是“是”,则方法通过进行框2003、2004而进行定位。另一方面,如果框2002中的确定是“否”,则方法越过定位,跳至框2005。
在框2003中,方法接收图像采集装置采集的可操纵装置工作端的图像。总体上,接收的图像是图像采集装置的图像采集锥面(image capturing cone)内的可操纵装置工作端和任何其他对象的二维层面或投影。
在框2004中,方法确定可操纵装置工作端相对于图像采集装置坐标系统的位置和定向(即,姿态),其相应于图像采集装置的图像采集锥面或视野的位置和定向。为此,方法通常利用工作端的在接收的图像中可辨别的人为和/或天然特征。在这种情况下,人为特征包括诸如特别布置在工作端以协助确定其姿态(即,位置和定向)的标记或结构的事物。天然特征包括诸如可操纵装置工作端结构的形状和已知几何的事物。即使工作端可能被部分阻挡,工作端的姿态也是可确定的。例如,工作端可被部分患者解剖结构、可操纵装置的其他部分、部分图像采集装置、其他医疗器械、和/或类似物阻挡。患者解剖结构可包括软组织、骨骼、牙齿、和/或类似物。为协助确定,图像采集装置采集的和方法经过框2001-2009循环时接收的图像的顺序可用于精细化姿态的确定。而且,可利用协助和用于进一步精细化可操纵装置工作端姿态的确定的常规工具跟踪技术。关于这种姿态确定技术和设计的另外细节,参见美国专利号8,108,072,名为"Methods and systems for robotic instrumenttool tracking with adaptive fusion of kinematics information and imageinformation"——其被引入本文作为参考,和美国公开号2010/0168763Al,名为"Configuration marker design and detection for instrument tracking"——其被引入本文作为参考。
在框2005中,方法接收支持和操纵可操纵装置的机器人臂的构型信息。在机器人臂包括通过多个接头偶联在一起的多个连杆时,机器人臂构型可由接头的感应位置和构成机器人臂的连杆和其他结构的已知几何来确定。如前参考图1所述,这种机器人臂构型信息可由可操纵装置机器人臂的多个传感器提供,如偶联于接头致动器的编码器。可选地,其可以是可操纵装置控制器1021响应输入装置1031的命令而命令的接头位置。可选地,其可以是通过跟踪内窥镜图像中的器械工作端而提供的一些接头位置,其与编码器测量相比可提供更佳的精度。
如果可操纵装置机器人臂是多余自由度(DOF)臂,则机器人臂的构型信息优选包括可操纵装置机器人臂的感应接头位置或命令接头位置。另一方面,如果仅有一个机器人臂构型可相应于其支持的可操纵装置的工作端的姿态,则该机器人臂构型理论上可由可操纵装置工作端的确定的姿态、可操纵装置和其机器人臂的已知构造和几何(例如,尺寸和形状)、和可操纵装置机器人臂的底座位置来确定。在这种情况下,可不必在框2005中接收感应或命令的接头位置的信息,仅需要可操纵装置机器人臂的底座位置。当可操纵装置机器人臂被安置于不移动的底座时,则底座位置是固定的,并且仅需确定一次和存储在存储器中。当可操纵装置机器人臂被安置于可移动底座时,则底座位置可通过如下确定:例如,通过外部传感器如策略地布置在地板上的压力传感器。作为另一实例,底座位置可通过发送器/接收器系统确定,其中一个或多个发送器布置在底座上,并且一个或多个接收器布置在固定方位。作为另一实例,底座位置(以及机器人臂构型)可通过光学跟踪系统或通过任何其他公知的位置感应手段来确定。
在框2006中,方法确定可操纵装置机器人臂在图像采集装置坐标系统中的构型和位置。由于可操纵装置工作端相对于图像采集装置坐标系统的姿态已在框2004被确定,在这种情况下,通过利用可操纵装置和其机器人臂的已知构造和几何连同在框2005接收的可操纵装置机器人臂构型信息,来确定其机器人臂在图像采集装置坐标系统中的构型和位置的确定。
在框2007中,方法确定图像采集装置机器人臂在图像采集装置坐标系统中的构型和位置。由于图像采集装置坐标系统由图像采集装置机器人臂远端的姿态限定,利用图像采集装置和其机器人臂的已知构造和几何连同在框2001接收的图像采集装置机器人臂构型信息来确定图像采集装置机器人臂在图像采集装置坐标系统中的构型和位置是简单的事情。
在框2008中,方法确定是否有图像采集装置机器人臂和可操纵装置机器人臂之间即将碰撞的威胁。优选地,利用在当前工序循环和在前工序循环的框2001-2007接收或确定的信息来进行确定。通过利用时间顺序信息,不仅可预期两个臂的轨迹,而且可估测其移动速率。通过此信息,可进行碰撞预期。当预期碰撞在指定时期内时,则认为碰撞即将发生,需要立即行动。碰撞预期可利用图像采集装置机器人臂和可操纵装置机器人臂之间的最小距离。在确定最小值时,基于安全目的,方法优选将机器人臂连杆近似于尺寸略大于实际连杆的几何形状。由于此时图像采集装置机器人臂的几何形状和操纵装置机器人臂的几何形状相对于彼此处于已知的位置和定向,直接计算确定代表图像采集装置机器人臂的几何形状和代表操纵装置机器人臂的几何形状之间的最小距离。
本领域技术人员还将理解,框2008的确定可用于检测操纵装置机器人臂和图像采集装置机器人臂之间的除即将碰撞之外的其他不期望的关系。在一些实施方式中,框2008可用于检测操纵装置机器人臂和图像采集装置机器人臂何时彼此过于接近,即使不即将发生碰撞。在一些实施方式中,框2008可用于检测操纵装置机器人臂阻挡图像采集装置要采集其图像的目标区域。
如果确定框2008是“否”,则方法跳回框2001,进行下一个工序循环的框2001-2008。另一方面,如果确定是“是”,则在框2009中,方法命令图像采集装置机器人臂采取行动以避免与可操纵装置机器人臂碰撞。命令的行动可以是暂停图像采集装置机器人臂的运动,直到可操纵装置机器人臂已移至碰撞安全位置。可选地,不中止图像采集装置机器人臂的全部运动,取而代之可调节其运动速度以避免与可操纵装置机器人臂碰撞。可选地,如果图像采集装置机器人臂是多余DOF臂,则可命令可选的臂构型以避免与可操纵装置机器人臂碰撞。可选地,可中止图像采集装置机器人臂的运动,并且可忽略可操纵装置控制器的碰撞避免任务来进行图4的方法2500。
在进行框2009后,然后方法循环回到框2001,处理下一个工序循环的信息。
现参考图4的方法2500,在框2501中,方法(优选通过可操纵装置控制器1021进行)接收支持和操纵可操纵装置的机器人臂的构型信息。在机器人臂包括通过多个接头偶联在一起的多个连杆时,机器人臂构型可由接头的感应位置和构成机器人臂的连杆和其他结构的已知几何来确定。如前参考图1所述,这种机器人臂构型信息可由图像采集装置机器人臂中的多个传感器提供,如偶联于接头致动器的编码器。可选地,其可以是可操纵装置控制器1021响应输入装置1031的命令而命令的接头位置。可选地,其可以是通过跟踪内窥镜图像中的器械工作端提供的一些接头位置,其可提供与编码器测量相比更佳的精度。
在框2502中,方法确定是否是时候进行图像采集装置相对于可操纵装置的定位。这种定位可在方法开始时进行一次,或其可定期进行以纠正可随时产生的任何定位误差。如果在框2502的确定是“是”,则方法通过进行框2503、2504来进行定位。另一方面,如果在框2502的确定是“否”,则方法越过定位,跳至框2505。
在框2503,方法接收图像采集装置采集的可操纵装置工作端的图像。总体上,接收的图像是图像采集装置的图像采集锥面或视野内的可操纵装置工作端和任何其他对象的二维层面或投影。作为实例,可操纵装置控制器1021可从第一图像采集装置1002或包括第一图像采集装置1002的图像采集系统中的处理器通过总线1040(或图8的线缆3050)接收图像。
在框2504,方法以与参考图3的框2004所述相同的方式确定可操纵装置工作端相对于图像采集装置坐标系统的位置和定向(即,姿态)。
在框2505,方法接收支持和操纵图像采集装置的机器人臂的构型信息。在机器人臂包括通过多个接头偶联在一起的多个连杆时,机器人臂构型可由接头的感应位置和构成机器人臂的连杆和其他结构的已知几何来确定。如前参考图1所述,这种机器人臂构型信息可由可操纵装置机器人臂的多个传感器提供,如偶联于接头致动器的编码器。可选地,其可以是图像采集装置控制器1022响应输入装置1032的命令而命令的接头位置。
在框2506,方法确定可操纵装置机器人臂在可操纵装置坐标系统中的构型和位置。由于可操纵装置坐标系统由可操纵装置机器人臂的远端姿态限定,利用在框2501接收的信息和可操纵装置和其机器人臂的已知构造和几何来确定可操纵装置机器人臂在可操纵装置坐标系统中的构型和位置是简单的事情。
在框2507,方法确定图像采集装置机器人臂在可操纵装置坐标系统中的构型和位置。一种这样做的方式是先确定图像采集装置机器人臂在图像采集装置坐标系统中的构型和位置,如在图3的框2007确定,然后利用下列变换方程将图像采集装置机器人臂的点从图像采集装置坐标系统转换至可操纵装置坐标系统:
其中MP是在可操纵装置坐标系统“M”中的点,是图像采集装置坐标系统“I”至可操纵装置坐标系统“M"”的变换式,和IP是在图像采集装置坐标系统"I"中的点。
方法可通过如下确定变换式比较可操纵装置工作端在图像坐标系统中的点(利用在框2504确定的其姿态信息)与可操纵装置工作端在可操纵装置坐标系统中的相应点(利用由在框2501接收的可操纵装置机器人臂构型的信息和可操纵装置的在前已知的尺寸、形状、和构造信息确定的其姿态信息)。关于这种坐标系统变换的另外细节,参见之前引入作为参考的美国专利申请公开号2012/02900134,名为"Estimation of a Position andOrientation of a Frame Used in Controlling Movement of a Tool"。
在框2508中,方法以与参考图3的框2008所述相似的方式确定是否有图像采集装置机器人臂和可操纵装置机器人臂之间即将碰撞的威胁。本领域技术人员还将理解,类似于框2008的确定,框2508也可用于检测除即将碰撞之外的操纵装置机器人臂和图像采集装置机器人臂之间的其他不期望的关系。
如果确定框2508是“否”,则方法跳回至框2501,进行下一个工序循环的框2501-2509。另一方面,如果确定是“是”,则在框2509,方法可通过图像采集装置控制器1022命令可操纵装置机器人臂或图像采集装置机器人臂采取碰撞避免行动。进行碰撞避免行动和采取的具体碰撞避免行动的实体可根据系统因素采用不同的形式。一个因素是图像采集装置和可操纵装置当时进行的任务的性质。另一因素是机器人臂的类型或结构或其在检测到即将碰撞时的相应速度和加速度。
作为图像采集装置和可操纵装置当时进行的任务的性质的实例,如果机器人系统1000是医疗机器人系统3000并且可操纵装置是对患者进行精细手术时所用的器械33、35中的一个,则期望不干扰支持器械的机器人臂。因此,在这种情况下,可优选通过改变图像采集装置机器人臂1101的轨迹来采取行动,以避免碰撞。为避免这种碰撞,图像采集装置机器人臂1101的运动可暂停,直到可操纵装置机器人臂已移至碰撞安全位置。可选地,不中止图像采集装置机器人臂1101的全部运动,取而代之可调节其运动的速度和/或方向,以避免与可操纵装置机器人臂碰撞。
作为机器人臂的类型或结构的实例,如果图像采集装置和可操纵装置机器人臂中的一者或两者具有多余自由度(DOF),则具有这种多余DOF的机器人臂中的一者可以可选的构型配置,而不影响其支持的装置的姿态。具体地,如果可操纵装置机器人臂具有多余DOF,则不必改变图像采集装置的轨迹,因为可取而代之将可操纵装置机器人臂配置成可选的构型,而不显著影响其支持的可操纵装置的操纵。当图像采集装置和可操纵装置机器人臂都具有多余DOF时,则选择第一和第二机器人臂其中一个,利用可选的构型来避免即将的碰撞——通过处理第一和第二机器人臂的当前构型和其各自的多种可能构型之间的差异,以最小化成本函数。可选地,选择可通过如下进行:处理第一和第二机器人系统的所需接头运动以从其当前构型移动至其各自多种可能构型中的其他构型,以最小化成本函数。
通过选择可选的构型可最小化数种可能的成本函数中的任一种。一种可能的成本函数可基于第一和第二机器人臂之间最小距离的负二次方。第二种可能的成本函数可基于第一和第二机器人臂连杆之间距离的负二次方的加权平均值,其中各连杆与被动或主动自由度相关。第三种可能的成本函数可基于第二成本函数,但仅可解释阈值(如预期安全界限数量级内的阈值)以下的距离。第四种可能的成本函数可基于第二成本函数的修改版本,其中测量第一和第二机器人臂的连杆周围的虚拟对象或缓冲区域之间的距离。第五种可能的成本函数可包括第四成本函数的缓冲区域和第三成本函数的距离阈值。第六种可能的成本函数可基于第一和第二机器人臂的限制操纵性指数,其中操纵性指数估测第一或第二机器人臂在可选的构型周围以任意方向移动的能力。第七种可能的成本函数可基于施加于第一和第二机器人臂的连杆和/或接头的虚拟势场。作为实例,第一和第二机器人臂的各连杆和/或接头可具有分配于其的虚拟电荷,并且可整合第一和第二机器人臂之间引起的虚拟推斥力,以确定第七种成本函数。
在进行框2509后,然后方法循环回到框2501,处理下一个工序循环的信息。
在进行方法2000、2500期间或之后,可进行工作位点对象的初始定位变换式的更新或再校准。例如,如果机器人系统1000是医疗机器人系统3000,则惯例是相对于公共(world)坐标系统定位每个工作位点对象。在这种情况下,工作位点对象包括器械31、33、35、内窥镜37、图像采集系统3020的图像采集装置1116、1117、和患者解剖结构。然而,在程序进行期间,定位误差可积累或另外以一定方式发生。因此,利用图像采集系统3020采集的器械31、33、35和内窥镜37的工作端的图像来更新其相对于固定坐标系统的初始定位变换式可能是有益的。
在图2、3的方法2000、2500中,图像采集装置和可操纵装置一般由不同的人独立地操作。例如,当机器人系统1000是医疗机器人系统3000时,站在操作台3040旁的辅助人员可操作控制单元3021来控制图像采集系统3020的运动,而外科医生可操作控制台3030的输入装置41、42来控制可操纵装置33、35的运动。然而,外科医生有时可需要在医疗程序进行期间也控制图像采集系统3020的运动。例如,当解剖结构的外视图的内窥镜图像显示在控制台3030的立体查看器45上时,外科医生可能想用解剖结构的内视图的三维X射线图像补充那些图像。然而,由于外科医生从事医疗程序的进行,自动控制图像采集系统3020以提供外科医生需要的目标区域视图的方法是有用的。
作为实例,图5示例在机器人系统1000中实施的、用于自动控制图像采集装置的运动以采集用户指定目标区域的图像、同时避免其机器人臂和另一机器人臂之间碰撞的方法4000。
在框4001中,方法接收工作位点处用户指定目标区域的信息。当用户观看显示器1051上的工作位点时,目标区域相对于当时显示在显示器1051上的工作位点的图像被指定。显示在显示器1051上的图像可由照相机1003如立体内窥镜采集的图像获得。可选地,其可由第二图像采集装置1005如超声探头采集的图像获得。可选地,显示在显示器1051上的图像可通过定位和叠加图像,既包括由照相机1003采集的那些图像获得的图像,又包括由第二图像采集装置1005采集的那些图像获得的图像。
作为用户相对于当时显示的图像指定目标区域的一种方式的实例是利用telestrator围绕telestration屏上的目标区域绘制闭合曲线,该telestration屏正在显示与当时在显示器1051上显示的图像相同的图像。关于这种telestrator的细节,参见美国公开申请号2007/0167702 Al,名为"Medical robotic system providing three-dimensional telestration"——其被引入本文作为参考。作为另一实例,用户可通过仅利用输入装置如鼠标控制显示器1051上光标的运动以使光标的路径限定目标区域来指定目标区域。作为用户指定目标区域的方式的另一实例,用户可利用视点跟踪器和用户控制的开关来指示显示器1051上的用户当前凝视点何时指定目标区域中心。在这种情况下,目标区域的形状可以是预定的,或其可通过用户当前注视的对象的形状来确定。作为用户指定目标区域的方式的再一实例,用户可远程控制可操纵装置工作端的运动,使得其触碰处于工作位点的对象,以指示目标区域应当是已被触碰的对象。
在框4002中,方法接收图像采集装置机器人臂和可操纵装置机器人臂的初始臂构型和底座位置的信息。初始臂构型的信息可通过从机器人臂的多个传感器接收的其构造信息和其接头位置信息来提供。公共坐标系统中的底座位置信息可通过提供这种信息的外部传感器来提供。这种外部传感器的一个实例是用于光学跟踪系统的光学传感器。另一实例是压力换能器,即策略地布置在工作位点地板上的已知位置的压力换能器阵列中的一个。
在框4003中,方法确定图像采集装置的设置位置,使得其适当地定位置以采集用户指定目标区域的所需图像。为此,方法首先利用在前确定的变换式和在框4002接收的信息,将目标区域从显示器坐标系统转换至图像采集装置坐标系统。然后,其利用在前确定的变换式和在框4002接收的信息,将目标区域从图像采集装置坐标系统转换至公共坐标系统。随着目标区域在公共坐标系统中已知,方法然后确定图像采集装置可采集用户指定目标区域的所需图像而不与可操纵装置机器人臂在公共坐标系统中的初始位置碰撞的设置位置。
在框4004中,方法确定图像采集装置采集用户指定目标区域的所需图像的动作计划。当图像采集装置是图12的图像采集装置3020时,动作计划可包括连杆1102、1103、腕机构1104和C-臂1105的计划运动。
在框4005中,方法命令图像采集装置运动至其设置位置——在接收到来自用户的这样做的命令后。当图像采集装置是图12的图像采集系统3020的图像采集装置1116、1117时,命令的运动一般需要旋转转盘接头1108以使机器人臂1101面向目标区域,和旋转肩式接头1109、肘式接头1110、翻滚接头1111、俯仰接头1112、和偏转接头1121以使X射线源1117和X射线检测器1116(即,图像采集装置)适当定位,从而开始采集用户指定目标区域的所需图像。
在框4006中,方法命令图像采集装置按照动作计划增量运动,同时避免图像采集装置机器人臂和可操纵装置机器人臂之间碰撞。方法在框4006进行的任务的另外细节参考图6描述。
在框4007中,方法确定动作计划是否完成。如果在框4007的确定是“否”,则方法跳回至框4006,命令图像采集装置按照动作计划的另一增量运动,同时避免图像采集装置机器人臂和可操纵装置机器人臂之间碰撞。
另一方面,如果在框4007的确定是“是”,则在框4008中,方法命令图像采集装置移回至其初始位置或预定停放位置——在接收到来自用户的这样做的命令后,以使其让路并且不再具有与可操纵装置机器人臂碰撞的风险。
作为实例,图6示例进行方法4000的框4006的方法的流程图。为补充描述,图7示例机器人系统中用于两个独立地操作的机器人臂之间碰撞避免的部分的框图。在图7示例的实例中,可操纵装置机器人臂模拟器6003、即将碰撞检测器6021、图像采集装置机器人臂模拟器6013、和增量动作生成器6004优选通过执行程序代码的处理器以常规方式实施。
在框4201中,方法接收可操纵装置机器人臂的运动命令。例如,参考图7,可操纵装置控制器6011的输出提供可操纵装置机器人臂致动器6012的接头命令。
在框4202中,方法确定可操纵装置机器人臂的位置和构型。例如,参考图7,可操纵装置机器人臂模拟器单元6003利用来自可操纵装置控制器6011的接头命令和可操纵装置机器人臂构造的已有知识,生成可操纵装置机器人臂的位置和构型信息。
在框4203中,方法确定图像采集装置的预期增量运动。例如,参考图7,增量动作生成器6004利用在图5的框4004确定的和存储器6005中存储的动作计划信息,生成图像采集装置的预期增量运动。在这种情况下,预期增量运动取决于图像采集装置的预期运动速度和经过图5的框4006-4007循环的工序循环时间。
在框4204中,方法确定图像采集装置机器人臂的位置和构型。例如,参考图7,图像采集装置机器人臂模拟器单元6013利用增量动作生成器6004提供的预期增量动作命令、图像采集装置机器人臂的当前位置和构型知识、和图像采集装置机器人臂构造的已有知识,生成图像采集装置机器人臂的位置和构型信息。
在框4205中,方法以与图3的框2008进行相似的方式确定是否有图像采集装置机器人臂和可操纵装置机器人臂之间即将碰撞的威胁。例如,参考图7,即将碰撞检测器6021利用机器人臂模拟器6003、6013提供的当前工序循环和在前工序循环的信息,确定两个臂之间的碰撞是否即将发生。通过利用时间顺序信息,不仅可预期两个机器人臂的轨迹,而且可估测其移动速率。通过这个信息,可进行碰撞预期。当预期碰撞在指定时期之内时,则认为碰撞即将发生,需要立即行动。
如果在框4205的确定是“否”,则在框4206中,方法命令图像采集装置机器人臂按照预期增量运动来移动。另一方面,如果在框4205的确定是“是”,则在框4207中,方法修改增量运动命令以避免即将碰撞——利用参考图3的框2009描述的行动中的一种作为实例。例如,在即将碰撞检测器6021已经确定图像采集装置机器人臂和可操纵装置机器人臂之间的碰撞即将发生后,其发送这样的指示至可操纵装置控制器6011,该可操纵装置控制器6011进而传达指示至图像采集装置控制器6001,以使其可采取矫正行动以避免碰撞。
控制单元1021-1025和/或3021的一些实施方式可包括非临时的有形的机器可读介质,其包括可执行代码,该可执行代码在被一个或多个处理器运行时可致使一个或多个处理器(例如,控制单元1021-1025和/或3021的处理单元)如上所述进行方法2000、2500、4000、和/或9000的工序。可包括方法2000、2500、4000、和/或9000的工序的机器可读介质的一些常见形式是,例如,软盘、柔性盘、硬盘、磁带,任何其他磁介质、CD-ROM、任何其他光学介质、打孔卡、纸带、任何其他带有孔图案的物理介质、RAM、PROM、EPROM、FLASH-EPROM、任何其他存储器芯片或盒、和/或适于处理器或计算机读取的任何其他介质。
虽然已关于优选实施方式对本发明的不同方面进行了描述,但要理解本发明覆盖所附权利要求的全部范围内的全部保护。

Claims (31)

1.运动控制系统,包括:
跟踪系统;和
偶联于所述跟踪系统的控制器,所述控制器包括:
一个或多个处理器;和
偶联于所述一个或多个处理器的存储器;
其中:
所述控制器被配置以偶联于计算机辅助装置,所述计算机辅助装置具有第一活动臂,所述第一活动臂偶联于可操纵装置,所述可操纵装置具有工作端;
所述控制器进一步被配置以偶联于第二活动臂,所述第二活动臂偶联于图像采集装置,所述图像采集装置独立于所述计算机辅助装置;
所述控制器被配置以:
从所述跟踪系统接收所述第一活动臂的第一跟踪数据;
从所述跟踪系统接收所述第二活动臂的第二跟踪数据;
基于所述第一跟踪数据,确定所述第一活动臂的第一方位;
基于所述第二跟踪数据,确定所述第二活动臂的第二方位;
发送第一运动命令至所述第二活动臂,所述第一运动命令指挥所述第二活动臂移动到第一设置位置以采集至少部分所述可操纵装置的图像,同时在所述第一活动臂和所述第二活动臂之间保持第一安全界限,所述第一运动命令基于所述第一方位和所述第二方位;和
从所述图像采集装置接收一个或多个第一图像,所述一个或多个第一图像采集至少部分所述可操纵装置。
2.根据权利要求1所述的运动控制系统,其中所述控制器进一步被配置以:
基于所述一个或多个第一图像,确定所述第一活动臂的第三方位;
基于所述一个或多个第一图像,确定所述第二活动臂的第四方位;
发送第二运动命令至所述第二活动臂,所述第二运动命令指挥所述第二活动臂移动到第二设置位置,以采集目标区域的图像,同时在所述第一活动臂和所述第二活动臂之间保持第二安全界限,所述第二设置位置不同于所述第一设置位置,并且所述第二运动命令基于所述第三方位和所述第四方位;和
从所述图像采集装置接收一个或多个第二图像,所述一个或多个第二图像采集至少部分所述工作端。
3.根据权利要求2所述的运动控制系统,其中所述第二安全界限小于所述第一安全界限。
4.根据权利要求2所述的运动控制系统,其中所述控制器进一步被配置以:
基于所述一个或多个第二图像,确定所述第一活动臂的第五方位;
基于所述一个或多个第二图像,确定所述第二活动臂的第六方位;和
发送第三运动命令至所述第二活动臂,所述第三运动命令指挥所述第二活动臂移动到第三设置位置,以采集所述工作端的图像,同时在所述第一活动臂和所述第二活动臂之间保持第三安全界限,所述第三设置位置不同于所述第一设置位置和所述第二设置位置,并且所述第三运动命令基于所述第五方位和所述第六方位。
5.根据权利要求4所述的运动控制系统,其中所述第三安全界限小于所述第二安全界限。
6.根据权利要求2所述的运动控制系统,其中所述控制器进一步被配置以:
基于所述一个或多个第二图像,确定所述第一活动臂的第五方位;
基于所述一个或多个第二图像,确定所述第二活动臂的第六方位;和
发送第三运动命令至所述第二活动臂,所述第三运动命令指挥所述第二活动臂移动到第三设置位置,以采集目标区域的图像,同时在所述第一活动臂和所述第二活动臂之间保持第三安全界限,所述第三设置位置不同于所述第一设置位置和所述第二设置位置,并且所述第三运动命令基于所述第五方位和所述第六方位。
7.根据权利要求1所述的运动控制系统,其中所述计算机辅助装置是计算机辅助外科装置。
8.根据权利要求1-7中任一项所述的运动控制系统,进一步包括:
查看器,适于显示所述可操纵装置的所述工作端的工作空间的一个或多个第二图像;和
输入单元,被配置以接收所述查看器上显示的所述一个或多个第二图像内所述工作空间中的用户指定目标区域的信息。
9.根据权利要求1-7中任一项所述的运动控制系统,其中:
所述第二活动臂具有多余自由度,使得针对所述图像采集装置的每个可控方位,所述第二活动臂有第一多种可能的位置和定向;以及
发送至所述第二活动臂的所述第一运动命令指挥所述第二活动臂移动至所述第一多种可能的位置和定向中的一种,从而最小化成本函数。
10.根据权利要求9所述的运动控制系统,其中所述成本函数基于所述第一活动臂与所述第二活动臂之间最小距离的的负二次方。
11.控制计算机辅助系统的方法,所述方法包括:
通过控制器从跟踪系统接收计算机辅助装置的偶联于所述控制器的第一活动臂的第一跟踪数据,所述第一活动臂偶联于可操纵装置,所述可操纵装置具有工作端;
通过控制器从所述跟踪系统接收偶联于所述控制器的第二活动臂的第二跟踪数据,所述第二活动臂偶联于图像采集装置,所述第二活动臂独立于所述计算机辅助装置;
通过所述控制器,基于所述第一跟踪数据,确定所述第一活动臂的第一方位;
通过所述控制器,基于所述第二跟踪数据,确定所述第二活动臂的第二方位;
通过所述控制器,发送第一运动命令至所述第二活动臂,所述第一运动命令指挥所述第二活动臂移动到第一设置位置以采集至少部分所述可操纵装置的图像,同时在所述第一活动臂和所述第二活动臂之间保持第一安全界限,所述第一运动命令基于所述第一方位和所述第二方位;和
通过所述控制器,从所述图像采集装置接收一个或多个第一图像,所述一个或多个第一图像采集至少部分所述可操纵装置。
12.根据权利要求11所述的方法,进一步包括:
通过所述控制器,基于所述一个或多个第一图像,确定所述第一活动臂的第三方位;
通过所述控制器,基于所述一个或多个第一图像,确定所述第二活动臂的第四方位;
通过所述控制器,发送第二运动命令至所述第二活动臂,所述第二运动命令指挥所述第二活动臂移动到第二设置位置,以采集目标区域的图像,同时在所述第一活动臂和所述第二活动臂之间保持第二安全界限,所述第二设置位置不同于所述第一设置位置,并且所述第二运动命令基于所述第三方位和所述第四方位;和
通过所述控制器,从所述图像采集装置接收一个或多个第二图像,所述一个或多个第二图像采集至少部分所述工作端或目标区域。
13.根据权利要求12所述的方法,进一步包括:
通过所述控制器,基于所述一个或多个第二图像,确定所述第一活动臂的第五方位;
通过所述控制器,基于所述一个或多个第二图像,确定所述第二活动臂的第六方位;和
通过所述控制器,发送第三运动命令至所述第二活动臂,所述第三运动命令指挥所述第二活动臂移动到第三设置位置,以采集所述工作端的图像,同时在所述第一活动臂和所述第二活动臂之间保持第三安全界限,所述第三设置位置不同于所述第一设置位置和所述第二设置位置,并且所述第三运动命令基于所述第五方位和所述第六方位。
14.非临时的机器可读介质,其包括可执行代码,所述可执行代码在被控制器的一个或多个处理器运行时可致使所述一个或多个处理器执行权利要求11-13中任一项所述的方法。
15.计算机辅助系统,包括:
第一活动臂,所述第一活动臂支持可操纵装置,所述可操纵装置具有工作端;和
控制器,所述控制器被配置以控制所述第一活动臂和第二活动臂中至少一个的运动,同时避免所述第一活动臂和第二活动臂之间的碰撞;
其中:
所述第二活动臂被配置以支持图像采集装置,以采集所述可操纵装置的所述工作端的多个图像,由此可生成所述可操纵装置的所述工作端的三维计算机模型;
所述控制器被配置以通过确定所述可操纵装置的所述工作端相对于所述图像采集装置的坐标系统的位置和定向,而避免所述第一活动臂和第二活动臂之间的碰撞,所述确定包括利用所述可操纵装置的所述工作端的所述多个图像中的至少一个图像,通过:
通过利用所述可操纵装置的所述工作端相对于所述图像采集装置的坐标系统的确定位置和定向来确定所述第一活动臂和第二活动臂其中一个相对于共同坐标系统的构型和位置;
通过利用接收到的所述第一活动臂和第二活动臂其中另一个的接头位置信息来确定所述第一活动臂和第二活动臂其中另一个相对于所述共同坐标系统的构型和位置;
利用所述第一活动臂和第二活动臂相对于所述共同坐标系统的确定构型和位置来确定所述第一活动臂和第二活动臂之间即将的碰撞;和
命令第一活动臂和第二活动臂其中一个所采取的行动,以避免所述即将的碰撞。
16.根据权利要求15所述的计算机辅助系统,其中所述图像采集装置包括断层图像采集装置,用于采集多个二维图像,由此甚至在所述可操纵装置的所述工作端被布置在所述图像采集装置和所述可操纵装置的所述工作端之间的一个或多个对象阻挡时可辨别所述可操纵装置的所述工作端。
17.根据权利要求15所述的计算机辅助系统,其中所述控制器进一步被配置以通过利用所述第一活动臂的构造和几何信息以及所述可操纵装置的所述工作端相对于所述图像采集装置的坐标系统的确定位置和定向,确定所述第一活动臂相对于所述图像采集装置的坐标系统的构型和位置。
18.根据权利要求15所述的计算机辅助系统,其中所述图像采集装置是照相机或超声探头。
19.根据权利要求15-18中任一项所述的计算机辅助系统,其中所述控制器进一步被配置以通过利用变换将所述图像采集装置的坐标系统中的点转换至所述可操纵装置的坐标系统,来确定第二活动臂相对于所述可操纵装置的坐标系统的构型和位置,并且其中所述变换通过利用所述可操纵装置的所述工作端相对于所述图像采集装置的坐标系统的确定位置和定向来确定。
20.根据权利要求15-18中任一项所述的计算机辅助系统,其中所述控制器进一步被配置以通过利用变换将所述图像采集装置的坐标系统中的点转换至所述可操纵装置的坐标系统,来确定所述第二活动臂相对于所述可操纵装置的坐标系统的构型和位置,并且其中所述可操纵装置的坐标系统是所述共同坐标系统。
21.根据权利要求15-18中任一项所述的计算机辅助系统,进一步包括:
查看器,适于显示从所述可操纵装置的所述工作端的工作空间的采集图像衍生的图像;和
输入单元,被配置以接收所述查看器上正在显示的图像内的用户指定目标区域的信息。
22.根据权利要求21所述的计算机辅助系统,其中所述控制器进一步被配置以控制所述第二活动臂的运动,使得所述图像采集装置采集所述可操纵装置的所述工作端的所述多个图像中的所述用户指定目标区域的图像。
23.根据权利要求15-18中任一项所述的计算机辅助系统,其中:
所述控制器与所述第一活动臂关联以控制所述第一活动臂的运动,同时避免与所述第二活动臂碰撞,并且所述可操纵装置的坐标系统是所述共同坐标系统;或
所述控制器与所述第二活动臂关联以控制所述第二活动臂的运动,同时避免与所述第一活动臂碰撞,并且所述图像采集装置的坐标系统是所述共同坐标系统。
24.根据权利要求15-18中任一项所述的计算机辅助系统,其中:
所述第一活动臂包括多个接头和多个连杆,所述多个连杆偶联在一起以提供所述第一活动臂的多余自由度运动,使得针对所述可操纵装置的所述工作端的每个可控位置和定向,所述第一活动臂具有多种可能构型;并且
所述控制器进一步被配置以根据所述可操纵装置的所述工作端的预期位置和定向和根据避免所述第一活动臂和第二活动臂之间碰撞的二次约束,通过命令所述第一活动臂配置成所述第一活动臂的所述多种可能构型中的一种,控制所述第一活动臂的运动。
25.根据权利要求15-18中任一项所述的计算机辅助系统,其中:
所述第二活动臂包括多个接头和多个连杆,所述多个连杆偶联在一起以提供所述第二活动臂的多余自由度运动,使得针对所述图像采集装置的每个可控位置和定向,所述第二活动臂具有多种可能构型;并且
所述控制器进一步被配置以根据所述图像采集装置的预期位置和定向和根据避免所述第一活动臂和第二活动臂之间碰撞的二次约束,通过命令所述第二活动臂配置成所述第二活动臂的所述多种可能构型中的一种,控制所述第二活动臂的运动。
26.根据权利要求15-18中任一项所述的计算机辅助系统,其中:
所述第一活动臂包括第一多个接头和第一多个连杆,所述第一多个连杆偶联在一起以提供所述第一活动臂的多余自由度运动,使得针对所述可操纵装置的所述工作端的每个可控位置和定向,所述第一活动臂具有多种可能构型;
所述第二活动臂包括第二多个接头和第二多个连杆,所述第二多个连杆偶联在一起以提供所述第二活动臂的多余自由度运动,使得针对所述图像采集装置的每个可控位置和定向,所述第二活动臂具有多种可能构型;
所述控制器进一步被配置以控制所述第一活动臂或第二活动臂其中一个的运动,所述第一活动臂和第二活动臂其中一个被配置成其多种可能构型中避免与所述第一活动臂和第二活动臂其中另一个碰撞的一种构型;并且所述控制器进一步被配置以通过处理所述第一活动臂和第二活动臂的当前构型和其各自多种可能构型之间的差异以最小化成本函数,确定所述第一活动臂和第二活动臂其中哪一个被配置成其多种可能构型中避免与所述第一活动臂和第二活动臂其中另一个碰撞的构型。
27.碰撞避免方法,所述方法包括:
通过控制器,确定偶联于第一活动臂的可操纵装置的工作端相对于偶联于第二活动臂的图像采集装置的坐标系统的位置和定向,所述确定包括利用所述图像采集装置采集的所述可操纵装置的所述工作端的多个图像中的至少一个图像,通过:
通过所述控制器,通过利用所述可操纵装置的所述工作端相对于所述图像采集装置的坐标系统的确定位置和定向来确定所述第一活动臂和第二活动臂其中一个相对于共同坐标系统的构型和位置;
通过所述控制器,通过利用接收到的所述第一活动臂和第二活动臂其中另一个的接头位置信息来确定所述第一活动臂和第二活动臂其中另一个相对于所述共同坐标系统的构型和位置;
通过所述控制器,利用所述第一活动臂和第二活动臂相对于所述共同坐标系统的确定构型和位置来确定所述第一活动臂和第二活动臂之间即将的碰撞;和
通过所述控制器,命令第一活动臂和第二活动臂其中一个所采取的行动,以避免所述即将的碰撞。
28.根据权利要求27所述的方法,进一步包括:通过所述控制器,通过利用变换将所述图像采集装置的坐标系统中的点转换至所述可操纵装置的坐标系统,来确定第二活动臂相对于所述可操纵装置的坐标系统的构型和位置,并且其中所述变换通过利用所述可操纵装置的所述工作端相对于所述图像采集装置的坐标系统的确定位置和定向来确定。
29.根据权利要求27所述的方法,进一步包括:通过利用变换将所述图像采集装置的坐标系统中的点转换至所述可操纵装置的坐标系统,来确定所述第二活动臂相对于所述可操纵装置的坐标系统的构型和位置,并且其中所述可操纵装置的坐标系统是所述共同坐标系统。
30.根据权利要求27所述的方法,其中:
所述第一活动臂包括第一多个接头和第一多个连杆,所述第一多个连杆偶联在一起以提供所述第一活动臂的多余自由度运动,使得针对所述可操纵装置的所述工作端的每个可控位置和定向,所述第一活动臂具有多种可能构型;
所述第二活动臂包括第二多个接头和第二多个连杆,所述第二多个连杆偶联在一起以提供所述第二活动臂的多余自由度运动,使得针对所述图像采集装置的每个可控位置和定向,所述第二活动臂具有多种可能构型;并且
所述方法进一步包括控制所述第一活动臂或第二活动臂其中一个的运动,所述第一活动臂和第二活动臂其中一个被配置成其多种可能构型中避免与所述第一活动臂和第二活动臂其中另一个碰撞的一种构型;并且所述控制器进一步被配置以通过处理所述第一活动臂和第二活动臂的当前构型和其各自多种可能构型之间的差异以最小化成本函数,确定所述第一活动臂和第二活动臂其中哪一个被配置成其多种可能构型中避免与所述第一活动臂和第二活动臂其中另一个碰撞的构型。
31.非临时的机器可读介质,其包括可执行代码,所述可执行代码在被控制器的一个或多个处理器运行时可致使所述一个或多个处理器执行权利要求27-30中任一项所述的方法。
CN201910317935.5A 2012-12-10 2013-12-10 图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免 Active CN110279427B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910317935.5A CN110279427B (zh) 2012-12-10 2013-12-10 图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US201261735170P 2012-12-10 2012-12-10
US61/735,170 2012-12-10
CN201910317935.5A CN110279427B (zh) 2012-12-10 2013-12-10 图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免
CN201380064534.4A CN105188590B (zh) 2012-12-10 2013-12-10 图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免
PCT/US2013/074163 WO2014093367A1 (en) 2012-12-10 2013-12-10 Collision avoidance during controlled movement of image capturing device and manipulatable device movable arms
US14/101,769 US9259282B2 (en) 2012-12-10 2013-12-10 Collision avoidance during controlled movement of image capturing device and manipulatable device movable arms

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201380064534.4A Division CN105188590B (zh) 2012-12-10 2013-12-10 图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免

Publications (2)

Publication Number Publication Date
CN110279427A true CN110279427A (zh) 2019-09-27
CN110279427B CN110279427B (zh) 2024-01-16

Family

ID=50881820

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201380064534.4A Active CN105188590B (zh) 2012-12-10 2013-12-10 图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免
CN202311823402.7A Pending CN117770979A (zh) 2012-12-10 2013-12-10 图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免
CN201910317935.5A Active CN110279427B (zh) 2012-12-10 2013-12-10 图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免

Family Applications Before (2)

Application Number Title Priority Date Filing Date
CN201380064534.4A Active CN105188590B (zh) 2012-12-10 2013-12-10 图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免
CN202311823402.7A Pending CN117770979A (zh) 2012-12-10 2013-12-10 图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免

Country Status (6)

Country Link
US (3) US9259282B2 (zh)
EP (2) EP2928407B1 (zh)
JP (2) JP6293777B2 (zh)
KR (1) KR102218244B1 (zh)
CN (3) CN105188590B (zh)
WO (1) WO2014093367A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114504427A (zh) * 2021-10-03 2022-05-17 崔迪 一种眼科手术机器人及眼科手术设备
WO2022205207A1 (zh) * 2021-03-31 2022-10-06 深圳市大疆创新科技有限公司 云台及其构型识别方法、装置

Families Citing this family (233)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9948885B2 (en) * 2003-12-12 2018-04-17 Kurzweil Technologies, Inc. Virtual encounters
CA2735820A1 (en) * 2008-09-03 2010-03-11 Honda Motor Co., Ltd. Workpiece mounting system, workpiece mounting method, sunroof unit holding device, and sunroof unit holding method
US11871901B2 (en) 2012-05-20 2024-01-16 Cilag Gmbh International Method for situational awareness for surgical network or surgical network connected device capable of adjusting function based on a sensed situation or usage
EP2928407B1 (en) 2012-12-10 2021-09-29 Intuitive Surgical Operations, Inc. Collision avoidance during controlled movement of image capturing device and manipulatable device movable arms
US9649765B2 (en) 2013-03-11 2017-05-16 Siemens Aktiengesellschaft Reducing energy consumption of industrial robots by using new methods for motion path programming
US9889568B2 (en) 2013-03-14 2018-02-13 Sri International Compact robotic wrist
CA2905968A1 (en) 2013-03-15 2014-09-25 Sri International Hyperdexterous surgical system
KR102214811B1 (ko) * 2013-03-15 2021-02-10 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 매니퓰레이터 조인트 운동을 비등방적으로 증폭시키기 위해 영공간을 이용하는 시스템 및 방법
EP4364689A2 (en) * 2013-03-15 2024-05-08 Intuitive Surgical Operations, Inc. Inter-operative switching of tools in a robotic surgical system
JP5713047B2 (ja) * 2013-04-18 2015-05-07 株式会社安川電機 移動ロボット、移動ロボットの位置決めシステム、及び、移動ロボットの位置決め方法
CN105792996B (zh) * 2013-11-28 2017-07-25 三菱电机株式会社 机器人系统以及机器人系统的控制方法
EP3076906B1 (en) * 2013-12-05 2018-07-11 Now Technologies Zrt. Personal vehicle, and control apparatus and control method therefore
WO2015088647A1 (en) 2013-12-11 2015-06-18 Covidien Lp Wrist and jaw assemblies for robotic surgical systems
JP5850958B2 (ja) * 2014-01-24 2016-02-03 ファナック株式会社 ワークを撮像するためのロボットプログラムを作成するロボットプログラミング装置
EP3119340B1 (en) 2014-03-17 2019-11-13 Intuitive Surgical Operations, Inc. Methods and devices for table pose tracking using fiducial markers
EP3119286B1 (en) * 2014-03-19 2024-05-01 Intuitive Surgical Operations, Inc. Medical devices and systems using eye gaze tracking
US10432922B2 (en) 2014-03-19 2019-10-01 Intuitive Surgical Operations, Inc. Medical devices, systems, and methods using eye gaze tracking for stereo viewer
US20150277398A1 (en) * 2014-03-26 2015-10-01 Siemens Industry Software Ltd. Object manipulation driven robot offline programming for multiple robot system
US9922144B2 (en) 2014-03-26 2018-03-20 Siemens Industry Software Ltd. Energy and cycle time efficiency based method for robot positioning
EP2930462B1 (en) * 2014-04-08 2017-09-13 Hexagon Technology Center GmbH Method for generating information about a sensor chain of a coordinate measuring machine (CMM)
US9701011B2 (en) * 2014-05-08 2017-07-11 Siemens Industry Software Ltd. Method for robotic energy saving tool search
US9815201B2 (en) 2014-07-31 2017-11-14 Siemens Industry Software Limited Method and apparatus for industrial robotic energy saving optimization using fly-by
US9469029B2 (en) 2014-07-31 2016-10-18 Siemens Industry Software Ltd. Method and apparatus for saving energy and reducing cycle time by optimal ordering of the industrial robotic path
JP6734259B2 (ja) 2014-08-13 2020-08-05 コヴィディエン リミテッド パートナーシップ 機械的利益把握のロボット制御
US9457469B2 (en) 2014-08-14 2016-10-04 Siemens Industry Software Ltd. Method and apparatus for automatic and efficient location generation for cooperative motion
US20170303882A1 (en) * 2014-10-22 2017-10-26 Carestream Health, Inc. Mobile radiographic imaging apparatus
US10405944B2 (en) 2014-10-27 2019-09-10 Intuitive Surgical Operations, Inc. Medical device with active brake release control
EP3912610B1 (en) * 2014-10-27 2023-03-15 Intuitive Surgical Operations, Inc. System for registering to a surgical table
CN110478036B (zh) 2014-10-27 2022-05-17 直观外科手术操作公司 用于集成手术台的系统和方法
US10617479B2 (en) 2014-10-27 2020-04-14 Intuitive Surgical Operations, Inc. System and method for integrated surgical table motion
CN107072728B (zh) 2014-10-27 2020-07-17 直观外科手术操作公司 用于在反应运动期间监测控制点的系统和方法
KR102479311B1 (ko) 2014-10-27 2022-12-20 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 기기 교란 보상을 위한 시스템 및 방법
WO2016126914A1 (en) * 2015-02-05 2016-08-11 Intuitive Surgical Operations, Inc. System and method for anatomical markers
CN114052918A (zh) 2015-02-19 2022-02-18 柯惠Lp公司 机器人手术系统的输入装置的重定位方法
WO2016144937A1 (en) 2015-03-10 2016-09-15 Covidien Lp Measuring health of a connector member of a robotic surgical system
DE102015104821A1 (de) * 2015-03-27 2016-09-29 Medineering Gmbh Chirurgisches Instrument, System, Haltearm sowie Verfahren
CN113081009B (zh) 2015-04-15 2024-08-02 莫比乌斯成像公司 集成式医学成像与外科手术机器人系统
US10959788B2 (en) 2015-06-03 2021-03-30 Covidien Lp Offset instrument drive unit
GB201509887D0 (en) 2015-06-08 2015-07-22 Univ Strathclyde Remote operations system
DE202016102686U1 (de) 2015-06-15 2016-06-23 Knorr-Bremse Systeme für Nutzfahrzeuge GmbH Scheibenbremse für ein Nutzfahrzeug und Bremsbelagsatz
CN112294439A (zh) 2015-06-16 2021-02-02 柯惠Lp公司 机器人外科手术系统扭矩传感感测
JP6719487B2 (ja) 2015-06-23 2020-07-08 コヴィディエン リミテッド パートナーシップ ロボット外科手術アセンブリ
CN108025445A (zh) 2015-07-23 2018-05-11 斯里国际 机器人臂及机器人手术系统
US10034716B2 (en) 2015-09-14 2018-07-31 Globus Medical, Inc. Surgical robotic systems and methods thereof
US10806454B2 (en) 2015-09-25 2020-10-20 Covidien Lp Robotic surgical assemblies and instrument drive connectors thereof
US10299740B2 (en) * 2015-09-29 2019-05-28 General Electric Company Methods and systems for cone-beam computed tomography
EP3878396A1 (en) 2015-10-23 2021-09-15 Covidien LP Surgical system for detecting gradual changes in perfusion
US9949749B2 (en) 2015-10-30 2018-04-24 Auris Surgical Robotics, Inc. Object capture with a basket
US9955986B2 (en) 2015-10-30 2018-05-01 Auris Surgical Robotics, Inc. Basket apparatus
US10639108B2 (en) 2015-10-30 2020-05-05 Auris Health, Inc. Process for percutaneous operations
CA3004167C (en) * 2015-11-03 2019-02-05 Synaptive Medical (Barbados) Inc. Dual zoom and dual field-of-view microscope
US10660714B2 (en) 2015-11-19 2020-05-26 Covidien Lp Optical force sensor for robotic surgical system
US10219868B2 (en) 2016-01-06 2019-03-05 Ethicon Llc Methods, systems, and devices for controlling movement of a robotic surgical system
US10130429B1 (en) 2016-01-06 2018-11-20 Ethicon Llc Methods, systems, and devices for controlling movement of a robotic surgical system
US10154886B2 (en) 2016-01-06 2018-12-18 Ethicon Llc Methods, systems, and devices for controlling movement of a robotic surgical system
US20190021699A1 (en) * 2016-01-15 2019-01-24 Koninklijke Philips N.V. Automatic probe steering to clinical views using annotations in a fused image guidance system
CN113633326B (zh) * 2016-01-20 2024-09-13 直观外科手术操作公司 快速暂停和恢复医疗设备可重新定位臂中的运动偏离的系统和方法
WO2017126052A1 (ja) * 2016-01-20 2017-07-27 フジデノロ株式会社 ホウ素中性子捕捉療法用システム
WO2017126101A1 (ja) * 2016-01-22 2017-07-27 オリンパス株式会社 医療用マニピュレータシステム
JP6985277B2 (ja) 2016-02-01 2021-12-22 イマジナリス エス.アール.エル. 放射線撮像デバイス
EP3415071A4 (en) * 2016-02-10 2019-11-20 Olympus Corporation ENDOSCOPE SYSTEM
CN112370159A (zh) * 2016-02-26 2021-02-19 思想外科有限公司 用于指导用户定位机器人的系统
CN108472086B (zh) 2016-02-26 2021-07-09 直观外科手术操作公司 使用虚拟边界避免碰撞的系统和方法
WO2017173524A1 (en) 2016-04-07 2017-10-12 Titan Medical Inc. Camera positioning method and apparatus for capturing images during a medical procedure
US10932856B2 (en) * 2016-04-15 2021-03-02 Kawasaki Jukogyo Kabushiki Kaisha Surgical system control method and surgical system
EP4186458A1 (en) * 2016-05-23 2023-05-31 MAKO Surgical Corp. System for tracking a physical object
CN113328581B (zh) 2016-05-26 2024-06-11 柯惠Lp公司 器械驱动单元
CA3022071A1 (en) 2016-05-26 2017-11-30 Covidien Lp Robotic surgical assemblies
CN114504387A (zh) 2016-06-03 2022-05-17 柯惠Lp公司 用于机器人手术系统的被动轴系统
WO2017210500A1 (en) 2016-06-03 2017-12-07 Covidien Lp Robotic surgical system with an embedded imager
US11446099B2 (en) 2016-06-03 2022-09-20 Covidien Lp Control arm for robotic surgical systems
WO2017210497A1 (en) 2016-06-03 2017-12-07 Covidien Lp Systems, methods, and computer-readable program products for controlling a robotically delivered manipulator
US10427305B2 (en) * 2016-07-21 2019-10-01 Autodesk, Inc. Robotic camera control via motion capture
US10131053B1 (en) * 2016-09-14 2018-11-20 X Development Llc Real time robot collision avoidance
US11103990B2 (en) 2016-09-16 2021-08-31 Mobius Imaging Llc System and method for mounting a robotic arm in a surgical robotic system
CN106406312B (zh) * 2016-10-14 2017-12-26 平安科技(深圳)有限公司 导览机器人及其移动区域标定方法
WO2018075784A1 (en) 2016-10-21 2018-04-26 Syverson Benjamin Methods and systems for setting trajectories and target locations for image guided surgery
WO2018081136A2 (en) 2016-10-25 2018-05-03 Eugene Gregerson Methods and systems for robot-assisted surgery
DE102016221222A1 (de) 2016-10-27 2018-05-03 Siemens Healthcare Gmbh Verfahren zum Betrieb eines Kollisionsschutzsystems für eine medizinische Operationseinrichtung, medizinische Operationseinrichtung, Computerprogramm und Datenträger
JP6847218B2 (ja) 2016-11-28 2021-03-24 バーブ サージカル インコーポレイテッドVerb Surgical Inc. 望ましくない振動を低減するためのロボット外科用システム
US10660715B2 (en) 2016-12-16 2020-05-26 Mako Surgical Corp. Techniques for detecting errors or loss of accuracy in a surgical robotic system
WO2018112424A1 (en) * 2016-12-16 2018-06-21 Intuitive Surgical Operations, Inc. Systems and methods for teleoperated control of an imaging instrument
WO2018152141A1 (en) 2017-02-15 2018-08-23 Covidien Lp System and apparatus for crush prevention for medical robot applications
JP6603890B2 (ja) * 2017-02-20 2019-11-13 パナソニックIpマネジメント株式会社 作業装置および電子機器組立方法
WO2018156968A1 (en) * 2017-02-24 2018-08-30 The Regents Of The University Of California Systems and methods for image-guided radiotherapy using dual robot architecture
JP6445604B2 (ja) * 2017-03-07 2018-12-26 上銀科技股▲フン▼有限公司 ロボットアーム
US10223821B2 (en) * 2017-04-25 2019-03-05 Beyond Imagination Inc. Multi-user and multi-surrogate virtual encounters
US10792119B2 (en) 2017-05-22 2020-10-06 Ethicon Llc Robotic arm cart and uses therefor
EP3629979A4 (en) 2017-05-24 2021-02-17 Covidien LP PRESENCE DETECTION FOR ELECTROSURGICAL TOOLS IN A ROBOTIC SYSTEM
CN110662507A (zh) 2017-05-25 2020-01-07 柯惠Lp公司 具有自动引导的机器人手术系统
EP3629983B1 (en) 2017-05-25 2023-06-28 Covidien LP Robotic surgical systems and drapes for covering components of robotic surgical systems
WO2018217444A2 (en) 2017-05-25 2018-11-29 Covidien Lp Systems and methods for detection of objects within a field of view of an image capture device
US10919152B1 (en) * 2017-05-30 2021-02-16 Nimble Robotics, Inc. Teleoperating of robots with tasks by mapping to human operator pose
US10856948B2 (en) 2017-05-31 2020-12-08 Verb Surgical Inc. Cart for robotic arms and method and apparatus for registering cart to surgical table
US10485623B2 (en) 2017-06-01 2019-11-26 Verb Surgical Inc. Robotic arm cart with fine position adjustment features and uses therefor
US10913145B2 (en) 2017-06-20 2021-02-09 Verb Surgical Inc. Cart for robotic arms and method and apparatus for cartridge or magazine loading of arms
CN110944595B (zh) 2017-06-28 2023-11-24 直观外科手术操作公司 用于将内窥镜图像数据集映射到三维体积上的系统
CN107361849B (zh) 2017-07-31 2023-11-21 成都博恩思医学机器人有限公司 用于操纵执行机构的控制台
WO2019032450A1 (en) 2017-08-08 2019-02-14 Intuitive Surgical Operations, Inc. SYSTEMS AND METHODS FOR RENDERING ALERTS ON A SCREEN OF A TELEOPERATION SYSTEM
US20200170731A1 (en) * 2017-08-10 2020-06-04 Intuitive Surgical Operations, Inc. Systems and methods for point of interaction displays in a teleoperational assembly
EP3664741B1 (en) 2017-08-11 2023-02-22 Mobius Imaging LLC Apparatus for attaching a reference marker to a patient
WO2019036006A1 (en) 2017-08-16 2019-02-21 Covidien Lp SYNTHESIS OF SPACE-SENSITIVE TRANSITIONS BETWEEN MULTIPLE VIEWPOINTS OF VIEWING DEVICES DURING MINI-INVASIVE SURGERY
WO2019050821A1 (en) 2017-09-05 2019-03-14 Covidien Lp CAMERA CONTROL FOR SURGICAL ROBOTIC SYSTEMS
EP3678572A4 (en) 2017-09-05 2021-09-29 Covidien LP COLLISION HANDLING ALGORITHMS FOR SURGICAL ROBOTIC SYSTEMS
CN111132629B (zh) 2017-09-06 2024-04-16 柯惠Lp公司 手术机器人的边界缩放
EP3461415A1 (en) 2017-09-27 2019-04-03 Koninklijke Philips N.V. System and method for positioning a mobile medical imaging system
US10610307B2 (en) * 2017-09-28 2020-04-07 General Electric Company Workflow assistant for image guided procedures
EP3461410A1 (en) * 2017-09-29 2019-04-03 Koninklijke Philips N.V. Kinematical joints for x-ray systems
WO2019070997A1 (en) 2017-10-04 2019-04-11 GYS Tech, LLC d/b/a Cardan Robotics SYSTEMS AND METHODS FOR REALIZING SPINAL SURGERY WITH SIDE ACCESS
EP3691558A4 (en) 2017-10-05 2021-07-21 Mobius Imaging LLC METHODS AND SYSTEMS FOR PERFORMING COMPUTER-AIDED SURGERY
US11911045B2 (en) 2017-10-30 2024-02-27 Cllag GmbH International Method for operating a powered articulating multi-clip applier
US11801098B2 (en) 2017-10-30 2023-10-31 Cilag Gmbh International Method of hub communication with surgical instrument systems
US11564756B2 (en) 2017-10-30 2023-01-31 Cilag Gmbh International Method of hub communication with surgical instrument systems
US11510741B2 (en) 2017-10-30 2022-11-29 Cilag Gmbh International Method for producing a surgical instrument comprising a smart electrical system
US11925373B2 (en) 2017-10-30 2024-03-12 Cilag Gmbh International Surgical suturing instrument comprising a non-circular needle
WO2019108567A1 (en) 2017-12-01 2019-06-06 Covidien Lp Drape management assembly for robotic surgical systems
JP6654180B2 (ja) * 2017-12-14 2020-02-26 株式会社メディカロイド 遠隔操作装置及び遠隔手術システム
US11389164B2 (en) 2017-12-28 2022-07-19 Cilag Gmbh International Method of using reinforced flexible circuits with multiple sensors to optimize performance of radio frequency devices
US11076921B2 (en) 2017-12-28 2021-08-03 Cilag Gmbh International Adaptive control program updates for surgical hubs
US11202570B2 (en) 2017-12-28 2021-12-21 Cilag Gmbh International Communication hub and storage device for storing parameters and status of a surgical device to be shared with cloud based analytics systems
US11844579B2 (en) 2017-12-28 2023-12-19 Cilag Gmbh International Adjustments based on airborne particle properties
US11109866B2 (en) 2017-12-28 2021-09-07 Cilag Gmbh International Method for circular stapler control algorithm adjustment based on situational awareness
US11903601B2 (en) 2017-12-28 2024-02-20 Cilag Gmbh International Surgical instrument comprising a plurality of drive systems
US11744604B2 (en) 2017-12-28 2023-09-05 Cilag Gmbh International Surgical instrument with a hardware-only control circuit
US12062442B2 (en) 2017-12-28 2024-08-13 Cilag Gmbh International Method for operating surgical instrument systems
US12127729B2 (en) 2017-12-28 2024-10-29 Cilag Gmbh International Method for smoke evacuation for surgical hub
US11058498B2 (en) * 2017-12-28 2021-07-13 Cilag Gmbh International Cooperative surgical actions for robot-assisted surgical platforms
US11464559B2 (en) 2017-12-28 2022-10-11 Cilag Gmbh International Estimating state of ultrasonic end effector and control system therefor
US20190206569A1 (en) 2017-12-28 2019-07-04 Ethicon Llc Method of cloud based data analytics for use with the hub
US11896443B2 (en) 2017-12-28 2024-02-13 Cilag Gmbh International Control of a surgical system through a surgical barrier
US11678881B2 (en) 2017-12-28 2023-06-20 Cilag Gmbh International Spatial awareness of surgical hubs in operating rooms
US11786251B2 (en) 2017-12-28 2023-10-17 Cilag Gmbh International Method for adaptive control schemes for surgical network control and interaction
US20190201039A1 (en) 2017-12-28 2019-07-04 Ethicon Llc Situational awareness of electrosurgical systems
US12096916B2 (en) 2017-12-28 2024-09-24 Cilag Gmbh International Method of sensing particulate from smoke evacuated from a patient, adjusting the pump speed based on the sensed information, and communicating the functional parameters of the system to the hub
US11376002B2 (en) 2017-12-28 2022-07-05 Cilag Gmbh International Surgical instrument cartridge sensor assemblies
US11998193B2 (en) 2017-12-28 2024-06-04 Cilag Gmbh International Method for usage of the shroud as an aspect of sensing or controlling a powered surgical device, and a control algorithm to adjust its default operation
US11026751B2 (en) 2017-12-28 2021-06-08 Cilag Gmbh International Display of alignment of staple cartridge to prior linear staple line
US20190201146A1 (en) 2017-12-28 2019-07-04 Ethicon Llc Safety systems for smart powered surgical stapling
US11969216B2 (en) 2017-12-28 2024-04-30 Cilag Gmbh International Surgical network recommendations from real time analysis of procedure variables against a baseline highlighting differences from the optimal solution
US10758310B2 (en) 2017-12-28 2020-09-01 Ethicon Llc Wireless pairing of a surgical device with another device within a sterile surgical field based on the usage and situational awareness of devices
US11257589B2 (en) 2017-12-28 2022-02-22 Cilag Gmbh International Real-time analysis of comprehensive cost of all instrumentation used in surgery utilizing data fluidity to track instruments through stocking and in-house processes
US11969142B2 (en) 2017-12-28 2024-04-30 Cilag Gmbh International Method of compressing tissue within a stapling device and simultaneously displaying the location of the tissue within the jaws
US11896322B2 (en) 2017-12-28 2024-02-13 Cilag Gmbh International Sensing the patient position and contact utilizing the mono-polar return pad electrode to provide situational awareness to the hub
US11937769B2 (en) 2017-12-28 2024-03-26 Cilag Gmbh International Method of hub communication, processing, storage and display
US11864728B2 (en) 2017-12-28 2024-01-09 Cilag Gmbh International Characterization of tissue irregularities through the use of mono-chromatic light refractivity
US11179175B2 (en) 2017-12-28 2021-11-23 Cilag Gmbh International Controlling an ultrasonic surgical instrument according to tissue location
US11666331B2 (en) 2017-12-28 2023-06-06 Cilag Gmbh International Systems for detecting proximity of surgical end effector to cancerous tissue
US11132462B2 (en) 2017-12-28 2021-09-28 Cilag Gmbh International Data stripping method to interrogate patient records and create anonymized record
US11832899B2 (en) 2017-12-28 2023-12-05 Cilag Gmbh International Surgical systems with autonomously adjustable control programs
US11857152B2 (en) 2017-12-28 2024-01-02 Cilag Gmbh International Surgical hub spatial awareness to determine devices in operating theater
US11818052B2 (en) 2017-12-28 2023-11-14 Cilag Gmbh International Surgical network determination of prioritization of communication, interaction, or processing based on system or device needs
US11166772B2 (en) 2017-12-28 2021-11-09 Cilag Gmbh International Surgical hub coordination of control and communication of operating room devices
US20190201113A1 (en) 2017-12-28 2019-07-04 Ethicon Llc Controls for robot-assisted surgical platforms
WO2019134743A1 (en) 2018-01-03 2019-07-11 Siemens Healthcare Gmbh Method for acquiring and for altering a configuration of a number of objects in a procedure room and corresponding device
WO2019136062A1 (en) 2018-01-04 2019-07-11 Covidien Lp Systems and assemblies for mounting a surgical accessory to robotic surgical systems, and providing access therethrough
WO2019139949A1 (en) * 2018-01-10 2019-07-18 Covidien Lp Determining positions and conditions of tools of a robotic surgical system utilizing computer vision
WO2019139815A1 (en) 2018-01-12 2019-07-18 Duke University Apparatus, method and article to facilitate motion planning of an autonomous vehicle in an environment having dynamic objects
US12102403B2 (en) 2018-02-02 2024-10-01 Coviden Lp Robotic surgical systems with user engagement monitoring
TWI822729B (zh) 2018-02-06 2023-11-21 美商即時機器人股份有限公司 用於儲存一離散環境於一或多個處理器之一機器人之運動規劃及其改良操作之方法及設備
US11189379B2 (en) 2018-03-06 2021-11-30 Digital Surgery Limited Methods and systems for using multiple data structures to process surgical data
AU2019232675B2 (en) 2018-03-08 2020-11-12 Covidien Lp Surgical robotic systems
US11344326B2 (en) 2018-03-08 2022-05-31 Cilag Gmbh International Smart blade technology to control blade instability
US11259830B2 (en) 2018-03-08 2022-03-01 Cilag Gmbh International Methods for controlling temperature in ultrasonic device
US11986233B2 (en) 2018-03-08 2024-05-21 Cilag Gmbh International Adjustment of complex impedance to compensate for lost power in an articulating ultrasonic device
ES2928250T3 (es) 2018-03-21 2022-11-16 Realtime Robotics Inc Planificación del movimiento de un robot para diversos entornos y tareas y mejora del funcionamiento del mismo
US11090047B2 (en) 2018-03-28 2021-08-17 Cilag Gmbh International Surgical instrument comprising an adaptive control system
US11259806B2 (en) 2018-03-28 2022-03-01 Cilag Gmbh International Surgical stapling devices with features for blocking advancement of a camming assembly of an incompatible cartridge installed therein
CA3095798A1 (en) 2018-04-17 2019-10-24 Chengdu Borns Medical Robotics Inc. Laparoscope-holding robot system for laparoscopic surgery
WO2019204012A1 (en) 2018-04-20 2019-10-24 Covidien Lp Compensation for observer movement in robotic surgical systems having stereoscopic displays
EP3781367A4 (en) 2018-04-20 2022-04-20 Covidien LP SYSTEMS AND METHODS FOR POSITIONING A SURGICAL ROBOT CARRIAGE
WO2019213436A1 (en) * 2018-05-02 2019-11-07 Epica International, Inc. System for performing robotic surgery
CN108527374A (zh) * 2018-06-29 2018-09-14 德淮半导体有限公司 应用于机械臂的防撞系统和方法
EP3817683A4 (en) 2018-07-03 2022-04-20 Covidien LP SYSTEMS, METHODS AND COMPUTER READABLE MATERIALS FOR DETECTING IMAGE DEGRADATION DURING SURGICAL PROCEDURES
JP7163115B2 (ja) * 2018-09-12 2022-10-31 キヤノン株式会社 ロボットシステム、ロボットシステムの制御方法、物品の製造方法、制御装置、操作装置、撮像装置、制御プログラム及び記録媒体
WO2020056353A1 (en) * 2018-09-13 2020-03-19 The Charles Stark Draper Laboratory, Inc. Food-safe, washable, thermally-conductive robot cover
CN112739282A (zh) 2018-09-17 2021-04-30 柯惠Lp公司 手术机器人系统
US11109746B2 (en) 2018-10-10 2021-09-07 Titan Medical Inc. Instrument insertion system, method, and apparatus for performing medical procedures
US11117759B2 (en) * 2018-11-29 2021-09-14 Invia Robotics, Inc. Depalletizing robots for an autonomous warehouse
CN109620410B (zh) * 2018-12-04 2021-01-26 微创(上海)医疗机器人有限公司 机械臂防碰撞的方法及系统、医疗机器人
US11586106B2 (en) 2018-12-28 2023-02-21 Titan Medical Inc. Imaging apparatus having configurable stereoscopic perspective
DE102019200803A1 (de) * 2019-01-23 2020-07-23 Siemens Healthcare Gmbh Medizintechnischer Roboter, medizinisches System, Verfahren zu deren Betrieb, Computerprogramm und Speichermedium
US11717355B2 (en) 2019-01-29 2023-08-08 Covidien Lp Drive mechanisms for surgical instruments such as for use in robotic surgical systems
US11576733B2 (en) 2019-02-06 2023-02-14 Covidien Lp Robotic surgical assemblies including electrosurgical instruments having articulatable wrist assemblies
US11484372B2 (en) 2019-02-15 2022-11-01 Covidien Lp Articulation mechanisms for surgical instruments such as for use in robotic surgical systems
US11517309B2 (en) 2019-02-19 2022-12-06 Cilag Gmbh International Staple cartridge retainer with retractable authentication key
WO2020190832A1 (en) * 2019-03-20 2020-09-24 Covidien Lp Robotic surgical collision detection systems
JP7511259B2 (ja) 2019-04-17 2024-07-05 リアルタイム ロボティクス, インコーポレーテッド モーション計画グラフ生成ユーザインターフェース、システム、方法、および物品
US11369386B2 (en) 2019-06-27 2022-06-28 Auris Health, Inc. Systems and methods for a medical clip applier
WO2020263949A1 (en) 2019-06-28 2020-12-30 Auris Health, Inc. Medical instruments including wrists with hybrid redirect surfaces
CN110448378B (zh) * 2019-08-13 2021-03-02 北京唯迈医疗设备有限公司 一种沉浸式介入手术一体化控制台
CN110464465B (zh) * 2019-08-14 2020-07-10 重庆文理学院 一种全膝关节置换手术辅助机器人
US11896330B2 (en) 2019-08-15 2024-02-13 Auris Health, Inc. Robotic medical system having multiple medical instruments
US11548140B2 (en) * 2019-08-15 2023-01-10 Covidien Lp System and method for radio based location of modular arm carts in a surgical robotic system
EP4034349A1 (en) 2019-09-26 2022-08-03 Auris Health, Inc. Systems and methods for collision detection and avoidance
US11737845B2 (en) 2019-09-30 2023-08-29 Auris Inc. Medical instrument with a capstan
US11691292B2 (en) * 2019-10-14 2023-07-04 Boston Dynamics, Inc. Robot choreographer
CN110613511B (zh) * 2019-10-16 2021-03-16 武汉联影智融医疗科技有限公司 手术机器人避障方法
JP7276071B2 (ja) * 2019-10-21 2023-05-18 株式会社島津製作所 X線透視撮影装置
US11737835B2 (en) 2019-10-29 2023-08-29 Auris Health, Inc. Braid-reinforced insulation sheath
WO2021102587A1 (en) * 2019-11-29 2021-06-03 Innovere Medical Inc. Systems and methods for passive collision control during medical imaging or therapeutic procedures
CN113001536B (zh) * 2019-12-20 2022-08-23 中国科学院沈阳计算技术研究所有限公司 一种面向协作多机器人的防碰撞检测方法及装置
JP2023506355A (ja) * 2019-12-23 2023-02-16 ソニーグループ株式会社 コンピュータ支援手術システム、手術用制御装置及び手術用制御方法
JP2023508718A (ja) 2019-12-31 2023-03-03 オーリス ヘルス インコーポレイテッド 高度バスケット駆動モード
WO2021137104A1 (en) 2019-12-31 2021-07-08 Auris Health, Inc. Dynamic pulley system
US11919175B2 (en) 2020-04-15 2024-03-05 Mujin, Inc. Robotic system with collision avoidance mechanism and method of operation thereof
US20210322112A1 (en) * 2020-04-21 2021-10-21 Mazor Robotics Ltd. System and method for aligning an imaging device
EP3906882A1 (en) * 2020-05-05 2021-11-10 Ecential Robotics Surgical robotic system
US12030195B2 (en) 2020-05-27 2024-07-09 Covidien Lp Tensioning mechanisms and methods for articulating surgical instruments such as for use in robotic surgical systems
CN115802975A (zh) 2020-06-29 2023-03-14 奥瑞斯健康公司 用于检测连杆与外部对象之间的接触的系统和方法
US11357586B2 (en) 2020-06-30 2022-06-14 Auris Health, Inc. Systems and methods for saturated robotic movement
USD963851S1 (en) 2020-07-10 2022-09-13 Covidien Lp Port apparatus
WO2022014255A1 (en) * 2020-07-14 2022-01-20 Sony Group Corporation Determination of surgical performance level
US11980426B2 (en) 2020-08-03 2024-05-14 Warsaw Orthopedic, Inc. System and method for preliminary registration
WO2022037356A1 (zh) * 2020-08-19 2022-02-24 北京术锐技术有限公司 机器人系统以及控制方法
EP4201606A4 (en) * 2020-08-19 2024-08-28 Beijing Surgerii Robotics Company Ltd ROBOT SYSTEM AND ASSOCIATED CONTROL METHOD
WO2022037385A1 (zh) * 2020-08-19 2022-02-24 北京术锐技术有限公司 机器人系统以及控制方法
WO2022063214A1 (zh) * 2020-09-25 2022-03-31 武汉联影智融医疗科技有限公司 手术机器人控制方法、计算机设备及手术机器人系统
CN114452000B (zh) * 2020-10-08 2023-08-22 深圳市精锋医疗科技股份有限公司 手术机器人及其图形化控制装置、图形化显示方法
CN112043397B (zh) * 2020-10-08 2021-09-24 深圳市精锋医疗科技有限公司 手术机器人及其运动错误检测方法、检测装置
CN113967071B (zh) 2020-10-23 2023-09-29 成都博恩思医学机器人有限公司 手术机器人机械臂跟随手术床运动的控制方法及装置
CN112426225B (zh) * 2020-11-06 2021-09-03 哈尔滨工业大学 一种基于运动捕捉的放疗手术系统
JP2022101850A (ja) * 2020-12-25 2022-07-07 川崎重工業株式会社 手術支援ロボット、手術支援システムおよび手術支援ロボットの制御方法
CN112618024A (zh) * 2021-01-05 2021-04-09 上海交通大学医学院附属第九人民医院 多臂协同式手术机器人
CN112932671A (zh) * 2021-01-28 2021-06-11 哈尔滨思哲睿智能医疗设备有限公司 一种腹腔镜手术机器人的语音提示控制方法及系统
US20220280238A1 (en) * 2021-03-05 2022-09-08 Verb Surgical Inc. Robot-assisted setup for a surgical robotic system
TWI812078B (zh) * 2021-05-14 2023-08-11 台達電子工業股份有限公司 雙臂機器人組裝系統
US11948226B2 (en) 2021-05-28 2024-04-02 Covidien Lp Systems and methods for clinical workspace simulation
US20220395342A1 (en) * 2021-06-10 2022-12-15 Mazor Robotics Ltd. Multi-arm robotic systems and methods for monitoring a target or performing a surgical procedure
JP7241374B2 (ja) * 2021-08-10 2023-03-17 株式会社Mujin ロボットによるオブジェクト配置のシステム及び方法
TW202348377A (zh) * 2022-03-11 2023-12-16 美商即時機器人股份有限公司 用於在共享工作空間中之機器人之使用階段姿態之動作規劃及控制
WO2023237922A1 (en) * 2022-06-06 2023-12-14 Lem Surgical Ag Robotic active and dynamic collision avoidance system
WO2024049444A1 (en) * 2022-09-02 2024-03-07 Intel Corporation Post-attack real-time trajectory recovery of collaborative robotic arms
CN117681214B (zh) * 2024-02-04 2024-04-12 泓浒(苏州)半导体科技有限公司 基于晶圆传送的多机械臂碰撞预警方法及系统

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1658797A (zh) * 2002-06-14 2005-08-24 皇家飞利浦电子股份有限公司 伽马照相机碰撞避免
WO2006124390A2 (en) * 2005-05-19 2006-11-23 Intuitive Surgical, Inc Software center and highly configurable robotic systems for surgery and other uses
US20090003975A1 (en) * 2007-06-29 2009-01-01 Kuduvalli Gopinath R Robotic arm for a radiation treatment system
US20100331855A1 (en) * 2005-05-16 2010-12-30 Intuitive Surgical, Inc. Efficient Vision and Kinematic Data Fusion For Robotic Surgical Instruments and Other Applications
WO2011040769A2 (ko) * 2009-10-01 2011-04-07 주식회사 이턴 수술용 영상 처리 장치, 영상 처리 방법, 복강경 조작 방법, 수술 로봇 시스템 및 그 동작 제한 방법
WO2011125007A1 (en) * 2010-04-07 2011-10-13 Sofar Spa Robotized surgery system with improved control
US20120069967A1 (en) * 2010-09-20 2012-03-22 Siemens Medical Solutions Usa, Inc. System for Recovering from Collision of Components of an X-ray Imaging Unit
CN102405021A (zh) * 2009-04-21 2012-04-04 伊顿株式会社 手术用器械的连接结构
CN102646148A (zh) * 2012-04-25 2012-08-22 浙江大学 仿人机器人机械臂避碰运动轨迹规划方法
US20120290134A1 (en) * 2011-05-13 2012-11-15 Intuitive Surgical Operations, Inc. Estimation of a position and orientation of a frame used in controlling movement of a tool

Family Cites Families (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SE456048B (sv) 1982-02-24 1988-08-29 Philips Norden Ab Sett och anordning for att bestemma kollisionsrisken for tva inbordes rorliga kroppar
US4644237A (en) 1985-10-17 1987-02-17 International Business Machines Corp. Collision avoidance system
US5737500A (en) * 1992-03-11 1998-04-07 California Institute Of Technology Mobile dexterous siren degree of freedom robot arm with real-time control system
US6659939B2 (en) 1998-11-20 2003-12-09 Intuitive Surgical, Inc. Cooperative minimally invasive telesurgical system
US6788018B1 (en) * 1999-08-03 2004-09-07 Intuitive Surgical, Inc. Ceiling and floor mounted surgical robot set-up arms
US7607440B2 (en) * 2001-06-07 2009-10-27 Intuitive Surgical, Inc. Methods and apparatus for surgical planning
US8010180B2 (en) * 2002-03-06 2011-08-30 Mako Surgical Corp. Haptic guidance system and method
US6678582B2 (en) 2002-05-30 2004-01-13 Kuka Roboter Gmbh Method and control device for avoiding collisions between cooperating robots
US7046765B2 (en) 2004-03-31 2006-05-16 Accuray, Inc. Radiosurgery x-ray system with collision avoidance subsystem
CA2513202C (en) * 2004-07-23 2015-03-31 Mehran Anvari Multi-purpose robotic operating system and method
US9492241B2 (en) * 2005-01-13 2016-11-15 Mazor Robotics Ltd. Image guided robotic system for keyhole neurosurgery
US8108072B2 (en) 2007-09-30 2012-01-31 Intuitive Surgical Operations, Inc. Methods and systems for robotic instrument tool tracking with adaptive fusion of kinematics information and image information
US9789608B2 (en) 2006-06-29 2017-10-17 Intuitive Surgical Operations, Inc. Synthetic representation of a surgical robot
US9867669B2 (en) 2008-12-31 2018-01-16 Intuitive Surgical Operations, Inc. Configuration marker design and detection for instrument tracking
DE102005023165A1 (de) 2005-05-19 2006-11-23 Siemens Ag Medizinisches Bildgebungssystem mit einem um einen Patienten verfahrbaren Teil und Kollisionsschutzverfahren
ATE540634T1 (de) 2005-06-06 2012-01-15 Intuitive Surgical Operations Laparoskopisches ultraschall-robotersystem für chirurgische zwecke
US20070167702A1 (en) 2005-12-30 2007-07-19 Intuitive Surgical Inc. Medical robotic system providing three-dimensional telestration
US7379533B2 (en) 2006-03-10 2008-05-27 Siemens Medical Solutions Usa, Inc. Collision resolution in x-ray imaging systems
CA2542932C (en) 2006-03-28 2011-09-13 Imris Detection of collisions in medical procedures
CN104688349B (zh) 2006-06-13 2017-05-10 直观外科手术操作公司 微创手术系统
US8849679B2 (en) * 2006-06-15 2014-09-30 Intouch Technologies, Inc. Remote controlled robot system that provides medical images
US10258425B2 (en) 2008-06-27 2019-04-16 Intuitive Surgical Operations, Inc. Medical robotic system providing an auxiliary view of articulatable instruments extending out of a distal end of an entry guide
DE102006037564C5 (de) 2006-08-10 2010-09-23 Siemens Ag Verfahren zur Röntgenbildaufzeichnung mit einem robotergeführten C-Bogen-System sowie Aufzeichnungsvorrichtung zur Röntgenbildaufzeichnung
DE102007021769B4 (de) 2007-05-09 2015-06-25 Siemens Aktiengesellschaft Angiographiegerät und zugehöriges Aufnahmeverfahren mit einem Mechansimus zur Kollisionsvermeidung
US9138129B2 (en) 2007-06-13 2015-09-22 Intuitive Surgical Operations, Inc. Method and system for moving a plurality of articulated instruments in tandem back towards an entry guide
US8792964B2 (en) 2008-03-12 2014-07-29 Siemens Aktiengesellschaft Method and apparatus for conducting an interventional procedure involving heart valves using a robot-based X-ray device
US8803955B2 (en) 2008-04-26 2014-08-12 Intuitive Surgical Operations, Inc. Augmented stereoscopic visualization for a surgical robot using a camera unit with a modified prism
US8315738B2 (en) * 2008-05-21 2012-11-20 Fanuc Robotics America, Inc. Multi-arm robot system interference check via three dimensional automatic zones
US8126114B2 (en) * 2008-09-12 2012-02-28 Accuray Incorporated Seven or more degrees of freedom robotic manipulator having at least one redundant joint
US8781630B2 (en) 2008-10-14 2014-07-15 University Of Florida Research Foundation, Inc. Imaging platform to provide integrated navigation capabilities for surgical guidance
US8830224B2 (en) * 2008-12-31 2014-09-09 Intuitive Surgical Operations, Inc. Efficient 3-D telestration for local robotic proctoring
US20120053597A1 (en) 2009-03-10 2012-03-01 Mcmaster University Mobile robotic surgical system
US8423186B2 (en) * 2009-06-30 2013-04-16 Intuitive Surgical Operations, Inc. Ratcheting for master alignment of a teleoperated minimally-invasive surgical instrument
US8386080B2 (en) * 2009-09-15 2013-02-26 Harris Corporation Robotic apparatus implementing collision avoidance scheme and associated methods
US8623028B2 (en) * 2009-09-23 2014-01-07 Intuitive Surgical Operations, Inc. Surgical port feature
JP5571432B2 (ja) * 2010-03-30 2014-08-13 カール シュトルツ ゲゼルシャフト ミット ベシュレンクテル ハフツング ウント コンパニー コマンディートゲゼルシャフト 医療用ロボットシステム
US8918209B2 (en) * 2010-05-20 2014-12-23 Irobot Corporation Mobile human interface robot
US8460236B2 (en) * 2010-06-24 2013-06-11 Hansen Medical, Inc. Fiber optic instrument sensing system
US8855812B2 (en) 2010-07-23 2014-10-07 Chetan Kapoor System and method for robot safety and collision avoidance
JP2012051043A (ja) * 2010-08-31 2012-03-15 Yaskawa Electric Corp ロボットシステムまたはロボット制御装置
EP2468207A1 (en) * 2010-12-21 2012-06-27 Renishaw (Ireland) Limited Method and apparatus for analysing images
GB201115586D0 (en) * 2011-09-09 2011-10-26 Univ Bristol A system for anatomical reduction of bone fractures
CN103796607B (zh) * 2011-09-13 2017-01-18 皇家飞利浦有限公司 具有病变覆盖范围反馈的消融规划
EP2745268B1 (en) * 2011-09-13 2017-08-02 Koninklijke Philips N.V. Automatic online registration between a robot and images
US10925564B2 (en) * 2012-04-20 2021-02-23 Siemens Medical Solutions Usa, Inc. Medical imaging system with range imaging-based control
EP2928407B1 (en) 2012-12-10 2021-09-29 Intuitive Surgical Operations, Inc. Collision avoidance during controlled movement of image capturing device and manipulatable device movable arms
US11014240B2 (en) * 2017-09-05 2021-05-25 Abb Schweiz Ag Robot having dynamic safety zones
US10058396B1 (en) * 2018-04-24 2018-08-28 Titan Medical Inc. System and apparatus for insertion of an instrument into a body cavity for performing a surgical procedure

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1658797A (zh) * 2002-06-14 2005-08-24 皇家飞利浦电子股份有限公司 伽马照相机碰撞避免
US20100331855A1 (en) * 2005-05-16 2010-12-30 Intuitive Surgical, Inc. Efficient Vision and Kinematic Data Fusion For Robotic Surgical Instruments and Other Applications
WO2006124390A2 (en) * 2005-05-19 2006-11-23 Intuitive Surgical, Inc Software center and highly configurable robotic systems for surgery and other uses
CN101227870A (zh) * 2005-05-19 2008-07-23 直观外科手术公司 用于外科手术及其它应用的软件中心和高度可配置的机器人系统
US20090003975A1 (en) * 2007-06-29 2009-01-01 Kuduvalli Gopinath R Robotic arm for a radiation treatment system
CN102405021A (zh) * 2009-04-21 2012-04-04 伊顿株式会社 手术用器械的连接结构
WO2011040769A2 (ko) * 2009-10-01 2011-04-07 주식회사 이턴 수술용 영상 처리 장치, 영상 처리 방법, 복강경 조작 방법, 수술 로봇 시스템 및 그 동작 제한 방법
WO2011125007A1 (en) * 2010-04-07 2011-10-13 Sofar Spa Robotized surgery system with improved control
US20120069967A1 (en) * 2010-09-20 2012-03-22 Siemens Medical Solutions Usa, Inc. System for Recovering from Collision of Components of an X-ray Imaging Unit
US20120290134A1 (en) * 2011-05-13 2012-11-15 Intuitive Surgical Operations, Inc. Estimation of a position and orientation of a frame used in controlling movement of a tool
CN102646148A (zh) * 2012-04-25 2012-08-22 浙江大学 仿人机器人机械臂避碰运动轨迹规划方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022205207A1 (zh) * 2021-03-31 2022-10-06 深圳市大疆创新科技有限公司 云台及其构型识别方法、装置
CN114504427A (zh) * 2021-10-03 2022-05-17 崔迪 一种眼科手术机器人及眼科手术设备
CN114504427B (zh) * 2021-10-03 2024-05-31 崔迪 一种眼科手术机器人及眼科手术设备

Also Published As

Publication number Publication date
EP2928407A4 (en) 2016-10-19
EP2928407A1 (en) 2015-10-14
JP6543742B2 (ja) 2019-07-10
CN110279427B (zh) 2024-01-16
US9259282B2 (en) 2016-02-16
US20180338804A1 (en) 2018-11-29
EP2928407B1 (en) 2021-09-29
CN105188590B (zh) 2019-04-26
US11007023B2 (en) 2021-05-18
WO2014093367A1 (en) 2014-06-19
KR20150120944A (ko) 2015-10-28
CN117770979A (zh) 2024-03-29
JP2018110873A (ja) 2018-07-19
US10064682B2 (en) 2018-09-04
JP2016504077A (ja) 2016-02-12
US20140163736A1 (en) 2014-06-12
EP3932628A1 (en) 2022-01-05
JP6293777B2 (ja) 2018-03-14
CN105188590A (zh) 2015-12-23
US20160008078A1 (en) 2016-01-14
KR102218244B1 (ko) 2021-02-22

Similar Documents

Publication Publication Date Title
CN105188590B (zh) 图像采集装置和可操纵装置活动臂受控运动过程中的碰撞避免
KR102500422B1 (ko) 기구의 추정된 위치를 디스플레이하기 위한 시스템 및 방법
US11911011B2 (en) Endolumenal object sizing
CN106456251B (zh) 用于对成像装置和输入控制装置重定中心的系统和方法
CN108472095B (zh) 用于机器人外科手术的使用虚拟现实设备的系统、控制器和方法
CN109069217B (zh) 图像引导外科手术中的姿势估计以及透视成像系统的校准的系统和方法
CN105050527B (zh) 智能定位系统和用于其的方法
CN105050525B (zh) 用于跟踪介入器械的形状传感器系统以及使用方法
EP3092968B1 (en) System for hand presence detection in a minimally invasive surgical system
CN103211563B (zh) 通过机械微创外科手术过程中联合传感器和/或照相机导出数据实现3-d刀具跟踪的方法与系统
EP2231051B1 (en) Medical robotic system with functionality to determine and display a distance indicated by movement of a tool robotically manipulated by an operator
EP3092969A2 (en) A master finger tracking device and method of use in a minimally invasive surgical system
CN112218595A (zh) 用于机器人使能的远程操作的系统的控制器
KR20170047288A (ko) 순응형 입력 맵핑을 위한 시스템 및 방법
KR20150103675A (ko) 중재 시술 계획을 위한 시스템 및 방법
CN104427952A (zh) 用于使用形状感测的变形补偿的系统和方法
JP2023544314A (ja) 接触情報の検出に基づく外科用ロボットにおける衝突回避
KR20220024055A (ko) 추적 시스템 시야 위치설정 시스템 및 방법
CN115397355A (zh) 用于在负荷传感器上安装机器人部件的系统和方法
US20230092980A1 (en) Surgical robotic system setup
EP4384985A1 (en) Systems and methods for depth-based measurement in a three-dimensional view

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20240221

Address after: California, USA

Patentee after: INTUITIVE SURGICAL OPERATIONS, Inc.

Country or region after: U.S.A.

Patentee after: Siemens Healthcare, Inc.

Country or region after: Germany

Address before: California, USA

Patentee before: INTUITIVE SURGICAL OPERATIONS, Inc.

Country or region before: U.S.A.

Patentee before: SIEMENS HEALTHCARE Ltd.

Country or region before: Germany