KR101705921B1 - 수술 로봇의 통합적 표현 - Google Patents

수술 로봇의 통합적 표현 Download PDF

Info

Publication number
KR101705921B1
KR101705921B1 KR1020117025321A KR20117025321A KR101705921B1 KR 101705921 B1 KR101705921 B1 KR 101705921B1 KR 1020117025321 A KR1020117025321 A KR 1020117025321A KR 20117025321 A KR20117025321 A KR 20117025321A KR 101705921 B1 KR101705921 B1 KR 101705921B1
Authority
KR
South Korea
Prior art keywords
tool
display
view
component
information
Prior art date
Application number
KR1020117025321A
Other languages
English (en)
Other versions
KR20120004479A (ko
Inventor
브랜든 디. 이트코위츠
다니엘 제이. 하라베
타오 자오
시몬 디마이오
크리스토퍼 제이. 해세르
캐서린 제이. 모어
폴 더블유. 모어
데이비드 큐. 라킨
웬니 자오
브라이언 데이비드 호프만
Original Assignee
인튜어티브 서지컬 오퍼레이션즈 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 filed Critical 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드
Publication of KR20120004479A publication Critical patent/KR20120004479A/ko
Application granted granted Critical
Publication of KR101705921B1 publication Critical patent/KR101705921B1/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00—Programme-controlled manipulators
    • B25J9/16—Programme controls
    • B25J9/1694—Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697—Vision controlled systems
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/40—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mechanical, radiation or invasive therapies, e.g. surgery, laser therapy, dialysis or acupuncture
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25—User interfaces for surgical systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30—Surgical robots
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30—Surgical robots
    • A61B34/37—Master-slave robots
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361—Image-producing devices, e.g. surgical cameras
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00—Programme-controlled manipulators
    • B25J9/16—Programme controls
    • B25J9/1656—Programme controls characterised by programming, planning systems for manipulators
    • B25J9/1664—Programme controls characterised by programming, planning systems for manipulators characterised by motion, path, trajectory planning
    • B25J9/1666—Avoiding collision or forbidden zones
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00—Programme-controlled manipulators
    • B25J9/16—Programme controls
    • B25J9/1656—Programme controls characterised by programming, planning systems for manipulators
    • B25J9/1671—Programme controls characterised by programming, planning systems for manipulators characterised by simulation, either to verify existing program or to create and verify new program, CAD/CAM oriented, graphic oriented programming systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00—Programme-controlled manipulators
    • B25J9/16—Programme controls
    • B25J9/1679—Programme controls characterised by the tasks executed
    • B25J9/1689—Teleoperation
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00—Programme-controlled manipulators
    • B25J9/16—Programme controls
    • B25J9/1679—Programme controls characterised by the tasks executed
    • B25J9/1692—Calibration of manipulator
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/42—Recording and playback systems, i.e. in which the programme is recorded from a cycle of operations, e.g. the cycle of operations being manually controlled, after which this record is played back on the same machine
    • G05B19/4202—Recording and playback systems, i.e. in which the programme is recorded from a cycle of operations, e.g. the cycle of operations being manually controlled, after which this record is played back on the same machine preparation of the programme medium using a drawing, a model
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2059—Mechanical position encoders
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2061—Tracking techniques using shape-sensors, e.g. fiber shape sensors with Bragg gratings
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A61B2090/371—Surgical systems with images on a monitor during operation with simultaneous use of two cameras
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/36—Nc in input of data, input key till input tape
    • G05B2219/36432—By putting some constraints on some DOF, move within limited volumes, areas, planes, limits motion in x, y or z planes, virtual reality constraints
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/39—Robotics, robotics to robotics hand
    • G05B2219/39083—Robot interference, between two robot arms
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/39—Robotics, robotics to robotics hand
    • G05B2219/39096—Self-collision, internal collison, collision between links of one robot
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/39—Robotics, robotics to robotics hand
    • G05B2219/39449—Pendant, pda displaying camera images overlayed with graphics, augmented reality
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/40—Robotics, robotics mapping to robotics vision
    • G05B2219/40607—Fixed camera to observe workspace, object, workpiece, global
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/45—Nc applications
    • G05B2219/45117—Medical, radio surgery manipulator
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/45—Nc applications
    • G05B2219/45123—Electrogoniometer, neuronavigator, medical robot used by surgeon to operate
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation

Abstract

로봇 시스템의 사용자 인터페이스 상에 디스플레이하기 위한 로봇 도구의 통합적 표현이 개시된다. 이러한 통합적 표현은 로봇에 대한 이미지 캡처 디바이스의 뷰 볼륨의 위치를 보여주기 위해 사용될 수 있다. 통합적 표현은 또한 시야를 벗어난 도구를 찾기 위해, 도구에 대한 동작 한계 범위를 디스플레이하기 위해, 로봇에 대한 정보를 원격으로 통신하기 위해, 그리고 충돌을 탐지하기 위해 사용될 수 있다.

Description

수술 로봇의 통합적 표현{SYNTHETIC REPRESENTATION OF A SURGICAL ROBOT}
로봇 수술 시스템에 의해 수행되는 미소절개수술은 주지되어 있고, 원격 또는 사람이 수술을 수행하지 않는 것이 유리한 다른 환경에서 일반적으로 사용된다. 이러한 원격 로봇 수술 시스템의 예는 공동소유의 미국특허번호 제7,155,315호에 서술된 미소절개 로봇 수술 시스템이다. 캘리포니아 써니베일의 인튜어티브 서지컬 인코포레이티드에 의해 제조되는 다빈치?수술 시스템은 미소절개 로봇 수술 시스템의 구현의 실예이다(예컨대, 원격작동; 원격수술).
미소절개수술의 일반적인 형태는 내시경이다. 미소절개수술법에서 내시경 수술기기는 일반적으로 수술 부위를 보기 위한 내시경, 및 말단 작용기를 포함하는 수술도구를 포함한다. 전형적인 수술용 말단 작용기는, 예컨대, 클램프, 그래스퍼, 가위, 스태플러, 또는 바늘 홀더를 포함한다. 수술도구는 각각의 도구의 말단 작용기가, 예컨대, 대략 12인치 길이의 익스텐션 튜브의 끝부에서 지지된다는 것을 제외하면, 종래의 (개복) 수술에서 사용되는 것과 유사하다.
말단작용기를 조종하기 위해, 사람인 운전자, 전형적으로 수술의는 로컬 제공된 마스터 조종기를 조종하거나 명령을 내린다. 마스터 조종기로부터의 커맨드는 적절하게 변환되고, 원격-배치된 슬레이브 조종기로 전송된다. 슬레이브 조종기는 그 다음 그 운전자의 커맨드에 따라 말단작용기를 조종한다.
미소절개 로봇 수술 시스템에 힘 피드백이 포함될 수 있다. 이러한 피드백을 제공하기 위해, 원격 슬레이브 조종기는 전형적으로 마스터 조종기에 힘 정보를 제공하고, 이 힘 정보는 슬레이브 조종기에 작용하는 힘을 느끼는 지각(perception)을 수술의에게 제공하기 위해 수술의에게 힘 피드백을 제공하기 위해 사용된다. 몇몇 이러한 힘 피드백 구현에서, 햅틱 피드백은 수술도구 및 그 말단작용기 상에 조직 반작용 힘의 인공적인 느낌을 수술의에게 제공할 수 있다.
종종, 전형적으로 수술의 콘솔에 위치하는 마스터 컨트롤은 환자 위치에 있는 수술도구 중 하나를 놓기 위한 클러치 또는 다른 디바이스를 포함할 것이다. 이러한 특징은 예컨대, 2개 이상의 수술도구가 있는 시스템에서 사용될 수 있다. 이러한 시스템에서, 수술의는 하나의 마스터에 의해 하나의 수술도구의 컨트롤을 릴리즈하고, 그 마스터로 다른 수술도구에 대한 컨트롤을 형성한다.
수술의는 전형적으로 내시경 시야 내에 있는 수술도구의 말단 끝부 만의 이미지를 본다. 수술의는 시야를 벗어난 도구의 일부분 또는 도구 전체를 볼 수 없다. 따라서, 수술의는 둘 이상의 도구가 시야 밖에서 서로 간섭하는지 볼 수 없다. 또한, 내시경이 수술 부위에 대하여 그리고 수술의의 보디 프레임에 대하여, 다양한 위치 및 방향으로 조종될 수 있으므로, 수술의는 그 도구의 일반적인 위치에 대하여 혼동될 수 있다. 결과적으로, 수술의는 도구 간의 간섭을 피하거나, 수술도구에 대하여 하나 이상의 도구를 다시 방향조절하기 위해 마스터 조종기를 움직이는 최선의 방법을 이해할 수 없다.
아래의 설명은 본 발명의 기본적인 이해를 제공하기 위한 본 발명의 몇가지 형태 및 실시예의 간단한 설명을 제공한다. 본 설명은 본 발명의 광범위한 개요는 아니다. 본 설명은 본 발명의 주요 엘리먼트를 식별하거나, 본 발명의 범위를 결정하고자 하는 의도가 아니다. 본 설명의 목적은 아래의 더욱 상세한 설명에 대한 서문으로서 간단한 형태로 본 발명의 몇가지 형태와 실시예를 제공할 뿐이다.
하나의 실시예에서, 로봇 수술 시스템이 제공된다. 본 시스템은 환자 몸에 수술을 수행하기 위한 적어도 하나의 도구를 지지하는 연결부(linkage)를 포함하는 로봇, 디스플레이, 및 연결부에 관한 연결부 구조 데이터 및 조인트 상태 정보를 기초로 하여 연결부의 적어도 일부분의 도식적 표현을 포함하는, 로봇의 통합적 표현을 디스플레이하도록 키네매틱(kinematic) 컴포넌트와 디스플레이를 연결하는 제1 컴포넌트를 포함한다.
다른 실시예에서, 로봇 수술 시스템이 제공된다. 본 시스템은 시야를 가진 이미지 캡처 디바이스 및 환자 몸에 수술을 수행하기 위한 적어도 하나의 도구를 지지하는 연결부를 포함하는 로봇, 연결부에 관한 조인트 상태 정보를 얻기 위해 연결부에 연결된 키네매틱 컴포넌트, 제1 연결부와 상기 적어도 하나의 도구의 구조에 관한 데이터, 및 경고를 발생시키기 위해 상기 데이터 및 키네매틱 컴포넌트에 연결된 충돌 탐지 컴포넌트를 포함한다.
또 다른 실시예에서, 로봇 시스템에서 도구의 위치를 제어하는 방법이 제공된다. 본 방법은 시야 내의 로봇의 연결부 또는 도구의 비디오 피드를 포함하는 제1 이미지를 디스플레이 상에 디스플레이하는 단계, 도구 또는 연결부의 3차원 모델을 나타내는 제2 이미지를 디스플레이 상에 디스플레이하는 단계; 및 도구 또는 연결부의 이동을 제어하기 위해 디스플레이 상의 제1 및 제2 이미지를 참조하여 입력 디바이스를 이동시키는 단계를 포함하고, 여기서 3차원 모델의 제2 이미지는 도구 또는 연결부의 제1 이미지와 나란하다.
또 다른 실시예에서, 로봇 시스템의 도구의 일정한 범위의 동작을 제공하는 방법이 제공된다 본 방법은 도구의 위치를 나타내는 제1 이미지를 디스플레이하는 단계 및 상기 도구의 동작 한계를 나타내는 제2 이미지를 제1 이미지 상에 슈퍼임포즈하는(superimpose) 단계를 포함한다.
또 다른 실시예에서, 로봇 시스템이 제공된다. 본 방법은 로봇 시스템의 도구의 위치에 대한 정보를 유지하는 단계, 및 상기 도구의 작동 한계로부터 임계 거리 내에 있는 도구의 결과로서 신호를 발생시키는 단계를 포함한다.
다른 실시예에서, 로봇 수술 시스템이 제공된다. 본 시스템은 환자 몸에 수술을 수행하기 위한 적어도 하나의 도구를 지지하는 연결부를 포함하는 로봇; 도구를 포함하는 시야를 가진 이미지 캡처 디바이스, 연결부로부터 조인트 상태 정보를 얻기 위해 로봇에 연결된 키네매틱 컴포넌트, 시야를 디스플레이하기 위해 이미지 캡처 디바이스에 연결된 디스플레이, 및 시야 내에 나타난 도구에 대한 정보를 디스플레이하기 위해 키네매틱 컴포넌트와 디스플레이를 연결하는 제1 컴포넌트를 포함하고, 상기 정보의 위치는 연결부에 관한 데이터 및 조인트 상태 정보를 기초로 한다.
또 다른 실시예에서, 로봇 시스템에서의 방법이 제공된다. 본 방법은 시야 내의 로봇에 의해 지지되는 도구의 비디오 피드를 포함하는 제1 이미지를 디스플레이하는 단계, 및 상기 도구를 포함하는 로봇의 통합적 3차원 표현을 디스플레이하는 단계를 포함한다.
다른 실시예에서, 로봇 시스템에서의 방법이 제공된다. 본 방법은 시야 내의 로봇에 의해 지지되는 도구의 비디오 피드를 포함하는 제1 이미지를 디스플레이하는 단계, 및 도구를 포함하는 로봇의 통합적 3차원 표현을 디스플레이하는 단계를 포함하고, 여기서, 제1 이미지는 로봇의 제1 부분으로 이루어지고, 통합 3차원 표현은 제1 부분보다 더 큰 로봇의 제2 부분을 포함한다.
또 다른 실시예에서, 로봇 시스템에서의 방법이 제공된다. 본 방법은 시야 내의 로봇에 의해 지지되는 도구의 비디오 피드를 포함하는 제1 이미지를 디스플레이하는 단계, 및 도구를 포함하는 로봇의 통합적 3차원 표현을 디스플레이하는 단계를 포함하고, 여기서 제1 이미지는 제1 방향으로부터 보여지는 로봇의 제1 부분으로 이루어지고, 통합적 3차원 표현은 제1 방향으로부터 보여진다.
도 1은 미소절개 원격수술 시스템을 포함하는 수술실의 탑뷰를 도시한다.
도 2는 도 1의 미소절개 원격수술 시스템을 위한 환자 카트의 전면도이다.
도 3은 도 1의 미소절개 원격수술 시스템의 컴포넌트들을 나타내는 블록 다이어그램이다.
도 4는 도 1의 미소절개 원격수술 시스템에서 사용하기 위한 컴퓨터에 대한 컴포넌트들을 나타내는 블록 다이어그램이다.
도 5는 마스터 컨트롤러의 측면 투시도이다.
도 6은 로봇의 통합 이미지의 화면이다.
도 7은 통합 이미지의 렌더링을 갱신하기 위한 프로세스를 나타내는 흐름도이다.
도 8은 내시경에 대한 시야 및 내시경을 지지하는 로봇의 통합 이미지를 모두 제공하는 디스플레이에 의해 제공되는 화면이다.
도 9는 로봇의 통합 이미지의 일부분을 보여주기 위한 대안의 각도를 디스플레이하는 타일 윈도우를 도시한다.
도 10은 2개의 도구가 충돌한 시야를 도시한다.
도 11은 충돌 정보를 제공하기 위한 프로세스를 보여주는 흐름도이다.
도 12는 잃어버린 도구 복구를 위한 프로세스를 나타내는 흐름도이다.
도 13은 로봇의 통합 이미지를 포함하는 윈도우 타일 위에 투영된 시야를 도시한다.
도 14는 모델링 컴포넌트를 사용하여 정보를 디스플레이하는 프로세스를 나타내는 흐름도이다.
아래의 설명에서, 본 발명의 다양한 형태 및 실시예가 서술될 것이다. 설명의 목적으로, 특정한 구성 및 세부사항이 실시예의 전체적인 이해를 제공하기 위해 나열되어 있다. 그러나, 당업자들은 본 발명이 특정한 세부사항없이 실시될 수도 있음을 이해될 것이다. 또한, 주지된 피처는 서술된 실시예를 불명료하게 하지 않기 위해 본 설명에서 생략되거나 간략화될 수 있다.
이제 도면을 참조하면, 유사한 참조번호는 수개의 도면에 걸쳐 유사한 부분을 나타내고, 도 1은 하나의 실시예에 따라 운전자 스테이션 또는 수술의 콘솔(30)을 가진 미소절개 원격수술 시스템(20)을 도시한다. 수술의 콘솔(30)은 수술 부위의 이미지가 수술의(S)에게 디스플레이되는 뷰어(32)를 포함한다. 주지된 바와 같이, 수술의(S)가 각 손에 하나씩 2개의 마스터 컨트롤(700)(도 5)을 잡은 동안 팔을 놓을 수 있도록 (도시되지 않은) 지지대가 제공된다. 더 많은 말단작용기가 사용가능하다면, 더 많은 컨트롤이 제공될 수 있다. 그러나, 전형적으로 수술의는 한번에 2개의 컨트롤만 조종하고, 복수의 도구가 사용된다면, 수술의는 마스터 컨트롤(700)에서 하나의 도구를 해체하고, 동일한 마스터 컨트롤로 다른 도구를 잡는다. 수술의 콘솔(30)을 사용할 때, 수술의(S)는 전형적으로 수술의 콘솔 앞의 의자에 앉고, 그의 눈은 뷰어(32) 앞에 위치하고, 마스터 컨트롤(700)을 각 손에 하나씩 잡고, 그의 팔은 지지대 위에 놓을 것이다.
원격수술 시스템(20)의 환자측 카트(40)는 환자(P) 부근에 위치한다. 그 사용에 있어서, 환자측 카트(40)는 수술의를 필요로 하는 환자(P)와 근접하게 위치한다. 환자측 카트(40)는 수술과정 동안 고정식인 것이 전형적이고, 카트를 이동시키기 위한 휠 또는 바퀴를 포함한다. 수술의 콘솔(30)은 전형적으로 환자측 카트(40)로부터 멀리 떨어져 위치하고, 환자측 카트로부터 매우 먼 거리(심지어 수 마일) 만큼 떨어질 수 있지만, 전형적으로 환자측 카트와 동일한 수술실 내에서 사용될 것이다.
도 2에 더욱 상세하게 도시된 환자측 카트(40)는 전형적으로 2개 이상의 로봇 팔 어셈블리를 포함한다. 도 2에 도시된 실시예에서, 환자측 카트(40)는 4개의 로봇 팔 어셈블리(42, 44, 46, 48)를 포함하지만, 더 많거나 적은 로봇 팔 어셈블리가 제공될 수도 있다. 각각의 로봇 팔 어셈블리(42, 44, 46, 48)는 수술의 콘솔(30)의 마스터 컨트롤 중 하나와 정상적으로 동작적으로 연결된다. 그러므로, 로봇 팔 어셈블리(44, 46, 48)의 조종기 부분의 움직임은 마스터 컨트롤의 조종에 의해 제어된다.
하나의 로봇 팔 어셈블리(42)는 이미지 캡처 디바이스(50), 예컨대, 내시경 등을 홀드하도록 배열된다. 내시경 또는 이미지 캡처 디바이스(50)는 길쭉한 샤프트(54)의 먼쪽 끝부에 뷰잉 끝부(56)를 포함한다. 길쭉한 샤프트(54)는 뷰잉 끝부(56)가 환자(P)의 수술 삽입 포트를 통해 삽입될 수 있게 한다. 이미지 캡처 디바이스(50)는 그 뷰잉 끝부(56)에서 캡처된 이미지를 디스플레이하기 위해 수술의 콘솔(30)의 뷰어(32)에 동장적으로 연결된다.
각각의 로봇 팔 어셈블리(44, 46, 48)는 각각 제거가능한 수술기기 또는 도구(60, 62, 64)를 지지하고 포함하는 연결장치이다. 로봇 팔 어셈블리(44, 46, 48)의 도구(60, 62, 64)는 각각 말단작용기(66, 68, 70)를 포함한다. 말단작용기(66, 68, 70)는 주지된 바와 같이, 도구의 길쭉한 샤프트의 말단 끝부에 설치된 손목부재 상에 설치된다. 도구(60, 62, 64)는 말단작용기(66, 68, 70)가 환자(P)의 수술 삽입 포트를 통해 삽입될 수 있게 하기 위해 길쭉한 샤프트를 포함한다. 도구(60, 62, 64)의 샤프트의 끝부에 대한 말단작용기(66, 68, 70)의 움직임은 수술의 콘솔(30)의 마스터 컨트롤에 의해 제어된다.
도시된 원격수술 시스템(20)은 이미지 캡처 디바이스에 연결된 장치를 구비한 비전 카트(80)를 포함한다. 다른 실시예에서, 비전 카트(80)는 원격수술 시스템(20)을 구동하기 위한 대부분의 컴퓨터 장치 또는 다른 컨트롤("코어" 데이터 처리 장치")을 포함하는 다른 장치와 결합될 수 있다. 하나의 예로서, 수술의 콘솔(30)의 마스터 컨트롤러에 의해 전송되는 신호는 비전 카트(80)로 전송될 수 있고, 그 다음 이 신호는 해석되고, 말단작용기(66, 68, 70) 및/또는 로봇 팔 어셈블리(44, 46, 48)에 대한 커맨드를 생성한다. 또한, 이미지 캡처 디바이스(50)로부터 뷰어(34)로 전송되는 비디오는 비전 카트(80)에 의해 프로세싱되거나 단순히 전달될 수 있다.
도 3은 원격수술 시스템(20)의 도면이다. 도시된 바와 같이, 본 시스템은 수술의 콘솔(30), 환자측 카트(40), 및 비전 카트(80)를 포함한다. 또한, 하나의 실시예에 따라, 추가적인 컴퓨터(82) 및 디스플레이(84)가 제공된다. 이러한 컴포넌트들은 수술의 콘솔(30), 환자측 카트(40), 및/또는 비전 카트(80) 중 하나 이상에 통합될 수도 있다. 예를 들어, 컴퓨터(82)의 특징부는 비전 카트(80)에 통합될 수 있다. 또한, 디스플레이(84)의 특징부는 수술의 콘솔(30)에 통합될 수 있는데, 예컨대, 뷰어(32)에서 수술의 콘솔 또는 다른 위치에서 완전히 분리된 디스플레이에 의해 제공될 수 있다. 또한, 하나의 실시예에 따라, 컴퓨터(82)는 디스플레이(84)와 같은 디스플레이 없이 사용될 수 있는 정보를 생성할 수도 있다.
"컴퓨터"로 서술되어 있으나, 컴퓨터(82)는 본 명세서에 서술된 기능을 수행할 수 있는 컴퓨터 시스템 또는 임의의 다른 소프트웨어 또는 하드웨어의 컴포넌트일 수 있다. 또한, 앞서 서술된 바와 같이, 컴퓨터(82)의 기능 및 특징은 수개의 디바이스 또는 소프트웨어 컴포넌트로 나누어질 수도 있다. 그러므로, 도면에 도시된 컴퓨터(82)는 설명의 편의를 위한 것이며, 컴퓨터는 컨트롤러로 대체될 수도 있고, 그 기능은 하나 이상의 다른 컴포넌트에 의해 제공될 수도 있다.
도 4는 하나의 실시예에 따른 컴퓨터(82)의 컴포넌트를 도시한다. 포지션 컴포넌트는 컴퓨터(82)에 연결되거나 포함된다. 포지션 컴포넌트는 하나의 말단작용기(66, 68, 70)와 같은, 말단작용기의 위치에 대한 정보를 제공한다. 도면에 도시된 실시예에서, 도구 추적 컴포넌트(90)는 포지션 컴포넌트를 위해 사용되고, 말단작용기(66, 68, 70)와 같은 말단작용기의 위치에 대한 정보를 제공한다. 여기서 사용된 바와 같이, "포지션"은 말단작용기의 위치 및/또는 방향 중 적어도 하나를 의미한다. 다양한 상이한 기술이 말단작용기의 위치에 대한 정보를 제공하기 위해 사용될 수 있고, 이러한 기술은 도구 추적 디바이스로 간주될 수도 있고 그렇지 않을 수도 있다. 간단한 실시예에서, 포지션 컴포넌트는 말단작용기의 포지션에 대한 정보를 제공하기 위해 이미지 캡처 디바이스(50)로부터의 비디오 피드를 사용하지만, 이러한 시각적 정보를 대신하여 또는 그와 더불어, 센서 정보, 키네매틱 정보, 임의의 이들의 조합, 또는 말단작용기(66, 68, 70)의 위치 및/또는 방향을 제공할 수 있는 부가정보를 포함하는 다른 정보가 사용될 수도 있다. 도구 추적 컴포넌트(90)를 위해 사용될 수 있는 시스템의 예는 (1994년 4월 28일에 출원된) 미국특허번호 제5,950,629호, (1999년 11월 9일에 출원된) 미국특허번호 제6,468,265호, (2005년 5월 16일에 출원된) 미국특허출원 공개번호 US 2006/0258938 A1, (2006년 6월 29일에 출원된) 미국특허출원 공개번호 US 2008/0004603 A1에 개시되어 있다. 하나의 실시예에 따라, 도구 추적 컴포넌트(90)는 (2008년 12월 31일에 출원된) 공동소유의 미국특허 출원번호 제61/204,084호에 서술된 시스템 및 방법을 사용한다. 일반적으로, 포지션 컴포넌트는 말단작용기의 실제 위치 및 방향에 대한 정보를 유지한다. 이러한 정보는 그 정보가 사용가능한 시점에 따라 갱신되고, 예컨대, 비동기식 정보일 수 있다.
키네매틱 컴포넌트(92)는 일반적으로 원격수술 시스템(20)을 통해 사용가능한 정보를 사용하여 말단작용기의 포지션, 여기서 "키네매틱 포지션"을 추정하는 임의의 디바이스이다. 하나의 실시예에서, 키네매틱 컴포넌트(92)는 말단작용기까지의 링커지의 조인트 상태로부터 키네매틱 포지션 정보를 사용한다. 예컨대, 키네매틱 컴포넌트(92)는 도구(60, 62, 64) 각각에 대한 링커지에서 조인트에에 대한 인코더 신호를 기초로 말단작용기(66, 68, 70)의 데카르트 포지션을 계산하기 위해 원격수술 시스템(20)을 위한 마스터/슬레이브 아키텍처를 사용할 수 있다. 그 예로서, 키네매틱 컴포넌트는 도구의 포지션을 추정하기 위해 슬레이브 인코더(102) 및/또는 마스터 조종기 인코더를 사용할 수 있다. 하나의 실시예의 키네매틱 컴포넌트를 사용하는 시스템의 예는, 다른 것들이 사용될 수도 있지만, 미국특허번호 제7,155,315호에 서술되어 있다. 말단작용기 또는 링커지 및/또는 도구의 임의의 부분에 대한 키네매틱 포지션 정보는 광섬유 형상 감지의 사용, 링커지, 도구, 또는 말단 작용기를 따라 다양한 위치에 내장된 컴포넌트(예컨대, 전자기적 컴포넌트)의 위치 감지, 다양한 비디오 도구 추적 방법 등과 같은, 다른 방식으로 제공될 수도 있다.
도면에 도시된 실시예에서, 에러 보정 컴포넌트(94)가 제공된다. 일반적으로, 에러 보정 컴포넌트는 키네매틱 컴포넌트(92)에 의해 제공되는 도구의 위치 및/또는 방향과 비교되는 도구 추적 컴포넌트(90)에 의해 제공되는 도구의 위치 및/또는 방향 간의 차이를 계산한다. 다수의 조인트 및 이동 부로 인해, 현재의 키네매틱 측정은 정형적으로 공간 내에서 수술용 말단작용기의 위치에 대한 정확한 정보를 제공하지 못한다. 충분한 단단함 및 센싱을 가진 시스템은 이론적으로는 거의 정확한 키네매틱 정보를 제공할 수 있다. 그러나, 현재의 미소절개 로봇수술 시스템에서, 이러한 키네매틱 정보는 공간에서 획득된 때 임의의 방향으로 최대 1인치 정도까지 부정확할 수 있다. 그러므로, 하나의 실시예에서, 에러 보정 컴포넌트(94)에 의해 오프셋이 생성될 수 있다. 이러한 오프셋은 키네매틱 컴포넌트에 의해 제공된 키네매틱 정보와 도구 추적 컴포넌트에 의해 제공된 실제 위치 정보 간의 차이에 관한 정보를 제공한다. 이러한 오프셋을 사용하여, 키네매틱 정보 및 실제 위치 정보는 동일한 위치 및/또는 방향으로 레지스터링(register)될 수 있다.
하나의 실시예에 따라, 모델링 컴포넌트(108)는 환자측 카트(40)와 같은 환자측 카트의 또는 다른 부분의 통합 이미지(120)(도 6)를 생성하기 위해 제공된다. 도면에 도시된 실시예에서, 통합 이미지(120)는 환자측 카트(40)와 상이한 환자측 카트 구성이지만(3개의 팔을 가진 다빈치?시스템 모델 IS2000 환자측 카트의 설명을 위한 모델이 도시되어 있다), 환자측 카트(40)가 추가적인 로봇 팔 어셈블리 및 도구를 가진다는 점을 제외하면, 두 환자측 카트의 기본적인 컴포넌트는 동일하다.하나의 실시예에 따라, 통합 이미지(120)는 디스플레이(84) 또는 뷰어(32)에 디스플레이될 수 있다. 이 때문에, 비전 카트(80) 및/또는 컴퓨터(82)와 연관된 모델링 데이터(104)(도 3)가 제공될 수 있다. 모델링 데이터(104)는 예컨대, 환자측 카트(40) 또는 임의의 다른 부분의 이미지와 같은, 2차원(2-D) 또는 3차원(3-D) 표현일 수 있다. 하나의 실시예에서, 이러한 표현은 환자측 카트(40) 또는 그 임의의 부분의 3-D 모델이고, 그러므로 환자측 카트(40) 또는 그 임의의 부분의 실제 솔리드 모델을 나타낼 수 있다. 모델링 데이터(104)는 예컨대, 환자측 카트(40)의 컴포넌트를 나타내는 CAD 데이터 또는 다른 3-D 솔리드 모델 데이터일 수 있다. 하나의 실시예에서, 3-D 모델은 환자측 카트의 움직임이 환자측 카트(40)의 통합 이미지(120)에 의해 모방될 수 있도록, 환자측 카트(40)의 각각의 조인트에서 조종가능하다. 모델링 데이터는 환자측 카트 전체를 나타낼 수도 있고, 또는 환자측 카트용 도구와 같은 카트의 임의의 부분을 나타낼 수도 있다.
조인트 위치 및 방향은, 예컨대, 키네매틱 컴포넌트(92)에 의해 제공된 키네매틱 데이터로부터 알 수 있는 것이 일반적이다. 이러한 정보를 사용하여, 환자측 카트의 각각의 컴포넌트는 수술의에게 3-D로 나타나는 환자측 카트의 이미지를 생성하기 위해 위치에서 렌더링될 수 있다. 그러므로, 하나의 실시예에서, 모델링 데이터(104)는 환자측 카트 로봇의 각각의 컴포넌트 또는 링크에 대한 각각의 정보를 포함한다.
하나의 실시예에 따라, 모델링 컴포넌트(108)는 도구 추적 컴포넌트(90) 및/또는 키네매틱 컴포넌트(92)의 컴포넌트의 위치 및/또는 방향을 지속적으로 갱신한다. 예를 들어, 키네매틱 컴포넌트(92)의 최초 상태는 환자측 카트에 대한 하나 이상의 말단작용기의 포지션을 포함하여 판정될 수 있다. 이러한 포지션은 도구 추적 컴포넌트(90)에 의해 제공되는 포지션 정보와 비교될 수 있다. 앞서 서술한 바와 같이, 도구 추적 컴포넌트(90)에 의해 판정된 실제 포지션과 키네매틱 컴포넌트(92)에 의해 제공되는 말단작용기의 추정된 포지션 간의 차이는 에러 보정 컴포넌트(94)에 의해 사용되거나 저장될 수 있는 오프셋을 야기할 수 있다. 이러한 오프셋은 키네매틱 컴포넌트(92)에 의해 추정된 포지션 및 방향으로 도구 추적 컴포넌트(90)에 의해 판정된 말단작용기의 포지션 및 방향을 레지스터링하기 위해 사용될 수 있다.
데이터가 도구 추적 컴포넌트(90)로부터 사용가능할 때, 말단작용기의 실제 포지션은 키네매틱 컴포넌트(92)에 의해 제공되는 정보로 추적되고 레지스터링될 수 있다. 도구 추적 정보가 도구 추적 컴포넌트(90)로부터 사용가능하지 않을 때, 키네매틱 컴포넌트(92)에 의해 제공되는 키네매틱 정보의 임의의 변화는 말단작용기에 의한 실제 이동의 지시라는 가정이 만들어질 수 있다. 즉, 도구 추적이 가능하지 않을 때, 말단작용기의 포지션은 키네매틱 컴포넌트(92)에 의해 계산된 현재 포지션과 마지막 알고 있는 포지션 사이의 좌표 포지션의 변화에 의해 정확하게 판정될 수 있다. 여기서 가정은 포지션의 변화가 도구 추적 정보 없이, 키네매틱 정보만 사용하여 정확하게 계산될 수 있다는 것이다. 이러한 가정은 키네매틱 정보가 종종 공간에서 말단작용기의 포지션을 계산하는데 정확하지 않는다 하더라도, 포지션을 알고 있고, 특히 매우 짧은 기간 동안 또는 소량의 이동에 대한 포지션의 변화를 계산하는데에는 전형적으로 정밀하기 때문에 합리적이다. 그러므로, 비동기 데이터는 도구 추적 컴포넌트(90)에 의해 제공될 수 있고, 동기 데이터는 키네매틱 컴포넌트(92)에 의해 제공될 수 있다. 이러한 정보의 조합은 환자측 카트(40)의 컴포넌트의 포지션 및 방향에 관한 데이터를 제공한다.
로봇 팔 어셈블리의 컴포넌트의 포지션은 키네매틱 컴포넌트에 의해 제공되는 조인트 상태를 사용함으로써 판정될 수 있다. 이러한 조인트 상태는 앞서 서술한 바와 같이 그 포지션을 알고 있는 말단작용기로부터 뒤쪽으로 계산된다. 또한, 환자측 카트를 위한 로봇 팔 어셈블리(122)의 조인트에 있는 슬레이브 인코더(102)가 각각의 조인트에 대한 상태 정보의 변화를 제공하므로, 로봇 팔 어셈블리의 각각의 섹션의 상대적 위치는 정확하게 추정되고 추적될 수 있다. 그러므로, 모델링 컴포넌트(108)가 로봇 팔 어셈블리의 끝부에 있는 도구(124) 또는 하나의 로봇 팔 어셈블리의 끝부에 있는 내시경(126)을 포함하는 로봇 팔 어셈블리(122)의 각각의 세그먼트의 위치와 함께, 모델링 데이터(104)를 사용하여 통합 이미지(120)를 생성하기에 충분한 정보가 모델링 컴포넌트(108)에 제공될 수 있다.
도 6을 다시 참조하면, 하나의 실시예에서, 환자측 카트용 통합 이미지(120)에 더불어, 내시경용 뷰 볼륨(130)이 제공된다. 뷰 볼륨(130)은 내시경(126)의 시야의 프로젝션을 나타낸다. 이러한 시야는 내시경에 의해 볼 수 있는 화면이고, 그 뷰 볼륨은 시야의 경계의 프로젝션이다. 즉, 뷰 볼륨(130)은 내시경(126)에 의해 볼 수 있는 3-D 공간을 나타낸다. 바람직하다면, 도 4에 도시된 바와 같이, 카메라 정보(132)가 모델링 컴포넌트(108)에 제공될 수 있다. 이러한 카메라 정보는 카메라에 대한 내재적 및 외재적 파라미터의 교정된 세트를 포함한다. 내재적 파라미터는, 예컨대, 광학부재의 펄스펙티브 맵핑을 모델링하는 초점 길이 및 주점(principle point)을 포함한다. 또한, 내재적 파라미터는 렌즈 왜곡을 고려할 수 있다. 외재적 파라미터는, 예컨대, 스테레오 내시경 화면 간의 상대적 위치 및 방향을 고려할 수 있다. 이해하는 바와 같이, 내시경의 줌과 같은 파라미터의 변화는 뷰 볼륨을 더 좁게 하거나 더 넓게 하는 것과 같은, 그 내시경에 대한 뷰 볼륨을 변화시킬 것이다. 또한, 내시경(126)이 이동할 때, 뷰 볼륨(130)은 그에 따라 이동할 것이다. 이러한 카메라 정보는 아래에 서술된 바와 같이, 이미지 캡처 디바이스로부터 말단작용기의 스테레오 화면 상에 슈퍼임포즈될 수 있는 3-D 스테레오 렌더링의 생성을 허용한다.
도 7은 하나의 실시예에 따른 통합 이미지(120)의 랜더링을 갱신하는 프로세스를 나타내는 흐름도이다. 단계(401)에서 시작하여, 환자측 카트 및 그 임의의 일부분의 포지션 및 방향이 감지된다. 이러한 감지는, 예컨대, 앞서 서술한 바와 같이, 도구 추적 컴포넌트(90) 및/또는 키네매틱 컴포넌트(92)를 통해 수행될 수 있다.
단계(402)에서는, 단계(401)에서 얻은 포지션 및 방향은 모델(예컨대, 통합 이미지(120))를 생성하기 위해 사용된다. 앞서 서술한 바와 같이, 모델링 컴포넌트(108)는 모델을 생성하기 위해 모델링 데이터(104)를 사용한다. 단계(401)에서 제공된 포지션 및 방향은 통합적 모델의 포지션 및 방향을 환자측 카트의 포지션 및 방향과 매치하도록 정확하게 정렬하기 위해 사용된다.
단계(404)에서, 환자측 카트 이동의 결과로서, 정보가 수신된다. 이러한 이동은, 예컨대, 로봇 팔 어셈블리 중 하나의 이동, 내시경의 이동, 내시경의 초점 변경, 또는 말단작용기 중 하나에 의한 이동일 수 있다. 말단작용기의 이동은 예컨대, 핀처(pincher)의 닫기 또는 말단작용기의 다른 동작적 이동을 포함하는 위치 또는 방향의 변화일 수 있다.
단계(406)에서, 도구 추적 정보가 사용가능한지 여부의 판정이 내려진다. 도 4에 도시된 실시예에서, 이러한 판정은 내시경(126)의 시야(예컨대, 뷰 볼륨(130) 내에 있는 말단작용기 또는 도구의 임의의 부분의 실제 위치가 도구 추적 컴포넌트(90)를 사용하여 찾을 수 있도록 이미지가 사용가능한지 여부이다. 하나의 형태에서, 도구 추적이 사용가능하면, 단계(406)는 도구 추적 정보가 도구 및/또는 말단작용기의 포지션 및/또는 방향에 대한 정보를 갱신하기 위해 사용되는 단계(408)로 분기한다.
단계(410)에서, 키네매틱 정보는 환자측 카트용 로봇의 각각의 링커지의 조인트의 위치 및 방향에 대한 정보를 갱신하기 위해 사용된다. 단계(412)에서, 바람직하다면, 오프셋이 갱신된다. 단계(414)에서, 통합 이미지(120)의 디스플레이가 갱신되고, 프로세스는 단계(404)로 다시 분기한다.
단계(406)에서, 도구 추정 정보가 사용가능하지 않다면, 프로세스는 키네매틱 컴포넌트(92)에 의해 제공되는 키네매틱 정보가 말단작용기의 포지션을 판정하기 위해 사용되는 단계(416)으로 분기한다. 본 프로세스는 그 다음 단계(410)로 진행하고, 그 다음 프로세스를 통해 도구 추정 정보가 이 루프에서 사용가능하지 않기 때문에 오프셋은 갱신되지 않을 것이고, 단계(412)로 스킵한다.
도 7에 도시된 방법을 사용하여, 통합 이미지(120)의 3-D 렌더링이 생성되고, 이 통합 이미지는 수술과정에 걸쳐 임의의 시점에 환자측 카트의 물리적 구성을 정확하게 나타낸다. 이러한 정보는 환자측 카트의 상태를 평가하기 위해 수술의(S) 또는 다른 사람이 사용하고 볼 수 있다. 아래에 서술된 바와 같이, 뷰어(34) 또는 디스플레이(82)는 내시경으로부터의 시점(point of view)과 같은 시점으로부터 또는 다른 각도 또는 거리로부터, 통합 이미지(120)를 보여줄 수 있다. 통합 이미지(120)는 뷰어(32)를 통해 환자 뷰 카트의 모든 부분의 관찰을 가능하게 하므로, 수술의(S)가 로봇 및 도구의 움직임을 모니터링하는 것을 허용한다. 또한, 일 실시예에 따르면, 이들 컴포넌트의 보기가 뷰 볼륨(130)과 관련하여 이용가능해지므로, 공간에 대해 내시경의 시야가 있는 곳의 양호한 펄스펙티브를 수술의에게 제공하는 것을 허용한다. 뷰 볼륨(130)은 뷰어(32)를 볼 때 수술의(S)에 의해 보여지는 것의 3차원 표현을 제공한다.
바람직하다면, 내시경의 시야 및 통합 이미지(120)를 모두 보여주기 위해 하나의 디스플레이가 제공된다. 예를 들어, 도 8에 도시된 바와 같이, 뷰어(32) 또는 디스플레이(84)에 의해 제공되는 화면(200)은 내시경(126)을 위한 실제 시야 이미지(202) 및 통합 이미지(120)를 모두 제공한다. 통합 이미지(120)는 분리된 타일 윈도우(204)에 도시되어 있다. 도 8에 도시된 실시예에서, 타일(204)은 시야(202)와 대략적으로 동일한 크기이지만, 바람직하다면, 타일 윈도우는 시야(202) 보다 더 크거나 작을 수도 있다. 또한, 바람직하다면, 토글 또는 다른 피처가 수술의가 통합 이미지(120) 또는 시야(202)의 더 큰 프리젠테이션 사이에서 앞뒤로 스위칭할 수 있도록 제공될 수 있다. 또한, 통합 이미지(120) 및/또는 타일 윈도우(204)는, 연속적 베이시스에 따라 또는 요청에 따라 시야의 일부분 위에 부분적으로 슈퍼임포즈될 수도 있다.
통합 이미지(120) 또는 시야(202)의 더 큰 프리젠테이션 사이에서 앞뒤로 토글링하는 하나의 예로서, 마스터 조종기에 연결되는 카메라 컨트롤이 제공될 수 있다. 예를 들어, 사용자는 내시경 화면을 보기 시작하고, 카메라 컨트롤 모드에서 손을 자신을 향해 당김으로써 내시경을 뒤로 당길 수 있다. 몇몇 포인트에서, 내시경은 더 이상 뒤로 당겨지지 않고, 시야는 최대 영역은 포함한다. (햅틱 디텐트(detent) 또는 다른 지시와 함께, 또는 없이) 마스터 컨트롤을 뒤로 계속 당기고 있는 것은 실제 이미지(예컨대, 시야(202)에서 캡처된 이미지)의 경계를 따라 통합 이미지(120)의 화면에 보이는 섹션을 노출시킬 수 있다. (햅틱 디텐트 또는 다른 지시와 함께, 또는 없이) 마스터 컨트롤을 더 멀리 뒤로 당기는 것은 시야(202)에서 캡쳐된 이미지가 스크린의 중심 섹션만 있는 화면을 제공할 수 있다. (햅틱 디텐트 또는 다른 지시와 함께, 또는 없이) 마스터 컨트롤을 더 멀리 뒤로 당기는 것은 전체 통합 이미지(120)를 제공할 수 있다. 마스터 컨트롤 방향을 바꾸는 것(reverse)은 이러한 리얼-투-통합 줌아웃 기능을 바꾸고 그리고 통합-투-리얼 줌인 기능을 제어하기 위해 사용될 수 있다. 마스터 조종기 이동을 사용하여 카메라를 제어하는 것의 대안으로서, 줌 기능을 제어하기 위한 다른 컨트롤 입력(풋 페달, 조종기 상의 핑거 버튼, 조종기 그립의 회전 등)을 사용하기 위한 시스템이 구성될 수 있다.
도 9는 통합 이미지(120)의 일부분을 보여주기 위한 대안의 각도를 디스플레이하는 타일 위도우(208)를 도시한다. 도시된 실시예에서, 뷰 볼륨(130)은 내시경의 실제 시야로부터 약간 기울어져 있지만, 뷰 볼륨(130)의 특정 시야 각은 뷰 볼륨에 대한 도구(124)의 구성에 관련 정보를 보여준다.
통합 이미지(120)의 피처는 미소절개 원격수술 시스템(20)의 사용자에게 다른 다양한 이점을 제공한다. 이러한 이점 중 몇가지가 아래에 나열된다.
충돌 탐지
전형적으로, 미소절개 원격수술 시스템에서, 도구(124)와 같은 수술도구의 최말단부만이 임의의 시간에 내시경(126)의 시야 내에서 수술의에게 보여질 수 있다. 환자측 카트의 구성에 따라, 수술의의 시야에 보이지 않는 로봇 어셈블리의 이동부 간의 충돌이 발생할 가능성이 존재한다. 몇몇 이러한 충돌(내시경(126)의 시야 밖에 있으므로 "외부 충돌")은 도구를 리딩하는 로봇 팔 어셈블리의 연결부 사이에서 발생할 수 있고, 두 도구 사이에서 발생할 수도 있고, 또는 도구와 연결부 사이에서 발생할 수도 있다. 이러한 외부 충돌은 시야 밖에서 몸속에서 발생할 수도 있고, 또는 몸 밖에서 발생할 수도 있다. 또한, 외부 충돌은 시야 내에 있는 하나의 도구와 시야를 약간 벗어난 다른 도구 사이에서 발생할 수도 있다. 환자 몸속에서 그리고 내시경이 시야 내에서의 충돌은 "내부 충돌"이다.
하나의 실시예에 따라, 통합 이미지(120) 및/또는 모델링 컴포넌트(128)에 의해 생성된 정보는 충돌 방지를 위해 사용될 수 있다. 하나의 예로서, 뷰어(32)를 보는 수술의 또는 디스플레이(84)를 보는 다른 사람들은 실제적 충돌이나 출동에 임박하였다는 지시를 보기 위해 통합 이미지(120)를 볼 수 있다.
충돌 탐지는 충돌의 시각적 이미지보다는 많은 것을 포함할 수 있다. 로봇 연결부 및 도구의 상대적 위치에 대한 정보가 모델링 컴포넌트(128)에 의해 유지되고, 이러한 정보는 두 컴포넌트가 서로 너무 가까워졌음을 감지하면 신호를 발생시키기 위해 사용될 수 있다. 예를 들어, 각각의 도구는 특정한 반지름 또는 도구 표면 밖에 완충영역을 가진 캡슐 또는 실린더와 같이 다루어질 수 있다. 도구 추적 컴포넌트로부터의 실제 위치 정보 및/또는 키네매틱 컴포넌트(92)로부터의 키네매틱 정보를 사용하여, 모델링 컴포넌트(108)는 충돌을 예측하거나 경고할 수 있다. 예를 들어, 두 도구(124)가 각각 0.5인치의 반지름을 가진다고 가정하면, 도구 중 하나에 대한 중심선이 제2 도구에 대한 중심선과 1인치 내로 근접한다면, 모델링 컴포넌트(108)는 충돌이 발생한 것으로 가정할 수 있다. 두 도구가 서로 접촉하지는 않았지만 근접한 것으로 계산된다면, 별도의 신호가 생성될 수 있다. 상기 예에 대하여, 이러한 거리는, 예컨대, 1.2인치의 도구 사이의 중심선 거리일 수 있다.
도 10은 하단에 실제 시야 이미지(250)가 두 도구(252, 254)의 충돌을 보여주는 디스플레이 타일 윈도우를 도시한다. 도 10에서의 충돌이 앞서 서술한 바와 같이 시야(250) 내에 있으나, 이러한 충돌은 시야 밖에서 또는 심지어 환자의 몸 밖에서 발생할 수도 있다. 시야 내에 있다 하더라도, 예컨대, 소작(cauterization) 연기, 혈액, 또는 조직에 의해 가려질 수 있기 때문에, 도구(252, 254)를 반드시 볼 수 있는 것은 아니다. 도 10에서, 내부 충돌은 시야(250) 내에서 보여지지만, 모델링 컴포넌트(108)에 의해 탐지된다.
도 10의 상단은 통합 이미지(120)를 나타내는 디스플레이 타일 윈도우(260)이다. 도 10에 도시된 실시예에서, 타일 윈도우(260)는 시야(250)와 동일한 시점으로부터 얻어지지만, 앞서 서술된 바와 같이 상이한 시점이 제공될 수도 있다. 또한, 앞서 서술된 바와 같이, 외부 충돌은 물론 내부 충돌도 탐지될 수 있다.
도 11은 하나의 실시예에 따른 충돌 정보를 제공하는 예시적인 프로세스를 보여주는 흐름도이다. 본 프로세스는 단계(1100)에서 시작한다. 단계(1102)에서, 통합 이미지(120)와 같은 모델이 생성된다. 이러한 생성 프로세스는 도 7을 참조하여 서술되어 있다. 단계(1104)에서, 환자측 카트용 로봇이 이동된다. 단계(1105)에서, 로봇 팔 어셈블리(122)의 연결부 및/또는 도구의 근접도가 계산된다. 단계(1106)에서, 그 근접도가 최대 임계값 내에 있는지 여부의 판정이 내려진다. 최대 임계값은 충돌 경고가 주어지는 도구 또는 연결부 사이의 간격을 나타낸다. 예를 들어, 앞서 서술한 바와 같이, 두 도구가 0.5인치의 반지름을 가진다고 가정하면, 최대 임계값은 1.2인치의 중심선 간격일 수 있다. 환자측 카트의 컴포넌트가 최대 임계값 내에 있지 않다면, 단계(1106)는 단계(1104)로 분기하고, 로봇은 계속 이동한다.
환자측 카트의 두 컴포넌트가 최대 임계값 내에 있다면, 단계(1106)는 경고가 발생되는 단계(1108)로 분기한다. 이러한 경고는 청각적 경고, (예컨대, 뷰어(32) 또는 디스플레이(84) 상에 제공되는) 시각적 경고, 또는 충돌 근접의 다른 적합한 지시일 수 있다. 시각적이라면, 그 경고는 예컨대, 시야(250) 내에 나타날 수 있다(도 10). 도 10에 도시된 실시예에서, 단어 "내부 충돌 에러"가 도시되고, 실제 충돌을 나타낸다. 대안으로서, 경고 메시지에 대하여, 도구가 너무 근접했음을 나타내는 메시지가 제공될 수 있다. 또한, 통합 이미지(120)의 화면에 대하여, 도구(124)의 색상이 금속 색상에서 경고를 위해 황색으로 변하는 것과 같이, 경고를 제공하기 위해 변할 수 있다.
수술의는 단계(1108)에서 경고가 발생된 후 로봇을 재정렬하도록 선출할수도 있고, 하지 않을 수도 있다. 어떠한 경우이든, 본 프로세스는 로봇을 다시 이동시키는 단계(1110)으로 진행한다. 단계(1112)에서, 로봇이 최소 임계값 내에 있는지 여부의 판정이 내려진다. 하나의 실시예에서, 최소 임계값은 충돌이 가정된 중심선 거리와 같은 거리를 나타낸다. 최소 임계값이 충족되지 않는다면, 본 프로세스는 단계(1104)로 다시 분기하고, 계속 루핑하여, 환자측 카트의 컴포넌트가 단계(1106)에서 최대 임계값 밖으로 이동되지 않는다면 경고 메시지를 계속 발생시킨다.
컴포넌트가 최소 임계값 내에 있다면, 단계(1112)에서 충돌 경고 또는 메시지와 같은, 충돌 정보가 발생되는 단계(1114)로 분기한다. 하나의 예로서, 도 10에서, 충돌 에러 경고가 시야(250) 내에 제공되어 있다. (실제 충돌 경고 및 충돌 임박 경고는 모두 동일한 지시를 사용할 수도 있고, 다른 지시를 사용할 수도 있다.) 유사한 충돌 에러 경고가 타일 윈도우(260)에 제공될 수 있고, 도구(124)는 충돌 에러를 나타내기 위해, 적색과 같이, 색상을 변경할 수 있다. 본 프로세스는 그 다음 단계(1104)로 다시 루프한다.
앞서 언급한 바와 같이, 충돌 탐지를 위해, 컴포넌트들은 뷰어(32)의 시야 내에 있을 필요는 없다. 그러므로, 환자측 카트의 컴포넌트가 부적절하게 정렬되어 있고, 충돌이 임박했거나 실제로 충돌했을 때, 시각적 형태 또는 경고 또는 에러 메시지 형태의 정보가 제공될 수 있다. 이러한 경고는 사용자가 로봇 수술에 친숙하지 않고, 도구 또는 로봇 팔 어셈블리를 서툰 방향으로 놓을 수 있는 경우에 특히 유용할 수 있다. 뷰어(32)를 보는 사람은 두 로봇 조종기 사이의 충돌 임박 또는 실제 충돌을 판정하기 위해 상이한 통합 화면 각도 및 로봇의 거리를 선택할 수 있다. 운전자가 충돌 지점을 본 후, 운전자는 실제 충돌 또는 충돌 임박 상태를 수정하고 추가적인 충돌을 피하도록 (수동적으로 "설정되는" 부분이든 또는 능동적으로 제어되는 조종기 부분이든) 하나 이상의 로봇의 키네매틱 팔을 조절할 수 있다. 하나의 형태에서, 운전자가 내시경의 시야에 대응하는 통합 화면을 보고 있다면, 통합 화면은 충돌 경고 또는 실제 충돌이 발생한 충돌 지점을 보여주기 위해 자동적으로 변경될 수 있다.
하나의 실시예에서, (예컨대, 펄스펙티브 이미징으로부터, 또는 조직 구조 위치를 레지스터링하는 다른 적합한 방법에 의한) 환자 및/또는 환자의 조직 구조의 일부분의 위치는 시스템에 제공될 수 있고, 레지스터링된 환자 위치 데이터는 로봇과 환자 또는 환자 몸속의 지정된 조직 구조 사이의 실제적 충돌 또는 잠재적 충돌을 탐지하고, 경고하고, 디스플레이하기 위한 것일 수 있다. 충돌은 앞서 서술한 바와 같이 탐지될 수 있다.
또한, 하나의 실시예에서, 충돌 상태를 줄이거나 보정하는데 도움을 주기 위해 시각적, 청각적, 또는 다른 지시자가 제공될 수 있다. 예를 들어, 앞서 서술된 경고 상황에 대하여, 수술의가 충돌을 피하는 것을 돕기 위해 수술의에게 정보가 제공될 수 있다. 예를 들어, 시각적 지시자는 충돌이 발생하는 이동 방향에 대한 정보를 제공하거나, 또는 충돌을 피하고 수정하기 위해 수술의가 취해야 하는 이동 방향을 나타낼 수 있다.
잃어버린 도구 찾기
미소절개수술에서, 기기들이 내시경 카메라의 뷰 볼륨 밖에 위치할 가능성이 존재한다. 이러한 가능성은 기기를 화면 안으로 다시 가져오도록 내시경을 어떻게 이동시키는지 또는 내시경의 시야 내로 기기를 어떻게 이동시키는지 수술의가 반드시 알 수 없기 때문에, 도구를 사실상 잃어버리는 경우를 야기할 수 있다. 또한, 이러한 상황은 수술의가 보이지 않는 기기를 이동시킬 수 있으므로, 환자 안전을 위협할 수 있다.
통합 이미지(120)는 각각의 도구(124)의 위치의 정확한 서술과 함께, 내시경의 뷰 볼륨(130)의 넓은 화면을 수술의에게 보여줌으로써 이러한 문제에 대한 해결책을 제공한다. 이러한 넓은 화면 및 도구 서술은 다양한 시점으로부터 제공될 수 있다. 하나의 실시예에서, 이러한 넓은 화면 및 도구 서술은 내시경 시야와 동일한 시점 또는 방향으로부터 제공된다. 이러한 방향으로 넓은 화면을 제공함으로써, 수술의는 도구가 뷰 볼륨(130) 내로 들어오도록 도구를 적절한 포지션으로 이동시킴과 동시에, 실제 내시경 이미지를 볼 때 통상적으로 경험하는 직관적인 도구 제어 이동을 유지할 수 있을 것이다. 대안으로서, 뷰 볼륨(130)은 수술의가 내시경(126)이 보고 있는 것과 상이한 펄스펙티브를 가지기 위해 다른 각도로부터 보여질 수 있다. 예컨대, 도 8 및 9는 통합 이미지(120)에 대하여 보여질 수 있는 화면의, 상이한 각도 및 면에서 얻어진, 3개의 상이한 화면을 도시한다. 도 8의 아래 부분은 실제 이미지를 도시하지만, 통합 이미지(120)는 동일한 방향에서 제공될 수 있고, 통합 도구가 실제 도구의 비디오 피드를 대신하여 도시된 것을 제외하면 유사하다. 시야에 의해 형성된 화면은 도 8의 아래부분에 도시되어 있고, (더 많은 환자측 카트를 보여주기 위해 밖으로 줌된) 통합 이미지의 전면에서 취해진 화면은 도 8의 윗부분에 도시되어 있다. 내시경의 시야의 방향에서 약간 뒷쪽으로 그리고 위쪽에서 취해지고, 뷰 볼륨(130)을 보여주기 위해 밖으로 줌된 화면은 도 9에 도시되어 있다. 이러한 약간씩 다른 화면은 도구(124)가 뷰 볼륨(130)에 대하여 존재하는 위치의 우수한 펄스펙티브를 제공한다. 수술의는 도 9에 도시된 바와 같이, 시야와 일치하는 화면과 시야에서 막 벗어난 화면 사이에서 토글할 수 있다. 이 때문에, 통합 이미지(120)의 상이한 화면 사이에서 수술의가 토글할 수 있도록 컨트롤러 또는 다른 디바이스가 제공될 수 있다. 대안으로서, 개별적인 컨트롤러 또는 마스터 컨트롤러는 통합 이미지(120)의 무한한 포지셔닝(예컨대, 다양한 면, 틸트, 회전, 돌리(dolly), 교환, 크레인, 줌 이미지 이동)을 허용하기 위해 사용될 수 있다.
도 12는 하나의 실시예에 따른 잃어버린 도구를 찾는 프로세스를 나타내는 흐름도이다. 본 프로세스는 단계(1200)에서 시작한다. 단계(1202)에서, 통합 이미지(120)는 앞서 서술한 바와 같이 생성된다. 단계(1204)에서, 환자측 카트 또는 로봇이 이동된다.
단계(1206)에서, 하나 이상의 도구가 시야를 벗어났는지 여부의 판정이 내려진다. 벗어나지 않았다면, 본 프로세스는 단계(1204)로 다시 루프한다. 하나 이상의 도구가 시야를 벗어났다면, 본 프로세스는 통합 이미지가 보여지는 단계(1208)로 진행할 수 있다. 이러한 통합 이미지는 자동적으로 보여질 수도 있고, 그렇지 않을 수도 있고, 통합 이미지 디스플레이는 수술의에 의해 선택될 수 있다. 이 때문에, 단계(1208)는 수술의 또는 다른 운전자에 의한 요청의 결과로서 수행될 수 있고, 시야를 벗어나는 도구에 의해 트리거될 수도 있고 그렇지 않을 수도 있다. 그러나, 바람직하다면, 통합 이미지는 도구의 이미지의 손실의 결과로서 자동적으로 보여질 수 있다. 이러한 하나의 실시예에서, 그러나, 수술의로부터 멀어지도록 시야를 취하는 것을 대신하여, 시야와 더불어 타일 윈도우 내의 통합 이미지를 보여주는 것이 바람직할 수 있다.
잃어버린 도구 디스플레이 옵션이 사용가능하다면, 통합 이미지(120)는 단계(1208)에서 요청되거나 제공될 수 있다. 단계(1208)에서 제공된 통합 이미지는 앞서 서술한 바와 같이 임의의 개수의 모델링된 시스템의 펄스펙티브 또는 내시경(126)의 시야와 실질적으로 동일할 수 있다. 원하는 각이 도시되지 않았다면, 수술의는 단계(1210)에서 다른 화면을 보이도록 선출할 수 있다. 수술의가 다른 화면을 볼 것을 선택하면, 단계(1210)에서 통합 이미지(120)가 예컨대 다른 화면을 보이기 위해 회전되는 단계(1212)로 분기한다. 바람직하다면, 이러한 이동의 일부로서, 통합 이미지는 수술의가 그 화면이 있는 포지션에 대하여 시작된 화면으로부터 포지션의 아이디어를 얻을 수 있도록, 공간에서 회전할 수 있다. 또한, 하나의 실시예에 따라, 수술의가 자신이 시야의 방향과 상이한 방향으로부터 뷰 볼륨(130)을 보고 있음을 이해할 수 있도록, 경고 메시지 또는 다른 지시자가 수술의에게 제공될 수 있다.
수술의가 단계(1210)에서 다른 화면을 요청하지 않는다면, 본 프로세스는 단계(1204)로 다시 루프한다.
앞서 서술한 바와 같이, 통합 이미지(120)는 뷰 볼륨(130)보다 더 크고, 뷰 볼륨을 벗어난 환자측 카트의 이미지를 제공한다. 그러므로, 내시경(126)의 시야와 동일한 시점을 따라 얻어졌다 하더라도, 수술의는 뷰 볼륨(130) 바로 밖의 도구가 보여질 수 있도록 줌아웃할 수 있다. 수술의는 그 다음 도구가 시야 내에 들어오도록 원하는 방향으로 도구 또는 내시경을 이동시킬 수 있다.
믹싱된 비디오 및 렌더링된 화면
앞서 서술한 바와 같이, 시스템이 로봇의 통합 이미지(120)를 수술의에게 보여주는 다양한 방법이 존재한다. 도 8에 대하여 서술된 제1 옵션은 시야 이미지(202) 위에 통합 화면을 보여주는 타일 윈도우(204)를 포함하고, 이 두 화면은 동시에 보여진다. 도 9에 도시된 다른 옵션은 통합 이미지(120)만 보여준다.
하나의 실시예에 따라, 비디오 이미지가 전체 환자측 카트의 통합 이미지(120)의 컨택스트 내에서 렌더링되도록, 매칭된 위치와 함께, 통합 이미지(120) 위에 내시경으로부터의 비디오 디스플레이가 슈퍼임포즈되는 제3 옵션이 제공된다. 이러한 화면은 수술의에게 환자측 카트의 컴포넌트의 상대적 위치를 제공하고, 수술의가 공간에 대하여 어디에 있는지 이해할 수 있게 한다. 이러한 화면은 또한 순수한 비디오 디스플레이와 순수한 통합 이미지(120) 사이에서 트랜지션할 때 적합하다. 이러한 트랜지션 중, 수술의는 로봇의 각각의 위치와 내시경으로부터의 비디오 이미지를 연관시킬 수 있다.
통합 이미지(120)를 포함하는 위도우 타일(306) 위에 시야(300) 내의 이미지가 투영되어 있는, 간단한 버전의 도면이 도 13에 도시되어 있다. 시야 이미지(300)는 하나의 동작을 수행하는 2개의 도구(302, 304)를 포함한다. 윈도우 타일(306)은 시야(300)에 의해 제공되는 화면을 확장하고, 도구(302, 304)의 부가적인 부분(308, 310)이 제공된다. 수술의는 환자측 카트의 다른 부분에 관한 도구의 위치에 대한 추가적인 정보를 제공하기 위해 줌인 및 줌아웃할 수 있다. 또한, 도 13에 도시된 실시예에 관하여 서술된 피처는, 예컨대, 시야(300) 내에는 없지만 윈도우 타일(306)에 있는 시야 바로 밖에 있는 잃어버린 도구를 찾기 위해 사용될 수 있다.
시각적 문제해결 지시자
하나의 실시예에 따라, 통합 이미지(120)를 대신하여 또는 부가적으로, 모델링 데이터(104)는 환자측 카트의 일부분의 시각적 표현 이외의 이미지를 투영하기 위해 사용될 수 있다. 예를 들어, 도구 추적 컴포넌트(90) 및/또는 키네매틱 컴포넌트(92)에 의해 제공되는 포지션 정보를 사용하여, 모델링 컴포넌트(108)는 통합 이미지(120)의 일부분을 다른 색상으로 디스플레이하거나, 통합 이미지의 일부분 위에 또는 통합 이미지 대신에 텍스트를 디스플레이할 수 있다. 이러한 실시예에서, 텍스트는 그 도구에 대한 주의를 집중시키기 위해 또는 다른 정보를 제공하기 위해 시야 내의 실제 도구 위에 슈퍼임포즈될 수 있다. 하나의 예로서, 도 13의 도구(304)에 대하여, 모델링 컴포넌트(108)는 도구에 대한 클램프가 닫혀 있음을 나타내기 위해 도구(304)의 비디오 이미지 위에 나란히 배열된 텍스트 메시지 "closed"(320)를 디스플레이하기 위해 사용될 수 있다. 앞서 서술한 카메라 정보는 이미지 캡처 디바이스로부터 도구(304)의 스테레오 화면 상에 슈퍼임포즈될 수 있는 3차원 스테레오 렌더링의 생성을 가능하게 한다. 또한, 에러 메시지가 제공될 수 있다.
도 14는 하나의 실시예에 따른 모델링 컴포넌트(108)를 사용하는 정보를 디스플레이하는 프로세스를 나타내는 흐름도이다. 단계(1400)에서 시작하여, 환자측 카트의 컴포넌트의 위치, 예컨대, 도구(124)의 위치가 판정된다. 단계(1402)에서, 모델링 컴포넌트(108)는 상술한 바와 같이 도구와 정렬된다. 단계(1404)에서, 원하는 정보들은 도구 위에 디스플레이된다. 예를 들어, 앞서 서술한 바와 같이, 도구 위에 단어들이 디스플레이될 수 있다. 또한, 바람직하다면, 도구 또는 다른 피처와 인접하게 또는 그 둘레에 정보가 디스플레이될 수 있다.
이해하는 바와 같이, 시야 내의 실제 도구 위에 메시지를 슈퍼임포즈하기 위해, 모델링 데이터(104)는 도구의 외부 둘레에 대한 정보를 포함하는 것만을 필요로 한다. 환자측 카트의 다른 컴포넌트는 본 실시예에서는 필요하지 않다.
커뮤니케이션 지원
통합 이미지(120)는 환자측 카트의 수술의 원격 이미지를 제공하는데 유용할 수 있다. 예를 들어, 몇몇 상황에서, 환자측 카트로부터 멀리 떨어진 사람은 환자측 카트의 수술을 보고자할 수 있다. 이러한 상황에서 통합 이미지(120)는 뷰어(32) 및 원격 디스플레이(84) 모두에서 렌더링될 수 있다. 이러한 상황에서, 하나의 실시예에 따라, 모델링 데이터는 하나의 위치에서 모두 유지될 수 있고, 통합 이미지(120)는 원격 위치에 있는 디스플레이를 위한 원격 위치로 전송된다.
대안의 실시예에서, 도구 추적 컴포넌트(90) 및/또는 키네매틱 컴포넌트(92)에 의해 제공되는 포지션 및 방향 정보는 원격 컴퓨터로 전송될 수 있다. 원격 컴퓨터는 차례로 모델링 컴포넌트(108) 및 모델링 데이터(104)를 포함한다. 본 실시예에서, 통합 이미지(120)는 뷰어(32)를 위한 통합 이미지(120)를 산출하는 것과 다른 개별적인 오퍼레이션으로 원격 위치에서 생성된다.
원격 위치에 통합 이미지(120)를 제공할 수 있다는 것은 수술의의 콘솔을 보는 수술중인 수술의가 보조 모니터를 보는 수술 보조들과 통신하는 것을 가능하게 한다. 또한, 하나의 수술의 콘솔에 있는 학생 수술의는 다른 수술의 콘솔에 있는 원격 감독관과 통신할 수 있다.
다른 실시예에 따라, 원격 사용자 또는 감독관은 통합 이미지(120)와 같은, 통합 이미지의 이동을 제어할 수 있다. 통합 이미지의 이동은 수술의 콘솔에 있는 수술의 또는 학생들이 볼 수 있고, 사용자가 수술 과정 및 동작을 배울 수 있게 하고, 수술의 또는 학생의 컨트롤(및 그러므로 도구)과 이러한 동작을 모방할 수 있다.
동작 한계의 범위
환자측 카트의 로봇 팔 어셈블리에 대한 연결부는 제한된 범위의 이동성을 가지고, 이는 각각의 팔 또는 연결부에 의해 지지되는 도구의 이동성을 제한한다. 환자용 로봇이 동작 한계의 범위를 만날 때, 로봇이 계속 이동할 수 없기 때문에 수술의(새로운 또는 경험 있는)에게 항상 관찰되는 것은 아니다. 원격 수술 시스템에서, 전형적으로 두개의 동작 한계의 범위: 마스터 조종기의 조인트 한계 및 슬레이브 조종기의 조인트 한계가 존재한다.
하나의 실시예에 따라, 모델링 컴포넌트(108)는 도구에 대한 이동 범위의 한계에 도달했음을 나타내는 신호를 발생시킨다. 이러한 신호는, 예컨대, 한계에 도달한 부분의 색상 코딩과 같은, 수술의에게 시각적 신호를 생성하도록 사용될 수 있다. 대안으로서, 이러한 한계는 통합 이미지(120)와 함께 도시될 수 있는, 또는 대안으로서 시야 위에 슈퍼임포즈될 수 있는 시각적 벽(340)(도 6)과 같은 통합적 지오메트리로 표현될 수 있다. 시각적 벽(340)은 최우측 도구(124)에 대한 것이고, 이 벽은 오목하거나 평평하게 도시될 수 있고, 또는 그렇지않다면 동작의 범위의 굴곡에 매칭하는 형상일 수 있다. 시각적 벽(340)은 기기 팁의 방해된 동작 방향에 수직인 위치 및 방향으로 디스플레이된다.
다른 변형들도 본 발명의 정신에 속한다. 그러므로, 본 발명은 다양한 수정 및 대안의 구성이 가능하고, 본 발명의 특정한 도시된 실시예가 도면에 도시되고 앞서 상세하게 설명되었다. 그러나, 본 발명이 개시된 특정한 형태로 한정하고자 한 것이 아니며, 첨부된 청구항에서 정의된 본 발명의 정신 및 범위에 속하는 모든 수정, 대안의 구성, 및 동등물을 모두 커버하는 것임을 이해해야 한다.
본원에 인용된 간행물, 특허출원 및 특허를 비롯한 모든 참고문헌은 각 참고문헌이 개별적으로 그리고 특별히 참조로서 병합되도록 나타내어지고 본원에 그 전체가 개시된 것과 동일한 정도로 본원에 참조로서 병합되어 있다.
본 발명을 설명하는 문구(특히, 아래의 청구항의 문구)에서 용어 "하나"의 사용은 그 문구에 명시적으로 기재되어 있지 않다면, 단수 및 복수를 모두 커버하는 것으로 해석되어야 한다. 용어 "포함하는", "구비한", "갖춘", "수반하는"은 명시적으로 기재되어 있지 않다면, 개방식 용어(즉, "포함하지만 그것으로 제한하지 않는"다는 의미)로 해석되어야 한다. 용어 "연결된"은 어떤 것의 중개가 있다 하더라도, 부분적으로 또는 전체적으로 어떤 것 내에 포함되거나, 어디에 부착되거나, 또는 함께 결합되는 것으로 해석되어야 한다. 본 명세서에서 값의 범위의 설명은 본 명세서 다르게 지시되지 않았다면, 그 범위 내에 속하는 각각의 개별 값을 개별적으로 언급하는 속기법으로서 역할하도록 의도된 것이며, 각각의 개별 값은 그것이 각각 본 명세서에 개별적으로 인용된 것처럼 본 명세서에 통합된다. 본 명세서에 서술된 모든 방법은 본 명세서에 특별하게 또는 명시적으로 기재되어 있지 않다면 임의의 적합한 순서로 수행될 수 있다. 본 명세서에 제공된 임의의 예 및 모든 예, 또는 예시적 언어(예컨대, "~와 같은")의 사용은 오직 본 발명의 실시예를 더 잘 설명하기 위한 의도이며, 다르게 청구되지 않았다면 본 발명의 범위에 대한 한정을 부과하지 않는다. 본 명세서의 언어는 임의의 청구되지 않은 엘리먼트를 본 발명의 실시에 필수적인 것으로서 나타내도록 해석되지 않아야 한다.
본 발명을 실시하기 위해 발명자가 알고 있는 최선의 모드를 포함하는 본 발명의 바람직한 실시예가 본 명세서에 서술되어 있다. 이러한 바람직한 실시예의 변형은 앞선 설명을 읽은 당업자들에게 명백해질 수 있다. 발명자는 당업자들이 이러한 변형을 적절하게 적용할 수 있고, 본 명세서에 특정하게 서술된 것과 다르게 실시될 수도 있음을 예상한다. 따라서, 본 발명은 법에서 허용하는 바와 같이 첨부된 청구항에 기재된 것의 모든 수정 및 동등물을 포함한다. 또한, 본 발명의 모든 가능한 변형에서 앞서 서술된 엘리먼트의 임의의 조합은 명시적으로 포함되지 않는 것으로 기재되어 있지 않다면 본 발명에 포함된다.

Claims (38)

  1. 로봇 수술 시스템으로서,
    도구를 지지하는 연결부를 포함하는 로봇;
    움직임을 통해 상기 도구를 이동시키기 위한 커맨드를 수신하기 위해 배치된 입력 및 디스플레이를 포함하는 수술용 콘솔;
    상기 도구의 이동동안 상기 연결부와 연관된 키네매틱 포지션 정보를 얻기 위해 상기 로봇에 연결되어 있는 키네매틱 컴포넌트;
    디스플레이; 및
    제1 컴포넌트로서, 상기 제1 컴포넌트는 상기 디스플레이를 상기 키네매틱 컴포넌트에 연결하여 상기 연결부의 적어도 일부분의 그래픽 3차원 모델을 포함하는 상기 로봇의 통합적 표현을 디스플레이하고, 상기 그래픽 3차원 모델은 상기 연결부에 관한 연결부 구조 데이터와 상기 키네매틱 포지션 정보를 기초로 하여 상기 도구의 이동 동안 상기 로봇의 움직임을 모방하도록 갱신되는, 상기 제1 컴포넌트
    를 포함하는 로봇 수술 시스템.
  2. 제1항에 있어서,
    상기 도구를 포함하는 시야를 가진 이미지 캡처 디바이스를 더 포함하고,
    상기 디스플레이는 상기 이미지 캡처 디바이스의 상기 시야 내의 이미지를 수신하도록 연결되어 있는, 로봇 수술 시스템.
  3. 제2항에 있어서,
    제2 디스플레이;를 더 포함하고,
    상기 제2 디스플레이는 상기 수술용 콘솔에서 멀리 떨어져 있고, 그리고
    상기 제2 디스플레이는 상기 로봇의 상기 통합적 표현을 디스플레이하는, 로봇 수술 시스템.
  4. 제3항에 있어서, 상기 연결부에 관한 상기 연결부 구조 데이터, 및 상기 키네매틱 포지션 정보를 기초로 하여, 상기 연결부의 적어도 일부분의 그래픽 표현을 포함하는 상기 로봇의 통합적 표현을 상기 제2 디스플레이 상에 디스플레이하기 위해 상기 키네매틱 컴포넌트와 상기 제2 디스플레이를 연결하는 제2 컴포넌트를 더 포함하는, 로봇 수술 시스템.
  5. 제1항에 있어서, 상기 통합적 표현은 상기 도구의 모델을 포함하는, 로봇 수술 시스템.
  6. 제5항에 있어서, 상기 모델은 상기 도구의 3차원 모델을 포함하는, 로봇 수술 시스템.
  7. 제1항에 있어서,
    이미지 캡처 디바이스의 시야 내에서 상기 도구의 이미지를 캡처하는 이미지 캡처 디바이스; 및
    상기 디스플레이 상에 상기 이미지 캡처 디바이스로부터의 상기 이미지를 디스플레이하기 위해 상기 디스플레이에 상기 이미지 캡처 디바이스를 연결하는 제2 컴포넌트;를 더 포함하는, 로봇 수술 시스템.
  8. 제7항에 있어서, 상기 통합적 표현은 상기 이미지 캡처 디바이스로부터의 상기 디스플레이된 이미지 외부의 상기 디스플레이상에 나타내도록 디스플레이되는, 로봇 수술 시스템.
  9. 제1항에 있어서, 상기 도구를 포함하는 시야를 캡처하는 이미지 캡처 디바이스를 더 포함하고,
    상기 로봇의 상기 통합적 표현은 상기 이미지 캡처 디바이스의 상기 시야의 경계의 프로젝션의 3차원 표현 및 상기 이미지 캡처 디바이스를 포함하는 로봇 수술 시스템.
  10. 삭제
  11. 제9항에 있어서, 상기 통합적 표현은 상기 도구의 모델을 포함하는, 로봇 수술 시스템.
  12. 제11항에 있어서, 상기 모델은 상기 도구의 3차원 모델을 포함하는, 로봇 수술 시스템.
  13. 제1항에 있어서,
    상기 로봇은 제2 도구 또는 이미지 캡처 디바이스를 지지하는 제2 연결부를 포함하고,
    상기 키네매틱 컴포넌트는 상기 도구의 이동 동안 상기 연결부들에 관한 조인트 상태 정보를 획득하기 위해 상기 제1 연결부와 상기 제2 연결부에 연결되고,
    상기 시스템은,
    상기 연결부, 상기 제2 연결부, 상기 도구, 및 상기 제2 도구 또는 상기 이미지 캡처 디바이스의 구조에 관한 데이터; 및
    상기 도구의 이동 동안 (i) 상기 연결부 또는 상기 도구와, (ii) 상기 제2 연결부 또는 상기 제2 도구 또는 상기 이미지 캡처 디바이스의 잠재적 또는 실제적 충돌에 대한 경고 신호를 발생시키기 위해, 상기 데이터 및 상기 키네매틱 컴포넌트에 연결되어 있는 충돌 탐지 컴포넌트
    를 포함하고,
    상기 충돌 탐지 컴포넌트는 상기 잠재적 또는 실제적 충돌에 대한 정보를 디스플레이하기 위해 상기 디스플레이에 상기 신호를 전송하도록 구성되어 있는 로봇 수술 시스템.
  14. 제13항에 있어서, 상기 충돌 탐지 컴포넌트는 상기 데이터 및 상기 키네매틱 컴포넌트에 의해 판정되는, 상기 제1 연결부 또는 상기 제1 수술 도구와, 상기 제2 연결부 또는 상기 제2 수술 도구 또는 상기 이미지 캡처 디바이스의 근접의 결과로서 경고 신호를 발생시키도록 구성되어 있는, 로봇 수술 시스템.
  15. 삭제
  16. 제13항에 있어서, 상기 잠재적 또는 실제적 충돌에 대한 정보는 (a) (i) 상기 제1 연결부 또는 상기 제1 수술 도구와 (ii) 상기 제1 연결부 또는 상기 제2 수술 도구 또는 상기 이미지 캡처 디바이스 사이의 상기 잠재적 또는 실제적 충돌의 통합적 표현, (b) 충돌을 피하거나 보정하는 것에 대한 정보, 또는 (c) 상기 잠재적 또는 실제적 충돌의 위치를 하일라이팅하는 것을 포함하는, 로봇 수술 시스템.
  17. 삭제
  18. 삭제
  19. 제16항에 있어서, 상기 잠재적 또는 실제적 충돌에 대한 정보는 상기 위치 부근의 텍스트 메시지를 포함하는, 로봇 수술 시스템.
  20. 삭제
  21. 삭제
  22. 삭제
  23. 제1항에 있어서,
    상기 제1 컴포넌트는 상기 디스플레이를 상기 키네매틱 컴포넌트와 연결하여 상기 도구의 이동 동안 상기 디스플레이된 이미지 내에 표현된 상기 도구와 나란히 배열된 정보를 디스플레이하고, 상기 정보의 포지션은 상기 연결부에 관한 연결부 구조 데이터와 상기 키네매틱 포지션 정보를 기초로 하는, 로봇 수술 시스템.
  24. 제23항에 있어서,
    상기 이미지 캡처 디바이스의 시야 내의 도구의 3차원 화면을 생성하기 위해 상기 이미지 캡처 디바이스와 상기 디스플레이에 연결되는 스테레오스코픽 이미지 시스템; 및
    상기 도구의 상기 3차원 화면을 매칭하는 상기 디스플레이 정보의 3차원 외관을 제공하기 위해 상기 제1 컴포넌트와 상기 디스플레이에 연결된 교정된 카메라 모델;을 더 포함하는, 로봇 수술 시스템.
  25. 제23항에 있어서, 상기 도구와 나란히 배열된 정보는 텍스트를 포함하는, 로봇 수술 시스템.
  26. 삭제
  27. 삭제
  28. 삭제
  29. 삭제
  30. 삭제
  31. 삭제
  32. 제1항에 있어서,
    상기 도구 및 상기 연결부의 구조에 관한 제1 데이터;
    환자의 포지션에 관한 환자 데이터; 및
    상기 제1 데이터를 수신하도록 연결되어 있고, 상기 환자 데이터를 수신하도록 연결되어 있고, 그리고 상기 키네매틱 컴포넌트에 연결되어, 상기 환자와 상기 연결부의 잠재적 또는 실제적 충돌에 대한 경고 신호를 상기 도구의 이동 동안 발생시키는 충돌 탐지 컴포넌트를 더 포함하고,
    상기 충돌 탐지 컴포넌트는 상기 잠재적 또는 실제적 충돌에 대한 정보를 디스플레이하기 위해 상기 디스플레이에 상기 경고 신호를 전송하도록 구성되어 있는, 로봇 수술 시스템.
  33. 삭제
  34. 제32항에 있어서, 상기 잠재적 또는 실제적 충돌에 대한 정보는 상기 환자와 상기 연결부 사이의 상기 잠재적 또는 실제적 충돌의 통합적 표현을 포함하는, 로봇 수술 시스템.
  35. 제34항에 있어서, 상기 잠재적 또는 실제적 충돌에 대한 상기 정보는 충돌을 피하거나 보정하는 것에 대한 정보를 포함하는, 로봇 수술 시스템.
  36. 삭제
  37. 제1항에 있어서,
    실시간 비디오 이미지가 캡처되는 시야를 가진 이미지 캡처 디바이스를 더 포함하고,
    상기 제1 컴포넌트는 상기 시야의 경계의 프로젝션의 3차원 렌더링을 생성하고, 상기 시야를 벗어난 상기 도구의 적어도 일부분의 3차원 렌더링을 생성하고,
    상기 디스플레이는 상기 시야의 경계의 프로젝션의 상기 렌더링, 상기 시야를 벗어난 상기 도구의 적어도 일부분의 렌더링, 및 상기 실시간 비디오 이미지를 동시에 디스플레이하고,
    상기 도구의 적어도 일부분의 렌더링은 상기 이미지 캡처 디바이스의 상기 시야에 관련하여 상기 도구가 가지는 위치와 실질적으로 동일한 위치에 상기 시야의 경계의 프로젝션의 렌더링에 대하여 위치되어 나타나도록 디스플레이되고,
    상기 실시간 비디오 이미지는 상기 실시간 비디오 이미지가 상기 이미지 캡처 디바이스의 시야 내에서 캡처된 위치와 실질적으로 동일한 위치에 상기 시야의 경계의 프로젝션의 렌더링에 관련하여 위치되어 나타나도록 디스플레이되는 로봇 수술 시스템.
  38. 제37항에 있어서, 상기 시야의 경계의 프로젝션의 렌더링에 관련하여 상기 실시간 비디오 이미지의 디스플레이되는 위치는 상기 시야의 경계의 프로젝션의 렌더링의 디스플레이되는 화면 각이 상기 디스플레이 내에서 변경될 때 실질적으로 일정하게 유지되는, 로봇 수술 시스템.
KR1020117025321A 2009-03-31 2010-03-26 수술 로봇의 통합적 표현 KR101705921B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/415,354 US9789608B2 (en) 2006-06-29 2009-03-31 Synthetic representation of a surgical robot
US12/415,354 2009-03-31
PCT/US2010/028897 WO2010117685A2 (en) 2009-03-31 2010-03-26 Synthetic representation of a surgical robot

Publications (2)

Publication Number Publication Date
KR20120004479A KR20120004479A (ko) 2012-01-12
KR101705921B1 true KR101705921B1 (ko) 2017-02-10

Family

ID=42261901

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020117025321A KR101705921B1 (ko) 2009-03-31 2010-03-26 수술 로봇의 통합적 표현

Country Status (6)

Country Link
US (4) US9789608B2 (ko)
EP (5) EP3842190A1 (ko)
JP (8) JP5840121B2 (ko)
KR (1) KR101705921B1 (ko)
CN (1) CN102448680B (ko)
WO (1) WO2010117685A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022080788A1 (ko) * 2020-10-13 2022-04-21 서울대학교 산학협력단 헤드셋 기반의 음성인식 마이크로폰을 이용한 수술로봇 시스템

Families Citing this family (216)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8944070B2 (en) 1999-04-07 2015-02-03 Intuitive Surgical Operations, Inc. Non-force reflecting method for providing tool force information to a user of a telesurgical system
US20060041252A1 (en) * 2004-08-17 2006-02-23 Odell Roger C System and method for monitoring electrosurgical instruments
US10555775B2 (en) 2005-05-16 2020-02-11 Intuitive Surgical Operations, Inc. Methods and system for performing 3-D tool tracking by fusion of sensor and/or camera derived data during minimally invasive robotic surgery
US8073528B2 (en) 2007-09-30 2011-12-06 Intuitive Surgical Operations, Inc. Tool tracking systems, methods and computer products for image guided surgery
US9789608B2 (en) 2006-06-29 2017-10-17 Intuitive Surgical Operations, Inc. Synthetic representation of a surgical robot
US8971597B2 (en) * 2005-05-16 2015-03-03 Intuitive Surgical Operations, Inc. Efficient vision and kinematic data fusion for robotic surgical instruments and other applications
US9492240B2 (en) 2009-06-16 2016-11-15 Intuitive Surgical Operations, Inc. Virtual measurement tool for minimally invasive surgery
US7907166B2 (en) * 2005-12-30 2011-03-15 Intuitive Surgical Operations, Inc. Stereo telestration for robotic surgery
US7930065B2 (en) 2005-12-30 2011-04-19 Intuitive Surgical Operations, Inc. Robotic surgery system including position sensors using fiber bragg gratings
US9962066B2 (en) 2005-12-30 2018-05-08 Intuitive Surgical Operations, Inc. Methods and apparatus to shape flexible entry guides for minimally invasive surgery
US9549663B2 (en) * 2006-06-13 2017-01-24 Intuitive Surgical Operations, Inc. Teleoperated surgical retractor system
US9718190B2 (en) 2006-06-29 2017-08-01 Intuitive Surgical Operations, Inc. Tool position and identification indicator displayed in a boundary area of a computer display screen
US10258425B2 (en) 2008-06-27 2019-04-16 Intuitive Surgical Operations, Inc. Medical robotic system providing an auxiliary view of articulatable instruments extending out of a distal end of an entry guide
US10008017B2 (en) 2006-06-29 2018-06-26 Intuitive Surgical Operations, Inc. Rendering tool information as graphic overlays on displayed images of tools
US20090192523A1 (en) 2006-06-29 2009-07-30 Intuitive Surgical, Inc. Synthetic representation of a surgical instrument
US9301807B2 (en) 2007-06-13 2016-04-05 Intuitive Surgical Operations, Inc. Surgical system counterbalance
US9089256B2 (en) 2008-06-27 2015-07-28 Intuitive Surgical Operations, Inc. Medical robotic system providing an auxiliary view including range of motion limitations for articulatable instruments extending out of a distal end of an entry guide
US9469034B2 (en) 2007-06-13 2016-10-18 Intuitive Surgical Operations, Inc. Method and system for switching modes of a robotic system
US8620473B2 (en) 2007-06-13 2013-12-31 Intuitive Surgical Operations, Inc. Medical robotic system with coupled control modes
US9084623B2 (en) 2009-08-15 2015-07-21 Intuitive Surgical Operations, Inc. Controller assisted reconfiguration of an articulated instrument during movement into and out of an entry guide
US8903546B2 (en) * 2009-08-15 2014-12-02 Intuitive Surgical Operations, Inc. Smooth control of an articulated instrument across areas with different work space conditions
US9138129B2 (en) 2007-06-13 2015-09-22 Intuitive Surgical Operations, Inc. Method and system for moving a plurality of articulated instruments in tandem back towards an entry guide
JP4912993B2 (ja) * 2007-09-12 2012-04-11 オリンパスメディカルシステムズ株式会社 医療機器システム
US8864652B2 (en) * 2008-06-27 2014-10-21 Intuitive Surgical Operations, Inc. Medical robotic system providing computer generated auxiliary views of a camera instrument for controlling the positioning and orienting of its tip
WO2010022088A1 (en) 2008-08-18 2010-02-25 Encision, Inc. Enhanced control systems including flexible shielding and support systems for electrosurgical applications
US9833281B2 (en) 2008-08-18 2017-12-05 Encision Inc. Enhanced control systems including flexible shielding and support systems for electrosurgical applications
US8374723B2 (en) * 2008-12-31 2013-02-12 Intuitive Surgical Operations, Inc. Obtaining force information in a minimally invasive surgical procedure
US8830224B2 (en) 2008-12-31 2014-09-09 Intuitive Surgical Operations, Inc. Efficient 3-D telestration for local robotic proctoring
US8184880B2 (en) * 2008-12-31 2012-05-22 Intuitive Surgical Operations, Inc. Robust sparse image matching for robotic surgery
US8594841B2 (en) * 2008-12-31 2013-11-26 Intuitive Surgical Operations, Inc. Visual force feedback in a minimally invasive surgical procedure
KR100961661B1 (ko) * 2009-02-12 2010-06-09 주식회사 래보 수술용 항법 장치 및 그 방법
US10004387B2 (en) 2009-03-26 2018-06-26 Intuitive Surgical Operations, Inc. Method and system for assisting an operator in endoscopic navigation
US8337397B2 (en) 2009-03-26 2012-12-25 Intuitive Surgical Operations, Inc. Method and system for providing visual guidance to an operator for steering a tip of an endoscopic device toward one or more landmarks in a patient
US9155592B2 (en) * 2009-06-16 2015-10-13 Intuitive Surgical Operations, Inc. Virtual measurement tool for minimally invasive surgery
US8423186B2 (en) * 2009-06-30 2013-04-16 Intuitive Surgical Operations, Inc. Ratcheting for master alignment of a teleoperated minimally-invasive surgical instrument
US9492927B2 (en) 2009-08-15 2016-11-15 Intuitive Surgical Operations, Inc. Application of force feedback on an input device to urge its operator to command an articulated instrument to a preferred pose
US8918211B2 (en) 2010-02-12 2014-12-23 Intuitive Surgical Operations, Inc. Medical robotic system providing sensory feedback indicating a difference between a commanded state and a preferred pose of an articulated instrument
KR101620831B1 (ko) * 2009-10-26 2016-05-13 (주)미래컴퍼니 수술용 인스트루먼트
NO20100339A1 (no) * 2010-03-10 2011-05-23 Seabed Rig As Fremgangsmåte og anordning for å sikre drift av automatisk eller autonomt utstyr
US9486189B2 (en) 2010-12-02 2016-11-08 Hitachi Aloka Medical, Ltd. Assembly for use with surgery system
US9119655B2 (en) 2012-08-03 2015-09-01 Stryker Corporation Surgical manipulator capable of controlling a surgical instrument in multiple modes
JP6113666B2 (ja) * 2011-02-15 2017-04-12 インテュイティブ サージカル オペレーションズ， インコーポレイテッド ステープル又は血管シール器具におけるナイフ位置のインジケータ
US10350431B2 (en) 2011-04-28 2019-07-16 Gt Medical Technologies, Inc. Customizable radioactive carriers and loading system
CA3082073C (en) 2011-07-11 2023-07-25 Board Of Regents Of The University Of Nebraska Robotic surgical devices, systems, and related methods
ITFI20110186A1 (it) * 2011-08-26 2013-02-27 Scuola Superiore Di Studi Universit Arie Di Perfe Dispositivo robotico per l'impianto di interfacce neurali nel sistema nervoso periferico
FR2980683B1 (fr) * 2011-09-30 2014-11-21 Univ Paris Curie Dispositif de guidage d'un instrument medical insere dans une voie naturelle ou une voie artificielle d'un patient
US20130303944A1 (en) 2012-05-14 2013-11-14 Intuitive Surgical Operations, Inc. Off-axis electromagnetic sensor
US9452276B2 (en) 2011-10-14 2016-09-27 Intuitive Surgical Operations, Inc. Catheter with removable vision probe
EP2797657B1 (en) * 2011-12-30 2019-03-13 St. Jude Medical, Atrial Fibrillation Division, Inc. System and method for detection and avoidance of collisions of robotically-controlled medical devices
DE102012206350A1 (de) * 2012-04-18 2013-10-24 Deutsches Zentrum für Luft- und Raumfahrt e.V. Verfahren zum Betreiben eines Roboters
CA2871149C (en) 2012-05-01 2020-08-25 Board Of Regents Of The University Of Nebraska Single site robotic device and related systems and methods
EP2854688B1 (en) * 2012-06-01 2022-08-17 Intuitive Surgical Operations, Inc. Manipulator arm-to-patient collision avoidance using a null-space
US11045267B2 (en) 2012-06-21 2021-06-29 Globus Medical, Inc. Surgical robotic automation with tracking markers
US11857149B2 (en) 2012-06-21 2024-01-02 Globus Medical, Inc. Surgical robotic systems with target trajectory deviation monitoring and related methods
US11317971B2 (en) 2012-06-21 2022-05-03 Globus Medical, Inc. Systems and methods related to robotic guidance in surgery
US10799298B2 (en) 2012-06-21 2020-10-13 Globus Medical Inc. Robotic fluoroscopic navigation
US11298196B2 (en) 2012-06-21 2022-04-12 Globus Medical Inc. Surgical robotic automation with tracking markers and controlled tool advancement
US11253327B2 (en) 2012-06-21 2022-02-22 Globus Medical, Inc. Systems and methods for automatically changing an end-effector on a surgical robot
US11589771B2 (en) 2012-06-21 2023-02-28 Globus Medical Inc. Method for recording probe movement and determining an extent of matter removed
US11896446B2 (en) 2012-06-21 2024-02-13 Globus Medical, Inc Surgical robotic automation with tracking markers
US11864839B2 (en) 2012-06-21 2024-01-09 Globus Medical Inc. Methods of adjusting a virtual implant and related surgical navigation systems
US11786324B2 (en) 2012-06-21 2023-10-17 Globus Medical, Inc. Surgical robotic automation with tracking markers
US11793570B2 (en) 2012-06-21 2023-10-24 Globus Medical Inc. Surgical robotic automation with tracking markers
US11399900B2 (en) 2012-06-21 2022-08-02 Globus Medical, Inc. Robotic systems providing co-registration using natural fiducials and related methods
US10624710B2 (en) 2012-06-21 2020-04-21 Globus Medical, Inc. System and method for measuring depth of instrumentation
US11864745B2 (en) 2012-06-21 2024-01-09 Globus Medical, Inc. Surgical robotic system with retractor
US11857266B2 (en) 2012-06-21 2024-01-02 Globus Medical, Inc. System for a surveillance marker in robotic-assisted surgery
US9226796B2 (en) 2012-08-03 2016-01-05 Stryker Corporation Method for detecting a disturbance as an energy applicator of a surgical instrument traverses a cutting path
AU2013296278B2 (en) 2012-08-03 2018-06-14 Stryker Corporation Systems and methods for robotic surgery
JP2015526171A (ja) 2012-08-08 2015-09-10 ボード オブ リージェンツ オブ ザ ユニバーシティ オブ ネブラスカ ロボット手術用デバイス、システム及び関連の方法
US9770305B2 (en) 2012-08-08 2017-09-26 Board Of Regents Of The University Of Nebraska Robotic surgical devices, systems, and related methods
US20140051049A1 (en) 2012-08-17 2014-02-20 Intuitive Surgical Operations, Inc. Anatomical model and method for surgical training
US20140148673A1 (en) 2012-11-28 2014-05-29 Hansen Medical, Inc. Method of anchoring pullwire directly articulatable region in catheter
WO2014093367A1 (en) * 2012-12-10 2014-06-19 Intuitive Surgical Operations, Inc. Collision avoidance during controlled movement of image capturing device and manipulatable device movable arms
WO2014104088A1 (ja) * 2012-12-25 2014-07-03 川崎重工業株式会社 手術ロボット
US10507066B2 (en) 2013-02-15 2019-12-17 Intuitive Surgical Operations, Inc. Providing information of tools by filtering image areas adjacent to or on displayed images of the tools
US9492683B2 (en) 2013-03-15 2016-11-15 Gammatile Llc Dosimetrically customizable brachytherapy carriers and methods thereof in the treatment of tumors
EP3970604A1 (en) 2013-03-15 2022-03-23 Board of Regents of the University of Nebraska Robotic surgical devices and systems
US11747895B2 (en) * 2013-03-15 2023-09-05 Intuitive Surgical Operations, Inc. Robotic system providing user selectable actions associated with gaze tracking
WO2014153396A1 (en) 2013-03-20 2014-09-25 Covidien Lp System and method for enhancing picture-in-picture display for imaging devices used for surgical procedures
JP6265630B2 (ja) * 2013-06-13 2018-01-24 オリンパス株式会社 内視鏡装置及び内視鏡装置の作動方法
EP3021779A4 (en) 2013-07-17 2017-08-23 Board of Regents of the University of Nebraska Robotic surgical devices, systems and related methods
DE102013012839B4 (de) * 2013-08-02 2019-05-09 Abb Schweiz Ag Robotersystem
US9724493B2 (en) * 2013-08-27 2017-08-08 Catheter Precision, Inc. Components and methods for balancing a catheter controller system with a counterweight
US10744646B2 (en) 2013-08-29 2020-08-18 Wayne State University Camera control system and method
CN106030683B (zh) * 2013-12-20 2020-10-30 直观外科手术操作公司 用于医疗程序培训的模拟器系统
JP5785284B2 (ja) * 2014-02-17 2015-09-24 ファナック株式会社 搬送対象物の落下事故を防止するロボットシステム
CN110236693B (zh) 2014-03-17 2022-11-04 直观外科手术操作公司 用于遥控操作医疗系统中的器械的屏外指示的系统和方法
US10201393B2 (en) * 2014-03-17 2019-02-12 Intuitive Surgical Operations, Inc. Constant force spring with active bias
CN110251233B (zh) 2014-03-17 2023-02-03 直观外科手术操作公司 用于与基准靶对准的系统和方法
CN115590628A (zh) * 2014-03-17 2023-01-13 直观外科手术操作公司（Us） 用于对成像装置和输入控制装置重定中心的系统和方法
EP3243476B1 (en) 2014-03-24 2019-11-06 Auris Health, Inc. Systems and devices for catheter driving instinctiveness
CN106535806B (zh) 2014-03-28 2019-06-18 直观外科手术操作公司 来自多端口视角的手术场景的定量三维成像
WO2015149040A1 (en) 2014-03-28 2015-10-01 Dorin Panescu Quantitative three-dimensional imaging of surgical scenes
CN110897590B (zh) 2014-03-28 2021-11-16 直观外科手术操作公司 带有基于定量三维成像的触觉反馈的手术系统
CN106456271B (zh) 2014-03-28 2019-06-28 直观外科手术操作公司 手术植入物的定量三维成像和打印
JP6854237B2 (ja) * 2014-03-28 2021-04-07 インテュイティブ サージカル オペレーションズ， インコーポレイテッド 視野内の器具の定量的三次元視覚化
KR20150128049A (ko) * 2014-05-08 2015-11-18 삼성전자주식회사 수술 로봇 및 그 제어방법
DE102014210116A1 (de) * 2014-05-27 2015-12-03 Carl Zeiss Meditec Ag Vorrichtung zur Steuerung einer Beobachtungseinrichtung
US9737371B2 (en) 2014-09-30 2017-08-22 Auris Surgical Robotics, Inc. Configurable robotic surgical system with virtual rail and flexible endoscope
US10314463B2 (en) 2014-10-24 2019-06-11 Auris Health, Inc. Automated endoscope calibration
US9821174B1 (en) * 2015-02-06 2017-11-21 Gammatile Llc Radioactive implant planning system and placement guide system
US11759262B2 (en) 2015-04-06 2023-09-19 Intuitive Surgical Operations, Inc. Systems and methods of registration compensation in image guided surgery
CN113491582A (zh) 2015-05-01 2021-10-12 提坦医疗公司 器械碰撞检测与反馈
CN107249425B (zh) 2015-05-14 2019-09-27 奥林巴斯株式会社 内窥镜装置
KR102454704B1 (ko) 2015-05-15 2022-10-14 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 블레이드 노출을 줄이기 위한 시스템 및 방법
JP6147459B2 (ja) 2015-05-29 2017-06-14 オリンパス株式会社 医療用マニピュレータシステム
WO2017014517A1 (ko) * 2015-07-17 2017-01-26 주식회사 레이언스 의료용 엑스선 영상 촬영 시스템 및 이를 이용한 의료용 엑스선 영상 촬영 장치의 동작 제어 방법
CA2994823A1 (en) 2015-08-03 2017-02-09 Board Of Regents Of The University Of Nebraska Robotic surgical devices, systems and related methods
US10973595B2 (en) 2015-08-13 2021-04-13 Siemens Healthcare Gmbh Device and method for controlling a system comprising an imaging modality
WO2017033352A1 (ja) * 2015-08-25 2017-03-02 川崎重工業株式会社 産業用遠隔操作ロボットシステム
WO2017037705A1 (en) * 2015-08-30 2017-03-09 M.S.T. Medical Surgery Technologies Ltd An intelligent surgical tool control system for laparoscopic surgeries
EP3349649B1 (en) 2015-09-18 2022-03-09 Auris Health, Inc. Navigation of tubular networks
US10231793B2 (en) 2015-10-30 2019-03-19 Auris Health, Inc. Object removal through a percutaneous suction tube
US9949749B2 (en) 2015-10-30 2018-04-24 Auris Surgical Robotics, Inc. Object capture with a basket
US9955986B2 (en) 2015-10-30 2018-05-01 Auris Surgical Robotics, Inc. Basket apparatus
WO2017075122A1 (en) * 2015-10-30 2017-05-04 Covidien Lp Input handles for robotic surgical systems having visual feedback
US10143526B2 (en) 2015-11-30 2018-12-04 Auris Health, Inc. Robot-assisted driving systems and methods
WO2017103984A1 (ja) * 2015-12-15 2017-06-22 オリンパス株式会社 医療用マニピュレータシステムとその作動方法
JP6619456B2 (ja) 2016-01-14 2019-12-11 オリンパス株式会社 医療用マニピュレータシステムおよび医療用マニピュレータシステムの作動方法
CA3010896A1 (en) * 2016-01-19 2017-07-27 Titan Medical Inc. Graphical user interface for a robotic surgical system
CN107427328B (zh) * 2016-01-22 2020-03-20 奥林巴斯株式会社 医疗用机械手系统
US11883217B2 (en) 2016-02-03 2024-01-30 Globus Medical, Inc. Portable medical imaging system and method
JP6733239B2 (ja) * 2016-03-18 2020-07-29 セイコーエプソン株式会社 制御装置及びロボットシステム
JP6831642B2 (ja) * 2016-04-15 2021-02-17 川崎重工業株式会社 外科手術システム
CN109069214B (zh) * 2016-04-15 2021-03-12 川崎重工业株式会社 外科手术系统的控制方法以及外科手术系统
JP7176757B2 (ja) 2016-05-18 2022-11-22 バーチャル インシジョン コーポレイション ロボット手術装置、システム及び関連する方法
US20200237191A1 (en) * 2016-06-01 2020-07-30 Endomaster Pte. Ltd. Endoscopy system components
CN206063225U (zh) * 2016-06-04 2017-04-05 深圳市前海康启源科技有限公司 用于辅助手术的医疗机器人
KR102549728B1 (ko) 2016-07-14 2023-07-03 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 원격조작 의료 시스템 내의 온스크린 메뉴들을 위한 시스템들 및 방법들
US11672616B2 (en) 2016-07-14 2023-06-13 Intuitive Surgical Operations, Inc. Secondary instrument control in a computer-assisted teleoperated system
KR102596096B1 (ko) 2016-07-14 2023-11-01 인튜어티브 서지컬 오퍼레이션즈 인코포레이티드 원격조작 시스템에서 기구 내비게이터를 디스플레이하기 위한 시스템들 및 방법들
US20180036086A1 (en) * 2016-08-03 2018-02-08 Amith Derek Mendonca Novel robotic surgical device
US10182875B2 (en) 2016-08-16 2019-01-22 Ethicon Llc Robotic visualization and collision avoidance
US10413373B2 (en) 2016-08-16 2019-09-17 Ethicon, Llc Robotic visualization and collision avoidance
CN109561934B (zh) 2016-08-23 2022-03-08 直观外科手术操作公司 用于医疗程序期间监测患者运动的系统和方法
WO2018052795A1 (en) * 2016-09-19 2018-03-22 Intuitive Surgical Operations, Inc. Base positioning system for a controllable arm and related methods
US9931025B1 (en) 2016-09-30 2018-04-03 Auris Surgical Robotics, Inc. Automated calibration of endoscopes with pull wires
US10888710B1 (en) 2016-11-29 2021-01-12 Gt Medical Technologies, Inc. Transparent loading apparatus
DE102016223841A1 (de) 2016-11-30 2018-05-30 Siemens Healthcare Gmbh Berechnen eines Kalibrierungsparameters eines Roboterwerkzeugs
WO2018122946A1 (ja) 2016-12-27 2018-07-05 オリンパス株式会社 医療用マニピュレータの形状取得方法および制御方法
US10244926B2 (en) 2016-12-28 2019-04-02 Auris Health, Inc. Detecting endolumenal buckling of flexible instruments
JP6699583B2 (ja) * 2017-02-14 2020-05-27 信越化学工業株式会社 付加硬化型シリコーン組成物
JP6858593B2 (ja) * 2017-03-02 2021-04-14 ソニー・オリンパスメディカルソリューションズ株式会社 医療用観察装置、および制御方法
US20200038125A1 (en) * 2017-03-15 2020-02-06 Covidien Lp Robotic surgical systems, instruments, and controls
USD849953S1 (en) * 2017-04-21 2019-05-28 Intuitive Surgical Operations, Inc. Surgical apparatus
US11529129B2 (en) 2017-05-12 2022-12-20 Auris Health, Inc. Biopsy apparatus and system
CN107049492B (zh) 2017-05-26 2020-02-21 微创（上海）医疗机器人有限公司 手术机器人系统及手术器械位置的显示方法
US10299870B2 (en) 2017-06-28 2019-05-28 Auris Health, Inc. Instrument insertion compensation
US10610303B2 (en) 2017-06-29 2020-04-07 Verb Surgical Inc. Virtual reality laparoscopic tools
US11270601B2 (en) 2017-06-29 2022-03-08 Verb Surgical Inc. Virtual reality system for simulating a robotic surgical environment
US11011077B2 (en) * 2017-06-29 2021-05-18 Verb Surgical Inc. Virtual reality training, simulation, and collaboration in a robotic surgical system
US11284955B2 (en) 2017-06-29 2022-03-29 Verb Surgical Inc. Emulation of robotic arms and control thereof in a virtual reality environment
USD840542S1 (en) * 2017-06-29 2019-02-12 Intuitive Surgical Operations, Inc. Surgical system base
US10426559B2 (en) 2017-06-30 2019-10-01 Auris Health, Inc. Systems and methods for medical instrument compression compensation
WO2019032450A1 (en) * 2017-08-08 2019-02-14 Intuitive Surgical Operations, Inc. SYSTEMS AND METHODS FOR RENDERING ALERTS ON A SCREEN OF A TELEOPERATION SYSTEM
CA3074443A1 (en) * 2017-09-05 2019-03-14 Covidien Lp Collision handling algorithms for robotic surgical systems
US11051894B2 (en) * 2017-09-27 2021-07-06 Virtual Incision Corporation Robotic surgical devices with tracking camera technology and related systems and methods
US10145747B1 (en) 2017-10-10 2018-12-04 Auris Health, Inc. Detection of undesirable forces on a surgical robotic arm
EP3703604A4 (en) 2017-10-30 2021-08-11 Intuitive Surgical Operations, Inc. GUIDED PORT PLACEMENT SELECTION SYSTEMS AND METHODS
US10987179B2 (en) 2017-12-06 2021-04-27 Auris Health, Inc. Systems and methods to correct for uncommanded instrument roll
US11071595B2 (en) * 2017-12-14 2021-07-27 Verb Surgical Inc. Multi-panel graphical user interface for a robotic surgical system
KR20200100613A (ko) 2017-12-14 2020-08-26 아우리스 헬스, 인코포레이티드 기구 위치 추정을 위한 시스템 및 방법
EP3752085A4 (en) 2018-02-13 2021-11-24 Auris Health, Inc. SYSTEM AND METHOD FOR TRAINING A MEDICAL INSTRUMENT
WO2019159361A1 (ja) 2018-02-19 2019-08-22 オリンパス株式会社 医療システム
WO2019191143A1 (en) 2018-03-28 2019-10-03 Auris Health, Inc. Systems and methods for displaying estimated location of instrument
CN108777001A (zh) * 2018-06-26 2018-11-09 宁波极呈光电有限公司 手术模拟方法及装置
EP3586782A1 (en) * 2018-06-28 2020-01-01 Globus Medical, Inc. Controlling a surgical robot to avoid robotic arm collision
US11399897B2 (en) 2018-09-05 2022-08-02 Nuvasive, Inc. Systems and methods for spinal surgical procedures
JP2022502171A (ja) 2018-09-28 2022-01-11 オーリス ヘルス インコーポレイテッド 医療器具をドッキングするためのシステム及び方法
GB2608751B (en) * 2018-10-03 2023-06-14 Cmr Surgical Ltd Methods and systems for providing assistance to a user of a surgical robot system
WO2020086912A1 (en) * 2018-10-26 2020-04-30 Intuitive Surgical Operations, Inc. Mixed reality systems and methods for indicating an extent of a field of view of an imaging device
US10926416B2 (en) * 2018-11-21 2021-02-23 Ford Global Technologies, Llc Robotic manipulation using an independently actuated vision system, an adversarial control scheme, and a multi-tasking deep learning architecture
CN109620410B (zh) * 2018-12-04 2021-01-26 微创（上海）医疗机器人有限公司 机械臂防碰撞的方法及系统、医疗机器人
CN109288591B (zh) * 2018-12-07 2021-12-03 上海微创医疗机器人（集团）股份有限公司 手术机器人系统
CN114302665A (zh) 2019-01-07 2022-04-08 虚拟切割有限公司 机器人辅助手术系统以及相关装置和方法
US10981018B2 (en) 2019-02-14 2021-04-20 Gt Medical Technologies, Inc. Radioactive seed loading apparatus
CN113453642A (zh) 2019-02-22 2021-09-28 奥瑞斯健康公司 具有用于可调式臂支撑件的机动臂的外科平台
EP3962396A1 (en) * 2019-04-29 2022-03-09 Smith&Nephew, Inc. Multi-level positional tracking
US11369386B2 (en) 2019-06-27 2022-06-28 Auris Health, Inc. Systems and methods for a medical clip applier
EP3989863A4 (en) 2019-06-28 2023-10-11 Auris Health, Inc. MEDICAL INSTRUMENTS WITH WRISTS WITH HYBRID DIVERSION SURFACES
WO2020264418A1 (en) 2019-06-28 2020-12-30 Auris Health, Inc. Console overlay and methods of using same
US20210030483A1 (en) * 2019-07-29 2021-02-04 Verily Life Sciences Llc Surgery tool segmentation with robot kinematics
EP4007678A1 (en) * 2019-08-02 2022-06-08 Auris Health, Inc. Systems and methods for adjusting remote center distances in medical procedures
US11896330B2 (en) 2019-08-15 2024-02-13 Auris Health, Inc. Robotic medical system having multiple medical instruments
US11548140B2 (en) * 2019-08-15 2023-01-10 Covidien Lp System and method for radio based location of modular arm carts in a surgical robotic system
US10959792B1 (en) * 2019-09-26 2021-03-30 Auris Health, Inc. Systems and methods for collision detection and avoidance
WO2021059100A1 (en) * 2019-09-26 2021-04-01 Auris Health, Inc. Systems and methods for collision avoidance using object models
WO2021064536A1 (en) 2019-09-30 2021-04-08 Auris Health, Inc. Medical instrument with capstan
US11737835B2 (en) 2019-10-29 2023-08-29 Auris Health, Inc. Braid-reinforced insulation sheath
EP4021686A1 (en) * 2019-11-19 2022-07-06 Google LLC Methods and systems for graphical user interfaces to control remotely located robots
WO2021126447A1 (en) * 2019-12-19 2021-06-24 Covidien Lp Systems and methods for mitigating collision of a robotic system
US11660147B2 (en) 2019-12-31 2023-05-30 Auris Health, Inc. Alignment techniques for percutaneous access
US11602372B2 (en) 2019-12-31 2023-03-14 Auris Health, Inc. Alignment interfaces for percutaneous access
EP4084721A4 (en) 2019-12-31 2024-01-03 Auris Health Inc IDENTIFICATION OF AN ANATOMIC FEATURE AND AIMING
JP2023508718A (ja) 2019-12-31 2023-03-03 オーリス ヘルス インコーポレイテッド 高度バスケット駆動モード
US20210251706A1 (en) * 2020-02-18 2021-08-19 Verb Surgical Inc. Robotic Surgical System and Method for Providing a Stadium View with Arm Set-Up Guidance
GB2593473A (en) * 2020-03-23 2021-09-29 Cmr Surgical Ltd Virtual console for controlling a surgical robot
JP7439602B2 (ja) 2020-03-23 2024-02-28 Ｔｏｐｐａｎホールディングス株式会社 可視化装置、可視化方法、およびプログラム
US20210298851A1 (en) * 2020-03-30 2021-09-30 Auris Health, Inc. Workspace optimization for robotic surgery
CN115427201A (zh) 2020-04-27 2022-12-02 发那科株式会社 工业机械的显示装置
EP4171427A1 (en) 2020-06-29 2023-05-03 Auris Health, Inc. Systems and methods for detecting contact between a link and an external object
US11357586B2 (en) 2020-06-30 2022-06-14 Auris Health, Inc. Systems and methods for saturated robotic movement
US11931901B2 (en) * 2020-06-30 2024-03-19 Auris Health, Inc. Robotic medical system with collision proximity indicators
JP7397879B2 (ja) * 2020-08-03 2023-12-13 三菱電機株式会社 遠隔操作装置
CN114452000B (zh) * 2020-10-08 2023-08-22 深圳市精锋医疗科技股份有限公司 手术机器人及其图形化控制装置、图形化显示方法
CN111991084B (zh) * 2020-10-08 2022-04-26 深圳市精锋医疗科技股份有限公司 手术机器人及其虚拟成像控制方法、虚拟成像控制装置
CN112587244A (zh) * 2020-12-15 2021-04-02 深圳市精锋医疗科技有限公司 手术机器人及其控制方法、控制装置
WO2022204010A1 (en) * 2021-03-26 2022-09-29 Think Surgical, Inc. System and method for detecting a potential collision between a bone and an end-effector
US20220331056A1 (en) * 2021-04-14 2022-10-20 Cilag Gmbh International Cooperative overlays of interacting instruments which result in both overlays being effected
US11948226B2 (en) 2021-05-28 2024-04-02 Covidien Lp Systems and methods for clinical workspace simulation
CN113648066B (zh) * 2021-08-20 2022-10-11 苏州康多机器人有限公司 一种碰撞检测方法、电子设备及主从手术机器人
WO2023065988A1 (zh) * 2021-10-21 2023-04-27 上海微创医疗机器人（集团）股份有限公司 碰撞检测方法、装置、设备、可读存储介质
US20230355324A1 (en) * 2022-05-05 2023-11-09 Meditrina, Inc. Medical robotic system
WO2024013651A1 (en) * 2022-07-13 2024-01-18 Auris Health, Inc. Dynamic flexible scope drive and methods of using same
CN117562674A (zh) * 2024-01-11 2024-02-20 科弛医疗科技(北京)有限公司 手术机器人及由其执行的方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030109780A1 (en) * 2001-06-07 2003-06-12 Inria Roquencourt Methods and apparatus for surgical planning
US20070038080A1 (en) * 1998-12-08 2007-02-15 Intuitive Surgical Inc. Devices and methods for presenting and regulating auxiliary information on an image display of a telesurgical system to assist an operator in performing a surgical procedure
WO2008002830A2 (en) * 2006-06-29 2008-01-03 Intuitive Surgical, Inc. Surgical tool position and identification indicator displayed in a soundary area of a computer display screen
WO2009037576A2 (en) * 2007-04-16 2009-03-26 The Governors Of The University Of Calgary Methods, devices, and systems for non-mechanically restricting and/or programming movement of a tool of a manipulator along a single axis

Family Cites Families (435)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3628535A (en) 1969-11-12 1971-12-21 Nibot Corp Surgical instrument for implanting a prosthetic heart valve or the like
US3818284A (en) 1972-12-07 1974-06-18 Marotta Scientific Controls Valve control with pulse width modulation
US3890552A (en) 1972-12-29 1975-06-17 George C Devol Dual-armed multi-axes program controlled manipulators
US3923166A (en) 1973-10-11 1975-12-02 Nasa Remote manipulator system
US3905215A (en) 1974-06-26 1975-09-16 John R Wright Ultrasensitive force measuring instrument employing torsion balance
US4150326A (en) 1977-09-19 1979-04-17 Unimation, Inc. Trajectory correlation and error detection method and apparatus
US4349837A (en) 1979-07-03 1982-09-14 Spar Aerospace Limited Satellite servicing
US5493595A (en) 1982-02-24 1996-02-20 Schoolman Scientific Corp. Stereoscopically displayed three dimensional medical imaging
US4588348A (en) 1983-05-27 1986-05-13 At&T Bell Laboratories Robotic system utilizing a tactile sensor array
US4577621A (en) 1984-12-03 1986-03-25 Patel Jayendrakumar I Endoscope having novel proximate and distal portions
JPS61230895A (ja) 1985-04-04 1986-10-15 三菱重工業株式会社 マニプレ−タ干渉防止装置
US4673988A (en) 1985-04-22 1987-06-16 E.I. Du Pont De Nemours And Company Electronic mosaic imaging process
US4672963A (en) 1985-06-07 1987-06-16 Israel Barken Apparatus and method for computer controlled laser surgery
US4644237A (en) * 1985-10-17 1987-02-17 International Business Machines Corp. Collision avoidance system
US4722056A (en) 1986-02-18 1988-01-26 Trustees Of Dartmouth College Reference display systems for superimposing a tomagraphic image onto the focal plane of an operating microscope
JPH085018B2 (ja) 1986-02-26 1996-01-24 株式会社日立製作所 遠隔マニピユレ−シヨン方法及び装置
US4762456A (en) 1986-06-11 1988-08-09 Nelson Arthur J Accommodations to exchange containers between vessels
JPH0766290B2 (ja) 1986-06-26 1995-07-19 東芝機械株式会社 工具経路生成方法
US4791934A (en) 1986-08-07 1988-12-20 Picker International, Inc. Computer tomography assisted stereotactic surgery system and method
GB2194656B (en) 1986-09-03 1991-10-09 Ibm Method and system for solid modelling
US4759074A (en) 1986-10-28 1988-07-19 General Motors Corporation Method for automatically inspecting parts utilizing machine vision and system utilizing same
JPH0829509B2 (ja) 1986-12-12 1996-03-27 株式会社日立製作所 マニピユレ−タの制御装置
US4839838A (en) 1987-03-30 1989-06-13 Labiche Mitchell Spatial input apparatus
US4860215A (en) 1987-04-06 1989-08-22 California Institute Of Technology Method and apparatus for adaptive force and position control of manipulators
US4863133A (en) 1987-05-26 1989-09-05 Leonard Medical Arm device for adjustable positioning of a medical instrument or the like
US4762455A (en) 1987-06-01 1988-08-09 Remote Technology Corporation Remote manipulator
US4831549A (en) 1987-07-28 1989-05-16 Brigham Young University Device and method for correction of robot inaccuracy
US4833383A (en) 1987-08-13 1989-05-23 Iowa State University Research Foundation, Inc. Means and method of camera space manipulation
US5079699A (en) 1987-11-27 1992-01-07 Picker International, Inc. Quick three-dimensional display
US5170347A (en) 1987-11-27 1992-12-08 Picker International, Inc. System to reformat images for three-dimensional display using unique spatial encoding and non-planar bisectioning
EP0326768A3 (en) 1988-02-01 1991-01-23 Faro Medical Technologies Inc. Computer-aided surgery apparatus
US5251127A (en) 1988-02-01 1993-10-05 Faro Medical Technologies Inc. Computer-aided surgery apparatus
US4815450A (en) 1988-02-01 1989-03-28 Patel Jayendra I Endoscope having variable flexibility
US5046022A (en) 1988-03-10 1991-09-03 The Regents Of The University Of Michigan Tele-autonomous system and method employing time/position synchrony/desynchrony
US5187796A (en) 1988-03-29 1993-02-16 Computer Motion, Inc. Three-dimensional vector co-processor having I, J, and K register files and I, J, and K execution units
US4989253A (en) 1988-04-15 1991-01-29 The Montefiore Hospital Association Of Western Pennsylvania Voice activated microscope
US4979949A (en) 1988-04-26 1990-12-25 The Board Of Regents Of The University Of Washington Robot-aided system for surgery
US4891767A (en) * 1988-06-02 1990-01-02 Combustion Engineering, Inc. Machine vision system for position sensing
JPH01310875A (ja) 1988-06-07 1989-12-14 Fujitsu Ltd 双腕マニピュレータの遠隔操作方法
US4984157A (en) 1988-09-21 1991-01-08 General Electric Company System and method for displaying oblique planar cross sections of a solid body using tri-linear interpolation to determine pixel position dataes
GB2226245A (en) 1988-11-18 1990-06-27 Alan Crockard Endoscope, remote actuator and aneurysm clip applicator.
US4942539A (en) 1988-12-21 1990-07-17 Gmf Robotics Corporation Method and system for automatically determining the position and orientation of an object in 3-D space
US5099846A (en) 1988-12-23 1992-03-31 Hardy Tyrone L Method and apparatus for video presentation from a variety of scanner imaging sources
US5098426A (en) 1989-02-06 1992-03-24 Phoenix Laser Systems, Inc. Method and apparatus for precision laser surgery
US5184009A (en) 1989-04-10 1993-02-02 Wright Scott M Optical attenuator movement detection system
US5053976A (en) 1989-05-22 1991-10-01 Honda Giken Kogyo Kabushiki Kaisha Method of teaching a robot
US5257203A (en) 1989-06-09 1993-10-26 Regents Of The University Of Minnesota Method and apparatus for manipulating computer-based representations of objects of complex and unique geometry
DE3935256C1 (ko) 1989-10-23 1991-01-03 Bauerfeind, Peter, Dr., 8264 Waldkraiburg, De
US5181823A (en) 1989-10-27 1993-01-26 Grumman Aerospace Corporation Apparatus and method for producing a video display
ES2085885T3 (es) 1989-11-08 1996-06-16 George S Allen Brazo mecanico para sistema interactivo de cirugia dirigido por imagenes.
US5086401A (en) 1990-05-11 1992-02-04 International Business Machines Corporation Image-directed robotic system for precise robotic surgery including redundant consistency checking
US5235510A (en) 1990-11-22 1993-08-10 Kabushiki Kaisha Toshiba Computer-aided diagnosis system for medical use
US5217003A (en) 1991-03-18 1993-06-08 Wilk Peter J Automated surgical system and apparatus
US5217453A (en) 1991-03-18 1993-06-08 Wilk Peter J Automated surgical system and apparatus
US5176702A (en) 1991-04-04 1993-01-05 Symbiosis Corporation Ratchet locking mechanism for surgical instruments
US5251611A (en) 1991-05-07 1993-10-12 Zehel Wendell E Method and apparatus for conducting exploratory procedures
US5313306A (en) 1991-05-13 1994-05-17 Telerobotics International, Inc. Omniview motionless camera endoscopy system
US5181514A (en) 1991-05-21 1993-01-26 Hewlett-Packard Company Transducer positioning system
US5266875A (en) 1991-05-23 1993-11-30 Massachusetts Institute Of Technology Telerobotic system
US5279309A (en) 1991-06-13 1994-01-18 International Business Machines Corporation Signaling device and method for monitoring positions in a surgical operation
US5417210A (en) 1992-05-27 1995-05-23 International Business Machines Corporation System and method for augmentation of endoscopic surgery
US5182641A (en) 1991-06-17 1993-01-26 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Composite video and graphics display for camera viewing systems in robotics and teleoperation
US5261404A (en) 1991-07-08 1993-11-16 Mick Peter R Three-dimensional mammal anatomy imaging system and method
US5184601A (en) 1991-08-05 1993-02-09 Putman John M Endoscope stabilizer
US5889670A (en) 1991-10-24 1999-03-30 Immersion Corporation Method and apparatus for tactilely responsive user interface
US5230623A (en) 1991-12-10 1993-07-27 Radionics, Inc. Operating pointer with interactive computergraphics
US5531742A (en) 1992-01-15 1996-07-02 Barken; Israel Apparatus and method for computer controlled cryosurgery
US6963792B1 (en) 1992-01-21 2005-11-08 Sri International Surgical method
EP0776739B1 (en) 1992-01-21 2003-04-23 Sri International Surgical System
US5631973A (en) 1994-05-05 1997-05-20 Sri International Method for telemanipulation with telepresence
DE4204397C2 (de) 1992-02-14 2001-08-30 Sinz Dirk Peter Transportbehälter
US5737500A (en) 1992-03-11 1998-04-07 California Institute Of Technology Mobile dexterous siren degree of freedom robot arm with real-time control system
US5430643A (en) 1992-03-11 1995-07-04 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Configuration control of seven degree of freedom arms
US5321353A (en) 1992-05-13 1994-06-14 Storage Technolgy Corporation System and method for precisely positioning a robotic tool
US5482029A (en) 1992-06-26 1996-01-09 Kabushiki Kaisha Toshiba Variable flexibility endoscope system
US5361768A (en) 1992-06-30 1994-11-08 Cardiovascular Imaging Systems, Inc. Automated longitudinal position translator for ultrasonic imaging probes, and methods of using same
US5239246A (en) 1992-07-08 1993-08-24 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Force reflection with compliance control
AT399647B (de) 1992-07-31 1995-06-26 Truppe Michael Anordnung zur darstellung des inneren von körpern
US5762458A (en) 1996-02-20 1998-06-09 Computer Motion, Inc. Method and apparatus for performing minimally invasive cardiac procedures
US5754741A (en) 1992-08-10 1998-05-19 Computer Motion, Inc. Automated endoscope for optimal positioning
US5524180A (en) 1992-08-10 1996-06-04 Computer Motion, Inc. Automated endoscope system for optimal positioning
US5657429A (en) 1992-08-10 1997-08-12 Computer Motion, Inc. Automated endoscope system optimal positioning
US5515478A (en) 1992-08-10 1996-05-07 Computer Motion, Inc. Automated endoscope system for optimal positioning
US5397323A (en) 1992-10-30 1995-03-14 International Business Machines Corporation Remote center-of-motion robot for surgery
US5788688A (en) 1992-11-05 1998-08-04 Bauer Laboratories, Inc. Surgeon's command and control
US5629594A (en) 1992-12-02 1997-05-13 Cybernet Systems Corporation Force feedback system
DE9302650U1 (ko) 1993-02-24 1993-04-15 Karl Storz Gmbh & Co, 7200 Tuttlingen, De
AU687045B2 (en) 1993-03-31 1998-02-19 Luma Corporation Managing information in an endoscopy system
JP2665052B2 (ja) 1993-05-14 1997-10-22 エスアールアイ インターナショナル 遠隔中心位置決め装置
US5791231A (en) 1993-05-17 1998-08-11 Endorobotics Corporation Surgical robotic system and hydraulic actuator therefor
WO1995001757A1 (en) 1993-07-07 1995-01-19 Cornelius Borst Robotic system for close inspection and remote treatment of moving parts
CA2103626A1 (en) 1993-08-09 1995-02-10 Septimiu Edmund Salcudean Motion scaling tele-operating system with force feedback suitable for microsurgery
US5343385A (en) 1993-08-17 1994-08-30 International Business Machines Corporation Interference-free insertion of a solid body into a cavity
US5503320A (en) 1993-08-19 1996-04-02 United States Surgical Corporation Surgical apparatus with indicator
FR2709656B1 (fr) 1993-09-07 1995-12-01 Deemed Int Sa Installation pour opération de microchirurgie assistée par ordinateur et procédés mis en Óoeuvre par ladite installation.
SE9303253D0 (sv) 1993-10-05 1993-10-05 Siemens Elema Ab Instrument för titthålskirurgi
US6059718A (en) 1993-10-18 2000-05-09 Olympus Optical Co., Ltd. Endoscope form detecting apparatus in which coil is fixedly mounted by insulating member so that form is not deformed within endoscope
JPH08107875A (ja) 1994-08-18 1996-04-30 Olympus Optical Co Ltd 内視鏡形状検出装置
US5876325A (en) 1993-11-02 1999-03-02 Olympus Optical Co., Ltd. Surgical manipulation system
US5842473A (en) 1993-11-29 1998-12-01 Life Imaging Systems Three-dimensional imaging system
WO1995016396A1 (en) 1993-12-15 1995-06-22 Computer Motion, Inc. Automated endoscope system for optimal positioning
US6241725B1 (en) 1993-12-15 2001-06-05 Sherwood Services Ag High frequency thermal ablation of cancerous tumors and functional targets with image data assistance
JPH07184923A (ja) 1993-12-28 1995-07-25 Hitachi Ltd 遠隔微細手術支援装置
US5454827A (en) 1994-05-24 1995-10-03 Aust; Gilbert M. Surgical instrument
US5835693A (en) 1994-07-22 1998-11-10 Lynch; James D. Interactive system for simulation and display of multi-body systems in three dimensions
US6115053A (en) 1994-08-02 2000-09-05 New York University Computer animation method and system for synthesizing human-like gestures and actions
NO300407B1 (no) 1994-08-30 1997-05-26 Vingmed Sound As Apparat for endoskop- eller gastroskopundersökelse av pasienter
US6120433A (en) 1994-09-01 2000-09-19 Olympus Optical Co., Ltd. Surgical manipulator system
US5528955A (en) 1994-09-08 1996-06-25 Hannaford; Blake Five axis direct-drive mini-robot having fifth actuator located at non-adjacent joint
JP3695779B2 (ja) 1994-09-27 2005-09-14 オリンパス株式会社 マニピュレータシステム
US5765561A (en) 1994-10-07 1998-06-16 Medical Media Systems Video-based surgical targeting system
JPH08132372A (ja) * 1994-11-08 1996-05-28 Toshiba Corp ロボットの制御方法
US5649032A (en) 1994-11-14 1997-07-15 David Sarnoff Research Center, Inc. System for automatically aligning images to form a mosaic image
JP3642812B2 (ja) 1994-11-17 2005-04-27 株式会社町田製作所 医療用観察装置
JPH08154321A (ja) 1994-11-29 1996-06-11 Tokyo Electric Power Co Inc:The 遠隔操作ロボット
JP3640087B2 (ja) 1994-11-29 2005-04-20 豊田工機株式会社 工作機械
JPH08164148A (ja) 1994-12-13 1996-06-25 Olympus Optical Co Ltd 内視鏡下手術装置
US5575764A (en) 1994-12-14 1996-11-19 Van Dyne; Leonard A. Prosthetic joint with dynamic torque compensator
JP3539645B2 (ja) 1995-02-16 2004-07-07 株式会社日立製作所 遠隔手術支援装置
JPH08224241A (ja) 1995-02-22 1996-09-03 Olympus Optical Co Ltd 医療用マニピュレータ
US6019724A (en) 1995-02-22 2000-02-01 Gronningsaeter; Aage Method for ultrasound guidance during clinical procedures
US5836880A (en) 1995-02-27 1998-11-17 Micro Chemical, Inc. Automated system for measuring internal tissue characteristics in feed animals
US5817022A (en) 1995-03-28 1998-10-06 Sonometrics Corporation System for displaying a 2-D ultrasound image within a 3-D viewing environment
US5797849A (en) 1995-03-28 1998-08-25 Sonometrics Corporation Method for carrying out a medical procedure using a three-dimensional tracking and imaging system
JPH08275958A (ja) 1995-04-07 1996-10-22 Olympus Optical Co Ltd 手術用マニピュレータ装置
US5887121A (en) 1995-04-21 1999-03-23 International Business Machines Corporation Method of constrained Cartesian control of robotic mechanisms with active and passive joints
JP3986099B2 (ja) 1995-05-02 2007-10-03 オリンパス株式会社 手術用マニピュレータシステム
US5759151A (en) 1995-06-07 1998-06-02 Carnegie Mellon University Flexible steerable device for conducting exploratory procedures
US5814038A (en) 1995-06-07 1998-09-29 Sri International Surgical manipulator for a telerobotic system
US5649956A (en) 1995-06-07 1997-07-22 Sri International System and method for releasably holding a surgical instrument
US5551432A (en) 1995-06-19 1996-09-03 New York Eye & Ear Infirmary Scanning control system for ultrasound biomicroscopy
US5820623A (en) 1995-06-20 1998-10-13 Ng; Wan Sing Articulated arm for medical procedures
US6702736B2 (en) 1995-07-24 2004-03-09 David T. Chen Anatomical visualization system
US6256529B1 (en) 1995-07-26 2001-07-03 Burdette Medical Systems, Inc. Virtual reality 3D visualization for surgical procedures
DE19529950C1 (de) 1995-08-14 1996-11-14 Deutsche Forsch Luft Raumfahrt Verfahren zum Nachführen eines Stereo-Laparoskops in der minimalinvasiven Chirurgie
US5638819A (en) 1995-08-29 1997-06-17 Manwaring; Kim H. Method and apparatus for guiding an instrument to a target
US5784542A (en) 1995-09-07 1998-07-21 California Institute Of Technology Decoupled six degree-of-freedom teleoperated robot system
US5825982A (en) 1995-09-15 1998-10-20 Wright; James Head cursor control interface for an automated endoscope system for optimal positioning
US5601085A (en) 1995-10-02 1997-02-11 Nycomed Imaging As Ultrasound imaging
JPH09141580A (ja) 1995-11-22 1997-06-03 Yaskawa Electric Corp 直接教示ロボットの動作範囲制限装置
DE69637413T2 (de) 1995-12-27 2009-01-22 Fanuc Ltd. Kompositdetektionssystem für roboter
US5624398A (en) 1996-02-08 1997-04-29 Symbiosis Corporation Endoscopic robotic surgical tools and methods
US5855583A (en) 1996-02-20 1999-01-05 Computer Motion, Inc. Method and apparatus for performing minimally invasive cardiac procedures
US6436107B1 (en) 1996-02-20 2002-08-20 Computer Motion, Inc. Method and apparatus for performing minimally invasive surgical procedures
US5971976A (en) 1996-02-20 1999-10-26 Computer Motion, Inc. Motion minimization and compensation system for use in surgical procedures
US6063095A (en) 1996-02-20 2000-05-16 Computer Motion, Inc. Method and apparatus for performing minimally invasive surgical procedures
US6699177B1 (en) 1996-02-20 2004-03-02 Computer Motion, Inc. Method and apparatus for performing minimally invasive surgical procedures
CA2255807C (en) 1996-05-17 2009-01-27 Biosense, Inc. Self-aligning catheter
US5797900A (en) 1996-05-20 1998-08-25 Intuitive Surgical, Inc. Wrist mechanism for surgical instrument for performing minimally invasive surgery with enhanced dexterity and sensitivity
US5807377A (en) 1996-05-20 1998-09-15 Intuitive Surgical, Inc. Force-reflecting surgical instrument and positioning mechanism for performing minimally invasive surgery with enhanced dexterity and sensitivity
US5792135A (en) 1996-05-20 1998-08-11 Intuitive Surgical, Inc. Articulated surgical instrument for performing minimally invasive surgery with enhanced dexterity and sensitivity
US6167296A (en) 1996-06-28 2000-12-26 The Board Of Trustees Of The Leland Stanford Junior University Method for volumetric image navigation
GB9616261D0 (en) 1996-08-02 1996-09-11 Philips Electronics Nv Virtual environment manipulation device modelling and control
US6642836B1 (en) 1996-08-06 2003-11-04 Computer Motion, Inc. General purpose distributed operating room control system
JP3550966B2 (ja) 1996-09-18 2004-08-04 株式会社日立製作所 手術装置
US7302288B1 (en) 1996-11-25 2007-11-27 Z-Kat, Inc. Tool position indicator
DE19649082C1 (de) 1996-11-27 1998-01-08 Fraunhofer Ges Forschung Vorrichtung zur Fernsteuerung eines Werkzeugs
US5810008A (en) 1996-12-03 1998-09-22 Isg Technologies Inc. Apparatus and method for visualizing ultrasonic images
US7666191B2 (en) 1996-12-12 2010-02-23 Intuitive Surgical, Inc. Robotic surgical system with sterile surgical adaptor
US6331181B1 (en) 1998-12-08 2001-12-18 Intuitive Surgical, Inc. Surgical robotic tools, data architecture, and use
US5853367A (en) 1997-03-17 1998-12-29 General Electric Company Task-interface and communications system and method for ultrasound imager control
EP0975257B1 (de) 1997-04-16 2003-02-26 Karl Storz GmbH & Co. KG Endoskopisches system
KR100223601B1 (ko) 1997-05-29 1999-10-15 윤종용 액정 표시 장치
US5938678A (en) 1997-06-11 1999-08-17 Endius Incorporated Surgical instrument
JPH11309A (ja) 1997-06-12 1999-01-06 Hitachi Ltd 画像処理装置
US6231565B1 (en) 1997-06-18 2001-05-15 United States Surgical Corporation Robotic arm DLUs for performing surgical tasks
WO1999000052A1 (en) * 1997-06-27 1999-01-07 The Board Of Trustees Of The Leland Stanford Junior University Method and apparatus for volumetric image navigation
WO1999010137A1 (en) 1997-08-28 1999-03-04 Microdexterity Systems Parallel mechanism
US6002184A (en) 1997-09-17 1999-12-14 Coactive Drive Corporation Actuator with opposing repulsive magnetic forces
EP2362284B1 (en) 1997-09-19 2015-05-20 Massachusetts Institute Of Technology Robotic apparatus
US6714839B2 (en) 1998-12-08 2004-03-30 Intuitive Surgical, Inc. Master having redundant degrees of freedom
US5993391A (en) 1997-09-25 1999-11-30 Kabushiki Kaisha Toshiba Ultrasound diagnostic apparatus
JP2001523054A (ja) 1997-11-07 2001-11-20 ヒル−ロム，インコーポレイティド 通信及びデータ入力装置
US6129670A (en) 1997-11-24 2000-10-10 Burdette Medical Systems Real time brachytherapy spatial registration and visualization system
AU1627199A (en) 1997-12-02 1999-06-16 Ozo Diversified Automation, Inc. Automated system for chromosome microdissection and method of using same
US5842993A (en) 1997-12-10 1998-12-01 The Whitaker Corporation Navigable ultrasonic imaging probe assembly
US6292712B1 (en) 1998-01-29 2001-09-18 Northrop Grumman Corporation Computer interface system for a robotic system
JP2003532544A (ja) 1998-02-03 2003-11-05 ヘクセル・コーポレーション 機械加工及び製造のため回転台座を採用する装置及び方法
CA2321488C (en) 1998-02-19 2008-02-12 California Institute Of Technology Apparatus and method for providing spherical viewing during endoscopic procedures
US6810281B2 (en) 2000-12-21 2004-10-26 Endovia Medical, Inc. Medical mapping system
US7297142B2 (en) 1998-02-24 2007-11-20 Hansen Medical, Inc. Interchangeable surgical instrument
JP3582348B2 (ja) 1998-03-19 2004-10-27 株式会社日立製作所 手術装置
US5980461A (en) 1998-05-01 1999-11-09 Rajan; Subramaniam D. Ultrasound imaging apparatus for medical diagnostics
EP2289423A1 (en) 1998-05-14 2011-03-02 David N. Krag System for bracketing tissue
US6425865B1 (en) 1998-06-12 2002-07-30 The University Of British Columbia Robotically assisted medical ultrasound
US6184868B1 (en) 1998-09-17 2001-02-06 Immersion Corp. Haptic feedback control devices
WO2000007503A1 (en) 1998-08-04 2000-02-17 Intuitive Surgical, Inc. Manipulator positioning linkage for robotic surgery
US6383951B1 (en) 1998-09-03 2002-05-07 Micron Technology, Inc. Low dielectric constant material for integrated circuit fabrication
US5993390A (en) 1998-09-18 1999-11-30 Hewlett- Packard Company Segmented 3-D cardiac ultrasound imaging method and apparatus
JP4101951B2 (ja) 1998-11-10 2008-06-18 オリンパス株式会社 手術用顕微鏡
WO2000028882A2 (en) 1998-11-18 2000-05-25 Microdexterity Systems, Inc. Medical manipulator for use with an imaging device
US6659939B2 (en) 1998-11-20 2003-12-09 Intuitive Surgical, Inc. Cooperative minimally invasive telesurgical system
US6468265B1 (en) 1998-11-20 2002-10-22 Intuitive Surgical, Inc. Performing cardiac surgery without cardioplegia
US6398726B1 (en) 1998-11-20 2002-06-04 Intuitive Surgical, Inc. Stabilizer for robotic beating-heart surgery
US6852107B2 (en) 2002-01-16 2005-02-08 Computer Motion, Inc. Minimally invasive surgical training using robotics and tele-collaboration
US6459926B1 (en) 1998-11-20 2002-10-01 Intuitive Surgical, Inc. Repositioning and reorientation of master/slave relationship in minimally invasive telesurgery
US8527094B2 (en) 1998-11-20 2013-09-03 Intuitive Surgical Operations, Inc. Multi-user medical robotic system for collaboration or training in minimally invasive surgical procedures
US6951535B2 (en) 2002-01-16 2005-10-04 Intuitive Surgical, Inc. Tele-medicine system that transmits an entire state of a subsystem
US6342889B1 (en) 1998-11-27 2002-01-29 Dicomit Dicom Information Technologies Corp. Method and system for selecting at least one optimal view of a three dimensional image
US6799065B1 (en) 1998-12-08 2004-09-28 Intuitive Surgical, Inc. Image shifting apparatus and method for a telerobotic system
US6493608B1 (en) 1999-04-07 2002-12-10 Intuitive Surgical, Inc. Aspects of a control system of a minimally invasive surgical apparatus
US6325808B1 (en) 1998-12-08 2001-12-04 Advanced Realtime Control Systems, Inc. Robotic system, docking station, and surgical tool for collaborative control in minimally invasive surgery
US6620173B2 (en) 1998-12-08 2003-09-16 Intuitive Surgical, Inc. Method for introducing an end effector to a surgical site in minimally invasive surgery
US6770081B1 (en) 2000-01-07 2004-08-03 Intuitive Surgical, Inc. In vivo accessories for minimally invasive robotic surgery and methods
JP2000193893A (ja) 1998-12-28 2000-07-14 Suzuki Motor Corp 検査用挿入管の屈曲装置
US6224542B1 (en) 1999-01-04 2001-05-01 Stryker Corporation Endoscopic camera system with non-mechanical zoom
US6394998B1 (en) 1999-01-22 2002-05-28 Intuitive Surgical, Inc. Surgical tools for use in minimally invasive telesurgical applications
US6602185B1 (en) 1999-02-18 2003-08-05 Olympus Optical Co., Ltd. Remote surgery support system
US6084371A (en) 1999-02-19 2000-07-04 Lockheed Martin Energy Research Corporation Apparatus and methods for a human de-amplifier system
WO2000050118A1 (fr) 1999-02-25 2000-08-31 Tetsuya Korenaga Dispositif therapeutique electrique
US7324081B2 (en) 1999-03-02 2008-01-29 Siemens Aktiengesellschaft Augmented-reality system for situation-related support of the interaction between a user and an engineering apparatus
US6243624B1 (en) 1999-03-19 2001-06-05 Northwestern University Non-Linear muscle-like compliant controller
US6569084B1 (en) 1999-03-31 2003-05-27 Olympus Optical Co., Ltd. Endoscope holder and endoscope device
US6594552B1 (en) 1999-04-07 2003-07-15 Intuitive Surgical, Inc. Grip strength with tactile feedback for robotic surgery
US8944070B2 (en) 1999-04-07 2015-02-03 Intuitive Surgical Operations, Inc. Non-force reflecting method for providing tool force information to a user of a telesurgical system
US6424885B1 (en) 1999-04-07 2002-07-23 Intuitive Surgical, Inc. Camera referenced control in a minimally invasive surgical apparatus
JP2000300579A (ja) 1999-04-26 2000-10-31 Olympus Optical Co Ltd 多機能マニピュレータ
JP3668865B2 (ja) 1999-06-21 2005-07-06 株式会社日立製作所 手術装置
US8574243B2 (en) 1999-06-25 2013-11-05 Usgi Medical, Inc. Apparatus and methods for forming and securing gastrointestinal tissue folds
US7637905B2 (en) 2003-01-15 2009-12-29 Usgi Medical, Inc. Endoluminal tool deployment system
JP4302246B2 (ja) 1999-08-25 2009-07-22 住友ベークライト株式会社 医療用処置具挿入具
US8768516B2 (en) 2009-06-30 2014-07-01 Intuitive Surgical Operations, Inc. Control of medical robotic system manipulator about kinematic singularities
US8004229B2 (en) 2005-05-19 2011-08-23 Intuitive Surgical Operations, Inc. Software center and highly configurable robotic systems for surgery and other uses
US7594912B2 (en) 2004-09-30 2009-09-29 Intuitive Surgical, Inc. Offset remote center manipulator for robotic surgery
JP3454235B2 (ja) 1999-10-06 2003-10-06 株式会社日立製作所 生体磁場計測装置
JP2001104333A (ja) 1999-10-07 2001-04-17 Hitachi Ltd 手術支援装置
US6312435B1 (en) 1999-10-08 2001-11-06 Intuitive Surgical, Inc. Surgical instrument with extended reach for use in minimally invasive surgery
JP2001202531A (ja) 1999-10-15 2001-07-27 Hitachi Kokusai Electric Inc 動画像編集方法
US6654031B1 (en) 1999-10-15 2003-11-25 Hitachi Kokusai Electric Inc. Method of editing a video program with variable view point of picked-up image and computer program product for displaying video program
US6442417B1 (en) 1999-11-29 2002-08-27 The Board Of Trustees Of The Leland Stanford Junior University Method and apparatus for transforming view orientations in image-guided surgery
US6204620B1 (en) 1999-12-10 2001-03-20 Fanuc Robotics North America Method of controlling an intelligent assist device
US20190090967A1 (en) 1999-12-14 2019-03-28 Intuitive Surgical Operations, Inc. Display of computer generated image of an out-of-view portion of a medical device adjacent a real-time image of an in-view portion of the medical device
DE19961971B4 (de) 1999-12-22 2009-10-22 Forschungszentrum Karlsruhe Gmbh Vorrichtung zum sicheren automatischen Nachführen eines Endoskops und Verfolgen eines Instruments
US6847922B1 (en) 2000-01-06 2005-01-25 General Motors Corporation Method for computer-aided layout of manufacturing cells
JP2001287183A (ja) 2000-01-31 2001-10-16 Matsushita Electric Works Ltd 自動搬送ロボット
DE10004264C2 (de) 2000-02-01 2002-06-13 Storz Karl Gmbh & Co Kg Vorrichtung zur intrakorporalen, minimal-invasiven Behandlung eines Patienten
US7819799B2 (en) 2000-03-16 2010-10-26 Immersion Medical, Inc. System and method for controlling force applied to and manipulation of medical instruments
US6817973B2 (en) 2000-03-16 2004-11-16 Immersion Medical, Inc. Apparatus for controlling force for manipulation of medical instruments
DE10015826A1 (de) 2000-03-30 2001-10-11 Siemens Ag System und Verfahren zur Erzeugung eines Bildes
US6984203B2 (en) 2000-04-03 2006-01-10 Neoguide Systems, Inc. Endoscope with adjacently positioned guiding apparatus
US20010055062A1 (en) 2000-04-20 2001-12-27 Keiji Shioda Operation microscope
DE10025285A1 (de) 2000-05-22 2001-12-06 Siemens Ag Vollautomatische, robotergestützte Kameraführung unter Verwendung von Positionssensoren für laparoskopische Eingriffe
US6645196B1 (en) 2000-06-16 2003-11-11 Intuitive Surgical, Inc. Guided tool change
US6599247B1 (en) 2000-07-07 2003-07-29 University Of Pittsburgh System and method for location-merging of real-time tomographic slice images with human vision
EP1182541A3 (de) 2000-08-22 2005-11-30 Siemens Aktiengesellschaft System und Verfahren zum kombinierten Einsatz verschiedener Display-/Gerätetypen mit systemgesteuerter kontextabhängiger Informationsdarstellung
JP4765155B2 (ja) 2000-09-28 2011-09-07 ソニー株式会社 オーサリング・システム及びオーサリング方法、並びに記憶媒体
US7194118B1 (en) 2000-11-10 2007-03-20 Lucid, Inc. System for optically sectioning and mapping surgically excised tissue
US6718194B2 (en) 2000-11-17 2004-04-06 Ge Medical Systems Global Technology Company, Llc Computer assisted intramedullary rod surgery system with enhanced features
DE10063089C1 (de) 2000-12-18 2002-07-25 Siemens Ag Anwendergesteuerte Verknüpfung von Informationen innerhalb eines Augmented-Reality-Systems
WO2002062199A2 (en) 2001-01-16 2002-08-15 Microdexterity Systems, Inc. Surgical manipulator
US7766894B2 (en) 2001-02-15 2010-08-03 Hansen Medical, Inc. Coaxial catheter system
US6765569B2 (en) 2001-03-07 2004-07-20 University Of Southern California Augmented-reality tool employing scene-feature autocalibration during camera motion
JP3769469B2 (ja) 2001-03-28 2006-04-26 株式会社東芝 操作訓練用装置
US6456901B1 (en) 2001-04-20 2002-09-24 Univ Michigan Hybrid robot motion task level control system
US6862561B2 (en) 2001-05-29 2005-03-01 Entelos, Inc. Method and apparatus for computer modeling a joint
US6887245B2 (en) 2001-06-11 2005-05-03 Ge Medical Systems Global Technology Company, Llc Surgical drill for use with a computer assisted surgery system
CA2486525C (en) 2001-06-13 2009-02-24 Volume Interactions Pte. Ltd. A guide system and a probe therefor
US7493153B2 (en) 2001-06-13 2009-02-17 Volume Interactions Pte., Ltd. Augmented reality system controlled by probe position
US6817974B2 (en) 2001-06-29 2004-11-16 Intuitive Surgical, Inc. Surgical tool having positively positionable tendon-actuated multi-disk wrist joint
US20040243147A1 (en) 2001-07-03 2004-12-02 Lipow Kenneth I. Surgical robot and robotic controller
AU2002322504A1 (en) 2001-07-13 2003-01-29 Broks Automation, Inc. Trajectory planning and motion control strategies for a planar three-degree-of-freedom robotic arm
US6550757B2 (en) 2001-08-07 2003-04-22 Hewlett-Packard Company Stapler having selectable staple size
JP3579379B2 (ja) 2001-08-10 2004-10-20 株式会社東芝 医療用マニピュレータシステム
US6587750B2 (en) 2001-09-25 2003-07-01 Intuitive Surgical, Inc. Removable infinite roll master grip handle and touch sensor for robotic surgery
AU2002361572A1 (en) 2001-10-19 2003-04-28 University Of North Carolina At Chape Hill Methods and systems for dynamic virtual convergence and head mountable display
JP3529373B2 (ja) 2001-11-09 2004-05-24 ファナック株式会社 作業機械のシミュレーション装置
US6663559B2 (en) 2001-12-14 2003-12-16 Endactive, Inc. Interface for a variable direction of view endoscope
US6941192B2 (en) 2002-01-31 2005-09-06 Abb Research Ltd. Robot machining tool position and orientation calibration
US7831292B2 (en) 2002-03-06 2010-11-09 Mako Surgical Corp. Guidance system and method for surgical procedures with improved feedback
US7747311B2 (en) 2002-03-06 2010-06-29 Mako Surgical Corp. System and method for interactive haptic positioning of a medical device
US8010180B2 (en) * 2002-03-06 2011-08-30 Mako Surgical Corp. Haptic guidance system and method
JP2003300444A (ja) 2002-04-11 2003-10-21 Hitachi Ltd 移動体の運転支援装置
JP4056791B2 (ja) 2002-05-22 2008-03-05 策雄 米延 骨折整復誘導装置
US6678582B2 (en) 2002-05-30 2004-01-13 Kuka Roboter Gmbh Method and control device for avoiding collisions between cooperating robots
US6837847B2 (en) 2002-06-13 2005-01-04 Usgi Medical, Inc. Shape lockable apparatus and method for advancing an instrument through unsupported anatomy
AU2003257309A1 (en) 2002-08-13 2004-02-25 Microbotics Corporation Microsurgical robot system
US20040176751A1 (en) 2002-08-14 2004-09-09 Endovia Medical, Inc. Robotic medical instrument system
US20040044295A1 (en) * 2002-08-19 2004-03-04 Orthosoft Inc. Graphical user interface for computer-assisted surgery
JP4169549B2 (ja) 2002-09-06 2008-10-22 オリンパス株式会社 内視鏡
US7331967B2 (en) 2002-09-09 2008-02-19 Hansen Medical, Inc. Surgical instrument coupling mechanism
JP2004105638A (ja) 2002-09-20 2004-04-08 Shimadzu Corp 超音波診断装置
US20040077940A1 (en) 2002-10-11 2004-04-22 Kienzle Thomas C. Instrument guide for use with a tracking system
US6899672B2 (en) 2002-11-08 2005-05-31 Scimed Life Systems, Inc. Endoscopic imaging system including removable deflection device
JP2004174662A (ja) 2002-11-27 2004-06-24 Fanuc Ltd ロボットの動作状態解析装置
WO2004052171A2 (en) 2002-12-06 2004-06-24 Intuitive Surgical, Inc. Flexible wrist for surgical tool
SE0203908D0 (sv) 2002-12-30 2002-12-30 Abb Research Ltd An augmented reality system and method
JP2004223128A (ja) 2003-01-27 2004-08-12 Hitachi Ltd 医療行為支援装置および方法
FR2850775B1 (fr) 2003-01-30 2005-07-22 Ge Med Sys Global Tech Co Llc Dispositif d'imagerie medicale a reorientation semi-automatique d'objet radiologique
JP3972854B2 (ja) 2003-04-10 2007-09-05 ソニー株式会社 ロボットの運動制御装置
US7381183B2 (en) 2003-04-21 2008-06-03 Karl Storz Development Corp. Method for capturing and displaying endoscopic maps
JP3975959B2 (ja) 2003-04-23 2007-09-12 トヨタ自動車株式会社 ロボット動作規制方法とその装置およびそれを備えたロボット
WO2005000139A1 (en) 2003-04-28 2005-01-06 Bracco Imaging Spa Surgical navigation imaging system
KR20060015557A (ko) 2003-04-28 2006-02-17 스티븐 제임스 크램톤 외골격을 구비한 ｃｍｍ 암
EP1628632B1 (en) 2003-05-21 2013-10-09 The Johns Hopkins University Devices and systems for minimally invasive surgery of the throat and other portions of mammalian body
JP2007523757A (ja) 2003-06-20 2007-08-23 ファナック ロボティクス アメリカ，インコーポレイティド 複数のロボットアームの追従及び鏡映ジョグ
US8753262B2 (en) 2003-07-29 2014-06-17 Hoya Corporation Internal treatment apparatus having circumferential side holes
US20050054895A1 (en) 2003-09-09 2005-03-10 Hoeg Hans David Method for using variable direction of view endoscopy in conjunction with image guided surgical systems
DE202004014857U1 (de) 2003-09-29 2005-04-21 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung zur virtuellen Lagebetrachtung wenigstens eines in einen Körper intrakorporal eingebrachten medizinischen Instruments
JP2005110878A (ja) 2003-10-06 2005-04-28 Olympus Corp 手術支援システム
JP3708097B2 (ja) 2003-10-08 2005-10-19 ファナック株式会社 ロボットの手動送り装置
JP2007508913A (ja) 2003-10-21 2007-04-12 ザ ボード オブ トラスティーズ オブ ザ リーランド スタンフォード ジュニア ユニヴァーシティ 術中ターゲティングのシステムおよび方法
US20050096502A1 (en) 2003-10-29 2005-05-05 Khalili Theodore M. Robotic surgical device
JP3732494B2 (ja) 2003-10-31 2006-01-05 ファナック株式会社 シミュレーション装置
US20050107680A1 (en) 2003-11-18 2005-05-19 Kopf J. D. Stereotaxic instrument with linear coordinate scales coupled to split-image microscopic image display system
US7774044B2 (en) 2004-02-17 2010-08-10 Siemens Medical Solutions Usa, Inc. System and method for augmented reality navigation in a medical intervention procedure
US9615772B2 (en) * 2004-02-20 2017-04-11 Karl Storz Imaging, Inc. Global endoscopic viewing indicator
US20050267359A1 (en) 2004-05-27 2005-12-01 General Electric Company System, method, and article of manufacture for guiding an end effector to a target position within a person
DE102004026813A1 (de) 2004-06-02 2005-12-29 Kuka Roboter Gmbh Verfahren und Vorrichtung zum Steuern von Handhabungsgeräten
US20060013523A1 (en) 2004-07-16 2006-01-19 Luna Innovations Incorporated Fiber optic position and shape sensing device and method relating thereto
CA2513202C (en) * 2004-07-23 2015-03-31 Mehran Anvari Multi-purpose robotic operating system and method
US8480566B2 (en) 2004-09-24 2013-07-09 Vivid Medical, Inc. Solid state illumination for endoscopy
US7238056B2 (en) 2004-10-12 2007-07-03 Dekko Technologies, Inc. Electrical connector
EP1809446B1 (en) 2004-10-25 2008-07-16 The University of Dayton Method and system to provide imporved accuracies in multi-jointed robots through kinematic robot model parameters determination
US20060149129A1 (en) 2005-01-05 2006-07-06 Watts H D Catheter with multiple visual elements
US8872906B2 (en) 2005-01-05 2014-10-28 Avantis Medical Systems, Inc. Endoscope assembly with a polarizing filter
US7763015B2 (en) 2005-01-24 2010-07-27 Intuitive Surgical Operations, Inc. Modular manipulator support for robotic surgery
US7837674B2 (en) 2005-01-24 2010-11-23 Intuitive Surgical Operations, Inc. Compact counter balance for robotic surgical systems
WO2006091494A1 (en) 2005-02-22 2006-08-31 Mako Surgical Corp. Haptic guidance system and method
JP2008538314A (ja) 2005-04-18 2008-10-23 エム．エス．ティ．メディカル サージャリ テクノロジーズ エルティディ 腹腔鏡手術を改善する装置及び方法
US8208988B2 (en) 2005-05-13 2012-06-26 General Electric Company System and method for controlling a medical imaging device
US10555775B2 (en) * 2005-05-16 2020-02-11 Intuitive Surgical Operations, Inc. Methods and system for performing 3-D tool tracking by fusion of sensor and/or camera derived data during minimally invasive robotic surgery
US9789608B2 (en) 2006-06-29 2017-10-17 Intuitive Surgical Operations, Inc. Synthetic representation of a surgical robot
US8073528B2 (en) 2007-09-30 2011-12-06 Intuitive Surgical Operations, Inc. Tool tracking systems, methods and computer products for image guided surgery
US8971597B2 (en) 2005-05-16 2015-03-03 Intuitive Surgical Operations, Inc. Efficient vision and kinematic data fusion for robotic surgical instruments and other applications
US8108072B2 (en) 2007-09-30 2012-01-31 Intuitive Surgical Operations, Inc. Methods and systems for robotic instrument tool tracking with adaptive fusion of kinematics information and image information
US9492240B2 (en) 2009-06-16 2016-11-15 Intuitive Surgical Operations, Inc. Virtual measurement tool for minimally invasive surgery
JP2006321027A (ja) 2005-05-20 2006-11-30 Hitachi Ltd マスタ・スレーブ式マニピュレータシステム及びその操作入力装置
EP3679882A1 (en) * 2005-06-06 2020-07-15 Intuitive Surgical Operations, Inc. Laparoscopic ultrasound robotic surgical system
US8398541B2 (en) 2006-06-06 2013-03-19 Intuitive Surgical Operations, Inc. Interactive user interfaces for robotic minimally invasive surgical systems
US8241271B2 (en) 2005-06-30 2012-08-14 Intuitive Surgical Operations, Inc. Robotic surgical instruments with a fluid flow control system for irrigation, aspiration, and blowing
CN103192388B (zh) 2005-06-30 2016-02-10 直观外科手术操作公司 一种机器人医疗系统
CN101247852B (zh) 2005-07-25 2011-12-07 卡尔·奥托 用于计划和供给放射治疗的方法和装置
JP2007029232A (ja) 2005-07-25 2007-02-08 Hitachi Medical Corp 内視鏡手術操作支援システム
WO2007033379A2 (en) 2005-09-14 2007-03-22 Neoguide Systems, Inc. Methods and apparatus for performing transluminal and other procedures
JP4728075B2 (ja) 2005-09-28 2011-07-20 オリンパスメディカルシステムズ株式会社 内視鏡システム
JP2007090481A (ja) 2005-09-28 2007-04-12 Fanuc Ltd ロボットシミュレーション装置
US20070106307A1 (en) 2005-09-30 2007-05-10 Restoration Robotics, Inc. Methods for implanting follicular units using an automated system
US8111904B2 (en) 2005-10-07 2012-02-07 Cognex Technology And Investment Corp. Methods and apparatus for practical 3D vision system
CN101291635B (zh) 2005-10-20 2013-03-27 直观外科手术操作公司 医用机器人系统中的计算机显示屏上的辅助图像显示和操纵
US8303505B2 (en) 2005-12-02 2012-11-06 Abbott Cardiovascular Systems Inc. Methods and apparatuses for image guided medical procedures
US8190238B2 (en) 2005-12-09 2012-05-29 Hansen Medical, Inc. Robotic catheter system and methods
US7453227B2 (en) 2005-12-20 2008-11-18 Intuitive Surgical, Inc. Medical robotic system with sliding mode control
CN101340852B (zh) 2005-12-20 2011-12-28 直观外科手术操作公司 机器人外科系统的器械对接装置
US9241767B2 (en) 2005-12-20 2016-01-26 Intuitive Surgical Operations, Inc. Method for handling an operator command exceeding a medical device state limitation in a medical robotic system
US7741802B2 (en) 2005-12-20 2010-06-22 Intuitive Surgical Operations, Inc. Medical robotic system with programmably controlled constraints on error dynamics
US7819859B2 (en) 2005-12-20 2010-10-26 Intuitive Surgical Operations, Inc. Control system for reducing internally generated frictional and inertial resistance to manual positioning of a surgical manipulator
US7689320B2 (en) 2005-12-20 2010-03-30 Intuitive Surgical Operations, Inc. Robotic surgical system with joint motion controller adapted to reduce instrument tip vibrations
US9266239B2 (en) 2005-12-27 2016-02-23 Intuitive Surgical Operations, Inc. Constraint based control in a minimally invasive surgical apparatus
US9962066B2 (en) 2005-12-30 2018-05-08 Intuitive Surgical Operations, Inc. Methods and apparatus to shape flexible entry guides for minimally invasive surgery
US7930065B2 (en) 2005-12-30 2011-04-19 Intuitive Surgical Operations, Inc. Robotic surgery system including position sensors using fiber bragg gratings
US7835823B2 (en) 2006-01-05 2010-11-16 Intuitive Surgical Operations, Inc. Method for tracking and reporting usage events to determine when preventive maintenance is due for a medical robotic system
US20110295295A1 (en) 2006-01-31 2011-12-01 Ethicon Endo-Surgery, Inc. Robotically-controlled surgical instrument having recording capabilities
EP1815950A1 (en) * 2006-02-03 2007-08-08 The European Atomic Energy Community (EURATOM), represented by the European Commission Robotic surgical system for performing minimally invasive medical procedures
EP1815949A1 (en) 2006-02-03 2007-08-08 The European Atomic Energy Community (EURATOM), represented by the European Commission Medical robotic system with manipulator arm of the cylindrical coordinate type
US8167823B2 (en) 2009-03-24 2012-05-01 Biomet Manufacturing Corp. Method and apparatus for aligning and securing an implant relative to a patient
ITMI20060443A1 (it) 2006-03-13 2007-09-14 Ethicon Endo Surgery Inc Dispositivo per la manipolazione di tessuto corporeo
US8016749B2 (en) 2006-03-21 2011-09-13 Boston Scientific Scimed, Inc. Vision catheter having electromechanical navigation
JP4382052B2 (ja) 2006-03-28 2009-12-09 川崎重工業株式会社 駆動体の制御装置および制御方法
US8518024B2 (en) 2006-04-24 2013-08-27 Transenterix, Inc. System and method for multi-instrument surgical access using a single access port
US8924021B2 (en) 2006-04-27 2014-12-30 Honda Motor Co., Ltd. Control of robots from human motion descriptors
JP4883563B2 (ja) 2006-04-27 2012-02-22 学校法人慶應義塾 マニピュレータ装置
EP2023845B1 (en) 2006-05-17 2010-07-07 Hansen Medical, Inc. Robotic instrument system
US8568299B2 (en) 2006-05-19 2013-10-29 Intuitive Surgical Operations, Inc. Methods and apparatus for displaying three-dimensional orientation of a steerable distal tip of an endoscope
AU2007254217A1 (en) 2006-05-19 2007-11-29 Mako Surgical Corp. A method and apparatus for controlling a haptic device
JP2009537231A (ja) 2006-05-19 2009-10-29 マコ サージカル コーポレーション 触覚デバイスを制御するための方法および装置
US8597280B2 (en) 2006-06-13 2013-12-03 Intuitive Surgical Operations, Inc. Surgical instrument actuator
US9549663B2 (en) 2006-06-13 2017-01-24 Intuitive Surgical Operations, Inc. Teleoperated surgical retractor system
US8517933B2 (en) 2006-06-13 2013-08-27 Intuitive Surgical Operations, Inc. Retraction of tissue for single port entry, robotically assisted medical procedures
WO2007146984A2 (en) 2006-06-13 2007-12-21 Intuitive Surgical, Inc. Control system configured to compensate for non-ideal actuator-to-joint linkage characteristics in a medical robotic system
US8377045B2 (en) 2006-06-13 2013-02-19 Intuitive Surgical Operations, Inc. Extendable suction surface for bracing medial devices during robotically assisted medical procedures
US8029516B2 (en) 2006-06-13 2011-10-04 Intuitive Surgical Operations, Inc. Bracing of bundled medical devices for single port entry, robotically assisted medical procedures
US20090192523A1 (en) 2006-06-29 2009-07-30 Intuitive Surgical, Inc. Synthetic representation of a surgical instrument
US10258425B2 (en) 2008-06-27 2019-04-16 Intuitive Surgical Operations, Inc. Medical robotic system providing an auxiliary view of articulatable instruments extending out of a distal end of an entry guide
US10008017B2 (en) 2006-06-29 2018-06-26 Intuitive Surgical Operations, Inc. Rendering tool information as graphic overlays on displayed images of tools
DE102006046689A1 (de) * 2006-09-29 2008-04-10 Siemens Ag Medizintechnisches Behandlungssystem
US7831096B2 (en) 2006-11-17 2010-11-09 General Electric Company Medical navigation system with tool and/or implant integration into fluoroscopic image projections and method of use
ATE548987T1 (de) 2006-11-28 2012-03-15 Koninkl Philips Electronics Nv Vorrichtung zur bestimmung einer position eines ersten objekts innerhalb eines zweiten objekts
US9345462B2 (en) 2006-12-01 2016-05-24 Boston Scientific Scimed, Inc. Direct drive endoscopy systems and methods
US8814779B2 (en) 2006-12-21 2014-08-26 Intuitive Surgical Operations, Inc. Stereoscopic endoscope
DE102006061178A1 (de) * 2006-12-22 2008-06-26 Siemens Ag System zur Durchführung und Überwachung minimal-invasiver Eingriffe
US20080243142A1 (en) 2007-02-20 2008-10-02 Gildenberg Philip L Videotactic and audiotactic assisted surgical methods and procedures
JP4891823B2 (ja) 2007-03-29 2012-03-07 オリンパスメディカルシステムズ株式会社 内視鏡装置
JP5030639B2 (ja) 2007-03-29 2012-09-19 オリンパスメディカルシステムズ株式会社 内視鏡装置の処置具位置制御装置
WO2009044287A2 (en) 2007-04-16 2009-04-09 The Governors Of The University Of Calgary Methods, devices, and systems for automated movements involving medical robots
CA2684475C (en) 2007-04-16 2016-01-12 Neuroarm Surgical Ltd. Frame mapping and force feedback methods, devices and systems
US8931682B2 (en) 2007-06-04 2015-01-13 Ethicon Endo-Surgery, Inc. Robotically-controlled shaft based rotary drive systems for surgical instruments
US8620473B2 (en) 2007-06-13 2013-12-31 Intuitive Surgical Operations, Inc. Medical robotic system with coupled control modes
US8903546B2 (en) 2009-08-15 2014-12-02 Intuitive Surgical Operations, Inc. Smooth control of an articulated instrument across areas with different work space conditions
US9138129B2 (en) 2007-06-13 2015-09-22 Intuitive Surgical Operations, Inc. Method and system for moving a plurality of articulated instruments in tandem back towards an entry guide
US9084623B2 (en) 2009-08-15 2015-07-21 Intuitive Surgical Operations, Inc. Controller assisted reconfiguration of an articulated instrument during movement into and out of an entry guide
US9089256B2 (en) 2008-06-27 2015-07-28 Intuitive Surgical Operations, Inc. Medical robotic system providing an auxiliary view including range of motion limitations for articulatable instruments extending out of a distal end of an entry guide
US9469034B2 (en) 2007-06-13 2016-10-18 Intuitive Surgical Operations, Inc. Method and system for switching modes of a robotic system
JP2009006410A (ja) 2007-06-26 2009-01-15 Fuji Electric Systems Co Ltd 遠隔操作支援装置および遠隔操作支援プログラム
DE102007029884A1 (de) 2007-06-28 2009-01-15 Siemens Ag Verfahren und Einrichtung zum Erzeugen eines aus einer Mehrzahl von endoskopischen Einzelbildern zusammengesetztes Gesamtbildes von einer Innenoberfläche eines Körperhohlraums
JP2009012106A (ja) 2007-07-03 2009-01-22 Fuji Electric Systems Co Ltd 遠隔操作支援装置および遠隔操作支援プログラム
JP2009039814A (ja) 2007-08-08 2009-02-26 Toyota Motor Corp パワーアシスト装置及びその制御方法
EP2217157A2 (en) 2007-10-05 2010-08-18 Ethicon Endo-Surgery, Inc. Ergonomic surgical instruments
US9037295B2 (en) 2008-03-07 2015-05-19 Perception Raisonnement Action En Medecine Dynamic physical constraint for hard surface emulation
GB0804633D0 (en) 2008-03-12 2008-04-16 Prosurgics Ltd a telescopic support
US8155479B2 (en) 2008-03-28 2012-04-10 Intuitive Surgical Operations Inc. Automated panning and digital zooming for robotic surgical systems
US8808164B2 (en) 2008-03-28 2014-08-19 Intuitive Surgical Operations, Inc. Controlling a robotic surgical tool with a display monitor
US20090259105A1 (en) 2008-04-10 2009-10-15 Miyano Hiromichi Medical treatment system and suturing method
JP5384178B2 (ja) 2008-04-21 2014-01-08 株式会社森精機製作所 加工シミュレーション方法及び加工シミュレーション装置
US8315738B2 (en) 2008-05-21 2012-11-20 Fanuc Robotics America, Inc. Multi-arm robot system interference check via three dimensional automatic zones
EP2138366B1 (en) 2008-06-26 2013-03-20 Kawasaki Jukogyo Kabushiki Kaisha Slip suppression control system for vehicle
US9179832B2 (en) 2008-06-27 2015-11-10 Intuitive Surgical Operations, Inc. Medical robotic system with image referenced camera control using partitionable orientational and translational modes
US8864652B2 (en) 2008-06-27 2014-10-21 Intuitive Surgical Operations, Inc. Medical robotic system providing computer generated auxiliary views of a camera instrument for controlling the positioning and orienting of its tip
US8414469B2 (en) 2008-06-27 2013-04-09 Intuitive Surgical Operations, Inc. Medical robotic system having entry guide controller with instrument tip velocity limiting
EP2334233A4 (en) 2008-09-12 2013-02-27 Accuray Inc CONTROL OF X-RAY IMAGING BASED ON TARGET MOVEMENTS
US8315720B2 (en) 2008-09-26 2012-11-20 Intuitive Surgical Operations, Inc. Method for graphically providing continuous change of state directions to a user of a medical robotic system
US8126642B2 (en) 2008-10-24 2012-02-28 Gray & Company, Inc. Control and systems for autonomously driven vehicles
US20100331856A1 (en) 2008-12-12 2010-12-30 Hansen Medical Inc. Multiple flexible and steerable elongate instruments for minimally invasive operations
WO2010069430A1 (de) 2008-12-17 2010-06-24 Kuka Roboter Gmbh Verfahren zum abfahren einer vorgegebenen bahn durch einen manipulator, sowie steuervorrichtung zur durchführung eines solchen verfahrens
US8335590B2 (en) 2008-12-23 2012-12-18 Intuitive Surgical Operations, Inc. System and method for adjusting an image capturing device attribute using an unused degree-of-freedom of a master control device
US8594841B2 (en) 2008-12-31 2013-11-26 Intuitive Surgical Operations, Inc. Visual force feedback in a minimally invasive surgical procedure
US8306656B1 (en) 2009-01-12 2012-11-06 Titan Medical Inc. Method and system for performing medical procedure
US8120301B2 (en) 2009-03-09 2012-02-21 Intuitive Surgical Operations, Inc. Ergonomic surgeon control console in robotic surgical systems
US8423182B2 (en) 2009-03-09 2013-04-16 Intuitive Surgical Operations, Inc. Adaptable integrated energy control system for electrosurgical tools in robotic surgical systems
US8337397B2 (en) 2009-03-26 2012-12-25 Intuitive Surgical Operations, Inc. Method and system for providing visual guidance to an operator for steering a tip of an endoscopic device toward one or more landmarks in a patient
JP2011013294A (ja) 2009-06-30 2011-01-20 Toshiba Corp 情報処理装置および輝度制御方法
US8918211B2 (en) 2010-02-12 2014-12-23 Intuitive Surgical Operations, Inc. Medical robotic system providing sensory feedback indicating a difference between a commanded state and a preferred pose of an articulated instrument
US9492927B2 (en) 2009-08-15 2016-11-15 Intuitive Surgical Operations, Inc. Application of force feedback on an input device to urge its operator to command an articulated instrument to a preferred pose
US8244402B2 (en) 2009-09-22 2012-08-14 GM Global Technology Operations LLC Visual perception system and method for a humanoid robot
EP2533678B1 (en) 2010-02-11 2020-03-25 Intuitive Surgical Operations, Inc. System for automatically maintaining an operator selected roll orientation at a distal tip of a robotic endoscope
US8589814B2 (en) 2010-04-16 2013-11-19 Honeywell International Inc. System and method for visual presentation of information in a process control system
CN103068348B (zh) 2010-08-02 2015-07-15 约翰霍普金斯大学 使用协作机器人控制和音频反馈呈现力传感器信息的方法
EP2729084A4 (en) 2011-07-07 2015-03-04 Olympus Corp MEDICAL MASTER SLAVE MANIPULATOR
US9387048B2 (en) 2011-10-14 2016-07-12 Intuitive Surgical Operations, Inc. Catheter sensor systems
KR20130080909A (ko) 2012-01-06 2013-07-16 삼성전자주식회사 수술 로봇 및 그 제어 방법
US8891924B2 (en) 2012-04-26 2014-11-18 Bio-Medical Engineering (HK) Limited Magnetic-anchored robotic system
KR101800189B1 (ko) 2012-04-30 2017-11-23 삼성전자주식회사 수술 로봇의 힘 제어 장치 및 방법
US10507066B2 (en) 2013-02-15 2019-12-17 Intuitive Surgical Operations, Inc. Providing information of tools by filtering image areas adjacent to or on displayed images of the tools
KR102115447B1 (ko) 2013-03-27 2020-05-27 한양대학교 에리카산학협력단 내시경 장치
US9949798B2 (en) 2016-01-06 2018-04-24 Ethicon Endo-Surgery, Llc Methods, systems, and devices for controlling movement of a robotic surgical system
WO2019126863A1 (en) 2017-12-28 2019-07-04 Orbsurgical Ltd. Iviicrosurgery-specific haptic hand controller

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070038080A1 (en) * 1998-12-08 2007-02-15 Intuitive Surgical Inc. Devices and methods for presenting and regulating auxiliary information on an image display of a telesurgical system to assist an operator in performing a surgical procedure
US20030109780A1 (en) * 2001-06-07 2003-06-12 Inria Roquencourt Methods and apparatus for surgical planning
WO2008002830A2 (en) * 2006-06-29 2008-01-03 Intuitive Surgical, Inc. Surgical tool position and identification indicator displayed in a soundary area of a computer display screen
WO2009037576A2 (en) * 2007-04-16 2009-03-26 The Governors Of The University Of Calgary Methods, devices, and systems for non-mechanically restricting and/or programming movement of a tool of a manipulator along a single axis

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022080788A1 (ko) * 2020-10-13 2022-04-21 서울대학교 산학협력단 헤드셋 기반의 음성인식 마이크로폰을 이용한 수술로봇 시스템
KR20220049062A (ko) * 2020-10-13 2022-04-21 서울대학교산학협력단 헤드셋 기반의 음성인식 마이크로폰을 이용한 수술로봇 시스템
KR102430468B1 (ko) * 2020-10-13 2022-08-09 서울대학교 산학협력단 헤드셋 기반의 음성인식 마이크로폰을 이용한 수술로봇 시스템

Also Published As

Publication number Publication date
US10737394B2 (en) 2020-08-11
CN102448680B (zh) 2016-04-27
US20170282372A1 (en) 2017-10-05
EP3385039B1 (en) 2019-11-06
EP2414137A2 (en) 2012-02-08
JP2016052521A (ja) 2016-04-14
JP2012521855A (ja) 2012-09-20
JP2014097431A (ja) 2014-05-29
JP2016101506A (ja) 2016-06-02
WO2010117685A2 (en) 2010-10-14
US9789608B2 (en) 2017-10-17
US20090192524A1 (en) 2009-07-30
US10137575B2 (en) 2018-11-27
CN102448680A (zh) 2012-05-09
WO2010117685A3 (en) 2011-02-24
JP2016064155A (ja) 2016-04-28
EP3246135A1 (en) 2017-11-22
EP3613547B1 (en) 2021-05-05
JP5840121B2 (ja) 2016-01-06
US11638999B2 (en) 2023-05-02
EP2414137B1 (en) 2017-06-21
JP2017176848A (ja) 2017-10-05
EP3385039A1 (en) 2018-10-10
US20190047154A1 (en) 2019-02-14
JP6576002B2 (ja) 2019-09-18
EP3613547A1 (en) 2020-02-26
US20200368915A1 (en) 2020-11-26
US20180126559A9 (en) 2018-05-10
KR20120004479A (ko) 2012-01-12
JP2016073686A (ja) 2016-05-12
EP3842190A1 (en) 2021-06-30
JP6058111B2 (ja) 2017-01-11
JP2019202158A (ja) 2019-11-28

Similar Documents

Publication Publication Date Title
KR101705921B1 (ko) 수술 로봇의 통합적 표현
US9801690B2 (en) Synthetic representation of a surgical instrument
JP7080945B2 (ja) 遠隔操作医療システムにおける器具の画面上での識別のためのシステム及び方法
JP5372225B2 (ja) コンピュータディスプレイ画面の境界領域に表示されるツール位置および識別指標
US8374723B2 (en) Obtaining force information in a minimally invasive surgical procedure
JP2018508300A (ja) 遠隔操作医療システムにおける器具の画面上での識別をレンダリングするためのシステム及び方法
JP2012223363A (ja) 手術用撮像システム及び手術用ロボット
US20230249354A1 (en) Synthetic representation of a surgical robot

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20200129

Year of fee payment: 4