CN109806002A - 一种用于手术机器人的成像系统及手术机器人 - Google Patents

一种用于手术机器人的成像系统及手术机器人 Download PDF

Info

Publication number
CN109806002A
CN109806002A CN201910032829.2A CN201910032829A CN109806002A CN 109806002 A CN109806002 A CN 109806002A CN 201910032829 A CN201910032829 A CN 201910032829A CN 109806002 A CN109806002 A CN 109806002A
Authority
CN
China
Prior art keywords
display device
coordinate system
posture
endoscope
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910032829.2A
Other languages
English (en)
Other versions
CN109806002B (zh
Inventor
袁帅
师云雷
王家寅
何超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Microport Medbot Group Co Ltd
Original Assignee
Microport (shanghai) Medical Robot Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microport (shanghai) Medical Robot Co Ltd filed Critical Microport (shanghai) Medical Robot Co Ltd
Priority to CN201910032829.2A priority Critical patent/CN109806002B/zh
Publication of CN109806002A publication Critical patent/CN109806002A/zh
Priority to EP20740827.9A priority patent/EP3912588B1/en
Priority to BR112021013439-5A priority patent/BR112021013439A2/pt
Priority to US17/423,026 priority patent/US20220079706A1/en
Priority to PCT/CN2020/071829 priority patent/WO2020147691A1/zh
Application granted granted Critical
Publication of CN109806002B publication Critical patent/CN109806002B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30—Surgical robots
    • A61B34/37—Master-slave robots
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A61B1/00048—Constructional features of the display
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2048—Tracking techniques using an accelerometer or inertia sensor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2051—Electromagnetic tracking systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/361—Image-producing devices, e.g. surgical cameras
    • A61B2090/3614—Image-producing devices, e.g. surgical cameras using optical fibre
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A61B2090/372—Details of monitor hardware

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Robotics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Veterinary Medicine (AREA)
  • Gynecology & Obstetrics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Pathology (AREA)
  • Manipulator (AREA)

Abstract

本发明提供了一种用于手术机器人的成像系统及手术机器人，成像系统包括：固定式显示装置，用于获取关于手术环境的图像信息并显示；移动式显示装置，与所述固定式显示装置活动连接且能够相对于所述固定式显示装置运动，移动式显示装置用于获取与所述固定式显示装置显示的图像信息相同的图像信息并显示；控制台车支座，所述固定式显示装置安装于控制台车支座上。本发明提供了一种用于手术机器人的成像系统及手术机器人，将移动式显示与固定式显示装置相结合，为操作者提供更多元化的操作选择，移动式显示器能够根据操作者的舒适性和个性化需要进行调整，为操作者提供更加舒适的操作体验，减缓手术操作的疲劳。

Description

一种用于手术机器人的成像系统及手术机器人
技术领域
本发明属于医疗器械领域，涉及一种用于手术机器人的成像系统及手术机器人。
背景技术
手术机器人的出现符合精准外科的发展趋势，手术机器人成为帮助医生完成手术的有力工具，例如达芬奇手术机器人已经应用在全球各大医院，因其伤害小、出血少、恢复快而为患者带来诸多便利。
医疗手术机器人的设计理念是采用微创伤方式实施复杂的外科手术。在传统手术面临种种局限的情况下，发展了手术机器人来替代传统手术器械，手术机器人突破了人眼的局限，其通过采用立体成像技术而将内部器官更加清晰的呈现给操作者。在原来手伸不进的区域，机器手能完成360度转动、挪动、摆动、夹持等人手难以完成的复杂动作，并且避免出现抖动的情况。其优点是创口小、出血少、恢复快，大大缩短了患者术后住院时间，并且还明显提高了术后存活率和康复率，受到广大医患的青睐，从而广泛运用于各种临床手术中。
在现阶段的一些手术过程中，单纯靠医生控制台的立体成像设备不够便捷，原因是固定在主操作台上的成像系统与主操作台固定在一起，其灵活性和与人体的互动性降低，长时间操作可能会感觉疲惫。在此情况下，在一些成像系统中还增加了头戴式显示器。头戴式显示器以便携、灵活小巧的特点减轻医生操作手术机器人的疲劳感，可以不用长期保持坐姿，并且内窥镜收集的手术图像可以同时同步传输立体图像到医生控制台与头戴式显示器。然而，头戴式显示器也存在一些不便之处，如摘取不方便、在手术期间使用者为了看其他东西必须脱掉头盔等问题。
公开号为CN102186434A的专利申请中提供了一种手术机器人的3D显示系统及其控制方法，其主要思想是在机器人手术过程中，根据操作员的位置移动3D显示器，从而使得操作员可以在方便的观看三维图像的同时进行机器人手术，而不需要改变姿势或佩戴显示设备，这种方式虽然从一定程度上减轻了操作者的疲劳，但是这样的设计造成整个显示系统的结构所占用的空间会比较大，并且由于机械臂与显示器的位置存在可一定的偏差，大大影响手术操作的“沉浸感”。
公开号为CN106456145A的专利申请中提出了一种虚拟显示手术装置，并且在其中涉及了一种操作地连接至中心体的可视化系统，并且可视化系统中提供了头戴式显示器，通过传感器追踪头戴式显示器相对于参考点的空间位置和/或定向，来调整摄像机的视野。该技术方案的重点在于实现头戴式显示器控制摄像机的控制方式，但是头戴式显示器存在长时间佩戴比较劳累，且摘取不方便的问题，在手术机器人成像系统中的使用也是比较受限的。
因此，在本领域中需要一种能够弥补上述缺陷、提高手术操作的舒适性以及给辅助操作者提供实时同步参考画面的成像系统以及相应的手术机器人。
发明内容
本发明的目的之一在于，提供一种用于手术机器人的成像系统，为操作者提供更加舒适的操作体验，减缓手术操作的疲劳。
本发明的另一目的在于，提供一种用于手术机器人的成像系统，可用于手术的指导和教学过程中，保证操作者和观察者观察到完全一致的图像视角。
本发明的又一目的在于，提供一种手术机器人，操作者在根据成像系统，操作主操作机构时，具有沉浸感。
本发明的又一目的在于，提供一种手术机器人，可通过移动式显示装置直接控制图像采集装置，从而使得操作者能够对手术操作进行更加便捷的控制，提高手术操作的便捷度和流畅性，提高手术效率。
为解决上述技术问题，本发明提供了一种用于手术机器人的成像系统，包括：固定式显示装置，用于获取关于手术环境的图像信息并显示；移动式显示装置，与所述固定式显示装置活动连接且能够相对于所述固定式显示装置运动，所述移动式显示装置用于获取与所述固定式显示装置显示的图像信息相同的图像信息并显示；和控制台车支座，所述固定式显示装置安装于所述控制台车支座上。
进一步的，所述固定式显示装置与所述控制台车支座活动连接，所述固定式显示装置能够相对于所述控制台车支座运动。
进一步的，所述固定式显示装置通过一转盘结构活动安装于所述控制台车支座的导轨上，所述固定式显示装置能够通过所述转盘结构相对于所述控制台车支座转动以及相对于所述控制台车支座沿所述导轨运动，以形成转动自由度和移动自由度。
优选的，所述固定式显示装置包括左右两个第一显示器，两组反射镜组，以及具有左右观察窗的图像观察窗，所述第一显示器用于分别接受一路图像信号并予以显示，且左右两个第一显示器接受的两路图像信号记录的图像之间具有视差，所述反射镜组用于反射所述第一显示器显示的图像，并投射至图像观察窗，且每个观察窗只接受一个第一显示器显示的图像。
进一步的，所述移动式显示装置活动连接于所述固定式显示装置的图像观察窗处或者活动连接于所述固定式显示装置的两侧。
进一步的，所述移动式显示装置包括左右两个第二显示器，所述第二显示器通过信号传输缆线或无线传输方式分别与所述固定式显示装置的一个第一显示器连接，以从对应的所述第一显示器处获取图像信息。
进一步的，所述移动式显示装置包括左右两个第二显示器、左右两个光源接收处，左右两个光纤结构，左右两个图像传感单元以及左右两个图像处理单元；所述固定式显示装置的图像观察窗的每个观察窗处分别安装有半反半透镜片，用于使得所述第一显示器显示的图像经过所述反射镜组反射后，其中一部分反射光透射出所述半反半透镜片，并投射至对应的一个所述观察窗，另一部分反射光通过所述半反半透镜片再次反射至所述光源接收处，并通过所述光纤结构传递至所述图像传感单元进行光电转换，所述图像处理单元接收所述图像传感单元传递的电信号进行图像增强处理，所述第二显示器用于显示图像增强处理后的图像。
本发明还提供了一种手术机器人，具有上述的成像系统，
进一步的，所述手术机器人还包括控制器，所述控制器用于接收操作者的选择以确定移动式显示装置和固定式显示装置中的一个作为主显示装置。
进一步的，所述手术机器人还包括图像采集装置，手术器械以及位于控制台车支座的主操作机构；所述图像采集装置包括一用于采集关于手术环境的图像信息的内窥镜，所述固定式显示装置与所述内窥镜通信连接，以获取所述关于手术环境的图像信息；所述主操作机构用于控制所述手术器械的位姿调整；所述固定式显示装置具有固定式显示装置坐标系，所述移动式显示装置具有移动式显示装置坐标系，所述内窥镜具有内窥镜坐标系；所述控制器还用于使所述主操作机构在所述主显示装置的坐标系下的运动方向、姿态变化方式，与所述手术器械在内窥镜坐标系下的运动方向、姿态变化方式保持一致。
进一步的，所述主操作机构具有握持点坐标系，所述控制台车支座具有控制台车支座坐标系；所述控制器还用于根据所述主显示装置的坐标系在所述控制台车支座坐标系下的姿态变化，调整所述握持点坐标系在控制台车支座坐标系下的姿态，并根据所述手术器械在内窥镜坐标系下的姿态描述，调整所述主操作机构姿态，使所述主操作机构在所述主显示装置的坐标系下的姿态描述，与所述手术器械在内窥镜坐标系下的姿态描述相一致。
进一步的，当所述移动式显示装置作为主显示装置时，所述移动式显示装置上设置有一陀螺仪以用于获取所述移动式显示装置坐标系在控制台车支座坐标系下的姿态，所述控制器与所述陀螺仪通信连接，以获取所述移动式显示装置坐标系在所述控制台车支座坐标系下的姿态变化；或者，
当所述移动式显示装置作为主显示装置时，所述移动式显示装置上设置有放置在磁场中的磁场传感器和水平传感器，以用于获取所述移动式显示装置坐标系在控制台车支座坐标系下的姿态，所述控制器与所述磁场传感器和水平传感器通信连接，并根据电磁感应的原理获取所述移动式显示装置坐标系在控制台车支座坐标系下的姿态变化。
进一步的，当所述固定式显示装置作为主显示装置时，所述固定式显示装置通过转盘结构活动安装于所述控制台车支座上，所述固定式显示装置能够通过所述转盘结构相对于所述控制台车支座转动；所述转盘结构上设置有一第一位置传感器，所述第一位置传感器用于获取所述固定式显示装置的转动角度，所述第一位置传感器与所述控制器通信连接，所述控制器通过所述第一位置传感器以及运动学模型获取所述固定式显示装置坐标系在控制台车支座坐标系下的姿态变化。
进一步的，所述主操作机构具有握持点坐标系，所述控制台车支座具有控制台车支座坐标系；当所述移动式显示装置切换至所述固定式显示装置作为主显示装置时，所述控制器获取所述移动式显示装置坐标系在控制台车支座坐标系下的姿态、所述固定式显示装置坐标系在控制台车支座坐标系下的姿态，以此获得移动式固定式旋转矩阵，调整所述握持点坐标系在控制台车支座坐标系下的姿态，并根据所述手术器械在内窥镜坐标系下的姿态描述，调整所述主操作机构姿态，使所述主操作机构在所述固定式显示装置坐标系下的姿态描述，与所述手术器械在内窥镜坐标系下的姿态描述相一致。
进一步的，所述主操作机构具有握持点坐标系，所述控制台车支座具有控制台车支座坐标系；当所述固定式显示装置切换至所述移动式显示装置作为主显示装置时，所述控制器获取所述移动式显示装置坐标系在控制台车支座坐标系下的姿态、所述固定式显示装置坐标系在控制台车支座坐标系下的姿态，获得固定式移动式旋转矩阵，调整所述握持点坐标系在控制台车支座坐标系下的姿态，并根据所述手术器械在内窥镜坐标系下的姿态描述，调整所述主操作机构姿态，使所述主操作机构在所述移动式显示装置坐标系下的姿态描述，与所述手术器械在内窥镜坐标系下的姿态描述相一致。
进一步的，所述图像采集装置还包括用于调整内窥镜姿态的驱动装置，用于获取内窥镜姿态的姿态测量单元；所述控制器与所述驱动装置、姿态测量单元通信连接，并根据所述移动式显示装置的姿态以及内窥镜的当前姿态，控制驱动装置驱使所述内窥镜的姿态与所述移动式显示装置的姿态相匹配。
进一步的，所述图像采集装置还包括用于夹持所述内窥镜的持镜臂；所述持镜臂包括多个关节，所述姿态测量单元与所述关节连接以检测关节转动角度，所述驱动单元与所述关节连接以驱动关节运动；所述控制器根据所述姿态测量单元的测量值和运动学模型，获得所述内窥镜的当前姿态，并根据所述移动式显示装置的姿态，获得所述持镜臂各个关节的转动量，并控制所述驱动单元驱动关节转动，以使所述内窥镜的姿态与所述移动式显示装置的姿态相匹配。
进一步的，所述图像采集装置还包括一与所述控制器通信连接的跟随开关，用于开启或关闭所述控制器控制所述内窥镜随着移动式显示装置的位姿变化而变化的功能。
进一步的，所述主操作机构具有握持点坐标系；所述控制器还用于根据所述移动式显示装置坐标系在控制台车支座坐标系下的姿态变化，调整所述握持点坐标系的姿态以及所述内窥镜的姿态，并根据所述手术器械在调整后的内窥镜坐标系下的姿态描述，调整所述主操作机构的姿态，使所述主操作机构在所述移动式显示装置坐标系下的姿态描述，与所述手术器械在调整后的内窥镜坐标系下的姿态描述相一致。
与现有技术相比，本发明提供了一种用于手术机器人的成像系统，将移动式显示与固定式显示装置相结合，为操作者提供更多元化的操作选择，移动式显示器能够根据操作者的舒适性和个性化需要进行调整，为操作者提供更加舒适的操作体验，减缓手术操作的疲劳。
并且，多个移动式显示装置的设置，以及移动式显示装置之间以及它们与固定式显示装置之间可以实现图像信息的同步，能够使操作者与从旁协助人员以相同的视角同时观看手术操作，提高手术操作的安全性。并且，可以应用于手术的指导和教学过程中，有助于在手术操作培训过程中，同时保证一名操作者与多名参与培训者的同时教学，提高培训的真实效果，并提高培训效率。
此外，本发明提供了一种手术机器人，除了具有上述的成像系统之外，优选还通过所述主操作机构在所述主显示装置的坐标系下的运动方向、姿态变化方式，与所述手术器械在内窥镜坐标系下的运动方向、姿态变化方式保持一致，以使操作者具有沉浸感，以实现正确的运动检测与控制，进一步提高操作者依据图像信息进行手术操作的控制精度。
进一步的，所述手术机器人还可以根据所述移动式显示装置的姿态变化，来调整所述图像采集装置中的内窥镜、腹腔镜等姿态变化，实现内窥镜、腹腔镜等进行跟随操作者控制意图的运动，从而提高手术操作过程中的流畅度，提高手术操作的效率。
附图说明
图1是本发明一实施例提供的一种用于手术机器人的成像系统的结构整体示意图；
图2是本发明一实施例提供的一种用于手术机器人的成像系统的结构示意图；
图3是本发明另一实施例提供的一种用于手术机器人的成像系统的结构示意图；
图4是本发明一实施例提供的一种用于手术机器人的成像系统中移动式显示装置的一种成像方式示意图；
图5是图4所示成像方式具体原理结构示意图；
图6是本发明一实施例提供的一种手术机器人中各组件的参考坐标示意图；
图7是本发明一实施例提供的一种用于手术机器人中各组件的参考坐标的映射示意图；
图8是本发明一实施例提供的一种用于手术机器人的成像系统中主显示装置检测的逻辑判断示意图。
其中，10-移动式显示装置；20-固定式显示装置；30-控制台车支座；11-传输缆线；12-光源接收处；13-光纤结构；21-转盘结构；22-图像观察窗；23-第一显示器；24-半反半透镜片；25-虚像；26-反射镜组。
具体实施方式
以下结合附图和具体实施例对本发明提出的一种用于手术机器人的成像系统及手术机器人作进一步详细说明。根据下面说明和权利要求书，本发明的优点和特征将更清楚。需说明的是，附图均采用非常简化的形式且均使用非精准的比例，仅用以方便、明晰地辅助说明本发明实施例的目的。
图1至图3是本发明一实施例提供的一种用于手术机器人的成像系统的示意图。请参考图1至图3，一种用于手术机器人的成像系统，包括：固定式显示装置20，用于获取关于手术环境的图像信息并显示，其中所述图像信息可以被显示为3D立体图像，这样可以更加直观的将手术环境呈现给操作者；移动式显示装置10，与所述固定式显示装置20活动连接且能够相对于所述固定式显示装置20运动，例如，可以在所述固定式显示装置20上设置多个可放置所述移动式显示装置10的接口，如图1所示，所述移动式显示装置10用于获取与所述固定式显示装置20显示的图像信息相同的图像信息并显示，例如在本发明的一种实施方式中，所述移动式显示装置10可以从所述固定式显示装置20直接获取所述图像信息并立体显示；控制台车支座30，所述固定式显示装置20安装于所述控制台车支座30上。在本发明的方案中，将移动式显示与固定式显示装置相结合，为操作者提供更多元化的操作选择，移动式显示装置能够根据操作者的舒适性和个性化需要进行调整，为操作者提供更加舒适的操作体验，减缓手术操作的疲劳。这里“手术环境”信息包括患者被操作部位的脏器信息，例如血管分布、器官类型、器官形态等，还包括手术器械、内窥镜在被操作部位的信息，例如手术器械类型，当前的位姿等。
优选，在本发明中，所述固定式显示装置20包括左右两个第一显示器，分别接收一路从内窥镜传输的图像信号并予以显示，且左右两个第一显示器接受的两路图像信号记录的图像之间具有视差。进一步，所述固定式显示装置20还包括左右两组反射镜组，以及具有左右观察窗的图像观察窗22。所述反射镜组用于反射所述第一显示器显示的图像，并投射至图像观察窗22，且每个观察窗只接受一个第一显示器显示的图像。
优选的，在本发明中，所述移动式显示装置10的数量可以为多个，这样，一方面，操作者可以根据实际需要，例如当操作者变换位置时，可以灵活选择移动式显示装置10，使操作更加便捷；另一方面，还可以提供多余的移动式显示装置给观察者使用，使观察者也能与操作者共享图像，便于手术的指导与教学。优选的，所述移动式显示装置10活动连接于所述固定式显示装置20的图像观察窗22处，或者活动连接于所述固定式显示装置20的两侧。
为了进一步方便操作者，给操作者的转换操作提供更大、更舒适的空间，在本发明的方案中，所述固定式显示装置20与所述控制台车支座30之间可以为活动连接，所述固定式显示装置20能够相对于所述控制台车支座30运动，这样，可以进一步加大所述固定式显示装置20以及连接于其上的移动式显示装置10的活动范围。
作为本发明的一种实现方式，所述固定式显示装置20通过一转盘结构21活动安装于所述控制台车支座30的导轨(图中未标出)上，所述固定式显示装置20能够通过所述转盘结构21相对于所述控制台车支座30转动实现转动自由度R1，并且，所述固定式显示装置20能够通过与所述转盘结构21连接的导轨相对于所述控制台车支座30运动形成移动自由度P1，即在本实施例中，所述固定式显示装置20与所述控制台车支座30形成转动自由度R1和移动自由度P1的复合连接。
在本发明的一些实施例中，所述移动式显示装置10可以将图像信息以2D形式显示；在另外一些实施例中，所述移动式显示装置10可以将图像信息以3D形式显示。具体可以采用如下几种方式实现3D成像显示。
第一种方案可以是，所述移动式显示装置10具有左右两个第二显示器，所述第二显示器通过信号传输缆线11或无线传输等通信连接方式分别与所述固定式显示装置20的一个第一显示器的信号源连接，以从对应的所述第一显示器处接收图像信息。具体来说，为了保证3D效果，所述固定式显示装置20一般具有左右两个第一显示器，分别接受一路从内窥镜传输的图像信号，且两路图像信号记录的图像之间具有视差，人的左右眼可以从所述固定式显示装置20的图像观察窗22的观察窗分别观察两个第一显示器中的图像，通过双目视觉成像形成3D效果。因此，移动式显示装置10同样具备两个第二显示器，每个第二显示器分别通过信号传输缆线11或无线传输方式与所述固定式显示装置20的对应的一个第一显示器的信号源通信连接并获取图像信息，从而，观察者的左右眼同样可以从所述移动式显示装置10的两个第二显示器中通过双目视觉成像原理观察到3D效果的图像信息。
第二种方案中，如图4和图5所示，所述移动式显示装置除了包括左右两个第二显示器外，还包括左右两个光源接收处，左右两个光纤结构，左右两个图像传感单元以及左右两个图像处理单元。所述图像观察窗22的每个观察窗均设有半反半透镜片24。所述第一显示器23显示的图像经过所述反射镜组26反射后形成叠加的虚像25，然后不是直接投射至观察窗，而是通过所述半反半透镜片24后再投射至观察窗。进一步，如图5所示，所述半反半透镜片24使得一部分反射光透射出所述半反半透镜片24并投射至所述图像观察窗22的对应的一个所述观察窗，另一部分的反射光通过所述半反半透镜片24再次反射，并通过另一反射光路传输至所述移动式显示装置10的光源接收处12。然后，所述反射光通过光纤结构13等传输至所述移动式显示装置10的图像传感单元(例如CMOS、CCD)处进行光电转换。进一步，所述图像处理单元接收图像传感单元传递的电信号并进行诸如去噪，锐化等图像增强处理。最后所述移动式显示装置10的左右两个第二显示器对图像增强处理后的图像分别予以显示以使操作者通过所述移动式显示装置10感知3D效果的图像信息，从而直接在物理层次实现光路的分路，并有效保证两路成像的完全一致性。
进一步的，本发明还公开了一种手术机器人，包括上述的成像系统。此外，所述手术机器人还包括位于所述控制台车支座上的主操作机构(即图1中操作者的手处)，手术器械，以及图像采集装置。所述主操作机构用于供操作者操作以控制手术器械的位姿调整。所述图像采集装置包括一内窥镜，所述内窥镜用于采集手术环境图像信息。此外，所述内窥镜与所述固定式显示装置20通信连接，所述内窥镜将采集得到的图像信息传输至所述固定式显示装置20，所述固定式显示装置20获取关于手术环境的图像信息并显示。所述固定式显示装置20具有固定式显示装置坐标系，所述移动式显示装置10具有移动式显示装置坐标系，所述内窥镜具有内窥镜坐标系。所述手术机器人还包括控制器，所述控制器还用于使所述主操作机构在移动式显示装置坐标系或固定式显示装置坐标系下的运动方向、姿态变化方式，与所述手术器械在内窥镜坐标系下的运动方向、姿态变化方式保持一致。
在一些实施例中，手术时，操作者是通过显示装置观察关于手术环境的图像，同时操作者通过主操作机构来控制手术器械的位置和姿态的调整，而手术器械的运动信息由内窥镜获取并传输给成像系统的。为了满足操作者手术的直观性，也就是为满足操作者能够按照符合人类正常的感知操作习惯，主操作机构在一显示装置(移动式显示装置10或固定式显示装置20)中的运动方向和姿态变化方式，需要和手术器械在内窥镜下的运动方向和姿态变化方式保持一致。例如，操作者操作主操作机构相对于固定式显示装置向内移动，手术器械在内窥镜下向着远离内窥镜的方向移动；再如，操作者操作主操作机构相对于固定式显示装置向右移动，手术器械在内窥镜下向着内窥镜图像的右侧方向移动。这就需要在初始化时将主操作机构的坐标系、显示装置坐标系、内窥镜坐标系和手术器械坐标系进行标定，以保证手术器械在内窥镜下的运动和主操作机构在一显示装置中的运动方向和姿态变化方式保持一致。而当所述显示装置或者内窥镜的姿态发生变化时，所述主操作机构也需要做相应的变化。例如，当戴着移动式显示装置的操作者头部从竖直向下转变为水平方向，则在操作者头部竖直向下观察时主操作机构中实现向着显示图像内部运动的关节的相同动作操作，在操作者头部转变为水平方向时，应该控制的是手术器械沿着显示器图像的平面向图像上方运动，而不是远离内窥镜的方向运动。此外，在固定式显示装置或者移动式显示装置之间切换时，需要将主操作机构的坐标系根据切换后的显示器的坐标系进行转换。
为了提高操作者依据图像进行手术操作的便利性，使操作者更加具有沉浸感，主操作机构在一显示装置中的运动方向和姿态变化方式，需要和手术器械在内窥镜下的运动方向和姿态变化方式保持一致。因此，首先需要确定移动式显示装置10和所述固定式显示装置20哪个为主显示装置，并基于主显示装置的姿态变化进行主操作机构的坐标系的调整，并进一步使主操作机构在主显示装置的坐标系下的姿态描述，与所述手术器械在内窥镜坐标系下的姿态描述保持一致。具体如下：
所述控制器还用于接受操作者的选择以确定移动式显示装置和固定式显示装置中的一个作为主显示装置。在一些实施例中，所述移动式显示装置10还包括与所述控制器通信连接的触发器，当移动式显示装置10从成像系统的固定座中取下时，所述触发器触发。所述控制器接收到所述触发器的触发信息，视为所述移动式显示装置10接通。所述固定式显示装置20还包括与所述控制器通信连接的启动开关。所述控制器接收到所述启动开关的触发信息，视为所述固定式显示装置20接通。进一步，所述手术机器人还包括与所述控制器通信连接的主显示装置选择按钮，以供操作者选择移动式显示装置10、固定式显示装置20哪个作为主显示装置。表1显示了主显示装置判断的开关量逻辑判断图。表格中所示“0”表示未接通，“1”表示接通。从表格中可知，当所述移动式显示装置10和所述固定式显示装置20均未接通时，此时控制器默认选择所述固定式显示装置20为主显示装置；当只有所述固定式显示装置20接通时，控制器选择所述固定式显示装置20为主显示装置；当只有所述移动式显示装置10接通时，控制器选择所述移动式显示装置10为主显示装置；当所述移动式显示装置10和所述固定式显示装置20均接通时，操作者通过所述主显示装置选择按钮进行人工判断主显示装置，所述控制器通过主显示装置选择按钮获知哪个显示装置为主显示装置。
表1主显示装置判断的开关量逻辑判断图
移动式显示装置开关量 固定式显示装置开关量 主显示装置选择结果
0 0 固定式
0 1 固定式
1 0 移动式
1 1 需选择确认
如图6、图7所示，所述移动式显示装置10、所述固定式显示装置20和控制台车支座30均设有一坐标系，分别为移动式显示装置坐标系{1}、固定式显示装置坐标系{2}和控制台车支座坐标系{0}。此外，所述主操作机构的末端也具有一坐标系，即握持点坐标系{3}。在初始化时，需要对所述移动式显示装置10、固定式显示装置20、控制台车支座30和所述主操作机构的末端进行标定。
在一个实施例中，可以通过坐标系标定使移动式显示装置坐标系{1}、握持点坐标系{3}相对于控制台车支座坐标系{0}的旋转关系一致，和/或固定式显示装置坐标系{2}、握持点坐标系{3}相对于所述控制台车支座坐标系{0}的旋转关系一致。即所述握持点坐标系{3}与所述固定式显示装置坐标系{2}之间的姿态映射关系2R3＝E，和/或所述握持点坐标系{3}与所述移动式显示装置坐标系{1}之间存在的姿态映射关系1R3＝E。
进一步，所述控制器还用于根据所述主显示装置坐标系在所述控制台车支座坐标系下的姿态变化，调整所述握持点坐标系在控制台车支座坐标系下的姿态。
例如，当所述移动式显示装置10作为主显示装置时，即操作者操作时所述移动式显示装置10向操作者提供3D效果的图像。所述移动式显示装置10上设置陀螺仪以获取所述移动式显示装置坐标系{1}在控制台车支座坐标系{0}下的姿态。所述控制器与所述陀螺仪通信连接，以实时获取所述移动式显示装置坐标系{1}在控制台车支座坐标系{0}下的姿态。或者，在所述移动式显示装置10上设置磁场传感器和水平传感器，并放置在磁场中，通过电磁感应的原理以获取所述移动式显示装置坐标系{1}在控制台车支座坐标系{0}下的姿态。所述控制器与所述磁场传感器和水平传感器通信连接，以实时获取所述移动式显示装置坐标系{1}在控制台车支座坐标系{0}下的姿态。当所述移动式显示装置从A位置转动至B位置时，所述控制器根据在A位置时和B位置时，所述移动式显示装置坐标系{1}在控制台车支座坐标系{0}下的姿态，获得移动式显示装置坐标系旋转矩阵ARB。进一步，所述控制器根据对应于A位置时所述握持点坐标系{3}在控制台车支座坐标系{0}下的姿态、移动式显示装置坐标系旋转矩阵ARB，获得对应于B位置时所述握持点坐标系{3}在控制台车支座坐标系{0}下的姿态。
又例如，当所述固定式显示装置20作为主显示装置时，即操作者操作时所述固定式显示装置20向操作者提供3D效果的图像。如果所述固定式显示装置20与所述控制台车支座30之间具有转动自由度R1的时候，在所述固定式显示装置20与所述控制台车支座30之间的转盘结构21上还设有第一位置传感器，用于获取所述固定式显示装置20的转动角度。所述第一位置传感器与所述控制器通信连接，以实时获取所述固定式显示装置20坐标系{2}的姿态。当所述固定式显示装置从C位置转动至D位置时，所述控制器根据在C位置和D位置时所述固定式显示装置20坐标系{2}在控制台车支座坐标系{0}下的姿态，获得固定式显示装置坐标系旋转矩阵CRD。进一步，所述控制器根据对应于C位置时所述握持点坐标系{3}在控制台车支座坐标系{0}下的姿态，固定式显示装置坐标系旋转矩阵CRD，获得对应于D位置时所述握持点坐标系{3}在控制台车支座坐标系{0}下的姿态。
当所述移动式显示装置10切换至所述固定式显示装置20作为主显示装置时，所述控制器获取所述移动式显示装置坐标系{2}在控制台车支座坐标系{0}下的姿态、所述固定式显示装置坐标系{1}在控制台车支座坐标系{0}下的姿态获得所述移动式固定式旋转矩阵R。进一步，所述控制器根据所述移动式固定式旋转矩阵R，调整所述握持点坐标系{3}在控制台车支座坐标系{0}下的姿态。相反，当所述固定式显示装置20切换至所述移动式显示装置10作为主显示装置时，所述控制器获取所述移动式显示装置坐标系{2}在控制台车支座坐标系{0}下的姿态、所述固定式显示装置坐标系{1}在控制台车支座坐标系{0}下的姿态获得所述固定式移动式旋转矩阵R’。进一步，所述控制器根据所述固定式移动式旋转矩阵R’，调整所述握持点坐标系{3}在控制台车支座坐标系{0}下的姿态。
进一步，需要实现手术器械在内窥镜坐标系下的姿态描述与主操作手在显示装置坐标系下的姿态描述相一致，以实现主从关系映射匹配。因此，所述控制器在根据所述主显示装置坐标系在所述控制台车支座坐标系下的姿态变化，调整所述握持点坐标系在控制台车支座坐标系下的姿态的基础上，还根据所述手术器械在内窥镜坐标系下的姿态描述，调整所述主操作机构姿态，使所述主操作机构在所述主显示装置的坐标系下的姿态描述，与所述手术器械在内窥镜坐标系下的姿态描述相一致。所述手术器械，内窥镜均具有一坐标系，即手术器械坐标系{4}，内窥镜坐标系{5}。在初始化时，需要对所述移动式显示装置10、固定式显示装置20、所述主操作机构、所述内窥镜以及手术器械进行坐标系标定，使所述握持点坐标系{3}与所述移动式显示装置坐标系{2}之间的姿态映射关系，或者所述握持点坐标系{3}与所述固定式显示装置坐标系{1}之间的姿态映射关系，与所述手术器械坐标系{4}与所述内窥镜坐标系{5}之间的映射关系保持一致。而当所述移动式显示装置坐标系{2}在控制台车支座坐标系{0}下的姿态发生变化时，所述握持点坐标系{3}在控制台车支座坐标系{0}下的姿态根据所述移动式显示装置坐标系{2}在控制台车支座坐标系{0}下姿态的变化而变化。而所述主操作机构在新的移动式显示装置坐标系{2}下的姿态描述已经与所述手术器械在所述内窥镜坐标系{5}下的姿态描述不匹配。所以在所述握持点坐标系{3}的姿态调整后，所述控制器还需要根据所述手术器械在所述内窥镜坐标系{5}下的姿态描述，通过运动学模型调整所述主操作机构上各个关节，以使所述主操作机构在新的移动式显示装置坐标系{2}下的姿态描述与所述手术器械在所述手术器械坐标系{4}下的姿态描述匹配。如果所述固定式显示装置20与所述控制台车支座30之间具有转动自由度R1的时候，即所述固定式显示装置20可以调整姿态的时候，亦需要按照上述的方式，调整所述主操作机构，使所述主操作机构的姿态描述在新的所述固定式显示装置坐标系{1}下，与所述手术器械在所述内窥镜坐标系{5}下的姿态描述相匹配。
经过上述的映射变换，无论以何种显示装置为主显示装置，都可以在主显示装置和主操作机构之间形成正确的坐标转换映射关系，从而将人眼观察的图像的姿态和所操作的机械臂系统的姿态，与手术器械和内窥镜之间的坐标关系形成吻合，以实现正确的运动检测与控制。
进一步，所述图像采集装置还包括用于调整内窥镜姿态的驱动装置，用于获取内窥镜姿态的姿态测量单元；所述控制器与所述驱动装置、姿态测量单元通信连接，并根据所述移动式显示装置的姿态以及内窥镜的当前姿态，控制驱动装置驱使所述内窥镜的姿态与所述移动式显示装置的姿态相匹配。
进一步的，所述图像采集装置中还包括持镜臂，用于夹持所述内窥镜。所述持镜臂包括多个关节，姿态测量单元用于检测关节转动角度，所述驱动单元与所述关节连接以驱动关节转动。进一步，所述控制器根据姿态测量单元的测量值，应用运动学模型获得所述内窥镜当前姿态，并根据所述移动式显示装置的姿态(即内窥镜的期望姿态)，获得所述持镜臂各个关节的转动量，并控制所述驱动单元驱动关节转动，以使所述内窥镜的姿态与所述移动式显示装置的姿态相匹配。具体可以参见中国专利申请201610854114.1，并全文引入本申请，作为本申请的一部分。
操作者可通过操作所述移动式显示装置的姿态，以控制内窥镜进行跟随操作者控制意图的运动，从而提高手术操作过程中的流畅度，提高手术操作的效率。另外一方面，当所述内窥镜姿态发生了变化，相当于所述手术器械以相反的方向调整了姿态。为了使所述手术器械在内窥镜坐标系{5}下新的姿态描述与所述主操作机构的姿态描述在新的所述移动式显示装置坐标系{2}下的姿态相一致，因此不仅需要考虑调整主操作机构，以使所述主操作机构在新的所述移动式显示装置坐标系{2}下的姿态描述，与所述手术器械在内窥镜坐标系{5}下的原来的姿态与相对应，还要考虑调整主操作机构，以使所述主操作机构在新的所述移动式显示装置坐标系{2}下的姿态描述，与所述手术器械在内窥镜坐标系{5}下的调整后的姿态与相对应。因此，所述控制器还用于根据所述移动式显示装置坐标系{2}在控制台车支座坐标系{0}下的姿态变化，调整所述握持点坐标系{3}的姿态以及所述内窥镜的姿态，并根据所述手术器械在调整后的内窥镜坐标系下的姿态描述，调整所述主操作机构的姿态，使所述主操作机构在所述移动式显示装置坐标系{2}下的姿态描述，与所述手术器械在调整后的内窥镜坐标系{5}下的姿态描述相一致。
进一步，为了防止所述内窥镜随着移动式显示装置的位姿变化进行不必要的位姿变化，所述手术机器人还包括一与所述控制器通信连接的跟随开关，用于开启或关闭所述控制器控制所述内窥镜随着移动式显示装置的位姿变化而变化的功能。
综上所述，本发明提供了一种用于手术机器人的成像系统，将移动式显示与固定式显示装置相结合，为操作者提供更多元化的操作选择，移动式显示器能够根据操作者的舒适性和个性化需要进行调整，为操作者提供更加舒适的操作体验，减缓手术操作的疲劳。
并且，多个移动式显示装置的设置，以及移动式显示装置之间以及它们与固定式显示装置之间可以实现图像信息的同步，能够使操作者与从旁协助人员以相同的视角同时观看手术操作，提高手术操作的安全性。并且，可以应用于手术的指导和教学过程中，有助于在手术操作培训过程中，同时保证一名操作者与多名参与培训者的同时教学，提高培训的真实效果，并提高培训效率。
此外，本发明提供了一种手术机器人，除了具有上述的成像系统之外，优选还通过所述主操作机构在所述主显示装置的坐标系下的运动方向、姿态变化方式，与所述手术器械在内窥镜坐标系下的运动方向、姿态变化方式保持一致，以使操作者具有沉浸感，以实现正确的运动检测与控制，进一步提高操作者依据图像信息进行手术操作的控制精度。
进一步的，所述手术机器人还可以根据所述移动式显示装置的姿态变化，来调整所述图像采集装置中的内窥镜、腹腔镜等姿态变化，实现内窥镜、腹腔镜等进行跟随操作者控制意图的运动，从而提高手术操作过程中的流畅度，提高手术操作的效率。
上述描述仅是对本发明较佳实施例的描述，并非对本发明范围的任何限定，本发明领域的普通技术人员根据上述揭示内容做的任何变更、修饰，均属于权利要求书的保护范围。

Claims (19)

1.一种用于手术机器人的成像系统，其特征在于包括：
固定式显示装置，用于获取关于手术环境的图像信息并显示；
移动式显示装置，与所述固定式显示装置活动连接且能够相对于所述固定式显示装置运动，所述移动式显示装置用于获取与所述固定式显示装置显示的图像信息相同的图像信息并显示；和
控制台车支座，所述固定式显示装置安装于所述控制台车支座上。
2.根据权利要求1所述的成像系统，其特征在于，所述固定式显示装置与所述控制台车支座活动连接，所述固定式显示装置能够相对于所述控制台车支座运动。
3.根据权利要求2所述的成像系统，其特征在于，所述固定式显示装置通过转盘结构活动安装于所述控制台车支座的导轨上，所述固定式显示装置能够通过所述转盘结构相对于所述控制台车支座转动以及相对于所述控制台车支座沿所述导轨运动，以形成转动自由度和移动自由度。
4.根据权利要求1所述的成像系统，其特征在于，所述固定式显示装置包括左右两个第一显示器，两组反射镜组，以及具有左右观察窗的图像观察窗，所述第一显示器用于分别接受一路图像信号并予以显示，且左右两个第一显示器接受的两路图像信号记录的图像之间具有视差，所述反射镜组用于反射所述第一显示器显示的图像，并投射至图像观察窗，且每个观察窗只接受一个第一显示器显示的图像。
5.根据权利要求4所述的成像系统，其特征在于，所述移动式显示装置活动连接于所述固定式显示装置的图像观察窗处或者活动连接于所述固定式显示装置的两侧。
6.根据权利要求4所述的成像系统，其特征在于，所述移动式显示装置包括左右两个第二显示器，所述第二显示器通过信号传输缆线或无线传输方式分别与所述固定式显示装置的一个第一显示器连接，以从对应的所述第一显示器处获取图像信息。
7.根据权利要求4所述的成像系统，其特征在于，
所述移动式显示装置包括左右两个第二显示器、左右两个光源接收处，左右两个光纤结构，左右两个图像传感单元以及左右两个图像处理单元；
所述固定式显示装置的图像观察窗的每个观察窗处分别安装有半反半透镜片，用于使得所述第一显示器显示的图像经过所述反射镜组反射后，其中一部分反射光透射出所述半反半透镜片，并投射至对应的一个所述观察窗，另一部分反射光通过所述半反半透镜片再次反射至所述光源接收处，并通过所述光纤结构传递至所述图像传感单元进行光电转换，所述图像处理单元接收所述图像传感单元传递的电信号进行图像增强处理，所述第二显示器用于显示图像增强处理后的图像。
8.一种手术机器人，包括权利要求1-7任一项所述的成像系统。
9.根据权利要求8所述的手术机器人，其特征在于，所述手术机器人还包括控制器，所述控制器用于接收操作者的选择以确定移动式显示装置和固定式显示装置中的一个作为主显示装置。
10.根据权利要求9所述的手术机器人，其特征在于，所述手术机器人还包括图像采集装置，手术器械以及位于控制台车支座的主操作机构；
所述图像采集装置包括一用于采集关于手术环境的图像信息的内窥镜，所述固定式显示装置与所述内窥镜通信连接，以获取所述关于手术环境的图像信息；
所述主操作机构用于控制所述手术器械的位姿调整；
所述固定式显示装置具有固定式显示装置坐标系，所述移动式显示装置具有移动式显示装置坐标系，所述内窥镜具有内窥镜坐标系；
所述控制器还用于使所述主操作机构在所述主显示装置的坐标系下的运动方向、姿态变化方式，与所述手术器械在内窥镜坐标系下的运动方向、姿态变化方式保持一致。
11.根据权利要求10所述的手术机器人，其特征在于，
所述主操作机构具有握持点坐标系，所述控制台车支座具有控制台车支座坐标系；
所述控制器还用于根据所述主显示装置的坐标系在所述控制台车支座坐标系下的姿态变化，调整所述握持点坐标系在控制台车支座坐标系下的姿态，并根据所述手术器械在内窥镜坐标系下的姿态描述，调整所述主操作机构姿态，使所述主操作机构在所述主显示装置的坐标系下的姿态描述，与所述手术器械在内窥镜坐标系下的姿态描述相一致。
12.根据权利要求11所述的手术机器人，其特征在于，当所述移动式显示装置作为主显示装置时，所述移动式显示装置上设置有一陀螺仪以用于获取所述移动式显示装置坐标系在控制台车支座坐标系下的姿态，所述控制器与所述陀螺仪通信连接，以获取所述移动式显示装置坐标系在所述控制台车支座坐标系下的姿态变化；或者，
当所述移动式显示装置作为主显示装置时，所述移动式显示装置上设置有放置在磁场中的磁场传感器和水平传感器，以用于获取所述移动式显示装置坐标系在控制台车支座坐标系下的姿态，所述控制器与所述磁场传感器和水平传感器通信连接，并根据电磁感应的原理获取所述移动式显示装置坐标系在控制台车支座坐标系下的姿态变化。
13.根据权利要求11所述的手术机器人，其特征在于，当所述固定式显示装置作为主显示装置时，所述固定式显示装置通过转盘结构活动安装于所述控制台车支座上，所述固定式显示装置能够通过所述转盘结构相对于所述控制台车支座转动；所述转盘结构上设置有一第一位置传感器，所述第一位置传感器用于获取所述固定式显示装置的转动角度，所述第一位置传感器与所述控制器通信连接，所述控制器通过所述第一位置传感器以及运动学模型获取所述固定式显示装置坐标系在控制台车支座坐标系下的姿态变化。
14.根据权利要求10所述的手术机器人，其特征在于，
所述主操作机构具有握持点坐标系，所述控制台车支座具有控制台车支座坐标系；
当所述移动式显示装置切换至所述固定式显示装置作为主显示装置时，所述控制器获取所述移动式显示装置坐标系在控制台车支座坐标系下的姿态、所述固定式显示装置坐标系在控制台车支座坐标系下的姿态，以此获得移动式固定式旋转矩阵，调整所述握持点坐标系在控制台车支座坐标系下的姿态，并根据所述手术器械在内窥镜坐标系下的姿态描述，调整所述主操作机构姿态，使所述主操作机构在所述固定式显示装置坐标系下的姿态描述，与所述手术器械在内窥镜坐标系下的姿态描述相一致。
15.根据权利要求10所述的手术机器人，其特征在于，
所述主操作机构具有握持点坐标系，所述控制台车支座具有控制台车支座坐标系；
当所述固定式显示装置切换至所述移动式显示装置作为主显示装置时，所述控制器获取所述移动式显示装置坐标系在控制台车支座坐标系下的姿态、所述固定式显示装置坐标系在控制台车支座坐标系下的姿态，获得固定式移动式旋转矩阵，调整所述握持点坐标系在控制台车支座坐标系下的姿态，并根据所述手术器械在内窥镜坐标系下的姿态描述，调整所述主操作机构姿态，使所述主操作机构在所述移动式显示装置坐标系下的姿态描述，与所述手术器械在内窥镜坐标系下的姿态描述相一致。
16.根据权利要求10所述的手术机器人，其特征在于，所述图像采集装置还包括用于调整内窥镜姿态的驱动装置，用于获取内窥镜姿态的姿态测量单元；
所述控制器与所述驱动装置、姿态测量单元通信连接，并根据所述移动式显示装置的姿态以及内窥镜的当前姿态，控制驱动装置驱使所述内窥镜的姿态与所述移动式显示装置的姿态相匹配。
17.根据权利要求16所述的手术机器人，其特征在于，所述图像采集装置还包括用于夹持所述内窥镜的持镜臂；
所述持镜臂包括多个关节，所述姿态测量单元与所述关节连接以检测关节转动角度，所述驱动单元与所述关节连接以驱动关节运动；
所述控制器根据所述姿态测量单元的测量值和运动学模型，获得所述内窥镜的当前姿态，并根据所述移动式显示装置的姿态，获得所述持镜臂各个关节的转动量，并控制所述驱动单元驱动关节转动，以使所述内窥镜的姿态与所述移动式显示装置的姿态相匹配。
18.根据权利要求17所述的手术机器人，其特征在于，所述图像采集装置还包括一与所述控制器通信连接的跟随开关，用于开启或关闭所述控制器控制所述内窥镜随着移动式显示装置的位姿变化而变化的功能。
19.根据权利要求16所述的手术机器人，其特征在于，
所述主操作机构具有握持点坐标系；
所述控制器还用于根据所述移动式显示装置坐标系在控制台车支座坐标系下的姿态变化，调整所述握持点坐标系的姿态以及所述内窥镜的姿态，并根据所述手术器械在调整后的内窥镜坐标系下的姿态描述，调整所述主操作机构的姿态，使所述主操作机构在所述移动式显示装置坐标系下的姿态描述，与所述手术器械在调整后的内窥镜坐标系下的姿态描述相一致。
CN201910032829.2A 2019-01-14 2019-01-14 一种手术机器人 Active CN109806002B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201910032829.2A CN109806002B (zh) 2019-01-14 2019-01-14 一种手术机器人
EP20740827.9A EP3912588B1 (en) 2019-01-14 2020-01-13 Imaging system for surgical robot, and surgical robot
BR112021013439-5A BR112021013439A2 (pt) 2019-01-14 2020-01-13 Sistema de imagística para robô cirúrgico e robô cirúrgico
US17/423,026 US20220079706A1 (en) 2019-01-14 2020-01-13 Imaging system for surgical robot, and surgical robot
PCT/CN2020/071829 WO2020147691A1 (zh) 2019-01-14 2020-01-13 一种用于手术机器人的成像系统及手术机器人

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910032829.2A CN109806002B (zh) 2019-01-14 2019-01-14 一种手术机器人

Publications (2)

Publication Number Publication Date
CN109806002A true CN109806002A (zh) 2019-05-28
CN109806002B CN109806002B (zh) 2021-02-23

Family

ID=66604299

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910032829.2A Active CN109806002B (zh) 2019-01-14 2019-01-14 一种手术机器人

Country Status (5)

Country Link
US (1) US20220079706A1 (zh)
EP (1) EP3912588B1 (zh)
CN (1) CN109806002B (zh)
BR (1) BR112021013439A2 (zh)
WO (1) WO2020147691A1 (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020147691A1 (zh) * 2019-01-14 2020-07-23 微创（上海）医疗机器人有限公司 一种用于手术机器人的成像系统及手术机器人
CN112022357A (zh) * 2020-09-16 2020-12-04 微创（上海）医疗机器人有限公司 医生控制台、手术机器人系统及医生控制台的控制方法
CN112472297A (zh) * 2020-11-26 2021-03-12 微创（上海）医疗机器人有限公司 位姿监测系统、方法、手术机器人系统和存储介质
CN113729967A (zh) * 2021-09-16 2021-12-03 上海微创医疗机器人（集团）股份有限公司 医生控制台的控制方法、医生控制台、机器人系统和介质
CN113768630A (zh) * 2021-08-06 2021-12-10 武汉中科医疗科技工业技术研究院有限公司 主手夹持机构、主手控制台、手术机器人及主从对齐方法
WO2022002159A1 (zh) * 2020-07-01 2022-01-06 北京术锐技术有限公司 主从运动的控制方法、机器人系统、设备及存储介质
CN116058975A (zh) * 2021-11-01 2023-05-05 深圳市精锋医疗科技股份有限公司 手术机器人及其控制方法、控制装置
CN116531110A (zh) * 2023-06-06 2023-08-04 上海睿触科技有限公司 一种腹腔镜手术机器人主控制台成像系统及瞳距调节方法
WO2023185699A1 (zh) * 2022-03-26 2023-10-05 深圳市精锋医疗科技股份有限公司 一种手术机器人和控制方法
CN116869668A (zh) * 2023-09-07 2023-10-13 深圳市精锋医疗科技股份有限公司 手术机器人系统
WO2023237105A1 (zh) * 2022-06-10 2023-12-14 上海微创医疗机器人（集团）股份有限公司 用于在医生控制台显示虚拟手术器械的方法及医生控制台
WO2024041386A1 (zh) * 2022-08-24 2024-02-29 上海微创医疗机器人（集团）股份有限公司 机械臂的匹配方法、医生控制台和计算机可读存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102186434A (zh) * 2008-08-21 2011-09-14 韩商未来股份有限公司 手术机器人的3d显示系统及其控制方法
US20160220324A1 (en) * 2014-12-05 2016-08-04 Camplex, Inc. Surgical visualizations systems and displays
US20170007351A1 (en) * 2015-07-12 2017-01-12 Steven Sounyoung Yu Head-Worn Image Display Apparatus for Microsurgery and Other Uses
CN106456145A (zh) * 2014-05-05 2017-02-22 维卡瑞斯外科手术股份有限公司 虚拟现实手术装置
US9645785B1 (en) * 2014-12-31 2017-05-09 Verily Life Sciences, LLC Heads-up displays for augmented reality network in a medical environment
US20180078316A1 (en) * 2016-09-22 2018-03-22 Medtronic Navigation, Inc. System for Guided Procedures
CN108289600A (zh) * 2016-10-03 2018-07-17 威博外科公司 用于机器人外科手术的沉浸式三维显示器

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2003246906A1 (en) * 2002-06-25 2004-01-06 Michael Nicholas Dalton Apparatus and method for superimposing images over an object
US7835823B2 (en) * 2006-01-05 2010-11-16 Intuitive Surgical Operations, Inc. Method for tracking and reporting usage events to determine when preventive maintenance is due for a medical robotic system
WO2009051013A1 (ja) * 2007-10-19 2009-04-23 Mitaka Kohki Co., Ltd. ヘッドマウント型双眼ルーペ装置
KR101365242B1 (ko) * 2012-01-27 2014-02-19 삼성전자주식회사 복수의 디스플레이 유닛을 구비한 초음파 진단 장치
JP5931528B2 (ja) * 2012-03-21 2016-06-08 オリンパス株式会社 手術用映像システムおよび手術用映像システムの作動方法
JP5792226B2 (ja) * 2013-05-29 2015-10-07 株式会社神戸製鋼所 多関節リンク機構の逆運動学解法、及びこの逆運動学解法を利用した教示データ作成装置
US20160120507A1 (en) * 2013-05-31 2016-05-05 Hitachi Aloka Medical, Ltd. Ultrasound diagnostic device
WO2017091704A1 (en) * 2015-11-25 2017-06-01 Camplex, Inc. Surgical visualization systems and displays
JP6673684B2 (ja) * 2015-12-11 2020-03-25 株式会社メディカロイド 遠隔操作装置及び遠隔手術システム
US20190088162A1 (en) * 2016-03-04 2019-03-21 Covidien Lp Virtual and/or augmented reality to provide physical interaction training with a surgical robot
CN106333715B (zh) 2016-09-27 2020-04-17 微创（上海）医疗机器人有限公司 腹腔镜手术系统
US10485499B2 (en) * 2017-04-17 2019-11-26 General Electric Company Method and systems for a compact integrated monitor arm for an imaging system
US20180368656A1 (en) * 2017-05-24 2018-12-27 Camplex, Inc. Surgical visualization systems and displays
EP4236548A1 (en) * 2017-10-30 2023-08-30 DexCom, Inc. Diabetes management partner interface for wireless communication of analyte data
CN109806002B (zh) * 2019-01-14 2021-02-23 微创（上海）医疗机器人有限公司 一种手术机器人

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102186434A (zh) * 2008-08-21 2011-09-14 韩商未来股份有限公司 手术机器人的3d显示系统及其控制方法
CN106456145A (zh) * 2014-05-05 2017-02-22 维卡瑞斯外科手术股份有限公司 虚拟现实手术装置
US20160220324A1 (en) * 2014-12-05 2016-08-04 Camplex, Inc. Surgical visualizations systems and displays
US9645785B1 (en) * 2014-12-31 2017-05-09 Verily Life Sciences, LLC Heads-up displays for augmented reality network in a medical environment
US20170007351A1 (en) * 2015-07-12 2017-01-12 Steven Sounyoung Yu Head-Worn Image Display Apparatus for Microsurgery and Other Uses
US20180078316A1 (en) * 2016-09-22 2018-03-22 Medtronic Navigation, Inc. System for Guided Procedures
CN108289600A (zh) * 2016-10-03 2018-07-17 威博外科公司 用于机器人外科手术的沉浸式三维显示器

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020147691A1 (zh) * 2019-01-14 2020-07-23 微创（上海）医疗机器人有限公司 一种用于手术机器人的成像系统及手术机器人
WO2022002159A1 (zh) * 2020-07-01 2022-01-06 北京术锐技术有限公司 主从运动的控制方法、机器人系统、设备及存储介质
CN112022357A (zh) * 2020-09-16 2020-12-04 微创（上海）医疗机器人有限公司 医生控制台、手术机器人系统及医生控制台的控制方法
WO2022057474A1 (zh) * 2020-09-16 2022-03-24 上海微创医疗机器人（集团）股份有限公司 医生控制台、手术机器人系统及医生控制台的控制方法
CN112472297B (zh) * 2020-11-26 2022-03-29 上海微创医疗机器人（集团）股份有限公司 位姿监测系统、方法、手术机器人系统和存储介质
CN112472297A (zh) * 2020-11-26 2021-03-12 微创（上海）医疗机器人有限公司 位姿监测系统、方法、手术机器人系统和存储介质
CN113768630A (zh) * 2021-08-06 2021-12-10 武汉中科医疗科技工业技术研究院有限公司 主手夹持机构、主手控制台、手术机器人及主从对齐方法
WO2023040817A1 (zh) * 2021-09-16 2023-03-23 上海微创医疗机器人（集团）股份有限公司 医生控制台的控制方法、医生控制台、机器人系统和介质
CN113729967A (zh) * 2021-09-16 2021-12-03 上海微创医疗机器人（集团）股份有限公司 医生控制台的控制方法、医生控制台、机器人系统和介质
CN113729967B (zh) * 2021-09-16 2023-09-19 上海微创医疗机器人（集团）股份有限公司 医生控制台的控制方法、医生控制台、机器人系统和介质
CN116058975A (zh) * 2021-11-01 2023-05-05 深圳市精锋医疗科技股份有限公司 手术机器人及其控制方法、控制装置
CN116058975B (zh) * 2021-11-01 2023-11-24 深圳市精锋医疗科技股份有限公司 手术机器人及其控制方法、控制装置
WO2023185699A1 (zh) * 2022-03-26 2023-10-05 深圳市精锋医疗科技股份有限公司 一种手术机器人和控制方法
WO2023237105A1 (zh) * 2022-06-10 2023-12-14 上海微创医疗机器人（集团）股份有限公司 用于在医生控制台显示虚拟手术器械的方法及医生控制台
WO2024041386A1 (zh) * 2022-08-24 2024-02-29 上海微创医疗机器人（集团）股份有限公司 机械臂的匹配方法、医生控制台和计算机可读存储介质
CN116531110A (zh) * 2023-06-06 2023-08-04 上海睿触科技有限公司 一种腹腔镜手术机器人主控制台成像系统及瞳距调节方法
CN116531110B (zh) * 2023-06-06 2024-01-26 上海睿触科技有限公司 一种腹腔镜手术机器人主控制台成像系统及瞳距调节方法
CN116869668A (zh) * 2023-09-07 2023-10-13 深圳市精锋医疗科技股份有限公司 手术机器人系统
CN116869668B (zh) * 2023-09-07 2023-12-08 深圳市精锋医疗科技股份有限公司 手术机器人系统

Also Published As

Publication number Publication date
WO2020147691A1 (zh) 2020-07-23
BR112021013439A2 (pt) 2021-10-19
CN109806002B (zh) 2021-02-23
EP3912588A4 (en) 2022-03-16
EP3912588A1 (en) 2021-11-24
US20220079706A1 (en) 2022-03-17
EP3912588B1 (en) 2024-05-08

Similar Documents

Publication Publication Date Title
CN109806002B (zh) 一种手术机器人
US11792386B2 (en) Medical devices, systems, and methods using eye gaze tracking for stereo viewer
KR101825712B1 (ko) 최소 침습 원격조종 수술 기구를 위한 환자측 의사 인터페이스
WO2018159338A1 (ja) 医療用支持アームシステムおよび制御装置
KR102358967B1 (ko) 이미징 기기의 방향 제어 시스템 및 방법
US11382713B2 (en) Navigated surgical system with eye to XR headset display calibration
CN112074248A (zh) 立体可视化相机和集成式机器人技术平台
KR20140112207A (ko) 증강현실 영상 표시 시스템 및 이를 포함하는 수술 로봇 시스템
JP2020156800A (ja) 医療用アームシステム、制御装置、及び制御方法
KR20140139840A (ko) 디스플레이 장치 및 그 제어방법
JPWO2019087904A1 (ja) 手術アームシステム及び手術アーム制御システム
US20210121245A1 (en) Surgeon interfaces using augmented reality
JP5784388B2 (ja) 医療用マニピュレータシステム
CN114795495A (zh) 一种主从操作微创手术机器人系统
US20230222740A1 (en) Medical image processing system, surgical image control device, and surgical image control method
RU2785887C1 (ru) Система визуализации для хирургического робота и хирургический робот
CN112655016A (zh) 信息处理设备、信息处理方法和程序
CN218739128U (zh) 主操控台及其图像主机
WO2023176133A1 (ja) 内視鏡用保持装置、内視鏡手術システム、及び制御方法
JP2023551529A (ja) 立体視画像再生のための３ｄ出力装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: Room 101, block B, building 1, No. 1601, Zhangdong Road, China (Shanghai) pilot Free Trade Zone, Pudong New Area, Shanghai, 201203

Patentee after: Shanghai minimally invasive medical robot (Group) Co.,Ltd.

Address before: 201203, 501, Newton Road, Zhangjiang hi tech park, Shanghai, Pudong New Area

Patentee before: Microport (Shanghai) Medbot Co.,Ltd.