CN112587244A - 手术机器人及其控制方法、控制装置 - Google Patents
手术机器人及其控制方法、控制装置 Download PDFInfo
- Publication number
- CN112587244A CN112587244A CN202011476155.4A CN202011476155A CN112587244A CN 112587244 A CN112587244 A CN 112587244A CN 202011476155 A CN202011476155 A CN 202011476155A CN 112587244 A CN112587244 A CN 112587244A
- Authority
- CN
- China
- Prior art keywords
- arm
- following
- area
- image
- surgical
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 77
- 230000000007 visual effect Effects 0.000 claims abstract description 104
- 238000004590 computer program Methods 0.000 claims description 9
- 238000012800 visualization Methods 0.000 claims description 9
- 230000000875 corresponding effect Effects 0.000 description 27
- 230000008859 change Effects 0.000 description 16
- 230000008569 process Effects 0.000 description 16
- 230000001276 controlling effect Effects 0.000 description 14
- 230000000670 limiting effect Effects 0.000 description 9
- 230000036961 partial effect Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000002596 correlated effect Effects 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 4
- 238000002324 minimally invasive surgery Methods 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 230000002401 inhibitory effect Effects 0.000 description 3
- 238000011022 operating instruction Methods 0.000 description 3
- 238000001356 surgical procedure Methods 0.000 description 3
- 230000000712 assembly Effects 0.000 description 2
- 238000000429 assembly Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000013519 translation Methods 0.000 description 2
- 208000012260 Accidental injury Diseases 0.000 description 1
- 208000027418 Wounds and injury Diseases 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000005094 computer simulation Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000005764 inhibitory process Effects 0.000 description 1
- 208000014674 injury Diseases 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000002829 reductive effect Effects 0.000 description 1
- 230000000284 resting effect Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/30—Surgical robots
- A61B34/37—Master-slave robots
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/70—Manipulators specially adapted for use in surgery
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/70—Manipulators specially adapted for use in surgery
- A61B34/74—Manipulators with manual electric input means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/361—Image-producing devices, e.g. surgical cameras
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/30—Surgical robots
- A61B2034/302—Surgical robots specifically adapted for manipulations within body cavities, e.g. within abdominal or thoracic cavities
Abstract
本发明涉及一种手术机器人及其控制方法、控制装置。手术机器人包括具有图像末端器械的相机臂及具有操作末端器械的手术臂;及控制器,控制器被配置成用于:获取基于手术臂的第一特征部位配置的跟随部位;获取图像末端器械在参考坐标系的当前可视区域;判断跟随部位是否落入当前可视区域;在跟随部位未落入当前可视区域时,调节图像末端器械而获得图像末端器械在参考坐标系的新可视区域以使至少部分的跟随部位落入新可视区域。本发明的手术机器人能够自主调节图像末端器械以使位于图像末端器械的当前视野以外的手术臂的跟随部位落入调节后的图像末端器械的可视区域内,以确保手术臂在视野下进行安全、可靠地运动。
Description
技术领域
本发明涉及医疗器械领域,特别是涉及一种手术机器人及其控制方法、控制装置。
背景技术
微创手术是指利用腹腔镜、胸腔镜等现代医疗器械及相关设备在人体腔体内部施行手术的一种手术方式。相比传统手术方式微创手术具有创伤小、疼痛轻、恢复快等优势。
随着科技的进步,微创手术机器人技术逐渐成熟,并被广泛应用。手术机器人包括主操作台及从操作设备,从操作设备包括多个操作臂,这些操作臂包括具有图像末端器械的相机臂及具有操作末端器械的手术臂。主操作台包括显示器及手柄。医生在显示器显示的由相机臂提供的视野下操作手柄控制相机臂或手术臂运动。
然而,在手柄控制下,手术臂的部分部位容易移动至相机臂的视野以外,手术臂例如其末端器械在位于视野以外的情况容易脱离医生的掌控,进而可能对患者造成意外伤害。
发明内容
基于此,有必要提供一种能够确保手术臂的跟随部位始终处于相机臂在参考坐标系的可视区域内,进而确保手术臂在视野下进行安全、可靠地运动的手术机器人及其控制方法、控制装置。
一方面,本发明提供了一种手术机器人的控制方法,所述手术机器人具有操作臂,所述操作臂包括具有图像末端器械的相机臂及具有操作末端器械的手术臂,所述手术臂具有一个以上可被配置成跟随部位的第一特征部位,所述控制方法包括如下步骤:获取基于所述第一特征部位配置的所述跟随部位;
获取所述图像末端器械在参考坐标系的当前可视区域;判断所述跟随部位是否落入所述当前可视区域;在所述跟随部位未落入所述当前可视区域时,调节所述图像末端器械而获得所述图像末端器械在参考坐标系的新可视区域以使至少部分的所述跟随部位落入所述新可视区域。
其中,所述跟随部位是所述手术臂的操作末端器械及或关节。
其中,调节所述图像末端器械而获得所述图像末端器械在参考坐标系的新可视区域以使至少部分的所述跟随部位落入所述新可视区域的步骤包括:获取所述图像末端器械在参考坐标系的全部可视区域的并集区域;判断所述跟随部位是否能够落入所述并集区域;在所述跟随部位均能够落入所述并集区域时,调节所述图像末端器械而获得所述图像末端器械在参考坐标系的新可视区域以使全部所述跟随部位落入所述新可视区域。
其中,调节所述图像末端器械而获得所述图像末端器械在参考坐标系的新可视区域以使至少部分的所述跟随部位落入所述新可视区域的步骤包括:获取所述图像末端器械在参考坐标系的全部可视区域的并集区域;判断所述跟随部位是否能够落入所述并集区域;在所述跟随部位不能全部落入所述并集区域时,根据操作指令将至少部分能够落入所述并集区域的所述跟随部位配置成第一跟随部位;调节所述图像末端器械而获得所述图像末端器械在参考坐标系的新可视区域以使所述第一跟随部位落入所述新可视区域。
其中,所述操作指令包括第一操作指令,所述第一操作指令关联于能够落入所述并集区域的全部或部分所述跟随部位,根据操作指令将至少部分能够落入所述并集区域的所述跟随部位配置成第一跟随部位的步骤包括:根据所述第一操作指令将全部或部分能够落入所述并集区域的所述跟随部位配置成第一跟随部位。
其中,所述手术臂包括第一优先级的手术臂及第二优先级的手术臂,各所述手术臂均被配置有所述跟随部位,所述操作指令包括第二操作指令,所述第二操作指令关联于第一优先级的所述手术臂的、且全部或部分能够落入所述并集区域的所述跟随部位,根据操作指令将至少部分能够落入所述并集区域的所述跟随部位配置成第一跟随部位包括:根据所述第二操作指令将第一优先级的所述手术臂上全部或部分能够落入所述并集区域的所述跟随部位配置成第一跟随部位。
其中,第一优先级的所述手术臂指处于运动状态的所述手术臂,第二优先级的所述手术臂指处于静止状态的所述手术臂。
其中,第一优先级的所述手术臂指所述操作末端器械的运动速度达到预设阈值的所述手术臂,第二优先级的所述手术臂指所述操作末端器械的运动速度低于预设阈值的所述手术臂。
其中,判断所述跟随部位是否落入所述当前可视区域的步骤包括:获取所述相机臂采集的所述当前可视区域的操作图像;通过识别所述跟随部位是否位于所述操作图像内而判断所述跟随部位是否落入所述当前可视区域。
其中,判断所述跟随部位是否落入所述当前可视区域的步骤包括:获取所述手术臂的运动学模型及所述手术臂中各关节的关节变量;结合所述运动学模型及所述关节变量确定所述跟随部位在参考坐标系的位置;转换所述当前可视区域为在参考坐标系的位置范围;判断所述跟随部位的位置是否位于所述位置范围内;在所述跟随部位位于所述位置范围内时,判断出所述跟随部位位于所述当前可视区域内。
其中,所述图像末端器械具有可调节的相机参数,调节所述图像末端器械而获得所述图像末端器械在参考坐标系的新可视区域以使至少部分的所述跟随部位落入所述新可视区域的步骤包括:获取所述跟随部位在参考坐标系的当前位置;根据所述当前位置调节所述图像末端器械的所述相机参数产生所述新可视区域以使至少部分的所述跟随部位落入所述新可视区域。
其中,所述相机参数包括焦距及/或光圈。
其中,调节所述图像末端器械而获得所述图像末端器械在参考坐标系的新可视区域以使至少部分的所述跟随部位落入所述新可视区域的步骤包括:获取所述跟随部位在参考坐标系的当前位置;获取根据所述图像末端器械的有效自由度配置的任务自由度;根据所述当前位置及所述任务自由度调节所述图像末端器械运动而获得所述图像末端器械在参考坐标系的所述新可视区域以使至少部分的所述跟随部位落入所述新可视区域。
其中,所述图像末端器械的有效自由度包括位置自由度和姿态自由度。
其中,所述任务自由度选择自所述位置自由度中与景深的方向一致的自由度,调节所述图像末端器械运动而获得所述图像末端器械在参考坐标系的所述新可视区域以使跟随部位落入所述新可视区域具体为:调节所述图像末端器械在与景深的方向一致的所述自由度上伸缩而获得图像末端器械在参考坐标系的新可视区域以使至少部分的所述跟随部位落入所述新可视区域。
其中,所述任务自由度选择自所述位置自由度中垂直于景深的方向的平面自由度,调节所述图像末端器械运动而获得所述图像末端器械在参考坐标系的所述新可视区域以使跟随部位落入所述新可视区域具体为:调节所述图像末端器械在所述平面自由度上平移而获得所述图像末端器械在参考坐标系的所述新可视区域以使跟随部位落入所述新可视区域。
其中,所述任务自由度选择自所述姿态自由度,调节所述图像末端器械运动而获得所述图像末端器械在参考坐标系的所述新可视区域以使跟随部位落入所述新可视区域具体为:调节所述图像末端器械位置不变而姿态改变从而产生新可视区域以使至少部分的所述跟随部位落入所述新可视区域。
其中,在调节所述图像末端器械而获得所述图像末端器械在参考坐标系的新可视区域以使至少部分的所述跟随部位落入所述新可视区域的步骤之后,包括:结束对所述图像末端器械的调节并保持获得的所述新可视区域。
其中,结束对所述图像末端器械的调节的步骤包括:检测是否获取到中断指令;在获取到所述中断指令时,结束对所述图像末端器械的调节。
其中,所述手术臂具有一个以上可被配置成目标部位的第二特征部位,在保持获得的所述新可视区域的步骤之后,包括:获取基于所述手术臂当前位于所述新可视区域内的所述第二特征部位配置的所述目标部位;基于所述新可视区域限定所述目标部位在所述新可视区域内运动。
其中,获取基于所述手术臂当前位于所述新可视区域内的所述第二特征部位配置的所述目标部位的步骤包括:获取所述手术臂可被配置成所述目标部位的所述第二特征部位;判断所述第二特征部位当前是否位于所述新可视区域内;令判断出当前位于所述新可视区域内的所述第二特征部位为第一部位,基于所述第一部位获取所述目标部位。
其中,判断所述第二特征部位当前是否位于所述新可视区域内的步骤包括:获取所述相机臂采集的所述新可视区域的操作图像;识别所述第二特征部位是否位于所述操作图像内;在所述第二特征部位位于所述操作图像内时,判断出所述第二特征部位位于所述新可视区域内。
其中,判断所述第二特征部位当前是否位于所述新可视区域内的步骤包括:获取所述手术臂的运动学模型及所述手术臂中各关节的关节变量;结合所述运动学模型及所述关节变量确定所述第二特征部位在参考坐标系的位置;转换所述新可视区域为在参考坐标系的位置范围;判断所述第二特征部位的位置是否位于所述位置范围内;在所述第二特征部位位于所述位置范围内时,判断出所述第二特征部位位于所述新可视区域内。
其中,基于所述新可视区域限定所述目标部位在所述新可视区域内运动的步骤包括:判断所述目标部位是否达到所述新可视区域的边界;判断出所述目标部位达到所述新可视区域的边界时,判断所述目标部位下一时刻的运动方向是否朝向所述新可视区域外;判断出所述目标部位下一时刻的运动方向朝向所述新可视区域外时,禁止所述目标部位朝向所述新可视区域外运动。
其中,禁止所述目标部位朝向所述新可视区域外运动包括禁止所述目标部位朝向所述新可视区域外运动或禁止所述手术臂运动。
其中,判断所述目标部位是否达到所述新可视区域的边界的步骤包括:获取所述相机臂采集的所述新可视区域的操作图像;识别所述目标部位是否达到所述操作图像的边缘;在所述目标部位达到所述操作图像的边缘时,判断出所述目标部位达到所述新可视区域的边界。
其中,判断所述目标部位是否达到所述新可视区域的边界的步骤包括:获取所述手术臂的运动学模型及所述手术臂中各关节的关节变量;结合所述运动学模型及所述关节变量确定所述目标部位在参考坐标系的位置;转换所述新可视区域为在参考坐标系的位置范围;判断所述目标部位的位置是否达到所述位置范围的边界;在所述目标部位达到所述位置范围的边界时,判断出所述目标部位达到所述新可视区域的边界。
其中,判断所述目标部位下一时刻的运动方向是否朝向所述新可视区域外的步骤包括:获取所述目标部位在达到所述新可视区域的边界时的当前位置;获取所述目标部位在下一时刻的目标位置;根据所述目标位置和所述当前位置确定所述目标部位下一时刻的运动方向是否朝向所述新可视区域外。
其中,获取所述目标部位在达到所述可视区域的边界时的当前位置的步骤包括:获取所述手术臂的运动学模型及当前时刻下所述手术臂中各关节的关节变量;根据所述运动学模型及各所述关节变量计算所述目标部位在当前时刻下的所述当前位置。
其中,所述手术机器人包括运动输入部,获取所述目标部位在下一时刻的目标位置的步骤包括:获取所述运动输入部输入的目标位姿信息;根据所述目标位姿信息计算所述手术臂中各关节的关节变量;获取所述手术臂的运动学模型;结合所述运动学模型及各所述关节变量确定所述目标部位在下一时刻的所述目标位置。
其中,基于所述新可视区域限定所述目标部位在所述新可视区域内运动的步骤包括:获取位于所述新可视区域内的安全运动区域,令所述安全运动区域内的区域为第一区域,令所述安全运动区域以外、所述新可视区域以内的区域为第二区域;根据所述目标部位在所述第一区域及所述第二区域内位置及运动方向的变化而改变所述目标部位的运动速度。
其中,根据所述目标部位在所述第一区域及所述第二区域内位置及运动方向的变化而改变所述目标部位的运动速度的步骤包括:在所述目标部位从所述第一区域的边界向所述第二区域的外边界运动时,减小所述目标部位在相应方向的运动速度;在所述目标部位从所述第二区域的外边界向所述第一区域的边界运动时,增大所述目标部位在相应方向的运动速度。
其中,所述目标部位在相应方向的运动速度跟所述目标部位与所述第二区域的外边界之间的距离正相关。
其中,所述目标部位在相应方向的运动速度跟所述目标部位与所述第二区域的外边界之间的距离呈线性的正相关。
其中,所述手术机器人包括用于输入控制所述手术臂运动的控制指令的机械式的运动输入部,基于所述新可视区域限定所述目标部位在所述新可视区域内运动的步骤包括:获取配置的位于所述新可视区域内的安全运动区域,令所述安全运动区域内的区域为第一区域,令所述安全运动区域以外、所述新可视区域以内的区域为第二区域;在所述目标部位从所述第一区域的边界向所述第二区域的外边界运动时,增大所述运动输入部在相应方向移动时的阻力;在所述目标部位从所述第二区域的外边界向所述第一区域的边界运动时,减小所述运动输入部在相应方向移动时的阻力。
其中,所述运动输入部在相应方向移动时的阻力跟所述目标部位与所述第二区域的外边界之间的距离负相关。
其中,所述运动输入部在相应方向移动时的阻力跟所述目标部位与所述第二区域的外边界之间的距离呈线性的负相关。
其中,所述新可视区域是由所述相机臂的视场角及景深所确定的平面区域或立体空间。
其中,所述图像末端器械的相机参数可调,基于所述新可视区域限定所述目标部位在所述新可视区域内运动的步骤之前,包括:获取配置的至少部分位于所述新可视区域外的扩大运动区域;基于所述新可视区域和所述扩大运动区域调节所述相机参数而生成所述新可视区域以覆盖所述可视区域及所述扩大运动区域,所述相机参数包括焦距及光圈,所述焦距与视场角相关,所述光圈与景深相关。
其中,所述图像末端器械的相机参数可调,获取配置的所述手术臂当前位于所述新可视区域内的目标部位的步骤包括:判断所述目标部位是否位于所述新可视区域内;如果所述目标部位不在所述新可视区域,基于各目标部位的位置调节所述相机参数生成新可视区域以覆盖所述最大运动区域,所述相机参数包括焦距及/或光圈,所述焦距与视场角相关,所述光圈与景深相关。
其中,调节所述相机参数生成新可视区域以覆盖各所述目标部位的步骤包括:获取所述手术臂的运动学模型及所述手术臂中各关节的关节变量;结合所述运动学模型及所述关节变量确定所述目标部位在参考坐标系的位置;根据各所述目标部位的位置构建最大运动区域;基于所述最大运动区域调节所述相机参数以生成所述新可视区域以覆盖各所述目标部位。
其中,所述第二特征部位可选自所述手术臂的关节及/或末端器械。
其中,所述第二特征部位是所述关节及/或所述末端器械上的一个点、所述关节及/或所述末端器械上的一个区域、及/或所述关节及/或所述末端器械的整体。
另一方面,本发明提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被配置为由处理器加载并执行实现如上述任一项实施例所述的控制方法的步骤。
另一方面,本发明提供了一种手术机器人的控制装置,包括:存储器,用于存储计算机程序;及处理器,用于加载并执行所述计算机程序;其中,所述计算机程序被配置为由所述处理器加载并执行实现如上述任一项实施例所述的控制方法的步骤。
另一方面,本发明提供了一种手术机器人,包括:操作臂,所述操作臂包括相机臂及手术臂;以及控制器,所述控制器与所述操作臂耦接,并被配置成执行如上述任一项实施例所述的控制方法的步骤。
本发明的手术机器人及其控制方法、控制装置,具有如下有益效果:
通过调节图像末端器械获得其在参考坐标系的新可视区域以使未落入调节前的图像末端器械在参考坐标系的当前可视区域的手术臂的跟随部位落入新可视区域内,能够确保手术臂的跟随部位始终处于医生直观的掌控下,进而可以保证手术的安全性及可靠性。
附图说明
图1为本发明手术机器人一实施例的结构示意图;
图2为图1所示手术机器人一实施例的局部示意图;
图3为图1所示手术机器人的控制方法一实施例的流程图;
图4为图1所示手术机器人中操作臂与动力部的结构示意图;
图5为图1所示手术机器人一手术状态下的局部示意图;
图6为手术机器人的控制方法一实施例的流程图;
图7为手术机器人中手术臂一实施例的状态的示意图;
图8~图10为手术机器人的控制方法一实施例的流程图;
图11~图13分别为关联于图7所示手术臂的状态下手术机器人的配置界面的示意图;
图14~图18为手术机器人的控制方法一实施例的流程图;
图19为手术臂的目标部位在不同区域内运动的示意图;
图20~图22为手术机器人的控制方法一实施例的流程图;
图23为相机臂在当前相机参数下的可见部位及相机参数调整后的可见区域的示意图;
图24为手术机器人的控制方法一实施例的流程图;
图25为手术机器人的控制方法另一实施例的流程图;
图26为手术机器人的控制方法另一实施例的流程图;
图27为手术机器人的控制方法另一实施例的流程图;
图28为图1所示手术机器人一手术状态下的局部示意图;
图29为图1所示手术机器人一手术状态下的局部示意图;
图30为手术机器人的控制方法另一实施例的流程图;
图31为图1所示手术机器人一手术状态下的局部示意图;
图32为本发明手术机器人另一实施例的结构示意图;
图33为图32所示手术机器人一手术状态下的局部示意图;
图34为本发明一实施例的手术机器人的控制装置的结构示意图。
具体实施方式
为了便于理解本发明,下面将参照相关附图对本发明进行更全面的描述。附图中给出了本发明的较佳实施方式。但是,本发明可以以许多不同的形式来实现,并不限于本发明所描述的实施方式。相反地,提供这些实施方式的目的是使对本发明的公开内容理解的更加透彻全面。
需要说明的是,当元件被称为“设置于”另一个元件,它可以直接在另一个元件上或者也可以存在居中的元件。当一个元件被认为是“连接”另一个元件,它可以是直接连接到另一个元件或者可能同时存在居中元件。当一个元件被认为是“耦接”另一个元件,它可以是直接耦接到另一个元件或者可能同时存在居中元件。本发明所使用的术语“垂直的”、“水平的”、“左”、“右”以及类似的表述只是为了说明的目的,并不表示是唯一的实施方式。本发明所使用的术语“远端”、“近端”作为方位词,该方位词为介入医疗器械领域惯用术语,其中“远端”表示手术过程中远离操作者的一端,“近端”表示手术过程中靠近操作者的一端。本发明所使用的术语“第一/第二”等表示一个部件以及一类具有共同特性的两个以上的部件。
除非另有定义,本发明所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本发明中所使用的术语只是为了描述具体的实施方式的目的,不是旨在于限制本发明。本发明所使用的术语“及/或”包括一个或多个相关的所列项目的任意的和所有的组合。本发明中所使用的术语“各”包括一个或两个以上。
如图1至图2所示,其分别为本发明手术机器人一实施例的结构示意图,及其局部示意图。
手术机器人包括主操作台2及由主操作台2控制的从操作设备3。主操作台2具有运动输入设备21及显示器22,医生通过操作运动输入设备21向从操作设备3发送控制命令,以令从操作设备3根据医生操作运动输入设备21的控制命令执行相应操作,并通过显示器22观察手术区域。其中,从操作设备3具有臂体机构,臂体机构具有机械臂30及可拆卸地装设于机械臂30远端的操作臂31。机械臂30包括依次连接的基座及连接组件,连接组件具有多个关节组件。操作臂31包括依次连接的连杆32、连接组件33及末端器械34,其中,连接组件33具有多个关节组件,通过调节操作臂31的关节组件调节末端器械34的姿态;末端器械34具有图像末端器械34A及操作末端器械34B。图像末端器械34A用于采集视野内的图像,显示器22用于显示该图像。操作末端器械34B用于执行手术操作如剪切、缝合。本文令具有图像末端器械34A的操作臂为相机臂31A,并令具有操作末端器械34B的操作臂为手术臂31B。
图1展示的手术机器人为单孔手术机器人,各操作臂31通过装设于机械臂30远端的同一个穿刺器4插入至患者体内。在单孔手术机器人中,医生一般仅对操作臂31进行控制以完成基本手术操作。此时,单孔手术机器人的操作臂31应当同时具有位置自由度(即定位自由度)和姿态自由度(即定向自由度),以实现在一定范围内位姿的变化,例如操作臂31具有水平移动自由度x、竖直移动自由度y,自转自由度α、俯仰自由度β及偏航自由度γ,操作臂31还可以在机械臂30远端关节即动力机构301的驱动下实现前后移动自由度z(即进给自由度),此外,一些实施例中,还可以为操作臂31设置冗余自由度以实现更多功能的可能性,例如,在上述可实现6自由度的前提下,额外再设置一个、两个甚至更多个自由度。例如,动力机构301具有导轨和滑动设置于导轨上的动力部,操作臂31可拆卸的装设于动力部上,一方面,动力部在导轨上的滑动提供操作臂31前后移动自由度z,另一方面,动力部为操作臂31的关节提供动力实现其余5个自由度(即[x,y,α,β,γ])。
手术机器人还包括控制器。控制器可以集成于主操作台2,也可以集成于从操作设备3。当然,控制器也可以独立于主操作台2和从操作设备3,其例如可部署在本地,又例如控制器可以部署在云端。其中,控制器可以由一个以上的处理器构成。
手术机器人还包括输入部。输入部可以集成于主操作台2。输入部可以也可以集成于从操作设备3。当然,输入部也可以独立于主操作台2和从操作设备3。该输入部例如可以是鼠标、键盘、语音输入装置、触摸屏。一实施例中,采用触摸屏作为输入部,触摸屏例如可以设置于主操作台2的扶手上。
操作臂31还包括感应关节的关节变量的传感器。这些传感器包括感应关节组件转动运动的角度传感器及感应关节组件线性运动的位移传感器,具体可根据关节的类型来配置适应的传感器。
控制器与这些传感器耦接,并与输入部及显示器22耦接。
一实施例中,提供一种手术机器人的控制方法,其第一发明目的是将配置的手术臂的目标部位限定在相机臂的图像末端器械的可视区域内运动。该控制方法可以由控制器执行。如图3所示,该控制方法包括如下步骤:
步骤S1,获取相机臂的可视区域。
相机臂31A的可视区域由相机臂31A的图像末端器械34A确定。一实施例中,可视区域的确定步骤包括:
实时获取相机臂当前被配置的相机参数,进而根据相机参数获得该可视区域。
相机参数通常包括视场角及景深。视场角关联于焦距,景深关联于光圈。其中,焦距越小,视场角越大,可视距离越近;焦距越大,视场角越小,可视距离越远。一实施例中,根据相机参数获得可视区域具体即为基于视场角和景深获得可视区域。例如,利用三角函数公式并结合视场角及景深即可计算出该可视区域。可视区域可以通过实时计算的方式获得,也可以根据视场角及景深直接从预先设定好的数据库如对照表中调取获得。
事实上,根据获取的可视区域,可以获得一个立体空间,也可以是该立体空间的一个平面区域,例如以f(x,y,z)代表该立体空间的情况下,可以用f(x,y)代表该立体空间中相应景深z所对应的平面区域。其中,通过坐标转换,可以将f(x,y,z)转换为参考坐标系下的f’(x,y,z),还可以将f(x,y)转换为参考坐标系下的f’(x,y),进而获得可视区域在参考坐标系的位置范围。
步骤S2,获取配置的手术臂当前位于可视区域内的目标部位。
其中,需要被限制在可视区域内运动的目标部位通常在初始状态下,即在当前时刻应当位于可视区域内。
在该步骤S2中,目标部位可以是默认的。示例性的,目标部位默认为手术臂31B的末端器械34B,或者,目标部位默认为手术臂31B中连接末端器械34B的远端的关节,因为通常医生更加关注手术臂31B远端的部位是否处于可视状态下。默认的目标部位可以定义在系统文件中以供获取进而由手术机器人的系统自主完成配置。
在该步骤S2中,目标部位还可以是由医生个性化的进行配置的,手术臂31B可供被配置成目标部位的部位通常具有一个以上,这些部位可以预先定义在数据库中,不同手术臂通常可具有不同的该部位。
示例性的,如图4所示,操作臂31的驱动盒310抵接于动力机构301的动力部302的抵接面装设有存储单元311,相应在动力部302抵接于驱动盒310的抵接面装设有与存储单元311配套的读取单元303,该读取单元303与控制器耦接,操作臂31装设于动力部302时,读取单元303与耦接的存储单元311通讯,读取单元303从存储单元311中读取相关信息。该存储单元311例如是存储器、电子标签。存储单元例如存储有操作臂的类型、操作臂可被配置成目标部位的部位、操作臂的运动学模型。例如,相机臂31A的存储单元311中可以存储有相机参数。
步骤S3,基于可视区域限定目标部位在可视区域内运动。
如图5所示,通过上述步骤S1~步骤S3,以保证手术臂中目标部位在可视区域下被控制而运动,尤其是该目标部位包含末端器械时,可有效防止因为末端器械在可视区域外不期望的运动对患者造成意外伤害。
一实施例中,如图6所示,该步骤S2,即获取配置的手术臂当前位于可视区域内的目标部位的步骤包括:
步骤S21,获取手术臂可被配置成目标部位的部位。
例如,该部位可直接从数据库中读取而获得。
步骤S22,判断部位当前是否位于可视区域内。
步骤S23,令判断出当前位于可视区域内的部位为第一部位,基于第一部位获取配置的目标部位。
在步骤S23中,也即目标部位来源于位于可视区域内的第一部位。
如图7所示,其简单示意了一手术臂与可视区域的位置关系。其中,末端器械E、关节J1、关节J2、关节J3及关节J4当前位于可视区域以内,而关节J5及关节J6位于可视区域以外。即可以令部位E及J1~J4为第一部位以供可选择地配置成目标部位。
一实施例中,上述步骤S21,即获取手术臂可被配置成目标部位的部位可通过如下两种实施方式来实现。
<实施方式1>
如图8所示,上述步骤S21包括:
步骤S221,获取相机臂采集的可视区域的操作图像。
步骤S222,识别部位是否位于操作图像内。
其中,在部位位于操作图像内时,进入步骤S223;否则,进入步骤S224。为便于进行图像识别,可以为在手术臂上对应的部位设置易于识别的特征点,以提高识别速度及准确率。该步骤S222可以结合神经网络如卷积神经网络的方式来进行图像识别。在步骤S222中,可以根据预设策略来识别部位是否位于操作图像内。示例性的,可以通过识别部位上某一个具体的点是否位于操作图像内进而确定该部位是否位于操作图像内。示例性的,也可以通过识别部位上某一个具体的区域是否位于操作图像内进而确定该部位是否位于操作图像内。示例性的,还可以通过识别部位的整体轮廓是否位于操作图像内进而确定该部位是否位于操作图像内。这样的预设策略可以预先设定好,或者在使用过程中根据医生输入的操作指令进行选择。
步骤S223,判断出部位位于可视区域内。
步骤S224,判断出部位没有位于可视区域内。
<实施方式2>
如图9所示,上述步骤S21包括:
步骤S221’,获取手术臂的运动学模型及手术臂中各关节的关节变量。
其中,关节变量指关节中转动关节的关节量及/或移动关节的关节偏移量。
一方面,手术臂的运动学模型可以直接从操作臂的存储单元中进行调用。另一方面,其也可以根据操作臂的连杆参数获得。
步骤S222’,结合运动学模型及关节变量确定部位在参考坐标系的位置。
其中,参考坐标系可以任意设定,例如,可以定义参考坐标系为机械臂的基坐标系,又例如,可以定义参考坐标系为机械臂的工具坐标系。此外,即使定义参考坐标系为手术机器人以外的某个坐标系也是可行的。
其中,所确定的部位在参考坐标系的位置所指的可以是该部位上的一个点、一个区域或者整体(轮廓)的位置。
对于所确定的部位在参考坐标系的位置所指的是该部位上的一个区域或者整体(轮廓)的情况,示例性的,可以离散获得该区域或该整体轮廓上的各个点,进而再计算获得的这些点的位置。
步骤S223’,转换可视区域成在参考坐标系的位置范围。
步骤S224’,判断部位的位置是否位于位置范围内。
其中,在部位的位置位于位置范围内时,进入步骤S225’;否则,进入步骤S226’。在步骤S224’中,同样可以根据预设策略来判断部位的位置是否位于位置范围内。示例性的,可以通过判断部位上某一个具体的点是否位于位置范围内进而确定该部位是否位于位置范围内。示例性的,可以通过判断部位上某一个具体的区域(多个点构成的点集)是否位于位置范围内进而确定该部位是否位于位置范围内。示例性的,还可以通过判断部位的整体轮廓(轮廓上的点构成的点集)是否位于位置范围内进而确定该部位是否位于位置范围内。这样的预设策略可以预先设定好,或者在使用过程中根据医生输入的操作指令进行选择。
步骤S225’,判断出部位位于可视区域内。
步骤S226’,判断出部位没有位于可视区域内。
上述实施方式1和实施方式2均可以准确、快速的判断出部位是否位于可视区域。
一实施例中,如图10所示,上述步骤S23,即基于第一部位获取配置的目标部位的步骤包括:
步骤S231,根据第一部位生成含有关联于可供配置成目标部位的第一特征部位的控件的配置界面。
配置界面中的控件例如可以是文本控件、选项控件如下拉列表控件、按钮控件等多种形式。示例性的,对应于图7所示的状态,该配置界面可以如图11所示,配置界面中的控件为按钮控件,在该配置界面中,生成了部位E、J1~J4的按钮控件,其中,图11中还示意了部位E和J1被配置成了目标部位。
进一步地,在该步骤S231中,还可以这样实现:首先,获取手术臂的模型图像;然后,生成含有模型图像的配置界面,并在模型图像上对应第一部位的位置生成含有关联于可供配置成目标部位的第一特征部位的控件。例如,这些控件是图标控件,该图标例如可以是光点、光圈等,此处不特别限定。如图12和图13所示,图12仅示出了对应于图7所示的状态下手术臂当前可以被配置成目标部位的第一特征部位E、J1~J4。例如,可以用图标“○”代表可被配置成目标部位的第一特征部位。图13也示出了对应于图7所示的状态下手术臂当前可以被配置成目标部位的第一特征部位E、J1~J4,与图12所不同的,图13还示出了手术臂其它不可被配置成目标部位的第一特征部位J5和J6。
其中,手术臂的模型图像通常可以预先存储于数据库中以供使用时直接调用,该数据库例如也可以存储于手术臂的存储单元中。该模型图像可以是投影图像,也可以是计算机模型图像,该模型图像至少需要能够反映出可被配置成目标部位的第一特征部位以方便提供给医生配置。该模型图像可以与手术臂当前运动状态关联;该模型图像也可以与手术臂的初始运动状态(如零位时,如摆成直线)关联,如图12和图13所示。
一实施例中,上述步骤S21,即获取手术臂可被配置成目标部位的第一特征部位的步骤可以这样实现:根据配置界面的控件对期望配置成目标部位的第一特征部位一一进行配置。如在配置界面含有模型图像且模型图像上具有对应第一部位的控件时,可以例如一一点击这些控件以将关联的第一部位配置成目标部位。
在配置界面含有模型图像且模型图像反映了可供配置成目标部位的第一特征部位(这里的第一特征部位可选地仅包括上述第一部位、或包括手术臂的所有部位(因为在某些场合下如可视区域可覆盖全部部位时,它们都可能被配置成目标部位))时,可以获取医生通过输入部绘制的至少覆盖模型图像中部分部位的封闭的图形,进而将该图形内含有的(即围合的)所有第一部位全部作为目标部位。这样的设计能够提高目标部位的配置效率。可继续参阅图12和图13,覆盖部位E、J1和J2的大圆圈代表了医生绘制的封闭的图形,系统根据解析该图形与部位之间的位置关系,进而将部位E、J1和J2配置成了目标部位。
步骤S232,获取通过配置界面的控件所配置的目标部位。
在该步骤S232中,手术臂可被配置成目标部位的第一特征部位可以包括关节及/或末端器械。如果这些关节及/或末端器械均位于可视区域,它们均可以被视为第一部位以供配置。
一实施例中,参阅图14,上述步骤S3,即基于可视区域限定目标部位在可视区域内运动的步骤包括:
步骤S31,判断目标部位是否达到可视区域的边界。
在该步骤S31中,判断出目标部位达到可视区域的边界时,进入步骤S32;否则,继续进行步骤S31。
步骤S32,判断目标部位下一时刻的运动方向是否朝向可视区域外。
在该步骤S32中,判断出目标部位下一时刻的运动方向朝向可视区域外时,进入步骤S33;否则,继续进行步骤S31。
步骤S33,至少禁止目标部位朝向可视区域外运动。
当然,若步骤S31中目标部位未达到可视区域的边界、及/或步骤S32中目标部位下一时刻的运动方向未朝向可视区域,则不做特别处理,即仍允许手术臂正常运动。
在上述步骤S33中,有以下两种策略来实现至少禁止目标部位朝向可视区域外运动。其一为仅禁止目标部位朝向可视区域外运动;其二为禁止整个手术臂运动。执行何种策略可以预先默认设定,也可以在手术机器人每次开机时根据医生输入的控制指令进行自定义的初始化设置。示例性的,可以将目标部位仅配置成远端的关节或者末端器械。
一实施例中,步骤S31,即判断目标部位是否达到可视区域的边界例如可以通过如下两种方式实现。
<实施方式3>
如图15所示,该步骤S31可以包括:
步骤S311,获取相机臂采集的可视区域的操作图像。
步骤S312,识别目标部位是否达到操作图像的边缘。
其中,在步骤S312中,如果目标部位达到操作图像的边缘时,进入步骤S313。示例性的,可以通过识别目标部位上某一个具体的点是否位于操作图像内进而确定该目标部位是否位于操作图像内。示例性的,也可以通过识别目标部位上某一个具体的区域是否位于操作图像内进而确定该目标部位是否位于操作图像内。示例性的,还可以通过识别目标部位的整体轮廓是否位于操作图像内进而确定该目标部位是否位于操作图像内。
步骤S313,判断出目标部位达到可视区域的边界。
步骤S314,判断出目标部位没有达到可视区域的边界。
<实施方式4>
如图16所示,该步骤S31可以包括:
步骤S311’,获取手术臂的运动学模型及手术臂中各关节的关节变量。
步骤S312’,结合运动学模型及关节变量确定目标部位在参考坐标系的位置。
步骤S313’,转换可视区域成在参考坐标系的位置范围。
步骤S314’,判断目标部位的位置是否达到位置范围的边界。
其中,在步骤S314’中,如果判断出目标部位达到位置范围的边界时,进入步骤S315’;否则进入步骤S316’。示例性的,可以通过判断目标部位上某一个具体的区域(多个点构成的点集)是否位于位置范围内进而确定该目标部位是否位于位置范围内。示例性的,还可以通过判断目标部位的整体轮廓(轮廓上的点构成的点集)是否位于位置范围内进而确定该目标部位是否位于位置范围内。
步骤S315’,判断出目标部位达到可视区域的边界。
步骤S316’,判断出目标部位没有达到可视区域的边界。
一实施例中,参阅图17,步骤S32,即判断目标部位下一时刻的运动方向是否朝向可视区域外包括如下步骤:
步骤S321,获取目标部位在达到可视区域的边界的当前时刻下的当前位置。
在该步骤S321中,例如可以通过以下步骤获取当前位置。该步骤包括:首先,获取手术臂的运动学模型及当前时刻下手术臂中各关节的关节变量;然后,根据运动学模型及各关节变量计算目标部位在当前时刻下的当前位置。
步骤S322,获取目标部位在下一时刻的目标位置。
手术机器人通常包括运动输入部,该运动输入部用于输入控制操作臂包括如相机臂及手术臂运动的控制指令。在该步骤S322中,例如可以通过以下步骤获取目标位置。该步骤包括:获取运动输入部输入的目标位姿信息;根据目标位姿信息计算手术臂中各关节的关节变量;获取手术臂的运动学模型;结合运动学模型及各关节变量确定目标部位在下一时刻的目标位置。
步骤S323,根据目标位置和当前位置确定目标部位下一时刻的运动方向是否朝向可视区域外。
在该步骤S323中,例如,目标位置如果位于可视区域外,那么目标部位的运动方向则是朝向可视区域外的。又例如,目标位置位于可视区域内,且相对于当前位置而言更远离可视区域的边界,那么目标部位的运动方向则并不是朝向可视区域外的。
一实施例中,参阅图18,上述步骤S3,即基于可视区域限定目标部位在可视区域内运动的步骤还可以包括:
步骤S34,获取配置的位于可视区域内的安全运动区域。
在该步骤S34中,为描述方便,可以令安全运动区域内的区域为第一区域,令安全运动区域以外、可视区域以内的区域为第二区域。
步骤S35,根据目标部位在第一区域及第二区域内位置及运动方向的变化而改变目标部位的运动速度。
在该步骤S35中,即根据目标部位在第一区域及第二区域内位置及运动方向的变化而改变目标部位的运动速度的步骤具体可以这样来实现:
例如,在目标部位从第一区域的边界向第二区域的外边界运动时,减小目标部位在相应方向的运动速度;而在目标部位从第二区域的外边界向第一区域的边界运动时,增大目标部位在相应方向的运动速度。其中,第二区域包括内边界和外边界,第二区域的内边界与第一区域的边界相同,均指安全运动区域的边界,第二区域的外边界指可视区域的边界。如图19所示,A点位于第一区域内,B点位于第二区域内,C点位于第二区域外,目标部位例如末端器械从A点经过B点向C点运动的整个运动过程中,分为三个阶段,包括从A点到第一区域的边界的第一阶段,从第一区域的边界到第二区域的外边界的第二阶段,及从第二区域的外边界到C点的第三阶段,其中,第一阶段的运动速度为v1,第二阶段的运动速度为v2,第三阶段的运动速度v3,v1>v2>v3,其中,v3=0,也即实质上整个运动过程仅包括第一阶段和第二阶段两个阶段。继续参阅图19,从C点经过B点向A点运动的整个运动过程实质上也仅包括两个阶段,即从第二区域的外边界到第一区域的边界的第一阶段,及第一区域的边界到A点的第二阶段,该第一阶段的运动速度为v1,第二阶段的运动速度为v2,此时,v1<v2。
一实施例中,该目标部位在相应方向的运动速度跟目标部位与第二区域的外边界之间的距离正相关,也即,目标部位与第二区域的外边界之间的距离较小时,运动速度较小;目标部位与第二区域的外边界之间的距离较大时,运动速度也较大。通常,当目标部位到达可视区域的边界且运动方向朝向可视区域外时,其运动速度基本等于0;而在目标部位到达安全区域的边界且运动方向远离可视区域时,其运动速度恢复到基本正常。
较佳的,该目标部位在相应方向的运动速度跟目标部位与第二区域的外边界之间的距离呈线性的正相关。较佳的,该目标部位在相应方向的运动速度跟目标部位与第二区域的外边界之间的距离呈指数级的正相关。这样的设计均能使得医生能够显著的感觉到目标部位正在从第二区域的内边界向外边界的边界运动。
其它实施例中,目标部位可以在第一区域内以第一恒定速度运动,并在第二区域以第二恒定速度运动。通常,第一恒定速度大于第二恒定速度。
一些实施例中,目标部位在不同区域及/或不同运动方向的运动速度的变化通常是基于手术臂整体运动速度的变化而发生的改变。例如,通过改变手术臂运动速度的比例值而改变目标部位的运动速度。该比例值跟目标部位所处区域以及运动方向相关。
一些实施例中,目标部位在不同区域及/或不同运动方向的运动速度的变化也可以不基于手术臂整体运动速度的变化而发生的改变。例如,在手术臂的自由度相较于期待实现的任务自由度存在足够冗余时,可以解算获得不同区域及/或不同运动方向的目标部位获得不同的运动速度。
一实施例中,运动输入部是机械式的运动输入部,其具有多个关节组件、与控制器耦接用于感应各关节组件状态的传感器及与控制器耦接用于驱动各关节组件运动的驱动电机。在该结构基础上,如图20所示,上述步骤S3,即基于可视区域限定目标部位在可视区域内运动的步骤还可以包括:
步骤S34’,获取配置的位于可视区域内的安全运动区域。
为描述方便,在步骤S34’中,同样基于可视区域和安全运动区域同样划分为前文所描述的第一区域和第二区域。
步骤S35’,根据目标部位在第一区域及第二区域内位置及运动方向的变化而改变运动输入部的阻力。
其中,步骤S35’主要根据阻力使关联方向上的驱动电机产生反向力矩。在该步骤S35’中,即根据目标部位在第一区域及第二区域内位置及运动方向的变化而改变运动输入部的阻力的步骤具体可以这样来实现:
例如,在目标部位从第一区域的边界向第二区域的外边界运动时,增大运动输入部在相应方向移动时的阻力;而在目标部位从第二区域的外边界向第一区域的边界运动时,减小运动输入部在相应方向移动时的阻力。
一实施例中,运动输入部在相应方向移动时的阻力跟目标部位与第二区域的外边界之间的距离负相关。通常,当目标部位到达可视区域的边界且运动方向朝向可视区域外时,其运动速度基本等于0,此时,医生操作运动输入部的阻力将极大,在较高的阻力下,运动输入部几乎不能被医生移动,可以使目标部位运动速度趋近于0;而在目标部位到达安全区域的边界且运动方向远离可视区域时,其运动速度恢复到基本正常。
较佳的,运动输入部在相应方向移动时的阻力跟目标部位与第二区域的外边界之间的距离呈线性的负相关。较佳的,运动输入部在相应方向移动时的阻力跟目标部位与第二区域的外边界之间的距离呈指数级的负相关。这样的设计同样能使得医生能够显著的感觉到目标部位正在从第二区域的内边界向外边界的边界运动,并且,可以实现良好的力反馈。
其它实施例中,目标部位在第一区域运动时,运动输入部在相应方向移动时的阻力为第一恒定阻力,而目标部位在第二区域运动时,运动输入部在相应方向移动时的阻力为第二恒定阻力。通常,第二恒定阻力大于第一恒定阻力。
一实施例中,相机臂的图像末端器械,即相机具有可调节的相机参数,如焦距可调节及/或光圈可调节,焦距及光圈为相机的内在参数。基于该硬件基础,如图21所示,上述步骤S3,即基于可视区域限定目标部位在可视区域内运动的步骤之前,还可以包括:
步骤S301,获取配置的位于可视区域外的扩大运动区域。
该扩大运动区域至少部分位于可视区域外。例如,可视区域完整地位于扩大运动区域内;又例如,可视区域与扩大运动区域相互独立,即没有交集;又例如,部分可视区域位于扩大运动区域内。其中,可视区域指相机的参数被重新调节之前可视的区域,新可视区域指相机的参数被重新调节之后可视的区域。
步骤S302,基于可视区域和扩大运动区域调节相机的参数生成新可视区域以覆盖可视区域及扩大运动区域。
其中,相机的参数包括焦距及/或光圈,焦距与视场角相关,光圈与景深相关。上述步骤S3具体则为:基于新可视区域限定目标部位在新可视区域内运动。通过该步骤S301和步骤S302,可以扩大手术臂中目标部位的运动范围。
一些实施例中,可以基于可视区域同时配置安全运动区域和扩大运动区域,以便于医生可以操作手术臂运动于较大且安全的运动范围。
上述的安全运动区域及/或扩大运动区域可以是系统默认设置的。例如,该安全运动区域是系统在当前可视区域的基础上设置缩放系数而自动获得;该扩大运动区域是系统在当前可视区域的基础上设置放大系数而自动获得。这些缩放系数及/或放大系数可以预先存储于数据库中供调用,该数据库通常存储于相机臂的存储单元中。
上述的安全运动区域及/或扩大运动区域还可以是医生自定义设置的。例如,在显示器中生成相应景深zi对应的可视区域的平面范围f(Xi,Yi)的基础边界图像,获取医生通过输入部绘制的位于该基础边界图像内的安全运动区域对应的安全边界图像,或至少部分覆盖该基础边界图像的扩大运动区域对应的扩大边界图像。这些边界图像通常是封闭图像。进而根据安全边界图像及/或扩大边界图像与基础边界图像之间的如位置等关系计算获得相应的安全运动区域及/或扩大运动区域。其中,医生绘制的边界图像通常是规则的图像,如圆形图像、矩形图像、椭圆图像。为便于计算获得安全运动区域及/或扩大运动区域,即使该边界图像是不规则的图像,也可以通过处理将绘制的该边界图像转换成最接近的规则的图像。
一实施例中,如图22所示,上述步骤S2,即获取配置的手术臂当前位于可视区域内的目标部位的步骤可以包括:
步骤S24,获取基于手术臂可被配置成目标部位的部位配置的目标部位。
步骤S25,判断目标部位是否位于可视区域内,如果当前被配置的目标部位不在可视区域时,基于各目标部位的位置调节相机的参数生成新可视区域以覆盖各目标部位。
其中,被调节的参数指的是相机的内在参数如焦距及/或光圈,而不包括相机的外在参数如位置及姿态。如果相机当前的参数已然达到可调极限或者即使到达可调极限所获得的可视区域仍然不能覆盖各目标部位时,可以在操作手术臂执行手术前提醒医生调节手术臂以使各目标部位移动到可视区域内、或者调节相机臂以使可视区域到可覆盖各目标部位的程度。
通过上述步骤S24~步骤S25,能够根据目标部位的选择生成相应合适的可视区域,以便于医生后续的手术操作。一实施例中,如图23所示,虚线圆圈表示调节前的可视区域,调节前的可视区域内只能看到部位E、J1~J4,实际上医生需要将部位E、J1~J5均配置成目标部位,此时,通过根据这些目标部位的位置可以对相机参数进行自适应的调节,以使得原本不存在于调整前的可视区域的部位位于调节后的可视区域内以供配置并执行如步骤S1~步骤S3的步骤。
一实施例中,如图24所示,上述步骤S25,即基于各目标部位的位置调节相机的参数生成新可视区域以覆盖各目标部位具体可以通过如下步骤实现:
步骤S261,获取手术臂的运动学模型及手术臂中各关节的关节变量。
步骤S262,结合运动学模型及关节变量确定目标部位在参考坐标系的位置。
步骤S263,根据各目标部位的位置构建最大运动区域。
步骤S264,基于最大运动区域调节相机的参数生成新可视区域以覆盖该最大运动区域。
在目标部位被配置成具有多个的情况下:一些实施例中,可以控制全部的目标部位均基于可视区域而被限定在可视区域内运动;一些实施例中,可以根据在可视区域内的目标部位与全部目标部位之间的比例值控制手术臂的运动,例如,在比例值达到阈值(例如50%)时,可以自由地控制对手术臂的运动进行控制而不做过多限制,而在比例值低于阈值时,可以禁止手术臂的运动。
一些实施例中,还提供了另一种手术机器人的控制方法,其第二发明目的是调节相机臂的图像末端器械使经配置的手术臂的跟随部位落入图像末端器械的可视区域内。该控制方法同样可以由控制器执行。并且,该第二发明目的控制方法可以独立于第一发明目的控制方法使用;此外,该第二发明目的控制方法也可以配合第一发明目的控制方法使用,例如,该第二发明目的控制方法与第一发明目的控制方法可以穿插使用,又例如,其中之一发明目的控制方法可以在另一发明目的控制方法实施之前或者实施之后使用。具体而言,请参阅图25,该控制方法包括:
步骤S5,获取基于部位配置的跟随部位。
其中,手术臂具有一个以上可被配置成跟随部位的部位。可被配置成跟随部位的部位可以与前述可被配置成目标部位的部位完全相同、部分相同或者完全不同。例如,可被配置成跟随部位的部位与前述可被配置成目标部位的部位完全相同。一实施例中,部位是手术臂中的操作末端器械及/或关节,因而跟随部位亦可以被配置成操作末端器械及/或关节,并且,跟随部位可以被配置成一个及以上。例如,可以将跟随部位仅配置成操作末端器械。为描述方便,可以令用于配置成跟随部位的部位为手术臂的第一特征部位,并令用于配置成目标部位的部位为手术臂的第二特征部位。
步骤S6,获取图像末端器械在参考坐标系的当前可视区域。
步骤S7,判断跟随部位是否落入当前可视区域。
在该步骤S7中,如果跟随部位未落入当前可视区域落入,进入步骤S8;否则,进入步骤S5。
步骤S8,调节图像末端器械而获得图像末端器械在参考坐标系的新可视区域以使至少部分的跟随部位落入新可视区域。
通过上述步骤S5~步骤S8,可以通过调节图像末端器械获得其在参考坐标系的新可视区域以使未落入图像末端器械在参考坐标系的当前可视区域的跟随部位落入该新可视区域。
一实施例中,如图26所示,上述步骤S8,即调节图像末端器械而获得图像末端器械在参考坐标系的新可视区域以使跟随部位落入新可视区域的步骤包括:
步骤S811,获取图像末端器械在参考坐标系的全部可视区域的并集区域。
该并集区域是调节图像末端器械内在参数(相机参数)及外在参数(位姿参数)所能够获得的所有可视区域的并集范围,反映了图像末端器械可能具有的视野所能覆盖的所有位置的集合。一实施例中,该并集区域可以通过实时计算获得。另一实施例中,该并集区域可以预先存储在相机臂的存储单元中。
步骤S812,判断跟随部位是否能够落入并集区域。
在该步骤S812中,如果跟随部位均能够落入并集区域时,进入步骤S813;而如果跟随部位部分落入并集区域时,进入步骤S814;而如果跟随部位全部不能落入并集区域时,结束流程。
步骤S813,调节图像末端器械而获得图像末端器械在参考坐标系的新可视区域以使全部跟随部位落入新可视区域。
步骤S814,根据操作指令将至少部分能够落入并集区域的跟随部位配置成第一跟随部位,进而调节图像末端器械而获得图像末端器械在参考坐标系的新可视区域以使第一跟随部位落入新可视区域。
在一些实施例中,还可以在上述步骤S812中如果跟随部位部分落入并集区域时,也可以结束流程而不对图像末端器械进行调节,具体可以根据需求进行配置。
一实施例中,该操作指令包括第一操作指令,第一操作指令关联于能够落入并集区域的全部或部分跟随部位。上述步骤S814中,即根据操作指令将至少部分能够落入并集区域的跟随部位配置成第一跟随部位具体即为:
根据第一操作指令将全部或部分能够落入并集区域的跟随部位配置成第一跟随部位。
一实施例中,手术臂包括第一优先级的手术臂及第二优先级的手术臂,各手术臂均被配置有跟随部位,通常,可以设置第一优先级高于第二优先级。其中,操作指令包括第二操作指令,第二操作指令关联于第一优先级的手术臂的、且全部或部分能够落入并集区域的跟随部位。进而,上述根据操作指令将至少部分能够落入并集区域的跟随部位配置成第一跟随部位包括:
根据第二操作指令将第一优先级的手术臂上全部或部分能够落入并集区域的跟随部位配置成第一跟随部位。
例如,第一优先级的手术臂指处于运动状态的手术臂,第二优先级的手术臂指处于静止状态的手术臂。可以将手术臂处于受控状态定义成运动状态,与之相应地,可以将手术臂处于非受控状态定义成静止状态。也可以将手术臂任一部位正在运动定义成运动状态,与之相应地,可以将手术臂任一部位均静止定义成运动状态。当然,也可以将运动状态定义成包括上述两种含义,与之相应地,可以将静止状态定义成包括上述对应的两种含义。又例如,第一优先级的手术臂还可以指操作末端器械的运动速度达到预设阈值的手术臂,与之相应地,第二优先级的手术臂指操作末端器械的运动速度低于预设阈值的手术臂。
通过根据第二操作指令确定要跟随的手术臂及其跟随部位,能够使得图像末端器械更容易地对相应手术臂及其跟随部位进行跟随。进一步地,在配合第一发明目的控制方法使用时,有助于减小对相应手术臂的运动范围的限制。
一实施例中,上述步骤S7,即判断跟随部位是否落入当前可视区域的步骤同样可以通过两种实施方式来实现。
一实施方式中,该步骤S7包括:获取相机臂采集的可视区域的操作图像;通过识别跟随部位是否位于操作图像内而判断跟随部位是否落入当前可视区域。实现该实施方式的基本原理大致如第一发明目的控制方法所对应的图8所示。
另一实施方式中,该步骤S7包括:获取所述手术臂的运动学模型及所述手术臂中各关节的关节变量;结合所述运动学模型及所述关节变量确定所述跟随部位在参考坐标系的位置;转换所述当前可视区域成在参考坐标系的位置范围;判断所述跟随部位的位置是否位于所述位置范围内;在所述跟随部位位于所述位置范围内时,判断出所述跟随部位位于所述当前可视区域内。实现该实施方式的基本原理大致如第一发明目的控制方法所对应的图9所示。
一实施例中,可以通过只调节图像末端器械的相机参数而获得该新可视区域。具体而言,如图27所示,上述步骤S8,即调节图像末端器械而获得图像末端器械在参考坐标系的新可视区域以使跟随部位落入新可视区域的步骤包括:
步骤S81,获取跟随部位在参考坐标系的当前位置。
该当前位置同样可以根据手术臂的运动学模型及各关节的关节变量计算获得。
步骤S82,根据当前位置调节图像末端器械的相机参数自主变化而获得图像末端器械在参考坐标系的新可视区域以使跟随部位落入新可视区域。
其中,可自主调节的相机参数包括焦距及/或光圈。示例性的,例如可以通过减小焦距而增大视场角,进而获得扩大的新可视区域从而使跟随部位落入该新可视区域。相机参数的变化可以是逐渐调节的,也可以是一次性调节到位的。在一次性调节到位相机参数的方式中,可以根据跟随部位的当前位置搜索出或计算出适应的新相机参数,然后,控制器调节图像末端器械直接从当前相机参数变成该新相机参数。
如图28所示,在相机臂31A中图像末端器械的当前可视区域内,一手术臂只有G1、G2、G3及G4这四个跟随部位落入当前可视区域内,实际上,医生期望G1~G7均落入当前可视区域内。进而,如图29所示,可以通过调节相机臂31A中图像末端器械的相机参数以使G1~G7均落入其新可视区域内,图29相较于图28而言,保持图像末端器械位姿的同时,通过减小图像末端器械的焦距,使得其视场角从θ1变为θ2,θ1<θ2,进而扩大了可视区域使得G1~G7均可以落入新可视区域内。
借助上述步骤S81~步骤S82,可以在不改变图像末端器械位姿的情况下,通过改变图像末端器械内在的相机参数而获得适当的新可视区域。该方式适合于具有可调的相机参数的图像末端器械。
一实施例中,也可以只通过调节图像末端器械的位置及/或姿态(即位姿)而获得该新可视区域。具体而言,如图30所示,上述步骤S8,即调节图像末端器械而获得图像末端器械在参考坐标系的新可视区域以使跟随部位落入新可视区域的步骤包括:
步骤S81’,获取跟随部位在参考坐标系的当前位置。
步骤S82’,获取根据图像末端器械的有效自由度配置的任务自由度。
其中,有效自由度指图像末端器械被允许的空间自由度,任务自由度包含于空间自由度以内。
步骤S83’,根据当前位置及任务自由度调节图像末端器械自主运动获得图像末端器械在参考坐标系的新可视区域以使跟随部位落入新可视区域。
继续参阅图28,并结合图31参阅。图31相较于图28而言,保持图像末端器械的相机参数的同时,通过改变图像末端器械的位姿也可以使使G1~G7均落入其新可视区域内。
借助上述步骤S81’~步骤S83’,可以在不改变图像末端器械内在的相机参数的情况下,通过改变图像末端器械的位姿获得适当的新可视区域。该方式适合于具有或不具有可调相机参数的图像末端器械。
此外,在图像末端器械具有可调相机参数的情况时,可以结合调节图像末端器械的相机参数及位姿的方式来获得新可视区域,通过两者相结合的方式可以更容易的跟随手术臂的跟谁部位。实际使用时,可以设置优先调整对象,例如由系统文件定义或医生通过配置界面进行配置。例如,将调节图像末端器械的相机参数设置成第一优先调整对象,将调节图像末端器械的位姿设置成第二优先调整对象。又例如,将调节图像末端器械的位姿设置成第一优先调整对象,将调节图像末端器械的相机参数设置成第二优先调整对象。
通常,该图像末端器械的有效自由度通过驱动图像末端器械运动的臂体的构型确定,例如在图1所示的手术机器人中,它的有效自由度可以仅由相机臂本身的构型确定;又例如,在图32所示的手术机器人中,它的有效自由度可以由相机臂及连接相机臂的操纵器臂的整体构型确定;更有甚者,无论是在图1所示的手术机器人中,还是在图32所示的手术机器人中,它的有效自由度还可以结合相应的机械臂的整体的构型确定。通常,该图像末端器械包括位置自由度和姿态自由度。
一实施例中,任务自由度可选择自位置自由度中与景深的方向一致的自由度。上述步骤S83’,即调节图像末端器械自主运动获得图像末端器械在参考坐标系的新可视区域以使跟随部位落入新可视区域具体为:调节图像末端器械在与景深的方向一致的自由度上伸缩而获得图像末端器械在参考坐标系的新可视区域以使跟随部位落入新可视区域。
一实施例中,任务自由度选择自位置自由度中垂直于景深的方向的平面自由度,假设位置自由度包括笛卡尔坐标系中的X轴方向自由度、Y轴方向自由度及Z轴方向自由度,并定义Z轴方向自由度为与景深方向一致的自由度,则X轴方向自由度、Y轴方向自由度为垂直于景深的方向的平面自由度。上述步骤S83’,即调节图像末端器械自主运动产生新可视区域以使跟随部位落入新可视区域具体为:调节图像末端器械在平面自由度上平移而获得图像末端器械在参考坐标系的新可视区域以使跟随部位落入新可视区域。
一实施例中,任务自由度选择自姿态自由度。上述步骤S83’,即调节图像末端器械自主运动产生新可视区域以使跟随部位落入新可视区域具体为:调节图像末端器械位置不变而姿态改变产生新可视区域以使跟随部位落入新可视区域。
一实施例中,继续参阅图25,上述步骤S8,即调节图像末端器械而获得图像末端器械在参考坐标系的新可视区域以使跟随部位落入新可视区域的步骤之后,还可以包括:
步骤S9,结束对图像末端器械的调节并保持获得的新可视区域。
该步骤S9的执行有利于切换至第一发明目的控制方法,进而在固定的可视区域内对手术臂进行控制。
该步骤S9,即结束对图像末端器械的调节的步骤包括:
检测是否获取到中断指令,进而在获取到中断指令时,结束对图像末端器械的调节。从而实现了保持新可视区域的目的。
其中,该中断指令通常可以通过输入部输入。
上述实施例的手术机器人还可以是多孔手术机器人。多孔手术机器人与单孔手术机器人之间的区别主要在从操作设备上。图32示意了一种多孔手术机器人的从操作设备。该多孔手术机器人中从操作设备的机械臂具有依次连接的主臂110、调整臂120及操纵器130。调整臂120及操纵器130均为两个以上,例如四个,主臂110远端具有定向平台,调整臂120近端均连接于定向平台,操纵器130近端连接于调整臂120远端。操纵器130用于可拆卸地连接操作臂150,操纵器130具有多个关节组件。在多孔手术机器人中,不同操作臂150通过不同的穿刺器插入患者体内,多孔手术机器人的操作臂150相较于单孔手术机器人的操作臂31而言,一般具有较少的自由度,通常,操作臂150仅具有姿态自由度(即定向自由度),当然其姿态的变化一般也对位置产生影响,但因为影响较小通常可以被忽略。操作臂150的位置常由操纵器130辅助实现,由于操纵器130与操作臂150联动实现位姿变化,可以将这两者认为是操纵器组件,与单孔手术机器人中操作臂31相当。如图33所示,操作臂150同样包括具有图像末端器械的相机臂150a及具有操作末端器械的手术臂150b。在图30中,靠近相机臂150a的手术臂150b没有任何部位落入相机臂150a中图像末端器械的可视区域内,远离相机臂150a的手术臂150b的操作末端器械落入了相机臂150a的图像末端器械的可视区域内。根据本发明第二发明目的控制方法可以通过调节相机臂150a的图像末端器械使得靠近相机臂150a的手术臂150b中的至少部分部位如操作末端器械落入图像末端器械调整之后的可视区域内。进一步地,在使得靠近相机臂150a的手术臂150b中的至少部分部位落入图像末端器械调整之后的可视区域内以后,还可以根据本发明的第一发明目的控制方法对该手术臂的至少部分部位如操作末端器械进行控制以限定其落入调整之后的可视区域的部位在该可视区域内运动。
上述实施例还可以适用于其它类型的多孔手术机器人中,例如,其它类型的多孔机器人包括:多个操作臂对应相同数量的机械臂,每个操作臂安装于其中一个机械臂,且机械臂之间相互独立。
一实施例中,提供一种计算机可读存储介质,该计算机可读存储介质存储有计算机程序,计算机程序被配置为由处理器加载并执行实现如下步骤:获取相机臂的可视区域;获取配置的手术臂当前位于可视区域内的目标部位;基于可视区域限定目标部位在可视区域内运动。
一实施例中,提供一种手术机器人的控制装置。如图34所示,该控制装置可以包括:处理器(processor)501、通信接口(Communications Interface)502、存储器(memory)503、以及通信总线504。
处理器501、通信接口502、以及存储器503通过通信总线504完成相互间的通信。
通信接口502,用于与其它设备比如各类传感器或电机或电磁阀或其它客户端或服务器等的网元通信。
处理器501,用于执行程序505,具体可以执行上述方法实施例中的相关步骤。
具体地,程序505可以包括程序代码,该程序代码包括计算机操作指令。
处理器505可能是中央处理器CPU,或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit),或者是被配置成实施本发明实施例的一个或多个集成电路,或者是图形处理器GPU(Graphics Processing Unit)。控制装置包括的一个或多个处理器,可以是同一类型的处理器,如一个或多个CPU,或者,一个或多个GPU;也可以是不同类型的处理器,如一个或多个CPU以及一个或多个GPU。
存储器503,用于存放程序505。存储器503可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。
程序505具体可以用于使得处理器501执行以下操作:获取相机臂的可视区域;获取配置的手术臂当前位于可视区域内的目标部位;基于可视区域限定目标部位在可视区域内运动。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种手术机器人的控制方法,所述手术机器人具有操作臂,所述操作臂包括具有图像末端器械的相机臂及具有操作末端器械的手术臂,所述手术臂具有一个以上可被配置成跟随部位的第一特征部位,其特征在于,所述控制方法包括如下步骤:
获取基于所述第一特征部位配置的所述跟随部位;
获取所述图像末端器械在参考坐标系的当前可视区域;
判断所述跟随部位是否落入所述当前可视区域;在所述跟随部位未落入所述当前可视区域时,调节所述图像末端器械而获得所述图像末端器械在参考坐标系的新可视区域以使至少部分的所述跟随部位落入所述新可视区域。
2.根据权利要求1所述的控制方法,其特征在于,所述跟随部位是所述手术臂的操作末端器械及或关节。
3.根据权利要求1所述的控制方法,其特征在于,调节所述图像末端器械而获得所述图像末端器械在参考坐标系的新可视区域以使至少部分的所述跟随部位落入所述新可视区域的步骤包括:
获取所述图像末端器械在参考坐标系的全部可视区域的并集区域;
判断所述跟随部位是否能够落入所述并集区域;
在所述跟随部位均能够落入所述并集区域时,调节所述图像末端器械而获得所述图像末端器械在参考坐标系的新可视区域以使全部所述跟随部位落入所述新可视区域。
4.根据权利要求1所述的控制方法,其特征在于,调节所述图像末端器械而获得所述图像末端器械在参考坐标系的新可视区域以使至少部分的所述跟随部位落入所述新可视区域的步骤包括:
获取所述图像末端器械在参考坐标系的全部可视区域的并集区域;
判断所述跟随部位是否能够落入所述并集区域;
在所述跟随部位不能全部落入所述并集区域时,根据操作指令将至少部分能够落入所述并集区域的所述跟随部位配置成第一跟随部位;
调节所述图像末端器械而获得所述图像末端器械在参考坐标系的新可视区域以使所述第一跟随部位落入所述新可视区域。
5.根据权利要求4所述的控制方法,其特征在于,所述操作指令包括第一操作指令,所述第一操作指令关联于能够落入所述并集区域的全部或部分所述跟随部位,根据操作指令将至少部分能够落入所述并集区域的所述跟随部位配置成第一跟随部位包括:
根据所述第一操作指令将全部或部分能够落入所述并集区域的所述跟随部位配置成第一跟随部位。
6.根据权利要求4所述的控制方法,其特征在于,所述手术臂包括第一优先级的手术臂及第二优先级的手术臂,各所述手术臂均被配置有所述跟随部位,所述操作指令包括第二操作指令,所述第二操作指令关联于第一优先级的所述手术臂的、且全部或部分能够落入所述并集区域的所述跟随部位,根据操作指令将至少部分能够落入所述并集区域的所述跟随部位配置成第一跟随部位的步骤包括:
根据所述第二操作指令将第一优先级的所述手术臂上全部或部分能够落入所述并集区域的所述跟随部位配置成第一跟随部位。
7.根据权利要求6所述的控制方法,其特征在于,第一优先级的所述手术臂指处于运动状态的所述手术臂,第二优先级的所述手术臂指处于静止状态的所述手术臂。
8.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序被配置为由处理器加载并执行实现如权利要求1~7任一项所述的控制方法的步骤。
9.一种手术机器人的控制装置,其特征在于,包括:
存储器,用于存储计算机程序;
及处理器,用于加载并执行所述计算机程序;
其中,所述计算机程序被配置为由所述处理器加载并执行实现如权利要求1~7任一项所述的控制方法的步骤。
10.一种手术机器人,其特征在于,包括:
操作臂,所述操作臂包括具有图像末端器械的相机臂的及具有操作末端器械的相机臂的手术臂;
以及控制器,所述控制器与所述操作臂耦接,并被配置成执行如权利要求1~7任一项所述的控制方法的步骤。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011476155.4A CN112587244A (zh) | 2020-12-15 | 2020-12-15 | 手术机器人及其控制方法、控制装置 |
PCT/CN2021/092563 WO2022126996A1 (zh) | 2020-12-15 | 2021-05-10 | 手术机器人及其控制方法、控制装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011476155.4A CN112587244A (zh) | 2020-12-15 | 2020-12-15 | 手术机器人及其控制方法、控制装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112587244A true CN112587244A (zh) | 2021-04-02 |
Family
ID=75195702
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011476155.4A Pending CN112587244A (zh) | 2020-12-15 | 2020-12-15 | 手术机器人及其控制方法、控制装置 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN112587244A (zh) |
WO (1) | WO2022126996A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113413214A (zh) * | 2021-05-24 | 2021-09-21 | 上海交通大学 | 一种基于混合现实的引导的手术机器人力反馈方法和装置 |
CN113768627A (zh) * | 2021-09-14 | 2021-12-10 | 武汉联影智融医疗科技有限公司 | 视觉导航仪感受野获取方法、设备、手术机器人 |
WO2022126996A1 (zh) * | 2020-12-15 | 2022-06-23 | 深圳市精锋医疗科技有限公司 | 手术机器人及其控制方法、控制装置 |
WO2023202291A1 (zh) * | 2022-04-23 | 2023-10-26 | 深圳市精锋医疗科技股份有限公司 | 手术机器人系统及其控制装置 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102448680A (zh) * | 2009-03-31 | 2012-05-09 | 直观外科手术操作公司 | 外科手术机器人的合成表征 |
CN102802550A (zh) * | 2009-06-23 | 2012-11-28 | 直观外科手术操作公司 | 提供包括延伸出进入引导器远端的可联接器械的运动限制范围的辅助视图的医疗机器人系统 |
US20160206389A1 (en) * | 2005-12-27 | 2016-07-21 | Intuitive Surgical Operations, Inc. | Constraint based control in a minimally invasive surgical apparatus |
CN107049492A (zh) * | 2017-05-26 | 2017-08-18 | 微创(上海)医疗机器人有限公司 | 手术机器人系统及手术器械位置的显示方法 |
CN107440748A (zh) * | 2017-07-21 | 2017-12-08 | 西安交通大学医学院第附属医院 | 一种手术野智能化自动跟踪腔镜系统 |
CN108113750A (zh) * | 2017-12-18 | 2018-06-05 | 中国科学院深圳先进技术研究院 | 柔性手术器械跟踪方法、装置、设备及存储介质 |
CN109330685A (zh) * | 2018-10-31 | 2019-02-15 | 南京航空航天大学 | 一种多孔腹腔手术机器人腹腔镜自动导航方法 |
CN211094672U (zh) * | 2019-08-05 | 2020-07-28 | 泰惠(北京)医疗科技有限公司 | 微创手术机器人控制系统 |
CN111870349A (zh) * | 2020-07-24 | 2020-11-03 | 前元运立(北京)机器人智能科技有限公司 | 一种手术机器人的安全边界与力控制方法 |
WO2020223569A1 (en) * | 2019-05-01 | 2020-11-05 | Intuitive Surgical Operations, Inc. | System and method for integrated motion with an imaging device |
CN112043397A (zh) * | 2020-10-08 | 2020-12-08 | 深圳市精锋医疗科技有限公司 | 手术机器人及其运动错误检测方法、检测装置 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE10025285A1 (de) * | 2000-05-22 | 2001-12-06 | Siemens Ag | Vollautomatische, robotergestützte Kameraführung unter Verwendung von Positionssensoren für laparoskopische Eingriffe |
US10008017B2 (en) * | 2006-06-29 | 2018-06-26 | Intuitive Surgical Operations, Inc. | Rendering tool information as graphic overlays on displayed images of tools |
KR101806195B1 (ko) * | 2012-07-10 | 2018-01-11 | 큐렉소 주식회사 | 수술로봇 시스템 및 수술로봇 제어방법 |
JP6072249B2 (ja) * | 2012-12-11 | 2017-02-01 | オリンパス株式会社 | 内視鏡装置の作動方法および内視鏡装置 |
DE102013108115A1 (de) * | 2013-07-30 | 2015-02-05 | gomtec GmbH | Verfahren und Vorrichtung zum Festlegen eines Arbeitsbereichs eines Roboters |
WO2015121765A1 (en) * | 2014-02-12 | 2015-08-20 | Koninklijke Philips N.V. | Robotic control of surgical instrument visibility |
JP2017176307A (ja) * | 2016-03-29 | 2017-10-05 | ソニー株式会社 | 医療用支持アームの制御装置、医療用支持アーム装置の制御方法及び医療用システム |
JP7197511B2 (ja) * | 2017-05-25 | 2022-12-27 | コヴィディエン リミテッド パートナーシップ | 画像捕捉デバイスの視界内の物体を検出するためのシステムおよび方法 |
CN109288591B (zh) * | 2018-12-07 | 2021-12-03 | 上海微创医疗机器人(集团)股份有限公司 | 手术机器人系统 |
CN112641513B (zh) * | 2020-12-15 | 2022-08-12 | 深圳市精锋医疗科技股份有限公司 | 手术机器人及其控制方法、控制装置 |
CN112587244A (zh) * | 2020-12-15 | 2021-04-02 | 深圳市精锋医疗科技有限公司 | 手术机器人及其控制方法、控制装置 |
-
2020
- 2020-12-15 CN CN202011476155.4A patent/CN112587244A/zh active Pending
-
2021
- 2021-05-10 WO PCT/CN2021/092563 patent/WO2022126996A1/zh active Application Filing
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160206389A1 (en) * | 2005-12-27 | 2016-07-21 | Intuitive Surgical Operations, Inc. | Constraint based control in a minimally invasive surgical apparatus |
CN102448680A (zh) * | 2009-03-31 | 2012-05-09 | 直观外科手术操作公司 | 外科手术机器人的合成表征 |
CN102802550A (zh) * | 2009-06-23 | 2012-11-28 | 直观外科手术操作公司 | 提供包括延伸出进入引导器远端的可联接器械的运动限制范围的辅助视图的医疗机器人系统 |
CN107049492A (zh) * | 2017-05-26 | 2017-08-18 | 微创(上海)医疗机器人有限公司 | 手术机器人系统及手术器械位置的显示方法 |
CN107440748A (zh) * | 2017-07-21 | 2017-12-08 | 西安交通大学医学院第附属医院 | 一种手术野智能化自动跟踪腔镜系统 |
CN108113750A (zh) * | 2017-12-18 | 2018-06-05 | 中国科学院深圳先进技术研究院 | 柔性手术器械跟踪方法、装置、设备及存储介质 |
CN109330685A (zh) * | 2018-10-31 | 2019-02-15 | 南京航空航天大学 | 一种多孔腹腔手术机器人腹腔镜自动导航方法 |
WO2020223569A1 (en) * | 2019-05-01 | 2020-11-05 | Intuitive Surgical Operations, Inc. | System and method for integrated motion with an imaging device |
CN211094672U (zh) * | 2019-08-05 | 2020-07-28 | 泰惠(北京)医疗科技有限公司 | 微创手术机器人控制系统 |
CN111870349A (zh) * | 2020-07-24 | 2020-11-03 | 前元运立(北京)机器人智能科技有限公司 | 一种手术机器人的安全边界与力控制方法 |
CN112043397A (zh) * | 2020-10-08 | 2020-12-08 | 深圳市精锋医疗科技有限公司 | 手术机器人及其运动错误检测方法、检测装置 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022126996A1 (zh) * | 2020-12-15 | 2022-06-23 | 深圳市精锋医疗科技有限公司 | 手术机器人及其控制方法、控制装置 |
CN113413214A (zh) * | 2021-05-24 | 2021-09-21 | 上海交通大学 | 一种基于混合现实的引导的手术机器人力反馈方法和装置 |
CN113768627A (zh) * | 2021-09-14 | 2021-12-10 | 武汉联影智融医疗科技有限公司 | 视觉导航仪感受野获取方法、设备、手术机器人 |
WO2023202291A1 (zh) * | 2022-04-23 | 2023-10-26 | 深圳市精锋医疗科技股份有限公司 | 手术机器人系统及其控制装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2022126996A1 (zh) | 2022-06-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112641513B (zh) | 手术机器人及其控制方法、控制装置 | |
CN112587244A (zh) | 手术机器人及其控制方法、控制装置 | |
CN110893118B (zh) | 手术机器人系统以及机械臂的运动控制方法 | |
JP6164964B2 (ja) | 医療用システムおよびその制御方法 | |
US9582079B2 (en) | Manually operated robot control system and method for controlling a robot system | |
JP6617114B2 (ja) | 関節器具に好適な姿勢を取らせるような命令をするように入力装置のオペレータを促す、入力装置での力フィードバックの適用 | |
US11925513B2 (en) | Camera control for surgical robotic systems | |
US9681921B2 (en) | Robot system and method for controlling a robot system for minimally invasive surgery | |
CN112618020B (zh) | 手术机器人及其控制方法、控制装置 | |
CN112618028B (zh) | 手术机器人及其引导手术臂移动的方法、控制装置 | |
US10518415B2 (en) | Method for safe coupling and decoupling of an input device | |
US11583358B2 (en) | Boundary scaling of surgical robots | |
CN112587243B (zh) | 手术机器人及其控制方法、控制装置 | |
CN112043397B (zh) | 手术机器人及其运动错误检测方法、检测装置 | |
WO2021041249A1 (en) | Moveable display system | |
CN114652449A (zh) | 手术机器人及其引导手术臂移动的方法、控制装置 | |
KR20200068455A (ko) | 수술용 슬레이브 암을 원격으로 제어하는 방법 및 시스템 | |
US20220296323A1 (en) | Moveable display unit on track | |
WO2021125115A1 (en) | Robotic arm system, method and computer program | |
CN116807620B (zh) | 手术机器人及其控制方法、计算机可读存储介质 | |
US20220331025A1 (en) | Method and system for controlling instrument grip behavior | |
CN116549133A (zh) | 手术机器人系统及控制处理设备 | |
CN116965937A (zh) | 手术机器人系统及其控制装置 | |
CN115741685A (zh) | 器械归位方法、器械归位系统和装置、存储介质 | |
CN116849818A (zh) | 手术机器人的控制方法、手术机器人及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: 518000 2b1901, phase II, smart home, 76 Baohe Avenue, Baolong community, Baolong street, Longgang District, Shenzhen City, Guangdong Province Applicant after: Shenzhen Jingfeng Medical Technology Co.,Ltd. Address before: 518000 2b1901, phase II, smart home, 76 Baohe Avenue, Baolong community, Baolong street, Longgang District, Shenzhen City, Guangdong Province Applicant before: SHENZHEN JINGFENG MEDICAL TECHNOLOGY Co.,Ltd. |
|
CB02 | Change of applicant information | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210402 |
|
RJ01 | Rejection of invention patent application after publication |