WO2021012142A1 - 手术机器人系统及其控制方法 - Google Patents

Abstract

本公开提供了一种手术机器人系统及其控制方法，属于医疗器械技术领域。手术机器人系统包括：成像器件，得到目标部位的成像数据；机械手臂，前端携带有手术器件；定位器件，用于对目标部位进行定位；坐标系处理器，用于生成并存储将坐标从定位器件的第一坐标系变换成成像数据的第二坐标系的第一坐标变换关系，生成并存储将坐标从成像数据的第二坐标系变换成机械手臂的第三坐标系的第二坐标变换关系；控制器，用于根据成像数据和第一坐标变换关系生成目标部位在第二坐标系的三维图像，通过用户界面展示三维图像，接收用户输入的手术路径，根据手术路径和第二坐标变换关系控制机械手臂对目标部位进行手术。本公开的手术机器人能够执行精确手术。

Description

手术机器人系统及其控制方法 技术领域

本公开涉及医疗器械技术领域，特别是指一种手术机器人系统及其控制方法。

背景技术

多样的定位手术器械已经众所周知。但是，当利用手动定位手术器械时，用户需要手工决定手术工具的位置并移动，因而在患部位置与手术工具之间容易发生误差。

发明内容

本公开实施例提供一种手术机器人系统及其控制方法，能够用来执行多种人工无法进行的针对病灶器官的精确手术，且具有创伤小、感染性低、手术方式灵活等优势。

为解决上述技术问题，本公开的实施例提供技术方案如下：

一方面，提供一种手术机器人系统，包括：

成像器件，用于对待手术的目标部位进行扫描，得到目标部位的成像数据；

机械手臂，所述机械手臂前端携带有手术器件；

定位器件，用于对所述目标部位进行定位；

坐标系处理器，用于生成并存储将坐标从所述成像数据的第一坐标系变换成所述机械手臂的第二坐标系的第一坐标变换关系，生成并存储将坐标从所述机械手臂的第二坐标系变换成所述定位器件的第三坐标系的第二坐标变换关系；

控制器，用于根据所述成像数据生成所述目标部位在所述第一坐标系的三维图像，通过用户界面展示所述三维图像，接收用户输入的手术路径，根据所述手术路径、所述第一坐标变换关系和所述第二坐标变换关系控制所述 机械手臂对所述目标部位进行手术。

可选地，所述控制器具体用于将用户通过所述用户界面输入的所述手术路径根据所述第一坐标变换关系变换成所述第二坐标系上的第一坐标轨迹，根据所述第二坐标变换关系将所述第一坐标轨迹变换成所述第三坐标系上的第二坐标轨迹，并根据所述第二坐标轨迹控制所述机械手臂对所述目标部位进行手术。

可选地，所述成像数据包括多张所述目标部位的二维剖面图像，所述控制器具体用于获取其中一张二维剖面图像中的感兴趣区域，确定所述感兴趣区域的边界；重复上述步骤，直至获取所有二维剖面图像的感兴趣区域的边界；根据所有二维剖面图像的感兴趣区域的边界进行几何构型，得到所述目标部位的三维图像。

可选地，所述控制器具体用于将所有二维剖面图像的感兴趣区域的边界信息变换为所述第一坐标系中的点群，根据所述点群生成所述目标部位的三维图像。

可选地，所述坐标系处理器具体用于从所述第一坐标系中选择至少四个第一参考点，确定所述至少四个第一参考点在所述第一坐标系中的第一坐标值和在所述第二坐标系中的第二坐标值，根据所述第一坐标值和所述第二坐标值计算得到表征所述第一坐标变换关系的第一转换函数；从所述第二坐标系中选择至少四个第二参考点，确定所述至少四个第二参考点在所述第二坐标系中的第三坐标值和在所述第三坐标系中的第四坐标值，根据所述第三坐标值和所述第四坐标值计算得到表征所述第二坐标变换关系的第二转换函数。

可选地，所述成像器件包括：

基座；

C形臂，设置于所述基座上，且所述C形臂的两端分别设置有射线发射部和射线接收部，在对所述目标部位进行扫描时，所述目标部位位于所述射线发射部和所述射线接收部之间。

可选地，所述定位器件包括：

附着或接近于所述目标部位进行配置的定位标记；

处于不同位置的至少两个光学发射器件，用于发射特定光线；

定位部，用于接收所述定位标记反射的特定光线，并根据接收到的特定光线确定所述定位标记在所述第三坐标系中的空间位置。

可选地，所述机械手臂包括：

旋转部，携带有手术器件，以两个旋转轴中的至少一个旋转轴为中心，使所述手术器件旋转；

移动部，其使所述旋转部向三个轴中至少一个轴方向移动。

可选地，所述移动部包括：

第一方向驱动部，沿着第一轴方向进行移动；

第二方向驱动部，连接于所述第一方向驱动部，沿着第二轴方向进行移动；

第三方向驱动部，连接于所述第二方向驱动部，沿着第三轴方向进行移动；

所述旋转部包括：

第一旋转驱动部，包括连接于所述第三方向驱动部的一端，以第一旋转轴为中心旋转；及

第二旋转驱动部，包括连接于所述第一旋转驱动部的一端，以第二旋转轴为中心旋转，所述手术器件附着于所述第二旋转驱动部。

本公开实施例还提供了一种手术机器人系统的控制方法，其中，包括：

成像器件对待手术的目标部位进行扫描，得到目标部位的成像数据；

定位器件对所述目标部位进行定位；

坐标系处理器生成并存储将坐标从所述成像数据的第一坐标系变换成所述机械手臂的第二坐标系的第一坐标变换关系，生成并存储将坐标从所述机械手臂的第二坐标系变换成所述定位器件的第三坐标系的第二坐标变换关系；

控制器根据所述成像数据生成所述目标部位在所述第一坐标系的三维图像，通过用户界面展示所述三维图像，接收用户输入的手术路径，根据所述手术路径、所述第一坐标变换关系和所述第二坐标变换关系控制所述机械手臂对所述目标部位进行手术。

可选地，所述控制所述机械手臂对所述目标部位进行手术包括：

所述控制器将用户通过所述用户界面输入的所述手术路径根据所述第一坐标变换关系变换成所述第二坐标系上的第一坐标轨迹，根据所述第二坐标变换关系将所述第一坐标轨迹变换成所述第三坐标系上的第二坐标轨迹，并根据所述第二坐标轨迹控制所述机械手臂对所述目标部位进行手术。

可选地，所述成像数据包括多张所述目标部位的二维剖面图像，生成所述三维图像包括：

所述控制器获取其中一张二维剖面图像中的感兴趣区域，确定所述感兴趣区域的边界；重复上述步骤，直至获取所有二维剖面图像的感兴趣区域的边界；根据所有二维剖面图像的感兴趣区域的边界进行几何构型，得到所述目标部位的三维图像。

可选地，生成所述目标部位在所述第二坐标系的三维图像包括：

所述控制器将所有二维剖面图像的感兴趣区域的边界信息变换为所述第一坐标系中的点群，根据所述点群生成所述目标部位的三维图像。

可选地，生成所述第一坐标变换关系和所述第二坐标变换关系包括：

所述坐标系处理器从所述第一坐标系中选择至少四个第一参考点，确定所述至少四个第一参考点在所述第一坐标系中的第一坐标值和在所述第二坐标系中的第二坐标值，根据所述第一坐标值和所述第二坐标值计算得到表征所述第一坐标变换关系的第一转换函数；从所述第二坐标系中选择至少四个第二参考点，确定所述至少四个第二参考点在所述第二坐标系中的第三坐标值和在所述第三坐标系中的第四坐标值，根据所述第三坐标值和所述第四坐标值计算得到表征所述第二坐标变换关系的第二转换函数。

可选地，所述成像器件包括：基座；C形臂，设置于所述基座上，且所述C形臂的两端分别设置有射线发射部和射线接收部，在对所述目标部位进行扫描时，所述目标部位位于所述射线发射部和所述射线接收部之间；得到目标部位的成像数据包括：

所述射线发射部发出射线；

所述射线接收部接收穿过所述目标部位的射线，根据接收到的射线信息 生成所述成像数据。

可选地，所述定位器件包括：附着或接近于所述目标部位进行配置的定位标记；处于不同位置的至少两个光学发射器件，用于发射特定光线；对所述目标部位进行定位包括：

定位部接收所述定位标记反射的特定光线，并根据接收到的特定光线确定所述定位标记在所述第三坐标系中的空间位置。

可选地，所述机械手臂包括：旋转部，携带有手术器件，以两个旋转轴中的至少一个旋转轴为中心，使所述手术器件旋转；移动部，其使所述旋转部向三个轴中至少一个轴方向移动；

对所述目标部位进行手术包括：

所述控制器通过所述移动部使所述旋转部向三个轴中至少一个轴方向移动；

所述控制器通过所述旋转部使所述手术器件，以两个旋转轴中的至少一个旋转轴为中心旋转。

本公开实施例还提供了一种手术机器人系统的控制设备，包括：存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上所述的手术机器人系统的控制方法中的步骤。

本公开实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上所述的手术机器人系统的控制方法中的步骤。

附图说明

图1表示本公开实施例手术机器人系统的结构示意图；

图2和图3表示本公开实施例成像器件的结构示意图；

图4表示本公开实施例手术机器人的组成示意图；

图5和图6表示本公开实施例生成三维图像的流程示意图；

图7表示本公开实施例手术机器人系统的控制方法的流程示意图。

具体实施方式

为使本公开的实施例要解决的技术问题、技术方案和优点更加清楚，下面将结合附图及具体实施例进行详细描述。

本公开实施例提供一种手术机器人系统及其控制方法，能够用来执行多种人工无法进行的针对病灶器官的精确手术，且具有创伤小、感染性低、手术方式灵活等优势。

本公开的实施例提供一种手术机器人系统，如图1所示，包括：

成像器件11，用于对待手术的目标部位进行扫描，得到目标部位的成像数据；

机械手臂15，所述机械手臂15前端携带有手术器件；

定位器件12，用于对所述目标部位进行定位；

坐标系处理器13，用于生成并存储将坐标从所述成像数据的第一坐标系变换成所述机械手臂15的第二坐标系的第一坐标变换关系，生成并存储将坐标从所述机械手臂15的第二坐标系变换成所述定位器件12的第三坐标系的第二坐标变换关系；

控制器14，用于根据所述成像数据生成所述目标部位在所述第一坐标系的三维图像，通过用户界面展示所述三维图像，接收用户输入的手术路径，根据所述手术路径、所述第一坐标变换关系和所述第二坐标变换关系控制所述机械手臂15对所述目标部位进行手术。

本实施例中，利用成像器件11得到目标部位的成像数据，根据成像数据可以生成并展示目标部位的三维图像，用户比如医生可以根据所展示的三维图像输入手术路径，以便手术机器人根据用户指示的手术路径对目标部位进行手术。通过本实施例的技术方案，医生可以通过用户界面控制手术机器人，能够提高手术精密度，简化控制方式，并能够降低操作误差。

其中，目标部位为可以通过手术器件进行治疗的对象，比如需要接骨的骨头、需要去除的病灶等，目标部位可以位于患者的体内或者外部表面，包括但不限于骨头、关节、内脏。在手术之前，需要了解目标部位的详细信息，可以利用成像器件11对目标部位进行扫描，获得目标部位的成像数据，具体 地，成像数据可以包括目标部位的多张二维剖面图像。成像器件11可以采用但不限于X射线设备、超声设备、电子计算机断层扫描设备、正电子发射型计算机断层显像设备等，利用成像器件11不断扫描目标部位，获取多张二维剖面图像及其空间坐标，控制器14根据成像数据在第一坐标系中对目标部位进行空间重建，在第一坐标系中建立目标部位的几何构型，使得医生可以了解到目标部位的详细信息，并据此进行手术路径的规划。

一具体实施例中，如图2所示，成像器件11可以包括：

基座；

C形臂100，设置于所述基座上，且所述C形臂100的两端分别设置有射线发射部103和射线接收部104，如图3所示，在对所述目标部位302进行扫描时，所述目标部位302位于所述射线发射部103和所述射线接收部104之间。

如图4所示，本实施例中，所述基座包括一支撑台205，以及一垂直所述支撑台205设置的支柱101，所述C形臂100的中部可以通过一移动结构设置于所述支柱101上，这样使得C形臂100可移动。

所述支撑台205可以为由相互垂直的第一支撑部2051和第二支撑部2052组成的T形结构，所述第一支撑部2051和所述第二支撑部2052底部分别设置有万向轮206。

在空间重建过程中，所述控制器14获取多张二维剖面图像其中一张二维剖面图像中的感兴趣区域，确定所述感兴趣区域的边界；重复上述步骤，直至获取所有二维剖面图像的感兴趣区域的边界；根据所有二维剖面图像的感兴趣区域的边界进行几何构型，得到所述目标部位的三维图像。

如图5所示，生成三维图像的过程具体包括以下步骤：

S11、控制器接收成像数据，获取其中一张二维剖面图像中的感兴趣区域；

二维剖面图像除包括目标部位外，还可能包括其他部位的图像信息，而做手术只需要获知目标部位的信息即可，因此，可以首先将二维剖面图像中需要动手术的感兴趣区域区分出来，这样可以使得医生更加直观地了解到目标部位的情况，而不会被其他部位的图像所误导，另外还可以降低图像数据 的处理量。

具体地，可以通过医生手工确定二维剖面图像中需要动手术的感兴趣区域；还可以结合神经网络选择出二维剖面图像中需要动手术的感兴趣区域。

S12、确定感兴趣区域的边界；

在通过医生手工确定二维剖面图像中需要动手术的感兴趣区域，或结合神经网络选择出二维剖面图像中需要动手术的感兴趣区域后，需要确定感兴趣区域的边界，具体地，对每一张二维剖面图像中的感兴趣区域都需要确定其边界。

S13、判断所有二维剖面图像是否处理完，如果是，转向S14；如果否，转向S15；

S14、根据所有二维剖面图像的感兴趣区域的边界进行几何构型，得到所述目标部位的三维图像。

具体地，控制器14可以将所有二维剖面图像的感兴趣区域的边界信息变换为所述第一坐标系中的点群，根据所述点群生成所述目标部位的三维图像。

S15、处理下一张二维剖面图像，转向步骤S11。

如图6所示，根据所述点群生成所述目标部位的三维图像具体包括以下步骤：

S21、获取二维剖面图像中的感兴趣区域；

S22、寻找标记；

具体地，在通过医生手工确定二维剖面图像中需要动手术的感兴趣区域，或结合神经网络选择出二维剖面图像中需要动手术的感兴趣区域后，可以利用Otsu算法寻找感兴趣区域的标记，根据该标记可以进行感兴趣区域的边界检测，当然本公开的技术方案并不局限于采用Otsu算法寻找标记，还可以利用其它算法寻找感兴趣区域的标记。

S23、进行感兴趣区域的边界检测；

具体地，对每一张二维剖面图像中的感兴趣区域都需要确定其边界，可以通过Watershed算法确定感兴趣区域的边界，Watershed算法又称水域分割，是模仿地图浸没过程的一种形态学分割算法，其本质是利用图像的区域特性 来分割图像，它将边缘检测与区域生长的优点结合起来，能够得到单像素宽、连通、封闭确位置准确的轮廓。当然本公开的技术方案并不局限于采用Watershed算法确定感兴趣区域的边界，还可以利用其它的边界检测算法确定感兴趣区域的边界。

S24、存储边界信息；

存储每一张二维剖面图像中的感兴趣区域的边界信息。

S25、获得边界形心作为处理下一张二维剖面图像的基础；

由于二维剖面图像均是针对同一目标部位，相邻二维剖面图像之间的差别不大，为了减少数据处理量，可以将边界形心作为处理下一张二维剖面图像的基础。

S26、判断是否存在下一张二维剖面图像，如果是，转向S21；如果否，转向S27；

S27、将边界信息变换为第一坐标系中的点群；

S28、根据点群生成目标部位的三维图像。

为了对目标部位进行定位，本实施例的定位器件12可以包括：

附着或接近于所述目标部位进行配置的定位标记；

处于不同位置的至少两个光学发射器件，用于发射特定光线；

定位部，用于接收所述定位标记反射的特定光线，并根据接收到的特定光线确定所述定位标记在所述第三坐标系中的空间位置。

通过定位标记的空间位置以及定位标记与目标位置之间的位置关系可以对目标部位进行定位，获取目标部位在第三坐标系中的空间位置。

由于目标部位可能位于患者体内，因此，特定光线优选采用能够穿透人体皮肤的光线，比如红外线。具体地，光学发射器件可以为位于目标部位斜上方的至少两个红外线探头，能够发射红外线；定位标记可以为红外反射定位小球，但并不以此为限；定位部可以为位于目标部位斜上方的两个光学摄像头。光学发射器件发射红外线，定位标记反射红外线，定位部接收定位标记反射的红外线，通过三角定位方式可以准确获得定位标记的位置。其中，定位标记需要事先附着或接近于所述目标部位进行配置，比如安装在患者的 需要动手术的骨头处。

本实施例中，机械手臂15能够以五自由度或六自由度进行动作。所述机械手臂15可以包括：旋转部，携带有手术器件，以两个旋转轴中的至少一个旋转轴为中心，使所述手术器件旋转；移动部，其使所述旋转部向三个轴中至少一个轴方向移动。机械手臂15可以附着于手术台使用。

具体地，所述移动部可以包括：

第一方向驱动部，沿着第一轴方向进行移动；

第二方向驱动部，连接于所述第一方向驱动部，沿着第二轴方向进行移动；

第三方向驱动部，连接于所述第二方向驱动部，沿着第三轴方向进行移动；

其中，第一轴方向与第二轴方向垂直，第二轴方向与第三轴方向垂直，第一轴方向与第三轴方向垂直。

所述旋转部包括：

第一旋转驱动部，包括连接于所述第三方向驱动部的一端，以第一旋转轴为中心旋转；及

第二旋转驱动部，包括连接于所述第一旋转驱动部的一端，以第二旋转轴为中心旋转，所述手术器件附着于所述第二旋转驱动部。

本实施例中，手术机器人系统可以包括一个机械手臂15，也可以包括多个机械手臂15。

一具体实施例中，手术机器人系统可以执行接骨手术，手术机器人系统可以包括两个机械手臂，手术器件为设置在机械手臂前段的抓手。具体地，如图4所示，本实施例的手术机器人系统包括：

沿着第一方向对称设置于所述支柱101相对的两侧的第一机械手臂201和第二机械手臂202，所述第一机械手臂201和所述第二机械手臂202的端部均设置有用于抓握的抓手2012。

通过移动部和旋转部相互配合，可以控制所述第一机械手臂201和/或所述第二机械手臂202的抓手2012抓住待接骨的骨头、并控制所述第一机械手 臂201和/或所述第二机械手臂202运动以进行接骨。

通过本实施例的技术方案，可以实现自动接骨，可以通过移动部和旋转部控制所述第一机械手臂201和/或所述第二机械手臂202运动，以调整骨头位置精准对接。

骨头错位或者骨头折断需要接骨正位等操作时，需要两个机械手臂相配合以进行相应的操作，本实施例中，所述第一机械手臂201和所述第二机械手臂202对称设置于所述支柱101相对的两侧，而目标部位位于所述C形臂100的两端之间，也就是正对所述支柱101的位置，便于实现骨头的对接。

本实施例中，所述第一机械手臂201和所述第二机械手臂202的运动方向、以及运动方式均可以根据实际需要设定，所述第一机械手臂201和所述第二机械手臂202的运动可以统一控制，也可以独立控制。

本实施例中，手术机器人系统还可以执行其他类型的手术，比如去除病灶，所述机械手臂组件还可以包括：

沿着第一方向设置于所述支柱101相对的两侧的第三机械手臂203和第四机械手臂204，所述第三机械手臂203和/或所述第四机械手臂204的端部设置有用于夹持手术刀的夹持部2032。

通过移动部和旋转部相互配合，可以控制第三机械手臂203和/或第四机械手臂204进行相应类型的手术操作。

需要说明的是，本实施例的手术机器人系统可以仅仅包括所述第一机械手臂201、所述第二机械手臂202，也可以仅仅包括第三机械手臂203和第四机械手臂204，或者同时包括所述第一机械手臂201、所述第二机械手臂202、所述第三机械手臂203、所述第四机械手臂204，以增加手术机器人的功能，扩大其适用范围。

在进行手术时，控制器14可以在用户界面中展示目标部位的三维图像，医生可以研究用户界面中展示的三维图像，并以划线的方式确定手术路径。本实施例的手术机器人系统还应包括与控制器14连接的至少一个显示器，显示器可以接收控制器14的三维图像，并在用户界面中进行展示。在手术机器人系统包括多个显示器时，可以将其中一个显示器用来显示用户界面，其他的显示器可以用来显示场景。

在医生确定手术路径后，控制器14可以控制机械手臂15按照手术路径进行手术，但本实施例的手术机器人系统中存在三个不同的坐标系：成像数据的第一坐标系M，机械手臂15的第二坐标系R，定位器件12的第三坐标系O，医生确定的手术路径是基于第一坐标系的，还需要获取不同坐标系之间的坐标变换关系，实现上述三个坐标系的定位对准，才能够使得医生基于三维图像所规划的手术路径传递给机械手臂15，并使得机械手臂15在目标部位的对应位置进行操作。

在建立不同坐标系之间的坐标变换关系时，可以先统一三个坐标系的向量空间方向，这是因为定位器件12的定位部位于整个系统的上方，对它而言XYZ的方向跟位于系统同海拔侧的成像器件11的XYZ方向显然是不同的，同样地，定位器件12的XYZ的方向与机械手臂15的XYZ方向也是不同的，如下所示，可以通过坐标矩阵转置统一三个坐标系的向量空间方向。

多个坐标点可以确定一个立体构型，可以基于该原理实现坐标系的转化。所述坐标系处理器13可以从所述第一坐标系中选择至少四个第一参考点，确定所述至少四个第一参考点在所述第一坐标系中的第一坐标值和在所述第二坐标系中的第二坐标值，根据所述第一坐标值和所述第二坐标值计算得到表征所述第一坐标变换关系的第一转换函数；从所述第二坐标系中选择至少四个第二参考点，确定所述至少四个第二参考点在所述第二坐标系中的第三坐标值和在所述第三坐标系中的第四坐标值，根据所述第三坐标值和所述第四坐标值计算得到表征所述第二坐标变换关系的第二转换函数。

一具体示例中，第二坐标系的参考点坐标为

第一坐标系的参考点坐标为

第三坐标系的参考点坐标为

可以先实现坐标系O和坐标 系M之间的转换，再实现坐标系M和坐标系R之间的转换，则可以获得两个转换函数

和

其中，

为坐标系R和坐标系M之间的转换函数，

为坐标系O和坐标系M之间的转换函数。

上述转换函数中，

和

中的参数可以通过高斯消去法求解，在求解后，即可得到坐标系R和坐标系M之间的转换函数

坐标系O和坐标系M之间的转换函数

还可以根据这两个转换函数得到坐标系R和坐标系O之间的转换函数

从而能够获得任两个坐标系之间的坐标变换关系。

这样，在用户通过用户界面输入基于第一坐标系的手术路径后，所述控制器14可以将手术路径根据所述第一坐标变换关系变换成所述第二坐标系上的第一坐标轨迹，根据所述第二坐标变换关系将所述第一坐标轨迹变换成所述第三坐标系上的第二坐标轨迹，并根据所述第二坐标轨迹控制所述机械手臂15对所述目标部位进行手术。

通过本实施例的技术方案，医生可以控制手术机器人系统准确地执行多种医生人工无法进行的针对病灶器官的精确手术，且具有创伤小、感染性低、手术方式灵活等优势。

本公开实施例还提供了一种手术机器人系统的控制方法，如图7所示，包括：

S1、成像器件对待手术的目标部位进行扫描，得到目标部位的成像数据；

S2、定位器件对所述目标部位进行定位；

S3、坐标系处理器生成并存储将坐标从所述成像数据的第一坐标系变换 成所述机械手臂的第二坐标系的第一坐标变换关系，生成并存储将坐标从所述机械手臂的第二坐标系变换成所述定位器件的第三坐标系的第二坐标变换关系；

S4、控制器根据所述成像数据生成所述目标部位在所述第一坐标系的三维图像，通过用户界面展示所述三维图像，接收用户输入的手术路径，根据所述手术路径、所述第一坐标变换关系和所述第二坐标变换关系控制所述机械手臂对所述目标部位进行手术。

本实施例中，利用成像器件得到目标部位的成像数据，根据成像数据可以生成并展示目标部位的三维图像，用户比如医生可以根据所展示的三维图像输入手术路径，以便手术机器人根据用户指示的手术路径对目标部位进行手术。通过本实施例的技术方案，医生可以通过用户界面控制手术机器人，能够提高手术精密度，简化控制方式，并能够降低操作误差。

其中，目标部位为可以通过手术器件进行治疗的对象，比如需要接骨的骨头、需要去除的病灶等，目标部位可以位于患者的体内或者外部表面，包括但不限于骨头、关节、内脏。在手术之前，需要了解目标部位的详细信息，可以利用成像器件11对目标部位进行扫描，获得目标部位的成像数据，具体地，成像数据可以包括目标部位的多张二维剖面图像。成像器件11可以采用但不限于X射线设备、超声设备、电子计算机断层扫描设备、正电子发射型计算机断层显像设备等，利用成像器件11不断扫描目标部位，获取多张二维剖面图像及其空间坐标，控制器14根据成像数据在第一坐标系中对目标部位进行空间重建，在第一坐标系中建立目标部位的几何构型，使得医生可以了解到目标部位的详细信息，并据此进行手术路径的规划。

一具体实施例中，如图2所示，成像器件11可以包括：

基座；

C形臂100，设置于所述基座上，且所述C形臂100的两端分别设置有射线发射部103和射线接收部104，如图3所示，在对所述目标部位302进行扫描时，所述目标部位302位于所述射线发射部103和所述射线接收部104之间。

得到目标部位的成像数据的步骤包括：

所述射线发射部103发出射线；

所述射线接收部104接收穿过所述目标部位的射线，根据接收到的射线信息生成所述成像数据。

在空间重建过程中，所述控制器14获取多张二维剖面图像其中一张二维剖面图像中的感兴趣区域，确定所述感兴趣区域的边界；重复上述步骤，直至获取所有二维剖面图像的感兴趣区域的边界；根据所有二维剖面图像的感兴趣区域的边界进行几何构型，得到所述目标部位的三维图像。

如图5所示，生成三维图像的过程具体包括以下步骤：

S11、控制器接收成像数据，获取其中一张二维剖面图像中的感兴趣区域；

二维剖面图像除包括目标部位外，还可能包括其他部位的图像信息，而做手术只需要获知目标部位的信息即可，因此，可以首先将二维剖面图像中需要动手术的感兴趣区域区分出来，这样可以使得医生更加直观地了解到目标部位的情况，而不会被其他部位的图像所误导，另外还可以降低图像数据的处理量。

具体地，可以通过医生手工确定二维剖面图像中需要动手术的感兴趣区域；还可以结合神经网络选择出二维剖面图像中需要动手术的感兴趣区域。

S12、确定感兴趣区域的边界；

在通过医生手工确定二维剖面图像中需要动手术的感兴趣区域，或结合神经网络选择出二维剖面图像中需要动手术的感兴趣区域后，需要确定感兴趣区域的边界，具体地，对每一张二维剖面图像中的感兴趣区域都需要确定其边界。

S13、判断所有二维剖面图像是否处理完，如果是，转向S14；如果否，转向S15；

S14、根据所有二维剖面图像的感兴趣区域的边界进行几何构型，得到所述目标部位的三维图像。

具体地，控制器14可以将所有二维剖面图像的感兴趣区域的边界信息变换为所述第一坐标系中的点群，根据所述点群生成所述目标部位的三维图像。

S15、处理下一张二维剖面图像，转向步骤S11。

如图6所示，根据所述点群生成所述目标部位的三维图像具体包括以下步骤：

S21、获取二维剖面图像中的感兴趣区域；

S22、寻找标记；

具体地，在通过医生手工确定二维剖面图像中需要动手术的感兴趣区域，或结合神经网络选择出二维剖面图像中需要动手术的感兴趣区域后，可以利用Otsu算法寻找感兴趣区域的标记，根据该标记可以进行感兴趣区域的边界检测，当然本公开的技术方案并不局限于采用Otsu算法寻找标记，还可以利用其它算法寻找感兴趣区域的标记。

S23、进行感兴趣区域的边界检测；

具体地，对每一张二维剖面图像中的感兴趣区域都需要确定其边界，可以通过Watershed算法确定感兴趣区域的边界，Watershed算法又称水域分割，是模仿地图浸没过程的一种形态学分割算法，其本质是利用图像的区域特性来分割图像，它将边缘检测与区域生长的优点结合起来，能够得到单像素宽、连通、封闭确位置准确的轮廓。当然本公开的技术方案并不局限于采用Watershed算法确定感兴趣区域的边界，还可以利用其它的边界检测算法确定感兴趣区域的边界。

S24、存储边界信息；

存储每一张二维剖面图像中的感兴趣区域的边界信息。

S25、获得边界形心作为处理下一张二维剖面图像的基础；

由于二维剖面图像均是针对同一目标部位，相邻二维剖面图像之间的差别不大，为了减少数据处理量，可以将边界形心作为处理下一张二维剖面图像的基础。

S26、判断是否存在下一张二维剖面图像，如果是，转向S21；如果否，转向S27；

S27、将边界信息变换为第一坐标系中的点群；

S28、根据点群生成目标部位的三维图像。

为了对目标部位进行定位，本实施例的定位器件12可以包括：

附着或接近于所述目标部位进行配置的定位标记；

处于不同位置的至少两个光学发射器件，用于发射特定光线；

对所述目标部位进行定位包括：

定位部接收所述定位标记反射的特定光线，并根据接收到的特定光线确定所述定位标记在所述第三坐标系中的空间位置。

通过定位标记的空间位置以及定位标记与目标位置之间的位置关系可以对目标部位进行定位，获取目标部位在第三坐标系中的空间位置。

由于目标部位可能位于患者体内，因此，特定光线优选采用能够穿透人体皮肤的光线，比如红外线。具体地，光学发射器件可以为位于目标部位斜上方的至少两个红外线探头，能够发射红外线；定位标记可以为红外反射定位小球，但并不以此为限；定位部可以为位于目标部位斜上方的两个光学摄像头。光学发射器件发射红外线，定位标记反射红外线，定位部接收定位标记反射的红外线，通过三角定位方式可以准确获得定位标记的位置。其中，定位标记需要事先附着或接近于所述目标部位进行配置，比如安装在患者的需要动手术的骨头处。

本实施例中，机械手臂15能够以五自由度或六自由度进行动作。所述机械手臂15可以包括：旋转部，携带有手术器件，以两个旋转轴中的至少一个旋转轴为中心，使所述手术器件旋转；移动部，其使所述旋转部向三个轴中至少一个轴方向移动。机械手臂15可以附着于手术台使用。

具体地，所述移动部可以包括：

第一方向驱动部，沿着第一轴方向进行移动；

第二方向驱动部，连接于所述第一方向驱动部，沿着第二轴方向进行移动；

第三方向驱动部，连接于所述第二方向驱动部，沿着第三轴方向进行移动；

其中，第一轴方向与第二轴方向垂直，第二轴方向与第三轴方向垂直，第一轴方向与第三轴方向垂直。

所述旋转部包括：

第一旋转驱动部，包括连接于所述第三方向驱动部的一端，以第一旋转轴为中心旋转；及

第二旋转驱动部，包括连接于所述第一旋转驱动部的一端，以第二旋转轴为中心旋转，所述手术器件附着于所述第二旋转驱动部。

对所述目标部位进行手术的步骤包括：

所述控制器通过所述移动部使所述旋转部向三个轴中至少一个轴方向移动；

所述控制器通过所述旋转部使所述手术器件，以两个旋转轴中的至少一个旋转轴为中心旋转。

在进行手术时，控制器14可以在用户界面中展示目标部位的三维图像，医生可以研究用户界面中展示的三维图像，并以划线的方式确定手术路径。本实施例的手术机器人系统还应包括与控制器14连接的至少一个显示器，显示器可以接收控制器14的三维图像，并在用户界面中进行展示。在手术机器人系统包括多个显示器时，可以将其中一个显示器用来显示用户界面，其他的显示器可以用来显示场景。

在医生确定手术路径后，控制器14可以控制机械手臂15按照手术路径进行手术，但本实施例的手术机器人系统中存在三个不同的坐标系：成像数据的第一坐标系M，机械手臂15的第二坐标系R，定位器件12的第三坐标系O，医生确定的手术路径是基于第一坐标系的，还需要获取不同坐标系之间的坐标变换关系，实现上述三个坐标系的定位对准，才能够使得医生基于三维图像所规划的手术路径传递给机械手臂15，并使得机械手臂15在目标部位的对应位置进行操作。

在建立不同坐标系之间的坐标变换关系时，可以先统一三个坐标系的向量空间方向，这是因为定位器件12的定位部位于整个系统的上方，对它而言XYZ的方向跟位于系统同海拔侧的成像器件11的XYZ方向显然是不同的，同样地，定位器件12的XYZ的方向与机械手臂15的XYZ方向也是不同的，如下所示，可以通过坐标矩阵转置统一三个坐标系的向量空间方向。

多个坐标点可以确定一个立体构型，可以基于该原理实现坐标系的转化。所述坐标系处理器13可以从所述第一坐标系中选择至少四个第一参考点，确定所述至少四个第一参考点在所述第一坐标系中的第一坐标值和在所述第二坐标系中的第二坐标值，根据所述第一坐标值和所述第二坐标值计算得到表征所述第一坐标变换关系的第一转换函数；从所述第二坐标系中选择至少四个第二参考点，确定所述至少四个第二参考点在所述第二坐标系中的第三坐标值和在所述第三坐标系中的第四坐标值，根据所述第三坐标值和所述第四坐标值计算得到表征所述第二坐标变换关系的第二转换函数。

一具体示例中，第二坐标系的参考点坐标为

第一坐标系的参考点坐标为

第三坐标系的参考点坐标为

可以先实现坐标系O和坐标系M之间的转换，再实现坐标系M和坐标系R之间的转换，则可以获得两个转换函数

和

其中，

为坐标系R和坐标系M之间的转换函数，

为坐标系O和坐标系M之间的转换函数。

上述转换函数中，

和

中的参数 可以通过高斯消去法求解，在求解后，即可得到坐标系R和坐标系M之间的转换函数

坐标系O和坐标系M之间的转换函数

还可以根据这两个转换函数得到坐标系R和坐标系O之间的转换函数

从而能够获得任两个坐标系之间的坐标变换关系。

这样，在用户通过用户界面输入基于第一坐标系的手术路径后，所述控制器14可以将手术路径根据所述第一坐标变换关系变换成所述第二坐标系上的第一坐标轨迹，根据所述第二坐标变换关系将所述第一坐标轨迹变换成所述第三坐标系上的第二坐标轨迹，并根据所述第二坐标轨迹控制所述机械手臂15对所述目标部位进行手术。

通过本实施例的技术方案，医生可以控制手术机器人系统准确地执行多种医生人工无法进行的针对病灶器官的精确手术，且具有创伤小、感染性低、手术方式灵活等优势。

本公开实施例还提供了一种手术机器人系统的控制设备，包括：存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上所述的手术机器人系统的控制方法中的步骤。

本公开实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上所述的手术机器人系统的控制方法中的步骤。

在本公开各方法实施例中，所述各步骤的序号并不能用于限定各步骤的先后顺序，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，对各步骤的先后变化也在本公开的保护范围之内。

需要说明，本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于实施例而言，由于其基本相似于产品实施例，所以描述得比较简单，相关之处参见产品实施例的部分说明即可。

除非另外定义，本公开使用的技术术语或者科学术语应当为本公开所属领域内具有一般技能的人士所理解的通常意义。本公开中使用的“第一”、“第二”以及类似的词语并不表示任何顺序、数量或者重要性，而只是用来区分不 同的组成部分。“包括”或者“包含”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同，而不排除其他元件或者物件。“连接”或者“相连”等类似的词语并非限定于物理的或者机械的连接，而是可以包括电性的连接，不管是直接的还是间接的。“上”、“下”、“左”、“右”等仅用于表示相对位置关系，当被描述对象的绝对位置改变后，则该相对位置关系也可能相应地改变。

可以理解，当诸如层、膜、区域或基板之类的元件被称作位于另一元件“上”或“下”时，该元件可以“直接”位于另一元件“上”或“下”，或者可以存在中间元件。

在上述实施方式的描述中，具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。

以上所述，仅为本公开的具体实施方式，但本公开的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本公开揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本公开的保护范围之内。因此，本公开的保护范围应以所述权利要求的保护范围为准。

Claims (19)

1. 一种手术机器人系统，其中，包括：

   成像器件，用于对待手术的目标部位进行扫描，得到目标部位的成像数据；

   机械手臂，所述机械手臂前端携带有手术器件；

   定位器件，用于对所述目标部位进行定位；

   坐标系处理器，用于生成并存储将坐标从所述成像数据的第一坐标系变换成所述机械手臂的第二坐标系的第一坐标变换关系，生成并存储将坐标从所述机械手臂的第二坐标系变换成所述定位器件的第三坐标系的第二坐标变换关系；

   控制器，用于根据所述成像数据生成所述目标部位在所述第一坐标系的三维图像，通过用户界面展示所述三维图像，接收用户输入的手术路径，根据所述手术路径、所述第一坐标变换关系和所述第二坐标变换关系控制所述机械手臂对所述目标部位进行手术。
2. 根据权利要求1所述的手术机器人系统，其中，所述控制器具体用于将用户通过所述用户界面输入的所述手术路径根据所述第一坐标变换关系变换成所述第二坐标系上的第一坐标轨迹，根据所述第二坐标变换关系将所述第一坐标轨迹变换成所述第三坐标系上的第二坐标轨迹，并根据所述第二坐标轨迹控制所述机械手臂对所述目标部位进行手术。
3. 根据权利要求1所述的手术机器人系统，其中，所述成像数据包括多张所述目标部位的二维剖面图像，所述控制器具体用于获取其中一张二维剖面图像中的感兴趣区域，确定所述感兴趣区域的边界；重复上述步骤，直至获取所有二维剖面图像的感兴趣区域的边界；根据所有二维剖面图像的感兴趣区域的边界进行几何构型，得到所述目标部位的三维图像。
4. 根据权利要求3所述的手术机器人系统，其中，所述控制器具体用于将所有二维剖面图像的感兴趣区域的边界信息变换为所述第一坐标系中的点群，根据所述点群生成所述目标部位的三维图像。
5. 根据权利要求1所述的手术机器人系统，其中，所述坐标系处理器具体用于从所述第一坐标系中选择至少四个第一参考点，确定所述至少四个第一参考点在所述第一坐标系中的第一坐标值和在所述第二坐标系中的第二坐标值，根据所述第一坐标值和所述第二坐标值计算得到表征所述第一坐标变换关系的第一转换函数；从所述第二坐标系中选择至少四个第二参考点，确定所述至少四个第二参考点在所述第二坐标系中的第三坐标值和在所述第三坐标系中的第四坐标值，根据所述第三坐标值和所述第四坐标值计算得到表征所述第二坐标变换关系的第二转换函数。
6. 根据权利要求1所述的手术机器人系统，其中，所述成像器件包括：

   基座；

   C形臂，设置于所述基座上，且所述C形臂的两端分别设置有射线发射部和射线接收部，在对所述目标部位进行扫描时，所述目标部位位于所述射线发射部和所述射线接收部之间。
7. 根据权利要求1所述的手术机器人系统，其中，所述定位器件包括：

   附着或接近于所述目标部位进行配置的定位标记；

   处于不同位置的至少两个光学发射器件，用于发射特定光线；

   定位部，用于接收所述定位标记反射的特定光线，并根据接收到的特定光线确定所述定位标记在所述第三坐标系中的空间位置。
8. 根据权利要求1所述的手术机器人系统，其中，所述机械手臂包括：

   旋转部，携带有手术器件，以两个旋转轴中的至少一个旋转轴为中心，使所述手术器件旋转；

   移动部，其使所述旋转部向三个轴中至少一个轴方向移动。
9. 根据权利要求8所述的手术机器人系统，其中，所述移动部包括：

   第一方向驱动部，沿着第一轴方向进行移动；

   第二方向驱动部，连接于所述第一方向驱动部，沿着第二轴方向进行移动；

   第三方向驱动部，连接于所述第二方向驱动部，沿着第三轴方向进行移动；

   所述旋转部包括：

   第一旋转驱动部，包括连接于所述第三方向驱动部的一端，以第一旋转轴为中心旋转；及

   第二旋转驱动部，包括连接于所述第一旋转驱动部的一端，以第二旋转轴为中心旋转，所述手术器件附着于所述第二旋转驱动部。
10. 一种手术机器人系统的控制方法，其中，包括：

    成像器件对待手术的目标部位进行扫描，得到目标部位的成像数据；

    定位器件对所述目标部位进行定位；

    坐标系处理器生成并存储将坐标从所述成像数据的第一坐标系变换成机械手臂的第二坐标系的第一坐标变换关系，生成并存储将坐标从所述机械手臂的第二坐标系变换成所述定位器件的第三坐标系的第二坐标变换关系；

    控制器根据所述成像数据生成所述目标部位在所述第一坐标系的三维图像，通过用户界面展示所述三维图像，接收用户输入的手术路径，根据所述手术路径、所述第一坐标变换关系和所述第二坐标变换关系控制所述机械手臂对所述目标部位进行手术。
11. 根据权利要求10所述的手术机器人系统的控制方法，其中，所述控制所述机械手臂对所述目标部位进行手术包括：

    所述控制器将用户通过所述用户界面输入的所述手术路径根据所述第一坐标变换关系变换成所述第二坐标系上的第一坐标轨迹，根据所述第二坐标变换关系将所述第一坐标轨迹变换成所述第三坐标系上的第二坐标轨迹，并根据所述第二坐标轨迹控制所述机械手臂对所述目标部位进行手术。
12. 根据权利要求10所述的手术机器人系统的控制方法，其中，所述成像数据包括多张所述目标部位的二维剖面图像，生成所述三维图像包括：

    所述控制器获取其中一张二维剖面图像中的感兴趣区域，确定所述感兴趣区域的边界；重复上述步骤，直至获取所有二维剖面图像的感兴趣区域的边界；根据所有二维剖面图像的感兴趣区域的边界进行几何构型，得到所述目标部位的三维图像。
13. 根据权利要求12所述的手术机器人系统的控制方法，其中，生成所 述目标部位在所述第二坐标系的三维图像包括：

    所述控制器将所有二维剖面图像的感兴趣区域的边界信息变换为所述第一坐标系中的点群，根据所述点群生成所述目标部位的三维图像。
14. 根据权利要求10所述的手术机器人系统的控制方法，其中，生成所述第一坐标变换关系和所述第二坐标变换关系包括：

    所述坐标系处理器从所述第一坐标系中选择至少四个第一参考点，确定所述至少四个第一参考点在所述第一坐标系中的第一坐标值和在所述第二坐标系中的第二坐标值，根据所述第一坐标值和所述第二坐标值计算得到表征所述第一坐标变换关系的第一转换函数；从所述第二坐标系中选择至少四个第二参考点，确定所述至少四个第二参考点在所述第二坐标系中的第三坐标值和在所述第三坐标系中的第四坐标值，根据所述第三坐标值和所述第四坐标值计算得到表征所述第二坐标变换关系的第二转换函数。
15. 根据权利要求10所述的手术机器人系统的控制方法，其中，所述成像器件包括：基座；C形臂，设置于所述基座上，且所述C形臂的两端分别设置有射线发射部和射线接收部，在对所述目标部位进行扫描时，所述目标部位位于所述射线发射部和所述射线接收部之间；得到目标部位的成像数据包括：

    所述射线发射部发出射线；

    所述射线接收部接收穿过所述目标部位的射线，根据接收到的射线信息生成所述成像数据。
16. 根据权利要求10所述的手术机器人系统的控制方法，其中，所述定位器件包括：附着或接近于所述目标部位进行配置的定位标记；处于不同位置的至少两个光学发射器件，用于发射特定光线；对所述目标部位进行定位包括：

    定位部接收所述定位标记反射的特定光线，并根据接收到的特定光线确定所述定位标记在所述第三坐标系中的空间位置。
17. 根据权利要求10所述的手术机器人系统的控制方法，其中，所述机械手臂包括：旋转部，携带有手术器件，以两个旋转轴中的至少一个旋转轴 为中心，使所述手术器件旋转；移动部，其使所述旋转部向三个轴中至少一个轴方向移动；

    对所述目标部位进行手术包括：

    所述控制器通过所述移动部使所述旋转部向三个轴中至少一个轴方向移动；

    所述控制器通过所述旋转部使所述手术器件，以两个旋转轴中的至少一个旋转轴为中心旋转。
18. 一种手术机器人系统的控制设备，其中，包括：存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求10至17中任一项所述的手术机器人系统的控制方法中的步骤。
19. 一种计算机可读存储介质，其中，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求10至17中任一项所述的手术机器人系统的控制方法中的步骤。

Images