CN106113067B - 一种基于双目视觉的双臂移动机器人系统 - Google Patents

Abstract

本发明提供一种基于双目视觉的双臂移动机器人系统，所述机器人具有一定自主性和智能性。所述系统包括：双目摄像头，用于实时采集目标物体的图像；工控机，用于依据双目摄像头采集的图像，得到目标物体的位置信息，并依据目标物体的位置信息生成电机控制指令及机械臂控制指令；串口协议转换器，用于对生成的电机控制指令及机械臂控制指令进行协议转换，并将转换后生成的电机控制指令及机械臂控制指令分别发送至移动底盘及机械臂；移动底盘，用于依据接收到的电机控制指令进行移动，使得机器人移动至目标物体所在的位置；机械臂，用于依据接收到的机械臂控制指令操作目标物体。本发明适用于机器人自主作业技术领域。

Description

一种基于双目视觉的双臂移动机器人系统

技术领域

本发明涉及机器人自主作业技术领域，特别是指一种基于双目视觉的双臂移动机器人系统。

背景技术

随着物联网、通信技术、视觉技术、智能技术的不断进步以及人类需求的不断增加，机器人的发展已经成为一种必然趋势，无论是在工业、医疗、家居、军事等各个领域，智能机器人都将为其提供巨大的便利，也必能颠覆传统的行业模式，发挥着前所未有的作用。但现有的很多机器人功能单一、智能化程度还相对较低，且多数都是非自主或半自主的工作模式，缺乏一定的自主性和智能性。例如，虽然有些机器人可以通过传感技术和无线传输技术实现无线遥控，但大多数仍属于单向控制，无法形成反馈实现自主作业。

尽管现在机器人的使用已相对广泛，但大多数的应用还是非自主作业，在某些特殊的环境下还需要人为的参与，尤其是在一些恶劣的工作环境下，安全系数低，对人体会有一定的伤害，导致面临的问题依旧比较严峻。

发明内容

本发明要解决的技术问题是提供一种基于双目视觉的双臂移动机器人系统，以解决现有技术所存在的机器人智能化程度相对较低，缺乏一定的自主性和智能性的问题。

为解决上述技术问题，本发明实施例提供一种基于双目视觉的双臂移动机器人系统，包括：双目摄像头、工控机、串口协议转换器、机械臂及移动底盘；其中，

所述双目摄像头，用于实时采集目标物体的图像，并将采集到的所述图像上传至所述工控机；

所述工控机，用于对接收到的所述图像进行处理，得到所述目标物体的位置信息，并依据所述目标物体的位置信息生成电机控制指令及机械臂控制指令，并将生成的所述电机控制指令及机械臂控制指令发送至所述串口协议转换器；

所述串口协议转换器，用于对接收到的所述电机控制指令及机械臂控制指令进行协议转换，并将转换后生成的电机控制指令及机械臂控制指令分别发送至所述移动底盘及机械臂；

所述移动底盘，用于依据接收到的所述电机控制指令进行移动，使得所述机器人移动至所述目标物体所在的位置；

所述机械臂，用于依据接收到的所述机械臂控制指令操作所述目标物体。

进一步地，所述双目摄像头包括：第一摄像头及第二摄像头；所述第一摄像头及第二摄像头位于所述机器人的头部，呈左右对称分布。

进一步地，所述工控机包括：协同控制中心模块；

所述协同控制中心模块，具体用于对所述双目摄像头采集到的图像进行目标检测，识别所述图像中的目标物体并得到所述目标物体在第一摄像及第二摄像头下的图像坐标，将所述目标物体在第一摄像及第二摄像头下的图像坐标转换成所述目标物体的空间三维坐标，并依据得到的所述目标物体的空间三维坐标生成所述电机控制指令及机械臂控制指令，并将所述电机控制指令及机械臂控制指令发送至所述串口协议转换器。

进一步地，所述工控机还包括：显示器；

所述协同控制中心模块，具体用于根据接收到的所述图像，通过Hough圆检测算法和轮廓提取算法识别出所述图像中的所述目标物体并得到所述目标物体在第一摄像及第二摄像头下的图像坐标，根据所述目标物体在第一摄像及第二摄像头下的图像坐标，通过最小二乘法得到所述目标物体的空间三维坐标，并依据得到的所述目标物体的空间三维坐标生成所述电机控制指令及机械臂控制指令，并将所述电机控制指令及机械臂控制指令发送至所述串口协议转换器；还用于将识别出的所述目标物体、得到的所述目标物体在第一摄像及第二摄像头下的图像坐标显示在所述显示器上。

进一步地，所述协同控制中心模块，还用于在所述双目摄像头采集所述目标物体的图像之前，对所述双目摄像头进行标定、校正、匹配所述协同控制中心模块，还用于在所述双目摄像头采集所述目标物体的图像之前，对所述双目摄像头进行标定、校正、匹配。

进一步地，所述协同控制中心模块，还用于在所述双目视觉模块采集所述目标物体的图像之前，利用张正友标定方法对所述双目摄像头进行标定，利用Bouguet极线校正方法或Hartley校正方法对所述双目摄像头进行校正，利用BM匹配方法或SGBM匹配方法对所述双目摄像头进行匹配。

进一步地，所述串口协议转换器包括：串口协议转换模块；

所述串口协议转换模块，用于对接收到的所述电机控制指令及机械臂控制指令进行协议转换，并将转换后生成的十六进制电机控制指令及十六进制机械臂控制指令分别发送至所述移动底盘及机械臂。

进一步地，所述机械臂包括多个数字舵机，由所述多个数字舵机构成两个各具有三自由度的机械臂；

两个机械臂呈左右对称分布在机器人的两侧，各数字舵机之间通过串联的方式连接。

进一步地，所述移动底盘包括：电机驱动模块及移动装置；

所述移动装置包括：伺服电机、全向轮、码盘；

所述电机驱动模块，用于根据所述串口协议转换模块发送的所述电机控制指令，驱动所述伺服电机控制所述全向轮进行运动，并依据所述码盘产生的码盘信号得到所述机器人的当前位置信息，并将所述机器人的当前位置信息通过所述串口协议转换模块上传至所述协同控制中心模块。

进一步地，所述串口协议转换模块通过第一R232通信串口与所述工控机相连；

所述串口协议转换模块通过第一RS485通信串口与所述机械臂相连；

所述串口协议转换模块通过第二RS485通信串口与所述电机驱动模块相连。

本发明的上述技术方案的有益效果如下：

上述方案中，通过双目摄像头实时采集目标物体的图像；通过工控机对采集的所述图像进行处理，得到目标物体的位置信息，并依据目标物体的位置信息生成电机控制指令及机械臂控制指令，并将生成的电机控制指令及机械臂控制指令发送至串口协议转换器；通过串口协议转换器对所述电机控制指令及机械臂控制指令进行协议转换，并将转换后生成的电机控制指令及机械臂控制指令分别发送至移动底盘及机械臂，使得机器人通过移动底盘移动至目标物体所在的位置，并使得机械臂依据所述机械臂控制指令操作目标物体。这样，根据双目摄像头采集到的目标物体的图像，使得机器人能够自主移动至所述目标物体所在的位置，并去操作该目标物体，所述机器人具有一定自主性和智能性。

附图说明

图1为本发明实施例提供的基于双目视觉的双臂移动机器人系统的结构示意图；

图2为本发明实施例提供的基于双目视觉的双臂移动机器人系统的详细结构示意图；

图3为本发明实施例提供的基于双目视觉的双臂移动机器人系统的工作流程示意图；

图4为本发明实施例提供的生成目标物体的空间三维坐标的工作流程示意图；

图5为本发明实施例提供的实现机器人自主移动的工作流程示意图。

具体实施方式

为使本发明要解决的技术问题、技术方案和优点更加清楚，下面将结合附图及具体实施例进行详细描述。

本发明针对现有的机器人智能化程度相对较低，缺乏一定的自主性和智能性的问题，提供一种基于双目视觉的双臂移动机器人系统。

实施例一

参看图1所述，本发明实施例提供的基于双目视觉的双臂移动机器人系统，包括:双目摄像头1、工控机2、串口协议转换器5、机械臂4及移动底盘3；其中，

所述双目摄像头1，用于实时采集目标物体的图像，并将采集到的所述图像上传至所述工控机2；

所述工控机2，用于对接收到的所述图像进行处理，得到所述目标物体的位置信息，并依据所述目标物体的位置信息生成电机控制指令及机械臂4控制指令，并将生成的所述电机控制指令及机械臂4控制指令发送至所述串口协议转换器5；

所述串口协议转换器5，用于对接收到的所述电机控制指令及机械臂4控制指令进行协议转换，并将转换后生成的电机控制指令及机械臂4控制指令分别发送至所述移动底盘3及机械臂4；

所述移动底盘3，用于依据接收到的所述电机控制指令进行移动，使得所述机器人移动至所述目标物体所在的位置；

所述机械臂4，用于依据接收到的所述机械臂4控制指令操作所述目标物体。

本发明实施例所述的基于双目视觉的双臂移动机器人系统，通过双目摄像头实时采集目标物体的图像；通过工控机对采集的所述图像进行处理，得到目标物体的位置信息，并依据目标物体的位置信息生成电机控制指令及机械臂控制指令，并将生成的电机控制指令及机械臂控制指令发送至串口协议转换器；通过串口协议转换器对所述电机控制指令及机械臂控制指令进行协议转换，并将转换后生成的电机控制指令及机械臂控制指令分别发送至移动底盘及机械臂，使得机器人通过移动底盘移动至目标物体所在的位置，并使得机械臂依据所述机械臂控制指令操作目标物体。这样，根据双目摄像头采集到的目标物体的图像，使得机器人能够自主移动至所述目标物体所在的位置，并去操作该目标物体，所述机器人具有一定自主性和智能性。

本实施例中，所述电机控制指令及机械臂4控制指令可以合称为控制指令。

在前述基于双目视觉的双臂移动机器人系统的具体实施方式中，进一步地，所述双目摄像头1包括：第一摄像头及第二摄像头；所述第一摄像头及第二摄像头位于所述机器人的头部，呈左右对称分布。

本实施例中，所述双目摄像头1包括：第一摄像头及第二摄像头，所述第一摄像头及第二摄像头可以为型号相同的通用串行总线(Universal Serial Bus，USB)互补金属氧化物半导体(Complementary Metal Oxide Semiconductor，CMOS)摄像头，所述USB CMOS摄像头位于机器人头部、呈左右对称分布，因此，可以称分布在左侧的摄像头为左摄像头，分布在右侧的摄像头为右摄像头，左摄像及右摄像头可以合称为左右摄像头，左摄像头及右摄像头采集的图像可以合称为左右图像；所述左右摄像头的分辨率为640*480；所述左右摄像头分别可以通过USB线连接到所述工控机2上。

本实施例中，如图2所示，所述双目摄像头1包括：双目视觉模块；所述双目视觉模块用于实时采集所述目标物体的图像，所述图像包括：左摄像头采集到的图像和右摄像头采集到的图像，因此，所述图像也称为左右图像；并将采集的左右图像上传至所述工控机2，由所述工控机2中的目标物体识别功能对所述左右图像中的目标物体进行识别，目标物体的准确识别是机器人进行有效作业的主要条件，也是最为关键的一环。

在前述基于双目视觉的双臂移动机器人系统的具体实施方式中，进一步地，所述工控机2包括：协同控制中心模块；

所述协同控制中心模块，具体用于对所述双目摄像头1采集到的图像进行目标检测，识别所述图像中的目标物体并得到所述目标物体在第一摄像及第二摄像头下的图像坐标，将所述目标物体在第一摄像及第二摄像头下的图像坐标转换成所述目标物体的空间三维坐标，并依据得到的所述目标物体的空间三维坐标生成所述电机控制指令及机械臂4控制指令，并将所述电机控制指令及机械臂4控制指令发送至所述串口协议转换器5。

本实施例中，所述工控机2的操作系统是Windows XP，所述工控机2包括：协同控制中心模块；所述Windows XP作为所述协同控制中心模块的运行环境。

本实施例中，由所述协同控制中心模块中的目标物体识别功能对采集到的图像进行目标检测，识别所述图像中的目标物体，实现对目标物体的识别检测，并得到所述目标物体在第一摄像及第二摄像头下的图像坐标，将所述目标物体在第一摄像及第二摄像头下的图像坐标转换成所述目标物体的空间三维坐标，并依据得到的所述目标物体的空间三维坐标生成所述电机控制指令及机械臂4控制指令，接着，可以通过RS232串口通信方式将所述电机控制指令及机械臂4控制指令发送至所述串口协议转换器5，使所述串口协议转换器5依据所述电机控制指令及机械臂4控制指令通过不同串口发送不同控制指令实现对机械臂4和移动底盘3的动作规划。

本实施例中，所述协同控制中心模块作为整个系统的控制枢纽，可以将双目摄像头1和串口协议转换器5有效的关联起来，增强了所述协同控制中心模块与所述双目摄像头1和串口协议转换器5的协同作用。一旦目标物体的位置发生变化，机器人能够通过串口协议转换器5发送相关控制指令，从而对机器人的动作进行调整，也就是说，所述机器人能够实时识别、跟踪目标物体。

在前述基于双目视觉的双臂移动机器人系统的具体实施方式中，进一步地，所述工控机2还包括：显示器；

所述协同控制中心模块，具体用于根据接收到的所述图像，通过霍夫(Hough)圆检测算法和轮廓提取算法识别出所述图像中的所述目标物体并得到所述目标物体在第一摄像及第二摄像头下的图像坐标，根据所述目标物体在第一摄像及第二摄像头下的图像坐标，通过最小二乘法得到所述目标物体的空间三维坐标，并依据得到的所述目标物体的空间三维坐标生成所述电机控制指令及机械臂4控制指令，并将所述电机控制指令及机械臂4控制指令发送至所述串口协议转换器5；还用于将识别出的所述目标物体、得到的所述目标物体在第一摄像及第二摄像头下的图像坐标显示在所述显示器上。

本实施例中，所述工控机2还包括：显示器；所述协同控制中心模块可以利用Hough圆检测算法、轮廓提取算法对所述左右图像中的目标物体的特征进行提取和识别，并得到所述目标物体在左右图像中的图像坐标，同时，还可以将识别出的左右图像中的目标物体及所述目标物体在左右图像中的图像坐标分开显示在显示屏上，同时也能将实时采集的左右图像，对所述左右图像的实时处理过程均显示在显示屏上，便于能够实时观察到图像处理情况，提高了用户对其机器人工作的可视性和可控性。

本实施例中，根据所述目标物体在左右图像中的图像坐标，可以利用最小二乘法得到所述目标物体的空间三维坐标，再通过RS232串口通信方式将得到所述目标物体的空间三维坐标进行处理生成的所述电机控制指令及机械臂4控制指令发送给所述串口协议转换器5，经所述串口协议转换器5处理和分配后，将所述电机控制指令及机械臂4控制指令分别发送至所述移动底盘3和机械臂4，从而实现机器人的控制功能。本实施例中，所述协同控制中心模块与所述串口协议转换器5的协同配合能够为机器人提供良好稳定的控制指令。

在前述基于双目视觉的双臂移动机器人系统的具体实施方式中，进一步地，所述协同控制中心模块，还用于在所述双目摄像头1采集所述目标物体的图像之前，对所述双目摄像头1进行标定、校正、匹配。

本实施例中，在所述双目摄像头1采集所述目标物体的图像之前，通过所述协同控制中心模块首先利用张正友标定法以及Bouguet极线校正方法或者Hartley校正方法进行双目摄像头1的标定、校正作业，得到标定后的数据，进而基于所得的标定数据，利用BM(Boyer-Moore算法)或半全局块匹配算法(Semi-Global Block Matching，SGBM)对所述双目摄像头1进行匹配，得到双目摄像头1的参数。

本实施例中，作为一个可选实施例，所述协同控制中心模块，还用于在所述双目视觉模块采集所述目标物体的图像之前，利用张正友标定方法对所述双目摄像头1进行标定，利用Bouguet极线校正方法或Hartley校正方法对所述双目摄像头1进行校正，利用BM匹配方法或SGBM匹配方法对所述双目摄像头1进行匹配。在前述基于双目视觉的双臂移动机器人系统的具体实施方式中，进一步地，所述串口协议转换器5包括：串口协议转换模块；

所述串口协议转换模块，用于对接收到的所述电机控制指令及机械臂4控制指令进行协议转换，并将转换后生成的十六进制电机控制指令及十六进制机械臂4控制指令分别发送至所述移动底盘3及机械臂4。

本实施例中，以机械臂4为例，可以通过所述十六进制机械臂4控制指令准确地控制机械臂4各关节的旋转角度，使机械臂4的执行器末端精确地到达所述目标物体的位置，从而操作所述目标物体，例如，抓取所述目标物体。

在前述基于双目视觉的双臂移动机器人系统的具体实施方式中，进一步地，所述机械臂4包括多个数字舵机，由所述多个数字舵机构成两个各具有三自由度的机械臂4；

两个机械臂4呈左右对称分布在机器人的两侧，各数字舵机之间通过串联的方式连接。

本实施例中，所述机械臂4可以包括：四个RX-64数字舵机及三个RX-28数字舵机，所述数字舵机均接受十六进制数组指令。由这7个数字舵机构成两个各具有三自由度的机械臂4，两个机械臂4呈左右对称分布在机器人两侧，各数字舵机之间呈串联方式连接，通过RS485通信方式，从一台数字舵机的一端接收来自于串口协议转换模块发送的十六进制机械臂4控制指令，由于各数字舵机之间呈串联方式连接，只需向一台数字舵机发送十六进制机械臂4控制指令，就可完成对所有数字舵机的控制。

在前述基于双目视觉的双臂移动机器人系统的具体实施方式中，进一步地，所述移动底盘3包括：电机驱动模块及移动装置；

所述移动装置包括：伺服电机、全向轮、码盘；

所述电机驱动模块，用于根据所述串口协议转换模块发送的所述电机控制指令，驱动所述伺服电机控制所述全向轮进行运动，并依据所述码盘产生的码盘信号得到所述机器人的当前位置信息，并将所述机器人的当前位置信息通过所述串口协议转换模块上传至所述协同控制中心模块。

本实施例中，所述移动底盘3包括：电机驱动模块及移动装置；其中，所述移动装置包括：三个伺服电机、三个全向轮、两个互成90度的码盘；每个全向轮分别对应一个伺服电机来驱动，且这三个全向轮相互成120度角，所述码盘用于反馈码盘信号。

本实施例中，所述电机驱动模块以STM32为主控芯片，包括：电机供电端、两路RS485串口通信端，其中，一路RS485串口通信端，用来接收来自于串口协议转换模块发送的电机控制指令，根据接收到的所述电机控制指令在电机驱动模块通过PWM脉冲调制原理进行伺服电机的调速和正逆转的控制，从而控制机器人的移动情况；同时，通过另一路RS485串口通信端，用来接收来自于码盘反馈的码盘信号，所述码盘信号经所述电机驱动模块处理后得到所述机器人的当前位置信息，并将所述机器人的当前位置信息再通过所述串口协议转换模块返回至所述协同控制中心模块，由所述协同控制中心模块进行分析，调整电机控制指令并发送调整后的电机控制指令控制所述移动底盘3的动作，从而构成一个闭环系统，使得机器人能够自主移动至所述目标物体所在的位置，并操作所述目标物体，且所述机器人具有实时识别、跟踪目标物体的能力。

本实施例中，三个全向轮相互成120度角能够平衡自身重心，使得所述机器人具有稳定的速度且运动灵活，所述全向轮与码盘一起实现了机器人在室内安全、自由活动的同时，还提供了机器人的当前位置信息。

在前述基于双目视觉的双臂移动机器人系统的具体实施方式中，进一步地，所述串口协议转换模块通过第一R232通信串口与所述工控机2相连；

所述串口协议转换模块通过第一RS485通信串口与所述机械臂4相连；

所述串口协议转换模块通过第二RS485通信串口与所述电机驱动模块相连。

本实施例中，所述串口协议转换模块是以STM32为主处理芯片，配有一路RS232通信串口，两路RS485通信串口，实现一进多出的功能。其中，一路RS232通信串口连接工控机2作为输入端，两路RS485作为输出端，其中，一路RS485连接机械臂4，另一路RS485连接电机驱动模块。在所述串口协议转换模块中，接收来自工控机2处理目标物体的空间三维坐标后生成的所述电机控制指令及机械臂4控制指令，之后将所述电机控制指令及机械臂4控制指令进行响应处理和任务分配，通过两路RS485串口将所述电机控制指令及机械臂4控制指令分别发送给电机驱动模块和机械臂4。

本实施例中，所述串口协议转换模块作为整个系统的连接枢纽，将协同控制中心模块、机械臂4、电机驱动模块有效的连接起来，节省了串口资源，提高了实时性与多任务性。

本实施例中，所述串口协议转换模块与所述协同控制中心模块的连接，使得工控机2在完成相应的图像处理，生成所述电机控制指令及机械臂4控制指令后，有效的将所述电机控制指令及机械臂4控制指令通过RS232串口通信传输到所述串口协议转换模块，由所述串口协议转换模块依据指令和多任务处理原则进行任务分配，充分增强了信息传输的实时效果。所述协同控制中心模块与串口协议转换模块的连接是机器人是否能够做出反应的关键一环，也是指令传输的重要依赖。

本发明实施例中，所述目标物体以网球为例，结合图3、图4、图5进行说明：

如图3所述，协同控制中心模块在完成双目摄像头1的标定、校正、匹配之后，通过双目摄像头1采集网球的图像，即左右摄像头采集的网球所处环境的左右图像，对左右图像中的网球分别进行检测、识别，具体的，可以通过Hough圆检测算法和轮廓提取算法得到网球在左右图像中的图像坐标，接着，通过最小二乘法将左右图像的网球坐标转换成空间三维坐标，生成控制指令，通过USB转RS232发送给串口协议转换模块，经所述串口协议转换模块分析后，分别通过两路RS485发送给相应的电机驱动模块和机械臂4，同时所述协同控制中心模块依据所述串口协议转换模块上传的所述机器人的当前位置信息，生成新的控制指令，从而构成一个闭环系统，以实现机器人的自主移动和机械臂4的自主操作。

如图4所述，生成网球的空间三维坐标的具体步骤可以包括：通过协同控制中心模块完成双目摄像头1的标定、校正、匹配，之后，通过双目摄像头1进行图像的采集，在双目摄像头1采集图像之后，通过所述协同控制中心模块对图像进行处理来降低噪声、光照等的干扰，之后，利用霍夫圆检测算法、轮廓提取算法等对图像中的网球进行检测、识别，识别成功之后，得到网球在左右图像中的图像坐标，并将识别得到的网球实时的显示在显示屏上，还将得到所述网球在左右图像中的图像坐标也显示在所述显示屏上，并通过最小二乘法将得到所述网球的空间三维坐标，为所述协同控制中心模块生成控制指令提供数据依据。

如图5所述，实现机器人自主移动的步骤可以包括：在所述协同控制中心模块对图像数据和坐标数据进行分析后，生成控制指令发送到串口协议转换模块，由串口协议转换模块进行任务分配，通过一路RS485将机械臂4控制指令发送给机械臂4，通过另一路RS485将电机控制指令发送给电机驱动模块，由电机驱动模块驱动伺服电机控制全向轮的移动轨迹，同时将码盘信号反馈给电机驱动模块，由所述电机驱动模块依据所述码盘信号得到所述机器人的当前位置信息，并将所述机器人的当前位置信息再通过所述串口协议转换模块返回至所述协同控制中心模块，由所述协同控制中心模块进行分析，调整电机控制指令并发送调整后的电机控制指令控制所述移动底盘3的动作，从而形成一个闭环系统，有利于实现机器人的自主移动。以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明所述原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (2)

1.一种基于双目视觉的双臂移动机器人系统，其特征在于，包括：双目摄像头、工控机、串口协议转换器、机械臂及移动底盘；其中，

所述双目摄像头，用于实时采集目标物体的图像，并将采集到的所述图像上传至所述工控机；

所述工控机，用于对接收到的所述图像进行处理，得到所述目标物体的位置信息，并依据所述目标物体的位置信息生成电机控制指令及机械臂控制指令，并将生成的所述电机控制指令及机械臂控制指令发送至所述串口协议转换器；

所述串口协议转换器，用于对接收到的所述电机控制指令及机械臂控制指令进行协议转换，并将转换后生成的电机控制指令及机械臂控制指令分别发送至所述移动底盘及机械臂；

所述移动底盘，用于依据接收到的所述电机控制指令进行移动，使得所述机器人移动至所述目标物体所在的位置；

所述机械臂，用于依据接收到的所述机械臂控制指令操作所述目标物体；

其中，所述双目摄像头包括：第一摄像头及第二摄像头；所述第一摄像头及第二摄像头位于所述机器人的头部，呈左右对称分布；

其中，所述工控机包括：协同控制中心模块；

所述协同控制中心模块，具体用于对所述双目摄像头采集到的图像进行目标检测，识别所述图像中的目标物体并得到所述目标物体在第一摄像头及第二摄像头下的图像坐标，将所述目标物体在第一摄像头及第二摄像头下的图像坐标转换成所述目标物体的空间三维坐标，并依据得到的所述目标物体的空间三维坐标生成所述电机控制指令及机械臂控制指令，并将所述电机控制指令及机械臂控制指令发送至所述串口协议转换器；

其中，所述工控机还包括：显示器；

所述协同控制中心模块，具体用于根据接收到的所述图像，通过Hough圆检测算法和轮廓提取算法识别出所述图像中的所述目标物体并得到所述目标物体在第一摄像头及第二摄像头下的图像坐标，根据所述目标物体在第一摄像头及第二摄像头下的图像坐标，通过最小二乘法得到所述目标物体的空间三维坐标，并依据得到的所述目标物体的空间三维坐标生成所述电机控制指令及机械臂控制指令，并将所述电机控制指令及机械臂控制指令发送至所述串口协议转换器；还用于将识别出的所述目标物体、得到的所述目标物体在第一摄像头及第二摄像头下的图像坐标显示在所述显示器上；

其中，所述协同控制中心模块，还用于在所述双目摄像头采集所述目标物体的图像之前，对所述双目摄像头进行标定、校正、匹配；

其中，所述协同控制中心模块，具体用于在所述双目摄像头采集所述目标物体的图像之前，利用张正友标定方法对所述双目摄像头进行标定，利用Bouguet极线校正方法或Hartley校正方法对所述双目摄像头进行校正，利用BM匹配方法或SGBM匹配方法对所述双目摄像头进行匹配；

其中，所述串口协议转换器包括：串口协议转换模块；

所述串口协议转换模块，用于对接收到的所述电机控制指令及机械臂控制指令进行协议转换，并将转换后生成的十六进制电机控制指令及十六进制机械臂控制指令分别发送至所述移动底盘及机械臂；

其中，所述移动底盘包括：电机驱动模块及移动装置；

所述移动装置包括：伺服电机、全向轮、码盘；

所述电机驱动模块，用于根据所述串口协议转换模块发送的所述电机控制指令，驱动所述伺服电机控制所述全向轮进行运动，并依据所述码盘产生的码盘信号得到所述机器人的当前位置信息，并将所述机器人的当前位置信息通过所述串口协议转换模块上传至所述协同控制中心模块；

其中，所述串口协议转换模块通过第一R232通信串口与所述工控机相连；

所述串口协议转换模块通过第一RS485通信串口与所述机械臂相连；

所述串口协议转换模块通过第二RS485通信串口与所述电机驱动模块相连。

2.根据权利要求1所述的基于双目视觉的双臂移动机器人系统，其特征在于，所述机械臂包括多个数字舵机，由所述多个数字舵机构成两个各具有三自由度的机械臂；

两个机械臂呈左右对称分布在机器人的两侧，各数字舵机之间通过串联的方式连接。