CN106003076B - 一种基于立体视觉的喷塑机器人 - Google Patents

一种基于立体视觉的喷塑机器人 Download PDF

Info

Publication number
CN106003076B
CN106003076B CN201610451194.6A CN201610451194A CN106003076B CN 106003076 B CN106003076 B CN 106003076B CN 201610451194 A CN201610451194 A CN 201610451194A CN 106003076 B CN106003076 B CN 106003076B
Authority
CN
China
Prior art keywords
robot
workpiece
spray gun
plastic
spraying
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610451194.6A
Other languages
English (en)
Other versions
CN106003076A (zh
Inventor
肖占春
项书画
朱洪乾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin Ruike Automation Technology Co., Ltd
Original Assignee
徐琳
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 徐琳 filed Critical 徐琳
Priority to CN201610451194.6A priority Critical patent/CN106003076B/zh
Publication of CN106003076A publication Critical patent/CN106003076A/zh
Application granted granted Critical
Publication of CN106003076B publication Critical patent/CN106003076B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1602Programme controls characterised by the control system, structure, architecture
    • B25J9/161Hardware, e.g. neural networks, fuzzy logic, interfaces, processor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • B25J11/005Manipulators for mechanical processing tasks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1602Programme controls characterised by the control system, structure, architecture
    • B25J9/1605Simulation of manipulator lay-out, design, modelling of manipulator
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1656Programme controls characterised by programming, planning systems for manipulators
    • B25J9/1661Programme controls characterised by programming, planning systems for manipulators characterised by task planning, object-oriented languages
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems

Abstract

本发明提供了一种基于立体视觉的喷塑机器人,包括图像获取和处理装置,计算与控制平台,机器人和喷枪装置;通过特殊摄像头采集工件的深度信息,对工件进行三维立体建模,生成喷枪的运动路径与姿态,控制机器人按此路径与姿态运行,喷枪喷出带静电塑粉,完成喷塑粉工作。

Description

一种基于立体视觉的喷塑机器人
技术领域
本发明涉及自动控制设计领域,尤其涉及一种喷涂自动处理和人机交互操作的领域。
背景技术
当前在喷塑有三种途径,一种是人工喷涂,一种是往复机喷涂;第三种是常规机器人喷涂,人工喷涂存在的问题:污染空气、易燃易爆、尘肺病、人难招、质量不稳定;往复机喷涂存在的问题:不柔性、塑粉浪费、回收机占地庞大、价格高、质量差。常规机器人存在的问题是:价格高、没视觉、不柔性。所以无论是投入来说,还是从喷涂质量,以及塑粉利用率来说,当前的喷涂途径存在的费用,质量,利用率,以及存在环保的重大问题,并且对相关行业的人员来说,存在健康安全的隐患。
基于上述问题,所以需要采用一些立体视觉的喷塑机器人,比如说通过特殊摄像头来采集工件的深度信息并进行判断和生成,通过对工件进行三维立体建模,生成喷枪的运动路径与姿态,控制机器人按此路径与姿态运行,喷枪喷出带静电塑粉,完成喷塑粉工作。
发明内容
基于上述问题,本发明采用以下的技术方案:
一种基于立体视觉的喷塑机器人,包括图像获取和处理装置,计算与控制平台,机器人和喷枪装置;
图像获取和处理装置包括激光散斑阵列发射,立体视觉摄像头,深度信息生成装置,立体视觉处理装置;
计算与控制平台包括工件三维立体模型融合装置,喷塑路径与法矢量生成装置,机器人运动控制层,人机输入输出接口,喷粉参数控制装置,局域网,远程无线网接口;
机器人和喷枪装置包括喷枪,多自由度机器人和机器人驱动层;
其中图像获取和处理装置中的激光散斑阵列首先发射通过激光二极管发射出激光,经过光学镜片变换后,投射到工件上,形成带深度编码信息的激光散斑图,立体视觉摄像头拍摄激光散斑图,通过深度信息生成装置计算出工件的深度信息,深度信息即工件上各点距离摄像头的距离,立体视觉处理装置根据工件的深度信息的集合就可推出工件三维立体形状,进而生成工件的三维立体建模,并发送给计算与控制平台中的工件三维立体模型融合装置;
工件三维立体模型融合装置将得到的工件的三维立体建模进行融合计算并发送给机器人运动控制层;其方法步骤是:首先对立体视觉处理装置生成的工件的三维立体建模进行立体建模,并生成喷塑路径与法矢量;将生成的喷塑路径和多自由度机器人机器人的末端和喷枪的枪口的运行轨迹,生成的法矢量及喷枪的枪口的指向这些信息送到机器人运动控制层,生成多自由度机器人各关节的电机的运动参数(例如电机的转速与方向),再将这些运动参数送到机器人运动驱动层,生成驱动电压电流等参数,并把生成的驱动电压电流等参数送给多自由度机器人中的各关节的电机,通过多自由度机器人中的各关节的电机的运动,多自由度机器人机器人整体表现为按生成的喷塑路径与法矢量进行运动;
计算与控制平台中人机输入输出接口与人机交互界面相连,喷粉参数控制装置与储粉器、高压气路、喷粉机构相连,计算与控制平台中局域网与厂级集群监控室相连,通过厂级集群监控室,可以知道当前的多自由度机器人是否运行正常,生成速度,维护周期,易损件的剩余工作寿命等;远程无线网接口与公司远程服务器相连,由公司远程服务器提供数据服务,公司远程服务器产生相应的作用为:软件自动升级,发生故障时的远程维护,授权的客户行为统计等;
机器人和喷枪装置中机器人驱动层与计算与控制平台中工件三维立体模型融合装置相连,由工件三维立体模型融合装置为机器人驱动层提供三维立体建模,机器人驱动层与多自由度机器人相连,给多自由度机器人提供底层驱动;并由多自由度机器人操给喷枪进行法矢量运动进行喷塑,即生成喷枪的运动路径与姿态,控制多自由度机器人按生成的路径与姿态进行运行,喷枪喷出带静电塑粉,完成喷塑粉工作;
进一步地:本发明提供了一种基于立体视觉的喷塑机器人的工作方法,包括
包括对工件进行图像获取和处理的方法,然后进行计算与控制的方法,通过计算与控制的方法使用机器人和喷枪装置对工件进行操作;
图像获取和处理的方法包括激光散斑阵列发射的方法,立体视觉摄像的方法,立体视觉处理的方法,深度信息生成的方法;
计算与控制的方法包括工件三维立体模型融合的方法,喷塑路径与法矢量生成的方法,以及还包括有机器人运动控制层,人机输入输出接口,喷粉参数控制装置,局域网,远程无线网接口;
机器人和喷枪装置包括喷枪,多自由度机器人和机器人驱动层;
其中图像获取和处理的方法中的激光散斑阵列发射的方法首先通过激光二极管发射出激光,经过光学镜片变换后,投射到工件上,形成带深度编码信息的激光散斑图,立体视觉摄像的方法把这些激光散斑图进行拍摄,然后进行深度信息生成的方法,深度信息即工件上各点距离摄像头的距离,立体视觉处理的方法根据工件的深度信息的集合就可计算出工件三维立体形状,进而生成工件的三维立体建模;把生成的所术工件的三维立体建模发送给计算与控制的方法进行操作;
计算与控制的方法包括工件三维立体模型融合的方法;三维立体模型融合的方法将得到的工件的三维立体建模进行融合计算并发送给机器人运动控制层;其方法步骤是:工件的三维立体建模先立体建模,并生成喷塑路径与法矢量;将生成的喷塑路径和多自由度机器人机器人的末端和喷枪的枪口的运行轨迹,生成的法矢量及喷枪的枪口的指向等信息送到机器人运动控制层,生成多自由度机器人各关节的电机的运动参数(例如电机的转速与方向),再将这些运动参数送到机器人运动驱动层,生成驱动电压电流等参数,并把生成的驱动电压电流等参数送给多自由度机器人中的各关节的电机,通过多自由度机器人中的各关节的电机的运动,多自由度机器人机器人整体表现为按生成的喷塑路径与法矢量进行运动;
计算与控制的方法中人机输入输出接口与人机交互界面相连,喷粉参数控制装置与储粉器、高压气路、喷粉机构相连,计算与控制的方法还要通过局域网与厂级集群监控室相连,通过厂级集群监控室,可以知道当前的多自由度机器人是否运行正常,生成速度,维护周期,易损件的剩余工作寿命等;远程无线网接口与公司远程服务器相连,由公司远程服务器提供数据服务,公司远程服务器产生相应的作用为:软件自动升级,发生故障时的远程维护,授权的客户行为统计等;
机器人和喷枪装置由机器人驱动层通过计算与控制的方法中的工件三维立体模型融合的方法进行操作,由工件三维立体模型融合的方法为机器人驱动层提供三维立体建模,机器人驱动层与多自由度机器人相连,给多自由度机器人提供底层驱动;并由多自由度机器人操给喷枪进行法矢量运动进行喷塑,即生成喷枪的运动路径与姿态,控制多自由度机器人按生成的路径与姿态进行运行,喷枪喷出带静电塑粉,完成喷塑粉工作。
附图说明
图1为本发明的体系结构图;
图2为本发明的立体示意图。
具体实施方式
本发明的基于立体视觉的喷塑机器人,在实际应用中,如图1和图2所示,
包括三大部分,其中有图像获取和处理装置,计算与控制平台和机器人和喷枪装置;
图像获取和处理装置包括激光散斑阵列发射,立体视觉摄像头,深度信息生成装置,立体视觉处理装置;
计算与控制平台包括工件三维立体模型融合装置,喷塑路径与法矢量生成装置,机器人运动控制层,人机输入输出接口,喷粉参数控制装置;局域网,远程无线网接口;
机器人和喷枪装置包括喷枪,多自由度机器人和机器人驱动层,在实际应用中,多自由度机器人是多自由度的,例如3轴、4轴、5轴、6轴等;
其中图像获取和处理装置中的激光散斑阵列首先发射通过激光二极管发射出激光,激光,既可以是红外波段的激光,也可以是可见光波段的激光。激光经过光学镜片变换后,投射到工件上,形成带深度编码信息的激光散斑图,立体视觉摄像头既可以是CMOS摄像头,也可以是CCD摄像头。由立体视觉摄像头拍摄激光散斑图,通过深度信息生成装置计算出工件的深度信息,深度信息即工件上各点距离摄像头的距离,立体视觉处理装置根据工件的深度信息的集合就可推出工件三维立体形状,进而生成工件的三维立体建模,并发送给计算与控制平台中的工件三维立体模型融合装置;工件三维立体模型融合装置将得到的工件的三维立体建模进行融合计算并发送给机器人运动控制层;其方法步骤是:工件的三维立体建模先立体建模,并生成喷塑路径与法矢量;将生成的喷塑路径和多自由度机器人机器人的末端和喷枪的枪口的运行轨迹,生成的法矢量及喷枪的枪口的指向这些信息送到机器人运动控制层,生成多自由度机器人各关节的电机的运动参数,再将这些运动参数送到机器人运动驱动层,生成驱动电压电流等参数,并把生成的驱动电压电流等参数送给多自由度机器人中的各关节的电机,通过多自由度机器人中的各关节的电机的运动,多自由度机器人机器人整体表现为按生成的喷塑路径与法矢量进行运动;
计算与控制平台中人机输入输出接口与人机交互界面相连,人机交互人机交互界面,包括触摸屏、按钮开关、鼠标键盘等。喷粉参数控制装置与储粉器、高压气路、喷粉机构相连,计算与控制平台中局域网与厂级集群监控室相连,局域网,既可以是以太网,也可以是其他常见工业通信网,例如RS232,RS485,CAN,等。通过厂级集群监控室,可以知道当前的多自由度机器人是否运行正常,生成速度,维护周期,易损件的剩余工作寿命等;远程无线网接口与公司远程服务器相连,远程无线网接口,可以是GPRS、CDMA等。由公司远程服务器提供数据服务,公司远程服务器产生相应的作用为:软件自动升级,发生故障时的远程维护,授权的客户行为统计等;
机器人和喷枪装置中机器人驱动层与计算与控制平台中工件三维立体模型融合装置相连,由工件三维立体模型融合装置为机器人驱动层提供三维立体建模,机器人驱动层与多自由度机器人相连,给多自由度机器人提供底层驱动;并由多自由度机器人操给喷枪进行法矢量运动进行喷塑,即生成喷枪的运动路径与姿态,控制多自由度机器人按生成的路径与姿态进行运行,喷枪喷出带静电塑粉,完成喷塑粉工作;
实施例2:本发明公开了一种基于立体视觉的喷塑机器人的工作方法,首先进行图像获取和处理,然后进行计算与控制,通过计算与控制来对机器人和喷枪进行操作;
图像获取和处理包括激光散斑阵列发射,立体视觉摄像,立体视觉处理,深度信息生成;
计算与控制包括工件三维立体模型融合,喷塑路径与法矢量生成,机器人运动控制层,人机输入输出接口,喷粉参数控制,局域网,远程无线网接口;
机器人和喷枪包括喷枪,多自由度机器人和机器人驱动层;
具体的方法步骤为:
S101:其中图像获取和处理中的激光散斑阵列首先发射通过激光二极管发射出激光,经过光学镜片变换后,投射到工件上,形成带深度编码信息的激光散斑图,立体视觉摄像把这些激光散斑图进行拍摄,然后进行深度信息生成,深度信息即工件上各点距离摄像头的距离,立体视觉处理装置根据工件的深度信息的集合就可推出工件三维立体形状,进而生成工件的三维立体建模并进行计算与控制,计算与控制包括工件三维立体模型融合方法;
S102:工件三维立体模型融合方法将得到的工件的三维立体建模进行融合计算并发送给机器人运动控制层;其方法步骤是:工件的三维立体建模先立体建模,并生成喷塑路径与法矢量;将生成的喷塑路径和多自由度机器人机器人的末端和喷枪的枪口的运行轨迹,生成的法矢量及喷枪的枪口的指向这些信息送到机器人运动控制层,生成多自由度机器人各关节的电机的运动参数(例如电机的转速与方向),再将这些运动参数送到机器人运动驱动层,生成驱动电压电流等参数,并把生成的驱动电压电流等参数送给多自由度机器人中的各关节的电机,通过多自由度机器人中的各关节的电机的运动,多自由度机器人机器人整体表现为按生成的喷塑路径与法矢量进行运动;
S103:计算与控制还需要一定的人机输入输出接口与人机交互界面相连,喷粉参数控制装置与储粉器、高压气路、喷粉机构相连,计算与控制还要通过局域网与厂级集群监控室相连,通过厂级集群监控室,可以知道当前的多自由度机器人是否运行正常,生成速度,维护周期,易损件的剩余工作寿命等;远程无线网接口与公司远程服务器相连,由公司远程服务器提供数据服务,公司远程服务器产生相应的作用为:软件自动升级,发生故障时的远程维护,授权的客户行为统计等;
S104:机器人和喷枪包含的机器人驱动层通过计算与控制中的工件三维立体模型融合功能部分相连,由工件三维立体模型融合为机器人驱动层提供三维立体建模,机器人驱动层与多自由度机器人相连,给多自由度机器人提供底层驱动;
并由多自由度机器人操给喷枪进行法矢量运动进行喷塑,即生成喷枪的运动路径与姿态,控制多自由度机器人按生成的路径与姿态进行运行,喷枪喷出带静电塑粉,完成喷塑粉工作。
实施例3:一种基于三维视觉的立体喷涂的方法。包括有两台具有三维视觉识别功能的摄像头,一个控制器,一台工业机器人。所述摄像头与控制器相连用于采集三维深度数据,所述控制器与机器人相连用于控制机器人的运动。具体实施如下:两个具有三维立体视觉识别功能的摄像头固定在工件前方,对需要喷涂的工件进行实时拍摄,为了能更全面的拍摄出工件的深度数据,两个摄像头呈度夹角,拍摄完成后生成该工件的表面三维深度数据。再将此深度数据传输给控制器,由控制器内的程序生成三维图像,在三维图像的基础上生成喷涂的喷枪运动轨迹及姿态角,通过控制器将此数据传输给机器人,机器人带动固定其上的喷枪相对应地进行喷涂作业。
机器视觉。根据摄像头拍摄到的红外图像与RGB彩色图像,据此生成出深度图与工件外形图。涉及到红外激光光编码发射、红外线图像传感器、RGB彩色图像传感器、图像采集系统、数据结构与算法、专用光学器件设计、专用电路设计。
相比以前存在的机器视觉,本发明实施例的优点是不受环境光干扰,对各种常见工业零件都能可靠识别,同时性价比提高近百倍。
5轴机器人本体。关键技术在于适合喷塑行业的专用机械传动结构,在于高速运动时,保证机器人本体各部件间谐振频率与自身固有频率的控制。相比目前存在的机器人,本发明实施例可以高速24小时连续运动,寿命长,精度下降速度极低。同时性价比提高十余倍。
整的控制系统。关键技术在于并行高速计算核心,使用了FPGA与ARM结合的SOC处理器。此SOC处理器中的FPGA是一种可灵活编程的超大规模逻辑门电路。一般硬件规模是数十万个逻辑处理单元,能够在同一时间并行运算,根据喷塑机器人的数据结构与特定算法,对FPGA进行合理配置,此SOC的瞬时处理能力可相当于台式电脑数千倍或万倍的计算速度。
另一关键技术在于机器人自适应自学习的运动控制算法。通过一定次数的人工训练,机器人对工件的喷塑特征自动提取,自动提炼规律,提高了机器人的智能,对不同工件的适应度会大幅提高。
另一关键技术,同时打破了国外机器人协议与接口不完全开放的技术垄断壁垒。本发明实施例的通信协议与接口将完全对客户对社会免费开放。
另一关键技术,互联网+,本实施例4中的机器人都预留横向联网,集群控制数据接口与硬件接口。同时机器人都自带PRS模块,实现无线数据横向联网。功能主要有四点:a维护,提醒客户易损件寿命即将到期,提醒检修或保养的时间。
b远程协助,机器人故障时,或遇不明情况时,按动机器人上的求助按钮,远程本发明实施例服务器将命令故障的机器人上传工作诸元参数,必要时可调用摄像头拍摄的现场图像。本发明实施例技术维护人员可通过手机等终端远程解决问题。
c远程升级,本发明实施例会持续提升产品潜能,软件可以远程自动升级,避免机器人机械本体返厂运输。减少维护人员工作量。d大数据,客户使用情况的数据采集、分析、预测。指示市场动向,进而指导研发方向。
实施例3的技术参数与技术指标:
喷塑机器人采用防爆电机与相应器件,符合国家行业规定的粉末环境下的防爆等级。
喷塑机器人具有5个自由度,能够满足喷塑运动的自由度。
喷塑机器人末端喷枪口移动速度0.5-1.5m/s。
触摸屏人机交互界面。
手动微调旋钮。用于人工手动设定参数。
显示:故障报警指示灯。工况欠料或卡位指示灯。
具备手机无线网络通信模块接口。
喷塑机器人本体能移动,具备人工补位能力。
室内工作环境。注意夏季潮湿天气,无凝露,无淋水。-15℃-50℃。
工作电源:AC380V,50Hz。
安装场地要求。室内,平整水泥地面,预埋数个地锚栓,螺母连接。
使用寿命。每天24小时工作,全年无休,5年。
整机重量,小于500Kg。
实施例4:待喷塑的工件人工钩在悬挂传送链上,喷塑系统,通过机器视觉
自动判断待喷的工件形状,据此生成喷塑的三维路径规划,控制5轴喷塑机器人按规划好的路径运行,机器人末端安装的喷枪喷出带正静电的塑粉,工件带负电。
正负电荷吸引原理,导致塑粉被吸附在工件上,传送链将喷上塑粉的零件带动到高温加热区,高温下塑粉融化在工件上,自然冷却后人工摘下零件。完成工件喷塑工作。
主要分为机器视觉子系统、焊接机器人本体子系统、计算与控制子系统、安装机架等部分。
机器视觉子系统,包括红外激光发射装置、光编码产生装置、红外线摄像头、RGB摄像头、视觉处理计算电路、视觉处理算法。
焊接机器人本体子系统,包括伺服电机、谐波减速器、丝杠螺母导轨、直线导轨、安全限位传感器、挂喷枪装置、电机驱动器等。
计算与控制子系统,包括专用处理计算与控制主板、无线模块等。
安装机架,牢固支撑上述结构,在机器人工作时,高速运动的手臂不会引起机架振动。具有接近开关限位、机械限位等额外保护措施,在极端故障情况下,也能保证机器人故障不会过度蔓延。机器人在故障时。
实施例5:喷塑机器人的机器视觉系统、5轴机器人本体、计算与控制子系统都在本发明实施例内部生产组装调试完成,与客户沟通后,现场考察后,再根据客户具体情况设计机架,生产后到现场安装调试后,再将视觉系统、5轴机器人本体、计算与控制系统架设安装在机架上,最终系统联调,客户验收。然后进入投产与维护期。本发明的实施例5可以根据实际情况分为3个主要阶段,第一阶段的第一子阶段实现机器视觉功能,包括光学硬件、电子硬件、机械结构、核心算法。第二子阶段实现计算与控制子系统,包括主控电路板设计、传感器方案设计、通信协议设计、路径生成算法、运动控制算法、整机电源系统。第三子阶段实现5轴机器人本体,包括XYZ的3轴直角坐标运动系、旋转与俯仰运动系、电机驱动与反馈电路、传动与机器人机械结构等。第四子阶段实现机架与安装功能,根据不同的客户现场情况设计不同的机架与安装方式。
本发明能有多种不同形式的具体实施方式,上面结合附图对本发明的技术方案作举例说明,这并不意味着本发明所应用的具体实例只能局限在实施例结构或特定的方法中,本领域的普通技术人员应当了解,上文所提供的具体实施方案只是多种优选用法中的一些示例,任何的实施方式均应在本发明技术方案所要求保护的范围之内。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件和软件来完成。
最后应说明的是:以上所述仅为本发明的优选实施例而已,并不用于限制本发明,尽管参照前述实施例对本发明进行了详细的说明,对于本领域的技术人员来说,其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
有益效果:无需人工干涉,即可自动识别零件外形,自动喷涂。替代了喷涂工人在高粉尘或有害气体环境中的工作,喷涂质量高,塑粉利用率高,并有着环保、柔性、健康、安全的有益效果。

Claims (2)

1.一种基于立体视觉的喷塑机器人,其特征在于:包括图像获取和处理装置,计算与控制平台,机器人和喷枪装置;
所述图像获取和处理装置包括激光散斑阵列发射装置,立体视觉摄像头,深度信息生成装置,立体视觉处理装置;
所述计算与控制平台包括工件三维立体模型融合装置,喷塑路径与法矢量生成装置,机器人运动控制层,人机输入输出接口,喷粉参数控制装置,局域网,远程无线网接口;
所述机器人和喷枪装置包括喷枪,多自由度机器人和机器人运动驱动层;其中所述图像获取和处理装置中的所述激光散斑阵列发射装置首先通过激光二极管发射出激光,经过光学镜片变换后,投射到工件上,形成带深度编码信息的激光散斑图,所述立体视觉摄像头拍摄激光散斑图,通过所述深度信息生成装置计算出工件的深度信息,深度信息即工件上各点距离摄像头的距离,立体视觉处理装置根据所述工件的深度信息的集合就可推出工件三维立体形状,进而生成工件的三维立体模型,并发送给计算与控制平台中的所述工件三维立体模型融合装置;
所述工件三维立体模型融合装置将得到的所述工件的三维立体模型进行融合计算并发送给所述机器人运动控制层;其方法步骤是:首先对所述立体视觉处理装置生成的所述工件的三维立体模型进行处理,并生成喷塑路径与法矢量;
将生成的所述喷塑路径、多自由度机器人的末端、喷枪的枪口的运行轨迹、所述法矢量及所述喷枪的枪口的指向这些信息送到机器人运动控制层,生成所述多自由度机器人各关节的电机的运动参数,再将这些运动参数送到机器人运动驱动层,生成驱动电压电流,并把生成的所述驱动电压电流送给所述多自由度机器人中的各关节的电机,通过所述多自由度机器人中的各关节的电机的运动,所述多自由度机器人整体表现为按生成的所述喷塑路径与法矢量进行运动;所述计算与控制平台中所述人机输入输出接口与人机交互界面相连,喷粉参数控制装置与储粉器、高压气路、喷粉机构相连,所述计算与控制平台中所述局域网与厂级集群监控室相连,通过所述厂级集群监控室,可以知道当前的多自由度机器人是否运行正常,生成速度,维护周期,易损件的剩余工作寿命;
远程无线网接口与公司远程服务器相连,由所述公司远程服务器提供数据服务,所述公司远程服务器产生相应的作用为:软件自动升级,发生故障时的远程维护,授权的客户行为统计;
所述机器人和喷枪装置中所述机器人运动驱动层与所述计算与控制平台中所述工件三维立体模型融合装置相连,由所述工件三维立体模型融合装置为所述机器人运动驱动层提供三维立体模型,所述机器人运动驱动层与所述多自由度机器人相连,给多自由度机器人提供底层驱动;并由所述多自由度机器人操作所述喷枪进行法矢量运动进行喷塑,即生成所述喷枪的运动路径与姿态,控制所述多自由度机器人按生成的所述路径与姿态进行运行,所述喷枪喷出带静电塑粉,完成喷塑粉工作。
2.一种基于立体视觉的喷塑机器人的工作方法,其特征在于:包括对工件进行图像获取和处理的方法,然后进行计算与控制的方法,通过计算与控制的方法使用机器人和喷枪装置对工件进行操作;
所述图像获取和处理的方法包括激光散斑阵列发射装置的发射方法,立体视觉摄像的方法,立体视觉处理的方法,深度信息生成的方法;
所述计算与控制的方法包括工件三维立体模型融合的方法,喷塑路径与法矢量生成的方法,以及还包括有机器人运动控制层,人机输入输出接口,喷粉参数控制装置,局域网,远程无线网接口;
所述机器人和喷枪装置包括喷枪,多自由度机器人和机器人运动驱动层;其中图像获取和处理的方法中的所述激光散斑阵列发射装置的方法首先通过激光二极管发射出激光,经过光学镜片变换后,投射到工件上,形成带深度编码信息的激光散斑图,所述立体视觉摄像的方法把这些激光散斑图进行拍摄,然后进行深度信息生成的方法,深度信息即工件上各点距离摄像头的距离,立体视觉处理的方法根据所述工件的深度信息的集合就可计算出工件三维立体形状,进而生成工件的三维立体模型;把生成的所述工件的三维立体模型发送给所述计算与控制的方法进行操作;
所述计算与控制的方法包括所述工件三维立体模型融合的方法;所述三维立体模型融合的方法将得到的所述工件的三维立体模型进行融合计算并发送给
所述机器人运动控制层;其方法步骤是:对所述工件的三维立体先立体建模,并生成喷塑路径与法矢量;将生成的所述喷塑路径和多自由度机器人的末端和喷枪的枪口的运行轨迹,生成的所述法矢量及所述喷枪的枪口的指向送到机器人运动控制层,生成所述多自由度机器人各关节的电机的运动参数,再将这些运动参数送到机器人运动驱动层,生成驱动电压电流,并把生成的所述驱动电压电流送给所述多自由度机器人中的各关节的电机,通过所述多自由度机器人中的各关节的电机的运动,所述多自由度机器人机器人整体表现为按生成的所述喷塑路径与法矢量进行运动;
所述计算与控制的方法中所述人机输入输出接口与人机交互界面相连,所述喷粉参数控制装置与储粉器、高压气路、喷粉机构相连,所述计算与控制的方法还要通过所述局域网与厂级集群监控室相连,通过所述厂级集群监控室,可以知道当前的多自由度机器人是否运行正常,生成速度,维护周期,易损件的剩余工作寿命;所述远程无线网接口与公司远程服务器相连,由所述公司远程服务器提供数据服务,所述公司远程服务器产生相应的作用为:软件自动升级,发生故障时的远程维护,授权的客户行为统计;
所述机器人和喷枪装置由所述机器人运动驱动层通过所述计算与控制的方法中的所述工件三维立体模型融合的方法进行操作,由所述工件三维立体模型融合的方法为所述机器人运动驱动层提供三维立体模型,所述机器人运动驱动层与所述多自由度机器人相连,给所述多自由度机器人提供底层驱动;并由所述多自由度机器人操作所述喷枪进行法矢量运动进行喷塑,即生成所述喷枪的运动路径与姿态,控制所述多自由度机器人按生成的所述路径与姿态进行运行,所述喷枪喷出带静电塑粉,完成喷塑粉工作。
CN201610451194.6A 2016-06-22 2016-06-22 一种基于立体视觉的喷塑机器人 Active CN106003076B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610451194.6A CN106003076B (zh) 2016-06-22 2016-06-22 一种基于立体视觉的喷塑机器人

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610451194.6A CN106003076B (zh) 2016-06-22 2016-06-22 一种基于立体视觉的喷塑机器人

Publications (2)

Publication Number Publication Date
CN106003076A CN106003076A (zh) 2016-10-12
CN106003076B true CN106003076B (zh) 2019-01-01

Family

ID=57085638

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610451194.6A Active CN106003076B (zh) 2016-06-22 2016-06-22 一种基于立体视觉的喷塑机器人

Country Status (1)

Country Link
CN (1) CN106003076B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106391366B (zh) * 2016-11-23 2018-10-16 清华大学 一种民用飞机大部件自动化涂装系统
CN107363831B (zh) * 2017-06-08 2020-01-10 中国科学院自动化研究所 基于视觉的遥操作机器人控制系统及方法
CN110076767A (zh) * 2018-01-26 2019-08-02 郑州领航机器人有限公司 一种基于图像识别技术的智能焊接控制系统及方法
CN109483409B (zh) * 2018-11-21 2020-10-02 无锡荣恩科技有限公司 航空零部件自动补喷的除漆方法
CN110538747B (zh) * 2019-09-29 2021-02-05 明光利拓智能科技有限公司 一种全自动喷粉系统
CN112547352B (zh) * 2020-11-06 2022-08-02 山东农业大学 一种基于数字孪生的自动喷涂监测遥操作方法及系统
JP2024019989A (ja) * 2022-08-01 2024-02-14 株式会社日立製作所 センシング装置およびセンシング方法
CN115382685A (zh) * 2022-08-16 2022-11-25 苏州智涂工业科技有限公司 自动化机器人喷涂产线的控制技术

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120123590A1 (en) * 2010-08-03 2012-05-17 Matthew Halsmer System and method for programming robots
CN103271784A (zh) * 2013-06-06 2013-09-04 山东科技大学 基于双目视觉的人机交互式机械手控制系统和控制方法
CN104525420A (zh) * 2015-01-04 2015-04-22 成都思达特电器有限公司 一种基于三维模型识别的喷涂机器人控制方法
CN104525424A (zh) * 2015-01-04 2015-04-22 成都思达特电器有限公司 一种用于喷涂机器人喷涂路径设定的光学测量设备
CN104588243A (zh) * 2015-01-04 2015-05-06 成都思达特电器有限公司 一种智能机器人喷涂系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007000691A (ja) * 2005-06-21 2007-01-11 Anest Iwata Corp 塗装ロボットによる静電塗装吹付制御方法及び制御装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120123590A1 (en) * 2010-08-03 2012-05-17 Matthew Halsmer System and method for programming robots
CN103271784A (zh) * 2013-06-06 2013-09-04 山东科技大学 基于双目视觉的人机交互式机械手控制系统和控制方法
CN104525420A (zh) * 2015-01-04 2015-04-22 成都思达特电器有限公司 一种基于三维模型识别的喷涂机器人控制方法
CN104525424A (zh) * 2015-01-04 2015-04-22 成都思达特电器有限公司 一种用于喷涂机器人喷涂路径设定的光学测量设备
CN104588243A (zh) * 2015-01-04 2015-05-06 成都思达特电器有限公司 一种智能机器人喷涂系统

Also Published As

Publication number Publication date
CN106003076A (zh) 2016-10-12

Similar Documents

Publication Publication Date Title
CN106003076B (zh) 一种基于立体视觉的喷塑机器人
Yang et al. A novel 3-D path extraction method for arc welding robot based on stereo structured light sensor
CN106853433B (zh) 基于云计算的汽车智能喷漆方法
CN111633644A (zh) 一种结合智能视觉的工业机器人数字孪生系统及其运行方法
CN109434870A (zh) 一种用于机器人带电作业的虚拟现实操作系统
CN107908152A (zh) 一种活动式机器人自动喷涂装置、控制系统及方法
CN108527370A (zh) 基于视觉的人机共融安全防护控制系统
CN109352658A (zh) 工业机器人定位操控方法、系统及计算机可读存储介质
CN104723318A (zh) 自主工作机器人系统
US20130218336A1 (en) Method and System for Assisting in the Handling of Robotized Machines in a Congested Environment
CN107053188A (zh) 一种带电作业机器人支接引线搭接方法
CN111360818A (zh) 一种通过视觉定位的机械臂控制系统
CN110682291B (zh) 一种基于vr的机器人遥操作系统及其遥操作方法
CN107442340A (zh) 一种智能机器人无人化船体分段涂装车间系统
CN208156500U (zh) 一种活动式机器人自动喷涂装置
CN102566552B (zh) 面向物联网和3d gis的公路隧道智能检修机器人
CN109318204A (zh) 一种带电作业双臂机器人智能控制系统
CN112109074A (zh) 一种机器人目标图像抓取方法
Wang Cyber manufacturing: research and applications
CN106607893A (zh) 一种禽蛋吸运分级机械手
Lin et al. An automatic tunnel shotcrete robot
CN116994197A (zh) 一种基于视频孪生的钢厂安全监测方法
Qiu et al. Three-dimensional virtual-real mapping of aircraft automatic spray operation and online simulation monitoring
Wang et al. A visual servoing system for interactive human-robot object transfer
CN207942402U (zh) 移动式车载喷漆机器人

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20181114

Address after: 318010 No. 12, Qiaonan Village, Xiachen Street, Jiaojiang District, Taizhou City, Zhejiang Province

Applicant after: Xu Lin

Address before: 246121 304, two, 006 lane two, and 006 lane, Gao He Town, Huaining County, Anqing, Anhui.

Applicant before: Pan Xiaosheng

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20200107

Address after: Room 214, exhibition center, Zhongguancun Science and Technology City, intersection of Zhongguancun Avenue and xihuanbei Road, Baodi District, Tianjin 301800

Patentee after: Tianjin Ruike Automation Technology Co., Ltd

Address before: Jiaojiang District of Taizhou city streets of Chen bridge village 318010 Zhejiang province No. 12

Patentee before: Xu Lin

TR01 Transfer of patent right