CN108845572A - 一种工业搬运机器人定位方法 - Google Patents

一种工业搬运机器人定位方法 Download PDF

Info

Publication number
CN108845572A
CN108845572A CN201810527831.2A CN201810527831A CN108845572A CN 108845572 A CN108845572 A CN 108845572A CN 201810527831 A CN201810527831 A CN 201810527831A CN 108845572 A CN108845572 A CN 108845572A
Authority
CN
China
Prior art keywords
image
robot
machine people
dimensional code
carrying machine
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810527831.2A
Other languages
English (en)
Inventor
徐忠华
刘玮
厉冯鹏
陈勇
郭俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yangcheng Institute of Technology
Yancheng Institute of Technology
Original Assignee
Yangcheng Institute of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yangcheng Institute of Technology filed Critical Yangcheng Institute of Technology
Priority to CN201810527831.2A priority Critical patent/CN108845572A/zh
Publication of CN108845572A publication Critical patent/CN108845572A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • G05D1/0253Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means extracting relative motion information from a plurality of images taken successively, e.g. visual odometry, optical flow
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/02Sensing devices
    • B25J19/021Optical sensing devices
    • B25J19/023Optical sensing devices including video camera means
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0276Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle

Abstract

本发明公开了一种工业搬运机器人定位方法,包括以下步骤:步骤S1,机器人利用前置的摄像头拍摄获得待搬运物件的图像,此图像中包含粘贴在物件表面的二维码,此二维码中记载此物件的长宽高信息;步骤S2,机器人根据拍摄的图像识别出物件的位置信息;步骤S3,机器人扫描图像中的二维码,获得此物件的长宽高信息;步骤S4,机器人根据物件的位置信息以及物件的长宽高信息,实现对此物件的精准定位,并控制机械手以适宜的角度和开合度去抓取物件。本发明基于二维码和视觉定位方法,实现待搬运物件的精准定位。

Description

一种工业搬运机器人定位方法
技术领域
本发明涉及工业智能机器人技术领域,具体涉及一种工业搬运机器人定位方法。
背景技术
搬运机器人作为最早应用于生产的两种工业机器人之一,在工业生产自动化中,一直扮演着非常重要角色。并且在现有的工业机器人已装机总数中,搬运机器人也占着较大的比例。伴随着工业机器人应用范围的不断扩展,搬运机器人呈现向食品饮料、家用电器、半导体晶圆、液晶面板等多元行业发展的趋势,成为工业机器人领域发展的一个新增长点。
目前生产线上应用的搬运工业机器人大多是通过示教再现或预编程来实现机器人的操作,这样物体的初始位姿和终止位姿都是严格限定的,机器人只是完成点到点的任务动作,外部参数变化的物体定位操作则是无能为力。这样一来,生产线的柔性就差,满足不了柔性生产系统对物料输送和搬运的要求。在这种情况下,为保证机器人顺利高效的完成工作任务和减少生产准备时间,引入机器视觉技术来实现对工作目标物体的识别和定位就显得很有必要。
在现代自动化生产的过程中,计算机视觉技术正成为一种保证产品质量和提高生产效率的关键技术手段,如实现智能机器人的控制、对机械零件的自动加工和检测柔性生产线的自动监控等。将计算机视觉技术应用于搬运工业机器人的工作领域,利用机器视觉技术获取工件及其周围环境的信息,从中识别出所要的操作的目标物体,并能做出决策来引导工业机器人完成对目标物体的抓取、放置等操作。这不但提高了产品的质量和生产效率,同时对增强工业机器人对环境的适应能力以及拓展机器人应用范围都具有十分重要的意义。
发明内容
本发明的目的在于克服现有技术中的不足,提出一种工业搬运机器人定位方法,基于二维码和视觉定位方法,实现待搬运物件的精准定位。
为解决上述技术问题,本发明提供了一种工业搬运机器人定位方法,其特征是,包括以下步骤:
步骤S1,机器人利用前置的摄像头拍摄获得待搬运物件的图像,此图像中包含粘贴在物件表面的二维码,此二维码中记载此物件的长宽高信息;
步骤S2,机器人根据拍摄的图像识别出物件的位置信息;
步骤S3,机器人扫描图像中的二维码,获得此物件的长宽高信息;
步骤S4,机器人根据物件的位置信息以及物件的长宽高信息,实现对此物件的精准定位,并控制机械手去抓取物件。
优选的,机器人采用AR摄像头进行拍摄图像。
优选的,二维码里还包括此物件的属性以及所属类型。
优选的,对拍摄的图像平滑去噪处理,以去除图像中的噪声点。
优选的,进行平滑去噪处理的过程如下:
1),使用中值滤波器对图像进行滤波处理,除去图像中的细小噪声点;
2),通过开运算去除图像中的细小毛刺。
优选的,中值滤波器为门限递推中值滤波器,过程为,对像素点f(x,y)在邻域窗口内求中值时,先对窗口内的像素求均值average,若像素点f(x,y)不大于均值average,则不进行滤波,若像素点f(x,y)大于均值average,则用递推法求中值g(x,y),并用中值g(x,y)代替原来的像素点f(x,y)。
与现有技术相比,本发明所达到的有益效果是:本发明基于二维码和视觉定位方法,实现待搬运物件的精准定位。
附图说明
图1为本发明方法的流程图。
具体实施方式
下面结合附图对本发明作进一步描述。以下实施例仅用于更加清楚地说明本发明的技术方案,而不能以此来限制本发明的保护范围。
本发明的一种工业搬运机器人定位方法,如图1所示,包括以下步骤:、
步骤S1,机器人利用前置的摄像头拍摄获得待搬运物件的图像,此图像中包含粘贴在物件表面的二维码,此二维码中记载此物件的长宽高信息;
为了提高拍摄的效果以及对图像中物件识别度,本实施例中采用AR摄像头进行拍摄,此AR摄像头安装在机器人机械手末端,当机器人需要搬运物件时,先开启AR摄像头,利用AR摄像头对远方的物件进行拍摄。
现有技术中为了对待搬运物件实现产品溯源,通常在物件的表面粘贴有二维码,此二维码内包含有此物件从原材料到生产、销售等各个环节的物流信息,以消费者能够实时的了解此物件的基本信息,实现产品溯源。本发明中为了使机器人能够更好的定位出此物件的地理位置以实现精准定位,本发明在此二维码中还添加了此物件的一些物理属性,例如此物件的长宽高信息、此物件的属性和类型等。
步骤S2,机器人根据拍摄的图像识别出物件的位置信息;
根据拍摄的图像识别出物件的位置信息属于机器人视觉定位的基本方法,本实施例中采用现有技术中的手眼标定来实现对机器人自身以及物件的定位。在进行视觉定位之前,还需要对拍摄的图像进行一些图像预处理,对图像进行平滑去噪处理,去除图像中的噪声点。
进行平滑去噪处理的过程如下:
1),使用中值滤波器对图像进行滤波处理,除去图像中的细小噪声点;
2),通过开运算去除图像中的细小毛刺。
中值滤波器为门限递推中值滤波器,过程为,对像素点f(x,y)在邻域窗口内求中值时,先对窗口内的像素求均值average,若像素点f(x,y)不大于均值average,则不进行滤波,若像素点f(x,y)大于均值average,则用递推法求中值g(x,y),并用中值g(x,y)代替原来的像素点f(x,y)。
步骤S3,机器人扫描图像中的二维码,获得此物件的长宽高信息;
步骤S4,机器人根据物件的位置信息以及物件的长宽高信息,实现对此物件的精准定位,并控制机械手去抓取物件。
机器人获知物件的位置信息以及物件的长宽高信息,并且从图像中还可获知拍摄图像的角度以及与物件的相对角度,可以控制机械手以适宜的角度和开合度去抓取物件,以便将物件抓牢,并且不会碰撞到物件的边边角角。
作为本发明的优选实施例,二维码里还包括此物件的属性以及所属类型,例如是玻璃制品,属于易碎品类型,机器人扫描二维码得知此物件是玻璃制品时,则采用低速运转此物件,采用柔性的机械手去抓取物件。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明技术原理的前提下,还可以做出若干改进和变型,这些改进和变型也应视为本发明的保护范围。

Claims (6)

1.一种工业搬运机器人定位方法,其特征是,包括以下步骤:
步骤S1,机器人利用前置的摄像头拍摄获得待搬运物件的图像,此图像中包含粘贴在物件表面的二维码,此二维码中记载此物件的长宽高信息;
步骤S2,机器人根据拍摄的图像识别出物件的位置信息;
步骤S3,机器人扫描图像中的二维码,获得此物件的长宽高信息;
步骤S4,机器人根据物件的位置信息以及物件的长宽高信息,实现对此物件的精准定位,并控制机械手去抓取物件。
2.根据权利要求1所述的一种工业搬运机器人定位方法,其特征是,机器人采用AR摄像头进行拍摄图像。
3.根据权利要求1所述的一种工业搬运机器人定位方法,其特征是,二维码里还包括此物件的属性以及所属类型。
4.根据权利要求1所述的一种工业搬运机器人定位方法,其特征是,对拍摄的图像平滑去噪处理,以去除图像中的噪声点。
5.根据权利要求4所述的一种工业搬运机器人定位方法,其特征是,进行平滑去噪处理的过程如下:
1),使用中值滤波器对图像进行滤波处理,除去图像中的细小噪声点;
2),通过开运算去除图像中的细小毛刺。
6.根据权利要求5所述的一种工业搬运机器人定位方法,其特征是,中值滤波器为门限递推中值滤波器,过程为,对像素点f(x,y)在邻域窗口内求中值时,先对窗口内的像素求均值average,若像素点f(x,y)不大于均值average,则不进行滤波,若像素点f(x,y)大于均值average,则用递推法求中值g(x,y),并用中值g(x,y)代替原来的像素点f(x,y)。
CN201810527831.2A 2018-05-29 2018-05-29 一种工业搬运机器人定位方法 Pending CN108845572A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810527831.2A CN108845572A (zh) 2018-05-29 2018-05-29 一种工业搬运机器人定位方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810527831.2A CN108845572A (zh) 2018-05-29 2018-05-29 一种工业搬运机器人定位方法

Publications (1)

Publication Number Publication Date
CN108845572A true CN108845572A (zh) 2018-11-20

Family

ID=64207887

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810527831.2A Pending CN108845572A (zh) 2018-05-29 2018-05-29 一种工业搬运机器人定位方法

Country Status (1)

Country Link
CN (1) CN108845572A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112157409A (zh) * 2020-08-13 2021-01-01 盐城工学院 基于abb120的自动装配线程序设计方法
CN112208415A (zh) * 2019-07-09 2021-01-12 深圳市安泽智能机器人有限公司 一种基于机器人和agv小车的搬运方法、机器人

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102200780A (zh) * 2011-04-21 2011-09-28 苏州悦控自动化科技有限公司 一种实现3h型ccd视觉工业机器人的方法
CN104786226A (zh) * 2015-03-26 2015-07-22 华南理工大学 抓取在线工件的机器人位姿及运动轨迹定位系统与方法
CN106272427A (zh) * 2016-09-12 2017-01-04 安徽理工大学 一种工业机器人智能拾取系统
KR101705316B1 (ko) * 2016-08-01 2017-02-09 (주)글로벌 로보틱스 Qr 코드 마킹 시스템
CN106934813A (zh) * 2015-12-31 2017-07-07 沈阳高精数控智能技术股份有限公司 一种基于视觉定位的工业机器人工件抓取实现方法
CN107527368A (zh) * 2016-06-20 2017-12-29 电子科技大学 基于二维码的三维空间姿态定位方法与装置
CN107590837A (zh) * 2017-09-06 2018-01-16 西安华航唯实机器人科技有限公司 一种视觉定位智能精密装配机器人及其摄像机视觉标定方法
CN107650122A (zh) * 2017-07-31 2018-02-02 宁夏巨能机器人股份有限公司 一种基于3d视觉识别的机器人手爪定位系统及其定位方法
CN108057628A (zh) * 2017-11-03 2018-05-22 安徽理工大学 一种智能仓储分拣车及其分拣方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102200780A (zh) * 2011-04-21 2011-09-28 苏州悦控自动化科技有限公司 一种实现3h型ccd视觉工业机器人的方法
CN104786226A (zh) * 2015-03-26 2015-07-22 华南理工大学 抓取在线工件的机器人位姿及运动轨迹定位系统与方法
CN106934813A (zh) * 2015-12-31 2017-07-07 沈阳高精数控智能技术股份有限公司 一种基于视觉定位的工业机器人工件抓取实现方法
CN107527368A (zh) * 2016-06-20 2017-12-29 电子科技大学 基于二维码的三维空间姿态定位方法与装置
KR101705316B1 (ko) * 2016-08-01 2017-02-09 (주)글로벌 로보틱스 Qr 코드 마킹 시스템
CN106272427A (zh) * 2016-09-12 2017-01-04 安徽理工大学 一种工业机器人智能拾取系统
CN107650122A (zh) * 2017-07-31 2018-02-02 宁夏巨能机器人股份有限公司 一种基于3d视觉识别的机器人手爪定位系统及其定位方法
CN107590837A (zh) * 2017-09-06 2018-01-16 西安华航唯实机器人科技有限公司 一种视觉定位智能精密装配机器人及其摄像机视觉标定方法
CN108057628A (zh) * 2017-11-03 2018-05-22 安徽理工大学 一种智能仓储分拣车及其分拣方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
李国栋: "服务机器人智能空间中机器视觉测量技术及其应用研究", 《中国博士学位论文全文数据库(电子期刊) 信息科技辑》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112208415A (zh) * 2019-07-09 2021-01-12 深圳市安泽智能机器人有限公司 一种基于机器人和agv小车的搬运方法、机器人
CN112157409A (zh) * 2020-08-13 2021-01-01 盐城工学院 基于abb120的自动装配线程序设计方法

Similar Documents

Publication Publication Date Title
CN107767423A (zh) 一种基于双目视觉的机械臂目标定位抓取方法
CN105759720B (zh) 基于计算机视觉的机械手跟踪定位在线识别与纠偏方法
US9259844B2 (en) Vision-guided electromagnetic robotic system
CN108845572A (zh) 一种工业搬运机器人定位方法
CN109926817B (zh) 基于机器视觉的变压器自动装配方法
CN110076029B (zh) 喷胶控制方法、系统、计算机设备及计算机存储介质
CN108907526A (zh) 一种具有高鲁棒性的焊缝图像特征识别方法
CN110666801A (zh) 一种复杂工件匹配定位的抓取工业机器人
CN113850815B (zh) 工件点云获取方法、装置、电子设备及存储介质
Papanikolopoulos Selection of features and evaluation of visual measurements during robotic visual servoing tasks
CN115609591B (zh) 一种基于2D Marker的视觉定位方法和系统、复合机器人
WO2020173111A1 (zh) 一种 3d 微涂覆机器人及其涂覆方法
JP2020107142A (ja) 認識方法、認識システム、ロボット制御方法、ロボット制御システム、ロボットシステム、認識プログラム、及びロボット制御プログラム
CN108109177A (zh) 基于单目摄像头的管道机器人视觉处理系统及方法
CN106003067A (zh) 工业机器人示教方法和示教文件制作方法及装置
CN114347015B (zh) 一种机器人抓取控制方法、系统、装置及介质
Naik et al. Multi-view object pose distribution tracking for pre-grasp planning on mobile robots
CN110480685A (zh) 一种农用车轮自动加工生产线视觉机械手
CN114932292B (zh) 一种窄间隙被动视觉焊缝跟踪方法及系统
CN116000966A (zh) 一种工件抓取方法、装置、设备和存储介质
WO2023082417A1 (zh) 抓取点信息获取方法、装置、电子设备和存储介质
CN110640739A (zh) 一种具有中心位置识别的抓取工业机器人
Xin et al. Real-time dynamic system to path tracking and collision avoidance for redundant robotic arms
Dai Pham et al. Background compensation using Hough transformation
CN113333226B (zh) 基于玻璃贴条的玻璃涂胶方法、系统、设备和介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20181120