CN104476552B - 一种基于机器视觉的机器人型材搬运装置的搬运方法 - Google Patents
一种基于机器视觉的机器人型材搬运装置的搬运方法 Download PDFInfo
- Publication number
- CN104476552B CN104476552B CN201410597702.2A CN201410597702A CN104476552B CN 104476552 B CN104476552 B CN 104476552B CN 201410597702 A CN201410597702 A CN 201410597702A CN 104476552 B CN104476552 B CN 104476552B
- Authority
- CN
- China
- Prior art keywords
- section bar
- robot
- conveyer belt
- image
- carrying
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Manipulator (AREA)
Abstract
本发明公开了一种基于机器视觉的机器人型材搬运装置,包括工作台、机器人和导轨,所述机器人装在该导轨上,所述搬运装置还包括传送带、位于传送带上方的相机、计算机、控制系统和气动装置,相机正下方设有光源,相机与计算机连接,计算机与控制系统连接,控制系统分别与气动装置和机器人连接,气动装置与机器人连接,机器人的夹持端装有吸盘,传送带与导轨垂直排布,在传送带上对应相机的拍摄区域设有用于检测型材的对射传感器。本发明提高了型材搬运加工的工作效率、降低人工搬运过程中出现的危险程度、降低了生产成本。
Description
技术领域
本发明涉及工业机器人技术领域,尤其涉及一种基于机器人视觉的机器人型材搬运装置的搬运方法。
背景技术
随着工业机器人不断发展和完善,现已得到广泛应用。目前,全世界已拥有100多万台工业机器人广泛应用在焊接、搬运、装配、喷涂、修边、拾料、包装、堆垛和上下料等单调或复杂的作业中,为企业节约了大量的劳动成本,大大提高了劳动生产率。作为现代工业领域不可或缺的重要装备和手段,机器人已经成为衡量一个国家科技和制造水平的重要标志。
工业机器人是面向工业领域的多关节机械手或多自由度的机器人,它在稳定产品品质、提高生产效率和改善劳动条件等方面有着十分重要的作用,它的应用能够使企业大大缩短新产品的换产周期和节约劳动成本,从而提高了产品的市场竞争力。
随着当代工业革命深入发展,工业生产日益趋向自动化,工业机器人技术也正朝着智能、柔性的方向发展。许多发达国家对于智能工业机器人的研究都较为重视,我国也早已将其纳入国家高科技发展规划。国家层面的重视也必将给工业机器人技术带来新的跨越式发展,机器人的发展也必将对社会经济和生产力的发展产生更加深远的影响。
目前,型材在加工过程中需要进行搬运,将型材从一个位置搬运到另一位置,一般是人工搬运,人工搬运过程中容易劳累,使工厂搬运成本高、效率低,在人工搬运过程容易损坏型材,而且容易发生危险。在工业自动化的今天,急需寻求一种对型材自动搬运加工的工业机器人来取代人工搬运。
发明内容
本发明要解决的技术问题是提供一种基于机器人视觉的机器人型材搬运装置的搬运方法,提高产生效率,降低人力成本,减少危险的发生。
为了解决上述技术问题,本发明提供了一种基于机器人视觉的机器人型材搬运装置的搬运方法,所述搬运装置包括工作台、机器人和导轨,所述机器人装在该导轨上,所述搬运装置还包括传送带、位于传送带上方的相机、计算机、控制系统和气动装置,相机正下方设有光源,相机与计算机连接,计算机与控制系统连接,控制系统分别与气动装置和机器人连接,气动装置与机器人连接,机器人的夹持端装有吸盘,该方法包括以下步骤:
建立传送带的三维空间坐标系,获取拍摄的图像在该三维空间坐标系中X轴、Y轴的实际距离与像素的比例关系;
机器人和吸盘复位,使机器人和吸盘位于初始待工作状态;
将型材放置在传送带上,当型材被传输到拍摄区域后,传送带停止运动;
相机对型材进行拍摄采集图像,并将采集到的图像传送到计算机;
将型材与传送带在图像中分离出来;
获取型材在传送带的三维空间坐标系上的重心坐标位置;
把型材的重心坐标点从传送带的三维空间坐标系转换到机器人坐标系中,得到吸盘对型材的吸取坐标位置;
根据得到的吸取坐标位置,控制吸盘吸取型材,机器人将型材搬运到工作台的指定位置。
通过在静止的传送带上设置标定板,计算标定板上两点之间的实际距离与该两点之间对应的图像像素个数,得到图像在该三维空间坐标系中X轴、Y轴的实际距离与像素的比例关系。
通过公式
计算得到型材的重心像素坐标(n1,0,n0,1,0),根据图像与传送带的三维空间坐标系的比例关系,可得到型材的重心在传送带的三维空间坐标系上的坐标位置。
在型材与传送带在图像中分离出来时,还对图像先进行阈值处理。根据算法公式S={(r,c)∈R|fr,c-gr,c≥gdiff}进行阈值处理,其中fr,c表示型材图像,(r,c)表示图像坐标点,gr,c表示平滑后的图像,gdiff表示阈值。
本发明通过获取型材的重心坐标,控制机器人抓取型材的重心位置,准确的将型材放置到指定位置,提高生产效率,降低人力成本,减少危险的发生。
附图说明
附图1为本发明装置的结构示意图;
附图2为本发明方法的流程示意图;
附图3为本发明中传送带的三维空间坐标系示意图。
具体实施方式
为了便于本领域技术人员的理解,下面结合附图对本发明作进一步的描述。
如附图1所示,一种基于机器人视觉的机器人型材搬运装置的搬运方法,所述搬运装置包括工作台、机器人4和导轨3,所述机器人4装在导轨3上,所述搬运装置还包括传送带9、位于传送带9上方的相机6、计算机、控制系统和气动装置,相机6正下方设有光源8,相机6与计算机连接,计算机通过数据与控制系统连接,控制系统分别与气动装置和机器人连接,气动装置与机器人4连接,机器人4的夹持端装有吸盘5。导轨3总共设有两条,机器人4安装在导轨上面可以沿着该导轨来回自由运动。相机6上安装连接有镜头7,此为公知常识,在此不再详述。机器人可以为六轴机器人,或者其他类型的机器人,在此并无限定。传送带9与导轨3垂直排布,彼此之间呈90度设计。传送带9上对应相机6的拍摄区域设有对射传感器10,该对射传感器10通常设置在传送带9上对称的两侧边,当传送带9上的型材11被传输到相机6的拍摄区域时马上触发对射传感器10,对射传感器10发送信号到计算机上,传送带停止运动。气动装置对吸盘5进行供气,使吸盘能够顺利吸取型材。控制系统一般包括两部分,一为控制柜,另外一个则是示教器,控制柜中包含了多个PLC控制模块,用于控制机器人轴的运动,示教器则是人机掌控的连接器,可用于编程和发送控制命令给控制柜以命令机器人运动。
此外,在导轨3上还设置有初始限位开关1和终止限位开关2,通常将初始限位开关1装在靠近传送带9的导轨3一端,终止限位开关2则安装在导轨3的另一端。初始时,机器人位于初始限位开关位置,吸取型材后向工作台方向移动,移动到终止限位开关停止,机器人旋转把型材搬运在型材加工工作台指定位置。
此外,机器人、相机等器件均为适合于工业应用的设备,在此并限定具体的型号和类型。
如图2和3所示,本发明中的搬运方法基于以上所述的基于机器视觉的机器人型材搬运装置,该方法具体包括以下步骤:
步骤1,建立传送带的三维空间坐标系,获取拍摄的图像在该三维空间坐标系中X轴、Y轴的实际距离与像素的比例关系,即获取图像的坐标传送带的三维空间坐标系间的比例关系。由于图像为平面式,其坐标系只涉及到X轴、Y轴。建立传送带的三维空间坐标系O(x,y,z),O点为零点坐标O(0,0,0)。通过在静止的传送带9上设置标定板12,该标定板设在相机的拍摄区域内,计算标定板12上两点之间的实际距离与该两点之间对应的图像像素个数,得到图像在该三维空间坐标系中X轴、Y轴的实际距离与像素的比例关系。具体为,在图3中,标定板从上往下的最上一行为第一行,从左往右的最左一列为第一列。第一行第一个点与第一行最后一个点的实际距离与像素个数分别为X标、X像,标定板第一列第一个点与第一列最后一个点的实际距离与像素个数分别为Y标、Y像;则图像在传送带的三维空间坐标系O(x,y,z)中X轴、Y轴中实际距离与像素比例分别Kx=X标/X像、Ky=Y标/Y像。计算机获取到图像中任何两点的像素后,就可以确定这两点在传送带上的实际距离。
步骤2,机器人和吸盘复位,使机器人和吸盘位于初始待工作状态。控制系统发送指令给工业机器人向初始限位开关运动,初始限位开关位置记作为机器人平移的初始位置;为了使机器人在搬运过程中稳定快速地搬运型材,机器人旋转相应的轴使吸盘复位。
步骤3,将型材放置在传送带上,当型材被传输到拍摄区域后,图3虚线框所示即为相机的拍摄区域,型材即触发对射传感器,对射传感器发射信号到计算机,传送带停止运动。即型材在传送带上向前移动,当触发到对射传感器时,即表示型材已经进入到相机的拍摄区域。
步骤4,相机对型材进行拍摄采集图像,并将采集到的图像传送到计算机。
步骤5,将型材与传送带在图像中分离出来,在分离时,可事先对图像进行行阈值处理,根据算法公式S={(r,c)∈R|fr,c-gr,c≥gdiff}进行阈值处理,其中fr,c表示型材图像,(r,c)表示图像坐标点,gr,c表示平滑后的图像,gdiff表示阈值。图像经过阈值处理后,能够更加容易的将型材与传送带在图像中分离出来。
步骤6,获取型材在传送带的三维空间坐标系上的重心坐标位置。可采用公知的归一化矩方法计算得到型材重心在传送带上的坐标位置。型材的重心像素坐标位置(n1,0,n0,1,0)可以通过以下算法公式计算出来:
根据步骤一获取的图像在传送带的三维空间坐标系O(x,y,z)中X轴、Y轴中实际距离与像素的比例关系,分别Kx=X标/X像、Ky=Y标/Y像,即可得到型材重心在传送带坐标系上的坐标位置为O(n1,0*Kx,n0,1*Ky,0)。
步骤7,把型材的重心坐标点从传送带的三维空间坐标系转换到机器人坐标系中,得到吸盘对型材的吸取坐标位置。通过计算机的坐标系变换将型材重心在传送带的三维空间坐标系上的位置变换到机器人坐标系中,得到机器人搬运型材时吸盘的吸取坐标位置,保证能够准确的吸取到型材的重心位置。
步骤8,根据得到的吸取坐标位置,控制吸盘吸取型材,机器人将型材搬运到工作台的指定位置。计算机把型材重心在机器人坐标系中的坐标点位置发送给控制系统,控制系统控制机器人的吸盘运动到该坐标位置,控制系统控制气动装置使吸盘吸取型材重心位置。机器人吸紧型材从导轨上向加工工作台运动,当机器人运动到终止限位开关时,机器人停止运动,机器人通过轴旋转把型材搬运在型材加工工作台指定位置,完成一次搬运工作,机器人复位,进行下一次工作循环。
需要说明的是,以上所述并非是对本发明技术方案的限定,在不脱离本发明的创造构思的前提下,任何显而易见的替换均在本发明的保护范围之内。
Claims (5)
1.一种基于机器视觉的机器人型材搬运装置的搬运方法,所述搬运装置包括工作台、机器人和导轨,机器人装在导轨上,所述搬运装置还包括传送带、位于传送带上方的相机、计算机、控制系统和气动装置,相机正下方设有光源,相机与计算机连接,计算机与控制系统连接,控制系统分别与气动装置和机器人连接,气动装置与机器人连接,机器人的夹持端装有吸盘,其特征在于,所述方法包括以下步骤:
建立传送带的三维空间坐标系,获取拍摄的图像在该三维空间坐标系中X轴、Y轴的实际距离与像素的比例关系;
机器人和吸盘复位,使机器人和吸盘位于初始待工作状态;
将型材放置在传送带上,当型材被传输到拍摄区域后,传送带停止运动;
相机对型材进行拍摄采集图像,并将采集到的图像传送到计算机;
将型材与传送带在图像中分离出来;
获取型材在传送带的三维空间坐标系上的重心坐标位置;
把型材的重心坐标点从传送带的三维空间坐标系转换到机器人坐标系中,得到吸盘对型材的吸取坐标位置;
根据得到的吸取坐标位置,控制吸盘吸取型材,机器人将型材搬运到工作台的指定位置。
2.根据权利要求1所述的搬运方法,其特征在于,通过在静止的传送带上设置标定板,计算标定板上两点之间的实际距离与该两点之间对应的图像像素个数,得到图像在该三维空间坐标系中X轴、Y轴的实际距离与像素的比例关系。
3.根据权利要求2所述的搬运方法,其特征在于,通过公式计算得到型材的重心像素坐标(n1,0,n0,1,0),根据图像与传送带的三维空间坐标系的比例关系,可得到型材的重心在传送带的三维空间坐标系上的坐标位置。
4.根据权利要求3所述的搬运方法,其特征在于,在型材与传送带在图像中分离出来时,还对图像先进行阈值处理。
5.根据权利要求4所述的搬运方法,其特征在于,根据算法公式S={(r,c)∈R|fr,c-gr,c≥gdiff}进行阈值处理,其中fr,c表示型材图像,(r,c)表示图像坐标点,gr,c表示平滑后的图像,gdiff表示阈值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410597702.2A CN104476552B (zh) | 2014-10-30 | 2014-10-30 | 一种基于机器视觉的机器人型材搬运装置的搬运方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410597702.2A CN104476552B (zh) | 2014-10-30 | 2014-10-30 | 一种基于机器视觉的机器人型材搬运装置的搬运方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104476552A CN104476552A (zh) | 2015-04-01 |
CN104476552B true CN104476552B (zh) | 2016-08-24 |
Family
ID=52751223
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410597702.2A Active CN104476552B (zh) | 2014-10-30 | 2014-10-30 | 一种基于机器视觉的机器人型材搬运装置的搬运方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104476552B (zh) |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105084022B (zh) * | 2015-07-04 | 2017-03-08 | 芜湖哈特机器人产业技术研究院有限公司 | 一种铅酸蓄电池上铅系统及其控制方法 |
TWI582557B (zh) * | 2015-07-15 | 2017-05-11 | 由田新技股份有限公司 | 印魚式線性編碼器及包含印魚式線性編碼器的光學檢測平台 |
TWI577973B (zh) * | 2015-07-15 | 2017-04-11 | 由田新技股份有限公司 | 往復式線性編碼器及具有往復式線性編碼器的光學檢測平台 |
CN105773591A (zh) * | 2016-01-26 | 2016-07-20 | 深圳市鼎泰智能装备股份有限公司 | 一种新型抓取机器人装置 |
CN105644124B (zh) * | 2016-02-26 | 2019-02-12 | 三一汽车制造有限公司 | 一种贴砖方法 |
CN105666485B (zh) * | 2016-03-28 | 2018-05-11 | 桂林电子科技大学 | 一种基于图像处理的自动识别和定位摆棋机器人 |
CN106346486B (zh) * | 2016-11-04 | 2018-07-27 | 武汉海默机器人有限公司 | 一种六轴协作机器人多回路控制系统及其控制方法 |
CN106346454A (zh) * | 2016-11-10 | 2017-01-25 | 珠海市华亚机械科技有限公司 | 一种四轴机械手视觉摆盘平台 |
CN106985161B (zh) * | 2016-12-22 | 2019-09-20 | 天津京东深拓机器人科技有限公司 | 物品抓取系统和方法 |
CN106757348A (zh) * | 2016-12-29 | 2017-05-31 | 天通银厦新材料有限公司 | 一种蓝宝石全自动化生产线 |
CN107917667A (zh) * | 2017-07-03 | 2018-04-17 | 福耀玻璃(湖北)有限公司 | 一种用于压制前挡玻璃的型面检测线 |
CN109262143A (zh) * | 2017-07-12 | 2019-01-25 | 上海宝钢工业技术服务有限公司 | 薄板带钢检测样品的智能化加工系统 |
CN108263856B (zh) * | 2018-01-05 | 2020-11-27 | 上海第二工业大学 | 一种基于机器视觉的机器人智能快速搬运装置及其搬运方法 |
CN108280518B (zh) * | 2018-01-23 | 2020-06-26 | 中南大学 | 一种分布式环境机器人及车辆移动互联运载方法与系统 |
CN109227538A (zh) * | 2018-07-13 | 2019-01-18 | 哈尔滨工业大学(深圳) | 一种基于视觉的柔性机械臂的定位控制方法及系统 |
CN109604468B (zh) * | 2018-12-28 | 2020-12-29 | 芜湖哈特机器人产业技术研究院有限公司 | 一种基于机器视觉的工件冲压系统及其控制方法 |
CN109560027B (zh) * | 2019-01-18 | 2020-10-30 | 深海弈智京山智能科技有限公司 | 一种摆串位置归正视觉引导系统 |
CN109941733B (zh) * | 2019-03-15 | 2020-11-13 | 江苏盛凡信息服务有限公司 | 一种智能搬运辅助机器人 |
JP7283332B2 (ja) * | 2019-09-26 | 2023-05-30 | コベルコ建機株式会社 | 容器計測システム |
CN113400296B (zh) * | 2020-03-16 | 2024-06-25 | 阿里巴巴集团控股有限公司 | 安装控制方法、装置、物品及终端设备 |
CN113146642B (zh) * | 2021-05-19 | 2022-06-10 | 杭州恒立制造科技有限公司 | 一种用于油箱板加工的机械臂控制方法、装置及智能终端 |
CN113696190B (zh) * | 2021-10-28 | 2022-03-18 | 深圳市越疆科技有限公司 | 一种示教轨迹点采集方法、装置、机械臂、系统及介质 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101710080B (zh) * | 2009-12-01 | 2011-04-06 | 湖南大学 | 一种基于机器视觉的码垛玻璃瓶检测方法与搬运机 |
CN201601192U (zh) * | 2010-01-19 | 2010-10-06 | 深圳市鑫力创自动化设备有限公司 | 一种电池卷芯入壳设备 |
KR20120017260A (ko) * | 2010-08-18 | 2012-02-28 | 케어캠프 주식회사 | 라벨 자동 부착 장치 |
CN201919377U (zh) * | 2010-12-03 | 2011-08-10 | 浙江理工大学 | 基于视觉的蔬果嫁接机待嫁接苗分类装置 |
CN203184246U (zh) * | 2013-03-30 | 2013-09-11 | 安徽省科亿信息科技有限公司 | 一种瓶盖自动分选设备 |
CN103706575B (zh) * | 2013-12-31 | 2015-12-30 | 江苏大学 | 一种基于两级图像采集的镜片在线分级分拣装置及方法 |
CN203903425U (zh) * | 2014-04-30 | 2014-10-29 | 无锡速博威迅科技有限公司 | 一种圆盘定位传送装置 |
-
2014
- 2014-10-30 CN CN201410597702.2A patent/CN104476552B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN104476552A (zh) | 2015-04-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104476552B (zh) | 一种基于机器视觉的机器人型材搬运装置的搬运方法 | |
CN106514201B (zh) | 一种自动接插件装配机器人系统及其控制方法 | |
JP6450727B2 (ja) | ロボットが行う物品整列作業のシミュレーションのための装置、方法、プログラム及び記録媒体 | |
CN204526433U (zh) | 一种通用自动化激光打标机 | |
CN206578614U (zh) | 一种自动上下料系统 | |
CN206798559U (zh) | 流水线上翻转机构 | |
CN110980276B (zh) | 一种三维视觉配合机器人实施铸件自动下料的方法 | |
CN110963298A (zh) | 基于视觉跟随的取料装置及方法 | |
CN102873522A (zh) | 基于双ccd工业相机的微小型零部件精密装配检测装置 | |
CN109550879A (zh) | 一种基于视觉的钣金压铆方法 | |
CN101645136A (zh) | 图像识别检测系统 | |
CN105345431A (zh) | 基于工业机器人的自动插件机控制系统 | |
CN206124463U (zh) | 机械手式激光打标机 | |
CN206378850U (zh) | 一种蓝牙模块自动化烧录测试装置 | |
CN105467294A (zh) | 一种用于pcba自动测试的定位系统和方法 | |
CN106628940A (zh) | 一种制造空调蒸发器用自动转运系统装置及操作方法 | |
CN114029951A (zh) | 基于深度相机的机器人自主识别智能抓取方法 | |
CN109916346A (zh) | 一种基于视觉系统的工件平整度的检测装置及检测方法 | |
CN106938463A (zh) | 一种大型板料定位抓取的方法 | |
CN204308972U (zh) | 视觉检查系统 | |
CN106926241A (zh) | 一种基于视觉引导的双臂机器人装配方法及系统 | |
CN105459136B (zh) | 机器人视觉抓取方法 | |
CN206645534U (zh) | 一种基于双相机的机器人无序抓取装置 | |
CN211310115U (zh) | 基于视觉跟随的取料装置 | |
CN202752805U (zh) | 基于双ccd工业相机的微小型零部件精密装配检测装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CB03 | Change of inventor or designer information | ||
CB03 | Change of inventor or designer information |
Inventor after: Diao Simian Inventor after: Zhou Junwu Inventor before: Zhou Junwu |
|
CP01 | Change in the name or title of a patent holder | ||
CP01 | Change in the name or title of a patent holder |
Address after: The sheep village Shunde District Lunjiao 528000 Guangdong province Foshan city Yongan Road No. 8 Patentee after: Foshan jinhuanyu Enterprise Incubator Co., Ltd Address before: The sheep village Shunde District Lunjiao 528000 Guangdong province Foshan city Yongan Road No. 8 Patentee before: FOSHAN KINGSKY MACHINERY Co.,Ltd. |