CN109279373A - 一种基于机器视觉的柔性拆垛码垛机器人系统及方法 - Google Patents

一种基于机器视觉的柔性拆垛码垛机器人系统及方法 Download PDF

Info

Publication number
CN109279373A
CN109279373A CN201811297323.6A CN201811297323A CN109279373A CN 109279373 A CN109279373 A CN 109279373A CN 201811297323 A CN201811297323 A CN 201811297323A CN 109279373 A CN109279373 A CN 109279373A
Authority
CN
China
Prior art keywords
stacking
unit
cargo
robot palletizer
machine vision
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811297323.6A
Other languages
English (en)
Other versions
CN109279373B (zh
Inventor
王汉晨
赵晓进
吴易明
郭帅亮
于龙飞
张尚玉
王永旺
张保军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xi'an Zhongke Photoelectric Precision Engineering Co Ltd
Original Assignee
Xi'an Zhongke Photoelectric Precision Engineering Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xi'an Zhongke Photoelectric Precision Engineering Co Ltd filed Critical Xi'an Zhongke Photoelectric Precision Engineering Co Ltd
Priority to CN201811297323.6A priority Critical patent/CN109279373B/zh
Publication of CN109279373A publication Critical patent/CN109279373A/zh
Application granted granted Critical
Publication of CN109279373B publication Critical patent/CN109279373B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G61/00Use of pick-up or transfer devices or of manipulators for stacking or de-stacking articles not otherwise provided for
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Manipulator (AREA)

Abstract

本发明公开了一种基于机器视觉的柔性拆垛码垛机器人系统及方法,包括拆垛码垛机器人单元Ⅰ、拆垛码垛整形及运输单元Ⅱ、机器视觉检测单元Ⅲ和系统控制及防护单元Ⅳ,通过系统控制及防护单元Ⅳ获取所述机器视觉检测单元Ⅲ的实时信息,控制拆垛码垛整形及运输单元Ⅱ和拆垛码垛机器人单元Ⅰ实施货物归类码垛和拆垛。本系统实现了拆垛码垛机器人的无人化、自动化工作,大大提高了生产效率,运用机器视觉技术,使拆垛码垛机器人操作简单、快速、可靠。

Description

一种基于机器视觉的柔性拆垛码垛机器人系统及方法
技术领域
本发明属于拆垛码垛机器人领域,具体涉及一种基于机器视觉的柔性拆垛码垛机器人系统及方法。
背景技术
随着自动化程度的逐步提高,智能物流领域得到迅速发展,仓库、工厂车间、港口、码头等许多场所的货物装卸工作越来越多,急需智能化程度高、柔性好的拆垛码垛机器人来取代人工码垛和传统的机器人码垛。目前人工码垛工作主要依靠人工或叉车来完成,但是该方式存在劳动强度量大、码垛不整齐、对拆垛货物及垛型要求高、货物损伤率高等缺点,大大降低了拆垛码垛效率。传统的拆垛码垛机器人对垛盘位置精度要求高、对垛型及货物规格适应性差,甚至出现严重的破包或货物损坏现象,造成极大的经济损失。因此,研发一种智能化程度高、柔性好(适应不同规格、不同垛型形状及垛盘位置)、工作效率高的拆垛码垛机器人具有重要的工程应用价值。
发明内容
为解决现有技术中存在的上述缺陷,本发明的目的在于提供一种智能化程度高、适应不同规格、不同垛型形状及垛盘位置、柔性好、工作效率高的基于机器视觉的柔性拆垛码垛机器人系统及方法。
本发明是通过下述技术方案来实现的。
本发明的一种基于机器视觉的柔性拆垛码垛机器人系统,包括:
拆垛码垛机器人单元Ⅰ,用于对不同规格、不同形状的货物进行码垛拆垛操作;
拆垛码垛整形及运输单元Ⅱ,用于将货物整形和传输,并移动至视觉检测工位;
机器视觉检测单元Ⅲ,通过精定位单目相机、二维码扫描器和精定位双目相机分别获取货物的位置、数量、规格、形状和所在垛盘垛型,并将该信息传递至系统控制及防护单元Ⅳ;
系统控制及防护单元Ⅳ,获取机器视觉检测单元Ⅲ的货物的位置、数量、规格、形状和所在垛盘垛型信息,控制拆垛码垛机器人单元Ⅰ对不同规格、形状的货物归类码垛、拆垛;
通过所述系统控制及防护单元Ⅳ获取所述机器视觉检测单元Ⅲ的实时信息,控制所述拆垛码垛整形及运输单元Ⅱ和拆垛码垛机器人单元Ⅰ实施货物归类码垛和拆垛。
优选的,所述拆垛码垛机器人单元Ⅰ包括固定在机器人底座上的机器人支撑座,机器人支撑座上铰接两段机械臂Ⅰ、机械臂Ⅱ,机械臂Ⅰ和机械臂Ⅱ铰接,机械臂Ⅱ的末端安装有抓吸复合机械手;所述机械臂Ⅰ、机械臂Ⅱ可相对于机器人支撑座360°旋转,且六自由度运动。
优选的,所述抓吸复合机械手具有吸盘吸起和抓手抱合机构。
优选的,所述拆垛码垛整形及运输单元Ⅱ包括拆垛、码垛机构和整形机构,拆垛、码垛机构位于拆垛码垛机器人单元Ⅰ两侧,整形机构位于拆垛码垛机器人单元Ⅰ前端。
优选的,所述整形机构包括整形架和与其相邻的输送带,整形架上设有一排滚筒,货物可在整形架的滚筒上移动并输送至输送带上。
优选的,所述拆垛、码垛机构包括设于拆垛码垛机器人单元Ⅰ一侧的托盘Ⅰ和放置其上的码垛物品,还包括设于拆垛码垛机器人单元Ⅰ另一侧的托盘Ⅱ和放置于其上的拆垛物品。
优选的,所述机器视觉检测单元Ⅲ包括设于拆垛码垛整形及运输单元Ⅱ整形机构前端的精定位单目相机和二维码扫描器,精定位单目相机和二维码扫描器获取所述整形机构在整形架的滚动的货物的位置和数量信息;
还包括设于拆垛码垛机器人单元Ⅰ后方两侧的双目相机支架上的精定位双目相机,精定位双目相机获取所述托盘上的码垛、拆垛物品的码放位置信息。
优选的,所述系统控制及防护单元Ⅳ进一步包括工控机和分别连接的机械手控制单元、机械臂云动控制单元、精定位双目相机视觉控制单元、精定位单目相机视觉控制单元和二维码扫描控制单元。
本发明相应地给出了一种基于机器视觉的柔性拆垛码垛机器人拆垛码垛方法,包括以下步骤:
1)视觉检测单元Ⅲ的精定位单目相机和二维码扫描器检测货物和条码,获取货物在整形架的滚动位置和数量信息;
2)整形架上输送带通过光电传感器检测到货物来料后,启动整形架对软包货物进行振动整平,并将货物运送至视觉检测工位;
3)系统控制及防护单元Ⅳ根据精定位单目相机和二维码扫描器的信息,控制拆垛码垛机器人单元Ⅰ通过抓吸复合机械手控制单元和机械臂云动控制单元执行码垛动作,将整形架的货物码放至托盘Ⅰ正确位置;
4)同时,精定位双目相机Ⅰ、Ⅱ获取托盘Ⅰ上的码垛物品的垛型后,进行识别定位;
5)系统控制及防护单元Ⅳ根据精定位双目相机的信息,控制拆垛码垛机器人单元Ⅰ引导抓吸复合机械手将码垛物品码放到托盘Ⅱ上新的码放位置,完成拆垛操作。
优选的,所述步骤1)中,单目相机获取货物的位置及数量信息,步骤如下:
a.对单目相机进行标定,获得单目相机的参数;
b.利用背景差法识别货物,采集无货物时场景图像;当货物到位时,采集图像与该图像信息做差可以从图像中识别出货物,会形成连通域,根据货物的特征,识别出货物在图像中的坐标及数量;
c.根据单目相机的参数,将图像坐标转换到机器人坐标中,获得货物的实际位置。
优选的,所述步骤2)中,双目相机识别托盘上物品的位置,步骤如下:
a.对双目相机进行标定,获得双目相机的内外参数;
b.采集托盘上物品的图像信息;
c.利用相机的内参对左右相机的图像进行校正、使左右相机图像处于同一水平线上;
d.对左右相机进行立体匹配,获得视差图;
e.根据视差图获取三维点云数据;
f.根据托盘上物品的特定从三维点云数据中分割出物品的位置。
本发明由于采取以上技术方案,其具有以下有益效果:
1.通过拆垛码垛机器人单元、拆垛码垛整形及运输单元、机器视觉检测单元和系统控制及防护单元,实现了拆垛码垛机器人的无人化、自动化工作,大大提高了生产效率,运用机器视觉技术,使拆垛码垛机器人操作简单、快速、可靠。
2.通过拆垛码垛机器人单元有效提高了拆垛码垛机器人的柔性,拆垛码垛机器人的抓吸复合机械手同时具有吸盘吸起和抓手抱合两种工作模式,能够对不同规格、不同形状的货物进行高效率的码垛拆垛操作。
3.通过精定位双目相机能够准确定位拆跺物品和码垛物品的空间三维位置并能够快速识别不同垛型,通过视觉引导技术使抓吸复合机械手能够对不同规格、不同形状、不同垛盘位置的垛型进行高效率作业,表现为码垛整齐、拆跺有序,且破包及货物损坏率低。
4.通过精定位单目相机和二维码扫描器实现了货物的自动检测和条码自动识别功能,有利于抓吸复合机械手的抓取,同时能够快速获取货物信息和记录搬运数量。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,并不构成对本发明的不当限定,在附图中:
图1为本发明拆垛码垛机器人单元结构示意图;
图2为本发明拆垛码垛机器人整体轴侧结构示意图;
图3为本发明拆垛码垛机器人整体俯视结构示意图;
图4为本发明拆垛码垛机器人整体控制系统单元示意图。
图中:1、机器人底座;2、机器人支撑座;3、机械臂Ⅰ;4、机械臂Ⅱ;5、抓吸复合机械手;6、托盘Ⅰ;7、码垛物品;8、托盘Ⅱ;9、拆垛物品;10、输送带;11、整形架;12、货物;13、滚筒;14、扫描器及相机支架;15、精定位单目相机;16、二维码扫描器;17、双目相机支架Ⅰ;18、精定位双目相机Ⅰ;19、双目相机支架Ⅱ;20、精定位双目相机Ⅱ;21、电控柜外壳;22、防护栏。
具体实施方式
下面将结合附图以及具体实施例来详细说明本发明,在此本发明的示意性实施例以及说明用来解释本发明,但并不作为对本发明的限定。
图1~图4示出了本发明一种基于机器视觉的柔性拆垛码垛机器人系统示意图,其中如图2所示,基于机器视觉的柔性拆垛码垛机器人系统包括:拆垛码垛机器人单元Ⅰ、拆垛码垛整形及运输单元Ⅲ、机器视觉检测单元Ⅱ和系统控制及防护单元Ⅳ。
其中,拆垛码垛机器人单元Ⅰ,用于对不同规格、不同形状的货物进行码垛拆垛操作。
拆垛码垛整形及运输单元Ⅱ,用于将货物整形和传输,并移动至视觉检测工位。
机器视觉检测单元Ⅲ,通过精定位单目相机和二维码扫描器对货物自动检测和条码自动识别,准确迅速获取货物的位置信息;通过精定位双目相机准确定位码垛物品和拆跺物品的三维空间位置,快速识别不同规格、形状、垛盘位置和垛型,通过系统控制及防护单元Ⅳ控制拆垛码垛机器人单元Ⅰ进行作业。
系统控制及防护单元Ⅳ,获取机器视觉检测单元Ⅲ的货物的位置和垛型信息,控制拆垛码垛机器人单元Ⅰ对不同规格、形状的货物归类码垛、拆垛。
通过系统控制及防护单元Ⅳ获取所述机器视觉检测单元Ⅲ的实时信息,控制拆垛码垛整形及运输单元Ⅱ和拆垛码垛机器人单元Ⅰ实施货物归类码垛和拆垛。
如图1所示,拆垛码垛机器人单元Ⅰ包括:机器人底座1、机器人支撑座2、机械臂Ⅰ3、机械臂Ⅱ4、抓吸复合机械手5,其中机器人底座1通过膨胀螺栓固定安装在地面,机器人支撑座2通过螺栓固定安装在机器人底座1上,机械臂Ⅰ3与机器人支撑座2铰接,机械臂Ⅰ3以机器人支撑座2为圆心,可实现360°旋转,机械臂Ⅱ4与机械臂Ⅰ3铰接,机械臂Ⅱ4可在机器人支撑座2为圆心,以机械臂Ⅰ3与机械臂Ⅱ4总长为半径的圆形区域内运动,抓吸复合机械手5安装在机械臂Ⅱ4的末端,抓吸复合机械手5具有吸盘吸起和抓手抱合机构。抓吸复合机械手5同时具有吸盘吸起和抓手抱合两种工作模式,能够对不同规格、不同形状的货物进行高效率的码垛拆垛操作。
如图2所示,拆垛码垛整形及运输单元Ⅱ包括拆垛、码垛机构和整形机构,拆垛、码垛机构位于拆垛码垛机器人单元Ⅰ两侧,整形机构位于拆垛码垛机器人单元Ⅰ前端。整形机构包括整形架11和与其相邻的输送带10,输送带10与地面固定安装在机器人左前方的送料工位,整形架11与地面固定安装在机器人正前方的货物整形工位并和输送带10紧邻,整形架11上设有一排滚筒13,货物12可在整形架11的滚筒13上移动并输送至输送带10上。货物12从送料口送入传送带10,经过传送带10的传输到达整形工位,货物12通过整形然后在整形架11的滚筒13上移动至视觉检测工位。
拆垛、码垛机构包括设于拆垛码垛机器人单元Ⅰ一侧的托盘Ⅰ6和放置其上的码垛物品7,还包括设于拆垛码垛机器人单元Ⅰ另一侧的托盘Ⅱ8和放置于其上的拆垛物品9。其中托盘Ⅰ6放置在机器人右侧的码垛托盘工位,码垛物品7放置在托盘Ⅰ6上,托盘Ⅱ8放置在机器人左侧的拆垛托盘工位,拆垛物品9放置在托盘Ⅱ8上。
如图2结合图3所示,机器视觉检测单元Ⅲ包括:扫描器及相机支架14、精定位单目相机15、二维码扫描器16、双目相机支架Ⅰ17、精定位双目相机Ⅰ18、双目相机支架Ⅱ19和精定位双目相机Ⅱ20。
包括设于拆垛码垛整形及运输单元Ⅱ整形机构前端的精定位单目相机15和二维码扫描器16,精定位单目相机15和二维码扫描器16获取所述整形机构在整形架11的滚动的货物12的位置和数量信息。还包括设于拆垛码垛机器人单元Ⅰ后方两侧的双目相机支架上的精定位双目相机Ⅰ18、Ⅱ20,精定位双目相机获取所述托盘上的码垛、拆垛物品的码放位置信息。
其中扫描器及相机支架14与地面固定安装在机器人右前方的定位抓取工位,精定位单目相机15和二维码扫描器16通过螺栓固定安装在扫描器及相机支架14上;通过精定位单目相机15和二维码扫描器16实现了货物12是否到达整形工位的自动检测和货物条码自动识别功能,通过对货物12的视觉识别、定位和扫描,能够准确迅速的获取货物12的位置信息有利于抓吸复合机械手5的抓取;同时能够快速获取货物12信息和记录搬运数量。双目相机支架Ⅰ17与地面固定安装在码垛托盘工位的后方,精定位双目相机Ⅰ18通过螺栓固定安装在双目相机支架Ⅰ17上,双目相机支架Ⅱ19与地面固定安装在拆垛托盘工位的后方,精定位双目相机Ⅱ20通过螺栓固定安装在双目相机支架Ⅱ19上,通过精定位双目相机Ⅰ18和精定位双目相机Ⅱ20能够准确定位码垛物品和拆跺物品的空间三维位置并能够快速识别不同规格、不同形状、不同垛盘位置的垛型,通过视觉引导技术使抓吸复合机械手5能够对不同规格、不同形状、不同垛盘位置的垛型进行高效率作业。
如图4结合图2所示,控制系统及防护单元Ⅳ包括:电控柜外壳21、工控机、工控机和分别连接的机械手控制单元、机械臂云动控制单元、精定位双目相机视觉控制单元、精定位单目相机视觉控制单元、二维码扫描控制单元和防护栏22。其中控制系统由高性能工控机组成,工控机安装在电控柜外壳21内部,工控机通过以太网接口与机械臂运动控制单元和机械手控制单元通信,通过串口与二维码扫描控制单元通信,通过千兆以太网与精定位单目相机视觉控制单元和精定位双目相机视觉控制单元通信,机器人码垛拆跺工位以及整形工位的周边安装防护栏22,防护栏22可有效起到警示、防护和隔离工作区的作用。精定位单目相机视觉控制单元在检测到货物12到达视觉检测工位后,向工控机发送精定位单目相机检测指令定位货物12的准确位置以及识别货物条码,随后工控机22通过机械臂运动控制单元和机械手控制单元控制抓吸复合机械手5抓取货物,此时精定位双目相机视觉控制单元启动,最后抓吸复合机械手5将货物12放到托盘Ⅰ6上。
本发明基于机器视觉的柔性拆垛码垛机器人拆垛码垛方法,包括以下步骤:
1)视觉检测单元Ⅲ的精定位单目相机15和二维码扫描器16检测货物12和条码,获取货物在整形架11的滚动位置和数量信息;精定位单目相机15检测到货物12到位后,将到位信号通过系统控制及防护单元Ⅳ上位机发送给码垛机器人I/O端口;
精定位单目相机获取货物的位置及数量信息,步骤如下:
a.对单目相机进行标定,获得单目相机的参数;
b.利用背景差法识别货物,采集无货物时场景图像;当货物到位时,采集图像与该图像信息做差可以从图像中识别出货物,会形成连通域,根据货物的特征,识别出货物在图像中的坐标及数量;
c.根据单目相机的参数,将图像坐标转换到机器人坐标中,获得货物的实际位置;
2)同时精定位双目相机Ⅰ18、Ⅱ20检测托盘Ⅰ6的摆放位置,将位置坐标通过系统控制及防护单元Ⅳ发送给拆垛码垛机器人单元Ⅰ千兆网通讯端口;抓吸复合机械手5抓取货物12后通过托盘Ⅰ6位置补偿码放到正确位置,完成码垛操作;
精定位双目相机识别托盘上物品的位置,步骤如下:
a.对双目相机进行标定,获得双目相机的内外参数;
b.采集托盘上物品的图像信息;
c.利用相机的内参对左右相机的图像进行校正、使左右相机图像处于同一水平线上;
d.对左右相机进行立体匹配,获得视差图;
e.根据视差图获取三维点云数据;
f.根据托盘上物品的特定从三维点云数据中分割出物品的位置;
3)整形架11上输送带10通过光电传感器检测到货物12来料后,启动整形架11对软包货物进行振动整平,并将货物12运送至视觉检测工位;
4)精定位双目相机Ⅰ18检测托盘Ⅰ6上码垛物品7的垛型后,进行识别定位,将坐标信息通过系统控制及防护单元Ⅳ上位机发送给拆垛码垛机器人单元Ⅰ千兆网通讯端口,系统控制及防护单元Ⅳ引导抓吸复合机械手5抓取码垛物品7;
5)同时精定位双目相机Ⅱ20检测托盘Ⅱ8的摆放位置,并通过系统控制及防护单元Ⅳ发送给拆垛码垛机器人单元Ⅰ千兆网通讯端口,引导抓吸复合机械手5将码垛物品7码放到托盘Ⅱ8上新的码放位置,完成拆垛操作。
本发明并不局限于上述实施例,在本发明公开的技术方案的基础上,本领域的技术人员根据所公开的技术内容,不需要创造性的劳动就可以对其中的一些技术特征作出一些替换和变形,这些替换和变形均在本发明的保护范围内。

Claims (10)

1.一种基于机器视觉的柔性拆垛码垛机器人系统,其特征在于,包括:
拆垛码垛机器人单元Ⅰ,用于对不同规格、不同形状的货物进行码垛拆垛操作;
拆垛码垛整形及运输单元Ⅱ,用于将货物整形和传输,并移动至视觉检测工位;
机器视觉检测单元Ⅲ,通过精定位单目相机、二维码扫描器和精定位双目相机分别获取货物的位置、数量、规格、形状和所在垛盘垛型,并将该信息传递至系统控制及防护单元Ⅳ;
系统控制及防护单元Ⅳ,获取机器视觉检测单元Ⅲ的货物的位置、数量、规格、形状和所在垛盘垛型信息,控制拆垛码垛机器人单元Ⅰ对不同规格、形状的货物归类码垛、拆垛;
通过所述系统控制及防护单元Ⅳ获取所述机器视觉检测单元Ⅲ的实时信息,控制所述拆垛码垛整形及运输单元Ⅱ和拆垛码垛机器人单元Ⅰ实施货物归类码垛和拆垛。
2.根据权利要求1所述的基于机器视觉的柔性拆垛码垛机器人系统,其特征在于,所述拆垛码垛机器人单元Ⅰ包括固定在机器人底座(1)上的机器人支撑座(2),机器人支撑座(2)上铰接两段机械臂Ⅰ(3)、机械臂Ⅱ(4),机械臂Ⅰ(3)和机械臂Ⅱ(4)铰接,机械臂Ⅱ(4)的末端安装有抓吸复合机械手(5);所述机械臂Ⅰ(3)、机械臂Ⅱ(4)可相对于机器人支撑座360°旋转,且六自由度运动。
3.根据权利要求2所述的基于机器视觉的柔性拆垛码垛机器人系统,其特征在于,所述抓吸复合机械手(5)具有吸盘吸起和抓手抱合机构。
4.根据权利要求1所述的基于机器视觉的柔性拆垛码垛机器人系统,其特征在于,所述拆垛码垛整形及运输单元Ⅱ包括拆垛、码垛机构和整形机构,拆垛、码垛机构位于拆垛码垛机器人单元Ⅰ两侧,整形机构位于拆垛码垛机器人单元Ⅰ前端。
5.根据权利要求4所述的基于机器视觉的柔性拆垛码垛机器人系统,其特征在于,所述整形机构包括整形架(11)和与其相邻的输送带(10),整形架(11)上设有一排滚筒(13),货物(12)可在整形架(11)的滚筒(13)上移动并输送至输送带(10)上。
6.根据权利要求4所述的基于机器视觉的柔性拆垛码垛机器人系统,其特征在于,所述拆垛、码垛机构包括设于拆垛码垛机器人单元Ⅰ一侧的托盘Ⅰ(6)和放置其上的码垛物品(7),还包括设于拆垛码垛机器人单元Ⅰ另一侧的托盘Ⅱ(8)和放置于其上的拆垛物品(9)。
7.根据权利要求1所述的基于机器视觉的柔性拆垛码垛机器人系统,其特征在于,所述机器视觉检测单元Ⅲ包括设于拆垛码垛整形及运输单元Ⅱ整形机构前端的精定位单目相机(15)和二维码扫描器(16),精定位单目相机(15)和二维码扫描器(16)获取所述整形机构在整形架(11)的滚动的货物(12)的位置和数量信息;
还包括设于拆垛码垛机器人单元Ⅰ后方两侧的双目相机支架上的精定位双目相机(18、20),精定位双目相机(18、20)获取所述托盘上的码垛、拆垛物品的码放位置信息。
8.根据权利要求1所述的基于机器视觉的柔性拆垛码垛机器人系统,其特征在于,所述系统控制及防护单元Ⅳ进一步包括工控机和分别连接的机械手控制单元、机械臂云动控制单元、精定位双目相机视觉控制单元、精定位单目相机视觉控制单元和二维码扫描控制单元。
9.一种权利要求1-8任一项所述系统的基于机器视觉的柔性拆垛码垛机器人拆垛码垛方法,其特征在于,包括以下步骤:
1)视觉检测单元Ⅲ的精定位单目相机(15)和二维码扫描器(16)检测货物(12)和条码,获取货物在整形架(11)的滚动位置和数量信息;
2)整形架(11)上输送带(10)通过光电传感器检测到货物(12)来料后,启动整形架(11)对软包货物进行振动整平,并将货物(12)运送至视觉检测工位;
3)系统控制及防护单元Ⅳ根据精定位单目相机(15)和二维码扫描器(16)的信息,控制拆垛码垛机器人单元Ⅰ通过抓吸复合机械手控制单元和机械臂云动控制单元执行码垛动作,将整形架(11)的货物码放至托盘Ⅰ(6)正确位置;
4)同时,精定位双目相机Ⅰ、Ⅱ(18、20)获取托盘Ⅰ(6)上的码垛物品(7)的垛型后,进行识别定位;
5)系统控制及防护单元Ⅳ根据精定位双目相机(15)的信息,控制拆垛码垛机器人单元Ⅰ引导抓吸复合机械手(5)将码垛物品(7)码放到托盘Ⅱ(8)上新的码放位置,完成拆垛操作。
10.根据权利要求9所述的基于机器视觉的柔性拆垛码垛机器人拆垛码垛方法,其特征在于,所述步骤1)中,单目相机获取货物的位置及数量信息,步骤如下:
a.对单目相机进行标定,获得单目相机的参数;
b.利用背景差法识别货物,采集无货物时场景图像;当货物到位时,采集图像与该图像信息做差可以从图像中识别出货物,会形成连通域,根据货物的特征,识别出货物在图像中的坐标及数量;
c.根据单目相机的参数,将图像坐标转换到机器人坐标中,获得货物的实际位置;
所述步骤2)中,双目相机识别托盘上物品的位置,步骤如下:
a.对双目相机进行标定,获得双目相机的内外参数;
b.采集托盘上物品的图像信息;
c.利用相机的内参对左右相机的图像进行校正、使左右相机图像处于同一水平线上;
d.对左右相机进行立体匹配,获得视差图;
e.根据视差图获取三维点云数据;
f.根据托盘上物品的特定从三维点云数据中分割出物品的位置。
CN201811297323.6A 2018-11-01 2018-11-01 一种基于机器视觉的柔性拆垛码垛机器人系统及方法 Active CN109279373B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811297323.6A CN109279373B (zh) 2018-11-01 2018-11-01 一种基于机器视觉的柔性拆垛码垛机器人系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811297323.6A CN109279373B (zh) 2018-11-01 2018-11-01 一种基于机器视觉的柔性拆垛码垛机器人系统及方法

Publications (2)

Publication Number Publication Date
CN109279373A true CN109279373A (zh) 2019-01-29
CN109279373B CN109279373B (zh) 2024-02-20

Family

ID=65174357

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811297323.6A Active CN109279373B (zh) 2018-11-01 2018-11-01 一种基于机器视觉的柔性拆垛码垛机器人系统及方法

Country Status (1)

Country Link
CN (1) CN109279373B (zh)

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109665332A (zh) * 2019-02-25 2019-04-23 广州达意隆包装机械股份有限公司 一种自动装卸产品的装置
CN109693903A (zh) * 2019-02-25 2019-04-30 广州达意隆包装机械股份有限公司 一种货物装卸系统
CN109704067A (zh) * 2019-02-22 2019-05-03 广东溢达纺织有限公司 取料卸料装置
CN109911272A (zh) * 2019-03-19 2019-06-21 厦门大学嘉庚学院 一种基于参考线准则的自由码垛装箱方法
CN110287865A (zh) * 2019-06-24 2019-09-27 齐鲁工业大学 基于视觉伺服的医学载玻片码放校正方法、控制器及系统
CN110490524A (zh) * 2019-08-21 2019-11-22 赖辉 一种基于码垛数据的拆垛方法、拆垛装置及拆垛系统
CN110533717A (zh) * 2019-08-06 2019-12-03 武汉理工大学 一种基于双目视觉的目标抓取方法及装置
CN110626812A (zh) * 2019-10-16 2019-12-31 无锡黎曼机器人科技有限公司 3d视觉导引纸箱智能拆垛码垛集成系统及拆垛码垛方法
CN110969652A (zh) * 2019-11-20 2020-04-07 上海交通大学 基于机械手单目相机充当双目立体视觉的拍摄方法及系统
CN111422415A (zh) * 2020-03-30 2020-07-17 安徽轶记机械科技有限公司 一种包装机生产线多工位机械手
CN111604909A (zh) * 2020-06-24 2020-09-01 辽宁工业大学 一种四轴工业码垛机器人的视觉系统
CN112047113A (zh) * 2020-08-26 2020-12-08 苏州中科全象智能科技有限公司 一种基于人工智能技术的3d视觉码垛系统及方法
CN112061652A (zh) * 2019-06-11 2020-12-11 中国石油化工股份有限公司 垛装货物整形方法及系统
CN112265829A (zh) * 2020-09-17 2021-01-26 无锡满夫智能装备科技有限公司 一种环保电力智能码垛设备
CN112684727A (zh) * 2019-10-17 2021-04-20 广东原点智能技术有限公司 一种基于激光slam的机器人码垛控制系统
CN113772306A (zh) * 2021-02-26 2021-12-10 北京京东振世信息技术有限公司 货品码垛系统和方法
CN113895908A (zh) * 2021-10-15 2022-01-07 江苏汇博机器人技术股份有限公司 一种堆垛机器人搬运线路规划方法
CN114131615A (zh) * 2021-12-27 2022-03-04 哈尔滨工业大学芜湖机器人产业技术研究院 基于视觉引导的机器人拆码垛系统及其拆垛和码垛方法
CN114803257A (zh) * 2022-05-27 2022-07-29 重庆长安民生物流股份有限公司 一种基于amr料箱式机器人的智能仓配一体化系统
CN114933176A (zh) * 2022-05-14 2022-08-23 江苏经贸职业技术学院 一种采用人工智能的3d视觉码垛系统
CN114955568A (zh) * 2022-06-29 2022-08-30 广东电网有限责任公司广州供电局 基于视觉识别的自动堆垛方法、系统及存储介质
CN114988002A (zh) * 2022-07-08 2022-09-02 广东电网有限责任公司广州供电局 一种电缆线圈自动拆码垛系统
CN117142156A (zh) * 2023-10-30 2023-12-01 深圳市金环宇电线电缆有限公司 基于自动定位的线缆码垛控制方法、装置、设备及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07291450A (ja) * 1994-04-26 1995-11-07 Kawasaki Heavy Ind Ltd インテリジェントパレタイズシステム
CN105217324A (zh) * 2015-10-20 2016-01-06 上海影火智能科技有限公司 一种新型的拆垛方法和系统
CN205932501U (zh) * 2016-08-11 2017-02-08 上海佳万智能科技有限公司 一种拆垛控制系统
CN108002055A (zh) * 2017-12-31 2018-05-08 山东泰开箱变有限公司 托盘自动拆码垛滚筒输送线及输送方法
CN209023815U (zh) * 2018-11-01 2019-06-25 西安中科光电精密工程有限公司 一种基于机器视觉的柔性拆垛码垛机器人系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07291450A (ja) * 1994-04-26 1995-11-07 Kawasaki Heavy Ind Ltd インテリジェントパレタイズシステム
CN105217324A (zh) * 2015-10-20 2016-01-06 上海影火智能科技有限公司 一种新型的拆垛方法和系统
CN205932501U (zh) * 2016-08-11 2017-02-08 上海佳万智能科技有限公司 一种拆垛控制系统
CN108002055A (zh) * 2017-12-31 2018-05-08 山东泰开箱变有限公司 托盘自动拆码垛滚筒输送线及输送方法
CN209023815U (zh) * 2018-11-01 2019-06-25 西安中科光电精密工程有限公司 一种基于机器视觉的柔性拆垛码垛机器人系统

Cited By (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109704067A (zh) * 2019-02-22 2019-05-03 广东溢达纺织有限公司 取料卸料装置
CN109693903A (zh) * 2019-02-25 2019-04-30 广州达意隆包装机械股份有限公司 一种货物装卸系统
CN109665332A (zh) * 2019-02-25 2019-04-23 广州达意隆包装机械股份有限公司 一种自动装卸产品的装置
CN109911272A (zh) * 2019-03-19 2019-06-21 厦门大学嘉庚学院 一种基于参考线准则的自由码垛装箱方法
CN109911272B (zh) * 2019-03-19 2021-08-31 厦门大学嘉庚学院 一种基于参考线准则的自由码垛装箱方法
CN112061652A (zh) * 2019-06-11 2020-12-11 中国石油化工股份有限公司 垛装货物整形方法及系统
CN110287865A (zh) * 2019-06-24 2019-09-27 齐鲁工业大学 基于视觉伺服的医学载玻片码放校正方法、控制器及系统
CN110533717A (zh) * 2019-08-06 2019-12-03 武汉理工大学 一种基于双目视觉的目标抓取方法及装置
CN110533717B (zh) * 2019-08-06 2023-08-01 武汉理工大学 一种基于双目视觉的目标抓取方法及装置
CN110490524A (zh) * 2019-08-21 2019-11-22 赖辉 一种基于码垛数据的拆垛方法、拆垛装置及拆垛系统
CN110626812A (zh) * 2019-10-16 2019-12-31 无锡黎曼机器人科技有限公司 3d视觉导引纸箱智能拆垛码垛集成系统及拆垛码垛方法
CN112684727A (zh) * 2019-10-17 2021-04-20 广东原点智能技术有限公司 一种基于激光slam的机器人码垛控制系统
CN110969652A (zh) * 2019-11-20 2020-04-07 上海交通大学 基于机械手单目相机充当双目立体视觉的拍摄方法及系统
CN110969652B (zh) * 2019-11-20 2023-10-03 上海交通大学 基于机械手单目相机充当双目立体视觉的拍摄方法及系统
CN111422415A (zh) * 2020-03-30 2020-07-17 安徽轶记机械科技有限公司 一种包装机生产线多工位机械手
CN111604909A (zh) * 2020-06-24 2020-09-01 辽宁工业大学 一种四轴工业码垛机器人的视觉系统
CN112047113A (zh) * 2020-08-26 2020-12-08 苏州中科全象智能科技有限公司 一种基于人工智能技术的3d视觉码垛系统及方法
CN112047113B (zh) * 2020-08-26 2022-02-22 苏州中科全象智能科技有限公司 一种基于人工智能技术的3d视觉码垛系统及方法
CN112265829A (zh) * 2020-09-17 2021-01-26 无锡满夫智能装备科技有限公司 一种环保电力智能码垛设备
CN113772306A (zh) * 2021-02-26 2021-12-10 北京京东振世信息技术有限公司 货品码垛系统和方法
CN113895908A (zh) * 2021-10-15 2022-01-07 江苏汇博机器人技术股份有限公司 一种堆垛机器人搬运线路规划方法
CN114131615A (zh) * 2021-12-27 2022-03-04 哈尔滨工业大学芜湖机器人产业技术研究院 基于视觉引导的机器人拆码垛系统及其拆垛和码垛方法
CN114933176A (zh) * 2022-05-14 2022-08-23 江苏经贸职业技术学院 一种采用人工智能的3d视觉码垛系统
CN114803257A (zh) * 2022-05-27 2022-07-29 重庆长安民生物流股份有限公司 一种基于amr料箱式机器人的智能仓配一体化系统
CN114955568A (zh) * 2022-06-29 2022-08-30 广东电网有限责任公司广州供电局 基于视觉识别的自动堆垛方法、系统及存储介质
CN114955568B (zh) * 2022-06-29 2024-05-28 广东电网有限责任公司广州供电局 基于视觉识别的自动堆垛方法、系统及存储介质
CN114988002A (zh) * 2022-07-08 2022-09-02 广东电网有限责任公司广州供电局 一种电缆线圈自动拆码垛系统
CN114988002B (zh) * 2022-07-08 2023-10-20 广东电网有限责任公司广州供电局 一种电缆线圈自动拆码垛系统
CN117142156A (zh) * 2023-10-30 2023-12-01 深圳市金环宇电线电缆有限公司 基于自动定位的线缆码垛控制方法、装置、设备及介质
CN117142156B (zh) * 2023-10-30 2024-02-13 深圳市金环宇电线电缆有限公司 基于自动定位的线缆码垛控制方法、装置、设备及介质

Also Published As

Publication number Publication date
CN109279373B (zh) 2024-02-20

Similar Documents

Publication Publication Date Title
CN109279373A (zh) 一种基于机器视觉的柔性拆垛码垛机器人系统及方法
CN209023815U (zh) 一种基于机器视觉的柔性拆垛码垛机器人系统
US11358811B2 (en) Vision-assisted robotized depalletizer
CN105692251B (zh) 物品自动装车系统
CN111730603B (zh) 机器人系统的控制装置以及控制方法
US9393686B1 (en) Moveable apparatuses having robotic manipulators and conveyors to facilitate object movement
US9498887B1 (en) Two-faced linearly actuated gripper
CN109095059A (zh) 无人装车系统及其装车方法
CN106965180A (zh) 流水线上瓶子的机械臂抓取装置与方法
CN110498243A (zh) 一种混合箱体机器人智能拆码垛系统及控制方法
CN109772718A (zh) 包裹地址识别系统、识别方法和包裹分拣系统、分拣方法
CN212633464U (zh) 一种仓储分拣机器人
US20210047115A1 (en) Robot system for gripping an item in a storage and picking system, and operating method for same
Nakamoto et al. High-speed and compact depalletizing robot capable of handling packages stacked complicatedly
CN212312038U (zh) 一种基于扫码和姿态控制的机器人拣选系统
CN109205332A (zh) 一种可移动式轮胎码垛机械手及方法
CN201634239U (zh) 一种标准箱体的自动拆垛输送装置
CN211802462U (zh) 移动式智能货物抓取与运输装置
CN110421542B (zh) 一种箱类包裹装卸智能机器人
US20190329992A1 (en) Palletizing and/or depalletizing system of goods with drones
CN114131615A (zh) 基于视觉引导的机器人拆码垛系统及其拆垛和码垛方法
CN209052066U (zh) 包裹分配系统
CN110171658A (zh) 一种堆垛系统
CN210437869U (zh) 一种堆垛机器人
CN112833789A (zh) 汽车轮毂气孔位置检测装置、方位角检测装置及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant