CN109279373B - 一种基于机器视觉的柔性拆垛码垛机器人系统及方法 - Google Patents
一种基于机器视觉的柔性拆垛码垛机器人系统及方法 Download PDFInfo
- Publication number
- CN109279373B CN109279373B CN201811297323.6A CN201811297323A CN109279373B CN 109279373 B CN109279373 B CN 109279373B CN 201811297323 A CN201811297323 A CN 201811297323A CN 109279373 B CN109279373 B CN 109279373B
- Authority
- CN
- China
- Prior art keywords
- unstacking
- stacking
- unit
- robot
- goods
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 13
- 238000007493 shaping process Methods 0.000 claims description 64
- 230000007246 mechanism Effects 0.000 claims description 27
- 238000001514 detection method Methods 0.000 claims description 25
- 230000000007 visual effect Effects 0.000 claims description 21
- 239000002131 composite material Substances 0.000 claims description 18
- 238000005096 rolling process Methods 0.000 claims description 6
- 150000001875 compounds Chemical class 0.000 claims description 5
- 230000009471 action Effects 0.000 claims description 2
- 238000005516 engineering process Methods 0.000 abstract description 3
- 238000004519 manufacturing process Methods 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 3
- 230000007547 defect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001681 protective effect Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000013072 incoming material Substances 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 238000011179 visual inspection Methods 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
- B65G—TRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
- B65G61/00—Use of pick-up or transfer devices or of manipulators for stacking or de-stacking articles not otherwise provided for
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Manipulator (AREA)
Abstract
本发明公开了一种基于机器视觉的柔性拆垛码垛机器人系统及方法,包括拆垛码垛机器人单元Ⅰ、拆垛码垛整形及运输单元Ⅱ、机器视觉检测单元Ⅲ和系统控制及防护单元Ⅳ,通过系统控制及防护单元Ⅳ获取所述机器视觉检测单元Ⅲ的实时信息,控制拆垛码垛整形及运输单元Ⅱ和拆垛码垛机器人单元Ⅰ实施货物归类码垛和拆垛。本系统实现了拆垛码垛机器人的无人化、自动化工作,大大提高了生产效率,运用机器视觉技术,使拆垛码垛机器人操作简单、快速、可靠。
Description
技术领域
本发明属于拆垛码垛机器人领域,具体涉及一种基于机器视觉的柔性拆垛码垛机器人系统及方法。
背景技术
随着自动化程度的逐步提高,智能物流领域得到迅速发展,仓库、工厂车间、港口、码头等许多场所的货物装卸工作越来越多,急需智能化程度高、柔性好的拆垛码垛机器人来取代人工码垛和传统的机器人码垛。目前人工码垛工作主要依靠人工或叉车来完成,但是该方式存在劳动强度量大、码垛不整齐、对拆垛货物及垛型要求高、货物损伤率高等缺点,大大降低了拆垛码垛效率。传统的拆垛码垛机器人对垛盘位置精度要求高、对垛型及货物规格适应性差,甚至出现严重的破包或货物损坏现象,造成极大的经济损失。因此,研发一种智能化程度高、柔性好(适应不同规格、不同垛型形状及垛盘位置)、工作效率高的拆垛码垛机器人具有重要的工程应用价值。
发明内容
为解决现有技术中存在的上述缺陷,本发明的目的在于提供一种智能化程度高、适应不同规格、不同垛型形状及垛盘位置、柔性好、工作效率高的基于机器视觉的柔性拆垛码垛机器人系统及方法。
本发明是通过下述技术方案来实现的。
本发明的一种基于机器视觉的柔性拆垛码垛机器人系统,包括:
拆垛码垛机器人单元Ⅰ,用于对不同规格、不同形状的货物进行码垛拆垛操作;
拆垛码垛整形及运输单元Ⅱ,用于将货物整形和传输,并移动至视觉检测工位;
机器视觉检测单元Ⅲ,通过精定位单目相机、二维码扫描器和精定位双目相机分别获取货物的位置、数量、规格、形状和所在垛盘垛型,并将该信息传递至系统控制及防护单元Ⅳ;
系统控制及防护单元Ⅳ,获取机器视觉检测单元Ⅲ的货物的位置、数量、规格、形状和所在垛盘垛型信息,控制拆垛码垛机器人单元Ⅰ对不同规格、形状的货物归类码垛、拆垛;
通过所述系统控制及防护单元Ⅳ获取所述机器视觉检测单元Ⅲ的实时信息,控制所述拆垛码垛整形及运输单元Ⅱ和拆垛码垛机器人单元Ⅰ实施货物归类码垛和拆垛。
优选的,所述拆垛码垛机器人单元Ⅰ包括固定在机器人底座上的机器人支撑座,机器人支撑座上铰接两段机械臂Ⅰ、机械臂Ⅱ,机械臂Ⅰ和机械臂Ⅱ铰接,机械臂Ⅱ的末端安装有抓吸复合机械手;所述机械臂Ⅰ、机械臂Ⅱ可相对于机器人支撑座360°旋转,且六自由度运动。
优选的,所述抓吸复合机械手具有吸盘吸起和抓手抱合机构。
优选的,所述拆垛码垛整形及运输单元Ⅱ包括拆垛、码垛机构和整形机构,拆垛、码垛机构位于拆垛码垛机器人单元Ⅰ两侧,整形机构位于拆垛码垛机器人单元Ⅰ前端。
优选的,所述整形机构包括整形架和与其相邻的输送带,整形架上设有一排滚筒,货物可在整形架的滚筒上移动并输送至输送带上。
优选的,所述拆垛、码垛机构包括设于拆垛码垛机器人单元Ⅰ一侧的托盘Ⅰ和放置其上的码垛物品,还包括设于拆垛码垛机器人单元Ⅰ另一侧的托盘Ⅱ和放置于其上的拆垛物品。
优选的,所述机器视觉检测单元Ⅲ包括设于拆垛码垛整形及运输单元Ⅱ整形机构前端的精定位单目相机和二维码扫描器,精定位单目相机和二维码扫描器获取所述整形机构在整形架的滚动的货物的位置和数量信息;
还包括设于拆垛码垛机器人单元Ⅰ后方两侧的双目相机支架上的精定位双目相机,精定位双目相机获取所述托盘上的码垛、拆垛物品的码放位置信息。
优选的,所述系统控制及防护单元Ⅳ进一步包括工控机和分别连接的机械手控制单元、机械臂云动控制单元、精定位双目相机视觉控制单元、精定位单目相机视觉控制单元和二维码扫描控制单元。
本发明相应地给出了一种基于机器视觉的柔性拆垛码垛机器人拆垛码垛方法,包括以下步骤:
1)视觉检测单元Ⅲ的精定位单目相机和二维码扫描器检测货物和条码,获取货物在整形架的滚动位置和数量信息;
2)整形架上输送带通过光电传感器检测到货物来料后,启动整形架对软包货物进行振动整平,并将货物运送至视觉检测工位;
3)系统控制及防护单元Ⅳ根据精定位单目相机和二维码扫描器的信息,控制拆垛码垛机器人单元Ⅰ通过抓吸复合机械手控制单元和机械臂云动控制单元执行码垛动作,将整形架的货物码放至托盘Ⅰ正确位置;
4)同时,精定位双目相机Ⅰ、Ⅱ获取托盘Ⅰ上的码垛物品的垛型后,进行识别定位;
5)系统控制及防护单元Ⅳ根据精定位双目相机的信息,控制拆垛码垛机器人单元Ⅰ引导抓吸复合机械手将码垛物品码放到托盘Ⅱ上新的码放位置,完成拆垛操作。
优选的,所述步骤1)中,单目相机获取货物的位置及数量信息,步骤如下:
a.对单目相机进行标定,获得单目相机的参数;
b.利用背景差法识别货物,采集无货物时场景图像;当货物到位时,采集图像与该图像信息做差可以从图像中识别出货物,会形成连通域,根据货物的特征,识别出货物在图像中的坐标及数量;
c.根据单目相机的参数,将图像坐标转换到机器人坐标中,获得货物的实际位置。
优选的,所述步骤2)中,双目相机识别托盘上物品的位置,步骤如下:
a.对双目相机进行标定,获得双目相机的内外参数;
b.采集托盘上物品的图像信息;
c.利用相机的内参对左右相机的图像进行校正、使左右相机图像处于同一水平线上;
d.对左右相机进行立体匹配,获得视差图;
e.根据视差图获取三维点云数据;
f.根据托盘上物品的特定从三维点云数据中分割出物品的位置。
本发明由于采取以上技术方案,其具有以下有益效果:
1.通过拆垛码垛机器人单元、拆垛码垛整形及运输单元、机器视觉检测单元和系统控制及防护单元,实现了拆垛码垛机器人的无人化、自动化工作,大大提高了生产效率,运用机器视觉技术,使拆垛码垛机器人操作简单、快速、可靠。
2.通过拆垛码垛机器人单元有效提高了拆垛码垛机器人的柔性,拆垛码垛机器人的抓吸复合机械手同时具有吸盘吸起和抓手抱合两种工作模式,能够对不同规格、不同形状的货物进行高效率的码垛拆垛操作。
3.通过精定位双目相机能够准确定位拆跺物品和码垛物品的空间三维位置并能够快速识别不同垛型,通过视觉引导技术使抓吸复合机械手能够对不同规格、不同形状、不同垛盘位置的垛型进行高效率作业,表现为码垛整齐、拆跺有序,且破包及货物损坏率低。
4.通过精定位单目相机和二维码扫描器实现了货物的自动检测和条码自动识别功能,有利于抓吸复合机械手的抓取,同时能够快速获取货物信息和记录搬运数量。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,并不构成对本发明的不当限定,在附图中:
图1为本发明拆垛码垛机器人单元结构示意图;
图2为本发明拆垛码垛机器人整体轴侧结构示意图;
图3为本发明拆垛码垛机器人整体俯视结构示意图;
图4为本发明拆垛码垛机器人整体控制系统单元示意图。
图中:1、机器人底座;2、机器人支撑座;3、机械臂Ⅰ;4、机械臂Ⅱ;5、抓吸复合机械手;6、托盘Ⅰ;7、码垛物品;8、托盘Ⅱ;9、拆垛物品;10、输送带;11、整形架;12、货物;13、滚筒;14、扫描器及相机支架;15、精定位单目相机;16、二维码扫描器;17、双目相机支架Ⅰ;18、精定位双目相机Ⅰ;19、双目相机支架Ⅱ;20、精定位双目相机Ⅱ;21、电控柜外壳;22、防护栏。
具体实施方式
下面将结合附图以及具体实施例来详细说明本发明,在此本发明的示意性实施例以及说明用来解释本发明,但并不作为对本发明的限定。
图1~图4示出了本发明一种基于机器视觉的柔性拆垛码垛机器人系统示意图,其中如图2所示,基于机器视觉的柔性拆垛码垛机器人系统包括:拆垛码垛机器人单元Ⅰ、拆垛码垛整形及运输单元Ⅲ、机器视觉检测单元Ⅱ和系统控制及防护单元Ⅳ。
其中,拆垛码垛机器人单元Ⅰ,用于对不同规格、不同形状的货物进行码垛拆垛操作。
拆垛码垛整形及运输单元Ⅱ,用于将货物整形和传输,并移动至视觉检测工位。
机器视觉检测单元Ⅲ,通过精定位单目相机和二维码扫描器对货物自动检测和条码自动识别,准确迅速获取货物的位置信息;通过精定位双目相机准确定位码垛物品和拆跺物品的三维空间位置,快速识别不同规格、形状、垛盘位置和垛型,通过系统控制及防护单元Ⅳ控制拆垛码垛机器人单元Ⅰ进行作业。
系统控制及防护单元Ⅳ,获取机器视觉检测单元Ⅲ的货物的位置和垛型信息,控制拆垛码垛机器人单元Ⅰ对不同规格、形状的货物归类码垛、拆垛。
通过系统控制及防护单元Ⅳ获取所述机器视觉检测单元Ⅲ的实时信息,控制拆垛码垛整形及运输单元Ⅱ和拆垛码垛机器人单元Ⅰ实施货物归类码垛和拆垛。
如图1所示,拆垛码垛机器人单元Ⅰ包括:机器人底座1、机器人支撑座2、机械臂Ⅰ3、机械臂Ⅱ4、抓吸复合机械手5,其中机器人底座1通过膨胀螺栓固定安装在地面,机器人支撑座2通过螺栓固定安装在机器人底座1上,机械臂Ⅰ3与机器人支撑座2铰接,机械臂Ⅰ3以机器人支撑座2为圆心,可实现360°旋转,机械臂Ⅱ4与机械臂Ⅰ3铰接,机械臂Ⅱ4可在机器人支撑座2为圆心,以机械臂Ⅰ3与机械臂Ⅱ4总长为半径的圆形区域内运动,抓吸复合机械手5安装在机械臂Ⅱ4的末端,抓吸复合机械手5具有吸盘吸起和抓手抱合机构。抓吸复合机械手5同时具有吸盘吸起和抓手抱合两种工作模式,能够对不同规格、不同形状的货物进行高效率的码垛拆垛操作。
如图2所示,拆垛码垛整形及运输单元Ⅱ包括拆垛、码垛机构和整形机构,拆垛、码垛机构位于拆垛码垛机器人单元Ⅰ两侧,整形机构位于拆垛码垛机器人单元Ⅰ前端。整形机构包括整形架11和与其相邻的输送带10,输送带10与地面固定安装在机器人左前方的送料工位,整形架11与地面固定安装在机器人正前方的货物整形工位并和输送带10紧邻,整形架11上设有一排滚筒13,货物12可在整形架11的滚筒13上移动并输送至输送带10上。货物12从送料口送入传送带10,经过传送带10的传输到达整形工位,货物12通过整形然后在整形架11的滚筒13上移动至视觉检测工位。
拆垛、码垛机构包括设于拆垛码垛机器人单元Ⅰ一侧的托盘Ⅰ6和放置其上的码垛物品7,还包括设于拆垛码垛机器人单元Ⅰ另一侧的托盘Ⅱ8和放置于其上的拆垛物品9。其中托盘Ⅰ6放置在机器人右侧的码垛托盘工位,码垛物品7放置在托盘Ⅰ6上,托盘Ⅱ8放置在机器人左侧的拆垛托盘工位,拆垛物品9放置在托盘Ⅱ8上。
如图2结合图3所示,机器视觉检测单元Ⅲ包括:扫描器及相机支架14、精定位单目相机15、二维码扫描器16、双目相机支架Ⅰ17、精定位双目相机Ⅰ18、双目相机支架Ⅱ19和精定位双目相机Ⅱ20。
包括设于拆垛码垛整形及运输单元Ⅱ整形机构前端的精定位单目相机15和二维码扫描器16,精定位单目相机15和二维码扫描器16获取所述整形机构在整形架11的滚动的货物12的位置和数量信息。还包括设于拆垛码垛机器人单元Ⅰ后方两侧的双目相机支架上的精定位双目相机Ⅰ18、Ⅱ20,精定位双目相机获取所述托盘上的码垛、拆垛物品的码放位置信息。
其中扫描器及相机支架14与地面固定安装在机器人右前方的定位抓取工位,精定位单目相机15和二维码扫描器16通过螺栓固定安装在扫描器及相机支架14上;通过精定位单目相机15和二维码扫描器16实现了货物12是否到达整形工位的自动检测和货物条码自动识别功能,通过对货物12的视觉识别、定位和扫描,能够准确迅速的获取货物12的位置信息有利于抓吸复合机械手5的抓取;同时能够快速获取货物12信息和记录搬运数量。双目相机支架Ⅰ17与地面固定安装在码垛托盘工位的后方,精定位双目相机Ⅰ18通过螺栓固定安装在双目相机支架Ⅰ17上,双目相机支架Ⅱ19与地面固定安装在拆垛托盘工位的后方,精定位双目相机Ⅱ20通过螺栓固定安装在双目相机支架Ⅱ19上,通过精定位双目相机Ⅰ18和精定位双目相机Ⅱ20能够准确定位码垛物品和拆跺物品的空间三维位置并能够快速识别不同规格、不同形状、不同垛盘位置的垛型,通过视觉引导技术使抓吸复合机械手5能够对不同规格、不同形状、不同垛盘位置的垛型进行高效率作业。
如图4结合图2所示,控制系统及防护单元Ⅳ包括:电控柜外壳21、工控机、工控机和分别连接的机械手控制单元、机械臂云动控制单元、精定位双目相机视觉控制单元、精定位单目相机视觉控制单元、二维码扫描控制单元和防护栏22。其中控制系统由高性能工控机组成,工控机安装在电控柜外壳21内部,工控机通过以太网接口与机械臂运动控制单元和机械手控制单元通信,通过串口与二维码扫描控制单元通信,通过千兆以太网与精定位单目相机视觉控制单元和精定位双目相机视觉控制单元通信,机器人码垛拆跺工位以及整形工位的周边安装防护栏22,防护栏22可有效起到警示、防护和隔离工作区的作用。精定位单目相机视觉控制单元在检测到货物12到达视觉检测工位后,向工控机发送精定位单目相机检测指令定位货物12的准确位置以及识别货物条码,随后工控机22通过机械臂运动控制单元和机械手控制单元控制抓吸复合机械手5抓取货物,此时精定位双目相机视觉控制单元启动,最后抓吸复合机械手5将货物12放到托盘Ⅰ6上。
本发明基于机器视觉的柔性拆垛码垛机器人拆垛码垛方法,包括以下步骤:
1)视觉检测单元Ⅲ的精定位单目相机15和二维码扫描器16检测货物12和条码,获取货物在整形架11的滚动位置和数量信息;精定位单目相机15检测到货物12到位后,将到位信号通过系统控制及防护单元Ⅳ上位机发送给码垛机器人I/O端口;
精定位单目相机获取货物的位置及数量信息,步骤如下:
a.对单目相机进行标定,获得单目相机的参数;
b.利用背景差法识别货物,采集无货物时场景图像;当货物到位时,采集图像与该图像信息做差可以从图像中识别出货物,会形成连通域,根据货物的特征,识别出货物在图像中的坐标及数量;
c.根据单目相机的参数,将图像坐标转换到机器人坐标中,获得货物的实际位置;
2)同时精定位双目相机Ⅰ18、Ⅱ20检测托盘Ⅰ6的摆放位置,将位置坐标通过系统控制及防护单元Ⅳ发送给拆垛码垛机器人单元Ⅰ千兆网通讯端口;抓吸复合机械手5抓取货物12后通过托盘Ⅰ6位置补偿码放到正确位置,完成码垛操作;
精定位双目相机识别托盘上物品的位置,步骤如下:
a.对双目相机进行标定,获得双目相机的内外参数;
b.采集托盘上物品的图像信息;
c.利用相机的内参对左右相机的图像进行校正、使左右相机图像处于同一水平线上;
d.对左右相机进行立体匹配,获得视差图;
e.根据视差图获取三维点云数据;
f.根据托盘上物品的特定从三维点云数据中分割出物品的位置;
3)整形架11上输送带10通过光电传感器检测到货物12来料后,启动整形架11对软包货物进行振动整平,并将货物12运送至视觉检测工位;
4)精定位双目相机Ⅰ18检测托盘Ⅰ6上码垛物品7的垛型后,进行识别定位,将坐标信息通过系统控制及防护单元Ⅳ上位机发送给拆垛码垛机器人单元Ⅰ千兆网通讯端口,系统控制及防护单元Ⅳ引导抓吸复合机械手5抓取码垛物品7;
5)同时精定位双目相机Ⅱ20检测托盘Ⅱ8的摆放位置,并通过系统控制及防护单元Ⅳ发送给拆垛码垛机器人单元Ⅰ千兆网通讯端口,引导抓吸复合机械手5将码垛物品7码放到托盘Ⅱ8上新的码放位置,完成拆垛操作。
本发明并不局限于上述实施例,在本发明公开的技术方案的基础上,本领域的技术人员根据所公开的技术内容,不需要创造性的劳动就可以对其中的一些技术特征作出一些替换和变形,这些替换和变形均在本发明的保护范围内。
Claims (6)
1.一种基于机器视觉的柔性拆垛码垛机器人系统,其特征在于,包括:
拆垛码垛机器人单元Ⅰ,用于对不同规格、不同形状的货物进行码垛拆垛操作;
拆垛码垛整形及运输单元Ⅱ,用于将货物整形和传输,并移动至视觉检测工位;
机器视觉检测单元Ⅲ,通过精定位单目相机、二维码扫描器和精定位双目相机分别获取货物的位置、数量、规格、形状和所在垛盘垛型,并将所述货物的位置、数量、规格、形状和所在垛盘垛型信息传递至系统控制及防护单元Ⅳ;
系统控制及防护单元Ⅳ,获取机器视觉检测单元Ⅲ的货物的位置、数量、规格、形状和所在垛盘垛型信息,控制拆垛码垛机器人单元Ⅰ对不同规格、形状的货物归类码垛、拆垛;
通过所述系统控制及防护单元Ⅳ获取所述机器视觉检测单元Ⅲ的实时信息,控制所述拆垛码垛整形及运输单元Ⅱ和拆垛码垛机器人单元Ⅰ实施货物归类码垛和拆垛;
所述拆垛码垛机器人单元Ⅰ包括固定在机器人底座(1)上的机器人支撑座(2),机器人支撑座(2)上铰接两段机械臂Ⅰ(3)、机械臂Ⅱ(4),机械臂Ⅰ(3)和机械臂Ⅱ(4)铰接,机械臂Ⅱ(4)的末端安装有抓吸复合机械手(5);所述机械臂Ⅰ(3)、机械臂Ⅱ(4)可相对于机器人支撑座360°旋转,且六自由度运动;
所述拆垛码垛整形及运输单元Ⅱ包括拆垛、码垛机构和整形机构,拆垛、码垛机构位于拆垛码垛机器人单元Ⅰ两侧,整形机构位于拆垛码垛机器人单元Ⅰ前端;
所述整形机构包括整形架(11)和与其相邻的输送带(10),整形架(11)上设有一排滚筒(13),货物(12)可在整形架(11)的滚筒(13)上移动并输送至输送带(10)上;
所述机器视觉检测单元Ⅲ包括设于拆垛码垛整形及运输单元Ⅱ整形机构前端的精定位单目相机(15)和二维码扫描器(16),精定位单目相机(15)和二维码扫描器(16)获取所述整形机构在整形架(11)的滚动的货物(12)的位置和数量信息;
还包括设于拆垛码垛机器人单元Ⅰ后方两侧的双目相机支架上的精定位双目相机(18、20),精定位双目相机(18、20)获取码垛、拆垛物品的码放位置信息。
2.根据权利要求1所述的基于机器视觉的柔性拆垛码垛机器人系统,其特征在于,所述抓吸复合机械手(5)具有吸盘吸起和抓手抱合机构。
3.根据权利要求1所述的基于机器视觉的柔性拆垛码垛机器人系统,其特征在于,所述拆垛、码垛机构包括设于拆垛码垛机器人单元Ⅰ一侧的托盘Ⅰ(6)和放置其上的码垛物品(7),还包括设于拆垛码垛机器人单元Ⅰ另一侧的托盘Ⅱ(8)和放置于其上的拆垛物品(9)。
4.根据权利要求1所述的基于机器视觉的柔性拆垛码垛机器人系统,其特征在于,所述系统控制及防护单元Ⅳ进一步包括工控机和分别连接的机械手控制单元、机械臂云动控制单元、精定位双目相机视觉控制单元、精定位单目相机视觉控制单元和二维码扫描控制单元。
5.一种权利要求1-4任一项所述系统的基于机器视觉的柔性拆垛码垛机器人拆垛码垛方法,其特征在于,包括以下步骤:
1)视觉检测单元Ⅲ的精定位单目相机(15)和二维码扫描器(16)检测货物(12)和条码,获取货物在整形架(11)的滚动位置和数量信息;
2)整形架(11)上输送带(10)通过光电传感器检测到货物(12)来料后,启动整形架(11)对软包货物进行振动整平,并将货物(12)运送至视觉检测工位;
3)系统控制及防护单元Ⅳ根据精定位单目相机(15)和二维码扫描器(16)的信息,控制拆垛码垛机器人单元Ⅰ通过抓吸复合机械手控制单元和机械臂云动控制单元执行码垛动作,将整形架(11)的货物码放至托盘Ⅰ(6)正确位置;
4)同时,精定位双目相机Ⅰ、Ⅱ(18、20)获取托盘Ⅰ(6)上的码垛物品(7)的垛型后,进行识别定位;
5)系统控制及防护单元Ⅳ根据精定位双目相机Ⅰ、Ⅱ(18、20)的信息,控制拆垛码垛机器人单元Ⅰ引导抓吸复合机械手(5)将码垛物品(7)码放到托盘Ⅱ(8)上新的码放位置,完成拆垛操作。
6.根据权利要求5所述的基于机器视觉的柔性拆垛码垛机器人拆垛码垛方法,其特征在于,所述步骤1)中,单目相机获取货物的位置及数量信息,步骤如下:
a.对单目相机进行标定,获得单目相机的参数;
b.利用背景差法识别货物,采集无货物时场景图像;当货物到位时,采集图像与该图像信息做差可以从图像中识别出货物,会形成连通域,根据货物的特征,识别出货物在图像中的坐标及数量;
c.根据单目相机的参数,将图像坐标转换到机器人坐标中,获得货物的实际位置;
所述步骤2)中,双目相机识别托盘上物品的位置,步骤如下:
a.对双目相机进行标定,获得双目相机的内外参数;
b.采集托盘上物品的图像信息;
c.利用相机的内参对左右相机的图像进行校正、使左右相机图像处于同一水平线上;
d.对左右相机进行立体匹配,获得视差图;
e.根据视差图获取三维点云数据;
f.根据托盘上物品的特定从三维点云数据中分割出物品的位置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811297323.6A CN109279373B (zh) | 2018-11-01 | 2018-11-01 | 一种基于机器视觉的柔性拆垛码垛机器人系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811297323.6A CN109279373B (zh) | 2018-11-01 | 2018-11-01 | 一种基于机器视觉的柔性拆垛码垛机器人系统及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109279373A CN109279373A (zh) | 2019-01-29 |
CN109279373B true CN109279373B (zh) | 2024-02-20 |
Family
ID=65174357
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811297323.6A Active CN109279373B (zh) | 2018-11-01 | 2018-11-01 | 一种基于机器视觉的柔性拆垛码垛机器人系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109279373B (zh) |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109704067A (zh) * | 2019-02-22 | 2019-05-03 | 广东溢达纺织有限公司 | 取料卸料装置 |
CN109665332A (zh) * | 2019-02-25 | 2019-04-23 | 广州达意隆包装机械股份有限公司 | 一种自动装卸产品的装置 |
CN109693903A (zh) * | 2019-02-25 | 2019-04-30 | 广州达意隆包装机械股份有限公司 | 一种货物装卸系统 |
CN109911272B (zh) * | 2019-03-19 | 2021-08-31 | 厦门大学嘉庚学院 | 一种基于参考线准则的自由码垛装箱方法 |
CN112061652B (zh) * | 2019-06-11 | 2021-12-07 | 中国石油化工股份有限公司 | 垛装货物整形方法及系统 |
CN110287865B (zh) * | 2019-06-24 | 2021-11-05 | 齐鲁工业大学 | 基于视觉伺服的医学载玻片码放校正方法、控制器及系统 |
CN110533717B (zh) * | 2019-08-06 | 2023-08-01 | 武汉理工大学 | 一种基于双目视觉的目标抓取方法及装置 |
CN110490524A (zh) * | 2019-08-21 | 2019-11-22 | 赖辉 | 一种基于码垛数据的拆垛方法、拆垛装置及拆垛系统 |
CN110626812A (zh) * | 2019-10-16 | 2019-12-31 | 无锡黎曼机器人科技有限公司 | 3d视觉导引纸箱智能拆垛码垛集成系统及拆垛码垛方法 |
CN112684727B (zh) * | 2019-10-17 | 2022-03-18 | 广东原点智能技术有限公司 | 一种基于激光slam的机器人码垛控制系统 |
CN110969652B (zh) * | 2019-11-20 | 2023-10-03 | 上海交通大学 | 基于机械手单目相机充当双目立体视觉的拍摄方法及系统 |
CN111422415A (zh) * | 2020-03-30 | 2020-07-17 | 安徽轶记机械科技有限公司 | 一种包装机生产线多工位机械手 |
CN111604909A (zh) * | 2020-06-24 | 2020-09-01 | 辽宁工业大学 | 一种四轴工业码垛机器人的视觉系统 |
CN112047113B (zh) * | 2020-08-26 | 2022-02-22 | 苏州中科全象智能科技有限公司 | 一种基于人工智能技术的3d视觉码垛系统及方法 |
CN112265829A (zh) * | 2020-09-17 | 2021-01-26 | 无锡满夫智能装备科技有限公司 | 一种环保电力智能码垛设备 |
CN113772306A (zh) * | 2021-02-26 | 2021-12-10 | 北京京东振世信息技术有限公司 | 货品码垛系统和方法 |
CN113895908B (zh) * | 2021-10-15 | 2023-06-09 | 江苏汇博机器人技术股份有限公司 | 一种堆垛机器人搬运线路规划方法 |
CN114131615B (zh) * | 2021-12-27 | 2024-08-02 | 长三角哈特机器人产业技术研究院 | 基于视觉引导的机器人拆码垛系统及其拆垛和码垛方法 |
CN114933176A (zh) * | 2022-05-14 | 2022-08-23 | 江苏经贸职业技术学院 | 一种采用人工智能的3d视觉码垛系统 |
CN114803257A (zh) * | 2022-05-27 | 2022-07-29 | 重庆长安民生物流股份有限公司 | 一种基于amr料箱式机器人的智能仓配一体化系统 |
CN114955568B (zh) * | 2022-06-29 | 2024-05-28 | 广东电网有限责任公司广州供电局 | 基于视觉识别的自动堆垛方法、系统及存储介质 |
CN114988002B (zh) * | 2022-07-08 | 2023-10-20 | 广东电网有限责任公司广州供电局 | 一种电缆线圈自动拆码垛系统 |
CN117142156B (zh) * | 2023-10-30 | 2024-02-13 | 深圳市金环宇电线电缆有限公司 | 基于自动定位的线缆码垛控制方法、装置、设备及介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07291450A (ja) * | 1994-04-26 | 1995-11-07 | Kawasaki Heavy Ind Ltd | インテリジェントパレタイズシステム |
CN105217324A (zh) * | 2015-10-20 | 2016-01-06 | 上海影火智能科技有限公司 | 一种新型的拆垛方法和系统 |
CN205932501U (zh) * | 2016-08-11 | 2017-02-08 | 上海佳万智能科技有限公司 | 一种拆垛控制系统 |
CN108002055A (zh) * | 2017-12-31 | 2018-05-08 | 山东泰开箱变有限公司 | 托盘自动拆码垛滚筒输送线及输送方法 |
CN209023815U (zh) * | 2018-11-01 | 2019-06-25 | 西安中科光电精密工程有限公司 | 一种基于机器视觉的柔性拆垛码垛机器人系统 |
-
2018
- 2018-11-01 CN CN201811297323.6A patent/CN109279373B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07291450A (ja) * | 1994-04-26 | 1995-11-07 | Kawasaki Heavy Ind Ltd | インテリジェントパレタイズシステム |
CN105217324A (zh) * | 2015-10-20 | 2016-01-06 | 上海影火智能科技有限公司 | 一种新型的拆垛方法和系统 |
CN205932501U (zh) * | 2016-08-11 | 2017-02-08 | 上海佳万智能科技有限公司 | 一种拆垛控制系统 |
CN108002055A (zh) * | 2017-12-31 | 2018-05-08 | 山东泰开箱变有限公司 | 托盘自动拆码垛滚筒输送线及输送方法 |
CN209023815U (zh) * | 2018-11-01 | 2019-06-25 | 西安中科光电精密工程有限公司 | 一种基于机器视觉的柔性拆垛码垛机器人系统 |
Also Published As
Publication number | Publication date |
---|---|
CN109279373A (zh) | 2019-01-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109279373B (zh) | 一种基于机器视觉的柔性拆垛码垛机器人系统及方法 | |
US11840411B2 (en) | Vision-assisted robotized depalletizer | |
CN112047113B (zh) | 一种基于人工智能技术的3d视觉码垛系统及方法 | |
CN109230580B (zh) | 一种基于混放物料信息采集的拆垛机器人系统及方法 | |
CN111730603B (zh) | 机器人系统的控制装置以及控制方法 | |
US20210114826A1 (en) | Vision-assisted robotized depalletizer | |
CN109926342B (zh) | 一种快递高效分拣系统及其分拣方法 | |
CN107150032B (zh) | 一种基于多图像获取设备的工件识别与分拣装置和方法 | |
US10239210B2 (en) | Vision-assisted system and method for picking of rubber bales in a bin | |
WO2020155944A1 (zh) | 一种货物拣选系统及货物拣选方法 | |
CN104807832A (zh) | 硅锭自动精检生产线 | |
CN209023815U (zh) | 一种基于机器视觉的柔性拆垛码垛机器人系统 | |
CN110404785B (zh) | 一种基于三维视觉的自动分拣线包裹上件系统及上件方法 | |
CN114131615B (zh) | 基于视觉引导的机器人拆码垛系统及其拆垛和码垛方法 | |
WO2023061223A1 (zh) | 容器装卸装置、仓储系统及取放容器方法 | |
CN204564592U (zh) | 硅锭自动粗检生产线 | |
CN210437869U (zh) | 一种堆垛机器人 | |
CN217172355U (zh) | 一种零件分拣打磨自动化生产线 | |
EP4371711A1 (en) | A robotic system transfer unit cell and method of operation thereof | |
CN211711899U (zh) | 一种下料装置 | |
CN218878517U (zh) | 一种上料转运装置 | |
CN216511500U (zh) | 物体拆垛系统 | |
CN221133207U (zh) | 机器人拣选复核系统 | |
CN204613124U (zh) | 硅锭自动精检生产线 | |
WO2020034968A1 (zh) | 包裹分配系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |