CN112850186A - 一种基于3d视觉的混合拆码垛方法 - Google Patents

一种基于3d视觉的混合拆码垛方法 Download PDF

Info

Publication number
CN112850186A
CN112850186A CN202110022807.5A CN202110022807A CN112850186A CN 112850186 A CN112850186 A CN 112850186A CN 202110022807 A CN202110022807 A CN 202110022807A CN 112850186 A CN112850186 A CN 112850186A
Authority
CN
China
Prior art keywords
box body
unstacking
tray
stacking
gravity center
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110022807.5A
Other languages
English (en)
Other versions
CN112850186B (zh
Inventor
龚隆有
张敏
明鹏
邹泓兵
谢先武
黄永安
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Naishite Technology Co ltd
Original Assignee
Chengdu Naishite Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Naishite Technology Co ltd filed Critical Chengdu Naishite Technology Co ltd
Priority to CN202110022807.5A priority Critical patent/CN112850186B/zh
Publication of CN112850186A publication Critical patent/CN112850186A/zh
Application granted granted Critical
Publication of CN112850186B publication Critical patent/CN112850186B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65G—TRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G61/00—Use of pick-up or transfer devices or of manipulators for stacking or de-stacking articles not otherwise provided for
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65G—TRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G43/00—Control devices, e.g. for safety, warning or fault-correcting

Landscapes

  • Stacking Of Articles And Auxiliary Devices (AREA)

Abstract

本发明提供了一种基于3D视觉的混合拆码垛方法，包括在用于装载箱体的托盘上设置重力感应装置，实时获取托盘上箱体的水平重心位置；设置3D视觉装置对箱体的尺寸和边缘位置进行识别，引导机械手对箱体进行抓取；在机械手上设置抓取称重装置，在对箱体进行抓取的同时检测箱体的重量；根据托盘上箱体的水平重心位置、箱体的尺寸和边缘位置以及箱体的重量，确定拆码垛的顺序，并利用机械手完成混合拆码垛。通过上述方式，本发明能够利用重力感应装置实时获取托盘上箱体的整体重心位置，对拆码垛顺序及码放位置进行调整，保证拆码垛过程的安全；并利用3D视觉装置识别箱体的大小及边缘，提高托盘上的空间利用率，实现稳定高效的混合拆码垛过程。

Description

一种基于3D视觉的混合拆码垛方法
技术领域
本发明涉及智能拆码垛技术领域，尤其涉及一种基于3D视觉的混合拆码垛方法。
背景技术
近年来，随着科技的发展和自动化技术的长足进步，各类机械手或机器人已经逐渐代替人工进行生产，在解放劳动力的同时大幅提高生产效率，被广泛应用于各个领域。在拆码垛领域中，传统的人工拆码垛不仅工作强度大、工作效率低，还会给工作人员带来较大的身体负担，进而影响拆码垛质量。基于人工拆码垛存在的问题，利用机械手或工业机器人代替人工进行自动化拆码垛已逐渐成为拆码垛领域的发展趋势。
目前，自动化拆码垛技术主要是通过视觉技术来识别箱体的位置，再控制机械手对箱体进行抓取。然而，在实际应用过程中，这种方式仅适用于对形状、尺寸及重量一致的箱体进行拆码垛作业，对于尺寸不一、重量不同的箱体混合在一起的情况，拆码垛时则容易产生码放不均匀、空间利用率不足、箱体易于倒塌等问题，影响拆码垛过程的正常进行。
公开号为CN108820901A的专利提供了一种机器人3D视觉智能识别拆码垛及智能分选系统，该系统通过采用3D视觉技术对需要拆码垛的物品的形状、尺寸及坐标进行信息采集，之后进行拆码垛的规划运算，并转换为机器人的运行轨迹，最终使机器人根据运行轨迹进行拆码垛作业，从而提高智能化程度，以适应不同规格物品的混合拆码垛。然而，该方法仅能够根据需要拆码垛的物品的形状及尺寸进行规划运算，对于重量不同的箱体，在拆码垛过程中仍然容易出现箱体重心不稳、易于倒塌的问题，严重影响拆码垛过程的顺利进行。
有鉴于此，当前仍有必要设计一种改进的基于3D视觉的混合拆码垛方法，以解决上述问题。
发明内容
针对上述现有技术的缺陷，本发明的目的在于提供一种基于3D视觉的混合拆码垛方法。通过在用于装载堆叠的箱体的托盘上设置重力感应装置，实时获取托盘上箱体的整体重心位置，以便对拆码垛顺序及码放位置进行调整，保证拆码垛过程箱体的稳定性；并通过设置3D视觉装置来识别箱体的大小及边缘位置，在供机械手机械抓取的同时确认码垛顺序，提高托盘上的空间利用率，从而实现稳定、高效的混合拆码垛过程，以满足实际应用的需求。
为实现上述目的，本发明提供了一种基于3D视觉的混合拆码垛方法，包括如下步骤：
在用于装载箱体的托盘上设置重力感应装置，实时获取托盘上箱体的水平重心位置；
设置3D视觉装置对箱体的尺寸和边缘位置进行识别，引导机械手对箱体进行抓取；
在所述机械手上设置抓取称重装置，在对箱体进行抓取的同时检测箱体的重量；
根据所述托盘上箱体的水平重心位置、所述箱体的尺寸和边缘位置以及所述箱体的重量，确定拆码垛的顺序，并利用所述机械手完成混合拆码垛。
作为本发明的进一步改进，所述基于3D视觉的混合拆码垛方法包括码垛模式和拆垛模式；所述码垛模式具体包括如下步骤：
A1、在用于输送待码垛箱体的输送装置的前端设置所述3D视觉装置，对待码垛的各箱体的尺寸和边缘位置进行检测；
A2、根据步骤A1测得的所述各箱体的尺寸，确定码垛顺序和各箱体的码放位置；
A3、按照步骤A2确定的所述码垛顺序和步骤A1测得的所述箱体的边缘位置，引导机械手按照所述码垛顺序对箱体进行抓取；
A4、利用设置于所述机械手上的所述抓取称重装置在抓取过程中对箱体的重量进行检测，同时利用设置于所述托盘上的所述重力感应装置对所述托盘上箱体的水平重心位置进行检测；
A5、根据所述机械手抓取的箱体的尺寸、重量及其码放位置，计算其码放后托盘上箱体的水平重心位置和竖直重心位置，并判断其是否在预设的重心安全阈值内；若在所述重心安全阈值内，则引导所述机械手将抓取的箱体按照所述码放位置码放于托盘上。
作为本发明的进一步改进，所述拆垛模式具体包括如下步骤：
B1、利用设置于所述托盘上的所述重力感应装置对所述托盘上箱体的水平重心位置进行检测；
B2、利用所述3D视觉装置对所述托盘上各箱体的尺寸和边缘位置进行识别，按照预设的拆垛顺序引导机械手对箱体进行试抓取；
B3、在所述机械手对箱体进行试抓取时，利用所述抓取称重装置对箱体的重量进行检测，并根据所述托盘上箱体的水平重心位置变化情况生成修订后的拆垛顺序；
B4、所述机械手按照所述修订后的拆垛顺序抓取箱体并移出托盘，完成拆垛。
作为本发明的进一步改进，在步骤A2中，所述码垛顺序和各箱体的码放位置根据所述箱体的尺寸确定；当检测到尺寸小于预设值的箱体时，在设置码放位置时为其预留码垛空间。
作为本发明的进一步改进，在步骤A5中，若所述托盘上箱体的水平重心位置和竖直重心位置不在预设的重心安全阈值内，则重新生成该箱体的码放位置。
作为本发明的进一步改进，在步骤B3中，当所述托盘上箱体的水平重心位置的变化在安全阈值内时，所述修订后的拆垛顺序与所述预设的拆垛顺序一致；当所述托盘上箱体的水平重心位置的变化超出安全阈值时，所述修订后的拆垛顺序按照预设规则生成。
作为本发明的进一步改进，所述3D视觉装置包括3D相机、测距传感器以及用于对所述3D相机和所述测距传感器采集的信息进行处理的信息处理系统。
作为本发明的进一步改进，所述信息处理系统包括图像分割模块和箱体识别模块；所述图像分割模块与所述3D相机电性连接，用于对所述3D相机采集的图像数据进行分割处理，识别出箱体的边缘轮廓；所述箱体识别模块与所述图像分割模块和所述测距传感器分别电性连接，用于计算箱体的尺寸及边缘坐标。
作为本发明的进一步改进，所述重力感应装置包括若干个均匀分布于所述托盘表面的重力传感器。
作为本发明的进一步改进，所述抓取称重装置包括称重台和设置于所述称重台表面的称重传感器。
本发明的有益效果是：
(1)本发明通过在用于装载堆叠的箱体的托盘上设置重力感应装置，能够实时获取托盘上箱体的整体重心位置，以便对拆码垛顺序及码放位置进行调整，保证拆码垛过程箱体的稳定性，避免由于箱体重心不稳导致的箱体易于倒塌的问题，提高了拆码垛过程的安全性。同时，本发明还通过设置3D视觉装置来识别箱体的大小及边缘位置，在供机械手机械抓取的同时确认码垛顺序，有效提高托盘上的空间利用率，从而实现稳定、高效的混合拆码垛过程，以满足实际应用的需求。
(2)在码垛过程中，本发明能够利用重力感应装置、3D视觉装置和抓取称重装置准确获取码垛过程中托盘上箱体的水平重心、各箱体的尺寸和重量，并以此计算托盘上箱体的竖直重心，从而更加全面有效地保障码垛过程的安全进行，避免发生箱体倒塌事故。同时，本发明能够根据获取的箱体尺寸确定码垛顺序和各箱体的码放位置，为小尺寸的箱体预留码放空间，有效提高托盘上的空间利用率。
(3)在拆垛过程中，本发明利用机械手对箱体进行试抓取，并根据试抓取过程中测得的箱体重量及托盘上箱体的水平重心位置的变化情况来检验抓取顺序是否合理，有效保证了拆垛过程的安全稳定，并提高了拆垛效率，具有较高的实际应用价值。
附图说明
图1为本发明一个实施例中提供的一种基于3D视觉的混合拆码垛方法的流程示意图。
图2为本发明一个实施例中提供的码垛过程的示意图。
图3为本发明一个实施例中提供的码垛后箱体入库统计的示意图。
图4为本发明一个实施例中提供的拆垛过程的示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚，下面结合附图和具体实施例对本发明进行详细描述。
在此，还需要说明的是，为了避免因不必要的细节而模糊了本发明，在附图中仅仅示出了与本发明的方案密切相关的结构和/或处理步骤，而省略了与本发明关系不大的其他细节。
另外，还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。
本发明提供了一种基于3D视觉的混合拆码垛方法，包括如下步骤：
在用于装载箱体的托盘上设置重力感应装置，实时获取托盘上箱体的水平重心位置；
设置3D视觉装置对箱体的尺寸和边缘位置进行识别，引导机械手对箱体进行抓取；
在所述机械手上设置抓取称重装置，在对箱体进行抓取的同时检测箱体的重量；
根据所述托盘上箱体的水平重心位置、所述箱体的尺寸和边缘位置以及所述箱体的重量，确定拆码垛的顺序，并利用所述机械手完成混合拆码垛。
具体地，在本发明的一个实施例中，所述基于3D视觉的混合拆码垛方法的流程示意图如图1所示，具体包括如下步骤：
当用于输送待码垛箱体的输送装置开始运行后，用于装载箱体的带有托盘的小车移动至码垛位置。设置于输送装置前端的3D视觉装置开始对箱体进行拍照，并根据采集的图像及其位置信息获取箱体的尺寸及边缘坐标，然后由机械手进行码垛(如图2所示)，待垛满后完成码垛过程。
此时带有托盘的小车则载着码好的箱体运输到库门，利用3D视觉装置再次对箱体进行拍照，并根据采集的图像及其位置信息获取各箱体的尺寸及边缘坐标，将其作为入库信息上传，完成小车入库(如图3所示)。
待小车完成入库后，小车便移动至拆垛位置，由机械手进行拆垛(如图4所示)，待垛空后完成拆垛过程，结束混合拆码垛过程。
在上述码垛过程中，具体包括如下步骤：
A1、在用于输送待码垛箱体的输送装置的前端设置3D视觉装置，对待码垛的各箱体的尺寸和边缘位置进行检测。
其中，3D视觉装置包括3D相机、测距传感器以及用于对所述3D相机和所述测距传感器采集的信息进行处理的信息处理系统。
所述信息处理系统包括图像分割模块和箱体识别模块；所述图像分割模块与所述3D相机电性连接，用于对所述3D相机采集的图像数据进行分割处理，识别出箱体的边缘轮廓；所述箱体识别模块与所述图像分割模块和所述测距传感器分别电性连接，用于计算箱体的尺寸及边缘坐标。
具体地，当3D相机采集到箱体的图像数据时，所述图像分割模块对采集到的图像数据进行预处理后再进行图像分割，具体步骤如下：
A11、先采用二值化处理算法对3D相机采集到的箱体图像进行二值化处理，增大图像的对比度，以便对箱体及背景进行准确分割；
A12、再采用中值滤波算法去除箱体图像中的噪声，提高边缘检测精度；
A13、然后采用边缘检测算法对箱体的边缘像素进行提取，分割出箱体的边缘轮廓。
在完成箱体边缘轮廓识别后，箱体识别模块基于得到的箱体边缘轮廓与测距传感器采集的信息进一步对箱体的尺寸及边缘坐标进行计算，具体步骤如下：
A14、根据箱体边缘轮廓在采集的图像中建立第一坐标系，得出在第一坐标系中箱体的尺寸(a1，b1，c1)及箱体边缘的坐标Pi(xi1，yi1，zi1)；其中，a1，b1，c1分别表示在第一坐标系中箱体的长、宽、高，Pi(xi1，yi1，zi1)表示箱体边缘上某一点i在第一坐标系中的三维坐标；
A15、再基于机械手所处的位置建立第二坐标系，并根据测距传感器采集的实际距离将第一坐标系下的箱体尺寸和箱体边缘的坐标转化至第二坐标系下，即得到箱体的尺寸(a2，b2，c2)及箱体边缘的坐标Pi(xi2，yi2，zi2)。
基于上述方式，3D视觉装置能够对箱体的尺寸及边缘位置进行准确识别，并将其转化为机械手所处的坐标系下，以便引导机械手对箱体进行准确抓取。在得到箱体尺寸及边缘位置信息后，继续进行如下步骤：
A2、根据步骤A1测得的各箱体的尺寸，确定码垛顺序和各箱体的码放位置。
其中，码垛顺序是在输送装置输出的箱体传送顺序的基础上，根据箱体的尺寸进行确定。在本发明的一个实施例中，在完成箱体尺寸识别后，将尺寸大于预设范围的箱体标记为大型箱体，将尺寸小于预设范围的箱体标记为小型箱体，在箱体传送顺序的基础上，将大型箱体的排序提前，小型箱体的排序推后，按照由大至小的顺序进行码放。
同时，在码放大型箱体的过程中，根据托盘的面积和箱体的尺寸计算大型箱体码放在第一层后是否存在多余空间，若存在的多余空间能够放下小型箱体，则将该空间预留给小型箱体，继续进行第二层的码放，待轮到小型箱体后，再将其放置预留空间，以提高托盘上空间的利用率。
A3、按照步骤A2确定的所述码垛顺序和步骤A1测得的所述箱体的边缘位置，引导机械手按照所述码垛顺序对箱体进行抓取。
A4、利用设置于所述机械手上的所述抓取称重装置在抓取过程中对箱体的重量进行检测，同时利用设置于所述托盘上的所述重力感应装置对所述托盘上箱体的水平重心位置进行检测。
其中，所述重力感应装置包括若干个均匀分布于所述托盘表面的重力传感器；所述抓取称重装置包括称重台和设置于所述称重台表面的称重传感器。
在本发明的一个实施例中，重力感应装置包括设置于托盘底部的三个重力传感器，这三个称重传感器在托盘上的坐标分别为(a1，b1)、(a2，b2)和(a3，b3)，其采集到的重力分别表示为G1、G2和G3；托盘自身的重力表示为g，托盘的水平重心的坐标为(x，y)。
基于平衡状态下的受力平衡，可以得到如下等式：
∑FZ＝0 G+g-G1-G2-G3＝0
∑My＝0 GX+ga-G1a1-G2a2-G3a3＝0
∑Mx＝0 GY+gb-G1b1-G2b2-G3b3＝0
根据上述等式可以推导得到：
G＝G1+G2+G3-g
X＝(G1a1+G2a2+G3a3-ga)/G
Y＝(G1b1-G2b2-G3b3-gb)/G
其中，G为托盘上箱体的整体重力，X、Y则分别代表托盘上箱体的整体重心在水平方向上的横坐标和纵坐标。
A5、在对当前托盘上箱体的水平重心进行检测后，再根据当前机械手已经抓取的箱体的尺寸、重量及其在步骤A2中确定的码放位置，在实际码放前先建立三维模型，利用三维模型计算该箱体实际码放后托盘上箱体的水平重心位置和竖直重心位置，并判断其是否在预设的重心安全阈值内。
若计算得到的水平重心位置和竖直重心位置均处于所述重心安全阈值内，则表明当前操作可行，从而引导所述机械手将抓取的箱体按照所述码放位置码放于托盘上。
若计算得到的水平重心位置和竖直重心位置中任意一个超出所述重心安全阈值的范围，则表明当前操作存在风险，则重新生成该箱体的码放位置，并根据新的码放位置再次计算新的码放位置下对应的水平重心位置和竖直重心位置是否在预设的重心安全阈值内，若依然不在该范围内，则继续重复该步骤，直至新生成的箱体码放位置能够满足条件。
在本发明的一个实施例中，重新生成的箱体码放位置为原位置的相邻位置，其方位根据水平重心和竖直重心的偏离情况确定。例如，当计算的水平重心位置处于重心安全阈值的左侧，则重新生成的箱体码放位置位于原位置右侧的相邻位置。
基于上述方式，本发明能够对在准确抓取箱体进行码垛的同时保证码垛过程的安全，并提高托盘上的空间利用率。
在完成码垛后，进行的拆垛过程具体包括如下步骤：
B1、利用设置于所述托盘上的所述重力感应装置对所述托盘上箱体的水平重心位置进行检测。
其中，水平重心位置的检测方法与步骤A4中一致，在此不再赘述。
B2、利用所述3D视觉装置对所述托盘上各箱体的尺寸和边缘位置进行识别，按照预设的拆垛顺序引导机械手对箱体进行试抓取。
其中，3D视觉装置对箱体的尺寸和边缘位置的识别方式与步骤A1中一致，在此不再赘述。
B3、在所述机械手对箱体进行试抓取时，利用所述抓取称重装置对箱体的重量进行检测，并根据所述托盘上箱体的水平重心位置变化情况生成修订后的拆垛顺序。
当所述托盘上箱体的水平重心位置的变化在安全阈值内时，表明当前的拆垛顺序可行，则修订后的拆垛顺序依然与所述预设的拆垛顺序保持一致。
当所述托盘上箱体的水平重心位置的变化超出安全阈值时，表明当前的拆垛顺序存在风险，则重新生成与预设的拆垛顺序不同的修订后的拆垛顺序。
在本发明的一个实施例中，预设的拆垛顺序根据由上至下、由左至右、由前至后的方式拟定，即先对顶层的第一行箱体由左至右进行拆垛，再对第二行箱体由左至右进行拆垛，以此类推，完成对顶层的拆垛后，再按照同样的方式对下一层进行拆垛。
当需要对该拆垛顺序进行修订时，则根据托盘上箱体的水平重心位置的变化情况进行调整。例如，当试抓取时发现箱体a的水平重心位置向右偏离，则放下该箱体a，改为抓取与箱体a左右对称且位于箱体a右侧的箱体b，然后继续由箱体b向右进行拆垛，待达到最右端时再重新从箱体a开始由左至右进行拆垛，直至本行以拆完，再转移至下一行进行拆垛。
B4、机械手按照上述修订后的拆垛顺序不断抓取箱体并移出托盘，直至垛空，即完成拆垛。
通过上述方式，本发明能够根据试抓取过程中测得的箱体重量及托盘上箱体的水平重心位置的变化情况来检验抓取顺序是否合理，有效保证了拆垛过程的安全稳定，并提高拆垛效率。
综上所述，本发明提供了一种基于3D视觉的混合拆码垛方法，包括在用于装载箱体的托盘上设置重力感应装置，实时获取托盘上箱体的水平重心位置；设置3D视觉装置对箱体的尺寸和边缘位置进行识别，引导机械手对箱体进行抓取；在机械手上设置抓取称重装置，在对箱体进行抓取的同时检测箱体的重量；根据托盘上箱体的水平重心位置、箱体的尺寸和边缘位置以及箱体的重量，确定拆码垛的顺序，并利用机械手完成混合拆码垛。通过上述方式，本发明能够利用重力感应装置实时获取托盘上箱体的整体重心位置，对拆码垛顺序及码放位置进行调整，保证拆码垛过程的安全；并利用3D视觉装置识别箱体的大小及边缘，提高托盘上的空间利用率，实现稳定高效的混合拆码垛过程。
以上实施例仅用以说明本发明的技术方案而非限制，尽管参照较佳实施例对本发明进行了详细说明，本领域的普通技术人员应当理解，可以对本发明的技术方案进行修改或者等同替换，而不脱离本发明技术方案的精神和范围。

Claims (10)

1.一种基于3D视觉的混合拆码垛方法，其特征在于，包括如下步骤：
在用于装载箱体的托盘上设置重力感应装置，实时获取托盘上箱体的水平重心位置；
设置3D视觉装置对箱体的尺寸和边缘位置进行识别，引导机械手对箱体进行抓取；
在所述机械手上设置抓取称重装置，在对箱体进行抓取的同时检测箱体的重量；
根据所述托盘上箱体的水平重心位置、所述箱体的尺寸和边缘位置以及所述箱体的重量，确定拆码垛的顺序，并利用所述机械手完成混合拆码垛。
2.根据权利要求1所述的一种基于3D视觉的混合拆码垛方法，其特征在于：包括码垛模式和拆垛模式；所述码垛模式具体包括如下步骤：
A1、在用于输送待码垛箱体的输送装置的前端设置所述3D视觉装置，对待码垛的各箱体的尺寸和边缘位置进行检测；
A2、根据步骤A1测得的所述各箱体的尺寸，确定码垛顺序和各箱体的码放位置；
A3、按照步骤A2确定的所述码垛顺序和步骤A1测得的所述箱体的边缘位置，引导机械手按照所述码垛顺序对箱体进行抓取；
A4、利用设置于所述机械手上的所述抓取称重装置在抓取过程中对箱体的重量进行检测，同时利用设置于所述托盘上的所述重力感应装置对所述托盘上箱体的水平重心位置进行检测；
A5、根据所述机械手抓取的箱体的尺寸、重量及其码放位置，计算其码放后托盘上箱体的水平重心位置和竖直重心位置，并判断其是否在预设的重心安全阈值内；若在所述重心安全阈值内，则引导所述机械手将抓取的箱体按照所述码放位置码放于托盘上。
3.根据权利要求1所述的一种基于3D视觉的混合拆码垛方法，其特征在于：所述拆垛模式具体包括如下步骤：
B1、利用设置于所述托盘上的所述重力感应装置对所述托盘上箱体的水平重心位置进行检测；
B2、利用所述3D视觉装置对所述托盘上各箱体的尺寸和边缘位置进行识别，按照预设的拆垛顺序引导机械手对箱体进行试抓取；
B3、在所述机械手对箱体进行试抓取时，利用所述抓取称重装置对箱体的重量进行检测，并根据所述托盘上箱体的水平重心位置变化情况生成修订后的拆垛顺序；
B4、所述机械手按照所述修订后的拆垛顺序抓取箱体并移出托盘，完成拆垛。
4.根据权利要求2所述的一种基于3D视觉的混合拆码垛方法，其特征在于：在步骤A2中，所述码垛顺序和各箱体的码放位置根据所述箱体的尺寸确定；当检测到尺寸小于预设值的箱体时，在设置码放位置时为其预留码垛空间。
5.根据权利要求2所述的一种基于3D视觉的混合拆码垛方法，其特征在于：在步骤A5中，若所述托盘上箱体的水平重心位置和竖直重心位置不在预设的重心安全阈值内，则重新生成该箱体的码放位置。
6.根据权利要求3所述的一种基于3D视觉的混合拆码垛方法，其特征在于：在步骤B3中，当所述托盘上箱体的水平重心位置的变化在安全阈值内时，所述修订后的拆垛顺序与所述预设的拆垛顺序一致；当所述托盘上箱体的水平重心位置的变化超出安全阈值时，所述修订后的拆垛顺序按照预设规则生成。
7.根据权利要求1所述的一种基于3D视觉的混合拆码垛方法，其特征在于：所述3D视觉装置包括3D相机、测距传感器以及用于对所述3D相机和所述测距传感器采集的信息进行处理的信息处理系统。
8.根据权利要求7所述的一种基于3D视觉的混合拆码垛方法，其特征在于：所述信息处理系统包括图像分割模块和箱体识别模块；所述图像分割模块与所述3D相机电性连接，用于对所述3D相机采集的图像数据进行分割处理，识别出箱体的边缘轮廓；所述箱体识别模块与所述图像分割模块和所述测距传感器分别电性连接，用于计算箱体的尺寸及边缘坐标。
9.根据权利要求1～8中任一权利要求所述的一种基于3D视觉的混合拆码垛方法，其特征在于：所述重力感应装置包括若干个均匀分布于所述托盘表面的重力传感器。
10.根据权利要求1～9中任一权利要求所述的一种基于3D视觉的混合拆码垛方法，其特征在于：所述抓取称重装置包括称重台和设置于所述称重台表面的称重传感器。
CN202110022807.5A 2021-01-08 2021-01-08 一种基于3d视觉的混合拆码垛方法 Active CN112850186B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110022807.5A CN112850186B (zh) 2021-01-08 2021-01-08 一种基于3d视觉的混合拆码垛方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110022807.5A CN112850186B (zh) 2021-01-08 2021-01-08 一种基于3d视觉的混合拆码垛方法

Publications (2)

Publication Number Publication Date
CN112850186A true CN112850186A (zh) 2021-05-28
CN112850186B CN112850186B (zh) 2022-10-11

Family

ID=76005347

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110022807.5A Active CN112850186B (zh) 2021-01-08 2021-01-08 一种基于3d视觉的混合拆码垛方法

Country Status (1)

Country Link
CN (1) CN112850186B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114044369A (zh) * 2021-11-05 2022-02-15 江苏昱博自动化设备有限公司 一种基于自适应巡航技术的码垛机械手的控制方法
CN116788598A (zh) * 2023-08-24 2023-09-22 南通通机股份有限公司 一种牙膏管箱机器人拆垛和码垛系统
CN117361164A (zh) * 2023-12-07 2024-01-09 福建科盛智能物流装备有限公司 一种自动识别卸车方法
CN117735263A (zh) * 2023-12-15 2024-03-22 广州远联物流服务有限公司 一种自卸装载码垛机

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5501571A (en) * 1993-01-21 1996-03-26 International Business Machines Corporation Automated palletizing system
EP1211203A2 (en) * 1996-11-26 2002-06-05 United Parcel Service Of America, Inc. Methods and apparatus for palletizing packages of random size and weight
KR20070121262A (ko) * 2006-06-21 2007-12-27 현대중공업 주식회사 팔레타이징 적재패턴 시뮬레이션 시스템
CN108750685A (zh) * 2018-04-28 2018-11-06 武汉库柏特科技有限公司 一种离线混合码垛方法及系统
CN110222862A (zh) * 2018-03-02 2019-09-10 北京京东尚科信息技术有限公司 码垛方法和装置
CN110220549A (zh) * 2018-03-02 2019-09-10 北京京东尚科信息技术有限公司 一种垛型评估的方法和装置
CN110498243A (zh) * 2019-09-04 2019-11-26 成都川哈工机器人及智能装备产业技术研究院有限公司 一种混合箱体机器人智能拆码垛系统及控制方法
CN111846525A (zh) * 2020-07-30 2020-10-30 牧羽航空科技（江苏）有限公司 一种可计算重心和装载分配的托盘
CN111994593A (zh) * 2020-08-24 2020-11-27 南京华捷艾米软件科技有限公司 一种物流设备以及物流处理方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5501571A (en) * 1993-01-21 1996-03-26 International Business Machines Corporation Automated palletizing system
EP1211203A2 (en) * 1996-11-26 2002-06-05 United Parcel Service Of America, Inc. Methods and apparatus for palletizing packages of random size and weight
KR20070121262A (ko) * 2006-06-21 2007-12-27 현대중공업 주식회사 팔레타이징 적재패턴 시뮬레이션 시스템
CN110222862A (zh) * 2018-03-02 2019-09-10 北京京东尚科信息技术有限公司 码垛方法和装置
CN110220549A (zh) * 2018-03-02 2019-09-10 北京京东尚科信息技术有限公司 一种垛型评估的方法和装置
CN108750685A (zh) * 2018-04-28 2018-11-06 武汉库柏特科技有限公司 一种离线混合码垛方法及系统
CN110498243A (zh) * 2019-09-04 2019-11-26 成都川哈工机器人及智能装备产业技术研究院有限公司 一种混合箱体机器人智能拆码垛系统及控制方法
CN111846525A (zh) * 2020-07-30 2020-10-30 牧羽航空科技（江苏）有限公司 一种可计算重心和装载分配的托盘
CN111994593A (zh) * 2020-08-24 2020-11-27 南京华捷艾米软件科技有限公司 一种物流设备以及物流处理方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114044369A (zh) * 2021-11-05 2022-02-15 江苏昱博自动化设备有限公司 一种基于自适应巡航技术的码垛机械手的控制方法
CN116788598A (zh) * 2023-08-24 2023-09-22 南通通机股份有限公司 一种牙膏管箱机器人拆垛和码垛系统
CN116788598B (zh) * 2023-08-24 2023-10-24 南通通机股份有限公司 一种牙膏管箱机器人拆垛和码垛系统
CN117361164A (zh) * 2023-12-07 2024-01-09 福建科盛智能物流装备有限公司 一种自动识别卸车方法
CN117735263A (zh) * 2023-12-15 2024-03-22 广州远联物流服务有限公司 一种自卸装载码垛机
CN117735263B (zh) * 2023-12-15 2024-05-14 广州远联物流服务有限公司 一种自卸装载码垛机

Also Published As

Publication number Publication date
CN112850186B (zh) 2022-10-11

Similar Documents

Publication Publication Date Title
CN112850186B (zh) 一种基于3d视觉的混合拆码垛方法
CN111776759B (zh) 具有自动化包裹登记机构的机器人系统及其操作方法
CN112047113B (zh) 一种基于人工智能技术的3d视觉码垛系统及方法
US9630316B2 (en) Real-time determination of object metrics for trajectory planning
US9492924B2 (en) Moveable apparatuses having robotic manipulators and conveyors to facilitate object movement
US9205558B1 (en) Multiple suction cup control
US9205562B1 (en) Integration of depth points into a height map
CN111761575B (zh) 工件及其抓取方法和生产线
CN114933176A (zh) 一种采用人工智能的3d视觉码垛系统
JP7175487B1 (ja) 画像ベースのサイジングメカニズムを備えたロボットシステム及びロボットシステムを操作するための方法
CN111687060B (zh) 一种物流多级分拣系统及方法
CN113269112A (zh) 一种抓取区域的识别方法、装置、电子设备及存储介质
JP7126667B1 (ja) 深さベースの処理メカニズムを伴うロボットシステム及びロボットシステムを操作するための方法
US11820609B2 (en) Robot equipped with a gripper for performing a picking process
JP7408107B2 (ja) 物体取り扱いを伴うロボットシステムのためのシステム及び方法
CN116835334B (zh) 基于3d视觉的无序码垛方法、装置、介质及设备
JP7218881B1 (ja) 物体更新機構を備えたロボットシステム及びロボットシステムを操作するための方法
JP7398763B2 (ja) 重なり処理機構を備えたロボットシステム及びその操作方法
Yang et al. Safe height estimation of deformable objects for picking robots by detecting multiple potential contact points
CN114800494A (zh) 一种基于单目视觉的搬箱机械手
CN116551672A (zh) 用于具有物体处置能力的机器人系统的系统和方法
CN115846219A (zh) 生鲜分拣机器人的分拣抓取方法、系统、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: A hybrid palletizing method based on 3D vision

Granted publication date: 20221011

Pledgee: Zhejiang Mintai Commercial Bank Co.,Ltd. Sichuan Tianfu New Area Sub branch

Pledgor: Chengdu naishite Technology Co.,Ltd.

Registration number: Y2024510000041

PE01 Entry into force of the registration of the contract for pledge of patent right