CN113198692A - 一种适用于批量产品的高精度点胶方法及装置 - Google Patents

一种适用于批量产品的高精度点胶方法及装置 Download PDF

Info

Publication number
CN113198692A
CN113198692A CN202110548142.1A CN202110548142A CN113198692A CN 113198692 A CN113198692 A CN 113198692A CN 202110548142 A CN202110548142 A CN 202110548142A CN 113198692 A CN113198692 A CN 113198692A
Authority
CN
China
Prior art keywords
dispensing
data
product
plane
coordinates
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110548142.1A
Other languages
English (en)
Other versions
CN113198692B (zh
Inventor
殷强
顾昕程
杨洪清
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kaifeng Technology Suzhou Co ltd
Original Assignee
Kaifeng Technology Suzhou Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kaifeng Technology Suzhou Co ltd filed Critical Kaifeng Technology Suzhou Co ltd
Priority to CN202110548142.1A priority Critical patent/CN113198692B/zh
Publication of CN113198692A publication Critical patent/CN113198692A/zh
Application granted granted Critical
Publication of CN113198692B publication Critical patent/CN113198692B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B05SPRAYING OR ATOMISING IN GENERAL; APPLYING FLUENT MATERIALS TO SURFACES, IN GENERAL
    • B05CAPPARATUS FOR APPLYING FLUENT MATERIALS TO SURFACES, IN GENERAL
    • B05C5/00Apparatus in which liquid or other fluent material is projected, poured or allowed to flow on to the surface of the work
    • B05C5/02Apparatus in which liquid or other fluent material is projected, poured or allowed to flow on to the surface of the work the liquid or other fluent material being discharged through an outlet orifice by pressure, e.g. from an outlet device in contact or almost in contact, with the work
    • B05C5/0208Apparatus in which liquid or other fluent material is projected, poured or allowed to flow on to the surface of the work the liquid or other fluent material being discharged through an outlet orifice by pressure, e.g. from an outlet device in contact or almost in contact, with the work for applying liquid or other fluent material to separate articles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B05SPRAYING OR ATOMISING IN GENERAL; APPLYING FLUENT MATERIALS TO SURFACES, IN GENERAL
    • B05CAPPARATUS FOR APPLYING FLUENT MATERIALS TO SURFACES, IN GENERAL
    • B05C11/00Component parts, details or accessories not specifically provided for in groups B05C1/00 - B05C9/00
    • B05C11/10Storage, supply or control of liquid or other fluent material; Recovery of excess liquid or other fluent material
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B05SPRAYING OR ATOMISING IN GENERAL; APPLYING FLUENT MATERIALS TO SURFACES, IN GENERAL
    • B05CAPPARATUS FOR APPLYING FLUENT MATERIALS TO SURFACES, IN GENERAL
    • B05C11/00Component parts, details or accessories not specifically provided for in groups B05C1/00 - B05C9/00
    • B05C11/10Storage, supply or control of liquid or other fluent material; Recovery of excess liquid or other fluent material
    • B05C11/1002Means for controlling supply, i.e. flow or pressure, of liquid or other fluent material to the applying apparatus, e.g. valves
    • B05C11/1015Means for controlling supply, i.e. flow or pressure, of liquid or other fluent material to the applying apparatus, e.g. valves responsive to a conditions of ambient medium or target, e.g. humidity, temperature ; responsive to position or movement of the coating head relative to the target
    • B05C11/1021Means for controlling supply, i.e. flow or pressure, of liquid or other fluent material to the applying apparatus, e.g. valves responsive to a conditions of ambient medium or target, e.g. humidity, temperature ; responsive to position or movement of the coating head relative to the target responsive to presence or shape of target
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • B25J11/0075Manipulators for painting or coating
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1656Programme controls characterised by programming, planning systems for manipulators
    • B25J9/1664Programme controls characterised by programming, planning systems for manipulators characterised by motion, path, trajectory planning
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30Computing systems specially adapted for manufacturing

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Application Of Or Painting With Fluid Materials (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供一种适用于批量产品的高精度点胶方法,包括手眼标定、数据采集、数据融合、点胶轨迹规划及出胶信号的生成;本发明融合二维数据及三维数据,将二维数据、三维数据与分布棋盘格对齐,充分利用二维和三维数据的优势,可精准定位XYZ的坐标位置和点胶区域,输出三维精准点胶轨迹和控制信号;通过CCD相机获取点胶产品的彩色信息,提高获取点胶位置的准确性,且在数据处理的过程中,将产品的三维数据中的轮廓边界点与二维数据中的轮廓边界点融合,获取点胶位置的XYZ的坐标,进行点胶轨迹规划更精确。

Description

一种适用于批量产品的高精度点胶方法及装置
技术领域
本发明涉及点胶技术领域,具体涉及一种适用于批量产品的高精度点胶方法及装置。
背景技术
现有技术中,待点胶产品的二维数据常常通过CCD相机获取,进而指导机械手施胶;但是仅根据二维数据,无法定位产品高度,无法针对产品的高度变化生成合理的动作轨迹。此外,行业中使用线性扫描传感器匀速扫描三维数据,遇到大尺寸或批量产品点胶时,扫描过程费时,且对速度控制要求极高,而且三维数据需要与每一个产品进行一对一标定,效率极低。
发明内容
针对现有技术的不足之处,本发明的目的在于提供一种适用于批量产品的高精度点胶方法及装置。
本发明的技术方案概述如下:
一方面,本发明提供一种适用于批量产品的高精度点胶方法,包括手眼标定、数据采集、数据融合、点胶轨迹规划及出胶信号的生成;
其中,数据采集包括:通过3D阵面传感器获取产品的3D数据,所述产品的3D数据至少包括产品的轮廓边界点的3D数据;以及通过二维相机获取产品的彩色图像信息,并识别产品上的点胶位置的二维坐标及产品边界点的二维坐标;
数据融合包括:将3D阵面传感器获取产品的3D数据中XY平面数据与二维相机获取产品的XY平面数据融合,得到融合结果中的点胶位置的XY平面坐标及Z平面坐标;
点胶轨迹规划及出胶信号的生成包括:根据融合结果中点胶位置的XYZ平面坐标进行点胶轨迹规划以及生成出胶信号。
进一步地,所述3D阵面传感器的拍摄视角与二维相机的拍摄视角相交或重叠。
进一步地,所述将3D阵面传感器获取产品的3D数据中XY平面数据与二维相机获取产品的XY平面数据融合,得到融合结果中的点胶位置的XY平面坐标及Z平面坐标,包括:
将3D阵面传感器获取产品3D数据中轮廓边界点的XY平面数据进行排序,与二维相机获取产品轮廓边界点的XY平面数据进行对齐融合;
根据二维相机识别的点胶位置,确定融合后的点胶位置的XY平面坐标;
在3D阵面传感器获取产品的3D数据中,确定点胶位置的Z平面坐标。
进一步地,所述数据融合还包括:
统计XY平面坐标分布范围,将坐标的宽度和高度范围按产品排布的行列数计算得到产品行列坐标宽度,从而得出产品的2D、3D坐标和分布棋盘格行列映射关系;将融合后的XY平面数据置换为行列号,并与所述分布棋盘格的行列对齐;
对齐后得到点胶位置在所述分布棋盘格的行列序号。
进一步地,所述数据融合还包括:补全所述分布棋盘格上的空缺位置。
进一步地,所述根据融合结果中点胶位置的XYZ平面坐标进行点胶轨迹规划以及生成出胶信号,包括:
根据点胶位置在所述分布棋盘格的行列序号规划出XY平面点胶轨迹,根据点胶位置的Z平面坐标规划Z平面点胶轨迹。
进一步地,所述根据融合结果中点胶位置的XYZ平面坐标进行点胶轨迹规划以及生成出胶信号,还包括:
根据融合结果中点胶位置的Z平面坐标,生成点胶高度和/或角度信号。
进一步地,还包括:根据点胶轨迹及出胶信号执行点胶。
进一步地,所述根据点胶轨迹及出胶信号执行点胶,包括:
判断分布棋盘格的当前序号的产品是否为异常状态;
若异常,则执行下一格;
若正常,则向执行机构发送本次点胶的起点、终点的全局坐标和出胶信号,完成后即可继续下一格点胶。
相应地,本发明还提供了一种适用于批量产品的高精度点胶装置,其特征在于,包括:手眼标定模块、数据采集模块、数据融合模块、规划及生成模块;
所述数据采集模块,用于通过3D阵面传感器获取产品的3D数据,所述产品的3D数据至少包括产品的轮廓边界点的3D数据;以及通过二维相机获取产品的彩色图像信息,并识别产品上的点胶位置的二维坐标;
所述数据融合模块,用于将3D阵面传感器获取产品的3D数据中XY平面数据与二维相机获取产品的XY平面数据融合,得到融合结果中的点胶位置的XY平面坐标及Z平面坐标;
所述规划及生成模块,用于根据融合结果中点胶位置的XYZ平面坐标进行点胶轨迹规划以及生成出胶信号。
相比现有技术,本发明的有益效果在于:本发明提供的适用于批量产品的高精度点胶方法,融合二维数据及三维数据,将二维数据、三维数据与分布棋盘格对齐,充分利用二维和三维数据的优势,可精准定位XYZ的坐标位置和点胶区域,输出三维精准点胶轨迹和控制信号;通过CCD相机获取点胶产品的彩色信息,提高获取点胶位置的准确性,且在数据处理的过程中,将产品的三维数据中的轮廓边界点与二维数据中的轮廓边界点融合,获取点胶位置的XYZ的坐标,进行点胶轨迹规划更精确。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,并可依照说明书的内容予以实施,以下以本发明的较佳实施例并配合附图详细说明如后。本发明的具体实施方式由以下实施例及其附图详细给出。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1为本发明的一种适用于批量产品的高精度点胶方法的流程示意图;
图2为本发明的一种适用于批量产品的高精度点胶方法的另一流程示意图;
图3为本发明的一种基适用于批量产品的高精度点胶装置的方框示意图。
附图标记:10、手眼标定模块;20、数据采集模块;30、数据融合模块;40、规划与生成模块;50、执行模块。
具体实施方式
下面结合附图对本发明做进一步的详细说明,本发明的前述和其它目的、特征、方面和优点将变得更加明显,以令本领域技术人员参照说明书文字能够据以实施。在附图中,为清晰起见,可对形状和尺寸进行放大,并将在所有图中使用相同的附图标记来指示相同或相似的部件。在下列描述中,诸如中心、厚度、高度、长度、前部、背部、后部、左边、右边、顶部、底部、上部、下部等用词为基于附图所示的方位或位置关系。特别地,“高度”相当于从顶部到底部的尺寸,“宽度”相当于从左边到右边的尺寸,“深度”相当于从前到后的尺寸。这些相对术语是为了说明方便起见并且通常并不旨在需要具体取向。涉及附接、联接等的术语(例如,“连接”和“附接”)是指这些结构通过中间结构彼此直接或间接固定或附接的关系、以及可动或刚性附接或关系,除非以其他方式明确地说明。
接下来,结合附图以及具体实施方式,对本发明做进一步描述,需要说明的是,在不相冲突的前提下,以下描述的各实施例之间或各技术特征之间可以任意组合形成新的实施例。应当理解,本文所使用的诸如“具有”、“包含”以及“包括”术语并不配出一个或多个其它元件或其组合的存在或添加。
实施例1:
如图1-3所示,本发明的一种适用于批量产品的高精度点胶方法,包括:
S1、手眼标定;
S2、数据采集;
S3、数据融合;
S4、点胶轨迹规划及出胶信号的生成;
S5、根据点胶轨迹及出胶信号执行点胶。
其中,S2数据采集包括:通过3D阵面传感器获取产品的3D数据,产品的3D数据至少包括产品的轮廓边界点的3D数据;以及通过二维相机获取产品的彩色图像信息,并识别产品上的点胶位置的二维坐标及产品边界点的二维坐标。
S3数据融合包括:将3D阵面传感器获取产品的3D数据中XY平面数据与二维相机获取产品的XY平面数据融合,得到融合结果中的点胶位置的XY平面坐标及Z平面坐标。
S4点胶轨迹规划及出胶信号的生成包括:根据融合结果中点胶位置的XYZ平面坐标进行点胶轨迹规划以及生成出胶信号。
优选地,本发明中3D阵面传感器的拍摄视角与二维相机的拍摄视角相交或重叠。
3D阵面传感器和CCD相机均可静止拍摄,且利用3D阵面传感器拍摄深度图像即可获得产品完整的3D点云数据。
具体地,手眼标定包括:3D阵面传感器与机械手之间的标定,以及CCD相机与机械手之间的标定。
3D阵面传感器与机械手之间的标定,包括:通过校对机械手触及的多点位置在3D阵面传感器中的精确坐标,得到第一线性方程组,求解出机械手多轴坐标系和3D阵面传感器坐标系之间的旋转及尺寸变换矩阵。通过3D阵面传感器与机械手之间的标定,指导机械臂的运动。
CCD相机与机械手之间的标定,包括:通过校对机械手触及的多点位置在CCD相机中的像素坐标,得到第二线性方程组,求解得出机械手多轴坐标系和CCD相机的2D坐标系之间的映射矩阵。通过CCD相机与机械手之间的标定,指导机械臂的运动,同时,通过3D阵面传感器、CCD相机分别与机械手之间的标定,可采用其中一个标定关系指导机械手运动,另一个标定关系验证机械手的运动,实现指导运动与运动后检测的双重功能。
通过3D阵面传感器获取产品的3D数据,产品的3D数据至少包括产品的轮廓边界点的3D数据,包括:
S21、通过3D阵面传感器获取待点胶产品的3D点云数据。
S22、有序进行边界提取,得到轮廓边界点的3D数据。
具体地,S21包括:
S211、采集待点胶产品的点云数据,获得包括噪声的待点胶产品的初始点云数据,对初始点云数据进行体素滤波处理,降低点云总数同时保持点云形状不变,以获得低密度点云数据,对该低密度点云数据中的点进行欧式聚类,使得低密度点云数据被划分为多个点云片,将每个点云片中的点连接形成三角形实现每个点云片的三角面化,以此获得多个三角网格面。
S212、提取每个三角网格面的边界顶点,以获得多个三角网格面的轮廓,进而获得三角网格面的轮廓,设定待点胶产品轮廓的选择标准,在所有三角网格面的轮廓中选取待点胶产品的轮廓,该轮廓中范围内的点即为待点胶产品对应的点云数据。
具体地,S22包括:
S221、将待点胶产品的轮廓上的每个点作为种子点,以每个种子点为中心按照预设的半径进行搜索,以此获得每个种子点的点云块,所有种子点的点云块形成三维边界点云带。
S222、将三维边界点云带中所有的点通过最小二乘法计算得到拟合产品基准平面,然后将该三维边界点云带上所有的点投影至基准平面中,获得平面边界点云带,在该平面边界点云带中的点按照设定的规则进行提取,以此获得平面内的有序边界点及其编号,按照平面内的有序边界点的编号筛选其在三维边界点云带中对应编号的点,以此获得三维点云带中有序的边界点,将该三维点云带中有序的边界点依次连接后获得待点胶产品的边界轮廓,即实现三维点云的待点胶产品的边界有序提取,进而得到轮廓边界点的3D坐标。
产品的3D数据至少包括轮廓边界点的3D坐标,其中,轮廓边界点的3D坐标中XY平面上的数据即为3D数据中XY平面数据。
通过二维相机获取产品的彩色图像信息,并识别产品上的点胶位置的二维坐标及产品边界点的二维坐标,包括:
S23、通过CCD传感器获取待点胶产品的彩色信息,识别出每个待点胶产品上的待点胶位置的2D像素坐标,及产品边界点的二维坐标;二维相机获取的产品边界点的二维坐标即为二维相机获取的产品轮廓边界点的XY平面数据。
本发明依赖CCD传感器获取的高精度彩色信息,采用AI检测算法准确识别出所有待点胶产品上的轮廓边界点和待点胶位置的2D像素坐标。
将3D阵面传感器获取产品的3D数据中XY平面数据与二维相机获取产品的XY平面数据融合,得到融合结果中的点胶位置的XY平面坐标及Z平面坐标,包括:
S31、将3D阵面传感器获取产品3D数据中轮廓边界点的XY平面数据进行排序,与二维相机获取产品轮廓边界点的XY平面数据进行对齐融合。
S32、根据二维相机识别的点胶位置,确定融合后的点胶位置的XY平面坐标;在3D阵面传感器获取产品的3D数据中,确定点胶位置的Z平面坐标。
数据融合还包括:
S33、统计2D和3D的XY平面坐标分布范围,将坐标的宽度和高度范围按产品排布的行列数计算得到产品行列坐标宽度,从而得出产品的2D、3D坐标和分布棋盘格行列映射关系;
S34、将融合后的2D和3D的XY平面数据统一置换为行列号,并与产品分布棋盘格的行列对齐;
S35、对齐后得到点胶位置在分布棋盘格的行列序号。
数据融合还包括:S36、补全分布棋盘格上的空缺位置。
可以理解为,在步骤S222有序得到轮廓边界点的3D坐标,在步骤S31中,将轮廓边界点的3D坐标中包含的XY平面数据进行排序,将二维相机获取产品轮廓边界点的XY平面数据进行排序,二者排序之后进行对齐融合,得到更为精确的待点胶产品的轮廓边界点。同时,依赖CCD相机获取的高精度彩色信息,识别出每个产品的待点胶位置,得到所有待点胶产品的点胶位置后再统计出产品在分布棋盘格的行列序号,并补全空缺位置,在上述基础上规划点胶路径,较适用于大规模的产品点胶,且无需在点胶时,对产品点云数据与像素坐标进行融合标定。
根据融合结果中点胶位置的XYZ平面坐标进行点胶轨迹规划以及生成出胶信号,包括:
S41、根据点胶位置在分布棋盘格的行列序号规划出XY平面点胶轨迹,根据点胶位置的Z平面坐标规划Z平面点胶轨迹;
根据融合结果中点胶位置的Z平面坐标,生成点胶高度和/或角度信号。
本发明根据每个待点胶产品的点胶位置在分布棋盘格的行列序号,可以规划处大规模产品的点胶轨迹,且从XYZ三个平面上均可规划点胶轨迹,精度较高,适用于大规模产品的点胶。
S5包括:
S51、判断分布棋盘格的当前序号的产品是否为异常状态;
S52、若异常,则执行下一格;
S53、若正常,则向执行机构发送本次点胶的起点、终点的全局坐标和出胶信号,完成后即可继续下一格点胶。
由于本发明按行列号补全未放置产品的空置区域,使行列棋盘格排满。因此,在执行点胶任务时,可以先判断分布棋盘格中的当前序号的产品是否为异常,若分布棋盘格中的当前序号为空置区域,可以很容易判断出分布棋盘格中的当前序号的产品为异常。在继续下一格点胶时,无需对下一格上的产品进行重新标定,可直接继续下一格的点胶。
而且,本发明将二维边界点与三维边界点融合,精确得到点胶的起点、终点及每个点胶位置的高度,向执行机构发送本次点胶的起点、终点的全局坐标指导点胶路径,同时向执行机构发送点胶位置的高度信息,指导执行机构进行精确的出胶。
相应地,本发明还提供了一种适用于批量产品的高精度点胶装置,其特征在于,包括:手眼标定模块10、数据采集模块20、数据融合模块30、规划及生成模块40、执行模块50;
数据采集模块20,用于通过3D阵面传感器获取产品的3D数据,产品的3D数据至少包括产品的轮廓边界点的3D数据;以及通过二维相机获取产品的彩色图像信息,并识别产品上的点胶位置的二维坐标及产品边界点的二维坐标;
数据融合模块30,用于将3D阵面传感器获取产品的3D数据中XY平面数据与二维相机获取产品的XY平面数据融合,得到融合结果中的点胶位置的XY平面坐标及Z平面坐标;
规划及生成模块40,用于根据融合结果中点胶位置的XYZ平面坐标进行点胶轨迹规划以及生成出胶信号。
还包括执行模块50,用于根据点胶轨迹及出胶信号执行点胶。
本发明提供的适用于批量产品的高精度点胶方法,融合二维数据及三维数据,将二维数据、三维数据与分布棋盘格对齐,充分利用二维和三维数据的优势,可精准定位XYZ的坐标位置和点胶区域,输出三维精准点胶轨迹和控制信号;通过CCD相机获取点胶产品的彩色信息,提高获取点胶位置的准确性,且在数据处理的过程中,将产品的三维数据中的轮廓边界点与二维数据中的轮廓边界点融合,获取点胶位置的XYZ的坐标,进行点胶轨迹规划更精确。
此外,装置实施例中的装置与方法实施例基于同样地发明构思。
本发明实施例还提供了一种计算机存储介质,该计算机存储介质包括存储器和处理器,该存储器中存储有至少一条指令和至少一段程序,该至少一条指令和至少一段程序由该处理器加载并执行以实现上述方法实施例提供的适用于批量产品的高精度点胶方法。
需要说明的是:上述本发明实施例先后顺序仅仅为了描述,不代表实施例的优劣。且上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置和电子设备实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
上述说明已经充分揭露了本发明的具体实施方式。需要指出的是,熟悉该领域的技术人员对本发明的具体实施方式所做的任何改动均不脱离本发明的权利要求书的范围。相应地,本发明的权利要求的范围也并不仅仅局限于前述具体实施方式。

Claims (10)

1.一种适用于批量产品的高精度点胶方法,其特征在于,包括手眼标定、数据采集、数据融合、点胶轨迹规划及出胶信号的生成;
其中,数据采集包括:通过3D阵面传感器获取产品的3D数据,所述产品的3D数据至少包括产品的轮廓边界点的3D数据;以及通过二维相机获取产品的彩色图像信息,并识别产品上的点胶位置的二维坐标及产品边界点的二维坐标;
数据融合包括:将3D阵面传感器获取产品的3D数据中XY平面数据与二维相机获取产品的XY平面数据融合,得到融合结果中的点胶位置的XY平面坐标及Z平面坐标;
点胶轨迹规划及出胶信号的生成包括:根据融合结果中点胶位置的XYZ平面坐标进行点胶轨迹规划以及生成出胶信号。
2.如权利要求1所述的一种适用于批量产品的高精度点胶方法,其特征在于,所述3D阵面传感器的拍摄视角与二维相机的拍摄视角相交或重叠。
3.如权利要求1所述的一种适用于批量产品的高精度点胶方法,其特征在于,所述将3D阵面传感器获取产品的3D数据中XY平面数据与二维相机获取产品的XY平面数据融合,得到融合结果中的点胶位置的XY平面坐标及Z平面坐标,包括:
将3D阵面传感器获取产品3D数据中轮廓边界点的XY平面数据进行排序,与二维相机获取产品轮廓边界点的XY平面数据进行对齐融合;
根据二维相机识别的点胶位置,确定融合后的点胶位置的XY平面坐标;
在3D阵面传感器获取产品的3D数据中,确定点胶位置的Z平面坐标。
4.如权利要求3所述的一种适用于批量产品的高精度点胶方法,其特征在于,所述数据融合还包括:
统计XY平面坐标分布范围,将坐标的宽度和高度范围按产品排布的行列数计算得到产品行列坐标宽度,从而得出产品的2D、3D坐标和分布棋盘格行列映射关系;
将融合后的XY平面数据置换为行列号,并与所述分布棋盘格的行列对齐;
对齐后得到点胶位置在所述分布棋盘格的行列序号。
5.如权利要求4所述的一种适用于批量产品的高精度点胶方法,其特征在于,所述数据融合还包括:补全所述分布棋盘格上的空缺位置。
6.如权利要求4所述的一种适用于批量产品的高精度点胶方法,其特征在于,所述根据融合结果中点胶位置的XYZ平面坐标进行点胶轨迹规划以及生成出胶信号,包括:
根据点胶位置在所述分布棋盘格的行列序号规划出XY平面点胶轨迹,根据点胶位置的Z平面坐标规划Z平面点胶轨迹。
7.如权利要求4所述的一种适用于批量产品的高精度点胶方法,其特征在于,所述根据融合结果中点胶位置的XYZ平面坐标进行点胶轨迹规划以及生成出胶信号,还包括:
根据融合结果中点胶位置的Z平面坐标,生成点胶高度和/或角度信号。
8.如权利要求1所述的一种适用于批量产品的高精度点胶方法,其特征在于,还包括:根据点胶轨迹及出胶信号执行点胶。
9.如权利要求7所述的一种适用于批量产品的高精度点胶方法,其特征在于,所述根据点胶轨迹及出胶信号执行点胶,包括:
判断分布棋盘格的当前序号的产品是否为异常状态;
若异常,则执行下一格;
若正常,则向执行机构发送本次点胶的起点、终点的全局坐标和出胶信号,完成后即可继续下一格点胶。
10.一种适用于批量产品的高精度点胶装置,其特征在于,包括:手眼标定模块、数据采集模块、数据融合模块、规划及生成模块;
所述数据采集模块,用于通过3D阵面传感器获取产品的3D数据,所述产品的3D数据至少包括产品的轮廓边界点的3D数据;以及通过二维相机获取产品的彩色图像信息,并识别产品上的点胶位置的二维坐标及产品边界点的二维坐标;
所述数据融合模块,用于将3D阵面传感器获取产品的3D数据中XY平面数据与二维相机获取产品的XY平面数据融合,得到融合结果中的点胶位置的XY平面坐标及Z平面坐标;
所述规划及生成模块,用于根据融合结果中点胶位置的XYZ平面坐标进行点胶轨迹规划以及生成出胶信号。
CN202110548142.1A 2021-05-19 2021-05-19 一种适用于批量产品的高精度点胶方法及装置 Active CN113198692B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110548142.1A CN113198692B (zh) 2021-05-19 2021-05-19 一种适用于批量产品的高精度点胶方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110548142.1A CN113198692B (zh) 2021-05-19 2021-05-19 一种适用于批量产品的高精度点胶方法及装置

Publications (2)

Publication Number Publication Date
CN113198692A true CN113198692A (zh) 2021-08-03
CN113198692B CN113198692B (zh) 2022-08-16

Family

ID=77031842

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110548142.1A Active CN113198692B (zh) 2021-05-19 2021-05-19 一种适用于批量产品的高精度点胶方法及装置

Country Status (1)

Country Link
CN (1) CN113198692B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113522657A (zh) * 2021-09-14 2021-10-22 常州铭赛机器人科技股份有限公司 点胶编程方法
CN114589077A (zh) * 2022-03-25 2022-06-07 飓蜂科技(苏州)有限公司 侧边点胶方法
CN117237337A (zh) * 2023-11-10 2023-12-15 东莞市维度自动化设备有限公司 基于图像处理的点胶路径生成系统、生成方法及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2992357A1 (en) * 2013-04-29 2016-03-09 Nokia Technologies OY A method and apparatus for fusing distance data from a distance sensing camera with an image
CN105513128A (zh) * 2016-01-13 2016-04-20 中国空气动力研究与发展中心低速空气动力研究所 基于Kinect的三维数据融合处理方法
CN107194983A (zh) * 2017-05-16 2017-09-22 华中科技大学 一种基于点云与影像数据的三维可视化方法和系统
CN109954613A (zh) * 2017-12-25 2019-07-02 广州智信科技有限公司 喷涂方法
CN110264416A (zh) * 2019-05-28 2019-09-20 深圳大学 稀疏点云分割方法及装置
CN110349221A (zh) * 2019-07-16 2019-10-18 北京航空航天大学 一种三维激光雷达与双目可见光传感器的融合标定方法
CN111192189A (zh) * 2019-12-27 2020-05-22 中铭谷智能机器人(广东)有限公司 一种汽车外形的三维自动检测方法及系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2992357A1 (en) * 2013-04-29 2016-03-09 Nokia Technologies OY A method and apparatus for fusing distance data from a distance sensing camera with an image
CN105513128A (zh) * 2016-01-13 2016-04-20 中国空气动力研究与发展中心低速空气动力研究所 基于Kinect的三维数据融合处理方法
CN107194983A (zh) * 2017-05-16 2017-09-22 华中科技大学 一种基于点云与影像数据的三维可视化方法和系统
CN109954613A (zh) * 2017-12-25 2019-07-02 广州智信科技有限公司 喷涂方法
CN110264416A (zh) * 2019-05-28 2019-09-20 深圳大学 稀疏点云分割方法及装置
CN110349221A (zh) * 2019-07-16 2019-10-18 北京航空航天大学 一种三维激光雷达与双目可见光传感器的融合标定方法
CN111192189A (zh) * 2019-12-27 2020-05-22 中铭谷智能机器人(广东)有限公司 一种汽车外形的三维自动检测方法及系统

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113522657A (zh) * 2021-09-14 2021-10-22 常州铭赛机器人科技股份有限公司 点胶编程方法
CN113522657B (zh) * 2021-09-14 2021-12-07 常州铭赛机器人科技股份有限公司 点胶编程方法
CN114589077A (zh) * 2022-03-25 2022-06-07 飓蜂科技(苏州)有限公司 侧边点胶方法
CN117237337A (zh) * 2023-11-10 2023-12-15 东莞市维度自动化设备有限公司 基于图像处理的点胶路径生成系统、生成方法及存储介质
CN117237337B (zh) * 2023-11-10 2024-03-19 东莞市维度自动化设备有限公司 基于图像处理的点胶路径生成系统、生成方法及存储介质

Also Published As

Publication number Publication date
CN113198692B (zh) 2022-08-16

Similar Documents

Publication Publication Date Title
CN113198692B (zh) 一种适用于批量产品的高精度点胶方法及装置
JP5897624B2 (ja) ワークの取出工程をシミュレーションするロボットシミュレーション装置
US20200065995A1 (en) System and method for tying together machine vision coordinate spaces in a guided assembly environment
CN111380502B (zh) 标定方法、位置确定方法、装置、电子设备及存储介质
US7630539B2 (en) Image processing apparatus
US9199379B2 (en) Robot system display device
CN107073719A (zh) 机器人和机器人系统
US8564655B2 (en) Three-dimensional measurement method and three-dimensional measurement apparatus
CN110842901B (zh) 基于一种新型三维标定块的机器人手眼标定方法与装置
US20170160077A1 (en) Method of inspecting an object with a vision probe
US20140118339A1 (en) Automated frame of reference calibration for augmented reality
CN102374860B (zh) 三维视觉定位方法及系统
CN108965690A (zh) 图像处理系统、图像处理装置及计算机可读存储介质
CN104006825A (zh) 沿至少三个不连续平面对机器视觉摄像机进行校准的系统和方法
CN107727485B (zh) 用于硬度测试的方法和装置
CN113034612B (zh) 一种标定装置、方法及深度相机
CN103196370A (zh) 一种导管接头空间位姿参数的测量方法和装置
CN110646231B (zh) 一种扫地机器人测试方法和装置
CN113198691B (zh) 一种基于3d线激光和ccd的高精度大视野点胶方法及装置
CN112734945A (zh) 一种基于增强现实的装配引导方法、系统及应用
CN106103733A (zh) 药效评价方法以及用于药效评价的图像处理装置
JPH06137840A (ja) 視覚センサの自動キャリブレーション装置
CN107850425B (zh) 用于测量制品的方法
CN114310901B (zh) 用于机器人的坐标系标定方法、装置、系统以及介质
CN110337674A (zh) 三维重建方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant