CN112381827A - 基于视觉图像的快速高精度缺陷检测方法 - Google Patents

基于视觉图像的快速高精度缺陷检测方法 Download PDF

Info

Publication number
CN112381827A
CN112381827A CN202110051630.1A CN202110051630A CN112381827A CN 112381827 A CN112381827 A CN 112381827A CN 202110051630 A CN202110051630 A CN 202110051630A CN 112381827 A CN112381827 A CN 112381827A
Authority
CN
China
Prior art keywords
image
precision
calculating
angle
visual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110051630.1A
Other languages
English (en)
Other versions
CN112381827B (zh
Inventor
张武杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casi Vision Technology Luoyang Co Ltd
Casi Vision Technology Beijing Co Ltd
Original Assignee
Casi Vision Technology Luoyang Co Ltd
Casi Vision Technology Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casi Vision Technology Luoyang Co Ltd, Casi Vision Technology Beijing Co Ltd filed Critical Casi Vision Technology Luoyang Co Ltd
Priority to CN202110051630.1A priority Critical patent/CN112381827B/zh
Publication of CN112381827A publication Critical patent/CN112381827A/zh
Application granted granted Critical
Publication of CN112381827B publication Critical patent/CN112381827B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration

Abstract

本申请公开了一种基于视觉图像的快速高精度缺陷检测方法,包括以下步骤:对参考基准物体定位并采集图像、创建匹配模板并确定检测区域、对待测物体定位并采集图像、基准区域图像和待测区域图像对比,提取异常区域、异常区域特征提取及筛选。本发明基于视觉图像的快速高精度缺陷检测方法,检测过程简单快捷,不需要专门定制高精度标定板或辅助工具,对对位模组装配精度要求较低,经过多个相机一次拍照即可完成平移位置和旋转角度的计算,对位过程效率和精度均较高,从而能够实现对目标物体的快速高精度缺陷检测。

Description

基于视觉图像的快速高精度缺陷检测方法
技术领域
本发明涉及工业品缺陷检测技术领域,特别涉及一种基于视觉图像的快速高精度缺陷检测方法。
背景技术
在芯片半导体、显示面板、手机面板、PCB制造等行业,其制造工艺对精度要求极高,对制造工艺中产生的缺陷容忍度较低,通常需要高精度的缺陷检测方法。显示面板、手机面板的生产加工工艺的流程一般包括:开料、开槽、倒边、精雕、平磨、清洗、电镀/丝印、镜片清洗、包装。
在利用视觉图像进行检测时,为了确保检测精度,通常需要先对产品进行对位,然后和标准模板进行比对来定位缺陷,对位精度直接影响了检测效果。自动视觉对位或视觉引导在工业场景下应用极为广泛,其目的是借助于视觉图像来计算目标的位姿偏差,然后借助于三自由度运动机构以及相应的控制系统对位姿偏差进行补偿,从而实现对目标物体位置和姿态的矫正。
目前常用的视觉图像缺陷检测方法大多是基于玻璃盖板图像的边缘提取,而后分析边缘轮廓的平整性和凹凸区域,以手机面板为例,在对手机面板进行缺陷检测时,主要是分析面板边缘的轮廓是否平整或者存在凹凸区域,也就是检测图像边缘是否存在凸起或者凹陷,现有技术中对于细小的、倒边、精雕、平磨、清洗、电镀/丝印等加工过程损造成的细微缺陷还很难检出,因为在这类细微缺陷附近的边缘轮廓仍然是平直的,部分为边缘存在微缺陷部分。
现有技术的视觉图像缺陷检测中,基于单相机的视觉对位步骤相对较为成熟,但其仅适用于对较小的目标物体进行对位,当对较大目标物体进行对位时,误差较大,精度降低。基于多相机视觉图像的对位系统在理论上可以做到精度更高,应用范围更广,但目前绝大多数视觉图像缺陷检测中多相机视觉图像对位系统方法存在如下问题:
第一,标定过程复杂,很多方法需要借助于定制高精度标定板,不仅制作成本高昂,而且标定算法逻辑复杂,当对位模组的平行度和垂直度存在误差时,还会导致对位精度下降;还有很多标定方法需要多次计算对位误差,然后反复迭代计算线性补偿参数,且无法自动完成。
第二,对位过程复杂,很多对位方法在标定时没有标定出旋转中心,或者没有建立合适的对位模型,导致需要多次拍照和多次平台移动,才能完成对位过程,导致对位效率较低。
第三,对位精度较低。很多对位系统在建立多相机之间的位置关系模型时,考虑因素不全或忽略了某些参数,导致对位精度较低。
现有技术的视觉图像缺陷检测方法还有一种是采用终检时用人工目检,这种方法不能预先防范由于设备和生产过程发生的批量性不良,一片盖板从透明基板到成品通常要经过多达二十道的印刷和烘烤,累计耗时数小时。目前常规的自动化丝印机单道印刷产能都在每小时600-1400片,从不良产品的首次发生到终检发现有可能已造成上千片不良品的发生,导致生产成本提高和有效产能下降,工作效率很低。
发明内容
本发明所要解决的技术问题在于,针对上述现有技术中的不足,提出了一种基于视觉图像的快速高精度缺陷检测方法。本发明快速高精度缺陷检测方法,标定过程简单快捷,不需要专门定制高精度标定板或辅助工具,对对位模组装配精度要求较低,经过多个相机一次拍照即可完成平移位置和旋转角度的计算,对位过程效率和精度均较高,从而能够实现对目标物体的快速高精度缺陷检测。
为解决上述技术问题,本发明提供了一种基于视觉图像的快速高精度缺陷检测方法,包括以下步骤:
步骤201:对参考基准物体进行快速高精度定位,然后进行高精度图像采集,并保存为基准图像;
步骤202:依据基准图像上的Mark,创建匹配模板,并在基准图像上确定检测区域,并建立检测区域和Mark之间的位置关系;
步骤203:对目标物体进行快速高精度定位,然后进行高精度图像采集,依据步骤202中的Mark匹配模板,在前述高精度图像采集到的图像中查找Mark位置,并根据查找结果,依据检测区域与Mark之间的位置关系,将步骤202中所述的检测区域变换到前述高精度图像采集到的图像中;
步骤204:分别在基准图像和待测图像中,提取出对应检测区域的图像,并进行图像算法比对,确定出异常区域和大小。
优选地,所述方法进一步包括:
步骤205:对步骤204中确定出的异常区域进行特征提取,根据真实缺陷特征信息分布,剔除掉干扰异常区域,并计算出真正的缺陷位置及大小。
优选地,所述快速高精度定位的步骤,进一步包括:基于多相机视觉图像的快速标定步骤 和/或 基于多相机视觉图像的快速对位步骤。
优选地,
所述高精度图像采集的步骤,进一步包括:静态图像采集,和/或,动态图像采集。
优选地,所述基于多相机视觉图像的快速标定步骤,进一步包括:
步骤A1:图像特征点查找,所述图像特征点查找能够对前述高精度图像采集到的图像中的关键点进行定位,并计算出特征点在图像中的位置坐标;
步骤A2:平台平移多个位置,记录平台物理坐标,并计算每个位置的图像特征点坐标;
步骤A3:标定模型及参数计算;
步骤A4: 平台旋转多个位置,并计算每个位置的图像特征点坐标;
步骤A5:旋转中心计算。
优选地,所述图像特征点查找,进一步包括:基于直线交点的方式,灰度匹配的方式和/或形状匹配的方式。
优选地,所述步骤A2中的计算每个位置的图像特征点坐标的过程,是基于步骤A1中所述的特征点查找计算的。
优选地,所述步骤A5旋转中心计算的步骤,进一步包括:依据步骤A3所述的标定模型和参数,将步骤14所述计算的图像特征点坐标转换到相机的标定物理坐标系,得到多个物理坐标点;基于多点拟合圆的策略计算出圆心,并作为旋转中心。
优选地,所述基于多相机视觉图像的快速对位步骤,进一步包括:
步骤B1:调整目标物体到参考位置,计算各相机图像中的特征点坐标,并基于标定模型、参数和旋转中心,将各相机图像中的特征点变换到同一个标定物理坐标系下,并计算目标物体在该坐标系下的位置和角度,记录为基准位置和基准角度;
步骤B2:当目标物体位置发生变化时,同样按照步骤B1中所述的过程,计算当前目标物体对应的当前位置和角度 ;
步骤B3:依据步骤B1中的基准位置和角度以及步骤B2中的当前位置和角度,计算位置和角度偏差,并基于对位模型反算出平台的位移量和旋转角度 ;
步骤B4:根据步骤B3中所述的位移量和旋转角度,控制平台运动,完成对位。
优选地,所述步骤B1中的计算目标物体在该坐标系下位置的步骤进一步包括:利用多个相机图像中的特征点求均值的方式。
优选地,所述步骤B1中的计算目标物体在该坐标系下角度的步骤进一步包括:利用多个相机图像中任意两个特征点之间向量角度的方式,和/或,利用多个中间特征点之间向量角度的方式。
为解决上述技术问题,本发明还提供了一种基于多相机视觉图像的快速标定方法,包括以下步骤:
步骤A1:图像特征点查找,所述图像特征点查找能够对目标图像中的关键点进行定位,并计算出特征点在图像中的位置坐标;
步骤A2:平台平移多个位置,记录平台物理坐标,并计算每个位置的图像特征点坐标;
步骤A3:标定模型及参数计算;
步骤A4: 平台旋转多个位置,并计算每个位置的图像特征点坐标;
步骤A5:旋转中心计算。
优选地,所述图像特征点查找,进一步包括:基于直线交点的方式,灰度匹配的方式和/或形状匹配的方式。
优选地,所述步骤A2中的计算每个位置的图像特征点坐标的过程,是基于步骤A1中所述的特征点查找方法计算的。
优选地,所述步骤A5旋转中心计算的步骤,进一步包括:依据步骤A3所述的标定模型和参数,将步骤A4所述计算的图像特征点坐标转换到相机的标定物理坐标系,得到多个物理坐标点;基于多点拟合圆的策略计算出圆心,并作为旋转中心。
为解决上述技术问题,本发明又提供了一种基于多相机视觉图像的快速对位方法,包括以下步骤:
步骤B1:调整目标物体到参考位置,计算各相机图像中的特征点坐标,并基于标定模型、参数和旋转中心,将各相机图像中的特征点变换到同一个标定物理坐标系下,并计算目标物体在该坐标系下的位置和角度,记录为基准位置和基准角度;
步骤B2:当目标物体位置发生变化时,同样按照步骤B1中所述的过程,计算当前目标物体对应的当前位置和角度 ;
步骤B3:依据步骤B1中的基准位置和角度以及步骤B2中的当前位置和角度,计算位置和角度偏差,并基于对位模型反算出平台的位移量和旋转角度 ;
步骤B4:根据步骤B3中所述的位移量和旋转角度,控制平台运动,完成对位。
优选地,所述步骤B1中的计算目标物体在该坐标系下位置的步骤进一步包括:利用多个相机图像中的特征点求均值的方式。
优选地,所述步骤B1中的计算目标物体在该坐标系下角度的步骤进一步包括:利用多个相机中任意两个相机图像中的特征点之间向量角度的方式,和/或,利用多个中间特征点之间向量角度的方式。
本发明有益效果包括:建立了图像特征点快速查找方法,获取多个对应的物理坐标点和图像特征点,多相机视觉图像快速对位。本发明方法通过集成到相应的控制软件中,能够实现对目标物体的快速高精度成像并检测出其缺陷位置和大小,可以实现对目标物体的高精度缺陷检测,在工业机器视觉领域具有广泛的应用场景和应用价值。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是一部分实施例或现有技术,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的类似或相关附图。
图1为本发明实施例所述简化应用场景下的快速高精度缺陷检测系统构成示意图;
图2为本发明实施例所述基于视觉图像的快速高精度缺陷检测方法简化流程图;
图3为本发明实施例所述视觉图像的快速高精度缺陷检测方法中视觉图像标定的简化流程图;
图4为本发明实施例所述视觉图像的快速高精度缺陷检测方法中视觉图像对位的简化流程图。
具体实施方式
下面结合实施例详述本发明。为使本发明的目的、技术方案及优点更加清楚、明确,以下对本发明进一步详细说明,但本发明并不局限于这些实施例。
本发明基于视觉图像的快速高精度缺陷检测方法,包括以下步骤:对参考基准物体进行快速高精度定位并采集高精度图像、创建匹配模板、确定检测区域;对待测物体进行快速高精度定位并采集高精度图像、基准区域图像和待测区域图像对比,提取异常区域、异常区域特征提取及筛选。
所述高精度定位包含两个方面:一是多相机视觉图像的快速标定,标定过程包括如下步骤:建立一种图像特征点查找方法、获取多个对应的物理坐标点和图像特征点、标定模型及参数计算、旋转中心计算;一是多相机视觉图像的快速对位,其过程包括如下步骤:调整目标到参考位置,基于视觉图像计算出基准位置和基准角度、根据目标当前位置,依据视觉图像计算当前位置和角度、依据视觉计算偏差和对位模型反算出运动平台的位移量和旋转角度、控制平台运动,完成对位。
本发明借助于对目标物体的快速高精度定位,可以实现对目标物体的高精度缺陷检测,在工业机器视觉领域具有广泛的应用场景和应用价值。
在一实施例中,本发明提供了一种基于视觉图像的快速高精度缺陷检测方法,包括以下步骤:
步骤201:对参考基准物体进行快速高精度定位,然后进行高精度图像采集,并保存为基准图像;
步骤202:依据基准图像上的定位Mark标志,创建匹配模板,并在基准图像上确定检测区域,并建立检测区域和Mark之间的位置关系;
步骤203:对待测目标物体进行快速高精度定位,然后进行高精度图像采集,依据步骤202中的Mark匹配模板,在当前待测目标图像中查找Mark位置,并根据查找结果,依据检测区域与Mark之间的位置关系,将步骤202中所述的检测区域变换到待测图像中;
步骤204:分别在基准图像和待测图像中,提取出对应检测区域的图像,并进行图像算法比对,确定出异常区域和大小。
优选地,所述方法进一步包括:
步骤205:对步骤204中检出的异常区域进行特征提取,根据真实缺陷特征信息分布,剔除掉干扰异常区域,并计算出真正的缺陷位置及大小。
优选地,所述快速高精度定位的步骤,进一步包括:基于多相机视觉图像的快速标定步骤 和/或 基于多相机视觉图像的快速对位步骤。
优选地,所述高精度图像采集包含两种方式,一种是静态图像采集,指采集图像时目标物体和相机均是静止状态,此时需要保证光学镜头分辨率是检测精度的10倍以上;另一种是动态图像采集,指采集图像时目标物体或相机是运动的,除了保证光学镜头分辨率是检测精度的10倍以上外,还需要保证目标物体或相机的运动精度也必须要和光学镜头分辨率一致。
优选地,所述基于多相机视觉图像的快速标定步骤,进一步包括:
步骤A1:建立图像特征点查找方法,所述图像特征点查找方法能够对目标图像中的关键点进行定位,并计算出特征点在图像中的位置坐标;
步骤A2:载物台平移多个位置,记录平台物理坐标,并计算每个位置的图像特征点坐标;
步骤A3:标定模型及参数计算;
步骤A4: 载物台旋转多个位置,并计算每个位置的图像特征点坐标;
步骤A5:旋转中心计算。
优选地,所述图像特征点查找步骤,进一步包括:基于直线交点的方式,灰度匹配的方式 和/或 形状匹配的方式。
优选地,所述步骤A2中的计算每个位置的图像特征点坐标的过程,是基于步骤A1中所述的特征点查找方法计算的。
优选地,所述步骤A5旋转中心计算的步骤,进一步包括:依据步骤A3所述的标定模型和参数,将步骤14所述计算的图像特征点坐标转换到相机的标定物理坐标系,得到多个物理坐标点;基于多点拟合圆的策略计算出圆心,并作为旋转中心。
优选地,所述基于多相机视觉图像的快速对位步骤,进一步包括:
步骤B1:调整目标到参考位置,计算各相机图像中的特征点坐标,并基于标定模型、参数和旋转中心,将各相机图像中的特征点变换到同一个标定物理坐标系下,并计算目标物体在该坐标系下的位置和角度,记录为基准位置和基准角度;
步骤B2:当目标位置发生变化时,同样按照步骤B1中所述的过程,计算当前目标物体对应的当前位置和角度 ;
步骤B3:依据步骤B1中的基准位置和角度以及步骤B2中的当前位置和角度,计算位置和角度偏差,并基于对位模型反算出运动平台的位移量和旋转角度 ;
步骤B4:根据步骤B3中所述的位移量和旋转角度,控制平台运动,完成对位。
优选地,所述步骤B1中的计算目标物体在该坐标系下位置的步骤进一步包括:利用多个相机对应的特征点求均值的方式。
优选地,所述步骤B1中的计算目标物体在该坐标系下角度的步骤进一步包括:利用多个相机中任意两个点之间向量角度的方式,和/或,利用多个中间点之间向量角度的方式。
在另一实施例中,本发明还提供了一种基于多相机视觉图像的快速标定方法,包括以下步骤:
步骤A1:建立图像特征点查找方法,所述图像特征点查找方法能够对目标图像中的关键点进行定位,并计算出特征点在图像中的位置坐标;
步骤A2:载物台平移多个位置,记录平台物理坐标,并计算每个位置的图像特征点坐标;
步骤A3:标定模型及参数计算;
步骤A4: 载物台旋转多个位置,并计算每个位置的图像特征点坐标;
步骤A5:旋转中心计算。
优选地,所述图像特征点查找步骤,进一步包括:基于直线交点的方式,灰度匹配的方式 和/或 形状匹配的方式。
优选地,所述步骤A2中的计算每个位置的图像特征点坐标的过程,是基于步骤A1中所述的特征点查找方法计算的。
优选地,所述步骤A5旋转中心计算的步骤,进一步包括:依据步骤A3所述的标定模型和参数,将步骤14所述计算的图像特征点坐标转换到相机的标定物理坐标系,得到多个物理坐标点;基于多点拟合圆的策略计算出圆心,并作为旋转中心。
在又一实施例中,本发明另提供了一种基于多相机视觉图像的快速对位方法,包括以下步骤:
步骤B1:调整目标到参考位置,计算各相机图像中的特征点坐标,并基于标定模型、参数和旋转中心,将各相机图像中的特征点变换到同一个标定物理坐标系下,并计算目标物体在该坐标系下的位置和角度,记录为基准位置和基准角度;
步骤B2:当目标位置发生变化时,同样按照步骤B1中所述的过程,计算当前目标物体对应的当前位置和角度 ;
步骤B3:依据步骤B1中的基准位置和角度以及步骤B2中的当前位置和角度,计算位置和角度偏差,并基于对位模型反算出运动平台的位移量和旋转角度 ;
步骤B4:根据步骤B3中所述的位移量和旋转角度,控制平台运动,完成对位。
优选地,所述步骤B1中的计算目标物体在该坐标系下位置的步骤进一步包括:利用多个相机对应的特征点求均值的方式。
优选地,所述步骤B1中的计算目标物体在该坐标系下角度的步骤进一步包括:利用多个相机中任意两个点之间向量角度的方式,和/或,利用多个中间点之间向量角度的方式。
如图1所示,为本实施例所述缺陷检测方法所适用的一种简化应用场景下的基本系统结构,包括第一对位相机1、第二对位相机2、检测相机3、目标物体4、三自由度运动载物台5、图像显示器6、图像采集卡7、运动控制卡8、计算机9、电机驱动器10。第一对位相机1和第二对位相机2负责采集目标物体4中局部特征信息,并通过图像采集卡7传输到计算机9中,并显示在图像显示器6上,计算机9根据本发明所述方法计算出目标物体位置和角度偏差,并发送控制指令到运动控制卡8,运动控制卡8进一步将指令发送到电机驱动器10,控制三自由度运动载物台5进行平移和旋转,完成目标物体位置和角度的矫正。所述三自由度运动载物台5可以进行X方向和Y方向的平移以及绕Z轴旋转。位置矫正以后,检测相机3对目标物体外观进行高精度图像采集,并经过计算机9进行图像处理,计算出目标物体的缺陷信息。
如图2所示,为本实施例所述基于视觉图像的快速高精度缺陷检测方法的简化流程图,其包含以下步骤:
步骤201:对参考基准物体进行快速高精度定位,然后进行高精度图像采集,并保存为基准图像。
步骤202:依据基准图像上的定位Mark标志,创建匹配模板,并在基准图像上确定检测区域,并建立检测区域和Mark之间的位置关系。
步骤203:对待测目标物体进行快速高精度定位,然后进行高精度图像采集,依据步骤202中的Mark匹配模板,在当前待测目标图像中查找Mark位置,并根据查找结果,依据检测区域与Mark之间的位置关系,将步骤202中所述的检测区域变换到待测图像中。
步骤204:分别在基准图像和待测图像中,提取出对应检测区域的图像,并进行图像算法比对,确定出异常区域和大小。
步骤205:对步骤204中检出的异常区域进行特征提取,根据真实缺陷特征信息分布,剔除掉干扰异常区域,并计算出真正的缺陷位置及大小。
如图3所示,为了实现前述实施例的步骤201和步骤203中所述的目标物体和待测物体的高精度定位,本实施例提供了一种基于多相机视觉图像的快速标定方法,其简化流程图其包含以下步骤:
步骤301:建立一种图像特征点查找方法,通常需要根据目标物体的特征选择不同的方法,比如基于直线交点的方法、灰度匹配的方法、形状匹配的方法等,需要确保特征点查找结果的一致性,否则会导致标定结果不准确。
步骤302:载物台平移多个位置,记录平台物理坐标,并计算每个位置的图像特征点坐标,其实施过程包括如下子步骤:
子步骤302A:将目标物体放置在运动平台上,调节多个相机的拍照位置,确保目标物体上的多个关键特征点均大致位于(或称基本位于)各相机的图像中心。
子步骤302B:基于子步骤302A所述三自由度运动平台,规划4个以上的平移运动点位(
Figure 582577DEST_PATH_IMAGE001
),控制运动平台依次运动到这些物理位置,记录每个物理位置对应的物理坐标,并在每个位置控制多个相机分别采集图像。
子步骤302C:基于子步骤302B所采集的图像,并基于步骤301所述的图像特征点查找方法,分别计算出目标特征点在各个图像中像素坐标(
Figure 375084DEST_PATH_IMAGE002
),k表示相机个数。
步骤303:标定模型及参数计算。根据子步骤302B和步骤子302C中的平台物理坐标(
Figure 154821DEST_PATH_IMAGE003
)以及获取的目标特征点在各个图像中的像素坐标(
Figure 861614DEST_PATH_IMAGE004
),按照以下计算模型,用最小二乘法,分别计算出各相机所对应的
Figure 49888DEST_PATH_IMAGE005
标定矩阵。
Figure 810034DEST_PATH_IMAGE006
步骤304:载物台旋转多个位置,并计算每个位置的图像特征点坐标。在实施过程中包括如下子步骤:
子步骤304A:规划3个以上的旋转点位(
Figure 14750DEST_PATH_IMAGE007
),并控制三自由度运动平台分别旋转到这些角度,每旋转到一个位置,控制多个相机进行图像采集,并基于步骤301所述的图像特征点查找方法,分别计算出目标特征点在各个图像中像素坐标(
Figure 213650DEST_PATH_IMAGE008
)。
子步骤304B:根据子步骤304A中计算出的目标特征点在各个图像中像素坐标(
Figure 256430DEST_PATH_IMAGE009
),并基于步骤303中的所述计算模型及标定矩阵
Figure 249794DEST_PATH_IMAGE005
,计算出对应的物理坐标(
Figure 941807DEST_PATH_IMAGE010
)。
步骤305:旋转中心计算。根据子步骤304B中计算出的多个XY平面物理坐标(
Figure 678818DEST_PATH_IMAGE010
),基于拟合圆的思想计算出其对应的圆心物理坐标(
Figure 139887DEST_PATH_IMAGE011
)。
如图4所示,为了实现前述实施例中步骤201和步骤203所述的目标物体和待测物体的高精度定位,本实施例提供了一种基于多相机视觉图像的对位方法,其简化流程图包括以下步骤:
步骤401:调整目标到参考位置,计算各相机图像中的特征点坐标,并基于步骤303中所述的标定模型、参数和步骤305中的旋转中心,将各相机图像中的特征点变换到同一个标定物理坐标系下,并计算目标物体在该坐标系下的位置和角度,记录为基准位置(
Figure 569731DEST_PATH_IMAGE012
)和基准角度
Figure 811357DEST_PATH_IMAGE013
,其计算过程包括如下子步骤:
子步骤401A:当目标物体在参考位置时,控制多个相机进行图像采集,并基于步骤301中的图像特征点查找方法,分别计算出目标特征点在各个图像中像素坐标(
Figure 398065DEST_PATH_IMAGE014
)。
子步骤401B:计算对应物理坐标。基于步骤303中的所述计算模型及标定矩阵
Figure 41536DEST_PATH_IMAGE005
,计算出对应的物理坐标(
Figure 376702DEST_PATH_IMAGE015
),并进一步减去步骤304所计算的圆心物理坐标(
Figure 541842DEST_PATH_IMAGE016
)。
子步骤401C:获取目标物体基准中心位置坐标和基准角度。基于子步骤401B所计算的各相机特征点所对应的多个物理坐标(
Figure 620656DEST_PATH_IMAGE015
),建立一种合理的描述目标物体基准位置和角度的方法,并求取目标物体的基准位置(
Figure 56317DEST_PATH_IMAGE017
)和基准角度
Figure 264182DEST_PATH_IMAGE018
。例如:可以采用求均值的方法计算基准位置,任意两点连线的方法求基准角度。
步骤402:当目标位置发生变化时,同样按照步骤401中所述的过程,计算当前目标物体对应的当前位置(
Figure 27870DEST_PATH_IMAGE019
)和角度
Figure 595861DEST_PATH_IMAGE020
步骤403:依据步骤401中的基准位置和角度以及步骤402中的当前位置和角度,计算位置和角度偏差,并基于对位模型反算出运动平台的位移量(
Figure 948345DEST_PATH_IMAGE021
)和旋转角度
Figure 828576DEST_PATH_IMAGE022
。其实施过程包括如下子步骤:
子步骤403A:计算旋转角度偏差
Figure 266511DEST_PATH_IMAGE022
Figure 687128DEST_PATH_IMAGE023
Figure 97381DEST_PATH_IMAGE024
表示基准角度,
Figure 210830DEST_PATH_IMAGE025
表示当前角度。
子步骤403B:依据步骤402所述当前位置(
Figure 385328DEST_PATH_IMAGE026
),计算当前位置对应的向量长度r和向量角度
Figure 547319DEST_PATH_IMAGE027
Figure 608816DEST_PATH_IMAGE028
子步骤403C:依据子步骤403A所述角度偏差
Figure 329385DEST_PATH_IMAGE029
以及子步骤403B中的向量长度r和向量角度
Figure 741912DEST_PATH_IMAGE027
,计算新的向量位置(
Figure 769911DEST_PATH_IMAGE030
),计算过程如下:
Figure 889177DEST_PATH_IMAGE031
子步骤403D:依据步骤401中的所述目标基准位置(
Figure 78850DEST_PATH_IMAGE032
)和子步骤403C中的所述新的向量位置(
Figure 916356DEST_PATH_IMAGE030
),计算位移量偏差:
Figure 482466DEST_PATH_IMAGE033
步骤404:根据步骤403计算的角度偏差
Figure 784135DEST_PATH_IMAGE034
和位置偏差(
Figure 144709DEST_PATH_IMAGE035
),控制三自由度运动平台进行相对运动,即可实现将目标物体调整到和基准目标同样的位姿状态。
以上所述,仅是本发明的几个实施例,并非对本发明做任何形式的限制,虽然本发明以较佳实施例揭示如上,然而并非用以限制本发明,任何熟悉本专业的技术人员,在不脱离本发明技术方案的范围内,利用上述揭示的技术内容做出些许的变动或修饰均等同于等效实施案例,均属于本发明技术方案保护范围内。

Claims (11)

1.一种基于视觉图像的快速高精度缺陷检测方法,其特征在于,包括以下步骤:
步骤201:对参考基准物体进行快速高精度定位,然后进行高精度图像采集,并保存为基准图像;
步骤202:依据基准图像上的Mark,创建匹配模板,并在基准图像上确定检测区域,并建立检测区域和Mark之间的位置关系;
步骤203:对目标物体进行快速高精度定位,然后进行高精度图像采集,依据步骤202中的匹配模板,在前述高精度图像采集得到的图像中查找Mark位置,并根据查找结果,依据检测区域与Mark之间的位置关系,将步骤202中所述的检测区域变换到前述高精度图像采集得到的图像中;
步骤204:分别在基准图像和待测图像中,提取出对应检测区域的图像,并进行图像算法比对,确定出异常区域和大小。
2.根据权利要求1所述基于视觉图像的快速高精度缺陷检测方法,其特征在于,所述方法进一步包括:
步骤205:对步骤204中确定出的异常区域进行特征提取,根据真实缺陷特征信息分布,剔除掉干扰异常区域,并计算出真正的缺陷位置及大小。
3.根据权利要求1所述基于视觉图像的快速高精度缺陷检测方法,其特征在于,所述快速高精度定位的步骤,进一步包括:基于多相机视觉图像的快速标定步骤 和/或 基于多相机视觉图像的快速对位步骤。
4.根据权利要求1所述基于视觉图像的快速高精度缺陷检测方法,其特征在于,所述高精度图像采集的步骤,进一步包括:静态图像采集,和/或,动态图像采集。
5.根据权利要求3所述基于视觉图像的快速高精度缺陷检测方法,其特征在于,所述基于多相机视觉图像的快速标定步骤,进一步包括:
步骤A1:图像特征点查找,所述图像特征点查找能够对前述高精度图像采集得到的图像中的关键点进行定位,并计算出特征点在图像中的位置坐标;
步骤A2:平台平移多个位置,记录平台物理坐标,并计算每个位置的图像特征点坐标;
步骤A3:标定模型及参数计算;
步骤A4: 平台旋转多个位置,并计算每个位置的图像特征点坐标;
步骤A5:旋转中心计算。
6.根据权利要求5所述基于视觉图像的快速高精度缺陷检测方法,其特征在于,所述图像特征点查找,进一步包括:基于直线交点的方式,灰度匹配的方式和/或形状匹配的方式。
7.根据权利要求5所述基于视觉图像的快速高精度缺陷检测方法,其特征在于,所述步骤A2中的计算每个位置的图像特征点坐标的过程,是基于步骤A1中所述的特征点查找计算的。
8.根据权利要求5所述基于视觉图像的快速高精度缺陷检测方法,其特征在于,所述步骤A5旋转中心计算的步骤,进一步包括:依据步骤A3所述的标定模型和参数,将步骤A4所述计算的图像特征点坐标转换到相机的标定物理坐标系,得到多个物理坐标点;基于多点拟合圆的策略计算出圆心,并作为旋转中心。
9.根据权利要求3所述基于视觉图像的快速高精度缺陷检测方法,其特征在于,所述基于多相机视觉图像的快速对位步骤,进一步包括:
步骤B1:调整目标物体到参考位置,计算各相机图像中的特征点坐标,并基于标定模型、参数和旋转中心,将各相机图像中的特征点变换到同一个标定物理坐标系下,并计算目标物体在该坐标系下的位置和角度,记录为基准位置和基准角度;
步骤B2:当目标物体位置发生变化时,同样按照步骤B1中所述的过程,计算当前目标物体对应的当前位置和角度 ;
步骤B3:依据步骤B1中的基准位置和角度以及步骤B2中的当前位置和角度,计算位置和角度偏差,并基于对位模型反算出平台的位移量和旋转角度 ;
步骤B4:根据步骤B3中所述的位移量和旋转角度,控制平台运动,完成对位。
10.根据权利要求9所述基于视觉图像的快速高精度缺陷检测方法,其特征在于,所述步骤B1中的计算目标物体在该坐标系下位置的步骤进一步包括:利用多个相机图像中的特征点求均值的方式。
11.根据权利要求9所述基于视觉图像的快速高精度缺陷检测方法,其特征在于,所述步骤B1中的计算目标物体在该坐标系下角度的步骤进一步包括:利用多个相机图像中任意两个特征点之间向量角度的方式,和/或,利用多个中间特征点之间向量角度的方式。
CN202110051630.1A 2021-01-15 2021-01-15 基于视觉图像的快速高精度缺陷检测方法 Active CN112381827B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110051630.1A CN112381827B (zh) 2021-01-15 2021-01-15 基于视觉图像的快速高精度缺陷检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110051630.1A CN112381827B (zh) 2021-01-15 2021-01-15 基于视觉图像的快速高精度缺陷检测方法

Publications (2)

Publication Number Publication Date
CN112381827A true CN112381827A (zh) 2021-02-19
CN112381827B CN112381827B (zh) 2021-04-27

Family

ID=74581842

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110051630.1A Active CN112381827B (zh) 2021-01-15 2021-01-15 基于视觉图像的快速高精度缺陷检测方法

Country Status (1)

Country Link
CN (1) CN112381827B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112785648A (zh) * 2021-04-12 2021-05-11 成都新西旺自动化科技有限公司 基于待成像区域的视觉对位方法、装置、设备及存储介质
CN114018935A (zh) * 2021-11-05 2022-02-08 苏州中锐图智能科技有限公司 一种多点快速标定方法
CN114140679A (zh) * 2021-10-26 2022-03-04 中科慧远视觉技术(北京)有限公司 一种缺陷融合方法、装置、识别系统及存储介质
CN115100131A (zh) * 2022-06-17 2022-09-23 成都新西旺自动化科技有限公司 一种高精度视觉对位方法和系统
CN116051552A (zh) * 2023-03-29 2023-05-02 苏州悦顺精密机械有限公司 模具监管方法及系统
CN116818664A (zh) * 2023-06-16 2023-09-29 山东福特尔地毯有限公司 一种基于视觉检测的地毯缺陷检测方法及系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102183524A (zh) * 2011-01-10 2011-09-14 哈尔滨工业大学 用于土木工程结构表观缺陷评定的双ccd检测方法及系统
US20120219177A1 (en) * 2011-02-24 2012-08-30 Nintendo Co., Ltd. Computer-readable storage medium, image processing apparatus, image processing system, and image processing method
CN102662501A (zh) * 2012-03-19 2012-09-12 Tcl集团股份有限公司 光标定位系统、方法、被遥控装置及遥控器
CN103453889A (zh) * 2013-09-17 2013-12-18 深圳市创科自动化控制技术有限公司 Ccd摄像机校准对位方法
CN104385282A (zh) * 2014-08-29 2015-03-04 暨南大学 一种视觉智能数控系统及其视觉计测方法
CN106500592A (zh) * 2016-09-19 2017-03-15 北京科技大学 一种基于机器视觉的轧辊轴线空间位置在线检测方法
CN107656387A (zh) * 2017-09-27 2018-02-02 电子科技大学 一种液晶屏对位偏移缺陷检测方法
CN111474184A (zh) * 2020-04-17 2020-07-31 河海大学常州校区 基于工业机器视觉的aoi字符缺陷检测方法和装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102183524A (zh) * 2011-01-10 2011-09-14 哈尔滨工业大学 用于土木工程结构表观缺陷评定的双ccd检测方法及系统
US20120219177A1 (en) * 2011-02-24 2012-08-30 Nintendo Co., Ltd. Computer-readable storage medium, image processing apparatus, image processing system, and image processing method
CN102662501A (zh) * 2012-03-19 2012-09-12 Tcl集团股份有限公司 光标定位系统、方法、被遥控装置及遥控器
CN103453889A (zh) * 2013-09-17 2013-12-18 深圳市创科自动化控制技术有限公司 Ccd摄像机校准对位方法
CN104385282A (zh) * 2014-08-29 2015-03-04 暨南大学 一种视觉智能数控系统及其视觉计测方法
CN106500592A (zh) * 2016-09-19 2017-03-15 北京科技大学 一种基于机器视觉的轧辊轴线空间位置在线检测方法
CN107656387A (zh) * 2017-09-27 2018-02-02 电子科技大学 一种液晶屏对位偏移缺陷检测方法
CN111474184A (zh) * 2020-04-17 2020-07-31 河海大学常州校区 基于工业机器视觉的aoi字符缺陷检测方法和装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112785648A (zh) * 2021-04-12 2021-05-11 成都新西旺自动化科技有限公司 基于待成像区域的视觉对位方法、装置、设备及存储介质
CN114140679A (zh) * 2021-10-26 2022-03-04 中科慧远视觉技术(北京)有限公司 一种缺陷融合方法、装置、识别系统及存储介质
CN114018935A (zh) * 2021-11-05 2022-02-08 苏州中锐图智能科技有限公司 一种多点快速标定方法
CN115100131A (zh) * 2022-06-17 2022-09-23 成都新西旺自动化科技有限公司 一种高精度视觉对位方法和系统
CN115100131B (zh) * 2022-06-17 2023-04-28 成都新西旺自动化科技有限公司 一种高精度视觉对位方法和系统
CN116051552A (zh) * 2023-03-29 2023-05-02 苏州悦顺精密机械有限公司 模具监管方法及系统
CN116818664A (zh) * 2023-06-16 2023-09-29 山东福特尔地毯有限公司 一种基于视觉检测的地毯缺陷检测方法及系统
CN116818664B (zh) * 2023-06-16 2024-03-12 山东福特尔地毯有限公司 一种基于视觉检测的地毯缺陷检测方法及系统

Also Published As

Publication number Publication date
CN112381827B (zh) 2021-04-27

Similar Documents

Publication Publication Date Title
CN112381827B (zh) 基于视觉图像的快速高精度缺陷检测方法
CN112365502B (zh) 一种基于视觉图像缺陷检测的标对方法
CN111750805B (zh) 一种基于双目相机成像和结构光技术的三维测量装置及测量方法
CN109029299B (zh) 舱段销孔对接转角的双相机测量装置及测量方法
WO2012053521A1 (ja) 光学情報処理装置、光学情報処理方法、光学情報処理システム、光学情報処理プログラム
CN109191527B (zh) 一种基于最小化距离偏差的对位方法及装置
CN112697112B (zh) 一种相机水平面倾斜角的测量方法及装置
CN107804708A (zh) 一种贴装机取料旋转轴的旋转中心定位方法
CN113269762A (zh) 屏幕不良检测方法、系统及计算机存储介质
CN111338290A (zh) 一种基于多目视觉的五轴数控机床多功能检测方法
KR20080016449A (ko) 접합방법 및 접합기판 제조장치
CN106341956B (zh) 一种固定相机校正方法
CN113538583A (zh) 一种工件在机床上位置的精准定位方法及视觉系统
CN110640303A (zh) 高精度视觉定位系统及其定位校准方法
CN211401101U (zh) 高精度3d轮廓建模设备
CN112082511A (zh) 一种基于转台的大物体快速标定测量方法
CN113008138B (zh) 一种基于视觉识别技术的产品加工定位系统及方法
CN114445472B (zh) 基于仿射变换和模板匹配的多步图像配准方法
CN111968182B (zh) 一种双目相机非线性模型参数的标定方法
CN114111578A (zh) 一种大口径元件的位姿自动确定方法
CN113793313A (zh) 一种薄壁球壳类微小构件全表面微坑结构加工高精度对刀方法及装置
CN112991442A (zh) 一种基于图像识别的运动平台定位方法
CN205120108U (zh) 一种基于摄像装置的精度补偿系统
TWI459063B (zh) 多重表面對焦系統及方法
CN112435220B (zh) 一种用于零件检测的自定位多孔特征移动窗口拼接方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant