CN114580522B - 一种基于最小二乘圆拟合法对多光学目标进行识别的方法 - Google Patents
一种基于最小二乘圆拟合法对多光学目标进行识别的方法 Download PDFInfo
- Publication number
- CN114580522B CN114580522B CN202210188812.8A CN202210188812A CN114580522B CN 114580522 B CN114580522 B CN 114580522B CN 202210188812 A CN202210188812 A CN 202210188812A CN 114580522 B CN114580522 B CN 114580522B
- Authority
- CN
- China
- Prior art keywords
- blob
- image
- target
- region
- center
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/20—Image enhancement or restoration by the use of local operators
- G06T5/30—Erosion or dilatation, e.g. thinning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/187—Segmentation; Edge detection involving region growing; involving region merging; involving connected component labelling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20112—Image segmentation details
- G06T2207/20132—Image cropping
Abstract
本发明公开了一种基于最小二乘圆拟合法对多光学目标进行识别的方法,满足了大型激光装置准直流程中光学目标识别处理对于精度和效率的要求,该方法的主要实现步骤如下:步骤1:对采集的原始图像进行二值化;步骤2:数字形态学处理;步骤3:提取BLOB区域特征信息;步骤4:连通域图像裁剪和边缘检测;步骤5:基于最小二乘圆拟合法进行目标识别。
Description
技术领域
本发明属于图像处理技术领域,具体涉及一种基于最小二乘圆拟合法对多光学目标进行识别的方法。
技术背景
大型激光装置光路模拟光准直是三大准直流程(光路自准直、模拟光准直和光路对接准直)之一。由于大型激光装置共包含8路光束,在光路对接准直过程中,虽然每束光路采集的图像不同,但每束光路具备相同的特征,只需要一种图像处理算法就能实现不同光路光学目标的识别。但是,对于三个不同的准直流程来说,每个准直流程所采集的图像特征是完全不同的。相比其他两个准直流程,模拟光准直所处理的准直图像具备不同的特点,其不同图像特征主要表现在:光学目标个数、光学目标纹理、置入特殊识别标志,如十字叉、边框、小球等。这就需要针对不同特征的图像设计不同的目标识别算法,才能分别完成大型激光装置三个不同准直流程的光路自动准直工作。
相比其他两个准直流程,模拟光准直所处理的准直图像具备不同的特点,光学目标主要特点为:
1)准直图像包含2个光学目标,分别是模拟光目标和远场目标;
2)模拟光目标光束质量较好,为实心的圆形光斑,光学目标较小,光斑直径大约40个像素;
3)远场目标光束质量较差,光斑形状及其不规则,主要表现在:光束存在不确定的纹理、边缘曲折、非连续、合计面积较大;
4)远场目标光强分布很不稳定,光斑形状、强弱、位置随着时间而变化;
5)模拟光和远场各自目标的大小、相对位置、强弱不确定,而且会随着光路准直的过程而变化。
基于以上模拟光准直图像的特点,模拟光准直图像处理算法不仅需要确定两个目标的相对位置,而且需要确定哪个目标是远场目标,哪个目标是模拟光目标,也就是说模拟光准直图像处理算法需要实现对两个不同光学目标的识别。
针对以上需求,提出一种对多光学目标进行识别的方法是十分必要的。
发明内容
为了满足大型激光装置准直流程中光学目标识别处理对于精度和效率的要求,本发明提出一种基于最小二乘圆拟合法对多光学目标进行识别的方法。
本发明的具体技术方案如下:
一种基于最小二乘圆拟合法对多光学目标进行识别的方法,包括以下步骤:
步骤1:对采集的原始图像进行二值化;
步骤2:数字形态学处理;
使用数字形态学的膨胀运算对二值化图像进行处理,将远场目标可能出现的多个连通域合并为一个较完整的连通区域;
步骤3:提取BLOB区域特征信息;
BLOB区域特征信息包含面积、中心坐标、BLOB区域所在图像中X方向的区间和轴长、BLOB区域所在图像中Y方向的区间和轴长;
步骤4:BLOB区域图像裁剪和边缘检测;
首先将每个BLOB区域从二值化图像裁剪出来,然后对每一个BLOB区域裁剪图像按照Sobel算法进行边缘检测;
步骤5:基于最小二乘圆拟合法进行目标识别
步骤5.1:统计每个BLOB区域对应的二值化图像灰度值之和sum_all;
步骤5.2:将每个BLOB区域检测到的边缘图像作为输入,使用FitCircle算法,对每个BLOB区域进行圆拟合,并且得到边缘对应的圆心和半径;
步骤5.3:统计每个BLOB区域裁剪图像位于拟合圆内的二值化图像灰度值之和sum_inner;
步骤5.4:计算每个BLOB区域对应的圆拟合系数,具体公式如下:
fit_ratio=sum_inner/sum_all;
步骤5.5:从所有BLOB区域中搜索面积最大的两个BLOB区域,作为远场目标和模拟光目标的候选目标;
步骤5.6:比较两个BLOB区域的圆拟合系数,圆拟合系数较大的作为模拟光目标,较小的作为远场目标。
进一步地,上述步骤1的具体执行过程如下:
设原始图像为f(x,y),将原始图像f(x,y)使用类间最大方差法进行二值化处理,二值化后取值0或255,用公式表示为:
fbin(x,y)=OSTU(f(x,y))
式中,OSTU表示类间最大方差法,(x,y)表示图像坐标。
进一步地,上述步骤3中每个BLOB区域的面积、XY方向轴长、中心坐标用公式表示为:
式中,endsNumber为链码表个数,area表示面积,lenx和leny分别表示X和Y方向轴长,centerx和centery分别表示X和Y方向中心坐标;pPoint[k].x为水平线段表起始位置,pPoint[k+1].x为水平线段表终点位置,point_sum为BLOB区域包含的像素个数。
进一步地,上述步骤4中每个BLOB区域的裁剪图像用公式表示为:
需要满足的条件为:
式中,i表示BLOB区域编号,blobcount表示BLOB区域个数,表示任意一个BLOB区域;
每个BLOB区域边缘检测函数用公式表示为:
进一步地,上述步骤5.2中对每个BLOB区域进行圆拟合的公式具体为:
上式中,a、b代表圆心坐标;r代表半径;
圆拟合函数FitCircle中,拟合出的圆心坐标a、b和半径r的表达式为:
上式中,p,q表示用于将每个BLOB区域边缘的X和Y坐标分别记录的数组;y表示某个像素Y方向坐标值。
本发明的有益效果是:
本发明的方法通过圆拟合的方式,不仅实现了模拟光目标和远场目标的识别,识别误差精度小于3个像素,处理时间小于5秒钟,满足了大型激光装置模拟光准直过程对于精度和效率的要求,为模拟光准直流程中用于光学目标判读提供有效的支撑。
附图说明
图1为本发明方法实施例的流程示意图。
图2为模拟光准直原始图像。
图3为图2进行二值化处理后的图像。
图4a为图3进行一次膨胀运算后的图像。
图4b为图4a中远场目标的放大图像。
图4c为图3进行五次膨胀运算后的图像。
图4d为图4c中远场目标的放大图像。
图5a为BLOB1的剪裁图像;
图5b为BLOB2的剪裁图像;
图5c为BLOB3的剪裁图像;
图5d为BLOB1的边缘检测图像;
图5e为BLOB2的边缘检测图像;
图5f为BLOB3的边缘检测图像;
图6为每个BLOB区域图像裁剪和边缘检测结果的示意图;
图7为8幅图像对应的模拟光目标和远场目标裁剪结果。
具体实施方式
为了满足大型激光装置准直流程中光学目标识别处理对于精度和效率的要求,本发明提出一种基于最小二乘圆拟合法对多光学目标进行识别的方法,目标识别流程如图1所示。
本发明的技术方案如下:
首先,原始图像二值化;
其次,数字形态学处理,使用膨胀运算将远场目标合并成一个较完整的连通区域;
然后,BLOB区域特征信息的提取和统计;
接着,BLOB区域图像裁剪和边缘检测
最后,使用基于最小二乘圆拟合法对两个光学目标进行分类和识别;
本文提出了基于圆拟合的多光学目标识别算法,主要步骤为:1)二值化;2)数字形态学处理;3)BLOB区域特征信息提取;4)BLOB区域图像裁剪和边缘检测;5)基于最小二乘圆拟合法目标识别。光学目标识别方法数据流程如图1所示。
以下结合图1,通过一个实施例来进一步详述本发明。
一、二值化
在模拟光准直流程中,模拟光准直图像是用准直CCD采集获得的,选择一幅CCD采集图像作为原始图像,原始图像如图2所示。使用类间最大方差法对原始图像进行二值化处理,结果如图3所示。由于模拟光束质量较好,模拟光目标只有一个连通域;相反,由于远场光束质量较差、分布极为不均匀,二值化图像包含4个连通域。
假设一路模拟光准直图像(原始图像)为f(x,y),图像尺寸为1600×1200,8位BMP图像,原始图像二值化处理后的二值化图像用公式表示为:
fbin(x,y)=OSTU(f(x,y))(1)
式中,OSTU表示类间最大方差法,(x,y)表示图像坐标。
二、数字形态学处理,BLOB区域合并
(Binary Large Object,BLOB)是指图像中具有相似特征(如纹理、颜色等),而且在空间上是相互连通的像素集合,即连通域。由于模拟光准直图像包含两个光学目标,两个目标具有不同的特点:模拟光目标为光束质量较好的圆形光斑,远场目标为具有不规则纹理、边缘曲折、非连续、面积较大、形态不确定光斑。为了能够将包含4个连通域的远场目标作为同一个光学目标进行识别,需要对二值化图像使用数字形态学的膨胀运算进行处理,使得包含4个连通域的远场目标合并为一个面积更大的、较完整的光学目标。膨胀运算的图像如图4a所示。
相比二值化图像中的光学目标,远场目标由原来的3个BLOB区域被合并成2个BLOB区域,其中一个面积较大,一个面积较小。而模拟光目标由于连通性较好,经过膨胀处理后也是一个完整的BLOB区域,只是面积相比原二值化图像增加了。远场目标1次膨胀运算结果图4(b)所示。经过5次膨胀运算后,远场目标完全被合并成一个完整的连通区域,整幅图像处理结果如图4(c)所示,远场目标5次膨胀运算处理如图4(d)所示。
虽然经过多次膨胀运算可以将远场目标完全合并为一个更完整的目标,但是多次膨胀处理会消耗更多的时间,例如:1次膨胀运算用时0.359秒,经过5次膨胀运算用时2.781秒。为了提高图像识别效率,本实施例选择1次膨胀运算,结果如图4(a)(b)所示。
按照数字形态学理论,膨胀定义为集合运算,A被B膨胀是所有结构单元原点位置组成的集合。A被B膨胀,记为定义为
其中,为空集,B为结构元素。
为了将包含不规则纹理的远场目标合并成一个面积更大的、较完整的目标,选择5*5的结构单元,结构单元如矩阵B所示。
因此,对二值化图像进行膨胀处理,用公式表示为:
三、BLOB区域特征信息提取和统计
BLOB分析是将预处理后的图片通过形态学处理和连通性标记分析,进而提取出物体的特征参数,依据其参数进行目标识别。一幅图像的目标识别函数,用公式表示为:
fblob(x,y)=BlobRecognize(fdelate(x,y)) (4)
式中,BlobRecognize为目标识别函数,需要统计的BLOB区域特征信息主要包括:面积、中心坐标、XY方向轴长等。以本实施例为例,经过膨胀运算处理后,共检测到3个BOLB区域,每个BLOB区域的特征信息统计如表1所示。
表1每个BLOB区域的特征信息统计
表1中,面积是指为每个BLOB区域包含的像素个数;X和Y方向区间表示BLOB区域所在坐标的最小值和最大值;X和Y方向轴长=坐标最大值-最小值+1。以上BLOB区域的特征信息标识了每个BLOB的面积大小、位置坐标,以及每个BLOB所在的矩形区域四个角所包含的坐标信息,为目标识别后续步骤(BLOB区域裁剪和边缘检测)做好准备。
一幅准直图像每个BLOB区域的特征信息存储在链表OneBlob中,BLOB区域和链表相同,用blobcount表示,每个BLOB区域的面积、XY方向轴长、中心坐标用公式表示为:
式中,endsNumber为链码表个数,area表示面积,lenx和leny分别表示X和Y方向轴长,centerx和centery分别表示X和Y方向坐标。pPoint[k].x为水平线段表起始位置,pPoint[k+1].x为水平线段表终点位置,point_sum为BLOB区域包含的像素个数。
一幅准直图像每个BLOB区域的特征信息存储在链表OneBlob中,对应数据结构类型如表2所示。
表2BLOB区域特征信息数据结构表
其中,code存储连码表,链码表code由下标和存放内容构成,表的第一列和第二列分别存放边界起点的坐标X、Y,第三列存放链码的个数N,第四列开始存放第一个边界点的链码值,第二个边界点的链码值……一直到最后的第N个边界点的链码值,用一维整形数组code[]来存储。
四、BLOB区域裁剪和边缘检测
对于每个BLOB区域的裁剪,是以BLOB区域的中心坐标和XY方向轴长为基准进行裁剪的,其中裁剪图像XY方向尺寸为XY方向轴长的两倍。BLOB区域的裁剪尺寸比轴向尺寸大,是因为在二值化处理过程中,二值化图像的每个BLOB区域相比原始灰度图像面积较小,特别是原始图像的边缘过渡区域一般处于BLOB区域边缘的外围。为了在裁剪区域中包含原始图像完整的目标信息,选择的BLOB区域裁剪范围为原有BLOB区域的水平和垂直方向的2倍。本次实验准直图像每个BLOB裁剪区域如图5a至5c所示。
对于每个BLOB区域裁剪如图5a至5c所示,其中图5a、5b、5c分别为每个BLOB的裁剪结果,BLOB1区域裁剪区间为[133:236,87:182],尺寸为104×96,面积1959,中心坐标(185,135);BLOB2区域的裁剪区间为[324:407,412:507],尺寸为84×96,面积674,中心坐标(366,460);BLOB3区域裁剪[359:372,437:448],尺寸为14×12,面积36,中心坐标(366,443)。从裁剪图像可以看出,BLOB1和BLOB2面积最大,为候选光学目标和远场目标,BLOB3面积最小,虽然属于远场目标的一部分,但只能看做一般的离散目标,不参与后续基于圆拟合的目标识别。事实上,在真实自动准直流程和目标识别过程中,由于CCD噪声和存在坏点的原因,离散目标是经常存在的,是需要舍弃掉的。
对每一个BLOB区域裁剪图像进行边缘检测,选择Sobel算子,每个BLOB区域的边缘检测结果分别如图5d,5e,5f所示,对于每个BLOB区域的图像裁剪和边缘检测结果示意如图6所示。虽然Sobel算子,是最常见的边缘检测算子之一,但因为目标识别算法具有处理时间的要求(小于1秒)。为了减少边缘检测的时间,本发明中只是对每个BLOB区域裁剪图像进行边缘检测,实际边缘检测区域大小与原始图像大小之比为(104*96+84*96+14*12)/(1600*1200)=
0.0095,即实际边缘检测区域大小只占原始图像大小的0.95%。通过实验对比,对1600*1200的二值化进行边缘检测,边缘检测用时0.469秒,只对三个BLOB区域进行边缘检测用时0.094秒处理时间减少为原来的20.04%。
对于每个BLOB区域来说,裁剪图像用公式表示为:
需要满足的条件为:
式中,i表示BLOB区域编号,blobcount表示BLOB区域个数,表示第一BLOB区域。
对每一个BLOB区域裁剪图像进行边缘检测,选择Sobel算法,每个BLOB区域边缘检测函数用公式表示为:
五、基于最小二乘圆拟合法进行光学目标分类与识别
使用基于最小二乘圆拟合法目标识别基本思路为:(1)统计每个BLOB区域对应的二值化图像灰度值之和sum_all;(2)将每一个BLOB区域检测到的边缘图像/>作为输入,使用FitCircle算法,拟合每个BLOB区域边缘对应的圆心和半径;(3)统计BLOB区域裁剪图像/>位于拟合圆内的二值化图像灰度值之和sum_inner;(4)计算每个BLOB区域对应的圆拟合系数fit_ratio=sum_inner/sum_all;(5)从所有BLOB区域中搜索面积最大的两个BLOB区域,作为远场目标和模拟光目标的候选目标;(6)比较两个BLOB区域的圆拟合系数,圆拟合系数较大的为远场目标,较小的远场目标。
基于以上思路,将圆拟合目标识别算模型化,目标识别的主要过程为圆拟合算法、圆拟合系数计算、圆拟合系数比较。
1、基于最小二乘圆拟合
对每个BLOB区域经过图像裁剪和边缘检测后,获得了每个BLOB的边缘图像,如图5(d)、(e)、(f)所示。将每个BLOB区域的边缘X和Y坐标分别记录在数组p,q中,数组长度为包含的像素个数,即每个裁剪图像中灰度值为255的像素个数,用N表示。X和Y坐标值是在原始图像(1600*1200)中的绝对坐标,在圆拟合过程中不需要经过坐标变换,简化运算步骤。使用基于最小二乘法的圆拟合方法,获得每个BLOB区域边缘对应的圆心和半径,每个BLOB区域的圆拟合过程和结果如图6。
具体计算过程为:每一个边缘坐标可表示为(pj,qj),其中,p(j)=x,q(j)=y,0<=j<N。圆拟合公式用公式表示为:
式中,x表示某个像素X方向坐标值,y表示某个像素Y方向坐标值。
令圆拟合函数FitCircle中,拟合出的圆心坐标a、b和半径r的表达式为:
图6中展示基于最小二乘圆拟合法的目标识别过程,主要是对两个面积最大的、候选目标的识别,图中第③列为边缘检测结果,第④列为圆拟合结果。在图6的第①行第④列,可以看出模拟光目标的边缘圆环和拟合圆环相似度非常好,两个圆环基本上是重叠在一起的,拟合圆心和半径分别为(184.60,134.63)和25;在第②行第④列,远场目标的边缘曲线和拟合圆环形状是完全不同的,只有重心坐标基本上是重合的,其中拟合圆心和半径分别为(362.30,461.29)和19.25,这因为远场目标是不规则、分布不均匀的光学目标,各个边缘点不符合圆环的坐标分布。
2、拟合系数计算
为了利用圆拟合结果定量描述两个目标的分布特征,将每个BLOB区域的拟合圆环和BLOB区域的二值化图像叠加在一起,如图6第⑤列所示,通过观察,模拟光目标的所有灰度值为255的像素都位于拟合圆环以内,而远场目标的灰度值为255的像素中只有一部分像素位于拟合圆以内。
因此,可以使用每个BLOB区域位于拟合圆内像素个数与BLOB区域像素个数之比作为指标来区分哪个目标是远场目标,哪个目标是模拟光目标。基于此,两个像素比值定义为圆拟合系数,计算每个BLOB区域对应的圆拟合系数fit_ratio=sum_inner/sum_all。则圆拟合系数fit_ratio可以用公式表示为:
式中,为每个BLOB区域灰度为255的二值化图像灰度之和,/>为每个BLOB区域位于拟合圆内的灰度为255的二值化图像灰度之和。BLOB1区域的圆拟合系数=1888/1959=0.9309,BLOB2区域的圆拟合系数=485/674=0.8278。
3、圆拟合系数比较
从所有BLOB区域中搜索面积最大的两个BLOB区域,作为远场目标和模拟光目标的候选目标,用公式表示为:
比较面积最大的两个BLOB区域的圆拟合系数,BLOB1的圆拟合系数fit_ratio1=0.9309,BLOB2的圆拟合系数为fit_ratio2=0.8278,由于fit_ratio1>fit_ratio2,将BLOB1对应的目标识别标志为1,目标识别结果为模拟光目标;将BLOB2对应的目标识别标志为2,目标识别结果为远场目标。
每个BLOB区域的目标识别结果如表3所示。
表3每个BLOB区域的目标识别结果
准直CCD图像经过二值化、膨胀、图像裁剪、边缘检测、圆拟合、圆拟合系数计算、圆拟合系数比较等过程,完成了对模拟光目标和远场目标的识别。
经过步骤1)到步骤5)的处理过程,实现了对一幅准直图像中模拟光目标和远场目标的识别。为了构建8幅准直图像的目标识别函数模型,将8幅图像中的每1幅图像的目标识别结果分别表示为:
将公式14的Basexy、Centerxy和fit_flag的所有元素构建成一个8×5的矩阵,该矩阵不仅包含了8幅准直图像的远场中心和模拟光中心(1-4列),也包含了圆拟合标志(第5列),即目标识别标志。因此,该多目标识别算法是一个基于多光路的、多目标识别算法,适合用于大型激光装置8路模拟光准直流程中的多目标识别。将8路光束模拟光准直图像多目标识别函数用公式表示为
[Basexy,Centerxy,fit_flag]=RecognizeByCircleFit(f) (15)
式中,输入值f为8幅1600*1200图像,输出为远场中心Basexy和模拟光中心Centerxy,圆拟合标志fit_flag,其中Basexy和Centerxy都是8×2矩阵,fit_flag为8维列向量。
图像处理结果分析
经过数据处理过程,完成了对模拟光准直过程中远场目标和模拟光目标的识别,为了验证本文算法在目标识别准确率和识别精度,需要以下几个角度进行分析:1)光学目标中心识别精度分析;2)目标识别算法重复精度分析;3)目标识别算法数据处理性能提升分析;。
目标识别算法对于光学目标中心的识别精度分析
本发明的目标识别算法主要完成实验指标:一是两个光学目标的分类和识别;二是本文算法对于两个光学目标中心的识别精度。
对于两个光学目标中心的识别精度来说,由于本发明目标识别算法对于每个BLOB区域获得了两个中心,即BLOB区域中心和圆拟合中心,这就需要将每个区域的BLOB区域中心和圆拟合中心与真实标定中心进行比较,从而选择最佳中心点。每个BLOB区域的标定中心与模拟光中心和远场目标中心比较结果如表4所示。
表4光学目标中心识别精度分析比较
将本次实验准直图像的模拟光目标和远场目标中心进行标定。标定方法为:对于模拟光目标来说,标定中心X=(上边缘坐标+下边缘坐标)/2,标定中心Y=(左边缘坐标+右边缘坐标)/2,边缘位置为上升沿/下降区间峰值50%位置的坐标值。对于远场目标来说,由于远场目标是分布不均匀的、具有不规则纹理的图像,选择二值化图像对应的连通域内、面积最大的、灰度峰值作为远场目标的标定中心,标定中心X=连通域内灰度峰值的X坐标值,标定中心Y=连通域内灰度峰值的Y坐标值。
根据以上标定方法,每个目标的BLOB区域中心与标定中心误差如表3第4列,每个目标的圆拟合中心与标定中心误差如表3第6列。其中,两个面积的(模拟光目标和远场目标)圆拟合中心与标定中心误差小于3个像素,最大值误差为2.79。两个面积的(模拟光目标和远场目标)BLOB区域中心与标定中心误差不是全部小于3个像素,最大值误差为5.81。由于圆拟合方法获得的模拟光目标和远场目标中心与标定中心的误差小于3个像素,根据准直实验对于误差精度的要求,选择圆拟合方法获得的圆拟合中心作为光路准直过程中两个目标的计算中心。在公式(6)中,Centerxy=模拟光目标的圆拟合中心,Basexy=远场目标标的圆拟合中心。
目标识别算法重复精度分析
为了验证基于圆拟合的多目标识别算法的重复精度,在同一个准直流程中,对不同时间、不同光路的准直图像进行目标识别操作,统计和分析该目标识别算法的识别精度、识别时间、识别准确率等参数,以确定该算法的重复精度。表4是对每1路2幅图像目标识别结果的统计,共16幅图像,其中前8幅图像对应的模拟光目标和远场目标裁剪结果如图7所示。
表5每路2幅图像(共16幅)目标识别结果的统计
从表5可以看出,16幅准直图像的目标识别时间最大1.484秒,最小时间0.656秒,平均准直时间为0.95245,小于1秒。16幅准直图像的目标识别结果全部为成功,大于目标识别准确率大于90%的要求。通过在长时间准直流程中对大量准直图像识别成功率的统计,成功率为98.3%,造成识别失败的是由于模拟光目标特征的改变而造成的。因为准直CCD在光轴上前后移动存在一定定位的误差,导致模拟光聚焦性能不好,会出现模拟光目标不是较为标准的圆形。这就需要结合其他特征综合判断,以提升特殊情况下目标识别的准确率,这也为该目标识别算法的性能提升提出了更高的要求,需要开展更进一步的研究工作。
对于目标识别误差来说,由于本发明将每个BLOB的圆拟合中心作为最终模拟光中心和远场目标的目标识别中心。因此,识别误差只需要将模拟光远场/目标的圆拟合中心与标定中心进行比较,比较结果如表5所示。从表5可以看出,模拟光目标的识别误差最大值,其中X方向为3.20,Y方向-4.00,X方向和Y方向的平均值为-1.8487和-2.604。模拟光目标的识别误差最大值,其中X方向为-3.30,Y方向-5.03,X方向和Y方向的平均值为2.40和-1.63。平均识别误差都小于3个像素,满足了准直流程对于目标识别精度的要求。相比来说,模拟光目标的识别误差较小,而远场目标的识别误差较大,这是因为模拟光目标为较为标准的圆形,而远场目标为不规则的光斑所引起的。
对16幅准直图像进行目标识别日志信息如下:
S11模拟光标定:184 133拟合::184.6 134.63远场目标标定:360 457拟合:362.3461.29
S1 2模拟光标定:261 256拟合:61.38 258.48远场目标标定:484 382拟合:485.34 380.92
S2 1模拟光标定:261 245拟合:57.8 241.94远场目标标定:467 290拟合:468.9294.4
S2 2模拟光标定:480 198拟合:79.01 200远场目标标定:169 276拟合:171.23281.03
S3 1模拟光标定:236 427拟合:34.6 429.63远场目标标定:360 457拟合:362.3461.29
S3 2模拟光标定:260 436拟合:58.6 438.63远场目标标定:360 457拟合:362.3461.29
S4 1模拟光标定:272 462拟合:69.6 464.63远场目标标定:360 457拟合:362.3461.29
S4 2模拟光标定:334 88拟合:32.6 91.63远场目标标定:884 592拟合:886.3596.29
N1 1模拟光标定:442 276拟合:42.01 279远场目标标定:304 184拟合:304.94184.094
N1 2模拟光标定:365 360拟合:66.01 363远场目标标定:170 312拟合:170.18313.29
N2 1模拟光标定:165 74拟合:66.01 78远场目标标定:170 309拟合:170.18308.29
N2 2模拟光标定:258 160拟合:57.01 162远场目标标定:469 308拟合:471.18309.29
N3 1模拟光标定:354 221拟合:53.01 225远场目标标定:146 340拟合:147.23343.03
N3 2模拟光标定:515 438拟合:13.6 441.63远场目标标定:360 458拟合:362.3461.29
N4 1模拟光标定:235 428拟合:34.6 429.6远场目标标定:360 460拟合:362.3461.29
N4 2模拟光标定:261 437拟合:58.6 438.63远场目标标定:359 459拟合:362.3461.29
通过以上分析说明,本发明的目标识别算法不仅实现了模拟光目标和远场目标的识别,而且能够满足不同图像识别对于重复精度的要求,是模拟光准直流程中用于光学目标判读的一个非常有效的方法。
光路自动准直处理时间性能提升分析
模拟光准直流程需要在打靶实验前完成工作,不仅对于目标识别具有准确度和精度的要求,而且对于准直流程具有处理时间的要求。而影响准直流程处理时间的要素主要分为两类:一是目标识别图像处理算法所需时间;二是8路准直流程串行执行所消耗的时间。
对于目标识别算法时间的提升主要采取2个因素:1)数字形态学所节约的时间;2)边沿检测所节约的时间。在本发明的数字形态学算法中,为了尽可能将每个BLOB区域合并成一个完成的连通域,选择了膨胀运算。但是,选择怎样的结构单元需要根据处理图像的特征来确定,本文选择如公式(3)所示的结构单元。此外,对于一个确定的结果单元来说,虽然经过多次膨胀运算可以将远场目标完全合并为一个更完整的目标,但是多次膨胀是消耗耗更多的处理时间为代价的。经过实验分析,1次膨胀运算用时0.359秒,5次膨胀运算用时2.781秒。为了提高图像识别效率,本发明选择1次膨胀运算,结果如图4a和图4b所示。
由于目标识别算法具有处理时间小于1秒的要求,因此通过边缘检测节约处理时间是十分必要的。为了减少边缘检测的时间,主要措施是只对包含BLOB区域的二值化图像对应区域进行边缘检测。以本次实验选择图像为例(表6Img1),只对每个BLOB区域裁剪图像进行边缘检测,实际边缘检测区域大小与原始图像大小之比为(104*96+84*96+14*12)/(1600*1200)=0.0095,即实际边缘检测区域大小只占原始图像大小的0.95%。对1600*1200的二值化进行边缘检测,边缘检测用时0.469秒,只对三个BLOB区域进行边缘检测用时0.094秒处理时间减少为原来的20.04%。
表6目标识别图像处理算法时间提升分析
/>
为了说明通过膨胀次数的选择和边缘检测区域的选择对目标识别算法在时间上的提升作用,选择了5幅不同的准直图像,在膨胀和边缘检测步骤中的时间提升如表6所示。从表6可以看出,如果选择1次膨胀处理,平均膨胀时间0.312秒,提升比例最小73.33%。此外,对每个BLOB区域裁剪图像进行边缘检测,提升后边缘检测平均时间0.113秒,平均提升比例83.10%,整个图像的目标识别时间,包括二值化、数字形态学处理、特征提取、边缘检测、圆拟合,最大提升比例92.61%,总提升比例的平均值为76.75%。对于整个目标识别时间而言,最长时间1.237秒,最小0.656秒,平均目标识别时间0.9722秒,满足了准直流程中对于目标识别时间小于1秒的要求。
综上所述,本发明方法的结果表明:本发明提出的基于圆拟合的多光学目标识别图像处理算法,实现了模拟光准直流程中的模拟光目标和远场目标的识别,识别误差精度小于3个像素,处理时间小于5秒钟,满足了大型激光装置模拟光准直过程对于精度和效率的要求。
Claims (4)
1.一种基于最小二乘圆拟合法对多光学目标进行识别的方法,其特征在于,包括以下步骤:
步骤1:对采集的原始图像进行二值化;
步骤2:数字形态学处理;
使用数字形态学的膨胀运算对二值化图像进行处理,将远场目标可能出现的多个连通域合并为一个较完整的连通区域;
步骤3:提取BLOB区域特征信息;
BLOB区域特征信息包含面积、中心坐标、BLOB区域所在图像中X方向的区间和轴长、BLOB区域所在图像中Y方向的区间和轴长;
步骤4:BLOB区域图像裁剪和边缘检测;
首先将每个BLOB区域从二值化图像裁剪出来,然后对每一个BLOB区域裁剪图像按照Sobel算法进行边缘检测;
每个BLOB区域的裁剪图像用公式表示为:
需要满足的条件为:
式中,i表示BLOB区域编号,blobcount表示BLOB区域个数,表示任意一个BLOB区域;lenx和leny分别表示X和Y方向轴长,centerx和centery分别表示X和Y方向中心坐标;
每个BLOB区域边缘检测函数用公式表示为:
步骤5:基于最小二乘圆拟合法进行目标识别
步骤5.1:统计每个BLOB区域对应的二值化图像灰度值之和sum_all;
步骤5.2:将每个BLOB区域检测到的边缘图像作为输入,使用FitCircle算法,对每个BLOB区域进行圆拟合,并且得到边缘对应的圆心和半径;
步骤5.3:统计每个BLOB区域裁剪图像位于拟合圆内的二值化图像灰度值之和sum_inner;
步骤5.4:计算每个BLOB区域对应的圆拟合系数,具体公式如下:
fit_ratio=sum_inner/sum_all;
步骤5.5:从所有BLOB区域中搜索面积最大的两个BLOB区域,作为远场目标和模拟光目标的候选目标;
步骤5.6:比较两个BLOB区域的圆拟合系数,圆拟合系数较大的作为模拟光目标,较小的作为远场目标。
2.根据权利要求1所述的基于最小二乘圆拟合法对多光学目标进行识别的方法,其特征在于:所述步骤1的具体执行过程如下:
设原始图像为f(x,y),将原始图像f(x,y)使用类间最大方差法进行二值化处理,二值化后取值0或255,用公式表示为:
fbin(x,y)=OSTU(f(x,y))
式中,OSTU表示类间最大方差法,(x,y)表示图像坐标。
3.根据权利要求1所述的基于最小二乘圆拟合法对多光学目标进行识别的方法,其特征在于:所述步骤3中每个BLOB区域的面积、XY方向轴长、中心坐标用公式表示为:
式中,endsNumber为链码表个数,area表示面积,l enx和l eny分别表示X和Y方向轴长,centerx和centery分别表示X和Y方向中心坐标;pPoint[k].x为水平线段表起始位置,pPoint[k+1].x为水平线段表终点位置,point_sum为BLOB区域包含的像素个数。
4.根据权利要求1所述的基于最小二乘圆拟合法对多光学目标进行识别的方法,其特征在于:所述步骤5.2中对每个BLOB区域进行圆拟合的公式具体为:
上式中,a、b代表圆心坐标;r代表半径;
圆拟合函数FitCircle中,拟合出的圆心坐标a、b和半径r的表达式为:
上式中,p,q表示用于将每个BLOB区域边缘的X和Y坐标分别记录的数组。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210188812.8A CN114580522B (zh) | 2022-02-28 | 2022-02-28 | 一种基于最小二乘圆拟合法对多光学目标进行识别的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210188812.8A CN114580522B (zh) | 2022-02-28 | 2022-02-28 | 一种基于最小二乘圆拟合法对多光学目标进行识别的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114580522A CN114580522A (zh) | 2022-06-03 |
CN114580522B true CN114580522B (zh) | 2023-08-11 |
Family
ID=81776999
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210188812.8A Active CN114580522B (zh) | 2022-02-28 | 2022-02-28 | 一种基于最小二乘圆拟合法对多光学目标进行识别的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114580522B (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103605860A (zh) * | 2013-11-28 | 2014-02-26 | 中国科学院软件研究所 | 一种基于等效相位屏法的非理想光源模拟方法 |
CN105139383A (zh) * | 2015-08-11 | 2015-12-09 | 北京理工大学 | 基于定义圆hsv颜色空间的医学图像分割方法及癌细胞识别方法 |
CN105469084A (zh) * | 2015-11-20 | 2016-04-06 | 中国科学院苏州生物医学工程技术研究所 | 一种靶标中心点快速提取方法及系统 |
CN109816627A (zh) * | 2018-12-13 | 2019-05-28 | 中国科学院西安光学精密机械研究所 | 平面玻璃元件油墨区弱小缺陷目标检测方法 |
CN110910318A (zh) * | 2019-10-21 | 2020-03-24 | 中国科学院西安光学精密机械研究所 | 综合诊断光路快速自动准直系统弱对比度纹影小球中心计算方法 |
CN111860616A (zh) * | 2020-06-30 | 2020-10-30 | 中国科学院西安光学精密机械研究所 | 综合诊断系统弱对比度准直图像目标中心通用获取方法 |
CN113537303A (zh) * | 2021-06-24 | 2021-10-22 | 中国科学院西安光学精密机械研究所 | 基于模板匹配的多光学目标快速分类识别方法 |
CN113592955A (zh) * | 2021-07-27 | 2021-11-02 | 中国科学院西安光学精密机械研究所 | 一种基于机器视觉的圆形工件平面坐标高精度定位方法 |
WO2022027949A1 (zh) * | 2020-08-04 | 2022-02-10 | 湖南大学 | 一种基于机器视觉的玻璃瓶底缺陷检测方法及系统 |
-
2022
- 2022-02-28 CN CN202210188812.8A patent/CN114580522B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103605860A (zh) * | 2013-11-28 | 2014-02-26 | 中国科学院软件研究所 | 一种基于等效相位屏法的非理想光源模拟方法 |
CN105139383A (zh) * | 2015-08-11 | 2015-12-09 | 北京理工大学 | 基于定义圆hsv颜色空间的医学图像分割方法及癌细胞识别方法 |
CN105469084A (zh) * | 2015-11-20 | 2016-04-06 | 中国科学院苏州生物医学工程技术研究所 | 一种靶标中心点快速提取方法及系统 |
CN109816627A (zh) * | 2018-12-13 | 2019-05-28 | 中国科学院西安光学精密机械研究所 | 平面玻璃元件油墨区弱小缺陷目标检测方法 |
CN110910318A (zh) * | 2019-10-21 | 2020-03-24 | 中国科学院西安光学精密机械研究所 | 综合诊断光路快速自动准直系统弱对比度纹影小球中心计算方法 |
CN111860616A (zh) * | 2020-06-30 | 2020-10-30 | 中国科学院西安光学精密机械研究所 | 综合诊断系统弱对比度准直图像目标中心通用获取方法 |
WO2022027949A1 (zh) * | 2020-08-04 | 2022-02-10 | 湖南大学 | 一种基于机器视觉的玻璃瓶底缺陷检测方法及系统 |
CN113537303A (zh) * | 2021-06-24 | 2021-10-22 | 中国科学院西安光学精密机械研究所 | 基于模板匹配的多光学目标快速分类识别方法 |
CN113592955A (zh) * | 2021-07-27 | 2021-11-02 | 中国科学院西安光学精密机械研究所 | 一种基于机器视觉的圆形工件平面坐标高精度定位方法 |
Non-Patent Citations (1)
Title |
---|
基于Blob分析的圆形物体检测系统软件的设计和实现;张建冲;万方硕士论文数据库;全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN114580522A (zh) | 2022-06-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7460732B2 (en) | Method and system for object recognition using fractal maps | |
Liu et al. | A vision-based robust grape berry counting algorithm for fast calibration-free bunch weight estimation in the field | |
CN112101159B (zh) | 多时相林业遥感影像变化监测方法 | |
CN107784669A (zh) | 一种光斑提取及其质心确定的方法 | |
JPH03163674A (ja) | ノイズ除去方法とそのための装置 | |
CN108960011B (zh) | 部分遮挡的柑橘果实图像识别方法 | |
CN109902527B (zh) | 一种qr码自动识读方法和装置 | |
US7062079B2 (en) | Method and system for image segmentation | |
CN111724354B (zh) | 一种基于图像处理的多株小麦穗长与小穗数的测量方法 | |
CN115131346B (zh) | 基于人工智能的发酵罐加工工序检测方法及系统 | |
CN108229232A (zh) | 批量扫描二维码的方法和批量扫描二维码的装置 | |
CN114240845A (zh) | 一种应用于切削工件的光切法表面粗糙度测量方法 | |
CN110991437B (zh) | 字符识别方法及其装置、字符识别模型的训练方法及其装置 | |
CN114612444B (zh) | 一种基于渐进式分割网络的细微缺陷分析方法 | |
CN116342525A (zh) | 基于Lenet-5模型的SOP芯片引脚缺陷检测方法及系统 | |
CN115953550A (zh) | 针对线结构光扫描的点云离群点剔除系统及方法 | |
CN114580522B (zh) | 一种基于最小二乘圆拟合法对多光学目标进行识别的方法 | |
CN110619297A (zh) | 一种豆类植物子实图像批量采集识别方法及装置 | |
CN111738936A (zh) | 基于图像处理的多株水稻穗长的测量方法 | |
CN116258844A (zh) | 一种棉花叶片表型性状快速精准鉴定方法 | |
CN112991327B (zh) | 基于机器视觉的钢格网焊接系统、方法和终端设备 | |
EP1415278A2 (en) | tUTOTHRESHOLDING OF NOISY IMAGES | |
CN114550069A (zh) | 一种基于深度学习的仔猪乳头计数方法 | |
CN114580532B (zh) | 基于光学目标一维曲线波峰特征提取的多目标识别方法 | |
CN114494060B (zh) | 一种基于Opencv的菲涅尔透镜中心定位方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |