CN105976356A - 一种基于相关熵准则的鲁棒数字图像相关方法 - Google Patents

一种基于相关熵准则的鲁棒数字图像相关方法 Download PDF

Info

Publication number
CN105976356A
CN105976356A CN201610265930.9A CN201610265930A CN105976356A CN 105976356 A CN105976356 A CN 105976356A CN 201610265930 A CN201610265930 A CN 201610265930A CN 105976356 A CN105976356 A CN 105976356A
Authority
CN
China
Prior art keywords
district
sub
deformation
delta
sigma
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610265930.9A
Other languages
English (en)
Other versions
CN105976356B (zh
Inventor
沈峘
张佩泽
沈翔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Aeronautics and Astronautics
Original Assignee
Nanjing University of Aeronautics and Astronautics
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Aeronautics and Astronautics filed Critical Nanjing University of Aeronautics and Astronautics
Priority to CN201610265930.9A priority Critical patent/CN105976356B/zh
Publication of CN105976356A publication Critical patent/CN105976356A/zh
Application granted granted Critical
Publication of CN105976356B publication Critical patent/CN105976356B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30164Workpiece; Machine component
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30204Marker
    • G06T2207/30208Marker matrix

Landscapes

  • Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于相关熵准则的鲁棒数字图像相关法,采用基于相关熵准则的相关函数C*评价变形前后图像子区的相似程度,相关函数表达为本发明的基于相关熵准则的鲁棒数字图像相关法可以很好地处理非连续变形,并且较传统数字图像相关法而言计算精度更高,抗噪性能更强。

Description

一种基于相关熵准则的鲁棒数字图像相关方法
技术领域
本发明属于非接触测量领域,涉及一种基于相关熵准则的鲁棒数字图像相关方法。
背景技术
数字图像相关技术(Digital Image Correlation,DIC)将材料表面变形测量问题转化为材料变形前后图像特征的区域匹配问题,从而获得变形后的全场位移数据,由于DIC具有非接触、测量精度高、全场变形测量便捷、实验台架搭建容易等特点,在力学相关领域的应用越发广泛。影响数字图像相关技术测量精度的因素很多,如散斑特征、图像子区大小、形函数阶次、收敛条件、相机噪声、光源波动、镜头畸变,或是变形状态等,已有一些学者对这些影响因素进行了研究并给出一些指导应用的结论和原则。
对于实际应用过程中的问题,如试件发生断裂变形分析、试件边界变形分析、含孔试件孔洞边缘大变形分析等,传统DIC是一种基于均方误差准则的“全局”算法,该“全局”的含义是整个参考图像子区中所有的计算点以同样的权重和地位参加DIC的搜索匹配运算,对于这些非连续变形问题,显然参考图像子区中存在不符合连续变形模式约束的点,这些“坏点”的参与无疑会干扰位移向量匹配运动的方向和步长。噪声在实际应用中是不可避免的,而由于均方误差准则“全局”的特性,被噪声污染的点也以同样的地位参与了匹配运算,使得传统DIC方法的抗噪性能不强。
因此,需要一种新的数字图像相关方法以解决上述问题。
发明内容
本发明的目的是针对在现有技术中的数字图像相关方法的不足,提供一种基于相关熵准则的鲁棒数字图像相关方法。
为实现上述发明目的,本发明的基于相关熵准则的鲁棒数字图像相关方法可采用如下技术方案:
一种基于相关熵准则的鲁棒数字图像相关方法,采用基于相关熵准则的相关函数评价变形前后图像子区的相似程度,所述基于相关熵准则的相关函数通过下式表达:
C * ( P ) = 1 c Σ x = - M M Σ y = - M M exp [ - ( f ( x , y ) - g ( x , y ; P ) ) 2 / 2 σ 2 ]
其中,c为归一化常数,M为参考图像子区的半径,exp()为高斯核函数,σ为高斯核函数的带宽,(x,y)为参考图像子区中像素点的坐标,f(x,y)为参考图像子区中像素点(x,y)的灰度值,g(x,y)为目标图像子区中与像素点(x,y)相对应的像素点的灰度值,P为变形参数向量。
更进一步的,包括以下步骤:
(1)、采集被测件表面变形前和变形后的散斑图像,变形前的散斑图像称为参考图像,变形后的散斑图像称为目标图像;
(2)、在参考图像上划分感兴趣的网格点;
(3)、在参考图像上,建立以步骤(2)的网格点为中心的第一矩形区域,称为参考图像子区,第一矩形区域的长度为L,宽度为W;
(4)、在目标图像上,建立以步骤(2)的网格点为中心的第二矩形区域,第二矩形区域的长度为k*L,宽度为k*W,其中,k>1,称为目标图像子区,目标图像子区包含变形后的参考图像子区;
(5)、获得参考图像子区中整像素位置的灰度值和目标图像子区中整像素位置以及亚像素位置的灰度值;
(6)、定义形函数:设定参考图像子区中心点为(x0,y0),参考图像子区中的任意点为(x,y),变形后目标图像子区中与点(x,y)对应的点为(x',y'),存在一组映射关系ξ使得下式成立:
ξ(x,y)→(x',y')
f(x,y)=g(x',y')
其中,f(x,y)表示变形前像素点(x,y)处的图像灰度值,g(x',y')表示变形后对应像素点(x',y')处的图像灰度值;
(7)、将步骤(6)的形函数参数化,并用变形参数向量P表示,定义基于相关熵准则的相关函数:
C * ( P ) = 1 c Σ x = - M M Σ y = - M M exp [ - ( f ( x , y ) - g ( x , y ; P ) ) 2 / 2 σ 2 ]
其中,c为归一化常数,M为参考图像子区的半径,exp()为高斯核函数,σ为高斯核函数的带宽,(x,y)为参考图像子区中像素点的坐标,f(x,y)为参考图像子区中像素点(x,y)的灰度值,g(x,y)为目标图像子区中与像素点(x,y)相对应的像素点的灰度值,P为变形参数向量;
(8)、利用灰度直方图计算得到高斯核函数的带宽σ;
(9)、将步骤(8)得到的高斯核函数的带宽σ代入所述基于相关熵准则的相关函数,计算得到令基于相关熵准则的相关函数C*(P)最大时的变形参数向量P。
更进一步的,步骤(1)中被测件表面的散斑为自然纹理特征的散斑或人工制备的散斑。
更进一步的,步骤(5)中通过插值方法获得目标图像子区亚像素位置的灰度值。
更进一步的,所述插值方法为最近邻插值法、双线性插值法或双三次样条插值法。
更进一步的,步骤(6)中的映射关系ξ为一阶形函数或二阶形函数,
其中,一阶形函数通过下式表达:
x ′ = x + P 1 + P 3 Δ x + P 5 Δ y y ′ = y + P 2 + P 4 Δ x + P 6 Δ y
式中,变形参数向量P=(P1,P2,P3,P4,P5,P6)T=(u,v,ux,vx,uy,vy)T,u和v分别为x和y方向的位移,(ux,vx,uy,vy)为位移梯度;Δx=x-x0,Δy=y-y0,(x0,y0)为参考图像子区的中心位置;
二阶形函数通过下式表达:
x ′ = x + P 1 + P 3 Δ x + P 5 Δ y + P 7 Δx 2 + P 9 Δ x Δ y + P 11 Δy 2 y ′ = y + P 2 + P 4 Δ x + P 6 Δ y + P 8 Δx 2 + P 10 Δ x Δ y + P 12 Δy 2
式中,变形参数向量
P=(P1,P2,P3,P4,P5,P6,P7,P8,P9,P10,P11,P12)T=(u,v,ux,vx,uy,vy,uxx,vxx,uxy,vxy,uyy,vyy)T,u和v分别为x和y方向的位移,(ux,vx,uy,vy)为位移梯度,(uxx,vxx,uxy,vxy,uyy,vyy)为位移场的二阶偏导数项;Δx=x-x0,Δy=y-y0,(x0,y0)为参考图像子区的中心位置。
更进一步的,步骤(8)中统计得到参考图像子区与目标图像子区中对应区域的灰度差的直方图后,利用下式计算得到带宽:
σ=sum(P*I)
式中,P和I分别表示子区灰度差值落入直方图不同亮度区间的概率和每个亮度区间的中心亮度值。鲁棒数字图像相关方法中,带宽参数σ的选择很关键,一方面σ控制着被剔除点的数目,另一方面σ关系到算法迭代的收敛性。由于实际实验时“坏点”的数目和位置,以及其引起的灰度差的幅值未知,因此无法根据先验知识确定带宽参数的值。带宽参数σ是用来评估子区中各点灰度差的有效与否,因此可以根据统计规律利用灰度直方图来统计各个灰度差级别出现的概率。
更进一步的,步骤(9)中利用Newton-Raphson方法计算得到令基于相关熵准则的相关函数C*(P)最大时的变形参数向量P,包括以下步骤:
a、构建迭代等式:
P = P 0 - ▿ C * ( P 0 ) ▿ ▿ C * ( P 0 )
式中,P0为变形参数初值,是相关函数C*的一阶梯度和Hessian矩阵,其中的公式如下:
▿ C * = ( ∂ C * ∂ P i ) i = 1 , ... , 6 = - 2 c Σ x = - M M Σ y = - M M [ f ( x , y ) - g ( x , y ; P ) ] ∂ g ( x , y ; P ) ∂ P i exp ( - ( f ( x , y ) - g ( x , y ; P ) ) 2 / 2 σ 2 ) i = 1 , ... , 6
▿ ▿ C * = ( ∂ 2 C * ∂ P i ∂ P j ) i = 1 , ... , 6 j = 1 , ... , 6 ≈ 2 c Σ x = - M M Σ y = - M M ∂ g ( x , y ; P ) ∂ P i ∂ g ( x , y ; P ) ∂ P j exp ( - ( f ( x , y ) - g ( x , y ; P ) ) 2 / 2 σ 2 ) i = 1 , ... , 6 j = 1 , ... , 6
式中,Pi和Pj分别为变形参数向量P的第i个和第j个元素;
b、利用迭代等式计算得到令相关函数C*(P)最大时的变形参数向量P。
有益效果:本发明的基于相关熵准则的鲁棒数字图像相关方法相对于传统的数字图像相关方法可以更好地处理非连续变形,并且较传统数字图像相关法而言计算精度更高,抗噪性能更强。
附图说明
图1本发明的基于相关熵准则的鲁棒数字图像相关方法的计算流程图;
图2变形前后图像子区亮度差分布直方图;
图3模拟相机噪声情况下,SDIC和RDIC计算变形的位移误差对比图;
图4模拟相机噪声情况下,SDIC和RDIC计算变形的位移标准差对比图;
图5试件非连续变形示意图;
图6 SDIC计算得到非连续变形位移场;
图7 RDIC计算得到非连续变形位移场;
图8 SDIC计算得到非连续变形应变场;
图9 RDIC计算得到非连续变形应变场;
图10 SDIC计算得到含孔试件孔洞周围位移场;
图11 RDIC计算得到含孔试件孔洞周围位移场;
图12含孔试件孔洞边缘子区有无效点标记示意图;
图13人工加权值后,SDIC计算得到含孔试件孔洞周围位移场;
图14碳纤维实验件断裂图;
图15 SDIC计算裂缝附近位移场(左侧裂缝附近);
图16 RDIC计算裂缝附近位移场(左侧裂缝附近);
图17 SDIC计算裂缝附近位移场(右侧裂缝附近);
图18 RDIC计算裂缝附近位移场(右侧裂缝附近)。
具体实施方式
下面结合附图和具体实施例,进一步阐明本发明,应理解这些实施例仅用于说明本发明而不用于限制本发明的范围,在阅读了本发明之后,本领域技术人员对本发明的各种等价形式的修改均落于本申请所附权利要求所限定的范围。
传统数字图像相关法(Standard Digital Image Correlation,SDIC)
数字图像相关法以试件表面变形前后的图像作为形变的载体,通过匹配变形前后图像获得试件表面变形的位移场。以变形前图像作为参考图像并在其中划分感兴趣点,以感兴趣点为中心划分参考图像子区,将该参考图像子区在变形后图像中移动并搜索,最终找到最为相似的区域,该区域的中心即为感兴趣点在变形后图像中的位置,从而获得变形位移场。子区匹配搜索最相似区域的过程可以通过优化某相似目标函数来实现。传统DIC是基于均方误差准则构建的二次函数:
C ( P ) = 1 c Σ x = - M M Σ y = - M M [ f ( x , y ) - g ( x , y ; P ) ] 2 - - - ( 1 )
式中,变形参数向量P=(u,v,ux,vx,uy,vy)T,u,v分别为x和y方向的位移,其余为位移梯度;c为归一化系数常量;M代表参考图像子区半径;(x,y)为参考图像子区中像素点的坐标,f(x,y)为参考图像子区中像素点(x,y)的灰度值,g(x,y,P)为目标图像子区中与像素点(x,y)相对应的像素点的灰度值。变形后图像中对应位置点的坐标(x',y')可由(x,y)和变形参数向量P表示为
{ x ′ = x + P 1 + P 3 ( x - x 0 ) + P 5 ( y - y 0 ) y ′ = y + P 2 + P 4 ( x - x 0 ) + P 6 ( y - y 0 ) - - - ( 2 )
式(2)中,(x0,y0)为参考图像子区的中心位置。(x',y')可能为亚像素位置点,因此,可借助插值法如双三次样条插值法,获得亚像素位置对应的灰度值g(x',y')。
由式(1)可知,相似函数实际上是P=(u,v,ux,vx,uy,vy)T的函数,其解可以利用非线性优化方法获得,如Newton-Raphson法。可以获得参数P的迭代算式如下:
P = P 0 - ▿ C ( P 0 ) ▿ ▿ C ( P 0 ) - - - ( 3 )
式中,P0为变形参数初值估计,P为迭代值,为式(1)的一阶梯度向量,是式(1)的二阶偏导矩阵,又称作Hessian矩阵,分别表示为
▿ C = ( ∂ C ∂ P i ) i = 1 , ... , 6 = - 2 c { Σ x = - M M Σ y = - M M [ f ( x , y ) - g ( x , y ; P ) ] ∂ g ( x , y ; P ) ∂ P i } i = 1 , ... , 6 - - - ( 4 )
▿ ▿ C = ( ∂ 2 C ∂ P i ∂ P j ) i = 1 , ... , 6 j = 1 , ... , 6 ≈ 2 c { Σ x = - M M Σ y = - M M ∂ g ( x , y ; P ) ∂ P i ∂ g ( x , y ; P ) ∂ P j } i = 1 , ... , 6 j = 1 , ... , 6 - - - ( 5 )
根据式(4)-(5)可以看出,参考图像子区中所有的点均以同等的权重参与运算,因此,该算法本身不具备区分“坏点”的功能,因此传统DIC的鲁棒性较差,即易受到“噪声”点的干扰从而影响DIC匹配的精度。
本发明的鲁棒数字图像相关法(Robust Digital Image Correlation,RDIC)
传统DIC中基于均方误差准则(Mean Square Error,MSE)构建相似函数,MSE是一种基于二阶统计量的全局相关准则,其全局特性要求待计算的图像子区具有连续性,否则将会对变形参数的计算带来影响。此外,图像采集系统中的随机噪声也会对子区之间的精确匹配造成干扰。
本文基于信息论中的信息熵和核方法构建随机变量X和Y之间的相似函数:
Vσ(X,Y)=E[kσ(X,Y)] (6)
式中,kσ(.)为核函数,σ为核函数的带宽,E表示kσ(X,Y)的期望,对于有限的N个数据相关熵可表示为
V ^ N , σ = 1 N Σ i = 1 N k σ ( x i - y i ) - - - ( 7 )
选取常用高斯核,将输入空间通过核函数映射到高维空间,再结合带宽σ的选择控制去除信号中的大偏差值,从而减小野值点的影响。
基于局部相关熵准则建立鲁棒相关函数:
C * ( P ) = 1 c Σ x = - M M Σ y = - M M exp [ - ( f ( x , y ) - g ( x , y ; P ) ) 2 / 2 σ 2 ] - - - ( 8 )
其中,c为归一化常数,M为子区半径大小,exp()为高斯核函数,σ为高斯核函数的带宽,(x,y)为参考图像子区中像素点的坐标,f(x,y)为参考图像子区中像素点(x,y)的灰度值,g(x,y)为目标图像子区中与像素点(x,y)相对应的像素点的灰度值,P为变形参数向量。
最大化该相关熵准则,建立NR迭代式求得最优变形参数P:
P = P 0 - ▿ C * ( P 0 ) ▿ ▿ C * ( P 0 ) - - - ( 9 )
其中,式(8)的一阶偏导和Hessian矩阵为
▿ C * = ( ∂ C * ∂ P i ) i = 1 , ... , 6 = - 2 c Σ x = - M M Σ y = - M M [ f ( x , y ) - g ( x , y ; P ) ] ∂ g ( x , y ; P ) ∂ P i exp ( - ( f ( x , y ) - g ( x , y ; P ) ) 2 / 2 σ 2 ) i = 1 , ... , 6 - - - ( 10 )
▿ ▿ C * = ( ∂ 2 C * ∂ P i ∂ P j ) i = 1 , ... , 6 j = 1 , ... , 6 ≈ 2 c Σ x = - M M Σ y = - M M ∂ g ( x , y ; P ) ∂ P i ∂ g ( x , y ; P ) ∂ P j exp ( - ( f ( x , y ) - g ( x , y ; P ) ) 2 / 2 σ 2 ) i = 1 , ... , 6 j = 1 , ... , 6 - - - ( 11 )
若令K=exp(-(f(x,y)-g(x,y;P))2/2σ2),式(10)和式(11)表示为
▿ C * = ( ∂ C * ∂ P i ) i = 1 , ... , 6 = - 2 c Σ x = - M M Σ y = - M M { K [ f ( x , y ) - g ( x , y ; P ) ] ∂ g ( x , y ; P ) ∂ P i } i = 1 , ... , 6 - - - ( 12 )
▿ ▿ C * = ( ∂ 2 C * ∂ P i ∂ P j ) i = 1 , ... , 6 j = 1 , ... , 6 ≈ 2 c Σ x = - M M Σ y = - M M { K ∂ g ( x , y ; P ) ∂ P i ∂ g ( x , y ; P ) ∂ P j } i = 1 , ... , 6 j = 1 , ... , 6 - - - ( 13 )
与式(4)和式(5)相比,相当于在子区亮度差上添加了权值K。权值的大小与对应位置点上的灰度差以及带宽的大小有关。对于子区中出现的野值点,这些点对应的灰度差较大,超出了带宽允许的通过范围,则这些野值点对应的灰度差被赋予很小的权值,降低其对迭代过程的影响。该做法从原理上保证了算法的抗噪性和处理试件不连续变形的可行性。
鲁棒数字图像相关方法中,带宽参数σ的选择很关键,一方面σ控制着被剔除点的数目,另一方面σ关系到算法迭代的收敛性。由于实际实验时“坏点”的数目和位置,以及其引起的灰度差的幅值未知,因此无法根据先验知识确定带宽参数的值。带宽参数σ是用来评估子区中各点灰度差的有效与否,因此可以根据统计规律利用灰度直方图来统计各个灰度差级别出现的概率。图像的灰度范围在0-255,所以子区中各点的灰度差也在0-255的范围内,灰度差的统计直方图如图2所示。带宽参数σ可由式(13)计算:
σ=sum(P*I) (13)
式中,P和I分别表示亮度差值落入不同亮度范围的概率和每个亮度区间的中心亮度值。从图2中可以看到,灰度差主要集中在50以内,而对于不含噪声的图像,初始迭代时灰度差均在20以内,图中灰度差的分布也说明即使受噪声干扰,子区中大多数点的灰度差集中在较小的偏差值内,只有少数点受到较大随机噪声的干扰,σ控制将这些受噪声干扰严重的点剔除掉,而剩余的点可保证迭代方向的正确性和迭代过程的收敛性。
仿真分析实例1:模拟相机噪声
为评估鲁棒数字图像相关法的抗噪性能,在模拟散斑图中添加噪声来进行分析。考虑到高斯和椒盐噪声为图像系统中最为常见的两种噪声源,特在此仿真生成的散斑图中添加1%等级的高斯噪声和密度d=0.001的椒盐噪声。散斑图的大小为500×500pixels,散斑颗粒半径为3,散斑颗粒数目为4000。对于变形后图像,沿y方向生成sin变形图像,满足v=Asin(2πy/T),A=1,T=200。则分别利用传统数字图像相关方法(SDIC)和鲁棒数字图像相关方法(RDIC)来计算分析这组受噪声污染的sin变形散斑图,计算位移场的误差和标准差分别如图3和4所示。
从图3可以看到,RDIC计算得到的位移场的误差较SDIC小,前者最大误差在0.04像素,而后者最大误差在0.08像素,并且SDIC计算的位移场误差较为波动,这直接反应在位移场标准差SDIC的较大。可见,RDIC对于图像噪声的抗干扰能力较强,相比于SDIC,RDIC具有更高的计算精度和计算稳定性。
仿真分析实例2:模拟非连续变形
仿真生成的散斑图大小为800×400像素,变形分为两部分,上半部分沿X向发生2000微应变的均匀变形,下半部分X向发生600微应变的均匀变形,变形示意图如图5所示。分别利用SDIC和RDIC计算这组不连续变形散斑图,计算得到的位移场和应变场分布分别如图6-7以及图8-9所示。
对于散斑图中均匀变形部分,RDIC计算的位移场与SDIC计算效果类似,表明两种方法均可以较好地处理连续变形情况。对于由2000微应变到600微应变不连续变形的过渡带,RDIC的过渡带较窄,即RDIC具有区分不同变形状态的能力,而SDIC由于“全局”计算的限制,过渡带中不同变形的存在使得匹配过程出现偏差,因而过渡带较宽。对于从位移场计算得到的应变场,RDIC的应变场计算误差较小。可见,RDIC计算得到的较高精度的位移场为后续应变场准确的计算提供保障。对于不连续变形问题,RDIC具有自动识别子区中不满足连续变形约束的点的能力,从而降低其对匹配过程的干扰,提高不连续变形边界点的位移场计算精度。
实验分析实例1:含孔试件孔洞边缘变形分析
本组实验中对碳纤维含孔试件进行单向拉伸实验,通过在碳纤维试件的表面喷制人工散斑构造随机特征,实验过程中,以0.3mm/min位移加载方式对试件进行y向拉伸,同时以5帧/s的速度采集试件变形过程中的图片,采集图片结束后,分别以SDIC和RDIC对碳纤维试件空洞周围区域进行计算分析,计算得到的位移场如图10和11所示。
计算出位移场后发现,SDIC计算得到的结果在孔洞左下部分出现计算错误点,而由RDIC计算得到的结果过度平滑,分布规律符合实际孔洞变形的规律。经分析,位于孔洞边缘的点进行匹配计算时,子区中包含了非试件上的孔洞中的背景点,这部分点已不满足连续变形的约束条件,因此影响了计算结果。而RDIC由于其自身具有去除这部分点的能力,所以孔洞中的点不会对计算结果产生影响。
为验证该思路,现通过人为赋权值的方式,将SDIC子区中落在孔洞中的点赋予0权值,而其他试件上的点赋予1权值,人为进行背景点剔除的操作,该操作过程可由图12表示。对同样的数据点利用加权SDIC的方式计算,结果如图13所示,可以明显地看到,原来计算错误的点得到了纠正,证明了确实是由于孔洞中的点导致了计算结果的偏差。加权SDIC的计算结果与RDIC的计算结果分布规律完全吻合,这也证明了RDIC具有自动区分“坏点”并添加权值将坏点自动去除的能力。
实验分析实例2:含孔试件发生拉伸断裂后裂纹周围变形分析
碳纤维含孔试件在y向拉伸过程中发生断裂,实际采集得到的断裂效果如图14所示。碳纤维材料属于脆性材料,因此在拉伸一段时间后,碳纤维材料直接沿着孔洞截面最小受应力最大的方向发生断裂,左侧未完全裂开,裸露出里面的纤维结构,而右侧则完全断开,并且裂纹附近有少许区域表面喷制的散斑脱落。分别以RDIC和SDIC处理这种实际发生的不连续变形裂纹周围的变形状态,结果如图15-18所示。
图中叉叉表示计算迭代不收敛的点,箭头的指向和长短分别表示y向位移场的方向和大小。计算时左右两侧共计算7455点,SDIC有1043个点不收敛,RDIC有744个点不收敛。不收敛的点基本集中在完全断裂区域或由于撕裂而裸露碳纤维试件内部纤维结构上,这些区域由于严重“变形”已不具备对应可匹配的特征,所以迭代不收敛是合理的。但是相比于SDIC,RDIC可以较好的处理试件断裂边缘的点,或是由于撕裂导致表面部分小区域表面散斑脱落的点,以及圆孔边缘的点。只要子区中存在足够的匹配特征,无论子区中是否存在“坏点”,RDIC都可以将这些坏点剔除,然后利用剩下的优质特征点进行匹配搜索,从而实现正确的定位,获得准确的位移场结果分布。

Claims (8)

1.一种基于相关熵准则的鲁棒数字图像相关法,其特征在于:采用基于相关熵准则的相关函数评价变形前后图像子区的相似程度,所述基于相关熵准则的相关函数通过下式表达:
C * ( P ) = 1 c Σ x = - M M Σ y = - M M exp [ - ( f ( x , y ) - g ( x , y ; P ) ) 2 / 2 σ 2 ]
其中,c为归一化常数,M为参考图像子区的半径,exp()为高斯核函数,σ为高斯核函数的带宽,(x,y)为参考图像子区中像素点的坐标,f(x,y)为参考图像子区中像素点(x,y)的灰度值,g(x,y)为目标图像子区中与像素点(x,y)相对应的像素点的灰度值,P为变形参数向量。
2.如权利要求1所述的基于相关熵准则的鲁棒数字图像相关方法,其特征在于:包括以下步骤:
(1)、采集被测件表面变形前和变形后的散斑图像,变形前的散斑图像称为参考图像,变形后的散斑图像称为目标图像;
(2)、在参考图像上划分感兴趣的网格点;
(3)、在参考图像上,建立以步骤(2)的网格点为中心的第一矩形区域,称为参考图像子区,第一矩形区域的长度为L,宽度为W;
(4)、在目标图像上,建立以步骤(2)的网格点为中心的第二矩形区域,第二矩形区域的长度为k*L,宽度为k*W,其中,k>1,称为目标图像子区,目标图像子区包含变形后的参考图像子区;
(5)、获得参考图像子区中整像素位置的灰度值和目标图像子区中整像素位置以及亚像素位置的灰度值;
(6)、定义形函数:设定参考图像子区中心点为(x0,y0),参考图像子区中的任意点为(x,y),变形后目标图像子区中与点(x,y)对应的点为(x',y'),存在一组映射关系ξ使得下式成立:
ξ(x,y)→(x',y')
f(x,y)=g(x',y')
其中,f(x,y)表示变形前像素点(x,y)处的图像灰度值,g(x',y')表示变形后对应像素点(x',y')处的图像灰度值;
(7)、将步骤(6)的形函数参数化,并用变形参数向量P表示,定义基于相关熵准则的相关函数:
C * ( P ) = 1 c Σ x = - M M Σ y = - M M exp [ - ( f ( x , y ) - g ( x , y ; P ) ) 2 / 2 σ 2 ]
其中,c为归一化常数,M为参考图像子区的半径,exp()为高斯核函数,σ为高斯核函数的带宽,(x,y)为参考图像子区中像素点的坐标,f(x,y)为参考图像子区中像素点(x,y)的灰度值,g(x,y)为目标图像子区中与像素点(x,y)相对应的像素点的灰度值,P为变形参数向量;
(8)、利用灰度直方图计算得到高斯核函数的带宽σ;
(9)、将步骤(8)得到的高斯核函数的带宽σ代入所述基于相关熵准则的相关函数,计算得到令基于相关熵准则的相关函数C*(P)最大时的变形参数向量P。
3.如权利要求2所述的基于相关熵准则的鲁棒数字图像相关法,其特征在于:步骤(1)中被测件表面的散斑为自然纹理特征的散斑或人工制备的散斑。
4.如权利要求2所述的基于相关熵准则的鲁棒数字图像相关法,其特征在于:步骤(5)中通过插值方法获得目标图像子区亚像素位置的灰度值。
5.如权利要求4所述的基于相关熵准则的鲁棒数字图像相关法,其特征在于:所述插值方法为最近邻插值法、双线性插值法或双三次样条插值法。
6.如权利要求2所述的基于相关熵准则的鲁棒数字图像相关法,其特征在于:步骤(6)中的映射关系ξ为一阶形函数或二阶形函数,
其中,一阶形函数通过下式表达:
x ′ = x + P 1 + P 3 Δ x + P 5 Δ y y ′ = y + P 2 + P 4 Δ x + P 6 Δ y
式中,变形参数向量P=(P1,P2,P3,P4,P5,P6)T=(u,v,ux,vx,uy,vy)T,u和v分别为x和y方向的位移,(ux,vx,uy,vy)为位移梯度;Δx=x-x0,Δy=y-y0,(x0,y0)为参考图像子区的中心位置;
二阶形函数通过下式表达:
x ′ = x + P 1 + P 3 Δ x + P 5 Δ y + P 7 Δ x 2 + P 9 Δ x Δ y + P 11 Δ y 2 y ′ = y + P 2 + P 4 Δ x + P 6 Δ y + P 8 Δ x 2 + P 10 Δ x Δ y + P 12 Δ y 2
式中,变形参数向量
P=(P1,P2,P3,P4,P5,P6,P7,P8,P9,P10,P11,P12)T=(u,v,ux,vx,uy,vy,uxx,vxx,uxy,vxy,uyy,vyy)T,u和v分别为x和y方向的位移,(ux,vx,uy,vy)为位移梯度,(uxx,vxx,uxy,vxy,uyy,vyy)为位移场二阶偏导数项;Δx=x-x0,Δy=y-y0,(x0,y0)为参考图像子区中心位置。
7.如权利要求2所述的基于相关熵准则的鲁棒数字图像相关法,其特征在于:步骤(8)中统计得到参考图像子区与目标图像子区中对应区域的灰度差的直方图后,利用下式计算得到带宽:
σ=sum(P*I)
式中,P和I分别表示子区灰度差值落入直方图不同亮度区间的概率和每个亮度区间的中心亮度值。
8.如权利要求2所述的基于相关熵准则的鲁棒数字图像相关法,其特征在于:步骤(9)中利用Newton-Raphson方法计算得到令基于相关熵准则的相关函数C*(P)最大时的变形参数向量P,包括以下步骤:
a、构建迭代等式:
P = P 0 - ▿ C * ( P 0 ) ▿ ▿ C * ( P 0 )
式中,P0为变形参数初值,是相关函数C*的一阶梯度和Hessian矩阵,其中的公式如下:
▿ C * = ( ∂ C * ∂ P i ) i = 1 , ... , 6 = - 2 c Σ x = - M M Σ y = - M M [ f ( x , y ) - g ( x , y ; P ) ] ∂ g ( x , y ; P ) ∂ P i exp ( - ( f ( x , y ) - g ( x , y ; P ) ) 2 / 2 σ 2 ) i = 1 , ... , 6
▿ ▿ C * = ( ∂ 2 C * ∂ P i ∂ P j ) i = 1 , ... , 6 j = 1 , ... , 6 ≈ 2 c Σ x = - M M Σ y = - M M ∂ g ( x , y ; P ) ∂ P i ∂ g ( x , y ; P ) ∂ P j exp ( - ( f ( x , y ) - g ( x , y ; P ) ) 2 / 2 σ 2 ) i = 1 , ... , 6 j = 1 , ... , 6
式中,Pi和Pj分别为变形参数向量P的第i个和第j个元素;
b、利用迭代等式计算得到令函数C*(P)最大的变形参数向量P。
CN201610265930.9A 2016-04-26 2016-04-26 一种基于相关熵准则的鲁棒数字图像相关方法 Expired - Fee Related CN105976356B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610265930.9A CN105976356B (zh) 2016-04-26 2016-04-26 一种基于相关熵准则的鲁棒数字图像相关方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610265930.9A CN105976356B (zh) 2016-04-26 2016-04-26 一种基于相关熵准则的鲁棒数字图像相关方法

Publications (2)

Publication Number Publication Date
CN105976356A true CN105976356A (zh) 2016-09-28
CN105976356B CN105976356B (zh) 2019-10-22

Family

ID=56993167

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610265930.9A Expired - Fee Related CN105976356B (zh) 2016-04-26 2016-04-26 一种基于相关熵准则的鲁棒数字图像相关方法

Country Status (1)

Country Link
CN (1) CN105976356B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107103293A (zh) * 2017-04-13 2017-08-29 西安交通大学 一种基于相关熵的注视点估计方法
CN109272491A (zh) * 2018-08-23 2019-01-25 中国飞机强度研究所 试验环境下裂纹尖端的识别方法、装置及设备
CN109493329A (zh) * 2018-11-02 2019-03-19 河北工业大学 基于局部网格加密的数字图像相关方法
CN110188759A (zh) * 2019-06-21 2019-08-30 江苏开放大学(江苏城市职业学院) 一种在数字图像相关法中应变场子区动态选择方法
CN112465755A (zh) * 2020-11-18 2021-03-09 熵智科技(深圳)有限公司 一种初始子区细分方法、装置、计算机设备及存储介质
CN112927280A (zh) * 2021-03-11 2021-06-08 北京的卢深视科技有限公司 深度图像的获取方法及装置、单目散斑结构光系统
CN115511881A (zh) * 2022-11-08 2022-12-23 南京航空航天大学 一种数字图像相关和数字体相关中的相关性调谐法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006329628A (ja) * 2005-05-23 2006-12-07 Hitachi Zosen Corp 構造物における変形量計測方法
CN102221341A (zh) * 2011-03-16 2011-10-19 中国人民解放军国防科学技术大学 基于随机并行梯度下降优化技术的快速数字图像相关测量方法
CN104657999A (zh) * 2015-03-06 2015-05-27 南京航空航天大学 一种基于核函数的数字图像相关方法
CN105157594A (zh) * 2015-09-05 2015-12-16 辽宁工程技术大学 一种基于半子区分割法的数字图像相关方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006329628A (ja) * 2005-05-23 2006-12-07 Hitachi Zosen Corp 構造物における変形量計測方法
CN102221341A (zh) * 2011-03-16 2011-10-19 中国人民解放军国防科学技术大学 基于随机并行梯度下降优化技术的快速数字图像相关测量方法
CN104657999A (zh) * 2015-03-06 2015-05-27 南京航空航天大学 一种基于核函数的数字图像相关方法
CN105157594A (zh) * 2015-09-05 2015-12-16 辽宁工程技术大学 一种基于半子区分割法的数字图像相关方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
G. VENDROUX 等: "《Submicron Deformation Field Measurements: Part 2. Improved Digital Image Correlation》", 《EXPERIMENTAL MECHANICS》 *
沈峘 等: "《数字图像相关方法的大变形初值估计》", 《重庆理工大学学报(自然科学版)》 *

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107103293A (zh) * 2017-04-13 2017-08-29 西安交通大学 一种基于相关熵的注视点估计方法
CN107103293B (zh) * 2017-04-13 2019-01-29 西安交通大学 一种基于相关熵的注视点估计方法
CN109272491A (zh) * 2018-08-23 2019-01-25 中国飞机强度研究所 试验环境下裂纹尖端的识别方法、装置及设备
CN109493329A (zh) * 2018-11-02 2019-03-19 河北工业大学 基于局部网格加密的数字图像相关方法
CN110188759A (zh) * 2019-06-21 2019-08-30 江苏开放大学(江苏城市职业学院) 一种在数字图像相关法中应变场子区动态选择方法
CN112465755A (zh) * 2020-11-18 2021-03-09 熵智科技(深圳)有限公司 一种初始子区细分方法、装置、计算机设备及存储介质
CN112465755B (zh) * 2020-11-18 2021-09-10 熵智科技(深圳)有限公司 一种初始子区细分方法、装置、计算机设备及存储介质
CN112927280A (zh) * 2021-03-11 2021-06-08 北京的卢深视科技有限公司 深度图像的获取方法及装置、单目散斑结构光系统
CN112927280B (zh) * 2021-03-11 2022-02-11 北京的卢深视科技有限公司 深度图像的获取方法及装置、单目散斑结构光系统
CN115511881A (zh) * 2022-11-08 2022-12-23 南京航空航天大学 一种数字图像相关和数字体相关中的相关性调谐法

Also Published As

Publication number Publication date
CN105976356B (zh) 2019-10-22

Similar Documents

Publication Publication Date Title
CN105976356A (zh) 一种基于相关熵准则的鲁棒数字图像相关方法
CN104981105B (zh) 一种快速精确获得元件中心和偏转角度的检测及纠偏方法
CN104657955B (zh) 基于核函数的数字图像相关方法的位移场迭代平滑方法
CN105930858A (zh) 一种带旋转、缩放的快速高精度几何模板匹配方法
CN103353988B (zh) 异源sar景象特征匹配算法性能评估方法
CN104657999A (zh) 一种基于核函数的数字图像相关方法
CN104700368B (zh) 基于核函数的数字图像相关方法的位移场自适应平滑方法
CN102914302B (zh) 一种无人机着陆视觉导航合作目标鲁棒检测方法
CN109215015A (zh) 一种基于卷积神经网络的蚕茧在线视觉检测方法
CN105469398A (zh) 一种基于反向映射法的变形散斑生成方法
IL299069B1 (en) 3D structure or metrology inspection using deep learning
CN109458994A (zh) 一种空间非合作目标激光点云icp位姿匹配正确性判别方法及系统
CN105205816A (zh) 多特征加权融合的高分辨率sar影像建筑区提取方法
CN109002792A (zh) 基于分层多模型度量学习的sar图像变化检测方法
CN113496480A (zh) 一种焊缝图像缺陷的检测方法
CN116645392A (zh) 一种基于关键点权重的空间目标相对位姿迭代估计方法及系统
CN112083413B (zh) 一种雷达波隐身武器装备维护测试方法
Xie et al. Detection algorithm for bearing roller end surface defects based on improved YOLOv5n and image fusion
CN110059292A (zh) 一种空间目标姿态识别方法
CN116051808A (zh) 一种基于YOLOv5的轻量化零件识别定位方法
Lu et al. A new grinding surface roughness measurement method based on image quality algorithm and BP neural network
CN104616272A (zh) 一种适用于数字图像相关的位移场迭代平滑方法
CN104616271B (zh) 一种适用于数字图像相关的位移场自适应平滑方法
CN103295015B (zh) 部分遮挡目标的局部特征点提取方法
Kang et al. Efficient Object Detection with Deformable Convolution for Optical Remote Sensing Imagery

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20191022

Termination date: 20210426