CN101545774B - 基于单图像的距离测定方法 - Google Patents

基于单图像的距离测定方法 Download PDF

Info

Publication number
CN101545774B
CN101545774B CN2009100504515A CN200910050451A CN101545774B CN 101545774 B CN101545774 B CN 101545774B CN 2009100504515 A CN2009100504515 A CN 2009100504515A CN 200910050451 A CN200910050451 A CN 200910050451A CN 101545774 B CN101545774 B CN 101545774B
Authority
CN
China
Prior art keywords
image
fuzzy edge
edge
circle
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2009100504515A
Other languages
English (en)
Other versions
CN101545774A (zh
Inventor
杨锟诚
赵群飞
冶建科
涂意
韩静亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jiaotong University
Original Assignee
Shanghai Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jiaotong University filed Critical Shanghai Jiaotong University
Priority to CN2009100504515A priority Critical patent/CN101545774B/zh
Publication of CN101545774A publication Critical patent/CN101545774A/zh
Application granted granted Critical
Publication of CN101545774B publication Critical patent/CN101545774B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)

Abstract

一种摄影设备应用软件领域的基于单图像的距离测定方法,本发明使用单幅散焦图像,提取图像中的模糊边缘,测出模糊边缘宽度的近似值和模糊边缘两边的灰度差,利用两者与距离信息、焦距、光圈直径的对应关系训练BP神经网络,然后用训练好的BP神经网络计算距离信息。本发明能应用于焦距、光圈可变的设备上,测距只需要一幅散焦图像,计算量不大,速度较快。

Description

基于单图像的距离测定方法
技术领域
本发明涉及的是一种摄影设备技术领域的距离测定方法,具体是一种基于单图像的距离测定方法。
背景技术
图像中物体的距离信息即所拍摄物体到镜头的距离,在自动聚焦、三维重构等机器视觉相关领域中测定距离信息是非常重要的。距离测定方法一般可分为主动法和被动法。主动法包括红外测距法、结构光法、摩尔条纹法等。被动法包括移动测距法、放缩法、散焦测距法。主动法的优点是精度高,抗干扰能力强,但它通过发出和接收光波进行测距,需要额外的设备,成本较高。而被动法测距精度低于主动法,但可仅通过拍摄图像进行测距,不需要其他设备,成本较低。被动法中移动测距法、放缩法都需要拍摄多幅聚焦清晰的图像才能测距,时间耗费较多,而散焦测距法不需要花时间聚焦。
经对现有技术文献的检索发现,中国专利申请号:99100675.5,公开日为2000年8月16日,发明名称:一种散焦聚距离测定方法。该发明提出一种散焦测距法,利用焦距固定的镜头拍摄散焦图像,得到的图像划分区域,对每个区域进行傅立叶变换,并与多个已转换到频域的散焦函数的反函数相乘,选出高频分量比例最高的结果,其散焦函数所对应的距离即为该区域的距离信息。该方法不足之处在于:1、只适用于焦距固定的镜头,不能应用在焦距可变的摄像设备上。2、对每一个图像区域都需要进行傅立叶变换并与多个已转换到频域的散焦函数的反函数相乘然后挑选高频分量比例最高的结果,计算量较大。
发明内容
本发明的目的在于针对现有技术中的不足,提出一种基于单图像的距离测定方法。该方法能应用于焦距、光圈可变的设备上,测距只需要一幅散焦图像,计算量不大,速度较快。
本发明是通过以下技术方案实现的,本发明使用单幅散焦图像,提取图像中的模糊边缘,测出模糊边缘宽度的近似值和模糊边缘两边的灰度差,利用两者与距离信息、焦距、光圈直径的对应关系训练BP神经网络,然后用训练好的BP神经网络求取距离信息。
本发明包括以下步骤:
第一步,检测图像中模糊边缘的位置。对于散焦图像,在物体边缘处会因为色彩扩散形成一个颜色过渡带,即模糊边缘。图像灰度化后,模糊边缘区域和噪声区域都存在灰度值波动的情况,不同之处在于模糊边缘区域的灰度值沿某个方向波动上升或下降,而噪声区域在局部范围内平均灰度值变化不大。如果使用一般的边缘检测算子,如Sobel算子、LOG算子等,当滤波窗口较小时,会把模糊边缘和噪声区域同时检测出来,当滤波窗口较大时,计算量变得很大且效果也没有较大的改善。
本发明中的模糊边缘检测方法,是指:首先,通过在横向和纵向记录某一点和后面若干点的灰度值上升或下降情况,然后,使用设定的阈值来判断该点是否模糊边缘的点,若是标记为白点,若不是标记为黑点,最后,模糊边缘显示为白点带状区域,能准确地找出模糊边缘并过滤噪声区域。
第二步,使用圆收缩法测量图像中各处模糊边缘宽度的近似值Q和模糊边缘两边的灰度差C,具体是通过行列扫描找出白点带状区域,定位其在每一行/列的两个边界点,把它们的中点作为模糊边缘在该行/列的中心,然后以该中心为圆心两边界点间距离为直径画辅助圆,辅助圆不断收缩,直到内切于白点带状区域,这时辅助圆的直径即该中心处的Q值,两内切点的灰度差即该中心处的C值。
第三步,用格雷码对Q、C、M(M=fD/u,f为焦距,D为光圈直径,u为距离信息)进行编码,以Q、C为输入,M为输出训练BP神经网络。最后,输入需要测距的图像各处模糊边缘的Q、C值,用训练好的BP神经网络得到输出M并计算图像各处的距离信息u。
与现有技术相比,本发明能应用于焦距、光圈可变的设备上,且只需要一幅散焦图像,计算量不大,速度较快。
附图说明
图1为模糊边缘形成的光路图;
图2为模糊边缘检测的流程图;
图3为模糊边缘检测的效果图;
图4为圆收缩法的流程图;
图5为圆收缩法的效果图;
图6为BP神经网络的结构图;
图中:o:物体边缘点,o’:更远处的物体点,f:镜头焦距,u:o的距离信息,D:光圈直径,X:主光轴,L:等效透镜位置,P:清晰像位置,R:模糊边缘宽度,S:像距,S’:CCD到等效透镜的实际距离,Input:输入层Hidden:隐含层,Output:输出层。
具体实施方式
下面结合附图对本发明的实施例作详细说明:本实施例在以本发明技术方案为前提下进行实施,给出了详细的实施方式和过程,但本发明的保护范围不限于下述的实施例。
本实施例使用单幅散焦图像,提取图像中的模糊边缘,测出模糊边缘宽度的近似值和模糊边缘两边的灰度差,利用两者与距离信息、焦距、光圈直径的对应关系训练BP神经网络,然后用训练好的BP神经网络求取距离信息。
本实施例包括以下步骤:
第一步,检测图像中模糊边缘的位置。对于散焦图像,在物体边缘处会因为色彩扩散形成一个颜色过渡带,即模糊边缘。
如图1所示,当图像聚焦的位置不在CCD感光屏上时,物体边缘点o将在感光屏上形成一个直径为R的圆形光斑。R即模糊边缘的宽度。
根据物体成像公式,对于物体点o,有
1 f = 1 u + 1 S - - - ( 1 )
如果物体点o’能在感光屏上成清晰像,有
1 f = 1 u ′ + 1 S ′ - - - ( 2 )
在通常情况下,u’>>f,由(2),得S’≈f。另外,对于o,u<u’,由(1),得S’<S,此时有R>0。
根据三角形相似原理,有
D S = R S - S ′ - - - ( 3 )
把(1)代入(3),转化后有
u = fD S ′ DS ′ - fD + fR - - - ( 4 )
由上面推出的S’≈f,等式(4)化简为
u = fD R - - - ( 5 )
f和D可以直接从摄像设备上读取,故只需要求得模糊边缘的宽度R,即可计算出距离信息u。
获取R必须先检测模糊边缘的位置,为此使用图2所示的方法,具体如下:
1、对要处理的N行M列图像,先逐行扫描再逐列扫描。
2、设第n行/列扫描中,得到已扫描点集合为(X1,X2,X3……Xk),对应的灰度值为(g(X1),g(X2),g(X3)……g(Xk)),找出其中出现次数最多的灰度值g0(若逐行扫描,1≤n≤N,1≤k≤M;若逐列扫描,1≤n≤M,1≤k≤N)。
3、扫描下一点Xk+1,若满足下面两个条件:
(1)|g(Xk+1)-g0|>T1(T1为某阈值);
(2)对Xk+1后面的点Xk+j,j=2,3……m+1,有m1个满足|g(Xk+j)-g0|>T2(T2为某阈值,大于T1。m为某设定值,m1小于但接近m);
则认为Xk+1是模糊边缘中的点,标记该点并进行步骤4。若不能同时满足上面两个条件,则把Xk+1放入已扫描点集合并返回步骤2。
4、清空已扫描点集合,并把Xk+1放入已扫描点集合。
5,判断该行/列扫描是否结束。若第n行/列扫描还没有结束,返回步骤2,否则清空已扫描点集合,然后扫描图像下一行/列(即第n+1行/列)。
6、逐行扫描和逐列扫描都结束后,把标记的点置为白点,没有标记的点置为黑点。此时图中包含白点的带状区域即模糊边缘的位置,如图3所示。
其中T1、T2、m、m1都是可调参数,它们能平衡模糊边缘检测的准确度和检测出的噪声区域的数目。
因为通过上述步骤检测出的白点带状区域代表了模糊边缘,故该带状区域的宽度Q可作为模糊边缘宽度的近似值。令C为模糊边缘两边的灰度差,根据大量实验图片观测,对同一距离的物体,C大的地方,Q较大;C小的地方,Q较小。故Q同时受R、C的影响,可令
Q=F1(R,C)(6)
由(6)反求R,可得
R=F2(Q,C)(7)
(7)中函数F2具体形式待定。
第二步,使用圆收缩法测量图像中各处模糊边缘宽度的近似值Q和模糊边缘两边的灰度差C,具体是通过行列扫描找出白点带状区域,定位其在每一行/列的两个边界点,把它们的中点作为模糊边缘在该行/列的中心,然后以该中心为圆心两边界点间距离为直径画辅助圆,辅助圆不断收缩,直到内切于白点带状区域,这时辅助圆的直径即该中心处的Q值,两内切点的灰度差即该中心处的C值。
使用圆收缩法测量Q、C的流程如图4所示,步骤如下:
l,对标记好模糊边缘位置的图像先逐行扫描再逐列扫描。
2,在某一行/列扫描中判断该点是否为白点:如果遇到白点,则设该白点为Xbeg,,计算其后面N个点中白点的数目,是否大于某阀值N1,若大于某阈值N1,则认为Xbeg是模糊边缘在该行/列的开始处;
3,从Xbeg的下一个点开始继续扫描,如果遇到白点,设该白点为Xend,且该点后面N个点中白点的数目小于某阈值N2,则认为Xend是模糊边缘在该行/列的结束处;否则继续扫描下一点。
4,求出Xbeg与Xend之间的中点Xmid,以Xmid为圆心画辅助圆。开始时令圆的半径为r=(Xend-Xbeg)/2。
5,检测圆上的每个点沿圆法线向外方向上的一段距离内是否有白点,若没有则减小r,并重新画辅助圆。若有,则转入步骤6。
6,重复步骤5直到圆停止收缩,此时辅助圆内切于白点带状区域,令两内切点分别为P1、P2,辅助圆的直径即Xmid处的Q值,P1和P2两处的灰度差即Xmid处的C值,如图5所示。
7,继续扫描Xend以后的点,重复步骤2到6,当该行/列扫描结束后,开始扫描图像下一行/列。
实验证明一个含输入层(Input)、隐含层(Hidden)、输出层(Output)的三层BP神经网络可在任意精度上近似定义任一连续实数函数,故可采用三层BP神经网络来模拟等式(7)中形式未定的函数F2(Q,C)。
把(7)代入(5),得
u = fD F 2 ( Q , C ) - - - ( 8 )
令M=fD/u,此时(8)式化简为
F2(Q,C)=M(9)
由(9)式建立BP神经网络,输入为Q、C,输出为M。
第三步,用格雷码对Q、C、M(M=fD/u,f为焦距,D为光圈直径,u为距离信息)进行编码,训练时,用散焦图像对应的Q、C编码后作为BP神经网络的输入,M编码后作为输出,然后利用反向传播法则修正节点间的权值。训练完成后,输入需要测距的散焦图像各处模糊边缘的Q、C编码后的值,通过BP神经网络求得输出M并解码,再由M=fD/u即可求出图像各处的距离信息u。
为了提高BP神经网络模拟的精确度,对Q、C、M进行了编码,让这三个量都分别对应若干个神经元节点,如图6所示。这使得在训练过程中即使个别节点间的权值训练有误也不会对训练效果有太大影响。
本实施例编码用的是格雷码。使用格雷码而不是二进制码是因为若十进制的值产生1的误差,对应的二进制码可能有很多位都发生变化,而对应的格雷码只有1位发生变化。使用格雷码能大大增强训练的稳定性。
编码时,先把十进制的Q、C、M转成二进制数,再把二进制数转成格雷码。解码时,先把格雷码转成二进制数,再把二进制数转成十进制数。

Claims (1)

1.一种基于单图像的距离测定方法,其特征在于,使用单幅散焦图像,提取图像中的模糊边缘,测出模糊边缘宽度的近似值和模糊边缘两边的灰度差,利用两者与距离信息、焦距、光圈直径的对应关系训练BP神经网络,然后用训练好的BP神经网络求取距离信息,所述方法包括以下步骤:
第一步,检测图像中的模糊边缘;
第二步,使用圆收缩法测量图像中各处模糊边缘宽度的近似值Q和模糊边缘两边的灰度差C;
第三步,用格雷码对Q、C、M进行编码,其中:M=fD/u,f为焦距,D为光圈直径,u为距离信息,以Q、C为输入,M为输出训练BP神经网络,输入需要测距的图像各处模糊边缘的Q、C值,用训练好的BP神经网络得到输出M并计算图像各处的距离信息u;
所述的圆收缩法,是指:通过行列扫描找出白点带状区域,定位该白点带状区域在每一行/列的两个边界点,把它们的中点作为模糊边缘在该行/列的中心,然后以该中心为圆心两边界点间距离为直径画辅助圆,辅助圆不断收缩,直到内切于白点带状区域,这时辅助圆的直径即该中心处的Q值,两内切点的灰度差即该中心处的C值;
所述的检测图像中的模糊边缘,是指:首先,通过在横向和纵向记录某一点和后面若干点的灰度值上升或下降情况;然后,使用设定的阈值来判断该点是否模糊边缘的点,若是则标记为白点,若不是则标记为黑点;最后,模糊边缘显示为白点带状区域。
CN2009100504515A 2009-04-30 2009-04-30 基于单图像的距离测定方法 Expired - Fee Related CN101545774B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2009100504515A CN101545774B (zh) 2009-04-30 2009-04-30 基于单图像的距离测定方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2009100504515A CN101545774B (zh) 2009-04-30 2009-04-30 基于单图像的距离测定方法

Publications (2)

Publication Number Publication Date
CN101545774A CN101545774A (zh) 2009-09-30
CN101545774B true CN101545774B (zh) 2011-04-20

Family

ID=41193044

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009100504515A Expired - Fee Related CN101545774B (zh) 2009-04-30 2009-04-30 基于单图像的距离测定方法

Country Status (1)

Country Link
CN (1) CN101545774B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013030895A (ja) * 2011-07-27 2013-02-07 Sony Corp 信号処理装置、撮像装置、信号処理方法およびプログラム
CN102324104B (zh) * 2011-06-03 2013-07-24 清华大学 一种基于单幅图像散焦信息的空间结构建模方法及系统
CN103363928B (zh) * 2012-03-28 2016-01-20 北大方正集团有限公司 用于检测pcb板件平整性的方法和装置
JP7051740B2 (ja) * 2019-03-11 2022-04-11 株式会社東芝 画像処理装置、測距装置、方法及びプログラム
CN110470219A (zh) * 2019-08-16 2019-11-19 福建农林大学 基于边缘频谱保留的散焦图像测距方法及装置
JP7170609B2 (ja) * 2019-09-12 2022-11-14 株式会社東芝 画像処理装置、測距装置、方法及びプログラム
CN110929756B (zh) * 2019-10-23 2022-09-06 广物智钢数据服务(广州)有限公司 基于深度学习的钢材尺寸和数量的识别方法、智能设备和存储介质

Also Published As

Publication number Publication date
CN101545774A (zh) 2009-09-30

Similar Documents

Publication Publication Date Title
CN101545774B (zh) 基于单图像的距离测定方法
CN106973206B (zh) 摄像模组摄像处理方法、装置和终端设备
CN111083365B (zh) 一种最佳焦平面位置快速检测方法及装置
CN102422629B (zh) 照相机、包括照相机的系统、操作照相机的方法和用于对记录的图像去卷积的方法
CN101943839B (zh) 一体化的自动聚焦摄像机装置的自动聚焦方法
CN102844705B (zh) 焦点调节装置和焦点调节方法
CN105652429B (zh) 一种基于机器学习的显微镜细胞载玻片扫描自动聚焦方法
KR101417169B1 (ko) 초점 조력 시스템 및 방법
CN106127775A (zh) 图像清晰度评价方法及装置
CN106341596A (zh) 一种聚焦方法和装置
CN110441329B (zh) 一种基于深度学习的激光焊接缺陷识别方法、装置及设备
CN106447640B (zh) 基于字典学习、旋转引导滤波的多聚焦图像融合方法及装置
CN105049723B (zh) 基于离焦量差异定性分析的自动对焦方法
CN107995424A (zh) 基于深度图的光场全聚焦图像生成方法
CN101660946A (zh) 热像仪自动聚焦方法及装置
US20100254579A1 (en) Apparatus and method for determining the acceptability of a fingerprint image to be analyzed
CN103973957A (zh) 双目3d相机自动调焦系统及方法
CN109064505A (zh) 一种基于滑动窗口张量提取的深度估计方法
US8433187B2 (en) Distance estimation systems and method based on a two-state auto-focus lens
CN107390356A (zh) 基于激光光斑图像自动聚焦的方法
CN107133982A (zh) 深度图构建方法、装置及拍摄设备、终端设备
CN107680152A (zh) 基于图像处理的目标物表面形貌测量方法和装置
JP2018071979A (ja) 距離検出装置および距離検出方法
Chan et al. Enhancement of phase detection for autofocus
CN106878617B (zh) 一种对焦方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110420

Termination date: 20140430