CN108182707B - 采集不完整条件下的棋盘格标定模板及其自动识别方法 - Google Patents
采集不完整条件下的棋盘格标定模板及其自动识别方法 Download PDFInfo
- Publication number
- CN108182707B CN108182707B CN201711395342.8A CN201711395342A CN108182707B CN 108182707 B CN108182707 B CN 108182707B CN 201711395342 A CN201711395342 A CN 201711395342A CN 108182707 B CN108182707 B CN 108182707B
- Authority
- CN
- China
- Prior art keywords
- template
- chessboard
- checkerboard
- calibration
- adopting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30204—Marker
- G06T2207/30208—Marker matrix
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Image Analysis (AREA)
Abstract
本发明属于图像处理与模式识别领域,具体涉及到三维测量领域中相机标定的相关技术。采集不完整条件下的棋盘格标定模板,包括在棋盘格层中部的一个白色单元方格内设有黑色圆形标记。采集不完整条件下的棋盘格标定模板的自动识别方法,包括如下步骤:设计一个带有中心圆的棋盘格标定模板;提出一个基于Delaunay三角剖分的棋盘格模板自动识别方法。由于采用上述技术方案,在标定板不过度倾斜条件下,相对于光照与颜色变化、标定板的姿态变化以及相机镜头的畸变能够自动精确地识别棋盘格标定模板。
Description
技术领域
本发明属于图像处理与模式识别领域,具体涉及到三维测量领域中相机标定的相关技术。
背景技术
用于相机标定的棋盘格模板识别技术是基于提取的棋盘格角点识别棋盘格中黑白相间的矩阵网格,并匹配矩阵网格中行和列的序号与角点的像素坐标。目前比较成熟的标定模板识别技术的特点是:要么需要检测完整的标定模板,要么需要手动辅助完成模板识别。由于受相机镜头的畸变影响以及相机标定时需要采集多个不同姿态的标定模板图像,因此在相机采集的标定模板不完整的条件下自动识别标定模板是比较困难的问题。而且,随着人工智能技术的快速发展三维测量操作过程的简化与智能化已势在必行。
常用的标定模板识别方法有:基于双三角的单应变换方法,基于边的聚类方法,基于方格中心点的属性关系图方法,手动标定的Matlab方法,基于棋盘格角点的Delaunay三角剖分方法,OpenCV的特定标定板模式识别方法。然而,为了取得一定的标定精度并适应于重构不同类型的物件,标定时需要调整物件至相机的距离以及两相机之间的距离,从而经常无法采集完整的标定板图像。对比起来,Delaunay三角剖分能克服这个问题,其特点在于对于弱光照与镜头存在严重畸变的情况也能取得稳定的性能。
采用Delaunay三角剖分确定棋盘格的黑白相间的矩阵网格的缺点有以下两个方面:(a)会显著受到检测的棋盘格角点的完整性与正确性影响,(b)在标定模板采集不完整的条件下需要指定一个唯一的参考点使得所有识别的标定模板具有相同的角点像素坐标与矩阵网格中行列序号的对应关系,(c)标定板过渡倾斜会影响棋盘格模板识别的正确性。上述问题使得至今在商业应用中很难找到能够自动识别棋盘格标定模板的技术。
因此,在三维测量领域亟需一个在采集不完整条件下自动识别棋盘格模板的技术。
发明内容
本发明的目的在于,提供一种采集不完整条件下的棋盘格标定模板,解决以上技术问题。
本发明的另一目的在于,提供一种采集不完整条件下的棋盘格标定模板自动识别方法,解决以上技术问题。
本发明所解决的技术问题可以采用以下技术方案来实现:
采集不完整条件下的棋盘格标定模板,包括基板,所述基板表面设有棋盘格层,所述棋盘格层由尺寸相同的黑白方格阵列形成,在所述棋盘格层中部的一个白色单元方格内设有黑色圆形标记。
在所述白色单元方格相邻的四个白色单元方格内各设有字符标记。
所述黑色圆形标记、所述字符标记均采用激光雕刻技术雕刻在所述棋盘格层上。
所述基板的背面设有均匀的背光装置,以提高图像采集的对比度。
采集不完整条件下的棋盘格标定模板自动识别方法,包括如下步骤:
步骤a,设计一个带有中心圆的棋盘格标定模板;
步骤b,提出一个基于Delaunay三角剖分的棋盘格模板自动识别方法:
首先,根据二值化图像与Canny边图像自动计算棋盘格单元方格的大小,并依此剔除重复的角点与非X-型的角点;
其次,采用Delaunay三角剖分连接棋盘格角点;
再次,采用拓扑滤波去除非法的三角形;
然后,采用拓扑游走建立物点坐标与像点坐标的对应关系;
最后,采用单应变换补齐缺失角点的像点坐标,并第二次采用基于Delaunay三角剖分的方法识别棋盘格模板。
有益效果:由于采用上述技术方案,在标定板不过度倾斜条件下,相对于光照与颜色变化、标定板的姿态变化以及相机镜头的畸变能够自动精确地识别棋盘格标定模板。
附图说明
图1(a)为现有的棋盘格标定模板的一种结构示意图;(b)为本发明一种棋盘格标定模板的结构示意图;(c)为图(b)的部分放大示意图;
图2为本发明的一种算法流程图;
图3(a)为棋盘格标定模板图像的二值化图像;(b)为Canny边图像;
图4(a)为原有的Harris角点示意图;(b)为剔除干扰点后的Harris角点示意图;
图5为位于图像中间区域的Delaunay三角剖分结果示意图;
图6为棋盘格标定模板单元方格的属性示意图;
图7为本发明最终识别的棋盘格标定模板;
图8是图7的局部放大演示示意图;
图9为27组棋盘格图像的平均正确识别率示意图;
图10(a)是极端光照条件下的棋盘格图像;(b)是图(a)相应的二值化图像示意图;(c)是图(a)相应的Canny边图像示意图。
具体实施方式
为了使本发明实现的技术手段、创作特征、达成目的与功效易于明白了解,下面结合具体图示进一步阐述本发明。
参照图1,采集不完整条件下的棋盘格标定模板,包括基板,基板表面设有棋盘格层,棋盘格层由尺寸相同的黑白方格阵列形成,在棋盘格层中部的一个白色单元方格内采用激光雕刻技术雕刻有黑色圆形标记1。在白色单元方格相邻的四个白色单元方格内各雕刻有字符标记2。字符标记2可以根据需要设置,比如采用阿拉伯字符标记,罗马字符标记等。基板的背面设有均匀的背光装置,以提高图像采集的对比度。图1(a)是传统的棋盘格标定模板,图1(b)是本发明设计的棋盘格标定模板,图1(c)是图1(b)中间区域的局部放大图。从图中可见,字符标记2采用左侧的H字符标记和右侧的X字符标记。
参照图2,采集不完整条件下的棋盘格标定模板自动识别方法,包括如下步骤:
第一步,设计一个如图1(b)所示的带有中心圆的棋盘格标定模板,在中间白色的单元方格内用激光雕刻有一个黑色的小圆,为了便于调节相机采集图像的清晰度,如图1(c)所示,在中心圆周围雕刻有四个阿拉伯字符,并在棋盘格标定模板的背面打上均匀的背光以提高图像采集的对比度。
第二步,采用Canny算法提取棋盘格标定模板的Canny边,采用大津法对棋盘格标定模板图像进行二值化,并根据二值化图像与Canny边图像估计棋盘格单元方格的大小。图3(a)与(b)分别为棋盘格标定模板图像的二值化图像与Canny边图像。通过对比图(a)与(b)可以发现,在估计单元方格的大小时,同时采用二值化图像与Canny边图像能够提高估计的精确性,因为不仅Canny边有助于更精确地划定不同单元格之间的界限,而且在Canny边断开的地方二值化图像能够有效的划定。
第三步,根据估计的棋盘格单元方格大小,从检测的Harris角点中剔除重复的角点与非X型角点。图4(a)与(b)分别显示原有的Harris角点与剔除干扰点后的Harris角点。在图4(a)中存在重复的角点与非X型角点,在图4(b)中这些干扰点都已被剔除。由图4可知,如果不剔除这些干扰点将导致Delaunay三角剖分错误。
第四步,采用Watson的Delaunay三角剖分算法连接棋盘格角点,图5显示了位于图像中间区域的Delaunay三角剖分结果,结果中存在错误的三角形,如果不剔除,那么在随后的过程中必然会导致棋盘格标定模板识别错误。
第五步,在采用拓扑滤波剔除非法的三角形时,考虑了棋盘格标定模板的如下属性,以图6为例,棋盘格中的单元方格具有以下属性:除d点外棋盘格上的其它点与三角形Δabc的外接圆相距甚远,三角形Δadc具有类似的情况;由于位于同一单元方格的像素点的色彩基本相同,因此可以根据以上属性剔除非法的三角形。
第六步,在拓扑游走建立物点坐标与像点坐标的对应关系时,根据三角形边长判断与像点对应的物点坐标,具体过程如下:计算三角形的平均边长,假如三角形的一条边连接的两顶点的像点x坐标或y坐标之差的绝对值大于平均边长的x分量或y分量,则相应x坐标或y坐标才改变1(加1或减1)。
第七步,采用基于Ransac算法的单应变换补齐缺失角点的像点坐标,并重复第四步到第六步的过程再次识别棋盘格标定模板。具体实现方法为:根据匹配的像点坐标与物点坐标采用计算Ransac算法单应变换矩阵,并根据单应变换矩阵的逆矩阵由物点坐标反过来计算像点坐标,从而能够补齐棋盘格矩阵网格中没有检测到的角点像点坐标。如图7所示的是最终识别的棋盘格标定模板,图8是图7的局部放大演示示意图。
图9显示了包含486幅棋盘格图像的27组数据的平均正确识别率性能曲线图。在正确识别率性能曲线图中,发生误识别的都是图10(a)所示的极端光照情况。在图10(a)显示的极端光照条件下的棋盘格图像中,在中间暗的区域中棋盘格角点信息几乎完全丢失,从而影响图像二值化图10(b)。但是,由于Canny边是以图像的局部梯度信息为基础,因此并不影响Canny边检测如图10(c)的结果。可见,本发明对于处于不同距离、具有不同姿态、且受不同光照变化影响的棋盘格模板图像都能稳定精确的进行识别。
以上显示和描述了本发明的基本原理和主要特征和本发明的优点。本行业的技术人员应该了解,本发明不受上述实施例的限制,上述实施例和说明书中描述的只是说明本发明的原理,在不脱离本发明精神和范围的前提下,本发明还会有各种变化和改进,这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等效物界定。
Claims (1)
1.一种采集不完整条件下的棋盘格标定模板的自动识别方法,所述棋盘格标定模板包括基板,所述基板表面设有棋盘格层,所述棋盘格层由尺寸相同的黑白方格阵列形成,在所述棋盘格层中部的一个白色单元方格内设有黑色圆形标记,其特征在于,包括如下步骤:
步骤a,设计一个带有中心圆的棋盘格标定模板;
步骤b,提出一个基于Delaunay三角剖分的棋盘格模板自动识别方法:
首先,根据二值化图像与Canny边图像自动计算棋盘格单元方格的大小,并依此剔除重复的角点与非X-型的角点;
其次,采用Delaunay 三角剖分连接棋盘格角点;
再次,采用拓扑滤波去除非法的三角形;
然后,采用拓扑游走建立物点坐标与像点坐标的对应关系;
最后,采用单应变换补齐缺失角点的像点坐标,并第二次采用基于Delaunay 三角剖分的方法识别棋盘格模板。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711395342.8A CN108182707B (zh) | 2017-12-21 | 2017-12-21 | 采集不完整条件下的棋盘格标定模板及其自动识别方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711395342.8A CN108182707B (zh) | 2017-12-21 | 2017-12-21 | 采集不完整条件下的棋盘格标定模板及其自动识别方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108182707A CN108182707A (zh) | 2018-06-19 |
CN108182707B true CN108182707B (zh) | 2021-08-10 |
Family
ID=62546928
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711395342.8A Active CN108182707B (zh) | 2017-12-21 | 2017-12-21 | 采集不完整条件下的棋盘格标定模板及其自动识别方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108182707B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109374636B (zh) * | 2018-11-29 | 2021-05-25 | 成都铁安科技有限责任公司 | 一种受电弓图像采集系统、检测系统及检测方法 |
CN112037284B (zh) * | 2020-08-13 | 2024-02-27 | 重庆守愚科技有限公司 | 棋盘格格子中心点检测方法、摄像机畸变标定方法及系统 |
CN112923918A (zh) * | 2021-01-26 | 2021-06-08 | 南京理工大学 | 一种基于改进棋盘格靶标的视觉位姿测量方法 |
CN117934623A (zh) * | 2023-12-14 | 2024-04-26 | 浙江华诺康科技有限公司 | 一种多目设备的标定方法、装置和计算机设备 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101477687A (zh) * | 2009-01-22 | 2009-07-08 | 上海交通大学 | 复杂背景下的棋盘格角点检测方法 |
CN202057299U (zh) * | 2010-12-14 | 2011-11-30 | 李军 | 可自动建立图像坐标系的图像标定模板 |
CN102779340A (zh) * | 2012-06-12 | 2012-11-14 | 华中科技大学 | 一种基于Delaunay三角剖分的特征点坐标自动对应方法 |
CN104091324A (zh) * | 2014-06-16 | 2014-10-08 | 华南理工大学 | 一种基于连通域分割的棋盘格图像快速特征匹配算法 |
CN104240236A (zh) * | 2014-08-26 | 2014-12-24 | 中山大学 | 一种鱼眼镜头标定后鱼眼图像校正的方法 |
CN104867160A (zh) * | 2015-06-17 | 2015-08-26 | 合肥工业大学 | 一种用于摄像机内外参数标定的方向性标定靶标 |
CN104933717A (zh) * | 2015-06-17 | 2015-09-23 | 合肥工业大学 | 基于方向性标定靶标的摄像机内外参数自动标定方法 |
CN106097367A (zh) * | 2016-06-21 | 2016-11-09 | 北京格灵深瞳信息技术有限公司 | 一种双目立体相机的标定方法及装置 |
CN106910222A (zh) * | 2017-02-15 | 2017-06-30 | 中国科学院半导体研究所 | 基于双目立体视觉的人脸三维重建方法 |
-
2017
- 2017-12-21 CN CN201711395342.8A patent/CN108182707B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101477687A (zh) * | 2009-01-22 | 2009-07-08 | 上海交通大学 | 复杂背景下的棋盘格角点检测方法 |
CN202057299U (zh) * | 2010-12-14 | 2011-11-30 | 李军 | 可自动建立图像坐标系的图像标定模板 |
CN102779340A (zh) * | 2012-06-12 | 2012-11-14 | 华中科技大学 | 一种基于Delaunay三角剖分的特征点坐标自动对应方法 |
CN104091324A (zh) * | 2014-06-16 | 2014-10-08 | 华南理工大学 | 一种基于连通域分割的棋盘格图像快速特征匹配算法 |
CN104240236A (zh) * | 2014-08-26 | 2014-12-24 | 中山大学 | 一种鱼眼镜头标定后鱼眼图像校正的方法 |
CN104867160A (zh) * | 2015-06-17 | 2015-08-26 | 合肥工业大学 | 一种用于摄像机内外参数标定的方向性标定靶标 |
CN104933717A (zh) * | 2015-06-17 | 2015-09-23 | 合肥工业大学 | 基于方向性标定靶标的摄像机内外参数自动标定方法 |
CN106097367A (zh) * | 2016-06-21 | 2016-11-09 | 北京格灵深瞳信息技术有限公司 | 一种双目立体相机的标定方法及装置 |
CN106910222A (zh) * | 2017-02-15 | 2017-06-30 | 中国科学院半导体研究所 | 基于双目立体视觉的人脸三维重建方法 |
Non-Patent Citations (4)
Title |
---|
Automatic Grid Finding in Calibration Patterns Using Delaunay Triangulation;Chang Shu et al;《technical report》;20030831;全文 * |
FEATURE DETECTION AND CORRESPONDENCE FOR CAMERA CALIBRATION;ZHIGANG ZHENG et al;《International Journal of Information Acquisition》;20081231;全文 * |
双目立体视觉在人形机器人三维重建中的应用;孙新领 等;《现代电子技术》;20160415;第39卷(第8期);全文 * |
黑白棋盘格中的角点提取算法的研究;熊显名 等;《技术与方法》;20141231;第33卷(第9期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN108182707A (zh) | 2018-06-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111243032B (zh) | 一种棋盘格角点全自动检测方法 | |
CN108182707B (zh) | 采集不完整条件下的棋盘格标定模板及其自动识别方法 | |
CN107507167B (zh) | 一种基于点云平面轮廓匹配的货物托盘检测方法及系统 | |
CN105260693B (zh) | 一种激光二维码定位方法 | |
CN110047109B (zh) | 一种基于自识别标记的相机标定板及其识别检测方法 | |
CN103729655B (zh) | 一种用于片式元件视觉定位的检测方法 | |
CN103345755B (zh) | 一种基于Harris算子的棋盘格角点亚像素提取方法 | |
CN109859226B (zh) | 一种图形分割的棋盘格角点亚像素的检测方法 | |
CN100380393C (zh) | 复杂背景下qr码图像符号区域的精确定位方法 | |
CN108510476B (zh) | 一种基于机器视觉的手机屏线路检测方法 | |
CN109345554A (zh) | 一种基于rgb-d相机的粘连蘑菇视觉原位测量方法 | |
US20230401729A1 (en) | Line structured light center extraction method for complicated surfaces | |
CN105184770B (zh) | 一种用于球栅阵列引脚芯片的焊球定位及其参数识别方法 | |
CN106446894A (zh) | 一种基于轮廓识别球型目标物位置的方法 | |
CN108256467B (zh) | 一种基于视觉注意机制和几何特征的交通标志检测方法 | |
CN115170669A (zh) | 基于边缘特征点集配准的识别定位方法及系统、存储介质 | |
US20140219541A1 (en) | Method for determining markings in relief on the outer surface of the sidewall of a tyre | |
CN111640158A (zh) | 基于对应掩模的端到端的摄像头与激光雷达外参标定方法 | |
CN110569857A (zh) | 一种基于质心距离计算的图像轮廓角点检测方法 | |
CN111382658B (zh) | 一种基于图像灰度梯度一致性的自然环境下道路交通标志检测方法 | |
CN114494045A (zh) | 一种基于机器视觉的大型直齿轮几何参数测量系统及方法 | |
CN114331986A (zh) | 一种基于无人机视觉的坝体裂纹识别与测量方法 | |
CN104331695A (zh) | 一种鲁棒的圆形标志符形状质量检测方法 | |
Choudhuri et al. | Crop stem width estimation in highly cluttered field environment | |
CN112419225B (zh) | 一种基于引脚分割的sop型芯片检测方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |