CN108182707A - 采集不完整条件下的棋盘格标定模板及其自动识别方法 - Google Patents
采集不完整条件下的棋盘格标定模板及其自动识别方法 Download PDFInfo
- Publication number
- CN108182707A CN108182707A CN201711395342.8A CN201711395342A CN108182707A CN 108182707 A CN108182707 A CN 108182707A CN 201711395342 A CN201711395342 A CN 201711395342A CN 108182707 A CN108182707 A CN 108182707A
- Authority
- CN
- China
- Prior art keywords
- gridiron pattern
- calibrating template
- conditions
- imperfect
- under
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30204—Marker
- G06T2207/30208—Marker matrix
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Image Analysis (AREA)
Abstract
本发明属于图像处理与模式识别领域,具体涉及到三维测量领域中相机标定的相关技术。采集不完整条件下的棋盘格标定模板,包括在棋盘格层中部的一个白色单元方格内设有黑色圆形标记。采集不完整条件下的棋盘格标定模板的自动识别方法,包括如下步骤:设计一个带有中心圆的棋盘格标定模板;提出一个基于Delaunay三角剖分的棋盘格模板自动识别方法。由于采用上述技术方案,在标定板不过度倾斜条件下,相对于光照与颜色变化、标定板的姿态变化以及相机镜头的畸变能够自动精确地识别棋盘格标定模板。
Description
技术领域
本发明属于图像处理与模式识别领域,具体涉及到三维测量领域中相机标定的相关技术。
背景技术
用于相机标定的棋盘格模板识别技术是基于提取的棋盘格角点识别棋盘格中黑白相间的矩阵网格,并匹配矩阵网格中行和列的序号与角点的像素坐标。目前比较成熟的标定模板识别技术的特点是:要么需要检测完整的标定模板,要么需要手动辅助完成模板识别。由于受相机镜头的畸变影响以及相机标定时需要采集多个不同姿态的标定模板图像,因此在相机采集的标定模板不完整的条件下自动识别标定模板是比较困难的问题。而且,随着人工智能技术的快速发展三维测量操作过程的简化与智能化已势在必行。
常用的标定模板识别方法有:基于双三角的单应变换方法,基于边的聚类方法,基于方格中心点的属性关系图方法,手动标定的Matlab方法,基于棋盘格角点的Delaunay三角剖分方法,OpenCV的特定标定板模式识别方法。然而,为了取得一定的标定精度并适应于重构不同类型的物件,标定时需要调整物件至相机的距离以及两相机之间的距离,从而经常无法采集完整的标定板图像。对比起来,Delaunay三角剖分能克服这个问题,其特点在于对于弱光照与镜头存在严重畸变的情况也能取得稳定的性能。
采用Delaunay三角剖分确定棋盘格的黑白相间的矩阵网格的缺点有以下两个方面:(a)会显著受到检测的棋盘格角点的完整性与正确性影响,(b)在标定模板采集不完整的条件下需要指定一个唯一的参考点使得所有识别的标定模板具有相同的角点像素坐标与矩阵网格中行列序号的对应关系,(c)标定板过渡倾斜会影响棋盘格模板识别的正确性。上述问题使得至今在商业应用中很难找到能够自动识别棋盘格标定模板的技术。
因此,在三维测量领域亟需一个在采集不完整条件下自动识别棋盘格模板的技术。
发明内容
本发明的目的在于,提供一种采集不完整条件下的棋盘格标定模板,解决以上技术问题。
本发明的另一目的在于,提供一种采集不完整条件下的棋盘格标定模板自动识别方法,解决以上技术问题。
本发明所解决的技术问题可以采用以下技术方案来实现:
采集不完整条件下的棋盘格标定模板,包括基板,所述基板表面设有棋盘格层,所述棋盘格层由尺寸相同的黑白方格阵列形成,在所述棋盘格层中部的一个白色单元方格内设有黑色圆形标记。
在所述白色单元方格相邻的四个白色单元方格内各设有字符标记。
所述黑色圆形标记、所述字符标记均采用激光雕刻技术雕刻在所述棋盘格层上。
所述基板的背面设有均匀的背光装置,以提高图像采集的对比度。
采集不完整条件下的棋盘格标定模板自动识别方法,包括如下步骤:
步骤a,设计一个带有中心圆的棋盘格标定模板;
步骤b,提出一个基于Delaunay三角剖分的棋盘格模板自动识别方法:
首先,根据二值化图像与Canny边图像自动计算棋盘格单元方格的大小,并依此剔除重复的角点与非X-型的角点;
其次,采用Delaunay三角剖分连接棋盘格角点;
再次,采用拓扑滤波去除非法的三角形;
然后,采用拓扑游走建立物点坐标与像点坐标的对应关系;
最后,采用单应变换补齐缺失角点的像点坐标,并第二次采用基于Delaunay三角剖分的方法识别棋盘格模板。
有益效果:由于采用上述技术方案,在标定板不过度倾斜条件下,相对于光照与颜色变化、标定板的姿态变化以及相机镜头的畸变能够自动精确地识别棋盘格标定模板。
附图说明
图1(a)为现有的棋盘格标定模板的一种结构示意图;(b)为本发明一种棋盘格标定模板的结构示意图;(c)为图(b)的部分放大示意图;
图2为本发明的一种算法流程图;
图3(a)为棋盘格标定模板图像的二值化图像;(b)为Canny边图像;
图4(a)为原有的Harris角点示意图;(b)为剔除干扰点后的Harris角点示意图;
图5为位于图像中间区域的Delaunay三角剖分结果示意图;
图6为棋盘格标定模板单元方格的属性示意图;
图7为本发明最终识别的棋盘格标定模板;
图8是图7的局部放大演示示意图;
图9为27组棋盘格图像的平均正确识别率示意图;
图10(a)是极端光照条件下的棋盘格图像;(b)是图(a)相应的二值化图像示意图;(c)是图(a)相应的Canny边图像示意图。
具体实施方式
为了使本发明实现的技术手段、创作特征、达成目的与功效易于明白了解,下面结合具体图示进一步阐述本发明。
参照图1,采集不完整条件下的棋盘格标定模板,包括基板,基板表面设有棋盘格层,棋盘格层由尺寸相同的黑白方格阵列形成,在棋盘格层中部的一个白色单元方格内采用激光雕刻技术雕刻有黑色圆形标记1。在白色单元方格相邻的四个白色单元方格内各雕刻有字符标记2。字符标记2可以根据需要设置,比如采用阿拉伯字符标记,罗马字符标记等。基板的背面设有均匀的背光装置,以提高图像采集的对比度。图1(a)是传统的棋盘格标定模板,图1(b)是本发明设计的棋盘格标定模板,图1(c)是图1(b)中间区域的局部放大图。从图中可见,字符标记2采用左侧的H字符标记和右侧的X字符标记。
参照图2,采集不完整条件下的棋盘格标定模板自动识别方法,包括如下步骤:
第一步,设计一个如图1(b)所示的带有中心圆的棋盘格标定模板,在中间白色的单元方格内用激光雕刻有一个黑色的小圆,为了便于调节相机采集图像的清晰度,如图1(c)所示,在中心圆周围雕刻有四个阿拉伯字符,并在棋盘格标定模板的背面打上均匀的背光以提高图像采集的对比度。
第二步,采用Canny算法提取棋盘格标定模板的Canny边,采用大津法对棋盘格标定模板图像进行二值化,并根据二值化图像与Canny边图像估计棋盘格单元方格的大小。图3(a)与(b)分别为棋盘格标定模板图像的二值化图像与Canny边图像。通过对比图(a)与(b)可以发现,在估计单元方格的大小时,同时采用二值化图像与Canny边图像能够提高估计的精确性,因为不仅Canny边有助于更精确地划定不同单元格之间的界限,而且在Canny边断开的地方二值化图像能够有效的划定。
第三步,根据估计的棋盘格单元方格大小,从检测的Harris角点中剔除重复的角点与非X型角点。图4(a)与(b)分别显示原有的Harris角点与剔除干扰点后的Harris角点。在图4(a)中存在重复的角点与非X型角点,在图4(b)中这些干扰点都已被剔除。由图4可知,如果不剔除这些干扰点将导致Delaunay三角剖分错误。
第四步,采用Watson的Delaunay三角剖分算法连接棋盘格角点,图5显示了位于图像中间区域的Delaunay三角剖分结果,结果中存在错误的三角形,如果不剔除,那么在随后的过程中必然会导致棋盘格标定模板识别错误。
第五步,在采用拓扑滤波剔除非法的三角形时,考虑了棋盘格标定模板的如下属性,以图6为例,棋盘格中的单元方格具有以下属性:除d点外棋盘格上的其它点与三角形Δabc的外接圆相距甚远,三角形Δadc具有类似的情况;由于位于同一单元方格的像素点的色彩基本相同,因此可以根据以上属性剔除非法的三角形。
第六步,在拓扑游走建立物点坐标与像点坐标的对应关系时,根据三角形边长判断与像点对应的物点坐标,具体过程如下:计算三角形的平均边长,假如三角形的一条边连接的两顶点的像点x坐标或y坐标之差的绝对值大于平均边长的x分量或y分量,则相应x坐标或y坐标才改变1(加1或减1)。
第七步,采用基于Ransac算法的单应变换补齐缺失角点的像点坐标,并重复第四步到第六步的过程再次识别棋盘格标定模板。具体实现方法为:根据匹配的像点坐标与物点坐标采用计算Ransac算法单应变换矩阵,并根据单应变换矩阵的逆矩阵由物点坐标反过来计算像点坐标,从而能够补齐棋盘格矩阵网格中没有检测到的角点像点坐标。如图7所示的是最终识别的棋盘格标定模板,图8是图7的局部放大演示示意图。
图9显示了包含486幅棋盘格图像的27组数据的平均正确识别率性能曲线图。在正确识别率性能曲线图中,发生误识别的都是图10(a)所示的极端光照情况。在图10(a)显示的极端光照条件下的棋盘格图像中,在中间暗的区域中棋盘格角点信息几乎完全丢失,从而影响图像二值化图10(b)。但是,由于Canny边是以图像的局部梯度信息为基础,因此并不影响Canny边检测如图10(c)的结果。可见,本发明对于处于不同距离、具有不同姿态、且受不同光照变化影响的棋盘格模板图像都能稳定精确的进行识别。
以上显示和描述了本发明的基本原理和主要特征和本发明的优点。本行业的技术人员应该了解,本发明不受上述实施例的限制,上述实施例和说明书中描述的只是说明本发明的原理,在不脱离本发明精神和范围的前提下,本发明还会有各种变化和改进,这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等效物界定。
Claims (5)
1.采集不完整条件下的棋盘格标定模板,包括基板,所述基板表面设有棋盘格层,所述棋盘格层由尺寸相同的黑白方格阵列形成,其特征在于,在所述棋盘格层中部的一个白色单元方格内设有黑色圆形标记。
2.根据权利要求1所述的采集不完整条件下的棋盘格标定模板,其特征在于,在所述白色单元方格相邻的四个白色单元方格内各设有字符标记。
3.根据权利要求1所述的采集不完整条件下的棋盘格标定模板,其特征在于,所述黑色圆形标记、所述字符标记均采用激光雕刻技术雕刻在所述棋盘格层上。
4.根据权利要求1所述的采集不完整条件下的棋盘格标定模板,其特征在于,所述基板的背面设有均匀的背光装置,以提高图像采集的对比度。
5.采用权利要求1至4中任意一项所述的采集不完整条件下的棋盘格标定模板的自动识别方法,其特征在于,包括如下步骤:
步骤a,设计一个带有中心圆的棋盘格标定模板;
步骤b,提出一个基于Delaunay三角剖分的棋盘格模板自动识别方法:
首先,根据二值化图像与Canny边图像自动计算棋盘格单元方格的大小,并依此剔除重复的角点与非X-型的角点;
其次,采用Delaunay三角剖分连接棋盘格角点;
再次,采用拓扑滤波去除非法的三角形;
然后,采用拓扑游走建立物点坐标与像点坐标的对应关系;
最后,采用单应变换补齐缺失角点的像点坐标,并第二次采用基于Delaunay三角剖分的方法识别棋盘格模板。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711395342.8A CN108182707B (zh) | 2017-12-21 | 2017-12-21 | 采集不完整条件下的棋盘格标定模板及其自动识别方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711395342.8A CN108182707B (zh) | 2017-12-21 | 2017-12-21 | 采集不完整条件下的棋盘格标定模板及其自动识别方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108182707A true CN108182707A (zh) | 2018-06-19 |
CN108182707B CN108182707B (zh) | 2021-08-10 |
Family
ID=62546928
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711395342.8A Active CN108182707B (zh) | 2017-12-21 | 2017-12-21 | 采集不完整条件下的棋盘格标定模板及其自动识别方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108182707B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109374636A (zh) * | 2018-11-29 | 2019-02-22 | 成都铁安科技有限责任公司 | 一种受电弓图像采集系统、检测系统及检测方法 |
CN112037284A (zh) * | 2020-08-13 | 2020-12-04 | 重庆守愚科技有限公司 | 棋盘格格子中心点检测方法、摄像机畸变标定方法及系统 |
CN112923918A (zh) * | 2021-01-26 | 2021-06-08 | 南京理工大学 | 一种基于改进棋盘格靶标的视觉位姿测量方法 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101477687A (zh) * | 2009-01-22 | 2009-07-08 | 上海交通大学 | 复杂背景下的棋盘格角点检测方法 |
CN202057299U (zh) * | 2010-12-14 | 2011-11-30 | 李军 | 可自动建立图像坐标系的图像标定模板 |
CN102779340A (zh) * | 2012-06-12 | 2012-11-14 | 华中科技大学 | 一种基于Delaunay三角剖分的特征点坐标自动对应方法 |
CN104091324A (zh) * | 2014-06-16 | 2014-10-08 | 华南理工大学 | 一种基于连通域分割的棋盘格图像快速特征匹配算法 |
CN104240236A (zh) * | 2014-08-26 | 2014-12-24 | 中山大学 | 一种鱼眼镜头标定后鱼眼图像校正的方法 |
CN104867160A (zh) * | 2015-06-17 | 2015-08-26 | 合肥工业大学 | 一种用于摄像机内外参数标定的方向性标定靶标 |
CN104933717A (zh) * | 2015-06-17 | 2015-09-23 | 合肥工业大学 | 基于方向性标定靶标的摄像机内外参数自动标定方法 |
CN106097367A (zh) * | 2016-06-21 | 2016-11-09 | 北京格灵深瞳信息技术有限公司 | 一种双目立体相机的标定方法及装置 |
CN106910222A (zh) * | 2017-02-15 | 2017-06-30 | 中国科学院半导体研究所 | 基于双目立体视觉的人脸三维重建方法 |
-
2017
- 2017-12-21 CN CN201711395342.8A patent/CN108182707B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101477687A (zh) * | 2009-01-22 | 2009-07-08 | 上海交通大学 | 复杂背景下的棋盘格角点检测方法 |
CN202057299U (zh) * | 2010-12-14 | 2011-11-30 | 李军 | 可自动建立图像坐标系的图像标定模板 |
CN102779340A (zh) * | 2012-06-12 | 2012-11-14 | 华中科技大学 | 一种基于Delaunay三角剖分的特征点坐标自动对应方法 |
CN104091324A (zh) * | 2014-06-16 | 2014-10-08 | 华南理工大学 | 一种基于连通域分割的棋盘格图像快速特征匹配算法 |
CN104240236A (zh) * | 2014-08-26 | 2014-12-24 | 中山大学 | 一种鱼眼镜头标定后鱼眼图像校正的方法 |
CN104867160A (zh) * | 2015-06-17 | 2015-08-26 | 合肥工业大学 | 一种用于摄像机内外参数标定的方向性标定靶标 |
CN104933717A (zh) * | 2015-06-17 | 2015-09-23 | 合肥工业大学 | 基于方向性标定靶标的摄像机内外参数自动标定方法 |
CN106097367A (zh) * | 2016-06-21 | 2016-11-09 | 北京格灵深瞳信息技术有限公司 | 一种双目立体相机的标定方法及装置 |
CN106910222A (zh) * | 2017-02-15 | 2017-06-30 | 中国科学院半导体研究所 | 基于双目立体视觉的人脸三维重建方法 |
Non-Patent Citations (4)
Title |
---|
CHANG SHU ET AL: "Automatic Grid Finding in Calibration Patterns Using Delaunay Triangulation", 《TECHNICAL REPORT》 * |
ZHIGANG ZHENG ET AL: "FEATURE DETECTION AND CORRESPONDENCE FOR CAMERA CALIBRATION", 《INTERNATIONAL JOURNAL OF INFORMATION ACQUISITION》 * |
孙新领 等: "双目立体视觉在人形机器人三维重建中的应用", 《现代电子技术》 * |
熊显名 等: "黑白棋盘格中的角点提取算法的研究", 《技术与方法》 * |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109374636A (zh) * | 2018-11-29 | 2019-02-22 | 成都铁安科技有限责任公司 | 一种受电弓图像采集系统、检测系统及检测方法 |
CN109374636B (zh) * | 2018-11-29 | 2021-05-25 | 成都铁安科技有限责任公司 | 一种受电弓图像采集系统、检测系统及检测方法 |
CN112037284A (zh) * | 2020-08-13 | 2020-12-04 | 重庆守愚科技有限公司 | 棋盘格格子中心点检测方法、摄像机畸变标定方法及系统 |
CN112037284B (zh) * | 2020-08-13 | 2024-02-27 | 重庆守愚科技有限公司 | 棋盘格格子中心点检测方法、摄像机畸变标定方法及系统 |
CN112923918A (zh) * | 2021-01-26 | 2021-06-08 | 南京理工大学 | 一种基于改进棋盘格靶标的视觉位姿测量方法 |
Also Published As
Publication number | Publication date |
---|---|
CN108182707B (zh) | 2021-08-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2021138995A1 (zh) | 一种棋盘格角点全自动检测方法 | |
CN107463918B (zh) | 基于激光点云与影像数据融合的车道线提取方法 | |
CN101943571B (zh) | 电路板检查装置及检查方法 | |
CN103345755B (zh) | 一种基于Harris算子的棋盘格角点亚像素提取方法 | |
CN107516077A (zh) | 基于激光点云和影像数据融合的交通标牌信息提取方法 | |
US7298889B2 (en) | Method and assembly for the photogrammetric detection of the 3-D shape of an object | |
CN110148174A (zh) | 标定板、标定板识别方法及装置 | |
CN108182707A (zh) | 采集不完整条件下的棋盘格标定模板及其自动识别方法 | |
Gschwandtner et al. | Infrared camera calibration for dense depth map construction | |
CN102773862A (zh) | 用于室内移动机器人的快速精确定位系统及其工作方法 | |
CN108256467B (zh) | 一种基于视觉注意机制和几何特征的交通标志检测方法 | |
CN101915573A (zh) | 一种基于标记物的关键点检测的定位测量方法 | |
CN103413141B (zh) | 环形光源及利用环形光源照明基于刀具形状纹理重量的融合识别方法 | |
CN104331695B (zh) | 一种鲁棒的圆形标志符形状质量检测方法 | |
CN111856436A (zh) | 一种多线激光雷达和红外相机的联合标定装置及标定方法 | |
CN114998308A (zh) | 一种基于光度立体的缺陷检测方法及系统 | |
CN101609508B (zh) | 对物体身份识别和朝向信息计算的标志结构及识别方法 | |
CN111402343A (zh) | 高精度标定板及标定方法 | |
CN106526580A (zh) | 用于确定机器人位置的路标、设备及机器人位置确定方法 | |
CN112033408A (zh) | 一种贴纸式的物体空间定位系统及定位方法 | |
CN105404900A (zh) | 一种并排二极管的定位方法及装置 | |
JP5274173B2 (ja) | 車両検査装置 | |
CN110379002A (zh) | 一种基于红外与可见光图像融合的三维重建表面温度显示方法 | |
CN114299172B (zh) | 一种用于视觉系统的平面编码靶标及其实时位姿测量方法 | |
CN116205993A (zh) | 一种用于3d aoi的双远心镜头高精度标定方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |