CN104008548B - 一种用于车载环视系统摄像头参数标定的特征点抽取方法 - Google Patents

一种用于车载环视系统摄像头参数标定的特征点抽取方法 Download PDF

Info

Publication number
CN104008548B
CN104008548B CN201410245586.8A CN201410245586A CN104008548B CN 104008548 B CN104008548 B CN 104008548B CN 201410245586 A CN201410245586 A CN 201410245586A CN 104008548 B CN104008548 B CN 104008548B
Authority
CN
China
Prior art keywords
camera
vehicle
mark
feature point
calibration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201410245586.8A
Other languages
English (en)
Other versions
CN104008548A (zh
Inventor
董延超
胡振程
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuxi Wisdom Sensor Technology Co Ltd
Original Assignee
Wuxi Wissen Intelligent Sensing Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuxi Wissen Intelligent Sensing Technology Co Ltd filed Critical Wuxi Wissen Intelligent Sensing Technology Co Ltd
Priority to CN201410245586.8A priority Critical patent/CN104008548B/zh
Publication of CN104008548A publication Critical patent/CN104008548A/zh
Application granted granted Critical
Publication of CN104008548B publication Critical patent/CN104008548B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

一种用于车载环视系统摄像头参数标定的特征点抽取方法,该方法根据车辆尺寸、摄像头安装位置、安装角度等信息预测校正标志物在图像中所出现的位置区域;根据标志物图像颜色、亮度等特征,实用角点检测算法选取特征点,该特征点抽取的方法步骤简单,缩短了抽取特征点所用的时间,提高了整个标定过程的效率。并且容易区分不同摄像头对应的不同特征点的存在位置,避免混淆。

Description

一种用于车载环视系统摄像头参数标定的特征点抽取方法
技术领域
本发明涉及车载摄像头参数标定领域,具体涉及一种用于车载环视系统摄像头参数标定的特征点抽取方法。
背景技术
车载环视系统是由装配在车体上前后左右的多台广角摄像机构成,每台摄像机覆盖一定区间,图像经过视点变换生成俯视图,并进行拼接得到车载环视俯瞰图。为了使上述装配在车体上的多台广角摄像机所摄取的图像经过视点变换能够生成没有畸变的无缝拼接的合成俯瞰环视图,上述装配在车体上的广角摄像机的内部参数与外部参数必须被精确标定。摄像机的内部参数是否精确直接影响合成图的畸变校正效果。摄像机的外部参数是否精确会影响合成图中各个相机图像连接处是否错位,也会影响最终合成图中俯瞰环视图与车体的相对位置关系是否正确。
如何设计能够一种校正效率高、易操作的标定方法,成为了车载环视系统研究的重要方向。
发明内容
发明目的:为了克服现有技术的不足,本发明提供一种用于车载环视系统摄像头参数标定的特征点抽取方法。
技术方案:一种用于车载环视系统摄像头参数标定的特征点抽取方法,其特征在于,该方法包括以下步骤:
1)预测校正标志物区域:根据车辆尺寸、摄像头安装位置、安装角度、摄像头既定参数以及校正标志物的三维坐标预测校正标志物在图像中所出现的位置区域;
2)根据标志物形态选择特征点位置:
2.1)当标志物为色块标定时,摄像头在步骤1)的预测区域中寻找校正标志物颜色的像素点;在该颜色的像素候补区域通过收缩膨胀的变形处理去除小粒子,把大面积的该颜色区域连在一起,通过计算粒子面积的解析方法得到在预测区域中最大面积的该颜色区域作为输出结果;之后通过图像角点检测算法选取特征点;
2.2)当标志物为LED光点或反光求标定时,摄像头在步骤1)的预测区域中抽取高亮点作为特征点;
3)对步骤2)中获得的特征点进行特征点匹配:将校正标志物的三维坐标与对应图像的二维坐标进行匹配,去掉没有匹配上的特征点。
步骤2.1)中图像角点检测算法包括基于Harris的角点检测算法或基于SURF特征的角点检测算法。基于Harris特征和SURF特征的角点检测算法计算量相对较小,特征点位置精确,适用于大面积色块的角点检测。
有益效果:
1、该特征点抽取的方法步骤简单,缩短了抽取特征点所用的时间,提高了整个标定过程的效率。
2、该特征点抽取方法容易区分不同摄像头对应的不同特征点的存在位置,避免混淆。
具体实施方式
下面对本发明做更进一步的解释。
一种用于车载环视系统摄像头参数标定的特征点抽取方法,其特征在于,该方法包括以下步骤:
1)预测校正标志物区域:根据车辆尺寸、摄像头安装位置、安装角度、摄像头既定参数以及校正标志物的三维坐标预测校正标志物在图像中所出现的位置区域;
2)根据标志物形态选择特征点位置:
2.1)当标志物为色块标定时,摄像头在步骤1)的预测区域中寻找校正标志物颜色的像素点;在该颜色的像素候补区域通过收缩膨胀的变形处理去除小粒子,把大面积的该颜色区域连在一起,在这一步中,本实例以前后摄像头的校正标志物为蓝色举例。在前相机和后相机的预测区域中寻找蓝色像素点,在RGB表色空间中可以用(B*2-R-G)>预先设定的蓝色阈值的方法,在YUV或者YCbCr表色空间中可以用UV象限角度(280°<theta<350°)的评价方法。
之后,通过计算粒子面积的解析方法得到在预测区域中最大面积的该颜色区域作为输出结果;之后通过图像角点检测算法选取特征点;本实例选择Harris角点检测算法,也可以使用其他可行的角点检测算法,比如基于SURF特征的角点检测算法。
2.2)当标志物为LED光点或反光求标定时,摄像头在步骤1)的预测区域中抽取高亮点作为特征点;具体为在亮度最高的值开始向低亮度方向搜寻谷底,并累计像素数;如果这个谷底距离最高亮度的差距在某一预先设定的阈值以内,而且累计像素数也少于区域总像素数的一定比例(比如1/200),那么这个谷底就是我们需要求的亮度阈值,凡是高于这个亮度的像素作为高亮点候补抽取,并通过粒子解析算法进行聚类,求出每个粒子的中心位置。其他的高亮点抽取方法也同样适用。
3)对步骤2)中获得的特征点进行特征点匹配:将校正标志物的三维坐标与对应图像的二维坐标进行匹配,去掉没有匹配上的特征点。这里校正标志物的三维坐标是根据标方位置和标志物的形态提前计算的,将该计算结果与获得图片的二维坐标进行比对匹 配,获得符合要求的特征点。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (2)

1.一种用于车载环视系统摄像头参数标定的特征点抽取方法,该方法包括以下步骤:1)预测校正标志物区域:根据车辆尺寸、摄像头安装位置、安装角度、摄像头既定参数以及校正标志物的三维坐标预测校正标志物在图像中所出现的位置区域;
其特征在于,2)根据标志物形态选择特征点位置;
2.1)当标志物为色块标定时,摄像头在步骤1)的预测区域中寻找校正标志物颜色的像素点;在该颜色的像素候补区域通过收缩膨胀的变形处理去除小粒子,把大面积的该颜色区域连在一起,通过计算粒子面积的解析方法得到在预测区域中最大面积的该颜色区域作为输出结果;之后通过图像角点检测算法选取特征点;
2.2)当标志物为LED光点或反光求标定时,摄像头在步骤1)的预测区域中抽取高亮点作为特征点;
3)对步骤2)中获得的特征点进行特征点匹配:将校正标志物的三维坐标与对应图像的二维坐标进行匹配,去掉没有匹配上的特征点;
其中,在所述步骤2.2)中,在亮度最高的值开始向低亮度方向搜寻谷底,并累计像素数;如果这个谷底距离最高亮度的差距在某一预先设定的阈值以内,而且累计像素数也少于区域总像素数的一定比例,那么这个谷底就是亮度阈值,凡是高于这个亮度的像素作为高亮点候补抽取,并通过粒子解析算法进行聚类,求出每个粒子的中心位置。
2.如权利要求1所述的一种用于车载环视系统摄像头参数标定的特征点抽取方法,其特征在于,步骤2.1)中图像角点检测算法包括基于Harris的角点检测算法或基于SURF特征的角点检测算法。
CN201410245586.8A 2014-06-04 2014-06-04 一种用于车载环视系统摄像头参数标定的特征点抽取方法 Expired - Fee Related CN104008548B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410245586.8A CN104008548B (zh) 2014-06-04 2014-06-04 一种用于车载环视系统摄像头参数标定的特征点抽取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410245586.8A CN104008548B (zh) 2014-06-04 2014-06-04 一种用于车载环视系统摄像头参数标定的特征点抽取方法

Publications (2)

Publication Number Publication Date
CN104008548A CN104008548A (zh) 2014-08-27
CN104008548B true CN104008548B (zh) 2017-04-19

Family

ID=51369188

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410245586.8A Expired - Fee Related CN104008548B (zh) 2014-06-04 2014-06-04 一种用于车载环视系统摄像头参数标定的特征点抽取方法

Country Status (1)

Country Link
CN (1) CN104008548B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105818746A (zh) * 2015-01-05 2016-08-03 上海纵目科技有限公司 环视高级辅助驾驶系统的标定方法及系统
CN105205811A (zh) * 2015-08-31 2015-12-30 中国烟草总公司广东省公司 一种烟田遥感图像匹配算法
JP6688989B2 (ja) * 2016-01-29 2020-04-28 パナソニックIpマネジメント株式会社 カメラ校正装置およびカメラ校正方法
CN106875448B (zh) * 2017-02-16 2019-07-23 武汉极目智能技术有限公司 一种车载单目摄像头外部参数自标定方法
US10769813B2 (en) 2018-08-28 2020-09-08 Bendix Commercial Vehicle Systems, Llc Apparatus and method for calibrating surround-view camera systems
KR102630368B1 (ko) * 2018-10-25 2024-01-29 현대모비스 주식회사 운전자 감시 카메라의 보정장치 및 그 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103019643A (zh) * 2012-12-30 2013-04-03 中国海洋大学 一种即插即用的大屏幕投影自动校正与拼接显示方法
CN103177439A (zh) * 2012-11-26 2013-06-26 惠州华阳通用电子有限公司 一种基于黑白格角点匹配的自动标定方法
CN203386146U (zh) * 2013-05-08 2014-01-08 西安理工大学 基于红外视频定位的人机交互装置
CN103679729A (zh) * 2013-12-17 2014-03-26 中国人民解放军第二炮兵工程大学 基于彩色标定板的全自动摄像机参数标定方法

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3945430B2 (ja) * 2003-03-19 2007-07-18 コニカミノルタホールディングス株式会社 画像による対象物の計測方法および撮像装置
US20060023970A1 (en) * 2004-07-29 2006-02-02 Chinlee Wang Optical tracking sensor method
GB2465298B (en) * 2004-09-24 2010-06-30 Vision Rt Ltd Image processing system for use with a patient positioning device
JP2008187564A (ja) * 2007-01-31 2008-08-14 Sanyo Electric Co Ltd カメラ校正装置及び方法並びに車両
US8373763B2 (en) * 2008-05-22 2013-02-12 GM Global Technology Operations LLC Self calibration of extrinsic camera parameters for a vehicle camera
JP5091902B2 (ja) * 2009-03-31 2012-12-05 アイシン精機株式会社 車載カメラの校正に用いられる校正指標と、当該校正指標を用いた車載カメラの校正方法と、システムと、当該システムのためのプログラム
CN101551907B (zh) * 2009-04-28 2011-05-04 浙江大学 一种多照相机自动化高精度标定方法
KR101113679B1 (ko) * 2010-05-24 2012-02-14 기아자동차주식회사 카메라 시스템의 영상 보정 방법
TWI478833B (zh) * 2011-08-31 2015-04-01 Autoequips Tech Co Ltd 調校車用影像裝置之方法及其系統
CN102589432A (zh) * 2012-02-17 2012-07-18 华北水利水电学院 高温锻件结构光摄影测量系统的现场标定装置
CN102663763B (zh) * 2012-04-25 2014-08-13 南京航空航天大学 一种面向大视场高精度视觉测量的摄像机标定方法
JP5959311B2 (ja) * 2012-05-25 2016-08-02 富士通テン株式会社 データ導出装置、及び、データ導出方法
JP6009894B2 (ja) * 2012-10-02 2016-10-19 株式会社デンソー キャリブレーション方法、及びキャリブレーション装置
US9723272B2 (en) * 2012-10-05 2017-08-01 Magna Electronics Inc. Multi-camera image stitching calibration system
CN103440643A (zh) * 2013-08-07 2013-12-11 河南科技大学 一种单线阵摄像机标定方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103177439A (zh) * 2012-11-26 2013-06-26 惠州华阳通用电子有限公司 一种基于黑白格角点匹配的自动标定方法
CN103019643A (zh) * 2012-12-30 2013-04-03 中国海洋大学 一种即插即用的大屏幕投影自动校正与拼接显示方法
CN203386146U (zh) * 2013-05-08 2014-01-08 西安理工大学 基于红外视频定位的人机交互装置
CN103679729A (zh) * 2013-12-17 2014-03-26 中国人民解放军第二炮兵工程大学 基于彩色标定板的全自动摄像机参数标定方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
《双目光学跟踪器姿态精度的预测和估计研究》;罗斌等;《仪器仪表学报》;20100131;第31卷(第1期);第3-7页,第4节 *
《基于彩色圆柱的相机标定法》;李起成等;《第一届建立和谐人机环境联合学术会议(HHME2005)论文集》;20051001;正文第195页,第2节 *

Also Published As

Publication number Publication date
CN104008548A (zh) 2014-08-27

Similar Documents

Publication Publication Date Title
CN104008548B (zh) 一种用于车载环视系统摄像头参数标定的特征点抽取方法
CN104182949B (zh) 基于直方图特征点配准的影像匀色与融合方法及系统
WO2019148912A1 (zh) 一种图像处理方法、装置、电子设备及存储介质
US9533618B2 (en) Method, apparatus and system for processing a display from a surround view camera solution
US20100104175A1 (en) Integrated image processor
CN103327345B (zh) 白平衡处理方法及其处理装置
US8077199B2 (en) Target position identifying apparatus
CN108694709B (zh) 一种图像融合方法及装置
CN105338262A (zh) 一种热成像图像处理方法及装置
TWI532385B (zh) 白平衡處理方法及其處理裝置
CA2609526A1 (en) Vehicle and road sign recognition device
CN106056594A (zh) 一种基于双光谱的可见光图像提取系统与方法
CN109035193A (zh) 一种基于双目立体相机的成像处理方法及成像处理系统
WO2017027212A1 (en) Machine vision feature-tracking system
CN102938057B (zh) 一种车辆阴影消除方法及装置
US9214034B2 (en) System, device and method for displaying a harmonized combined image
GB2583198A (en) Shadow detection method and system for surveillance video image, and shadow removing method
CN106534677A (zh) 一种图像过曝优化方法及装置
Li et al. Vehicle color recognition using vector matching of template
CN110443771A (zh) 车载环视相机系统中环视图亮度与颜色一致性调整方法
Stone et al. Forward looking anomaly detection via fusion of infrared and color imagery
CN112907497B (zh) 图像融合方法以及图像融合装置
CN104282010A (zh) 车辆多鱼眼摄像机360度俯视图像拼接曲线标定方法
CN109035331B (zh) 一种信号灯组的位置矫正方法及设备
CN104463812B (zh) 修复在拍摄时受到雨滴干扰的视频图像的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20170112

Address after: Jiangsu Province, Wuxi New District Longshan Road No. (Wang Zhuang science and Technology Venture Center) C Building 2 floor, building 4

Applicant after: Wuxi Wissen Intelligent Sensing Technology Co., Ltd.

Address before: 214028 Wuxi Province, Jiangsu New District Longshan Road, No. 4 (Wang Zhuang science and Technology Venture Center) C building, floor 2

Applicant before: Wuxi Guan Zhi vision Science and Technology Ltd.

GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 214000 2 building, C tower, Longshan Road 4, Jiangsu Wuxi New District, Wuxi.

Patentee after: Wuxi wisdom Sensor Technology Co., Ltd.

Address before: 214000 2 building, C tower, Longshan Road 4, Jiangsu Wuxi New District, Wuxi.

Patentee before: Wuxi Wissen Intelligent Sensing Technology Co., Ltd.

CP01 Change in the name or title of a patent holder
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170419

Termination date: 20190604

CF01 Termination of patent right due to non-payment of annual fee