CN113218361B - 摄像机测距方法及装置 - Google Patents

摄像机测距方法及装置 Download PDF

Info

Publication number
CN113218361B
CN113218361B CN202010070141.6A CN202010070141A CN113218361B CN 113218361 B CN113218361 B CN 113218361B CN 202010070141 A CN202010070141 A CN 202010070141A CN 113218361 B CN113218361 B CN 113218361B
Authority
CN
China
Prior art keywords
target
parameter set
fitting parameter
reference point
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010070141.6A
Other languages
English (en)
Other versions
CN113218361A (zh
Inventor
刘子雄
张�杰
苏醒
贺锦鹏
董庆战
石高明
许可为
胡睿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SAIC Motor Corp Ltd
Original Assignee
SAIC Motor Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SAIC Motor Corp Ltd filed Critical SAIC Motor Corp Ltd
Priority to CN202010070141.6A priority Critical patent/CN113218361B/zh
Publication of CN113218361A publication Critical patent/CN113218361A/zh
Application granted granted Critical
Publication of CN113218361B publication Critical patent/CN113218361B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C3/00Measuring distances in line of sight; Optical rangefinders

Landscapes

  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

本申请实施例提供一种摄像机测距方法及装置。该摄像机测距方法包括确定参考点在目标图像中的位置,根据参考点在目标图像中的位置和预设映射确定目标图像对应的目标拟合参数集合,然后根据待测目标物在目标图像中的位置和目标拟合参数集合,确定待测目标物的物理位置。基于上述技术方案,可以准确确定出在摄像机相对于地面高度发生变化时待测目标物的物理位置,提高了在摄像机对于检测平面在高度上存在相对浮动时的测量精度。此外,由于避免在摄像机相对于地面高度发生变化时不断对摄像机重新进行标定而额外消耗时间,提高测量的效率。

Description

摄像机测距方法及装置
技术领域
本申请实施例涉及物理测量技术领域,尤其涉及一种摄像机测距方法及装置。
背景技术
为了实现更高程度的智能化,通常电子设备上需要增加许多传感器进行信息采集,根据采集到的信息进行分析并执行相应动作。例如,在智能驾驶技术领域,可以通过雷达传感器和视觉传感器进行信息采集。视觉传感器即摄像机,对于一些有明显外形轮廓特征图形的识别效果较好,常用来识别车道线或者限速牌。在使用车载摄像机进行精确测距时,车载摄像机相对地面的高度往往会因为车辆的颠簸或者负载变化而发生变化,导致测量精度较低。
发明内容
有鉴于此,本发明实施例所解决的技术问题之一在于提供一种摄像机测距方法及装置,用以克服在使用摄像机进行精确测距时摄像机对于检测平面在高度上存在相对浮动而导致测量精度降低的问题。
第一方面,本申请实施例提供了一种摄像机测距方法,其包括:
确定参考点在目标图像中的位置,在摄像机的高度变化时所述参考点在所述目标图像中的位置随之变化;
根据所述参考点在所述目标图像中的位置和预设映射确定所述目标图像对应的目标拟合参数集合,所述预设映射用于指示至少一个所述参考点的位置与至少一个拟合参数集合之间的对应关系,所述至少一个拟合参数集合包括所述目标拟合参数集合,所述目标拟合参数集合用于指示所述目标图像的像素位置与对应的物理位置之间的转化关系;
根据待测目标物在所述目标图像中的位置和所述目标拟合参数集合,确定所述待测目标物的物理位置。
可选的,在本申请的一种实施例中,所述方法还包括:
确定所述目标图像中的目标物检测区域;
在所述目标物检测区域中检测所述待测目标物,并确定所述待测目标物在所述目标图像中的位置。
可选的,在本申请的一种实施例中,所述预设映射包括至少一个所述参考点的位置和对应的至少一个拟合参数集合;
所述根据所述参考点在所述目标图像中的位置和预设映射确定所述目标图像对应的目标拟合参数集合,包括:
当所述参考点在所述目标图像中的位置在所述预设映射中时,将所述预设映射中相应位置对应的拟合参数集合确定为所述目标图像对应的目标拟合参数集合;
当所述参考点在所述目标图像中的位置不在所述预设映射中时,根据所述预设映射中与所述参考点在所述目标图像中的位置最接近的两个位置以及对应的拟合参数集合通过插值运算确定所述目标图像对应的目标拟合参数集合。
可选的,在本申请的一种实施例中,在所述确定参考点在目标图像中的位置之前还包括:
获取所述摄像机在至少一个高度下拍摄得到的至少一个样本图像;
确定每个所述样本图像对应的拟合参数集合;
确定所述参考点在每个所述样本图像中的位置;
根据所述至少一个样本图像对应的拟合参数集合和所述参考点在所述至少一个样本图像中的位置,确定所述预设映射。
可选的,在本申请的一种实施例中,所述根据所述至少一个样本图像对应的拟合参数集合和所述参考点在所述至少一个样本图像中的位置,确定所述预设映射,包括:
将所述参考点在所述至少一个样本图像中的位置与所述至少一个样本图像对应的拟合参数集合进行关联,得到所述预设映射。
可选的,在本申请的一种实施例中,所述根据所述至少一个样本图像对应的拟合参数集合和所述参考点在所述至少一个样本图像中的位置,确定所述预设映射,包括:
根据所述至少一个样本图像对应的拟合参数集合和所述参考点在所述至少一个样本图像中的位置进行数据拟合,得到所述预设映射。
可选的,在本申请的一种实施例中,根据所述至少一个样本图像对应的拟合参数集合和所述参考点在所述至少一个样本图像中的位置进行数据拟合,得到所述预设映射,包括:
根据预设公式计算得到W,所述预设映射包括所述W,所述预设公式为:
A=W×P
其中,A表示M个样本图像对应的拟合参数集合构成的矩阵,A为N行M列的矩阵,A中的元素aki表示第i个样本图像对应的拟合参数集合中的第k个元素,W为N行M列的矩阵,W中的元素wki表示W中的第k行第i列的元素,P表示M个样本图像中的参考点的坐标的幂次方构成的矩阵,P为M行M列的矩阵,P中的元素pli表示第i个样本图像中的参考点的坐标的l次方,0≤i≤M-1,0≤k≤N-1,0≤l≤M-1。
可选的,在本申请的一种实施例中,确定每个所述样本图像对应的拟合参数集合,包括:
确定每个所述样本图像中采样点的位置,所述采样点的数量大于或等于1;
根据所述采样点在每个所述样本图像中的位置和对应的所述采样点的物理位置,确定每个所述样本图像对应的拟合参数集合。
第二方面,本申请实施例提供一种摄像机测距装置,其包括:
图像位置确定模块,用于确定参考点在目标图像中的位置,在摄像机的高度变化时所述参考点在所述目标图像中的位置随之变化;
参数拟合计算模块,用于根据所述参考点在所述目标图像中的位置和预设映射确定所述目标图像对应的目标拟合参数集合,所述预设映射用于指示至少一个所述参考点的位置与至少一个拟合参数集合之间的对应关系,所述至少一个拟合参数集合包括所述目标拟合参数集合,所述目标拟合参数集合用于指示所述目标图像的像素位置与对应的物理位置之间的转化关系;
物理位置确定模块,用于根据待测目标物在所述目标图像中的位置和所述目标拟合参数集合,确定所述待测目标物的物理位置。
可选的,在本申请的一种实施例中,所述摄像机测距装置还包括映射确定模块,用于:
获取所述摄像机在至少一个高度下拍摄得到的至少一个样本图像;
确定每个所述样本图像对应的拟合参数集合;
确定所述参考点在每个所述样本图像中的位置;
根据所述至少一个样本图像对应的拟合参数集合和所述参考点在所述至少一个样本图像中的位置,确定所述预设映射。
本申请实施例中,通过确定参考点在目标图像中的位置,根据参考点在目标图像中的位置和预设映射确定目标图像对应的目标拟合参数集合,然后根据待测目标物在目标图像中的位置和目标拟合参数集合,确定待测目标物的物理位置。由于在摄像机的高度变化时参考点在目标图像中的位置随之变化,预设映射指示至少一个参考点的位置与至少一个拟合参数集合之间的对应关系,因此根据参考点在目标图像中的位置可以准确确定出在摄像机相对于地面高度发生变化时拍摄得到的所述目标图像对应的目标拟合参数集合,目标拟合参数集合用于指示目标图像的像素位置与对应的物理位置之间的转化关系,进而,可以根据待测目标物在目标图像中的位置和目标拟合参数集合,准确确定出在摄像机相对于地面高度发生变化时待测目标物的物理位置,提高了在摄像机对于检测平面在高度上存在相对浮动时的测量精度。此外,由于避免在摄像机相对于地面高度发生变化时不断对摄像机重新进行标定而额外消耗时间,提高了测量的效率。
附图说明
后文将参照附图以示例性而非限制性的方式详细描述本申请实施例的一些具体实施例。附图中相同的附图标记标示了相同或类似的部件或部分。本领域技术人员应该理解,这些附图未必是按比值绘制的。附图中:
图1为本申请实施例提供的一种摄像机测距方法的流程图;
图2为本申请实施例提供的一种确定预设映射的方法的流程图;
图3为本申请实施例提供的另一种摄像机测距方法的流程图;
图4为本申请实施例提供的一种摄像机测距装置的结构示意图。
具体实施方式
下面结合本发明实施例附图进一步说明本发明实施例具体实现。
实施例一
本申请实施例提供一种摄像机测距方法,如图1所示,图1为本申请实施例提供的一种摄像机测距方法的流程图。该摄像机测距方法可以包括以下步骤:
S101、确定参考点在目标图像中的位置,在摄像机的高度变化时参考点在目标图像中的位置随之变化。
目标图像可以是摄像机在某一高度下对其视野可以检测到的目标区域进行拍摄得到的图像。
参考点可以是摄像机工作时其视野可以检测到的目标区域中的一个易检测点,该易检测点可以在摄像机的高度变化时在摄像机视野中的位置发生变化,进而,使得在摄像机处于不同高度时拍摄的目标图像中的位置发生变化。
参考点在目标图像中的位置可以使用参考点在图像平面坐标系下的坐标(x, y) 来表示,该图像坐标系以摄像机的光轴与成像平面的交点为原点,以像素在图像中的列的 物理位置为横坐标,像素在图像中的行的物理位置为纵坐标。可选的,参考点在目标图像中 的位置可以使用参考点在像素坐标系的坐标(u, v)来表示,该像素坐标系以图像左上角的 像素为原点,像素在图像中所在的列数为横坐标,像素在图像中所在的行数为纵坐标。例 如,在本申请实施例中,参考点在图像中的位置可以使用
Figure 391075DEST_PATH_IMAGE001
来表示。
可选的,在本申请的一些实施例中,确定参考点在目标图像中的位置可以包括:
确定目标图像中的参考点检测区域;
在参考点区域中检测待测目标物,并确定待测目标物在目标图像中的位置。
参考点检测区域可以是参考点可能出现的区域,通过仅在目标图像的参考点检测区域检测参考点,可以减少在确定参考点在目标图像中的位置时的计算量。
进一步可选的,在参考点区域中检测待测目标物时可以采用常规的图像处理方法对目标图像进行颜色增强、灰度图转化、边缘检测等处理。
应理解,在本申请实施例中,摄像机需要保持安装稳固,不能相对于其固定面产生位移。例如,当摄像机安装于车辆的车身时,不能由于车辆行驶中车身抖动而发生相对于其固定面的位移。
S102、根据参考点在目标图像中的位置和预设映射确定目标图像对应的目标拟合参数集合,预设映射用于指示至少一个参考点的位置与至少一个拟合参数集合之间的对应关系,至少一个拟合参数集合包括目标拟合参数集合,目标拟合参数集合用于指示目标图像的像素位置与对应的物理位置之间的转化关系。
预设映射可以在标定阶段预先被确定,用于反映参考点在摄像机处于不同高度时拍摄得到的图像中的位置与至少一个拟合参数集合之间的关系。由于摄像机的高度变化时参考点在目标图像中的位置随之变化,即摄像机的高度不同,参考点在目标图像中的位置不同,因此,可以根据参考点在目标图像中的位置和预设映射确定出摄像机处于不同高度时目标图像的像素位置与对应的物理位置之间的转化关系,即目标图像对应的目标参数集合。
此处列举两种具体的实现方式来说明如何目标图像对应的目标拟合参数集合,当前,此处只是示意性说明,并不代表本申请局限于此。
可选的,在第一种实现方式中,预设映射为预设拟合函数,根据参考点在目标图像中的位置和预设映射确定目标图像对应的目标拟合参数集合,包括:将参考点在目标图像中的位置代入所述预设拟合函数,得到目标图像对应的目标拟合参数集合。
例如,参考点的坐标位置为
Figure 314031DEST_PATH_IMAGE002
,预设映射表示为预设拟合函数
Figure 623790DEST_PATH_IMAGE003
通过 将参考点的坐标位置为
Figure 694514DEST_PATH_IMAGE002
代入预设拟合函数
Figure 934871DEST_PATH_IMAGE004
,则可以得出目标图像对应的拟合 参数集合
Figure 774651DEST_PATH_IMAGE005
Figure 255311DEST_PATH_IMAGE006
,例如可以表示为:
Figure 547752DEST_PATH_IMAGE007
Figure 342533DEST_PATH_IMAGE008
可选的,在另一种可能的实现方式中,预设映射包括至少一个参考点的位置和对应的至少一个拟合参数集合;
根据参考点在目标图像中的位置和预设映射确定目标图像对应的目标拟合参数集合,包括:
当参考点在目标图像中的位置在预设映射中时,将预设映射中相应位置对应的拟合参数集合确定为目标图像对应的目标拟合参数集合;
当参考点在目标图像中的位置不在预设映射中时,根据预设映射中与参考点在目标图像中的位置最接近的两个位置以及对应的拟合参数集合通过插值运算确定目标图像对应的目标拟合参数集合。
例如,参考点Pi的坐标位置为
Figure 36820DEST_PATH_IMAGE009
,预设映射中对应存储有至少一个参考点的 位置和对应的至少一个拟合参数集合,根据
Figure 688381DEST_PATH_IMAGE009
在预设映射中查找对应的拟合参数集 合
Figure 733697DEST_PATH_IMAGE010
Figure 128906DEST_PATH_IMAGE011
。当
Figure 366115DEST_PATH_IMAGE009
在预设映射中时,例如
Figure 454157DEST_PATH_IMAGE009
与映射集合中的
Figure 721190DEST_PATH_IMAGE012
相同,则 将
Figure 920090DEST_PATH_IMAGE012
对应的拟合参数集合
Figure 261073DEST_PATH_IMAGE013
Figure 520016DEST_PATH_IMAGE014
作为目标图像对应的目标拟合参数集合
Figure 274345DEST_PATH_IMAGE010
Figure 11357DEST_PATH_IMAGE011
。当
Figure 721693DEST_PATH_IMAGE009
不在预设映射中时,则在预设映射中寻找与Pi最接近的两个点,例如寻找 与Pi距原点的欧氏距离接近且分布在Pi两侧的两个点,根据预设映射中与
Figure 151537DEST_PATH_IMAGE009
最接近 的两个参考点位置例如
Figure 127584DEST_PATH_IMAGE015
Figure 668286DEST_PATH_IMAGE016
以及
Figure 311757DEST_PATH_IMAGE015
对应的拟合参数集合
Figure 584607DEST_PATH_IMAGE017
Figure 313528DEST_PATH_IMAGE018
Figure 392343DEST_PATH_IMAGE016
对应的拟合参数集合
Figure 890320DEST_PATH_IMAGE019
Figure 396388DEST_PATH_IMAGE020
通过插值方法得到
Figure 301021DEST_PATH_IMAGE021
目标拟合参数集合
Figure 183527DEST_PATH_IMAGE010
Figure 536010DEST_PATH_IMAGE022
S103、根据待测目标物在目标图像中的位置和目标拟合参数集合,确定待测目标物的物理位置。
待测目标物在目标图像中的位置可以与参考点在目标图像中的位置的表示方式 相同,例如,使用
Figure 478559DEST_PATH_IMAGE023
来表示。
待测目标物的物理位置可以是指待测目标物在世界坐标系中的位置,即相对于预设物理原点的位置,例如可以使用(X,Y)来表示,X可以表示相对于预设物理原点在横轴上的坐标,Y可以表示相对于预设物理原点在纵轴上的坐标。
具体的,由于目标拟合参数集合用于指示目标图像的像素位置与对应的物理位置 之间的转化关系,因此,可以在确定待测目标物在目标图像中的位置之后,根据待测目标物 在目标图像中的位置和目标拟合参数集合,确定出待测目标物的实际物理位置。例如,待测 目标物的物理位置表示为(
Figure 854176DEST_PATH_IMAGE024
),以参数
Figure 274793DEST_PATH_IMAGE005
Figure 747363DEST_PATH_IMAGE006
作为n阶多项式的参数,并带入待测目 标的坐标
Figure 595233DEST_PATH_IMAGE025
,可以得出待目标物的物理位置,例如可以表示为:
Figure 520464DEST_PATH_IMAGE026
Figure 931723DEST_PATH_IMAGE027
可选的,在本申请的一些实施例中,本实施例提供的摄像机测距方法还可以包括:
确定目标图像中的目标物检测区域;
在目标物检测区域中检测待测目标物,并确定待测目标物在目标图像中的位置。
目标物检测区域可以是目标物可能出现的区域,通过仅在目标图像的目标物检测区域中检测待测目标物,可以减少确定待测目标物在目标图像中的位置时的计算量。
进一步可选的,在在目标物检测区域中检测待测目标物时可以采用常规的图像处理方法对目标物检测区域进行颜色增强、灰度图转化、边缘检测、霍夫变换等处理。
本实施例中,由于在摄像机的高度变化时参考点在目标图像中的位置随之变化,预设映射指示至少一个参考点的位置与至少一个拟合参数集合之间的对应关系,因此根据参考点在目标图像中的位置可以准确确定出在摄像机相对于地面高度发生变化时拍摄得到的所述目标图像对应的目标拟合参数集合,目标拟合参数集合用于指示目标图像的像素位置与对应的物理位置之间的转化关系,进而,可以根据待测目标物在目标图像中的位置和目标拟合参数集合,准确确定出在摄像机相对于地面高度发生变化时待测目标物的物理位置,提高了在摄像机对于检测平面在高度上存在相对浮动时的测量精度。此外,由于避免在摄像机相对于地面高度发生变化时不断对摄像机重新进行标定而额外消耗时间,提高了测量的效率。
实施例二
基于本申请实施例一提供的一种摄像机测距方法,本申请实施例二提供一种确定预设映射的方法,在本实施例中,确定预设映射可以在确定参考点在目标图像中的位置之前进行,如图2所示,图2为本申请实施例提供的一种确定预设映射的方法的流程图,该方法可以包括以下步骤:
S201、获取摄像机在至少一个高度下拍摄得到的至少一个样本图像。
可选的,在本申请的一些实施例中,样本图像可以是对设置有棋盘格的目标区域进行拍摄得到的图像。将棋盘格设置在目标区域的预设位置后,可以确定棋盘格交叉点的物理位置,即棋盘格交叉点相对于预设物理原点的位置。
在本实施例中,通过调整摄像机的高度,使摄像机在至少一个高度下对目标区域进行拍摄,可以模拟摄像机高度变化过程中对目标区域进行拍摄的情形。
S202、确定每个样本图像对应的拟合参数集合。
拟合参数集合用于指示图像的像素位置与对应的物理位置之间的转化关系。在获得每个样本图像之后,由于每个样本图像中的某些像素点对应的物理位置已知,由此确定出每个样本图像对应的拟合参数集合。
可选的,在本申请的一种实施例中,确定每个样本图像对应的拟合参数集合,可以包括:
确定每个样本图像中采样点的位置,采样点的数量大于或等于1;
根据采样点在每个样本图像中的位置和对应的采样点的物理位置,确定每个样本图像对应的拟合参数集合。
采样点可以是指样本图像中对应的物理位置已知的点,例如在样本图像是对设置有棋盘格的目标区域进行拍摄得到的图像的情况下,采样点可以是样本图像中与棋盘格交叉点对应的点。
采样点的数量可以根据拟合参数集合中的拟合参数的数量确定,例如,当具有N个拟合参数时,采样点的数量需要大于或等于N。采样点的数量越多,则确定的拟合参数越准确,更能准确地反映样本图像的像素位置与对应的物理位置之间的转化关系。
可选的,在确定每个样本图像中采样点的位置并且已知采样点对应的物理位置之后可以通过二元n阶多项式拟合的方式来确定拟合参数集合。
下面以样本图像为对设置有棋盘格的目标区域进行拍摄得到的图像为例对确定每个样本图像对应的拟合参数集合进行举例说明,应理解,此处仅是举例说明,并不代表本申请限于此。
例如,对于第i个样本图像中棋盘格交叉点j,其相对于预设物理原点的平面坐标为(Xj i,Yj i),其在第i个样本图像中的像素坐标为(xj i,yj i);
使用二元n阶多项式来拟合此映射过程:
Figure 258799DEST_PATH_IMAGE028
Figure 543150DEST_PATH_IMAGE029
其中,{ai}和{bi}为第i个样本图像对应的拟合参数集合。
S203、确定参考点在每个样本图像中的位置。
参考点在每个样本图像中的位置的表示方式可以与参考点在目标图像中的位置的表示方式相同,并且可以使用与确定参考点在目标图像中的位置相同的方式来确定参考点在每个样本图像中的位置,此处不再赘述。
S204、根据至少一个样本图像对应的拟合参数集合和参考点在至少一个样本图像中的位置,确定预设映射。
可选的,为了便于使用,在本申请的一种实施例中,根据至少一个样本图像对应的拟合参数集合和参考点在至少一个样本图像中的位置,确定预设映射,包括:将参考点在至少一个样本图像中的位置与至少一个样本图像对应的拟合参数集合进行关联,得到预设映射。
例如,对于第i个样本图像,确定参考点在第i个样本图像中的位置P的坐标位置为(px i, py i),第i个样本图像对应的拟合参数集合为{ai}和{bi},则可以将(px i, py i)与{ai}和{bi}进行关联对应存储,以方便在使用时可以直接通过根据参考点的位置确定对应的拟合参数集合。
可选的,为了减少预设映射的存储空间,在本申请的一种实施例中,根据至少一个样本图像对应的拟合参数集合和参考点在至少一个样本图像中的位置,确定预设映射,包括:根据至少一个样本图像对应的拟合参数集合和参考点在至少一个样本图像中的位置进行数据拟合,得到预设映射。
例如,对于第i个样本图像,确定参考点在第i个样本图像中的位置P的坐标位置为(px i,py i),则以px i、py i为自变量,{ai}和{bi}中的每个参数分别作为因变量,拟合出其对应的数学关系,具体表达式为:
Figure 955676DEST_PATH_IMAGE030
Figure 655779DEST_PATH_IMAGE031
进一步可选的,在本申请的一种实施例中,根据至少一个样本图像对应的拟合参数集合和参考点在至少一个样本图像中的位置进行数据拟合,得到预设映射,包括:
根据预设公式计算得到W,预设映射包括W,预设公式可以为:
A=W×P
其中,A表示M个样本图像对应的拟合参数集合构成的矩阵,A为N行M列的矩阵,A的列数表示样本图像的数量,A的行数表示每个拟合参数集合中元素的数量,A中的元素aki表示第i个样本图像对应的拟合参数集合中的第k个元素,W为N行M列的矩阵,W中的元素wki表示W中的第k行第i列的元素,P表示M个样本图像中的参考点的坐标的幂次方构成的矩阵,P为M行M列的矩阵,P的列数表示样本图像的数量,P的行数表示每个样本图像中参考点的坐标的最高幂次方,P中的元素pli表示第i个样本图像中的参考点的坐标的l次方,0≤i≤M-1,0≤k≤N-1,0≤l≤M-1。
在确定预设映射之后,本申请实施例提供的摄像机测距方法还包括:将所述预设映射存储在数据存储模块中。
本实施例中,通过获取摄像机在至少一个高度下拍摄得到的至少一个样本图像,确定每个样本图像对应的拟合参数集合,可以得到摄像机处于不同高度下拍摄得到的图像对应的拟合参数集合,结合参考点在每个样本图像中的位置,可以得到至少一个参考点的位置与至少一个拟合参数集合之间的对应关系,即预设映射。
实施例三
基于本申请实施例一提供的一种摄像机测距方法,本申请实施例三提供另一种摄像机测距方法,如图3所示,在本实施例中,以在车辆行驶过程中实时检测车辆距车道线的距离以及车辆与车道线的夹角为例对摄像机测距方法进行具体说明。
在本实施例中,例如在车辆的一侧设置两个摄像机,两摄像头分别位于车辆该侧的前后两个车轮上方,方向朝向地面。摄像机的中心与车轮中心的连线垂直于地面。调整摄像机的高度,使得摄像机的视野中可以看到车轮以及距离车辆60cm远的车道线。本实施例中的摄像机为高清USB摄像机,插到计算机上后可以自动被计算机检测,无需安装额外的驱动程序。
在本实施例中,需要精确测量的物理量为前后车轮轮胎最外侧接地点至车轴延长 线与车道线内边界交点的距离d1和d2,并基于此距离得出车辆车头方向与车道线的夹角
Figure 837362DEST_PATH_IMAGE032
在本实施例中,准备长宽尺寸为100cm×40cm的棋盘格板,每个黑白色块的边长为4cm。将准备好的棋盘格板放置于两个车轮正下方,使棋盘格板的边缘与待测距离的方向平行,并且使第一排色块的外边缘与轮胎最外侧接地点相切。
具体的,通过增减车辆负载和/或摇动车身的方式,使摄像机相对于地面发生移动,并且在摄像机中记录下整个过程。选择车辆的轮毂和轮胎之间的交界线与图像中心线的交点作为参考点P点,该参考点P点在样本图像中的位置会随着车辆状态的变化而发生一定移动,同时,由于车辆的轮毂的金属颜色较为明亮,轮胎的颜色较深,因此两者的交界线通过相关算法比较容易检测。
将摄像机采集的数据按照帧的方式分割为m个样本图像。对于每个样本图片i,针对车道线可能出现的区域,依次进行颜色增强、灰度图转化、边缘检测、霍夫变换,最终检测出每张图片中的棋盘格交叉点位置(xj i,yj i),并结合其物理位置(Xj i,Yj i),利用n阶多项式拟合计算出拟合参数集合{ai}和{bi}。本实施例中可以使用OpenCV模块进行相关图像处理。由于本实施例中,待测量的目标物移动范围在同一轴上,因此另一方向的畸变可以忽略,故只保留测量方向上的坐标点坐标xj i、对应的物理位置Xj i以及拟合参数集合{ai}。可表示为:
Figure 292614DEST_PATH_IMAGE033
对于每个样本图片,针对参考点P点可能出现的区域,依次进行颜色增强、灰度图转化、边缘检测的方法检测出P点在样本图像中的位置(px i,py i)并记录。同样,由于本实施例中,待测量的目标物移动范围在同一轴上,故只保留测量方向上的P点坐标px i即可。以px i为自变量,拟合参数集合{ai}中的每个参数分别作为因变量,使用m阶多项式拟合出其对应的数学关系并保存系数组,即预设映射{wi}。具体表示为:
Figure 192437DEST_PATH_IMAGE034
在确定了预设映射之后,如图3所示,使用摄像机实时检测车辆距车道线的距离以及车辆与车道线的夹角,具体可以包括以下步骤:
S301、使用摄像机采集目标图像。
S302、检测参考点P点在目标图像中的坐标。
例如,参考点P点在目标图像中的坐标表示为
Figure 758547DEST_PATH_IMAGE035
S303、根据参考点P点的坐标和上文得到的预设映射计算对应的拟合参数集合。
例如,以
Figure 483052DEST_PATH_IMAGE036
作为自变量,以{wi}作为m阶多项式的系数,计算出目标图像对应的拟合 参数集合
Figure 109205DEST_PATH_IMAGE005
S304、确定待测目标物在目标图像中的坐标。例如,在车道线可能出现的区域即目标物检测区域检测车道线,当摄像机检测到车道线时,调用对应算法实时检测目标图像中的车道线,并读取目标图像中前/后车轮轮胎最外侧接地点至车轴延长线与车道线内边界交点的坐标L(Lx,Ly)。
S304、根据S303中计算的拟合参数集合以及S304中确定的待测目标物在目标图像中的坐标来计算目标距离并保存。
例如,以Lx作为自变量,同时以
Figure 496324DEST_PATH_IMAGE005
作为n阶多项式的各项对应系数,计算出当前状 态下车道线距离车辆前/后轮的距离d1、d2
在计算目标距离之后,可选的,可以结合车辆的轴距L,计算出车辆车头方向与车 道线的夹角
Figure 600547DEST_PATH_IMAGE037
。如果
Figure 756721DEST_PATH_IMAGE032
的值为正,则车头方向偏左;如果
Figure 491459DEST_PATH_IMAGE032
的值为负,则车头方向偏 右。
可选的,在本申请的一些实施例中,可以根据需要,选择安装更多的摄像机进行融合测量。
本实施例中,通过棋盘格板确定预设映射,根据参考点在目标图像中的位置可以准确确定出在摄像机相对于地面高度发生变化时拍摄得到的目标图像对应的目标拟合参数集合,目标拟合参数集合用于指示目标图像的像素位置与对应的物理位置之间的转化关系,可以根据待测目标物在目标图像中的位置和目标拟合参数集合,准确确定出在摄像机相对于地面高度发生变化时待测目标物的物理位置,提高摄像机由于车辆负载不同或者路面颠簸而相对地面高度发生变化时的测量精度,同时,由于避免不需要重新对摄像机重新进行标定而额外消耗时间,提高了测量的效率。
应理解,本申请实施例提供的摄像机测距方法应用于检测车辆具车道线的距离仅是示例性的,其对于地面上高度很低的物体或者地面上的图形的检测具有很高的准确度和稳定性,适用于路面标识或地锁等的检测,以及对于检测平面有相对浮动的其他测试场景。
实施例四
本申请实施例提供了一种摄像机测距装置,如图4所示,图4为本申请实施例提供的一种摄像机测距装置的结构示意图,该摄像机测距装置包括:
图像位置确定模块401,用于确定参考点在目标图像中的位置,在摄像机的高度变化时参考点在目标图像中的位置随之变化;
参数拟合计算模块402,用于根据参考点在目标图像中的位置和预设映射确定目标图像对应的目标拟合参数集合,预设映射用于指示至少一个参考点的位置与至少一个拟合参数集合之间的对应关系,至少一个拟合参数集合包括目标拟合参数集合,目标拟合参数集合用于指示目标图像的像素位置与对应的物理位置之间的转化关系;
物理位置确定模块403,用于根据待测目标物在目标图像中的位置和目标拟合参数集合,确定待测目标物的物理位置。
可选的,图像位置确定模块401,还用于:
确定目标图像中的目标物检测区域;
在目标物检测区域中检测待测目标物,并确定待测目标物在目标图像中的位置。
可选的,预设映射包括至少一个参考点的位置和对应的至少一个拟合参数集合;参数拟合计算模块402,具体用于:
当参考点在目标图像中的位置在预设映射中时,将预设映射中相应位置对应的拟合参数集合确定为目标图像对应的目标拟合参数集合;
当参考点在目标图像中的位置不在预设映射中时,根据预设映射中与述参考点在目标图像中的位置最接近的两个位置以及对应的拟合参数集合通过插值运算确定目标图像对应的目标拟合参数集合。
可选的,摄像机测距装置还包括映射确定模块,用于:
获取摄像机在至少一个高度下拍摄得到的至少一个样本图像;
确定每个样本图像对应的拟合参数集合;
确定参考点在每个样本图像中的位置;
根据至少一个样本图像对应的拟合参数集合和参考点在至少一个样本图像中的位置,确定预设映射。
可选的,映射确定模块具体用于:将参考点在至少一个样本图像中的位置与至少一个样本图像对应的拟合参数集合进行关联,得到预设映射。
可选的,映射确定模块具体用于:根据至少一个样本图像对应的拟合参数集合和参考点在至少一个样本图像中的位置进行数据拟合,得到预设映射。
可选的,映射确定模块具体用于:
根据预设公式计算得到W,预设映射包括W,预设公式为:
A=W×P
其中,A为N行M列的矩阵,A中的元素aij表示第j个样本图像对应的拟合参数集合中的第i个元素;W为N行M列的矩阵,W中的元素wij表示W中的第i行第j列的元素,P为M行M列的矩阵,P中的元素pij表示第j个样本图像中的参考点的坐标的i次方。
可选的,映射确定模块具体用于:
确定每个样本图像中采样点的位置,采样点的数量大于或等于1;
根据采样点在每个样本图像中的位置和对应的采样点的物理位置,确定每个样本图像对应的拟合参数集合。
可选的,本申请实施例提供的摄像机测距装置还包括显示模块,用于显示待测物的在目标图像和/或样本图像中的位置以及参考点在目标图像和/或样本图像中的位置,以供用户确认。
可选的,本申请实施例提供的摄像机测距装置还包括图像处理模块,用于对目标图像和/或样本图像进行对比度调整、二值化、裁剪等预操作,使得图像更容易被其他模块处理。
应理解,本实施例提供的摄像机测距装置的各模块及对应的方法可以基于python语言环境编写。
本实施例提供的摄像机测距装置,用于执行实施例一和实施例三所提供的摄像机测距方法,其技术原理和技术效果类似,此处不再赘述。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。

Claims (10)

1.一种摄像机测距方法,其特征在于,包括:
确定参考点在目标图像中的位置,在摄像机的高度变化时所述参考点在所述目标图像中的位置随之变化;
根据所述参考点在所述目标图像中的位置和预设映射确定所述目标图像对应的目标拟合参数集合,所述预设映射用于指示至少一个所述参考点的位置与至少一个拟合参数集合之间的对应关系,所述至少一个拟合参数集合包括所述目标拟合参数集合,所述目标拟合参数集合用于指示所述目标图像的像素位置与对应的物理位置之间的转化关系;
根据待测目标物在所述目标图像中的位置和所述目标拟合参数集合,确定所述待测目标物的物理位置。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
确定所述目标图像中的目标物检测区域;
在所述目标物检测区域中检测所述待测目标物,并确定所述待测目标物在所述目标图像中的位置。
3.根据权利要求1所述的方法,其特征在于,所述预设映射包括至少一个所述参考点的位置和对应的至少一个拟合参数集合;
所述根据所述参考点在所述目标图像中的位置和预设映射确定所述目标图像对应的目标拟合参数集合,包括:
当所述参考点在所述目标图像中的位置在所述预设映射中时,将所述预设映射中相应位置对应的拟合参数集合确定为所述目标图像对应的目标拟合参数集合;
当所述参考点在所述目标图像中的位置不在所述预设映射中时,根据所述预设映射中与所述参考点在所述目标图像中的位置最接近的两个位置以及对应的拟合参数集合通过插值运算确定所述目标图像对应的目标拟合参数集合。
4.根据权利要求1所述的方法,其特征在于,在所述确定参考点在目标图像中的位置之前还包括:
获取所述摄像机在至少一个高度下拍摄得到的至少一个样本图像;
确定每个所述样本图像对应的拟合参数集合;
确定所述参考点在每个所述样本图像中的位置;
根据所述至少一个样本图像对应的拟合参数集合和所述参考点在所述至少一个样本图像中的位置,确定所述预设映射。
5.根据权利要求4所述的方法,其特征在于,所述根据所述至少一个样本图像对应的拟合参数集合和所述参考点在所述至少一个样本图像中的位置,确定所述预设映射,包括:
将所述参考点在所述至少一个样本图像中的位置与所述至少一个样本图像对应的拟合参数集合进行关联,得到所述预设映射。
6.根据权利要求4所述的方法,其特征在于,所述根据所述至少一个样本图像对应的拟合参数集合和所述参考点在所述至少一个样本图像中的位置,确定所述预设映射,包括:
根据所述至少一个样本图像对应的拟合参数集合和所述参考点在所述至少一个样本图像中的位置进行数据拟合,得到所述预设映射。
7.根据权利要求6所述的方法,其特征在于,根据所述至少一个样本图像对应的拟合参数集合和所述参考点在所述至少一个样本图像中的位置进行数据拟合,得到所述预设映射,包括:
根据预设公式计算得到W,所述预设映射包括所述W,所述预设公式为:
A=W×P
其中,A表示M个样本图像对应的拟合参数集合构成的矩阵,A为N行M列的矩阵,A中的元素aki表示第i个样本图像对应的拟合参数集合中的第k个元素,W为N行M列的矩阵,W中的元素wki表示W中的第k行第i列的元素,P表示M个样本图像中的参考点的坐标的幂次方构成的矩阵,P为M行M列的矩阵,P中的元素pli表示第i个样本图像中的参考点的坐标的l次方,0≤i≤M-1,0≤k≤N-1,0≤l≤M-1。
8.根据权利要求4所述的方法,其特征在于,确定每个所述样本图像对应的拟合参数集合,包括:
确定每个所述样本图像中采样点的位置,所述采样点的数量大于或等于1;
根据所述采样点在每个所述样本图像中的位置和对应的所述采样点的物理位置,确定每个所述样本图像对应的拟合参数集合。
9.一种摄像机测距装置,其特征在于,包括:
图像位置确定模块,用于确定参考点在目标图像中的位置,在摄像机的高度变化时所述参考点在所述目标图像中的位置随之变化;
参数拟合计算模块,用于根据所述参考点在所述目标图像中的位置和预设映射确定所述目标图像对应的目标拟合参数集合,所述预设映射用于指示至少一个所述参考点的位置与至少一个拟合参数集合之间的对应关系,所述至少一个拟合参数集合包括所述目标拟合参数集合,所述目标拟合参数集合用于指示所述目标图像的像素位置与对应的物理位置之间的转化关系;
物理位置确定模块,用于根据待测目标物在所述目标图像中的位置和所述目标拟合参数集合,确定所述待测目标物的物理位置。
10.根据权利要求9所述的装置,其特征在于,所述摄像机测距装置还包括映射确定模块,用于:
获取所述摄像机在至少一个高度下拍摄得到的至少一个样本图像;
确定每个所述样本图像对应的拟合参数集合;
确定所述参考点在每个所述样本图像中的位置;
根据所述至少一个样本图像对应的拟合参数集合和所述参考点在所述至少一个样本图像中的位置,确定所述预设映射。
CN202010070141.6A 2020-01-21 2020-01-21 摄像机测距方法及装置 Active CN113218361B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010070141.6A CN113218361B (zh) 2020-01-21 2020-01-21 摄像机测距方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010070141.6A CN113218361B (zh) 2020-01-21 2020-01-21 摄像机测距方法及装置

Publications (2)

Publication Number Publication Date
CN113218361A CN113218361A (zh) 2021-08-06
CN113218361B true CN113218361B (zh) 2023-02-17

Family

ID=77085161

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010070141.6A Active CN113218361B (zh) 2020-01-21 2020-01-21 摄像机测距方法及装置

Country Status (1)

Country Link
CN (1) CN113218361B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101419705A (zh) * 2007-10-24 2009-04-29 深圳华为通信技术有限公司 摄像机标定的方法及装置
CN102865824A (zh) * 2012-09-18 2013-01-09 北京经纬恒润科技有限公司 一种计算车辆间相对距离的方法和装置
CN103487034A (zh) * 2013-09-26 2014-01-01 北京航空航天大学 一种基于立式标靶的车载单目摄像头测距测高方法
CN109712196A (zh) * 2018-12-17 2019-05-03 北京百度网讯科技有限公司 摄像头标定处理方法、装置、车辆控制设备及存储介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9749594B2 (en) * 2011-12-22 2017-08-29 Pelco, Inc. Transformation between image and map coordinates
WO2016100604A1 (en) * 2014-12-17 2016-06-23 Snap-On Incorporated Live ride height measurement

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101419705A (zh) * 2007-10-24 2009-04-29 深圳华为通信技术有限公司 摄像机标定的方法及装置
CN102865824A (zh) * 2012-09-18 2013-01-09 北京经纬恒润科技有限公司 一种计算车辆间相对距离的方法和装置
CN103487034A (zh) * 2013-09-26 2014-01-01 北京航空航天大学 一种基于立式标靶的车载单目摄像头测距测高方法
CN109712196A (zh) * 2018-12-17 2019-05-03 北京百度网讯科技有限公司 摄像头标定处理方法、装置、车辆控制设备及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
机器视觉核桃分级中相机可变视场与像素转换系数自动获取方法;郭政等;《安徽农业科学》;20161114;第44卷(第29期);第234-236页 *

Also Published As

Publication number Publication date
CN113218361A (zh) 2021-08-06

Similar Documents

Publication Publication Date Title
CN111179358B (zh) 标定方法、装置、设备及存储介质
CN108805934B (zh) 一种车载摄像机的外部参数标定方法及装置
CN111640157B (zh) 一种基于神经网络的棋盘格角点检测方法及其应用
CN107424116B (zh) 基于侧环视相机的泊车位检测方法
CN110889829B (zh) 一种基于鱼眼镜头的单目测距方法
CN110031829B (zh) 一种基于单目视觉的目标精准测距方法
CN112257539B (zh) 车辆与车道线的位置关系检测方法、系统和存储介质
CN108305288B (zh) 用于静止轨道对地观测卫星线列仪器的恒星质心提取方法
CN111508027B (zh) 摄像机外参标定的方法和装置
CN109343041B (zh) 用于高级智能辅助驾驶的单目测距方法
CN111652937B (zh) 车载相机标定方法和装置
CN114972531B (zh) 一种角点检测方法、设备及可读存储介质
CN117197241B (zh) 一种基于多目视觉的机器人末端绝对位姿高精度跟踪方法
CN113218361B (zh) 摄像机测距方法及装置
CN116697975A (zh) 一种基于红外相机车载单目测距方法
CN116125489A (zh) 一种室内物体三维检测方法、计算机设备及存储介质
CN111738035A (zh) 车辆偏航角的计算方法、装置和设备
CN113723432B (zh) 一种基于深度学习的智能识别、定位追踪的方法及系统
CN113643374B (zh) 基于道路特征的多目相机标定方法、装置、设备和介质
CN112270693B (zh) 一种飞行时间深度相机运动伪差检测方法和装置
CN115294211A (zh) 一种车载相机安装外参标定方法、系统、装置与存储介质
CN107292932B (zh) 基于图像膨胀率的迎面视频测速方法
CN117523010B (zh) 车辆的相机位姿确定方法、装置、计算机设备和存储介质
CN114782447B (zh) 路面检测方法、装置、车辆、存储介质及芯片
CN117710481A (zh) 多相机联合标定方法、装置及电子设备、存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant