CN103854293A - 一种基于特征点匹配的车辆跟踪方法及装置 - Google Patents
一种基于特征点匹配的车辆跟踪方法及装置 Download PDFInfo
- Publication number
- CN103854293A CN103854293A CN201410068027.4A CN201410068027A CN103854293A CN 103854293 A CN103854293 A CN 103854293A CN 201410068027 A CN201410068027 A CN 201410068027A CN 103854293 A CN103854293 A CN 103854293A
- Authority
- CN
- China
- Prior art keywords
- frame
- unique point
- image
- vehicle
- status information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
本发明公开了一种基于特征点匹配的车辆跟踪方法及装置,属于汽车主动安全领域。所述方法包括:采集道路图像;检测第N帧车辆状态信息;预测N+1帧车辆状态信息,确定N+1帧搜索区域;在第N帧道路图像中和N+1帧搜索区域中确定设定数目的特征点;计算第N帧道路图像中的特征点和N+1帧搜索区域中的特征点之间的匹配度;判断匹配成功的特征点的个数;输出N+1帧车辆状态信息。本发明通过从第N帧道路图像中和N+1帧搜索区域中确定相同数目的特征点,计算第N帧道路图像中与N+1帧搜索区域中的特征点的匹配度,根据匹配成功的特征点的个数,输出N+1帧车辆状态信息,即使在车辆行驶时有些部分受到其他物体的遮挡,也可以实现车辆的跟踪,保证车辆跟踪的连续性。
Description
技术领域
本发明涉及汽车主动安全领域,特别涉及一种基于特征点匹配的车辆跟踪方法及装置。
背景技术
随着汽车行业的发展和汽车性能的提高,大多数的汽车中已开始采用主动安全体系来提高汽车行驶的安全性。主动安全体系是指具有预防交通事故发生的能力的体系,主要包括追尾预警、自动紧急刹车、防抱死制动等系统,其中追尾预警系统、自动紧急刹车系统在实现自身功能的过程中,均需要用到车辆跟踪技术。
现有技术中通常采用基于整体图像匹配的方法来实现车辆的跟踪。基于整体图像匹配的方法是指检测出在第N帧中车辆图像的颜色直方图,确定N+1帧的搜索区域,并用搜索区域的颜色直方图与第N帧中车辆的颜色直方图进行匹配,当搜索区域的颜色直方图与第N帧中车辆的颜色直方图匹配程度符合要求时,确定搜索区域中的颜色直方图为N+1帧中车辆的颜色直方图。
在实现本发明的过程中,发明人发现现有技术至少存在以下问题:
由于实际的公路环境具有较大的复杂性和不确定性,导致车辆在行驶时会被树木、路标等其他物体遮挡住一部分,使得在车辆跟踪过程中,检测出的车辆的颜色直方图不完整,与搜索区域的颜色直方图无法匹配,最终导致车辆跟踪中断。
发明内容
为了解决现有技术车辆跟踪过程中容易受到环境影响而中断的问题,本发明实施例提供了一种基于特征点匹配的车辆跟踪方法及装置。所述技术方案如下:
一方面,提供了一种基于特征点匹配的车辆跟踪方法,所述方法包括:
采集道路图像;
对于所述道路图像中的第N帧道路图像,检测第N帧车辆状态信息,N为正整数;
根据所述第N帧车辆状态信息,预测N+1帧车辆状态信息,得到N+1帧车辆状态信息预测值,并确定N+1帧搜索区域;
在所述第N帧道路图像中确定设定数目的特征点,并在所述N+1帧搜索区域中确定所述设定数目的特征点;
计算所述第N帧道路图像中的特征点和所述N+1帧搜索区域中的特征点之间的匹配度;
判断匹配成功的特征点的个数是否小于第一阈值;
若所述匹配成功的特征点的个数不小于所述第一阈值,则确定所述第N帧道路图像中与所述N+1帧搜索区域中匹配度最高的特征点,输出所述匹配度最高的特征点处的车辆状态信息作为N+1帧车辆状态信息;
若所述匹配成功的特征点的个数小于所述第一阈值,则输出所述N+1帧车辆状态信息预测值作为所述N+1帧车辆状态信息。
进一步地,在所述第N帧道路图像中确定设定数目的特征点,并在所述N+1帧搜索区域中确定所述设定数目的特征点,包括:
从所述第N帧道路图像中获取第N帧车辆图像;
将所述第N帧车辆图像归一化为m*m像素,作为第N帧车辆模板图像,将所述第N帧车辆模板图像转化为第N帧车辆边缘图像,获取所述第N帧车辆边缘图像中幅值最大的k个特征点,m为正数,k为正整数,且k不小于2;
将所述N+1帧搜索区域归一化为m*m像素,作为N+1帧搜索区域图像,将所述N+1帧搜索区域图像转化为N+1帧搜索区域边缘图像,获取所述N+1帧搜索区域边缘图像中幅值最大的k个特征点。
进一步地,计算所述第N帧道路图像中的特征点和所述N+1帧搜索区域中的特征点之间的匹配度,包括:
通过2D Gabor滤波器,建立形同公式,分别获取所述第N帧车辆边缘图像中k个特征点与所述N+1帧搜索区域边缘图像中k个特征点的2D Gabor特征向量;
根据所述第N帧车辆边缘图像中k个特征点的2D Gabor特征向量与所述N+1帧搜索区域边缘图像中k个特征点的2D Gabor特征向量,以相似度函数计算所述第N帧车辆边缘图像中的特征点与所述N+1帧搜索区域边缘图像中的特征点的匹配度。
进一步地,判断匹配成功的特征点的个数是否小于第一阈值之前,所述方法还包括:
判断所述第N帧车辆边缘图像中的特征点与所述N+1帧搜索区域边缘图像中的特征点的匹配度是否大于第二阈值;
若所述第N帧车辆边缘图像中的特征点与所述N+1帧搜索区域边缘图像中的特征点的匹配度不大于所述第二阈值,则所述第N帧车辆边缘图像中的特征点与所述N+1帧搜索区域边缘图像中的特征点匹配成功;
若所述第N帧车辆边缘图像中的特征点与所述N+1帧搜索区域边缘图像中的特征点的匹配度大于所述第二阈值,则所述第N帧车辆边缘图像中的特征点与所述N+1帧搜索区域边缘图像中的特征点匹配失败。
进一步地,对于所述道路图像中的第N帧道路图像,检测第N帧车辆状态信息,N为正整数,包括:
以所述第N帧车辆图像中任意一点作为原点,建立二维坐标系;
根据车辆检测算法,检测第N帧车辆图像底部边缘中点的坐标,得到第N帧车辆的位置;
设定第N帧车辆在X轴的速度分量、第N帧车辆在Y轴的速度分量、第N帧车辆在X轴的加速度分量和第N帧车辆在Y轴的加速度分量均为零。
进一步地,根据所述第N帧车辆状态信息,预测N+1帧车辆状态信息,得到N+1帧车辆状态信息预测值,并确定N+1帧搜索区域,包括:
根据所述第N帧车辆的位置,通过卡尔曼滤波预测器,建立卡尔曼滤波状态方程,预测在所述二维坐标系中N+1帧车辆的位置,得到N+1帧车辆的位置预测值、N+1帧车辆在X轴的速度分量预测值、N+1帧车辆在Y轴的速度分量预测值、N+1帧车辆在X轴的加速度分量预测值和N+1帧车辆在Y轴的加速度分量预测值;
测定所述第N帧车辆图像的大小,以所述N+1帧车辆的位置预测值作为所述N+1帧搜索区域的中心点,确定所述N+1帧搜索区域,若所述第N帧车辆图像的大小为a*b像素,则设定所述N+1帧搜索区域的大小为2a*2b像素,a和b均为正数。
另一方面,提供了一种基于特征点匹配的车辆跟踪装置,所述装置包括:
图像采集模块,用于采集所述道路图像;
检测模块,用于对于所述道路图像中的第N帧道路图像,检测第N帧车辆状态信息,N为正整数;
预测模块,用于根据所述第N帧车辆状态信息,预测N+1帧车辆状态信息,得到N+1帧车辆状态信息预测值,并确定N+1帧搜索区域;
采集模块,用于在所述第N帧道路图像中确定设定数目的特征点,并在所述N+1帧搜索区域中确定所述设定数目的特征点;
匹配模块,用于计算所述第N帧道路图像中的特征点和所述N+1帧搜索区域中的特征点之间的匹配度,并判断匹配成功的特征点的个数是否小于第一阈值;
输出模块,用于在所述匹配成功的特征点的个数不小于所述第一阈值时,确定所述第N帧道路图像中与所述N+1帧搜索区域中匹配度最高的特征点,输出所述匹配度最高的特征点处的车辆状态信息作为N+1帧车辆状态信息,或在所述匹配成功的特征点的个数小于所述第一阈值时,输出所述N+1帧车辆状态信息预测值作为所述N+1帧车辆状态信息。
进一步地,所述采集模块包括:
获取单元,用于获取所述第N帧道路图像中第N帧车辆图像;
转化单元,用于将所述第N帧车辆图像归一化为m*m像素,并转化为第N帧车辆边缘图像,以及将所述N+1帧搜索区域归一化为m*m像素,并转化为N+1帧搜索区域边缘图像,m为正数;
采集单元,用于获取所述第N帧车辆边缘图像中幅值最大的k个特征点,并获取所述N+1帧搜索区域边缘图像中幅值最大的k个特征点,k为正整数,k不小于2。
进一步地,所述匹配模块包括:
计算单元,用于计算第N帧车辆边缘图像中特征点的特征向量和N+1帧搜索区域边缘图像中特征点的特征向量;
匹配单元,用于根据所述第N帧车辆边缘图像中的特征点的特征向量和所述N+1帧搜索区域边缘图像中的特征点的特征向量,计算所述第N帧车辆边缘图像中的特征点和所述N+1帧搜索区域边缘图像中的特征点之间的匹配度,并判断匹配成功的特征点的个数是否小于第一阈值;
第一判断单元,用于判断所述第N帧车辆边缘图像中的特征点和所述N+1帧搜索区域边缘图像中的特征点的匹配度是否大于第二阈值;
第二判断单元,用于判断所述第N帧车辆边缘图像中的特征点和所述N+1帧搜索区域边缘图像中的特征点匹配成功的个数是否小于第一阈值。
进一步地,所述输出模块包括:
第一输出单元,用于在所述匹配成功的特征点的个数不小于所述第一阈值时,确定所述第N帧车辆边缘图像中与所述N+1帧搜索区域边缘图像中匹配度最高的特征点,输出所述匹配度最高的特征点处的车辆状态信息作为N+1帧车辆状态信息;
第二输出单元,用于在所述匹配成功的特征点的个数小于所述第一阈值时,输出所述N+1帧车辆状态信息预测值作为所述N+1帧车辆状态信息。
本发明实施例提供的技术方案带来的有益效果是:
本发明实施例通过分别从第N帧道路图像中和N+1帧搜索区域中提取相同数目的特征点,并计算第N帧道路图像中的特征点与N+1帧搜索区域中的特征点的匹配度,根据匹配成功的特征点的个数是否小于第一阈值,输出N+1帧车辆状态信息,即使在车辆行驶时有些部分受到其他物体的遮挡,也可以实现车辆的跟踪,保证车辆跟踪的连续性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例一提供的基于特征点匹配的车辆跟踪方法流程图;
图2是本发明实施例二提供的基于特征点匹配的车辆跟踪方法流程图;
图3是本发明实施例三提供的基于特征点匹配的车辆跟踪装置结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
实施例一
参见图1,图1所示的实施例提供了一种基于特征点匹配的车辆跟踪方法,该方法包括:
步骤101:采集道路图像。
步骤102:对于道路图像中的第N帧道路图像,检测第N帧车辆状态信息,N为正整数。
步骤103:根据第N帧车辆状态信息,预测N+1帧车辆状态信息,得到N+1帧车辆状态信息预测值,并确定N+1帧搜索区域。
步骤104:在第N帧道路图像中确定设定数目的特征点,并在N+1帧搜索区域中确定设定数目的特征点。
步骤105:计算第N帧道路图像中的特征点和N+1帧搜索区域中的特征点之间的匹配度。
步骤106:判断匹配成功的特征点的个数是否小于第一阈值。
若匹配成功的特征点的个数不小于所述第一阈值,则执行步骤107;
若匹配成功的特征点的个数小于第一阈值,则执行步骤108。
步骤107:确定第N帧道路图像中与N+1帧搜索区域中匹配度最高的特征点,输出匹配度最高的特征点处的车辆状态信息作为N+1帧车辆状态信息。
步骤108:输出N+1帧车辆状态信息预测值作为N+1帧车辆状态信息。
本发明实施例通过分别从第N帧道路图像中和N+1帧搜索区域中提取相同数目的特征点,并计算第N帧道路图像中的特征点与N+1帧搜索区域中的特征点的匹配度,根据匹配成功的特征点的个数是否小于第一阈值,输出N+1帧车辆状态信息,即使在车辆行驶时有些部分受到其他物体的遮挡,也可以实现车辆的跟踪,保证车辆跟踪的连续性。
实施例二
参见图2,图2所示的实施例提供了一种基于特征点匹配的车辆跟踪方法,该方法包括:
步骤201:采集道路图像。
在车辆行驶过程中,通过安装在车辆内部或车辆外部的摄像设备,采集车辆前方的道路图像。
对于道路图像中的第N帧道路图像,检测第N帧车辆状态信息,N为正整数。
步骤202:在道路图像中选取第N帧道路图像,并在第N帧道路图像中获取第N帧车辆图像,选取第N帧车辆图像中任意一点作为原点,建立二维坐标系。
步骤203:根据车辆检测算法,检测第N帧车辆图像底部边缘中点的坐标,得到第N帧车辆的位置。
步骤204:设定第N帧车辆在X轴的速度分量、第N帧车辆在Y轴的速度分量、第N帧车辆在X轴的加速度分量和第N帧车辆在Y轴的加速度分量均为零。
其中,第N帧车辆状态信息主要包括第N帧车辆的位置、第N帧车辆的速度和第N帧车辆的加速度。通过车辆检测算法,检测第N帧道路图像中车辆底部边缘中点在二维坐标系中的坐标,并将该坐标记为第N帧车辆的位置,然后将第N帧车辆的速度分解为第N帧车辆在X轴的速度分量和第N帧车辆在Y轴的速度分量,将第N帧车辆的加速度分解为第N帧车辆在X轴的加速度分量和第N帧车辆在Y轴的加速度分量,并且将第N帧车辆在X轴的速度分量、第N帧车辆在Y轴的速度分量、第N帧车辆在X轴的加速度分量和第N帧车辆在Y轴的加速度分量均设定为零。
根据第N帧车辆状态信息,预测N+1帧车辆状态信息,得到N+1帧车辆状态信息预测值,并确定N+1帧搜索区域。
步骤205:根据第N帧车辆的位置,通过卡尔曼滤波预测器,建立卡尔曼滤波状态方程,预测在所述二维坐标系中N+1帧车辆的位置,得到N+1帧车辆的位置预测值、N+1帧车辆在X轴的速度分量预测值、N+1帧车辆在Y轴的速度分量预测值、N+1帧车辆在X轴的加速度分量预测值和N+1帧车辆在Y轴的加速度分量预测值。
其中,卡尔曼滤波状态方程具体如下:
在上述卡尔曼滤波状态方程中,为N+1帧车辆在X轴的坐标、为N+1帧车辆在Y轴的坐标、为N+1帧车辆在X轴的速度分量预测值、为N+1帧车辆在Y轴的速度分量预测值、为N+1帧车辆在X轴的加速度分量预测值、为N+1帧车辆在Y轴的加速度分量预测值、xn为第N帧车辆在X轴的坐标、yn为第N帧车辆在Y轴的坐标、vx,n为第N帧车辆在X轴的速度分量、vy,n为第N帧车辆在Y轴的速度分量、ax,n为第N帧车辆在X轴的加速度分量、ay,n为第N帧车辆在Y轴的加速度分量、t为第N帧与N+1帧相隔的时间,wn满足正态分布的过程噪声和观测噪声向量,他们是互不相关的零均值白噪声序列。
将第N帧车辆的位置、第N帧车辆在X轴的速度分量、第N帧车辆在Y轴的速度分量、第N帧车辆在X轴的加速度分量和第N帧车辆在Y轴的加速度分量带入卡尔曼滤波状态方程中,求解得到N+1帧车辆的位置预测值、N+1帧车辆在X轴的速度分量预测值、N+1帧车辆在Y轴的速度分量预测值、N+1帧车辆在X轴速度分量的预测值和N+1帧车辆在Y轴速度分量的预测值。
步骤206:测定第N帧车辆图像的大小,以N+1帧车辆的位置预测值作为N+1帧搜索区域的中心点,确定N+1帧搜索区域,若第N帧车辆图像的大小为a*b像素,则设定N+1帧搜索区域的大小为2a*2b像素,a和b均为正数。
在第N帧道路图像中确定设定数目的特征点,并在N+1帧搜索区域中确定设定数目的特征点。
步骤207:对于从第N帧道路图像中提取第N帧车辆图像,将第N帧车辆图像归一化至m*m像素,作为第N帧车辆模板图像,将第N帧车辆模板图像转化为第N帧车辆边缘图像,从第N帧车辆边缘图像中获取幅值最大的k个特征点,其中m为正数,k为正整数,且k不小于2。
步骤208:将N+1帧搜索区域也归一化至m*m像素,与第N帧车辆图像归一化至同样大小,作为N+1帧搜索区域图像,将N+1帧搜索区域图像转化为N+1帧搜索区域边缘图像,从N+1帧搜索区域边缘图像中获取幅值最大的k个特征点。
例如:
将第N帧车辆图像归一化至24*24像素,作为第N帧车辆模板图像,然后将第N帧车辆模板图像转化为第N帧车辆边缘图像,并从第N帧车辆边缘图像中获取24个幅值最大的特征点;
将N+1帧搜索区域归一化至24*24像素,作为N+1帧搜索区域边缘图像,然后将N+1帧搜索区域图像转化为N+1帧搜索区域边缘图像,并从N+1帧搜索区域边缘图像中获取24个幅值最大的特征点。
计算第N帧道路图像中的特征点和N+1帧搜索区域中的特征点之间的匹配度,并判断匹配成功的特征点的个数是否小于第一阈值。
步骤209:选用具有5个尺度8个方向的形同公式的2D Gabor滤波器,通过形同公式计算第N帧车辆边缘图像中k个特征点与N+1帧搜索区域边缘图像中k个特征点的2D Gabor特征向量,使得第N帧车辆边缘图像中每个特征点与N+1帧搜索区域边缘图像中每个特征点均产生一个40维的特征向量。
步骤210:根据第N帧车辆边缘图像中k个特征点的2D Gabor特征向量与N+1帧搜索区域边缘图像中k个特征点的2D Gabor特征向量,以欧几里得距离公式作为相似度函数计算第N帧车辆边缘图像中的特征点与N+1帧搜索区域边缘图像中的特征点的匹配度。
例如,设定第N帧车辆边缘图像中一个特征点为PM,其特征向量为M,N+1帧搜索区域边缘图像中一个特征点为PX,其特征向量为X,则特征点PM与特征点PX之间的欧几里得距离为:
在上述欧几里得距离公式中,DXM的值越小,则认为特征点PM与特征点PX之间相似度越大,匹配度越高,反之,DXM的值越大,则认为特征点PM与特征点PX之间相似度越小,匹配度越低。
判断第N帧车辆边缘图像中的特征点与N+1帧搜索区域边缘图像中的特征点的匹配度是否大于第二阈值;
若第N帧车辆边缘图像中的特征点与N+1帧搜索区域边缘图像中的特征点的匹配度不大于所述第二阈值,则判定第N帧车辆边缘图像中的特征点与N+1帧搜索区域边缘图像中的特征点匹配成功,执行步骤211。
若第N帧车辆边缘图像中的特征点与N+1帧搜索区域边缘图像中的特征点的匹配度大于所述第二阈值,则判定第N帧车辆边缘图像中的特征点与N+1帧搜索区域边缘图像中的特征点匹配失败。
若第N帧车辆边缘图像中的特征点与N+1帧搜索区域边缘图像中的特征点匹配成功,则将匹配成功的特征点的个数加一,若第N帧车辆边缘图像中的特征点与N+1帧搜索区域边缘图像中的特征点匹配失败,则匹配成功的特征点的个数不变。
对于上述欧几里得距离公式,设定第二阈值,当DXM的值小于第二阈值时,则认为特征点PM与特征点PX匹配成功,当DXM的值大于第二阈值时,则认为特征点PM与特征点PX匹配失败。
步骤211:统计所述匹配成功的特征点的个数,并判断匹配成功的特征点的个数是否小于第一阈值。
若匹配成功的特征点的个数不小于第一阈值,则执行步骤212;
若匹配成功的特征点的个数小于第一阈值,则执行步骤213。
其中,第一阈值为k/2,当匹配成功的特征点的个数不小于第一阈值时,确定第N帧道路图像中与N+1帧搜索区域中匹配度最高的特征点,输出匹配度最高的特征点的坐标,记为(xn+1,yn+1)作为N+1帧车辆的位置,将N+1帧车辆的位置代入方程组中,得出N+1帧车辆在X轴的速度分量vx,n+1、N+1帧车辆在Y轴的速度分量vy,n+1、N+1帧车辆在X轴的加速度分量ax,n+1、N+1帧车辆在Y轴的加速度分量ay,n+1;当匹配成功的特征点的个数小于第一阈值时,输出N+1帧车辆的位置预测值作为N+1帧车辆的位置,并输出N+1帧车辆在X轴的速度分量预测值作为N+1帧车辆在X轴的速度分量vx,n+1、N+1帧车辆在Y轴的速度分量预测值作为N+1帧车辆在Y轴的速度分量vy,n+1、N+1帧车辆在X轴的加速度分量预测值作为N+1帧车辆在X轴的加速度分量ax,n+1、N+1帧车辆在Y轴的加速度分量预测值作为N+1帧车辆在Y轴的加速度分量ay,n+1。
步骤212:确定第N帧道路图像中与N+1帧搜索区域中匹配度最高的特征点,输出匹配度最高的特征点处的车辆状态信息作为N+1帧车辆状态信息。
步骤213:输出N+1帧车辆状态信息预测值作为N+1帧车辆状态信息。
本发明实施例通过安装在车辆内部或外部的摄像设备可以清楚地采集到车辆前方的道路图像,从道路图像中选取第N帧道路图像,并从第N帧道路图像中获取第N帧车辆图像,通过车辆检测算法准确检测出第N帧车辆状态信息,然后通过卡尔曼滤波预测器预测出N+1帧车辆状态信息,同时测定车辆图像的大小确定N+1帧搜索区域,分别从第N帧道路图像中和N+1帧搜索区域中提取相同数目的特征点,通过2D Gabor滤波器计算第N帧道路图像中和N+1帧搜索区域中特征点的个数,并通过欧几里得距离计算第N帧道路图像中的特征点与N+1帧搜索区域中的特征点的匹配度,根据匹配成功的特征点的个数是否小于第一阈值,输出N+1帧车辆状态信息,即使在车辆行驶时有些部分受到其他物体的遮挡,也可以实现车辆的跟踪,保证车辆跟踪的连续性。
实施例三
参见图3,图3所示的实施例提供一种基于特征点匹配的车辆跟踪装置,该装置包括:
图像采集模块301,用于采集所述道路图像;
检测模块302,用于对于道路图像中的第N帧道路图像,检测第N帧车辆状态信息,N为正整数;
预测模块303,用于根据第N帧车辆状态信息,预测N+1帧车辆状态信息,得到N+1帧车辆状态信息预测值,并确定N+1帧搜索区域;
采集模块304,用于在第N帧道路图像中确定设定数目的特征点,并在N+1帧搜索区域中确定设定数目的特征点;
匹配模块305,用于计算第N帧道路图像中的特征点和N+1帧搜索区域中的特征点之间的匹配度,并判断匹配成功的特征点的个数是否小于第一阈值;
输出模块306,用于在匹配成功的特征点的个数不小于所述第一阈值时,确定第N帧道路图像中与N+1帧搜索区域中匹配度最高的特征点,输出匹配度最高的特征点处的车辆状态信息作为N+1帧车辆状态信息,或在匹配成功的特征点的个数小于所述第一阈值时,输出N+1帧车辆状态信息预测值作为N+1帧车辆状态信息。
进一步地,采集模块304包括:
获取单元,用于获取第N帧道路图像中第N帧车辆图像;
转化单元,用于将第N帧车辆图像归一化为m*m像素,并转化为第N帧车辆边缘图像,以及将N+1帧搜索区域归一化为m*m像素,并转化为N+1帧搜索区域边缘图像,m为正数;
采集单元,用于获取第N帧车辆边缘图像中幅值最大的k个特征点,并获取N+1帧搜索区域边缘图像中幅值最大的k个特征点,k为正整数,k不小于2。
进一步地,匹配模块305包括:
计算单元,用于计算第N帧车辆边缘图像中特征点的特征向量和N+1帧搜索区域边缘图像中特征点的特征向量;
匹配单元,用于根据第N帧车辆边缘图像中的特征点的特征向量和N+1帧搜索区域边缘图像中的特征点的特征向量,计算第N帧车辆边缘图像中的特征点和N+1帧搜索区域边缘图像中的特征点之间的匹配度,并判断匹配成功的特征点的个数是否小于第一阈值;
第一判断单元,用于判断第N帧车辆边缘图像中的特征点和N+1帧搜索区域边缘图像中的特征点的匹配度是否大于第二阈值;
第二判断单元,用于判断第N帧车辆边缘图像中的特征点和N+1帧搜索区域边缘图像中的特征点匹配成功的个数是否小于第一阈值。
进一步地,输出模块306包括:
第一输出单元,用于在匹配成功的特征点的个数不小于所述第一阈值时,确定第N帧车辆边缘图像中与N+1帧搜索区域边缘图像中匹配度最高的特征点,输出匹配度最高的特征点处的车辆状态信息作为N+1帧车辆状态信息;
第二输出单元,用于在匹配成功的特征点的个数小于所述第一阈值时,输出N+1帧车辆状态信息预测值作为N+1帧车辆状态信息。
本发明实施例通过分别从第N帧道路图像中和N+1帧搜索区域中提取相同数目的特征点,并计算第N帧道路图像中的特征点与N+1帧搜索区域中的特征点的匹配度,根据匹配成功的特征点的个数是否小于第一阈值,输出N+1帧车辆状态信息,即使在车辆行驶时有些部分受到其他物体的遮挡,也可以实现车辆的跟踪,保证车辆跟踪的连续性。
需要说明的是:上述实施例提供的一种基于特征点匹配的车辆跟踪装置,该装置在进行车辆跟踪时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的一种基于特征点匹配的车辆跟踪方法,该方法中所提到的第N帧及N+1帧,并不具体指代道路图像中确定的某一帧,对于道路图像中任意一帧均可以采用本发明实施例提供的方法对车辆进行跟踪;同时,上述实施例提供的一种基于特征点匹配的车辆跟踪的方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种基于特征点匹配的车辆跟踪方法,其特征在于,所述方法包括:
采集道路图像;
对于所述道路图像中的第N帧道路图像,检测第N帧车辆状态信息,N为正整数;
根据所述第N帧车辆状态信息,预测N+1帧车辆状态信息,得到N+1帧车辆状态信息预测值,并确定N+1帧搜索区域;
在所述第N帧道路图像中确定设定数目的特征点,并在所述N+1帧搜索区域中确定所述设定数目的特征点;
计算所述第N帧道路图像中的特征点和所述N+1帧搜索区域中的特征点之间的匹配度;
判断匹配成功的特征点的个数是否小于第一阈值;
若所述匹配成功的特征点的个数不小于所述第一阈值,则确定所述第N帧道路图像中与所述N+1帧搜索区域中匹配度最高的特征点,输出所述匹配度最高的特征点处的车辆状态信息作为N+1帧车辆状态信息;
若所述匹配成功的特征点的个数小于所述第一阈值,则输出所述N+1帧车辆状态信息预测值作为所述N+1帧车辆状态信息。
2.根据权利要求1所述的方法,其特征在于,在所述第N帧道路图像中确定设定数目的特征点,并在所述N+1帧搜索区域中确定所述设定数目的特征点,包括:
从所述第N帧道路图像中获取第N帧车辆图像;
将所述第N帧车辆图像归一化为m*m像素,作为第N帧车辆模板图像,将所述第N帧车辆模板图像转化为第N帧车辆边缘图像,获取所述第N帧车辆边缘图像中幅值最大的k个特征点,m为正数,k为正整数,且k不小于2;
将所述N+1帧搜索区域归一化为m*m像素,作为N+1帧搜索区域图像,将所述N+1帧搜索区域图像转化为N+1帧搜索区域边缘图像,获取所述N+1帧搜索区域边缘图像中幅值最大的k个特征点。
3.根据权利要求2所述的方法,其特征在于,计算所述第N帧道路图像中的特征点和所述N+1帧搜索区域中的特征点之间的匹配度,包括:
通过2D Gabor滤波器,建立形同公式,分别获取所述第N帧车辆边缘图像中k个特征点与所述N+1帧搜索区域边缘图像中k个特征点的2D Gabor特征向量;
根据所述第N帧车辆边缘图像中k个特征点的2D Gabor特征向量与所述N+1帧搜索区域边缘图像中k个特征点的2D Gabor特征向量,以相似度函数计算所述第N帧车辆边缘图像中的特征点与所述N+1帧搜索区域边缘图像中的特征点的匹配度。
4.根据权利要求3所述的方法,其特征在于,判断匹配成功的特征点的个数是否小于第一阈值之前,所述方法还包括:
判断所述第N帧车辆边缘图像中的特征点与所述N+1帧搜索区域边缘图像中的特征点的匹配度是否大于第二阈值;
若所述第N帧车辆边缘图像中的特征点与所述N+1帧搜索区域边缘图像中的特征点的匹配度不大于所述第二阈值,则所述第N帧车辆边缘图像中的特征点与所述N+1帧搜索区域边缘图像中的特征点匹配成功;
若所述第N帧车辆边缘图像中的特征点与所述N+1帧搜索区域边缘图像中的特征点的匹配度大于所述第二阈值,则所述第N帧车辆边缘图像中的特征点与所述N+1帧搜索区域边缘图像中的特征点匹配失败。
5.根据权利要求4所述的方法,其特征在于,对于所述道路图像中的第N帧道路图像,检测第N帧车辆状态信息,N为正整数,包括:
以所述第N帧车辆图像中任意一点作为原点,建立二维坐标系;
根据车辆检测算法,检测第N帧车辆图像底部边缘中点的坐标,得到第N帧车辆的位置;
设定第N帧车辆在X轴的速度分量、第N帧车辆在Y轴的速度分量、第N帧车辆在X轴的加速度分量和第N帧车辆在Y轴的加速度分量均为零。
6.根据权利要求5所述的方法,其特征在于,根据所述第N帧车辆状态信息,预测N+1帧车辆状态信息,得到N+1帧车辆状态信息预测值,并确定N+1帧搜索区域,包括:
根据所述第N帧车辆的位置,通过卡尔曼滤波预测器,建立卡尔曼滤波状态方程,预测在所述二维坐标系中N+1帧车辆的位置,得到N+1帧车辆的位置预测值、N+1帧车辆在X轴的速度分量预测值、N+1帧车辆在Y轴的速度分量预测值、N+1帧车辆在X轴的加速度分量预测值和N+1帧车辆在Y轴的加速度分量预测值;
测定所述第N帧车辆图像的大小,以所述N+1帧车辆的位置预测值作为所述N+1帧搜索区域的中心点,确定所述N+1帧搜索区域,若所述第N帧车辆图像的大小为a*b像素,则设定所述N+1帧搜索区域的大小为2a*2b像素,a和b均为正数。
7.一种基于特征点匹配的车辆跟踪装置,其特征在于,所述装置包括:
图像采集模块,用于采集所述道路图像;
检测模块,用于对于所述道路图像中的第N帧道路图像,检测第N帧车辆状态信息,N为正整数;
预测模块,用于根据所述第N帧车辆状态信息,预测N+1帧车辆状态信息,得到N+1帧车辆状态信息预测值,并确定N+1帧搜索区域;
采集模块,用于在所述第N帧道路图像中确定设定数目的特征点,并在所述N+1帧搜索区域中确定所述设定数目的特征点;
匹配模块,用于计算所述第N帧道路图像中的特征点和所述N+1帧搜索区域中的特征点之间的匹配度,并判断匹配成功的特征点的个数是否小于第一阈值;
输出模块,用于在所述匹配成功的特征点的个数不小于所述第一阈值时,确定所述第N帧道路图像中与所述N+1帧搜索区域中匹配度最高的特征点,输出所述匹配度最高的特征点处的车辆状态信息作为N+1帧车辆状态信息,或在所述匹配成功的特征点的个数小于所述第一阈值时,输出所述N+1帧车辆状态信息预测值作为所述N+1帧车辆状态信息。
8.根据权利要求7所述的装置,其特征在于,所述采集模块包括:
获取单元,用于获取所述第N帧道路图像中第N帧车辆图像;
转化单元,用于将所述第N帧车辆图像归一化为m*m像素,并转化为第N帧车辆边缘图像,以及将所述N+1帧搜索区域归一化为m*m像素,并转化为N+1帧搜索区域边缘图像,m为正数;
采集单元,用于获取所述第N帧车辆边缘图像中幅值最大的k个特征点,并获取所述N+1帧搜索区域边缘图像中幅值最大的k个特征点,k为正整数,k不小于2。
9.根据权利要求8所述的装置,其特征在于,所述匹配模块包括:
计算单元,用于计算第N帧车辆边缘图像中特征点的特征向量和N+1帧搜索区域边缘图像中特征点的特征向量;
匹配单元,用于根据所述第N帧车辆边缘图像中的特征点的特征向量和所述N+1帧搜索区域边缘图像中的特征点的特征向量,计算所述第N帧车辆边缘图像中的特征点和所述N+1帧搜索区域边缘图像中的特征点之间的匹配度,并判断匹配成功的特征点的个数是否小于第一阈值;
第一判断单元,用于判断所述第N帧车辆边缘图像中的特征点和所述N+1帧搜索区域边缘图像中的特征点的匹配度是否大于第二阈值;
第二判断单元,用于判断所述第N帧车辆边缘图像中的特征点和所述N+1帧搜索区域边缘图像中的特征点匹配成功的个数是否小于第一阈值。
10.根据权利要求9所述的装置,其特征在于,所述输出模块包括:
第一输出单元,用于在所述匹配成功的特征点的个数不小于所述第一阈值时,确定所述第N帧车辆边缘图像中与所述N+1帧搜索区域边缘图像中匹配度最高的特征点,输出所述匹配度最高的特征点处的车辆状态信息作为N+1帧车辆状态信息;
第二输出单元,用于在所述匹配成功的特征点的个数小于所述第一阈值时,输出所述N+1帧车辆状态信息预测值作为所述N+1帧车辆状态信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410068027.4A CN103854293A (zh) | 2014-02-26 | 2014-02-26 | 一种基于特征点匹配的车辆跟踪方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410068027.4A CN103854293A (zh) | 2014-02-26 | 2014-02-26 | 一种基于特征点匹配的车辆跟踪方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103854293A true CN103854293A (zh) | 2014-06-11 |
Family
ID=50861904
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410068027.4A Pending CN103854293A (zh) | 2014-02-26 | 2014-02-26 | 一种基于特征点匹配的车辆跟踪方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103854293A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109712168A (zh) * | 2018-11-14 | 2019-05-03 | 联想(北京)有限公司 | 一种目标跟踪方法及电子设备、装置及存储介质 |
CN109712173A (zh) * | 2018-12-05 | 2019-05-03 | 北京空间机电研究所 | 一种基于卡尔曼滤波器的图像位置运动估计方法 |
CN109765397A (zh) * | 2019-01-29 | 2019-05-17 | 天津美腾科技有限公司 | 测速方法、装置及系统 |
CN112766216A (zh) * | 2021-01-29 | 2021-05-07 | 深圳市捷顺科技实业股份有限公司 | 车辆驶入停车位检测方法、装置、电子设备及存储介质 |
CN112767449A (zh) * | 2021-01-29 | 2021-05-07 | 深圳市捷顺科技实业股份有限公司 | 车辆驶出停车位检测方法、装置、电子设备及存储介质 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102034355A (zh) * | 2010-12-28 | 2011-04-27 | 丁天 | 一种基于特征点匹配的车辆检测及跟踪方法 |
-
2014
- 2014-02-26 CN CN201410068027.4A patent/CN103854293A/zh active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102034355A (zh) * | 2010-12-28 | 2011-04-27 | 丁天 | 一种基于特征点匹配的车辆检测及跟踪方法 |
Non-Patent Citations (4)
Title |
---|
KIRAN MANTRIPRAGADA 等: "Vehicle Tracking Using Feature Matching and Kalman Filtering", 《22ND INTERNATIONAL CONGRESS OF MECHANICAL ENGINEERING (COBEM 2013)》, 7 November 2013 (2013-11-07), pages 361 - 371 * |
王丹: "基于Gabor小波的特征提取与跟踪方法研究", 《中国优秀硕士学位论文全文数据库信息科技辑》, no. 4, 15 October 2007 (2007-10-15), pages 136 - 46 * |
王进花 等: "基于特征点的运动汽车跟踪算法研究", 《电气自动化》, vol. 33, no. 6, 6 March 2011 (2011-03-06), pages 14 - 16 * |
王进花: "基于视觉的运动汽车跟踪技术研究", 《中国优秀硕士学位论文全文数据库信息科技辑》, no. 4, 15 April 2011 (2011-04-15), pages 138 - 1145 * |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109712168A (zh) * | 2018-11-14 | 2019-05-03 | 联想(北京)有限公司 | 一种目标跟踪方法及电子设备、装置及存储介质 |
CN109712173A (zh) * | 2018-12-05 | 2019-05-03 | 北京空间机电研究所 | 一种基于卡尔曼滤波器的图像位置运动估计方法 |
CN109765397A (zh) * | 2019-01-29 | 2019-05-17 | 天津美腾科技有限公司 | 测速方法、装置及系统 |
CN112766216A (zh) * | 2021-01-29 | 2021-05-07 | 深圳市捷顺科技实业股份有限公司 | 车辆驶入停车位检测方法、装置、电子设备及存储介质 |
CN112767449A (zh) * | 2021-01-29 | 2021-05-07 | 深圳市捷顺科技实业股份有限公司 | 车辆驶出停车位检测方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN205992300U (zh) | 用于提供利用人行横道识别结果的引导信息的电子装置 | |
CN109541583B (zh) | 一种前车距离检测方法及系统 | |
Sivaraman et al. | A review of recent developments in vision-based vehicle detection | |
CN102765365B (zh) | 基于机器视觉的行人检测方法及行人防撞预警系统 | |
CN108638999B (zh) | 一种基于360度环视输入的防碰撞预警系统及方法 | |
CN106774306B (zh) | 应用于无人驾驶车辆的启动检测方法、装置和系统 | |
CN107804226A (zh) | 拖车车道偏离警告和摇摆警报 | |
CN106537180A (zh) | 用于用针对行人的主动制动的摄影机输入缓解雷达传感器限制的方法 | |
CN104573646A (zh) | 基于激光雷达和双目相机的车前行人检测方法及系统 | |
CN103854293A (zh) | 一种基于特征点匹配的车辆跟踪方法及装置 | |
CN105631414A (zh) | 一种基于贝叶斯分类器的车载多障碍物分类装置及方法 | |
CN102997900A (zh) | 外界识别方法、装置以及车辆系统 | |
CN105488453A (zh) | 一种基于图像处理的驾驶员未系安全带检测识别方法 | |
CN105260701A (zh) | 一种适用于复杂场景下的前方车辆检测方法 | |
CN107798688B (zh) | 运动目标识别方法、预警方法以及汽车防追尾预警装置 | |
US20180075749A1 (en) | Forward collision warning system and method | |
CN110341621B (zh) | 一种障碍物检测方法及装置 | |
US10108866B2 (en) | Method and system for robust curb and bump detection from front or rear monocular cameras | |
CN111497741A (zh) | 碰撞预警方法及装置 | |
CN106570487A (zh) | 物体间的碰撞预测方法和装置 | |
CN110103954B (zh) | 基于电控的汽车防追尾预警装置及方法 | |
CN113657265B (zh) | 一种车辆距离探测方法、系统、设备及介质 | |
Chen | Road vehicle recognition algorithm in safety assistant driving based on artificial intelligence | |
KR101407901B1 (ko) | 차량인식시스템 | |
CN111332306A (zh) | 一种基于机器视觉的交通道路感知辅助驾驶预警装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20140611 |