CN103226834B - 一种图像运动目标特征点快速搜索方法 - Google Patents
一种图像运动目标特征点快速搜索方法 Download PDFInfo
- Publication number
- CN103226834B CN103226834B CN201310099003.0A CN201310099003A CN103226834B CN 103226834 B CN103226834 B CN 103226834B CN 201310099003 A CN201310099003 A CN 201310099003A CN 103226834 B CN103226834 B CN 103226834B
- Authority
- CN
- China
- Prior art keywords
- match point
- point
- field picture
- threshold value
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Image Analysis (AREA)
Abstract
本发明一种图像运动目标特征点快速搜索方法,包括图像块分割,计算第一帧图像和第二帧图像以及第三帧图像和第二帧图像中以像素点为中心的图像块的灰度差值的绝对值和,标记目标块,进行边缘检测,寻找最佳角点,创建以角点为中心的基本匹配模板,寻找到匹配点,保存匹配点信息,重复步骤,预测新的匹配点,获取车辆行驶轨迹线,以前一帧记录的角点位置为依据,与当前帧中的记录的目标的匹配点位置做比较,确定是否为新的车辆目标。本发明的图像运动目标特征点快速搜索方法,与现有技术相比,可对视频范围内所有车辆目标进行快速搜索匹配跟踪,能够快速、准确的得到跟踪轨迹及有效信息,并且降低了计算复杂度和时间复杂度。
Description
技术领域
本发明属于视频检测领域,具体涉及一种图像运动目标特征点快速搜索方法。
背景技术
运动物体跟踪是计算机视觉和模式识别领域研究的一个热点,在安全监控、运动检测等领域有较大的前景。运动物体跟踪包含运动目标的检测和跟踪两个部分。
物体的跟踪就是利用运动物体的特征,选择适当的匹配与搜索算法,寻找与目标相似的位置,实现对运动物体的跟踪。目前最常用的搜索方法就是全搜索法。全搜索法,即对搜索范围内的所有位置依次进行计算,选择与模板最相似的小块作为匹配块,该方法计算复杂度高,但是精确度最高。为了降低计算复杂度,搜索范围的选取变得十分重要。搜索区域范围的选择要覆盖目标可能运动到的最大位移范围,否则可能会将非匹配块的小块误选为匹配块,造成跟踪误差,但搜索区域范围也不能太大,这样匹配计算量会相当大。因此,如何合理地选择搜索范围至关重要。
现在常用的搜索方法有三步搜索法、菱形搜索法和全搜索法。三步搜索法是按某个步长,计算在确定中心点周围8个位置(即搜索位置)处小块与模版相似性,得到相似性最好的位置,之后以该位置为中心,将步长减半,重新遍历8个搜索位置,并以此类推。步长为1时的位置就是最终匹配位置。菱形搜索法与三步搜索法类似,只是将8个搜索位置按菱形分布。全搜索法的搜索范围是以中心点为中心的M*N大小的矩形范围。其中,三步搜索法和菱形搜索法,不能遍历搜索区域中所有位置,误差较大,而全搜索法的搜索范围大,计算量大。
发明内容
针对现有技术的不足和缺陷,本发明的目的在于,提供一种图像运动目标特征点快速搜索方法,该方法可以合理地选取搜索范围,有效的降低计算复杂度。
为了实现上述任务,本发明采用如下技术方案予以实现:
一种图像运动目标特征点快速搜索方法,该方法按照以下步骤进行:
步骤一,将视频图像的每一帧分割成多个块区域,然后采用帧差法对视频图像进行运动目标检测,分别按图像块计算第一帧图像和第二帧图像以及第三帧图像和第二帧图像中以像素点为中心的图像块的灰度差值的绝对值和,
当两次帧差所得的绝对值同时大于阈值A,则该块为目标块,并将该目标块内部所有像素的灰度值赋值为255,
当两次帧差所得的绝对值有一个小于或等于设定的阈值A,则该块为背景块,并将该背景块内部所有像素的灰度值赋值为0,其中:
所述的阈值A的取值范围为(20~30)×块的面积;
步骤二,对经过帧差法检测后的二值化图像进行边缘检测,寻找最佳角点,即当纵向、横向、左倾斜45度方向和右倾斜45度方向四个方向检测数据的最小值大于阈值B时,保留角点位置,所述的角点即为运动目标特征点,其中:
所述的阈值B的取值范围为48×(20~30);
步骤三,创建以角点为中心的5×5矩形大小的基本匹配模板作为车辆的特征信息,同时创建一个目标数据记录结构体数组,记录这些车辆目标的具体位置以及匹配跟踪计数器信息,匹配跟踪计数器第一次初始化为零;
步骤四,若匹配跟踪计数器未超过阈值C,则在下一帧图像进行模板匹配,使用全搜索,在以角点为中心的矩形搜索框中寻找到匹配点,保存匹配点信息,所述的匹配点即为新的运动目标特征点,其中:
所述的阈值C的取值范围为4~6;
步骤五,若匹配跟踪计数器超过阈值C,则在下一帧图像中根据已有匹配点信息预测新的匹配点位置,然后根据已有匹配点和预测匹配点信息,获取车辆行驶轨迹线,设定三角形搜索范围,即以前一帧匹配点位置为顶点,在下一帧图像中沿着匹配点到预测点的方向,划定三角形搜索范围,接下来在新的搜索范围内进行模版匹配,寻找到匹配点,保存匹配点信息;
步骤六,重复步骤一至步骤五的处理方法对从第四帧图像起的所有连续的图像进行处理,以前一帧记录的角点位置为依据,与当前帧中的记录的目标的匹配点位置做比较,当两者位置的差的绝对值大于一定的阈值D,表示当前帧中该匹配点所在的目标块为新的车辆目标,再按照步骤三、步骤四、步骤五进行处理,其中:
所述的阈值D的取值为55。
本发明的图像运动目标特征点快速搜索方法,与现有技术相比,可对视频范围内所有车辆目标进行快速搜索匹配跟踪,能够快速、准确的得到跟踪轨迹及有效信息,并且降低了计算复杂度和时间复杂度。
附图说明
图1为第339帧图像。
图2为第339帧图像与第340帧图像的帧差结果。
图3为第339帧图像与第338帧图像的帧差结果。
图4为两次帧差结果的二值化图像。
图5为已标出角点的第339帧图像。
图6为三角形搜索范围示意图。
图7为已画出跟踪线的第355帧图像。
以下结合附图和实施例对本发明的内容作进一步详细说明。
具体实施方式
本实施例给出一种图像运动目标特征点快速搜索方法,以块为单位进行处理,通过已有匹配点和预测匹配点信息,获取车辆行驶轨迹线,需要说明的是,本发明的方法过程中所处理的图像是视频中的沿正时间序列的第一帧图像、第二帧图像、第三帧图像、…、第m(m为正整数)帧图像。
设每一帧视频图像的大小为W*H,每个块的面积大小为w*h,其中W为每一帧视频视频图像水平方向的像素,H为每一帧视频图像垂直方向的像素,w为每个块区域的宽度,h为每个块区域的高度。
本实施例的方法具体采用以下步骤实现:
步骤一,将每幅图像从上到下,从左到右分成大小为w*h的图像块,图像块大小为6*8,然后采用帧差法对视频图像进行运动目标检测,分别按图像块计算第一帧图像和第二帧图像以及第三帧图像和第二帧图像中以像素点为中心的图像块的灰度差值的绝对值和,
当两次帧差所得的绝对值同时大于设定的阈值A,则该块为目标块,并将该目标块内部所有像素的灰度值赋值为255,
当两次帧差所得的绝对值有一个小于或等于设定的阈值A,则该块为背景块,并将该背景块内部所有像素的灰度值赋值为0,其中:
所述的阈值A的取值范围为(20~30)×(w*h);
步骤二,对经过帧差法检测后的二值化图像进行边缘检测,寻找最佳角点,即当纵向、横向、左倾斜45度方向和右倾斜45度方向四个方向检测数据的最小值大于阈值B时,保留角点位置,所述的角点即为运动目标特征点,其中:
所述的阈值B的取值范围为48×(20~30);
步骤三,创建以角点为中心的5×5矩形大小的基本匹配模板作为车辆的特征信息,同时创建一个目标数据记录结构体数组,记录这些车辆目标的具体位置以及匹配跟踪计数器信息,匹配跟踪计数器第一次初始化为零;
步骤四,若匹配跟踪计数器未超过阈值C,则在下一帧图像进行模板匹配,使用全搜索,在以角点为中心的矩形搜索框中寻找到匹配点,保存匹配点信息,所述的匹配点即为新的运动目标特征点,其中:
所述的阈值C的取值范围为4~6;
步骤五,若匹配跟踪计数器超过阈值C,则在下一帧图像中根据已有匹配点信息预测新的匹配点位置,然后根据已有匹配点和预测匹配点信息,获取车辆行驶轨迹线,设定三角形搜索范围,即以前一帧匹配点位置为顶点,在下一帧图像中沿着匹配点到预测点的方向,划定三角形搜索范围,接下来在新的搜索范围内进行模版匹配,寻找到匹配点,保存匹配点信息;
步骤六,重复步骤一至步骤五的处理方法对从第四帧图像起的所有连续的图像进行处理,以前一帧记录的角点位置为依据,与当前帧中的记录的目标的匹配点位置做比较,当两者位置的差的绝对值大于一定的阈值D,表示当前帧中该匹配点所在的目标块为新的车辆目标,再按照步骤三、步骤四、步骤五进行处理,其中:
所述的阈值D的取值为55。
以下给出本发明的具体实施例,需要说明的是本发明并不局限于以下具体实施例,凡在本申请技术方案基础上做的等同变换均落入本发明的保护范围。
实施例:
如图1至图7所示,是西安市某路段的实时路况视频图像,该视频的采样频率是25帧每秒,视频图像大小为720×288,每块的大小为8×6,则每帧视频图像分成90×48个块,
选取的阈值A为48×20;
选取的阈值B为48×20;
选取的阈值C为4;
选取的阈值D为55;
遵从上述方法依次对第339帧至第355帧图像进行处理。
视频正播时,车辆目标第一次被标记在第339帧图像中,如图1所示,采用帧差法对视频图像进行运动目标检测,第339帧图像与第338帧图像的帧差结果如图3所示,第339帧图像与第340帧图像的帧差结果如图2所示,第339帧图像两次帧差后的二值化图像如图4所示,二值化图像中有一个目标,显然是车辆目标,对此目标做边缘检测,寻找最佳角点,当四个方向检测数据的最小值满足条件时,得到角点,得到第339帧图像中车辆目标的最佳角点,如图5所示。
当匹配跟踪计数器超过规定阈值4时,根据已有的1、2、3、4个匹配点求得预测点5的位置,以前一帧匹配点位置(即点4)为顶点,在下一帧图像中沿着匹配点到预测点的矢量方向,即点4到点5的矢量方向,划定三角形搜索范围,三角形为直角三角形,高为点4与点5的纵向距离差的绝对值的2倍,并使点5到以点4为顶点的两边的横向距离相同,具体表示如图6所示。
按照上述方法对车辆目标进行多次匹配跟踪,得到了较好的跟踪轨迹,如图7所示。此实例表明,本发明的方法不仅减少了计算量,缩小了搜索范围,还能够实现车辆目标的跟踪,得到较好的轨迹。
Claims (1)
1.一种图像运动目标特征点快速搜索方法,其特征在于,该方法按照以下步骤进行:
步骤一,将视频图像的每一帧分割成多个块区域,然后采用帧差法对视频图像进行运动目标检测,分别按图像块计算第一帧图像和第二帧图像以及第三帧图像和第二帧图像中以像素点为中心的图像块的灰度差值的绝对值和,
当两次帧差所得的绝对值同时大于阈值A,则该块为目标块,并将该目标块内部所有像素的灰度值赋值为255,
当两次帧差所得的绝对值有一个小于或等于设定的阈值A,则该块为背景块,并将该背景块内部所有像素的灰度值赋值为0,其中:
所述的阈值A的取值范围为(20~30)×块的面积;
步骤二,对经过帧差法检测后的二值化图像进行边缘检测,寻找最佳角点,即当纵向、横向、左倾斜45度方向和右倾斜45度方向四个方向检测数据的最小值大于阈值B时,保留角点位置,所述的角点即为运动目标特征点,其中:
所述的阈值B的取值范围为48×(20~30);
步骤三,创建以角点为中心的5×5矩形大小的基本匹配模板作为车辆的特征信息,同时创建一个目标数据记录结构体数组,记录这些车辆目标的具体位置以及匹配跟踪计数器信息,匹配跟踪计数器第一次初始化为零;
步骤四,若匹配跟踪计数器未超过阈值C,则在下一帧图像进行模板匹配,使用全搜索,在以角点为中心的矩形搜索框中寻找到匹配点,保存匹配点信息,所述的匹配点即为新的运动目标特征点,其中:
所述的阈值C的取值范围为4~6;
步骤五,若匹配跟踪计数器超过阈值C,则在下一帧图像中根据已有匹配点信息预测新的匹配点位置,然后根据已有匹配点和预测匹配点信息,获取车辆行驶轨迹线,设定三角形搜索范围,即以前一帧匹配点位置为顶点,在下一帧图像中沿着匹配点到预测点的方向,划定三角形搜索范围,接下来在新的搜索范围内进行模版匹配,寻找到匹配点,保存匹配点信息;
步骤六,重复步骤一至步骤五的处理方法对从第四帧图像起的所有连续的图像进行处理,以前一帧记录的角点位置为依据,与当前帧中的记录的目标的匹配点位置做比较,当两者位置的差的绝对值大于一定的阈值D,表示当前帧中该匹配点所在的目标块为新的车辆目标,再按照步骤三、步骤四、步骤五进行处理,其中:
所述的阈值D的取值为55。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310099003.0A CN103226834B (zh) | 2013-03-26 | 2013-03-26 | 一种图像运动目标特征点快速搜索方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310099003.0A CN103226834B (zh) | 2013-03-26 | 2013-03-26 | 一种图像运动目标特征点快速搜索方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103226834A CN103226834A (zh) | 2013-07-31 |
CN103226834B true CN103226834B (zh) | 2015-10-21 |
Family
ID=48837269
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310099003.0A Active CN103226834B (zh) | 2013-03-26 | 2013-03-26 | 一种图像运动目标特征点快速搜索方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103226834B (zh) |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106910200B (zh) * | 2015-12-23 | 2019-11-08 | 中国石油天然气股份有限公司 | 一种基于相位信息的运动目标分割方法 |
CN105704496A (zh) * | 2016-03-25 | 2016-06-22 | 符锌砂 | 一种基于边缘检测的自适应模板匹配算法 |
JP2019532431A (ja) * | 2016-10-14 | 2019-11-07 | 富士通株式会社 | 車両の逆行の検出装置、検出方法及び電子機器 |
CN107330943B (zh) * | 2017-06-26 | 2023-07-21 | 乐融致新电子科技(天津)有限公司 | 一种定位标识匹配方法、装置及电子设备 |
CN109325962B (zh) * | 2017-07-31 | 2022-04-12 | 株式会社理光 | 信息处理方法、装置、设备以及计算机可读存储介质 |
CN110363787A (zh) * | 2018-03-26 | 2019-10-22 | 北京市商汤科技开发有限公司 | 信息获取方法和系统、电子设备、程序和介质 |
CN108665478A (zh) * | 2018-05-11 | 2018-10-16 | 西安天和防务技术股份有限公司 | 一种复杂场景下多目标数据关联方法 |
CN109492608B (zh) * | 2018-11-27 | 2019-11-05 | 腾讯科技(深圳)有限公司 | 图像分割方法、装置、计算机设备及存储介质 |
CN109766953B (zh) * | 2019-01-22 | 2021-07-13 | 中国人民公安大学 | 对象识别方法及装置 |
CN110634154B (zh) * | 2019-09-20 | 2023-04-18 | 湖南科技大学 | 一种面向速度大范围变化目标跟踪的模板匹配方法 |
CN112584234B (zh) * | 2020-12-09 | 2023-06-16 | 广州虎牙科技有限公司 | 视频图像的补帧方法及相关装置 |
CN112561962A (zh) * | 2020-12-15 | 2021-03-26 | 北京伟杰东博信息科技有限公司 | 一种目标对象的跟踪方法及系统 |
CN112967310B (zh) * | 2021-02-04 | 2023-07-14 | 成都国翼电子技术有限公司 | 一种基于fpga的模板匹配加速方法 |
CN113158953B (zh) * | 2021-04-30 | 2022-11-25 | 青岛海信智慧生活科技股份有限公司 | 一种人员查找方法、装置、设备及介质 |
CN113362390B (zh) * | 2021-06-21 | 2023-03-21 | 武汉理工大学 | 一种基于椭圆检测的快速圆形目标定位视频处理方法 |
CN114860976B (zh) * | 2022-04-29 | 2023-05-05 | 长沙公交智慧大数据科技有限公司 | 一种基于大数据的图像数据查询方法和系统 |
CN117197507B (zh) * | 2023-11-07 | 2024-02-09 | 北京闪马智建科技有限公司 | 图像块的确定方法及装置、存储介质及电子装置 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101159855A (zh) * | 2007-11-14 | 2008-04-09 | 南京优科漫科技有限公司 | 基于特征点分析的多目标分离预测方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4242796B2 (ja) * | 2004-03-12 | 2009-03-25 | パナソニック株式会社 | 画像認識方法及び画像認識装置 |
-
2013
- 2013-03-26 CN CN201310099003.0A patent/CN103226834B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101159855A (zh) * | 2007-11-14 | 2008-04-09 | 南京优科漫科技有限公司 | 基于特征点分析的多目标分离预测方法 |
Non-Patent Citations (2)
Title |
---|
Moravec和Harris角点检测方法比较研究;卢瑜 等;《计算机技术与发展》;20110630;第21卷(第6期);第95-97页,第100页 * |
Object tracking using SIFT features and mean shift;Huiyu Zhou et al.;《Computer Vision and Image Understanding》;20090331;第113卷(第3期);第345-352页 * |
Also Published As
Publication number | Publication date |
---|---|
CN103226834A (zh) | 2013-07-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103226834B (zh) | 一种图像运动目标特征点快速搜索方法 | |
CN108596129B (zh) | 一种基于智能视频分析技术的车辆越线检测方法 | |
CN103903019B (zh) | 一种多车道车辆轨迹时空图的自动生成方法 | |
CN103065331B (zh) | 基于空时域边缘和颜色特征关联的目标跟踪方法 | |
CN104200495B (zh) | 一种视频监控中的多目标跟踪方法 | |
CN106778712B (zh) | 一种多目标检测与跟踪方法 | |
CN104282020A (zh) | 一种基于目标运动轨迹的车辆速度检测方法 | |
CN103425764B (zh) | 一种基于视频的车辆匹配方法 | |
CN104239870B (zh) | 一种基于曲线弧分割的椭圆检测方法 | |
CN104318258A (zh) | 一种基于时域模糊和卡尔曼滤波器的车道线检测方法 | |
CN104700414A (zh) | 一种基于车载双目相机的前方道路行人快速测距方法 | |
CN103886325B (zh) | 一种分块的循环矩阵视频跟踪方法 | |
CN103679702A (zh) | 一种基于图像边缘矢量的匹配方法 | |
CN103268616A (zh) | 多特征多传感器的移动机器人运动人体跟踪方法 | |
CN104574439A (zh) | 一种融合卡尔曼滤波与tld算法的目标跟踪方法 | |
CN103324936A (zh) | 一种基于多传感器融合的车辆下边界检测方法 | |
CN104463903A (zh) | 一种基于目标行为分析的行人图像实时检测方法 | |
CN104835182A (zh) | 摄像机上实现动态目标实时跟踪的方法 | |
CN103150550B (zh) | 一种基于运动轨迹分析的道路行人事件检测方法 | |
Tsintotas et al. | DOSeqSLAM: Dynamic on-line sequence based loop closure detection algorithm for SLAM | |
CN103345743A (zh) | 一种用于电池尾端智能探伤的图像分割算法 | |
CN103440785A (zh) | 一种快速的车道偏移警示方法 | |
CN115311617A (zh) | 城轨车站区域客流信息获取方法及系统 | |
CN104268902A (zh) | 面向工业现场的多目标视频跟踪方法 | |
CN114511803A (zh) | 一种面向视觉跟踪任务的目标遮挡检测方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |