CN107292932B - 基于图像膨胀率的迎面视频测速方法 - Google Patents

基于图像膨胀率的迎面视频测速方法 Download PDF

Info

Publication number
CN107292932B
CN107292932B CN201610212506.8A CN201610212506A CN107292932B CN 107292932 B CN107292932 B CN 107292932B CN 201610212506 A CN201610212506 A CN 201610212506A CN 107292932 B CN107292932 B CN 107292932B
Authority
CN
China
Prior art keywords
image
time
speed
video
characteristic line
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201610212506.8A
Other languages
English (en)
Other versions
CN107292932A (zh
Inventor
杨小波
张晓云
杨智淳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jiaotong University
Original Assignee
Shanghai Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jiaotong University filed Critical Shanghai Jiaotong University
Priority to CN201610212506.8A priority Critical patent/CN107292932B/zh
Publication of CN107292932A publication Critical patent/CN107292932A/zh
Application granted granted Critical
Publication of CN107292932B publication Critical patent/CN107292932B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/052Detecting movement of traffic to be counted or controlled with provision for determining speed or overspeed
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01PMEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P3/00Measuring linear or angular speed; Measuring differences of linear or angular speeds
    • G01P3/36Devices characterised by the use of optical means, e.g. using infrared, visible, or ultraviolet light
    • G01P3/38Devices characterised by the use of optical means, e.g. using infrared, visible, or ultraviolet light using photographic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30232Surveillance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30236Traffic on road, railway or crossing

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Electromagnetism (AREA)
  • Power Engineering (AREA)
  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)

Abstract

一种基于图像膨胀率的迎面视频测速方法,通过在运动物体的轮廓内部选取特征线,并记录特征线的实际长度H及其在初始时刻t0的图像中的长度h0,通过比较物体初始时刻图像和下一时刻图像的像素点数获得初始时刻的图像膨胀率σ0,而后根据相似三角形原理计算初始时刻物体速度v0,计算下一时刻图像中特征线的长度h1,重复上述过程得到其余时刻的物体速度,本发明根据视频中车辆的图像膨胀率来确定车速,算法简单,易于实现,同时利用了被测物体截面的所有图像信息,准确度高,稳定性好,不涉及硬件成本,克服了传统测量方法处理复杂的缺陷,解决了传统算法无法解决的视线与运动方向平行的情形,可以应用于交通事故中车辆速度的测量以及摄像头的实时监控。

Description

基于图像膨胀率的迎面视频测速方法
技术领域
本发明涉及的是一种速度测试领域的技术,具体是一种基于图像膨胀率的迎面视频测速方法。
背景技术
在交通事故处理中,车辆速度的判定直接影响事故起因分析以及责任的认定。车速检测方法有雷达测速、激光测速、感应线圈测速、IC卡测速等等。随着计算机和图像采集设备性能的提高,视频测速也成为了一种新的测速手段。
视频测速主要是通过视频中的图像信息,利用图像处理技术手段来获取车辆的行驶速度。当前的处理方法包括虚拟线圈法和定位追踪法,都主要集中于俯视的角度,从侧面跟踪车辆的运动轨迹,利用地面为背景来提取车辆的位置信息,最后再结合拍摄的帧数来计算车速。但无法处理车辆朝摄像头迎面驶来的情况,传统的图像处理手段在算法设计中需要利用光轴与地面的交点来建立坐标系,无法解决视线与车辆运动方向平行的问题。
经过对现有技术的检索发现,中国专利文献号CN104318782A,公开日为2015年01月28日,公开了一种面向区域重叠的高速公路视频测速方法及系统,在车辆提取追踪过程中,针对运动区域采用了对区域重叠的鲁棒性更强的算法进行特征参数提取和模板匹配;从而,视区域重叠的程度不同,在重叠程度未超过一定限度时能够成功在重叠区域中实现特定目标车辆的识别;该技术还根据重叠程度自适应地采用相对应的追踪方式,能够在测速视频画面序列的各帧画面中连续地发现特定目标车辆所在区域,特别是当特定目标车辆处于重叠区域的情况也能够实现识别,从而确定代表该特定目标车辆的像素位置,进而实现视频画面坐标系中的运动速度计算。但该技术采用了模式匹配的算法,计算量大,降低了监测的实时性效果,且基于摄像头俯视的角度,对于迎面行驶的情形未给出相应的解决办法。
发明内容
本发明针对现有技术存在的上述不足,提出一种基于图像膨胀率的迎面视频测速方法。
本发明是通过以下技术方案实现的:
本发明通过在运动物体的轮廓内部选取特征线,并记录特征线的实际长度H及其在初始时刻t0的图像中的长度h0,通过比较物体初始时刻图像和下一时刻图像的像素点数获得初始时刻的图像膨胀率σ0,而后根据相似三角形原理计算初始时刻物体速度v0,计算下一时刻图像中特征线的长度h1,重复上述过程得到其余时刻的物体速度。
所述的物体速度
Figure BDA0000959388730000021
其中:N为视频帧速,两个时刻之间间隔m帧。
所述的特征线或其延长线与摄像机光轴相交且位于与摄像机光轴垂直的平面内,其两个端点位于物体轮廓上。
本发明具体包括以下步骤:
1)对运动物体在T时段内的视频图像进行畸变校正,而后利用边缘检测技术测定物体的轮廓并选取特征线;
2)计算出初始时刻t0的特征线长度H以及图像中的长度h0,设i=0;
3)计算ti时刻图像膨胀率
Figure BDA0000959388730000022
其中:ni为ti时刻物体图像的像素点数;
4)计算并输出ti时刻的物体运动速度
Figure BDA0000959388730000023
计算ti+1时刻的图像中的特征线长度
Figure BDA0000959388730000024
5)当满足
Figure BDA0000959388730000025
时,则i=i+1后回到步骤3);否则,结束整个计算,得到各个时刻的速度以及整个时段的平均速度。
所述的时刻ti与ti-1之间的时间间隔Δt为视频帧速N的倒数的整数倍。
所述的步骤1)具体包括以下步骤:
1.1)进行摄像机标定;
1.2)对运动物体在T时段内的视频图像进行畸变校正;
1.3)获得摄像机的内部参数;
1.4)利用边缘检测技术测定物体的轮廓并选取特征线。
所述的内部参数为视锥点到成像平面的距离。
技术效果
与现有技术相比,本发明根据视频中车辆的图像膨胀率来确定车速,算法简单,易于实现,不存在发散或者收敛,即使某个时刻信息采集有误,所造成的影响也是局部的,估算法的稳定性好,适用性强,同时利用了被测物体截面的所有图像信息,准确度高,稳定性好,不涉及硬件成本,经济实惠,克服了传统测量方法处理复杂的缺陷,在摄像机的畸变校正中无需对摄像头位置进行重新调整,直接通过内置算法即可实现摄像机畸变的矫正,简单可行,解决了传统算法无法解决的视线与运动方向平行的情形,可以应用于交通事故中车辆速度的测量以及摄像头的实时监控。
附图说明
图1为运动物体投影立体示意图;
图2为运动物体投影平面示意图;
图3为实施例1的流程示意图;
具体实施方式
下面对本发明的实施例作详细说明,本实施例在以本发明技术方案为前提下进行实施,给出了详细的实施方式和具体的操作过程,但本发明的保护范围不限于下述的实施例。
实施例1
如图1所示,摄像机光轴与运动物体的运动方向平行,S为视锥点,P为成像平面,B0和B1分别代表同一运动物体在距离成像平面不同的位置。以S为原点,特征线的方向为y轴,光轴为z轴,按照右手系建立如图2所示的坐标系。
如图3所示,计算运动物体的速度的具体步骤为:
1)对运动物体在T时段内的视频图像进行畸变校正,而后利用边缘检测技术测定物体的轮廓并选取特征线:
1.1)进行摄像机标定。确定世界坐标系的原点,在世界坐标系的Z平面确立3个特征点。然后根据世界坐标系和摄像机坐标系的位置关系确定坐标变换矩阵
Figure BDA0000959388730000031
按照
Figure BDA0000959388730000032
完成对摄像机的标定,其中:u和v为像素坐标,λ为变换系数,(mij)3×4为变换矩阵,X、Y、Z为世界坐标系下摄像机的坐标。
1.2)对运动物体在T时段内的视频图像按照确定的畸变系数进行畸变校正。
所述的畸变校正采用的校正模型为
Figure BDA0000959388730000033
其中
Figure BDA0000959388730000034
为物体在成像平面的坐标,
Figure BDA0000959388730000035
为对应点在成像平面的实际坐标,
Figure BDA0000959388730000036
校正模型中共有5个未知数k1,k2,k3,p1,p2,所以至少需要3个标定点。为提高精度,选取5个特征点,采用最小二乘法对其中的5个参数进行拟合,所选取的特征点可与摄像机标定的特征点重合。
1.3)获得摄像机的内部参数即视锥点S到成像平面P的距离f。
1.4)利用边缘检测技术测定运动物体的轮廓并选取特征线。
所述的边缘检测技术为快速Hough变换。选取的特征线在与摄像机光轴垂直的平面内,特征线或者其延长线与光轴相交,特征线的两个端点在运动物体的轮廓上。
2)计算出初始时刻t0的特征线长度H以及图像中的长度h0,设i=0:选定初始时刻t0运动物体位于B0位置,利用标定好的摄像机来计算此时的特征线长度H以及在相机上的投影长度h0
由几何关系易得:
Figure BDA0000959388730000041
由此得到:
Figure BDA0000959388730000042
其中:z0和z1分别为运动物体在B0和B1处的z轴坐标。
3)计算ti时刻图像膨胀率
Figure BDA0000959388730000043
其中:ni为ti时刻物体图像的像素点数:
所述的B0和B1处投影到成像平面P上的像素点数为n0和n1,记B0和B1处图像面积为A0和A1,则:
Figure BDA0000959388730000044
Figure BDA0000959388730000045
4)计算并输出ti时刻的物体运动速度
Figure BDA0000959388730000046
计算ti+1时刻的图像中的特征线长度
Figure BDA0000959388730000047
N为视频帧速,两个时刻之间间隔m帧:
所述的B0和B1处图像面积为A0和A1的关系为:
Figure BDA0000959388730000048
则可以得到:
Figure BDA0000959388730000049
即得到
Figure BDA00009593887300000410
进一步可得到:
Figure BDA00009593887300000411
所述的时刻ti与ti-1之间的时间间隔Δt为视频帧速N的倒数的整数倍。
5)当满足
Figure BDA00009593887300000412
时,则i=i+1后回到步骤3);否则,结束整个计算,得到各个时
刻的速度以及整个时段的平均速度。
对特定的视频分析时,可以先由给定视频求出运动物体的图像在各个时间段的图像膨胀率,然后根据上述过程进行速度的迭代计算。而在实时监控中,图像膨胀率则由当前时刻的像素点数与上一个时刻的像素点数获得,实时监控中这两个变量的存储单元可以重复使用,即在计算结束后采用一个临时变量存储当前像素点数,读入下一个时刻的像素点数目后直接用于计算下一个时刻的图像膨胀率。对于特征线与光轴不相交的情形,由相似三角形的原理,上述关系式同样成立。
与现有技术相比,本发明根据视频中车辆的图像膨胀率来确定车速,算法简单,易于实现,不存在发散或者收敛,即使某个时刻信息采集有误,所造成的影响也是局部的,估算法的稳定性好,适用性强,同时利用了被测物体截面的所有图像信息,准确度高,稳定性好,不涉及硬件成本,经济实惠,克服了传统测量方法处理复杂的缺陷,在摄像机的畸变校正中无需对摄像头位置进行重新调整,直接通过内置算法即可实现摄像机畸变的矫正,简单可行,解决了传统算法无法解决的视线与运动方向平行的情形,可以应用于交通事故中车辆速度的测量以及摄像头的实时监控。

Claims (7)

1.一种基于图像膨胀率的迎面视频测速方法,其特征在于,通过在运动物体的轮廓内部选取特征线,并记录特征线的实际长度H及其在初始时刻t0的图像中的长度h0,通过比较物体初始时刻图像和下一时刻图像的像素点数获得初始时刻的图像膨胀率σ0,而后根据相似三角形原理计算初始时刻物体速度v0,计算下一时刻图像中特征线的长度h1,重复上述过程得到其余时刻的物体速度;
所述的图像膨胀率,在ti时刻时的图像膨胀率
Figure FDA0002356081010000011
其中:ni为ti时刻物体图像的像素点数;
所述的物体速度
Figure FDA0002356081010000012
其中:N为视频帧速,两个时刻之间间隔m帧,f为视锥点S到成像平面P的距离。
2.根据权利要求1所述的基于图像膨胀率的迎面视频测速方法,其特征是,所述的特征线或其延长线与摄像机光轴相交且位于与摄像机光轴垂直的平面内,其两个端点位于物体轮廓上。
3.根据权利要求1所述的基于图像膨胀率的迎面视频测速方法,其特征是,具体包括以下步骤:
1)对运动物体在T时段内的视频图像进行畸变校正,而后利用边缘检测技术测定物体的轮廓并选取特征线;
2)计算出初始时刻t0的特征线长度H以及图像中的长度h0,设i=0;
3)计算ti时刻图像膨胀率
Figure FDA0002356081010000013
其中:ni为ti时刻物体图像的像素点数;
4)计算并输出ti时刻的物体运动速度
Figure FDA0002356081010000014
计算ti+1时刻的图像中的特征线长度
Figure FDA0002356081010000015
5)当满足
Figure FDA0002356081010000016
时,则i=i+1后回到步骤3);否则,结束整个计算,得到各个时刻的速度以及整个时段的平均速度。
4.根据权利要求3所述的基于图像膨胀率的迎面视频测速方法,其特征是,所述的时刻ti与ti-1之间的时间间隔Δt为视频帧速N的倒数的整数倍。
5.根据权利要求3所述的基于图像膨胀率的迎面视频测速方法,其特征是,所述的步骤1)具体包括以下步骤:
1.1)进行摄像机标定;
1.2)对运动物体在T时段内的视频图像进行畸变校正;
1.3)获得摄像机的内部参数;
1.4)利用边缘检测技术测定物体的轮廓并选取特征线。
6.根据权利要求5所述的基于图像膨胀率的迎面视频测速方法,其特征是,所述的内部参数为视锥点到成像平面的距离。
7.根据权利要求6所述的基于图像膨胀率的迎面视频测速方法,其特征是,所述的畸变校正采用的校正模型为
Figure FDA0002356081010000021
其中:
Figure FDA0002356081010000022
为物体在成像平面的坐标,
Figure FDA0002356081010000023
为对应点在成像平面的实际坐标,
Figure FDA0002356081010000024
k1,k2,k3,p1,p2为未知数。
CN201610212506.8A 2016-04-07 2016-04-07 基于图像膨胀率的迎面视频测速方法 Expired - Fee Related CN107292932B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610212506.8A CN107292932B (zh) 2016-04-07 2016-04-07 基于图像膨胀率的迎面视频测速方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610212506.8A CN107292932B (zh) 2016-04-07 2016-04-07 基于图像膨胀率的迎面视频测速方法

Publications (2)

Publication Number Publication Date
CN107292932A CN107292932A (zh) 2017-10-24
CN107292932B true CN107292932B (zh) 2020-06-09

Family

ID=60095538

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610212506.8A Expired - Fee Related CN107292932B (zh) 2016-04-07 2016-04-07 基于图像膨胀率的迎面视频测速方法

Country Status (1)

Country Link
CN (1) CN107292932B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111661206A (zh) * 2020-06-02 2020-09-15 侯致远 自行车及其安全装置和方法及计算机可读存储介质
CN112364741B (zh) * 2020-11-02 2023-04-18 湖南航天宏图无人机系统有限公司 无人机单目远距离障碍检测方法、装置及无人机

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101105893A (zh) * 2006-07-14 2008-01-16 沈阳江龙软件开发科技有限公司 一种车辆视频识别测速方法
CN102254318A (zh) * 2011-04-08 2011-11-23 上海交通大学 基于图像透视投影变换的车辆道路交通视频测速方法
KR101415735B1 (ko) * 2014-01-17 2014-08-06 주식회사 씨트링 영상 저장 장치 및 방법
CN104021676A (zh) * 2014-06-25 2014-09-03 上海交通大学 基于车辆动态视频特征的车辆定位及车速测量方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101105893A (zh) * 2006-07-14 2008-01-16 沈阳江龙软件开发科技有限公司 一种车辆视频识别测速方法
CN102254318A (zh) * 2011-04-08 2011-11-23 上海交通大学 基于图像透视投影变换的车辆道路交通视频测速方法
KR101415735B1 (ko) * 2014-01-17 2014-08-06 주식회사 씨트링 영상 저장 장치 및 방법
CN104021676A (zh) * 2014-06-25 2014-09-03 上海交通大学 基于车辆动态视频特征的车辆定位及车速测量方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
An Algorithm for Automatic Vehicle Speed Detection using Video Camera;Jianping Wu 等;《International Conference on Computer Science & Education》;20060901;第193-196页 *
Vehicle speed detection in video image sequences;Arash Gholami Rad 等;《International Journal of the Physical Sciences》;20101218;第5卷;第2555-2563页 *
基于视频检测的车辆测速方法;陈媛媛 等;《现代电子技术》;20091215;第2009年卷(第23期);第185-188页 *
基于车牌字符边界定位的视频测速;陈群 等;《计算机工程》;20140531;第2014年卷(第5期);第159-163页 *

Also Published As

Publication number Publication date
CN107292932A (zh) 2017-10-24

Similar Documents

Publication Publication Date Title
Prescott et al. Line-based correction of radial lens distortion
CN103559711B (zh) 基于三维视觉系统图像特征和三维信息的运动估计方法
CN110569704A (zh) 一种基于立体视觉的多策略自适应车道线检测方法
CN109801333B (zh) 体积测量方法、装置、系统及计算设备
CN106767399A (zh) 基于双目立体视觉和点激光测距的物流货物体积的非接触测量方法
Kumar et al. A semi-automatic 2D solution for vehicle speed estimation from monocular videos
US20180122086A1 (en) Image processing apparatus, image processing method, and program
CN109446917B (zh) 一种基于级联霍夫变换的消失点检测方法
US9336595B2 (en) Calibration device, method for implementing calibration, and camera for movable body and storage medium with calibration function
CN109544635B (zh) 一种基于枚举试探的相机自动标定方法
Do et al. A simple camera calibration method for vehicle velocity estimation
Cvišić et al. Recalibrating the KITTI dataset camera setup for improved odometry accuracy
Dawson et al. An energy minimization approach to automatic traffic camera calibration
CN108416798A (zh) 一种基于光流的车辆距离估计方法
CN107292932B (zh) 基于图像膨胀率的迎面视频测速方法
KR102490521B1 (ko) 라이다 좌표계와 카메라 좌표계의 벡터 정합을 통한 자동 캘리브레이션 방법
Revaud et al. Robust automatic monocular vehicle speed estimation for traffic surveillance
KR102065337B1 (ko) 비조화비를 이용하여 대상체의 이동 정보를 측정하는 장치 및 방법
CN108122244B (zh) 一种视频图像的视频测速方法及装置
CN116160458B (zh) 一种移动机器人多传感器融合快速定位方法、设备及系统
EP4250245A1 (en) System and method for determining a viewpoint of a traffic camera
CN113327192B (zh) 一种通过三维测量技术测算汽车行驶速度的方法
Delmas et al. Stereo camera visual odometry for moving urban environments
JPH1055446A (ja) 物体認識装置
JPH10312463A (ja) 物体認識方法およびその装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200609

Termination date: 20210407

CF01 Termination of patent right due to non-payment of annual fee