CN101382497B - 基于路况监控视频的能见度检测方法 - Google Patents

基于路况监控视频的能见度检测方法 Download PDF

Info

Publication number
CN101382497B
CN101382497B CN2008101565916A CN200810156591A CN101382497B CN 101382497 B CN101382497 B CN 101382497B CN 2008101565916 A CN2008101565916 A CN 2008101565916A CN 200810156591 A CN200810156591 A CN 200810156591A CN 101382497 B CN101382497 B CN 101382497B
Authority
CN
China
Prior art keywords
visibility
image
video
camera
cos
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2008101565916A
Other languages
English (en)
Other versions
CN101382497A (zh
Inventor
陈启美
李勃
陈钊正
李佳
董蓉
周庆逵
张潇
葛嘉琦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University
Original Assignee
Nanjing University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University filed Critical Nanjing University
Priority to CN2008101565916A priority Critical patent/CN101382497B/zh
Publication of CN101382497A publication Critical patent/CN101382497A/zh
Application granted granted Critical
Publication of CN101382497B publication Critical patent/CN101382497B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

基于路况监控视频的能见度检测方法,使用高速公路外场路侧摄像机进行多个角度和位置的视频采集,在视频图像采集时,连续截取15~30帧图像;图像距离目标物自动标定和预处理:对采集到的视频图像进行像平面到世界坐标的自动转换,提取分割出4~8组虚拟距离信息目标物、判别图片是否满足特征;采用基于路况监控视频能见度检测算法,该算法对路况视频图像,通过对路面情况的分析,进行能见度检测;对所得到的15~30帧图像的能见度距离进行处理,能见度距离平均化处理,得出当前的能见度值;建立图像坐标至路面坐标的映射关系,将图像距离信息转换成路面距离信息,然后进行符合人眼的能见度分析和检测,得出能见度值。

Description

基于路况监控视频的能见度检测方法
技术领域
本发明属于智能交通技术领域,设计基于监控视频的大气能见度检测方法与系统,主要用于交通监控环境下的道路能见度行车条件的实时检测和监控。
背景技术
随着全国高速公路为主骨架网络规划的逐步建成和完善,公路在运输体系和国民经济发展中的作用越来越重要。现代公路运输体系追求的快速、高效和安全,高速公路为车辆的高速通行提供了良好的条件,但是浓雾、沙尘暴、烟雾污染等不良天气造成的大气能见度较低,给高速公路的安全运营和经济效益带来了较大的影响。低能见度天气造成的高速公路事故、堵塞和封路给地方经济和高速公路自身经济效益造成了巨大的损失。据统计,高速公路上因浓雾的影响造成的变通事故大约占事故总数的1/4左右,雾天高速公路的事故率是平常的10倍。因恶劣天气、自然灾害突发交通中断和交通延误所造成的损失越来越大,成为威胁人民生产财产安全的一个重大隐患。因此对高速公路进行实时能见度监测,及时发现各路段的各种异常气象情况并采取相应的应急措施,最大限度减少能见度对交通的不利影响,是保证高速公路安全、舒适、高速运营的必要管理手段。
当前,我国高速公路运营和管理部门采用传统的气象能见度仪,基于大气的光前向或后向散射原理进行能见度检测,所采集的样本空间相当有限,在团雾、雨雪、沙尘天气发生时,其检测精度大大下降,同时能见度仪价格昂贵,难以沿路密集布设,进而构建路段能见度分布情况和分段封路管理。严重影响出行者的时间和路公司的经济效益。
国外早在上个世纪90年代就开始研究如何使用视频采集设备(摄像机、照相机)获取图像进行能见度仿真检测。美国明尼苏达大学运输系2004年公布的Taek Mu Kwon撰写的《AtmosphericVisibility Measurements Using Video Cameras:Relative Visibility》一文和相关专利中,使用视频照相机和多个标靶,在高速公路上进行日间能见度检测,通过将标靶的对比度值进行能见度非线性曲线拟合得出能见度值;在国内,成都易航信息科技有限公司于2003年申请的和2006年申请的自校准大气能见度测量方法和系统专利中,在明尼苏达大学的研究基础使用归一化对比度对因散射引起的标靶光亮度的减小和增加两个部分的变化,和对标靶的黑白目标固有亮度差异的处理,将归一化对比度等于阈值0.05的标靶距离作为现场能见度值,在最近标靶到最远标靶距离范围以外的能见度值则通过曲线拟合得到。但是以上两个专利中,研究者都是在人为的制造相应的标志物(标靶)上,采用固定摄像机,对标靶上黑白色形成的强对比度进行能见度分析检测,无法在多个位置上进行能见度检测。而目前均采用云台遥控摄像机,以上系统难以兼容现有平台。
发明内容
本发明的目的在于克服现有技术的不足和兼容原有监控系统的基础上,设计一种不需要设置任何人工标志物的视频能见度检测系统,该系统通过分析视频中因天气引起的物体边缘减弱以及亮度的差别,采用相关亮度对比度计算,得出更加符合人眼特性能见度的检测结果。解决了能见度实时监控系统与现有高速公路视频监控融合的难题,减少了架设人工标志物和能见度相关设备所带来的不必要的人力和财力开销。
本发明的发明目的技术特征在于:
1)与路况监控系统兼容:在现有路况监控系统之上,采用监控系统的通信链路和相关设备进行能见度检测所需的视频采集和结果的发布;路况监控系统包括摄像机和多个标靶,在高速公路上进行能见度检测;
2)多角度视频采集:使用高速公路外场路侧摄像机进行多个角度和位置的视频采集,对采集到的视频图像必须满足:图像的最下端离摄像机的距离小于等于20米,图像的最上端大于等于200米,且在视频图像采集时,定时(T=1-5秒)截取一帧图像,连续截取15~30帧图像;
3)图像距离目标物自动标定和预处理:不需要在道路上架设带有距离信息的人工标识物,而是对采集到的视频图像进行像平面到世界坐标的自动转换,使用计算机标定方法,分析图像中像素间的距离信息,提取分割出4~8组虚拟距离信息目标物、判别视频图像是否满足特征2);
4)在不同天气条件下进行能见度检测:采用基于路况监控视频能见度检测算法,该算法对路况视频图像,通过对路面情况的分析,进行能见度检测。采用该算法进行能见度检测可以避免能见度仪在团雾、雨、沙尘等天气条件下,因为只检测很小的一段空气柱所带来的检测结果不准确和使用固定人工距离目标物的算法及系统在目标物表面受到污染和褪色等情况下,造成检测结果有所偏差和错误。同时对所得到的15~30组能见度距离进行处理,去除其中的异常值,对其它的能见度距离平均化处理,得出当前的能见度值;
5)检测结果的联网分析和发布:根据路况沿途各摄像机所检测到的能见度结果,对全路段的能见度情况进行统计和分析,得出全路段的能见度分布,将所得结果根据国家大气能见度标准的能见度等级定义进行分级处理,同时根据交通部门关于在各能见度等级下的车辆行驶状态,通过网络和监控系统的链路为用户提供相关提示和警告信息,同时告知交通管理部门采取相关措施。
本发明的改进包括:兼容原有的路况监控系统:使用高速公路监控系统进行图像摄取和信息、数据的传输,使用高速公路现有的外场路侧摄像机进行全路段的能见度视频采集和能见度实时监控,在监控中心,从视频分配器中接入图像,引入能见度检测和分析服务器中,进行计算和分析;
通过原有监控系统的通信链路,将获取图像的能见度检测结果和全路段能见度分布情况的相应数据以网页的形式向用户和交通管理部门发布;
本发明的改进还在于:使用路侧云台遥控(PTZ)摄像机,跳转多个机位进行不同角度的路面信息获取,不局限于某个固定位置;根据摄像机自动标定算法,实现像平面到路面坐标的自动转换,提取图像中的距离信息,摄像机进行变焦、平移或旋转运动,跳转至各个不同机位时,系统自动重新标定,无需任何人为设置,自动在视频图像中建立虚拟距离信息目标物;
一种路况视频能见度检测算法,人眼模拟:分析摄像机和人眼感光效果的不同,提出采用基于修正的Kohler的一致对比度法的对比度计算方法,将摄像机获取的图像模拟为人眼所见的图像;
目标物特征提取:对图像提取出来的虚拟距离信息目标物,使用人眼模拟算法,检测出符合人眼的强对比度边缘信息,将边缘特征提取出来;
计算能见度距离:对每幅图片中提取的特征边缘和上述提取的距离信息,采用曲线回归分析进行曲线拟合,得出符合人眼特征的能见度曲线,然后根据国际民航组织(IACO)和国际照明委员会(CIE)对人眼对比度阈值的定义,得出能见度距离;
本发明可在不同天气气候条件,包括雨、雾、雪、阴霾、沙尘天气进行能见度检测;联网分析和发布,在监控中心架设相应的能见度检测分析服务器,用于检测路况沿途各点的能见度和统计和分析路段能见度分布情况,再结合历史数据对整个路段的能见度分布情况及可能产生的变化及时告知给出行者和交通管理部门。
本发明的有益效果是:不需要在道路上架设带有距离信息的人工标识物,而是对采集到的视频图像进行像平面到世界坐标的自动转换,使用计算机标定方法,分析图像中像素间的距离信息,通过分析视频中因天气引起的物体边缘减弱以及亮度的差别,采用相关亮度对比度计算,得出更加符合人眼特性能见度的检测结果。解决了能见度实时监控系统与现有高速公路视频监控融合的难题,减少了架设人工标志物和能见度相关设备所带来的不必要的人力和财力开销。
附图说明
图1是本发明能见度系统结构
图2是本发明摄像机成像模型
图3是本发明照片(分道线角点检测结果)
图4是标定模板鸟瞰图
图5是虚拟距离目标物选取
图6是虚拟目标物特征曲线拟合
图7是数据处理流程
图8是能见度系统处理流程
具体实施方式
本发明所阐述的基于路况监控视频的能见度检测系统与原有的路况监控系统兼容,其工作原理如图1所示:
它由路况监控系统和能见度检测分析服务器组成,与现有的路况监控系统完全融合,只需要在监控中心架设能见度检测和分析服务器即可,系统所必须的设备有视频采集设备、能见度检测和分析服务器、用户终端显示设备、信息发布设备和相应的通信传输链路组成。高速公路监控系统提供视频采集设备、信息发布设备和相应的通信传输链路;能见度检测和分析服务器提供图像分析(编解码、D/A转换、图像预处理),数据处理(能见度处理、能见度分布分析),信息发布(道路情报板发布、Web数据发布)。用户终端显示设备是指:用户通过各种终端设备:PDA、个人电脑……使用Web浏览器通过有线和无线设备,进行能见度信息访问和查询。
本发明所阐述的基于路况监控视频的能见度检测系统,以使用云台遥控摄像机以路面为背景,在多个角度上获取不同的视频图像,避免和消除从单角度上获取的视频图像造成的视频单一,和由于各种干扰对视频图像造成的影响;同时进行图像距离目标物自动标定和预处理:
1)首先判断视频图像的光线,包括:图像亮度、光线的角度是否符合图像处理的要求,是否存在图像过曝或者过暗的现象,如果存在就移动摄像机转到合适的位置重新获取图像;
2)不需要在道路上架设带有距离信息的人工标识物,使用人工目标物的能见度检测系统,由于需要架设目标物,就必须涉及到目标物架设所需的高额费用、由于道路弯曲所带来的目标物架设位置的选择,同时由于目标物使用长时间后,损坏、污染、褪色等问题给检测带来的误差,而且在高速公路上设置目标物会给驾车者带来视觉干扰;
3)利用视频采集设备(摄像机)所采集的视频图像,建立图像坐标至路面坐标的映射关系,将图像距离信息转换成路面距离信息,然后进行符合人眼的能见度分析和检测,得出能见度距离。图像坐标至路面坐标的映射关系使用自主研发的摄像机自标定技术完成,其工作步骤如下:
a)建立路况摄像机成像模型,如图2所示,图中定义了三种坐标系,其中地面坐标系Xw-Yw-Zw和摄像机坐标系Xc-Yc-Zc用来表征三维空间;图像平面坐标系Xf-Yf用来表征成像平面。建立世界坐标系,其原点为摄像机光轴与地面交点。Yw轴正向沿路面方向指向前方,Xw轴正向水平指向右方,Zw轴正向垂直于地面,方向向上。建立摄像机坐标系,原点为摄像机光心位置,Zc轴为摄像机光轴方向,Xc-Yc平面平行于像平面。设摄像机光心与世界坐标系原点距离为1,摄像机的俯仰角(摄像机光轴与地平面夹角)为t,偏角(光轴与车道分割线的夹角)为p。旋角为s,忽略高速公路坡度影响,以地平面上平行线间的区域来对应摄像机视域内的高速公路路面;
b)基于定义的摄像机空间方位参数,可建立理想透视模型下,地面坐标系与二维图像坐标系间的坐标变换关系,如式(1)所示:
X w = [ l sin p ( x f sin s + y f cos s ) + l cos p sin t ( x f cos s - y f sin s ) ] x f cos t sin s + y f cos t cos s + f sin t         (1)
Y w = [ - l cos p ( x f sin s + y f cos s ) + l sin p sin t ( x f cos s - y f sin s ) ] x f cos t sin s + y f cos t cos s + f sin t
c)利用霍夫变换提取车道线,建立兴趣域,利用HARRIS角点检测算法提取分道线角点信息,角点检测结果如图3所示;
d)摄像机参数求解,以高速公路路面分道线为参照物建立摄像机未标定参数与图像特征参数之间的对应关系。在监控路段上选取基于分道线角点的平行四边形为标定模块,如图4所示。根据角点间平行对应关系,可解出式(1)中未知的摄像机参数p,t,s,f,l,如式(2)所示:
t = - arcsin { v 0 2 ( v A - v B + v C - v D ) 2 [ ( v 0 - v D ) u A - ( v 0 - v C ) u B + ( v 0 - v B ) u C - ( v 0 - v A ) u D ] × [ - ( v 0 - v B ) u A + ( v 0 - v A ) u B - ( v 0 - v D ) u C + ( v 0 - v C ) u D ] } 1 / 2
f = v 0 / tan ( t ) , l = H sin t , tan s = - v 0 - v 1 u 0 - u 1 - - - ( 2 )
p = arctan { [ ( v 0 - v D ) u A - ( v 0 - v C ) u B + ( v 0 - v B ) u C - ( v 0 - v A ) u D ] sin ( t ) v 0 ( v A - v B + v C - v D ) }
式中(u,v)表示图像坐标系,(u0,v0)为由直线xaxd,xbxc决定的灭点,(u1,v1)为由直线xaxb,xdxc决定的灭点,H为摄像机柱高;
e)将路面坐标系平移至以摄像机柱基为原点,即可计算图像中任意一点距离摄像机的距离,如式(3)所示:
Xcamera=Xw+lcostsinp                   (3)
Ycamera=Yw+lcostcosp
式中(Xcamera,Ycamera)是以摄像机柱基为原点的路面坐标;
f)从步骤(c)检测出的角点中选取4~8组,以每个角点为中心,划定一个矩形区域为虚拟目标物,如图5所示,虚拟目标物的距离信息如下:
D ( i ) = [ - l cos p ( x i sin s + y i cos s ) + l sin p sin t ( x i cos s - y i sin s ) ] x i cos t sin s + y i cos t cos s + f sin t + l cos t cos p
                                                             (4)
式中D(i)为第i个虚拟目标物相对于摄像机柱基的距离,(xi,yi)为第i个虚拟目标物中心角点的图像坐标。
4)去除图片中的冲击噪声是由于图像在传输过程中容易受到冲激噪声的干扰,而产生了不属于原图像的边缘,因此需在图像灰度化之后采用中值滤波去除噪声的影响;
5)背景提取是将道路从原图像中提取出,作为分析时的目标物的距离依据和强边缘分析检测依据。
本发明所阐述的基于路况监控视频的能见度检测算法,包括人眼模拟、边缘提取和边缘特征确定,其中还包括图像中因天气引起的边缘的减弱,以及亮度的差别。其原理及具体步骤如下:
1)能见度及对比度定义
大气能见度(Visibility)是反映大气透明度的一个指标。关于能见度的定义,国际民航组织(ICAO)、国际照明委员会(CIE)、国际气象组织(WMO)等国际权威机构都有其专门的定义。一般定义为具有正常视力的人在当时的天气条件下还能够看清楚目标轮廓的最大地面水平距离。还有一种定义为目标的最后一些特征已经消失的最小距离。一般来说,对同一种目标,这两种定义确定的能见度大小是有差异的,后者比前者要大一些。按照世界气象组织(WMO)和我国国家气象局关于日间气象能见度的定义为:指视力正常的人,在当时天气条件下,能够从天空背景中看到和辨认的目标物(黑色、大小适度)的最大距离。是指能看到和辨认出目标物的轮廓和形体,凡是看不清目标物的轮廓,认不清其形体,或者所见目标灯的发光点模糊,灯光散乱,都不能算“能见”。关于能见度的定义中,所谓“辨识”是指看清楚目标物的轮廓,也可以指人眼所观测到的亮度对比度(contrast)大于指定的阈值,其计算公式为:
C L = B 0 - B ′ 0 B ′ 0 · ( 1 + D L e - σL · B ′ 0 ) - 1 - - - ( 5 )
其中C0目标物与其背景的固有亮度对比度,CL人眼所观测对比度,B0、B’0为目标物与其背景的固有亮度,DL为L路径上大气柱散射各个方向的自然光在L方向上的附加气幕光亮度,σ为大气消光系数。
由于能见度的定义比较简单,但是能见度的检测基于人眼的,所以这给能见度检测带来了许多不确定的因素和困难。如目标物的大小、照明条件、检测的高度、检测的方向角度、背景的光亮度,这些因素在定义中,都没有涉及,但是这些都对能见度检测有明显的影响。本发明是用于交通运输,关注于地面的能见度检测,是在水平方向上亮度对比度的观察。
2)人眼边缘分析及边缘特征提取
本发明对从图像里分割出的目标物图像提供了对检测能见度有重要作用的强对比度边缘,因此通过对比度计算将边缘提取出来。采用基于修正的Kohler的一致对比度法的对比度计算方法,其基本思想是寻找最优阈值来检测较多的高对比度边缘和较少的低对比度边缘。
其计算如(6)、(7)、(8)所示,在灰度图像f中选定一对像素点(x,x1),选取阈值s,s∈[0,255],建立一个由阈值s分割开的每一对(x,x1)所组成的边缘集F(s),计算由s检测出的边缘总体对比度Cx,x1(s);计算对于每个可能阈值s的平均对比度C(s);平均对比度C(s)的最高波峰点C(s0)对应于最优分割阈值s0
C x , x 1 ( s ) = min ( | s - f ( x ) | max ( s , f ( x ) ) , | s - f ( x 1 ) | max ( s , f ( x 1 ) ) ) - - - ( 6 )
C ( s ) = 1 card ( F ( s ) ) Σ ( x , x 1 ) ∈ F ( s ) C x , x 1 ( s ) - - - ( 7 )
C ( s 0 ) = max s ∈ [ 0,255 ] C ( s ) - - - ( 8 )
为了简化运算的复杂度和去除边缘噪声的干扰,选取目标物中强对比度像素点的对比度的平均值作为特征量En。En是目标物图像块中对比度值最大百分之r的平均值,其计算公式如下:
En=TopAvg(Cn(i,j),r)                   (9)
Cn(n=1,2,3,4…)是每个目标物图像像素的对比度值,r是图像边缘像素所占图像块的比重。
3)曲线拟合和能见度距离计算
在计算能见度距离时,根据对目标物进行强边缘一致对比度计算后提取出图像的边缘特征,然后将所得特征值使用曲线回归分析进行曲线拟合,如图6所示,根据国际照明委员会(CIE)和国际民航组织(ICAO)的推荐对比度阈值,得出能见度距离,其计算过程如下:
根据Koschmieder建立的地平天空下的目标物的亮度对比之间的关系,如式(10)所示:
C=C0e-Kd                    (10)
其中C是目标物的视亮度对比,C0是其固有亮度对比,可知对比度值和距离成指数关系变化。因此,对提取的特征变量En(n=1,2,3,4…)和距离d根据方程(11)进行曲线拟合,其中d是目标物离摄像机的距离,f(d)是特征变量,a0和a1是需确定的参数。
f ( d ) = a 0 e - a 1 d - - - ( 11 )
由于上述拟合模型是非多项式形式,因此需要通过变换将其转换成线性问题:对方程(12)等式两边取对数,并令:
ln f ( d ) = y ( d ) ln a 0 = a 0 ′ - - - ( 12 )
可将非线性方程转换成线性方程(13)。利用最小二乘法确定系数,再利用逆变换得出对比度与距离的拟合函数。
y ( d ) = a 0 ′ - a 1 × d - - - ( 13 )
最终的能见度值即为对比度临界值所对应的距离。这一对比度临界值ε称为对比阈值,它是一个与人眼视觉特征有关的物理量。国际照明委员会(CIE)和国际民航组织(ICAO)推荐的ε值是0.05,则能见度距离有如下公式计算:
V = ln a 0 - ln ( 0.05 ) a 1 - - - ( 14 )
式中v为当前能见度距离。
本发明所阐述的一种基于路况监控视频的能见度检测系统可以在雨、雪、沙尘等各种天气条件下,进行能见度检测。而使用能见度仪进行能见度检测,由于能见度仪采集的样本只有很小的一段空气柱,导致使用个别能见度仪进行能见度检测时,会导致系统对浓度分布不均匀的团雾和其他天气条件分析失误,所得结果会出现偏差,造成不必要的交通事故和交通管制,同时由于其高昂的价格,致使其无法全程架设,更不能进行全路段能见度分析和统计分布情况。而且,能见度仪在雨、雪、沙尘等天气条件下,能见度仪的能见度检测效果比较差。
本发明所阐述的一种基于路况监控视频的能见度检测系统在路况监控系统的基础下,架设能见度检测服务器,通过监控系统的通信链路接收视频图像和发布能见度信息。本发明通过云台遥控摄像机进行以路面为背景的多角度的视频采集,使用本发明中一种基于路况监控视频的能见度检测算法,通过对路面、物体等进行模拟人眼的边缘分析检测,提取出符合人眼的强边缘信息,再使用曲线回归对各个目标块的边缘信息进行曲线拟合,根据能见度相对应的人眼对比度的阈值,给出能见度距离。而且该算法及其系统可以避免能见度仪和架设人工目标物所带来的检测偏差和错误;最后本发明针对路况各点摄像机所得到的数据进行联网分析,得出全路段的能见度分布情况,通过监控系统将能见度结果进行发布并告知交通管理部门。用户则可通过网络和其相应的访问终端对相应的路段的能见度情况进行访问和查询。
表1图6曲线拟合参数结果

Claims (6)

1.一种基于路况监控视频的能见度检测方法,其特征在于:
1)与路况监控系统兼容:在现有路况监控系统之上,采用监控系统的通信链路和相关设备进行能见度检测所需的视频采集和结果的发布;
2)多角度视频采集:使用高速公路外场路侧摄像机进行多个角度和位置的视频采集,对采集到的视频图像必须满足图像的最下端离摄像机的距离小于等于20米,图像的最上端大于等于200米,且在视频图像采集时,定时1秒截取一帧图像,连续截取15~30帧图像;
3)图像距离目标物自动标定和预处理:不需要在道路上架设带有距离信息的人工标识物,而是对采集到的视频图像进行像平面到世界坐标的自动转换,使用摄像机自标定方法,分析图像中像素间的距离信息,提取分割出4~8组虚拟距离信息目标物、判别图片是否满足特征2);
4)在不同天气条件下进行能见度检测:采用基于路况监控视频能见度检测算法,该算法对路况视频图像,通过对路面情况的分析,进行能见度检测;对所得到的15~30帧图像的能见度距离进行处理,去除其中的异常值,对其它的能见度距离平均化处理,得出当前的能见度值;
所述基于路况监控视频能见度检测算法为:人眼模拟:分析摄像机和人眼感光效果的不同,提出采用基于修正的Kohler的一致对比度法的对比度计算方法,将摄像机获取的图像模拟为人眼所见的图像;目标物特征提取:对图像提取出来的虚拟距离信息目标物,使用人眼模拟算法,检测出符合人眼的强对比度边缘信息,将边缘特征提取出来;
计算能见度距离:对每幅图片中提取的特征边缘和提取的距离信息,采用曲线回归分析进行曲线拟合,得出符合人眼特征的能见度曲线,然后根据国际民航组织(IACO)和国际照明委员会(CIE)对人眼对比度阈值的定义,得出能见度距离;
利用摄像机所采集的视频图像,建立图像坐标至路面坐标的映射关系,将图像距离信息转换成路面距离信息,然后进行符合人眼的能见度分析和检测,得出距离能见度值;图像坐标至路面坐标的映射关系使用摄像机自标定完成,其工作步骤如下:
a)建立路况摄像机成像模型,包含三种坐标系:其中世界坐标系Xw-Yw-Zw和摄像机坐标系Xc-Yc-Zc用来表征三维空间;图像坐标系Xf-Yf用来表征成像平面;
世界坐标系原点为摄像机光轴与地面交点;Yw轴正向沿路面方向指向前方,Xw轴正向水平指向右方,Zw轴正向垂直于地面,方向向上;摄像机坐标系原点为摄像机光心位置,Zc轴为摄像机光轴方向,Xc-Yc平面平行于像平面;
b)建立世界坐标系与图像坐标系间的坐标变换关系,如式(1)所示:
X w = [ l sin p ( x f sin s + y f cos s ) + l cos p sin t ( x f cos s - y f sin s ) ] x f cos t sin s + y f cos t cos s + f sin t (1)
Y w = [ - l cos p ( x f sin s + y f cos s ) + l sin p sin t ( x f cos s - y f sin s ) ] x f cos t sin s + y f cos t cos s + f sin t
式(1)中,l为摄像机光心与世界坐标系原点的距离,t为摄像机俯仰角,即摄像机光轴与地平面的夹角;p为偏角,即摄像机光轴在地面上的投影与车道分割线的夹角;s为旋角;忽略高速公路坡度影响,以地平面上平行线间的区域来对应摄像机视域内的高速公路路面;
c)利用霍夫变换提取车道分割线,建立兴趣域,利用HARRIS角点检测算法提取车道分割线角点信息,进行角点检测;
d)摄像机参数求解,以高速公路路面车道分割线为参照物建立摄像机未标定参数与图像特征参数之间的对应关系,在监控路段上选取基于车道分割线角点的平行四边形为标定模块,根据角点间平行对应关系,可解出式(1)中未知的摄像机参数p,t,s,f,l,如式(2)所示:
t = - arcsin { v 0 2 ( v A - v B + v C - v D ) 2 [ ( v 0 - v D ) u A - ( v 0 - v C ) u B + ( v 0 - v B ) u C - ( v 0 - v A ) u D ] × [ - ( v 0 - v B ) u A + ( v 0 - v A ) u B - ( v 0 - v D ) u C + ( v 0 - v C ) u D ] } 1 / 2
f=v0/tan(t), l = H sin t , tan s = - v 0 - v 1 u 0 - u 1 - - - ( 2 )
p = arctan { [ ( v 0 - v D ) u A - ( v 0 - v C ) u B + ( v 0 - v B ) u C - ( v 0 - v A ) u D ] sin ( t ) v 0 ( v A - v B + v C - v D ) }
式中(u,v)表示图像坐标系,对于所选取的平行四边形的四个角点,以左上角的顶点为起点,顺时针排列,分别称为A点、B点、C点、D点,其图像坐标分别为(vA,uA)、(vB,uB)、(vC,uC)、(vC,uC);(u0,v0)为由直线AD和直线BC决定的灭点,(u1,v1)为由直线AB和直线DC决定的灭点,H为摄像机柱高;
e)将世界坐标系平移至以摄像机柱基为原点,即计算图像中任意一点距离摄像机的距离,如式(3)所示:
Xcamera=Xw+lcostsinp
                                        (3)
Ycamera=Yw+lcostcosp
式中(Xcamera,Ycamera)是以摄像机柱基为原点的世界坐标;
f)从步骤(c)检测出的角点中选取4~8组,以每个角点为中心,划定一个矩形区域为虚拟目标物,虚拟目标物的距离信息如下:
D ( i ) = [ - l cos p ( x i sin s + y i cos s ) + l sin p sin t ( x i cos s - y i sin s ) ] x i cos t sin s + y i cos t cos s + f sin t + l cos t cos p - - - ( 4 )
式中D(i)为第i个虚拟目标物相对于摄像机柱基的距离,(xi,yi)为第i个虚拟目标物中心角点的图像坐标;
g)去除图片中的冲击噪声是由于图像在传输过程中容易受到冲激噪声的干扰,而产生了不属于原图像的边缘,因此需在图像灰度化之后采用中值滤波去除噪声的影响;
h)背景提取是将道路从原图像中提取出,作为分析时的目标物的距离依据和强边缘分析检测依据;
5)检测结果的联网分析和发布:根据路况沿途各摄像机所检测到的能见度结果,对全路段的能见度情况进行统计和分析,得出全路段的能见度分布,将所得结果根据国家大气能见度标准的能见度等级定义进行分级处理,同时根据交通部门关于在各能见度等级下的车辆行驶状态,通过网络和监控系统的链路为用户提供相关提示和警告信息,同时告知交通管理部门采取相关措施。
2.根据权利要求1所述的一种基于路况监控视频的能见度检测方法,其特征在于:利用现有的路况监控系统:
1)使用高速公路监控系统进行图像摄取和信息、数据的传输,使用高速公路现有的外场路侧摄像机进行全路段的能见度视频采集和能见度实时监控,在监控中心,从视频分配器中接入图像,引入能见度检测和分析服务器中,进行计算和分析;
2)通过原有监控系统的通信链路,将获取图像的能见度检测结果和全路段能见度分布情况的相应数据以网页的形式向用户和交通管理部门发布。
3.根据权利要求1所述的一种基于路况监控视频的能见度检测方法,其特征在于:使用路侧云台遥控摄像机,跳转多个机位进行不同角度的路面信息获取,不局限于某个固定位置。
4.根据权利要求1所述的一种基于路况监控视频的能见度检测方法,其特征在于根据摄像机自动标定算法,实现像平面到世界坐标的自动转换,提取图像中的距离信息,摄像机进行变焦、平移或旋转运动,跳转至各个不同机位时,系统自动重新标定,无需任何人为设置,自动在视频图像中建立虚拟距离信息目标物。
5.根据权利要求1所述的一种基于路况监控视频的能见度检测方法,其特征在于该方法可以在不同天气气候条件,包括雨、雾、雪、阴霾、沙尘天气进行能见度检测;首先判断视频图像的光线,包括:图像亮度、光线的角度是否符合图像处理的要求,是否存在图像过曝或者过暗的现象,如果存在就移动摄像机转到合适的位置重新获取图像。
6.根据权利要求1所述的一种基于路况监控视频的能见度检测方法,其特征在于联网分析和发布时在监控中心架设相应的能见度检测分析服务器,用于检测路况沿途各点的能见度和统计和分析路段能见度分布情况,再结合历史数据对整个路段的能见度分布情况及可能产生的变化及时告知给出行者和交通管理部门。
CN2008101565916A 2008-10-06 2008-10-06 基于路况监控视频的能见度检测方法 Expired - Fee Related CN101382497B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2008101565916A CN101382497B (zh) 2008-10-06 2008-10-06 基于路况监控视频的能见度检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2008101565916A CN101382497B (zh) 2008-10-06 2008-10-06 基于路况监控视频的能见度检测方法

Publications (2)

Publication Number Publication Date
CN101382497A CN101382497A (zh) 2009-03-11
CN101382497B true CN101382497B (zh) 2012-03-07

Family

ID=40462453

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008101565916A Expired - Fee Related CN101382497B (zh) 2008-10-06 2008-10-06 基于路况监控视频的能见度检测方法

Country Status (1)

Country Link
CN (1) CN101382497B (zh)

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101894366B (zh) * 2009-05-21 2014-01-29 北京中星微电子有限公司 一种获取标定参数的方法、装置及一种视频监控系统
US20110135144A1 (en) * 2009-07-01 2011-06-09 Hand Held Products, Inc. Method and system for collecting voice and image data on a remote device and coverting the combined data
CN101936900A (zh) * 2010-06-12 2011-01-05 北京中科卓视科技有限责任公司 一种基于视频的能见度检测系统
CN101917595B (zh) * 2010-07-01 2013-03-06 李志恒 一种自动标注路段信息的视频监控系统
CN102175613B (zh) * 2011-01-26 2012-11-14 南京大学 基于图像亮度特征的ptz视频能见度检测方法
CN102368819B (zh) * 2011-10-24 2013-07-10 南京大学 一种移动视频采集传输监控和发布的系统
DE102011086512B4 (de) * 2011-11-16 2022-12-01 Bayerische Motoren Werke Aktiengesellschaft Nebeldetektion
CN103200358B (zh) * 2012-01-06 2016-04-13 杭州普维光电技术有限公司 摄像机与目标场景之间的坐标转换方法及装置
CN104634740B (zh) * 2013-11-12 2018-01-30 中国电信股份有限公司 雾霾能见度监测方法和装置
CN103747207A (zh) * 2013-12-11 2014-04-23 深圳先进技术研究院 基于视频监控网络的定位与追踪方法
CN103630496B (zh) * 2013-12-12 2015-09-30 南京大学 基于路面视亮度和最小二乘法的交通视频能见度检测方法
CN103984710B (zh) * 2014-05-05 2017-07-18 深圳先进技术研究院 基于海量数据的视频交互查询方法及系统
CN104240239B (zh) * 2014-09-01 2018-05-01 西南交通大学 一种基于道路图像探测局域路段雾霾天气的检测方法
CN105303576B (zh) * 2015-10-29 2019-03-29 小米科技有限责任公司 边缘检测方法及装置
CN105701461A (zh) * 2016-01-07 2016-06-22 吴桂广 一种高效率的路面边缘检测装置
CN105931220B (zh) * 2016-04-13 2018-08-21 南京邮电大学 基于暗通道先验与最小图像熵的交通雾霾能见度检测方法
CN106331639B (zh) * 2016-08-31 2019-08-27 浙江宇视科技有限公司 一种自动确定摄像机位置的方法及装置
CN107067737A (zh) * 2017-04-13 2017-08-18 山东鼎讯智能交通股份有限公司 一体化多功能道路交通执法仪
CN108732178A (zh) * 2017-04-24 2018-11-02 中兴通讯股份有限公司 一种大气能见度检测方法和装置
CN106971398A (zh) * 2017-05-11 2017-07-21 南宁市正祥科技有限公司 融合图像边缘和区域特征的道路检测方法
CN107705330B (zh) * 2017-09-30 2021-01-01 安徽省公共气象服务中心 基于道路摄像头的能见度智能估测方法
CN108181307B (zh) * 2017-12-06 2020-12-01 中国气象局北京城市气象研究所 一种能见度测量系统和方法
CN108416045A (zh) * 2018-03-15 2018-08-17 斑马网络技术有限公司 交通设施的位置获取方法、装置、终端设备及服务器
CN108830880B (zh) * 2018-04-25 2021-09-21 安徽超远信息技术有限公司 一种适用于高速公路的视频能见度检测预警方法及其系统
CN108645854B (zh) * 2018-05-11 2020-11-27 长安大学 一种实时监测高速公路路网整体能见度的系统及方法
CN108663368B (zh) * 2018-05-11 2020-11-27 长安大学 一种实时监测高速公路路网夜间整体能见度的系统及方法
CN108956397B (zh) * 2018-05-23 2019-10-29 南京大学 一种基于迹范数的道路能见度检测方法
CN108961305B (zh) * 2018-07-05 2021-04-27 四创科技有限公司 一种基于图像识别的海浪爬坡监测方法
CN108986463B (zh) * 2018-07-18 2021-08-10 北京小马智行科技有限公司 一种路况信息处理方法、装置及电子设备
CN109166081B (zh) * 2018-08-21 2020-09-04 安徽超远信息技术有限公司 一种视频能见度检测过程中目标亮度调节方法
CN109461186A (zh) * 2018-10-15 2019-03-12 Oppo广东移动通信有限公司 图像处理方法、装置、计算机可读存储介质和电子设备
CN109326125B (zh) * 2018-11-14 2021-07-16 太原市高远时代科技有限公司 基于嵌入式系统的图片质量诊断系统及诊断方法
CN111376254B (zh) * 2018-12-29 2023-12-29 上海晨兴希姆通电子科技有限公司 平面测距方法及系统和机械手调校平面的方法及系统
CN110097762B (zh) * 2019-03-25 2020-10-09 南京微达电子科技有限公司 一种道路视频图像低能见度刻度估算方法及系统
CN110926515B (zh) * 2019-10-20 2021-09-10 中国航空工业集团公司洛阳电光设备研究所 一种不同大气能见度下光电传感器等效作用距离折算方法
CN112014393B (zh) * 2020-08-26 2023-12-19 大连信维科技有限公司 一种基于目标视觉效果的介质能见度识别方法
CN112017243B (zh) * 2020-08-26 2024-05-03 大连信维科技有限公司 一种介质能见度识别方法
CN111932560B (zh) * 2020-09-21 2021-01-15 南京安通气象数据有限公司 一种道路交通低能见度视频图像距离计算方法与装置
CN112686164B (zh) * 2020-12-30 2022-06-28 日照市气象局 一种发光目标物视频团雾监测预警方法
CN113706889B (zh) * 2021-08-02 2022-09-13 浪潮通信信息系统有限公司 基于目标检测分析的高速公路团雾测量系统及方法
CN114202542B (zh) * 2022-02-18 2022-04-19 象辑科技(武汉)股份有限公司 一种能见度反演方法、装置、计算机设备及存储介质
CN115294766B (zh) * 2022-07-31 2023-06-23 东风汽车集团股份有限公司 虚拟红绿灯构建方法、装置、设备及存储介质
CN117409576B (zh) * 2023-09-28 2024-04-19 中国公路工程咨询集团有限公司 基于神经网络的公路沿线灾害天空地一体化监测系统
CN117953445B (zh) * 2024-03-26 2024-05-28 南京大学 基于交通监控相机雨天道路能见度测定方法、系统及介质

Also Published As

Publication number Publication date
CN101382497A (zh) 2009-03-11

Similar Documents

Publication Publication Date Title
CN101382497B (zh) 基于路况监控视频的能见度检测方法
CN101957309B (zh) 一种能见度的全天候视频测量方法
CN102175613B (zh) 基于图像亮度特征的ptz视频能见度检测方法
CN101281142B (zh) 一种测量大气能见度的方法
CN106651953B (zh) 一种基于交通指示牌的车辆位姿估计方法
CN104766086B (zh) 一种公路标识的监管方法和系统
CN103630496B (zh) 基于路面视亮度和最小二乘法的交通视频能见度检测方法
CN108922188A (zh) 雷达跟踪定位的四维实景交通路况感知预警监控管理系统
CN104240239A (zh) 一种基于道路图像探测局域路段雾霾天气的检测方法
CN102819764A (zh) 一种适用于交通路口复杂场景下的多视角人流量统计方法
CN103268470A (zh) 基于任意场景的视频对象实时统计方法
CN105068151B (zh) 一种雨团识别及其特征参数的构建方法和装置
CN108830880B (zh) 一种适用于高速公路的视频能见度检测预警方法及其系统
CN102867417A (zh) 一种出租车防伪系统及方法
CN110929676A (zh) 一种基于深度学习的违章掉头实时检测方法
CN103149603B (zh) 一种基于视频的道路气象检测方法
CN109272482A (zh) 一种基于序列图像的城市路口车辆排队检测系统
CN102230794A (zh) 一种基于视频的驾驶员视距动态测量方法
CN105303844A (zh) 基于激光的夜间高速公路团雾自动检测装置及其检测方法
Bassani et al. Experimental analysis of operational data for roundabouts through advanced image processing
KR102414233B1 (ko) 주행차량의 노면인지에 의한 제어 시스템 및 그 방법
Tarko et al. Tscan: Stationary lidar for traffic and safety studies—object detection and tracking
CN112419272B (zh) 一种雾天高速公路能见度快速估计方法及系统
CN109978842A (zh) 一种基于摄像头图像的能见度解析方法
CN104331708B (zh) 一种人行横道线自动检测分析方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract

Assignee: Jiangsu Zhuo Yi Mdt InfoTech Ltd

Assignor: Nanjing University

Contract record no.: 2012320000385

Denomination of invention: Visibility detecting method based on monitoring video of traffic condition

Granted publication date: 20120307

License type: Common License

Open date: 20090311

Record date: 20120401

EC01 Cancellation of recordation of patent licensing contract

Assignee: Jiangsu Zhuo Yi Mdt InfoTech Ltd

Assignor: Nanjing University

Contract record no.: 2012320000385

Date of cancellation: 20130531

LICC Enforcement, change and cancellation of record of contracts on the licence for exploitation of a patent or utility model
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120307

Termination date: 20141006

EXPY Termination of patent right or utility model