CN103065519A - 坡道定点停车和起步检测系统及其检测方法 - Google Patents
坡道定点停车和起步检测系统及其检测方法 Download PDFInfo
- Publication number
- CN103065519A CN103065519A CN201210584043XA CN201210584043A CN103065519A CN 103065519 A CN103065519 A CN 103065519A CN 201210584043X A CN201210584043X A CN 201210584043XA CN 201210584043 A CN201210584043 A CN 201210584043A CN 103065519 A CN103065519 A CN 103065519A
- Authority
- CN
- China
- Prior art keywords
- image
- camera
- vehicle
- ramp
- starting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种坡道定点停车和起步检测系统及其检测方法,本发明通过人工测量车道标志线、训练车的物理尺寸,记录摄像机画面,完成坐标系标定;图像分析仪持续接收摄像机捕获的监控图像并识别训练车上的标志牌,通过已标定的坐标系推算出车辆的实际位置、姿态、轮廓范围,并在车头至停车标志线距离超出设定范围或车辆压住两侧车道边界线时触发主摄像机或辅助摄像机抓拍图片;服务器通过传输网络接收来自图像分析仪的测量数据和图片、视频,并计算出训练评分,驾驶员及教练员通过后端的客户端对信息进行查询或调阅视频录像,如此实现对驾驶员的有效培训,提高驾培人员的学习效率。
Description
技术领域
本发明涉及一种坡道定点停车和起步检测系统及其检测方法。
背景技术
作为机动车驾驶员,坡道定点停车和起步是必须熟练掌握的驾驶技能之一。但是传统驾驶员培训时,学员一般以固定参照物进行训练,导致实际上路后需要重新培养位置感和转弯技巧。虽然可以通过在路面安装一定数量的传感器采集车辆位置,如中国实用新型201120277850.8所采用的永磁铁,或工程测距上常用的红外线、激光、超声波等,但是此类传感器均只能在个别固定点位上感知,施工、维护复杂,整体造价也昂贵,并且仍需要联动摄像机才能实现取证。
无论学员学习还是教练员教学,主要都是基于视觉信息再做出判断,因此基于机器视觉对坡道定点停车和起步整个动态过程进行检测方式也是最易被接受的。
中国实用新型201120489062.5虽然介绍了一种用于驾驶员考试的直线边距的视频检测装置,但其核心为:“图像处理单元将得到的图像分别映射到HSV和LAB色彩空间,并在各空间阈值化,形成直线像元,像元比较单元运用概率原理,对输入像元进行统计,得出最符合右边线特征的直线元,计算出此直线元的右边距”。总所周知,这种方式在现实环境下很难具备可操作性,因为车辆自身存在多条直线像元,如车窗、顶棚等,同时背景环境也往往存在大量直线像元,如路缘石、停车标志线等,这种情况下,难以在像素层面将“车”从背景环境中提取出来,最终导致检测不准确。
本发明公开一种完全基于机器视觉的坡道定点停车和起步检测系统及方法,不但结构简洁,同时能实时、准确检测车辆位置、姿态以及和停车标志线、车道边界线的最短距离,给出整个过程的综合评分的同时还能给出抓拍图片、视频录像等信息
发明内容
本发明目的在于提供一种坡道定点停车和起步检测系统及其检测方法,其可实现对训练车进行坡道定点停车和起步过程中的定量分析,有利于训练成果的实时监测和追踪。
为了解决现有技术中的这些问题,本发明提供的技术方案是:
一种坡道定点停车和起步系统,它包括安装在坡道停车区域附近的前端系统和部署在管理中心的后端系统,所述前端系统包括主摄像机、图像分析仪以及置于训练车上的标志牌,后端系统包括服务器与客户端,前端系统通过传输网络连接后端系统,监控画面覆盖库位区域的主摄像机用于摄录库位处训练车的行驶状况,与主摄像机相连的图像分析仪持续接收主摄像机捕获的监控图像并压缩成监控图像,同时图像分析仪监测车辆的运行姿态,图像分析仪将监测结果与监控图像发送至后端系统的服务器,客户端可调用查看服务器内的监测结果与监控图像。
对于上述技术方案,发明人还有进一步的优化实施方案。
作为优化,所述的可俯视坡道区域的主摄像机设置于坡道停车区域上方的立杆上,并且其图像上、下边沿与坡道水平停车线尽可能保持平行。
作为优化,在主摄像机的两侧还设有辅助摄像机,用于辅助补充捕捉库位内训练车的运行轨迹。
作为优化,所述标记牌设置在车顶、发动机机顶盖或者后备箱盖上,所述标记牌上的标记图形为若干标记点,标记点排列成具有固定夹角和唯一交点的特定线段。
作为优化,主摄像机、辅助摄像机的机位旁均设有补光灯,所述补光灯的同步信号由主摄像机或者辅助摄像机给出,用于在光照过暗时进行频闪式补光。
本发明还提供了一种坡道定点停车和起步方法,所述方法涉及系统包括安装在坡道停车区域附近的前端系统和部署在管理中心的后端系统,所述前端系统包括主摄像机、辅助摄像机、图像分析仪以及置于训练车上的标志牌,后端系统包括服务器与客户端,前端系统通过传输网络连接后端系统,监控画面覆盖坡道区域的主摄像机用于摄录库位处训练车的行驶状况,图像分析仪与主摄像机、辅助摄像机相连,具体检测方法包括以下步骤:
步骤S1:通过直接人工测量车道标志线尺寸,运行摄像机标定程序,完成图像坐标系向世界坐标系的转化;
步骤S2:图像分析仪持续接收主摄像机捕获的坡道定点停车和起步监控图像,压缩成视频录像,同时对监控图像运行标志牌识别程序,获取标记点和标志牌的位置;
步骤S3:图像分析仪根据摄像机标定结果和标志牌识别结果,运行车辆位置姿态检测程序,获得车辆的位置和姿态;当图像分析仪在设定区域检测到标志牌时,开始训练项目计时;当车辆位置在坡道区域静止停车超过设定时间时,图像分析仪判定车辆进入停车状态,根据车辆当前位置,结合已知的车辆尺寸,进而确定车辆轮廓范围以及车头至停车标志线的距离、车辆轮廓外沿至两侧车道边界线的距离,并在车头至停车标志线距离超出设定范围或车辆压住两侧车道边界线时触发主摄像机或辅助摄像机抓拍图片;当车辆由停车状态重新进入运动状态时,图像分析仪判定车辆进入起步阶段,如果检测到车辆动态位置至先前停车位置的最大后退距离超过了设定值,则图像分析仪判定车辆发生溜车,触发主摄像机抓拍图片;当图像分析仪识别的标志牌从图像的特定区域消失时,判定车辆驶离主摄像机覆盖区域,图像分析仪将训练用时、停车位置坐标、溜车距离等测量信息,连同抓拍图片、视频录像均发送至服务器;
步骤S4:服务器收到各图像分析仪发来的测量信息后,运行评分程序,获得本次坡道定点停车和起步综合评分;
步骤S5:学员操作客户端,通过传输网络登录服务器,浏览训练相关的数据记录、图片、视频等信息,并依据需求打印、下载信息;教练员操作客户端,通过传输网络登录服务器,浏览所教学员的数据记录、图片、视频等信息,并依据需求打印、下载信息。
作为优化,步骤S3中,在停车过程中车辆压线或距离小于设定阈值时触发主摄像机1或辅助摄像机2抓拍图片并发送至图像分析仪。
作为优化,步骤S1中,进行摄像机标定时,所述摄像机标定程序的步骤为:
以车道边界线与第一条停车标志线的其中一个交点为坐标原点,测量坡道实际场地中四个车道边界线端点的世界坐标;
摄像机抓拍一幅图像,以任意像素点为原点,手动标记出四个车道边界线端点的图像坐标;
将四个车道边界线端点的世界坐标和像素坐标代入图像-世界坐标转化线性方程组中,求解图像-世界坐标转化矩阵;
将任意一个世界坐标系下某点坐标值代入图像-世界坐标转化矩阵已知的图像-世界坐标转化线性方程组,即可计算出该点对应的图像坐标;
在已知世界坐标高度值的前提下,将任意一个图像坐标代入图像-世界坐标转化矩阵已知的图像-世界坐标转化线性方程组,即可计算出该点对应的世界坐标;至此,完成摄像机标定。
作为优化,步骤S2中进行标志牌识别的流程如下:
对图像进行阈值分割,获得分割后的图像;
对阈值分割后的图像进行连通域提取,判断连通域长、宽是否符合标志牌标记点图形的长、宽设定值,如果符合,则标记该连通域;
逐个判断标记的连通域能否连接成和实际标记牌一致的形状,包括标记点数量和标记点连线所成的夹角,如果可以,则视连通区域为标记点检测图形,否则舍弃该连通域;重复本步骤,直至遍历所有连通域;
以标记点检测图形为参考点,标识出其它附加字母和数字区域并识别,至此完成整个标志牌的识别。
作为优化,本检测方法中步骤S3中进行车辆位置姿态检测的步骤流程为:
将标志牌识别程序中获取的标记点检测图形的图像坐标代入摄像机标定程序的图像-世界坐标转化线性方程组中,即可获得标记点检测图形的世界坐标;
在世界坐标系中,将标记点检测图形按照标志牌标原始标记点图形的排列规则连成存在交点的线段;
在世界坐标系中,计算交点的坐标以及线段的夹角,交点坐标即为车辆位置,线段夹角即为车辆姿态。
所述评分程序的具体步骤为:
统计是否存在车辆压线、用时超过最大时限、停车位置不在规定区域、溜车超过规定要求范围等明显操作失误,如果存在,则直接判定本次坡道定点停车和起步不合格,结束评分;
判断用时是否在标准范围内,如果未超过,则不扣分,如果超过,则按照设定规则扣除相应分数;
根据车辆停车时车头至停车标志线的距离,按照设定规则扣除相应分数;
根据车辆起步阶段动态位置至先前停车位置的最大后退距离,按照设定规则扣除相应分数;
统计最终综合得分,若低于设定值,则判定不合格,否则判定为合格并给出判定分数。
相对于现有技术中的方案,本发明的优点是:
1.发明描述了了一种坡道定点停车和起步检测系统及其检测方法,本发明通过人工测量车道标志线、训练车的物理尺寸,记录摄像机画面,完成坐标系标定;图像分析仪持续接收摄像机捕获的监控图像并识别训练车上的标志牌,通过已标定的坐标系推算出车辆的实际位置、姿态、轮廓范围,并在车头至停车标志线距离超出设定范围或车辆压住两侧车道边界线时触发主摄像机或辅助摄像机抓拍图片;服务器通过传输网络接收来自图像分析仪的测量数据和图片、视频,并计算出训练评分,驾驶员及教练员通过后端的客户端对信息进行查询或调阅视频录像,如此实现对驾驶员的有效培训,提高驾培人员的学习效率。;
2.本发明完全基于视频技术,不需要在场地上埋设其它传感器,也不需要增加任何车载电气设备,结构简单,成本低廉;
3.本发明直接基于视频技术,支持对压线等异常情况的图片抓拍,取证方便。
附图说明
下面结合附图及实施例对本发明作进一步描述:
下面结合附图及实施例对本发明作进一步描述:
图1是本发明实施例的系统结构示意图;
图2是本发明实施例的标志牌示意图;
图3是本发明实施例的系统总体工作流程图;
图4是本发明实施例的摄像机标定程序流程图;
图5是本发明实施例的标志牌识别程序流程图;
图6是本发明实施例的车辆位置姿态检测流程图;
图7是本发明实施例的评分程序流程图。
其中:1、主摄像机;2、辅助摄像机;3、补光灯;4、图像分析仪;5、标志牌;6、传输网络;7、服务器;8、客户端。
具体实施方式
实施例:
本实施例描述了一种坡道定点停车和起步检测系统及其检测方法,系统结构如图1所示,系统由安装在坡道停车区域附近的前端系统和部署在管理中心的后端系统组成。前端系统主要有:主摄像机1、辅助摄像机2、补光灯3、图像分析仪4以及置于训练车上的标志牌5;后端系统主要有:服务器7、客户端8;前、后端系统通过传输网络6互连。
主摄像机1安装于坡道停车标志线相距5米的立杆横臂上,并与车道中心线对齐,为了便于主摄像机1俯视停车区域,立杆优先安装在停车线前方,即靠近坡顶一侧,立杆高度为5米,其图像上、下边沿与坡道水平停车线尽可能保持平行。主摄像机1采用工业级宽温设计,传感器采用500万CCD,分辨率大于2592x1936,帧率不低于8帧/秒,内置千兆以太网接口,同时配以10mm~20mm多款定焦镜头或者变焦广角镜头,这样能有效保证上述安装条件下监控画面覆盖停车线先后各3米区域线区域,且没有盲区,同时确保标志牌横向像素宽度不少于500个像素。辅助摄像机2可以安装于主摄像机1所在的同一个立杆横臂上,具体位置为车道左右边界线外0.4-1米,辅助摄像机采用工业级宽温设计,传感器采用200万CCD,分辨率大于1920x1080,帧率不低于8帧/秒,内置千兆以太网接口,同时配以10mm~20mm多款定焦镜头或者变焦镜头,这样能有效保证上述安装条件下能有效监控车轮压线。
补光灯3采用频闪式LED补光灯,同步信号由主摄像机1给出的叫主补光灯,同步信号由辅助摄像机给出的叫辅助补光灯。补光灯3功率和可视角度依据安装位置而定。为避免车身反光造成摄像机过曝,补光灯3与控制其同步的摄像机应当间隔一定距离安装,一般不小于0.5米。当补光灯2安装高度为5米,距离车位中心水平距离为5米时,可视角度不小于45度,功率不低于15W,与摄像机间隔1米安装即可满足需求。
图像分析仪4采用嵌入式工业控制用计算机,其外壳为一体化散热外壳,不需要散热风扇,有效防治内部积尘,提高系统稳定性;当连接500万像素的CCD摄像机时,要求配置主频不低于2.4GHz的CPU,不少于4GB的内存,不少于32GB的硬盘作为外存以及千兆以太网、RS232等硬件接口,上述配置确保图像分析仪4有足够的计算、存储和通信资源来运行各类图像处理算法和应用程序。
服务器7可采用塔式服务器,选用主频大于2.8GHz、8MB缓存的四核处理器,内存不低于4GB,以保证在部署多台图像分析仪4时仍能保证系统响应实时性。
客户端8为普通PC即可,可配备打印机、IC卡读卡器或指纹采集器等外围设备。
传输网络6在跨接前、后端系统时采用光纤或3G无线通信网络,而前、后端系统本地多采用基于双绞线的千兆以太网。
主摄像机1、辅助摄像机2、图像分析仪4、服务器7、客户端8通过传输网络6实现数据交换。
如图2所示,本发明的标志牌5示意图由三部分组成:标记点图形、驾校代号字符、训练车编号字符:标记点图形必须能明确指示标志牌位置和方向,如采用T型标志,其横向线段由5个白底黑圆图形组成,竖向线段由3个黑底白圆图形组成,横向线段和纵向线段通过图形二值化、连通域提取后能很容易地区分并识别,横向线段与纵向线段存在垂直夹角;驾校代号字符采用两位英文字母,如“华丰驾校”可用“HF”来指代;训练车编号字符采用三位阿拉伯数字。
如图3所示是本发明的系统总体工作流程图:
步骤S1:通过直接人工测量坡道标志线尺寸,运行摄像机标定程序,实现图像坐标系与世界坐标系的相互转化;
步骤S2:图像分析仪4持续接收主摄像机1捕获的监控图像,压缩成视频录像,同时运行标志牌识别程序,获取标志牌5的位置和方向;
步骤S3:图像分析仪4根据摄像机标定结果和标志牌识别结果,运行车辆位置姿态检测程序,获得标志牌的位置和姿态;当图像分析仪在设定区域检测到标志牌时,开始训练项目计时;当车辆位置在坡道区域静止停车超过设定时间时,图像分析仪判定车辆进入停车状态,根据车辆当前位置,结合已知的车辆尺寸,进而确定车辆轮廓范围以及车头至停车标志线的距离,并在车辆压住两侧车道边界线或车头至停车标志线距离超出设定范围时触发主摄像机或辅助摄像机抓拍图片;当车辆由停车状态重新进入运动状态时,图像分析仪判定车辆进入起步阶段,如果检测到车辆动态位置距离先前停车位置最大后退距离超过了设定值,则图像分析仪判定车辆发生溜车,触发主摄像机抓拍图片;当图像分析仪识别的标志牌从图像的特定区域消失时,判定车辆驶离主摄像机覆盖区域,图像分析仪将训练用时、停车位置坐标、溜车距离等测量信息,连同抓拍图片、视频录像均发送至服务器;
步骤S4:图像分析仪4将步骤S3中获得的车辆位置、姿态、测距结果以及抓拍图片、视频录像等数据通过传输网络6发送至服务器7,服务器7运行数据管理程序分析各类信息并给出综合评分、项目用时等应用数据,以数据记录的方式存入数据库,将图片、视频存入指定文件路径,同时运行应用服务程序支持、管理客户端接入。
步骤S5:学员操作客户端8,通过传输网络6登录服务器7,浏览训练相关的数据记录、图片、视频等信息,并依据需求打印、下载信息;教练员操作客户端8,通过传输网络6登录服务器7,浏览所教学员的数据记录、图片、视频等信息,并依据需求打印、下载信息。
摄像机标定的目的即是确定世界坐标系与图像坐标系的对应关系,世界坐标系即车辆所在的现实世界的坐标系,由3个坐标轴:X轴、Y轴、Z轴组成,其中Z轴垂直于坡道平面;图像坐标系即摄像机所拍摄的平面图像,由2个坐标轴:U轴、V轴组成。假设在世界坐标系X、Y、Z三个坐标轴中某点的坐标为(xw,yw,zw),其在图像坐标系中的对应点坐标为(u,v),则这两点坐标的对应关系可以表示为线性方程组:
该方程组称为“图像-世界坐标转化线性方程组”,其中α是计算过程的中间参数,(u,v)是图像像素坐标,(xw,yw,zw)是世界坐标,(fx,fy)分别为图像坐标系中X轴与Y轴方向的焦距,(u0,v0)为摄像机光轴与图像平面的交点在图像坐标中的位置。T=[tx,ty,tz,1]是世界坐标原点在图像坐标中的映射参数,R是正交矩阵,定义为:
M矩阵是图像-世界坐标系变换矩阵,包含了所有待确定的摄像机标定参数,摄像机标定就是求解M矩阵的过程。我们通过测量获得训练场地的四个顶点的世界坐标值{(xwi,ywi,zwi)|i=1,…,4},通过手工标记获得图像中这4个角点在图像中的坐标值{(ui,vi)|i=1,…,4},即可通过解上述线性方程组的方法求出M矩阵。
在计算出M矩阵后,任给一个世界坐标系下某点坐标值,都可以计算出该点对应的图像坐标值;任给一个图像坐标系下某点的坐标并且已知这点在世界坐标中对应点的高度zw,可以计算出对应点的世界坐标。因此本发明采用如图4所示的摄像机标定程序流程图:
步骤S101:以车道边界线与第一条停车标志线的其中一个交点为坐标原点,测量坡道实际场地中四个车道边界线端点的世界坐标{(xwi,ywi,zwi)|i=1,…,4};
步骤S102:摄像机抓拍一幅图像,以任意像素点为原点,手动标记出四个车道边界线端点的图像坐标{(ui,vi)|i=1,…,4};
步骤S103:将四个车道边界线端点的世界坐标和像素坐标代入图像-世界坐标转化线性方程组中,求解图像-世界坐标转化矩阵M;
步骤S104:将任意一个世界坐标系下某点坐标值代入M已知的图像-世界坐标转化线性方程组,即可计算出该点对应的图像坐标;在已知世界坐标高度zw的前提下,将任意一个图像坐标代入图像-世界坐标转化矩阵已知的图像-世界坐标转化线性方程组,即可计算出该点对应的世界坐标;至此,完成摄像机标定。
当采用图2所示的T型标志牌时,黑圆与白圆是识别标志的主要依据,本发明可采用如图5所示的标志牌识别程序流程图:
步骤S201:设图像坐标(x,y)处的像素值记为px,y,定义两幅阈值分割图像LB、LD分别用于检测黑圆和白圆,其像素值为分别为:
其中T_B,T_D是预先设定值。根据上式计算出LB、LD所有的像素值。
步骤S202:对于检测白圆,找出LB中为1的连通区域,将此区域的长、宽值转换为世界坐标系下的长、宽值,判断长、宽值是否符合标志牌5中的白圆大小,符合则记为检测到的白圆。同理,对于LD做同样处理,可以检测出黑圆。
步骤S203:利用检测出的白圆和黑圆,逐个判断是否能够连接成和标志牌一致的特定线段,如果可以,则视该白圆、黑圆为标记点检测图形,否则舍弃该白圆或黑圆;重复本步骤,直至遍历所有白圆和黑圆;
步骤S204:如果步骤S203找到标记点检测图形,则以标记点检测图形为参考点,定位其它附加字母和数字区域,至于字符识别,可以采用模板匹配等方法识别,由于字符识别已经是图像处理的常用技术,如已经大量实用的车牌识别技术,同时考虑字符识别在本专利中并非核心技术点,在此不再赘述。至此完成整个标志牌5的识别。
由于标志牌5是粘贴于车辆的固定位置和方向,所以可以根据标志牌5的位置和方向推算出车辆的位置和姿态。这里假设车辆的尺寸参数,例如长、宽、高,以及标志牌在车身上的位置和方向已经通过测量获得。
当采用图2所示的T型标志牌5以及图3所示的标志牌检测方法时,多个黑圆组成的线段和多个白圆组成的线段的夹角Theta即为标志牌5方向。假设标志的图像坐标为(ui,vi),角度为Theta,标志牌5粘贴于车顶部,则zw=车辆高度,是已知的,因此定位车辆的位置和姿态可采用如图6所示的车辆位置姿态检测流程:
步骤S301:将标志牌识别程序中获取的标记点检测图形的图像坐标(ui,vi)代入摄像机标定程序的图像-世界坐标转化线性方程组中,即可获得标记点检测图形的世界坐标(xw,yw,zw);
步骤S302:在世界坐标系中,将标记点检测图形按照标志牌标原始记点图形的排列规则连成存在交点的线段;
步骤S303:在世界坐标系中,计算交点的坐标以及线段的夹角Thetaw,交点坐标即为车辆位置,线段夹角即为车辆姿态。
如图7所示是本发明的评分程序流程图。
步骤S401:统计是否存在车辆压线、用时超过最大时限、停车位置不在规定区域、溜车超过规定要求范围等明显操作失误,如果存在,则直接判定本次坡道定点停车和起步不合格,评分结束;
步骤S402:判断用时是否在标准范围内,如果未超过标准范围,则不扣分,如果超过,则按照设定规则扣除相应分数,例如每超时5秒扣1分,若超时200秒,即为步骤S401所述的用时超过最大时限;
步骤S403:计算停车位置距离标准位置的直线距离,车辆位置通过步骤S3获得,直线距离可以通过在计算世界坐标系中计算获得;直线距离与扣分的关系可以设定为:如果距离小于200mm,不扣分;距离大于200mm并小于1000mm,按照1分/20mm扣减;距离大于1000mm即为步骤S401所述停车位置不在规定区域;
步骤S404:计算机车辆起步阶段动态位置至先前停车位置的最大后退距离,按照此距离扣分:若小于100mm,则不扣分;若大于100mm并小于500mm,则按照1分/10mm扣减;若大于500mm,即为步骤S401所述溜车超过规定要求范围;
步骤S405:统计最终综合得分,若低于设定值,则判定不合格,否则判定为合格并给出判定分数。
当然上述实施例只为说明本发明的技术构思及特点,其目的在于让熟悉此项技术的人能够了解本发明的内容并据以实施,并不能以此限制本发明的保护范围。凡根据本发明主要技术方案的精神实质所做的修饰,都应涵盖在本发明的保护范围之内。
Claims (10)
1.一种坡道定点停车和起步系统,其特征在于,它包括安装在坡道停车区域附近的前端系统和部署在管理中心的后端系统,所述前端系统包括主摄像机、图像分析仪以及置于训练车上的标志牌,后端系统包括服务器与客户端,前端系统通过传输网络连接后端系统,监控画面覆盖库位区域的主摄像机用于摄录库位处训练车的行驶状况,与主摄像机相连的图像分析仪持续接收主摄像机捕获的监控图像并压缩成监控图像,同时图像分析仪监测车辆的运行姿态,图像分析仪将监测结果与监控图像发送至后端系统的服务器,客户端可调用查看服务器内的监测结果与监控图像。
2.根据权利要求1所述的坡道定点停车和起步系统,其特征在于,所述的可俯视坡道区域的主摄像机设置于坡道停车区域上方的立杆上,并且其图像上、下边沿与坡道水平停车线尽可能保持平行。
3.根据权利要求1所述的坡道定点停车和起步系统,其特征在于,在主摄像机的两侧还设有辅助摄像机,用于辅助补充捕捉库位内训练车的运行轨迹。
4.根据权利要求1所述的坡道定点停车和起步系统,其特征在于,所述标记牌设置在车顶、发动机机顶盖或者后备箱盖上,所述标记牌上的标记图形为若干标记点,标记点排列成具有固定夹角和唯一交点的特定线段。
5.根据权利要求1或2或3所述的坡道定点停车和起步系统,其特征在于,主摄像机、辅助摄像机的机位旁均设有补光灯,所述补光灯的同步信号由主摄像机或者辅助摄像机给出,用于在光照过暗时进行频闪式补光。
6.一种坡道定点停车和起步检测方法,其特征在于,所述方法涉及系统包括安装在坡道停车区域附近的前端系统和部署在管理中心的后端系统,所述前端系统包括主摄像机、辅助摄像机、图像分析仪以及置于训练车上的标志牌,后端系统包括服务器与客户端,前端系统通过传输网络连接后端系统,监控画面覆盖坡道区域的主摄像机用于摄录库位处训练车的行驶状况,图像分析仪与主摄像机、辅助摄像机相连,具体检测方法包括以下步骤:
步骤S1:通过直接人工测量车道标志线尺寸,运行摄像机标定程序,完成图像坐标系向世界坐标系的转化;
步骤S2:图像分析仪持续接收主摄像机捕获的坡道定点停车和起步监控图像,压缩成视频录像,同时对监控图像运行标志牌识别程序,获取标记点和标志牌的位置;
步骤S3:图像分析仪根据摄像机标定结果和标志牌识别结果,运行车辆位置姿态检测程序,获得车辆的位置和姿态;当图像分析仪在设定区域检测到标志牌时,开始训练项目计时;当车辆位置在坡道区域静止停车超过设定时间时,图像分析仪判定车辆进入停车状态,根据车辆当前位置,结合已知的车辆尺寸,进而确定车辆轮廓范围以及车头至停车标志线的距离、车辆轮廓外沿至两侧车道边界线的距离,并在车头至停车标志线距离超出设定范围或车辆压住两侧车道边界线时触发主摄像机或辅助摄像机抓拍图片;当车辆由停车状态重新进入运动状态时,图像分析仪判定车辆进入起步阶段,如果检测到车辆动态位置至先前停车位置的最大后退距离超过了设定值,则图像分析仪判定车辆发生溜车,触发主摄像机抓拍图片;当图像分析仪识别的标志牌从图像的特定区域消失时,判定车辆驶离主摄像机覆盖区域,图像分析仪将训练用时、停车位置坐标、溜车距离等测量信息,连同抓拍图片、视频录像均发送至服务器;
步骤S4:服务器收到各图像分析仪发来的测量信息后,运行评分程序,获得本次坡道定点停车和起步综合评分;
步骤S5:学员操作客户端,通过传输网络登录服务器,浏览训练相关的数据记录、图片、视频等信息,并依据需求打印、下载信息;教练员操作客户端,通过传输网络登录服务器,浏览所教学员的数据记录、图片、视频等信息,并依据需求打印、下载信息。
7.根据权利要求6所述的坡道定点停车和起步检测方法,其特征在于,步骤S3中,在停车过程中车辆压线或距离小于设定阈值时触发主摄像机1或辅助摄像机2抓拍图片并发送至图像分析仪。
8.根据权利要求6所述的坡道定点停车和起步检测方法,其特征在于,步骤S1中,进行摄像机标定时,所述摄像机标定程序的步骤为:
以车道边界线与第一条停车标志线的其中一个交点为坐标原点,测量坡道实际场地中四个车道边界线端点的世界坐标;
摄像机抓拍一幅图像,以任意像素点为原点,手动标记出四个车道边界线端点的图像坐标;
将四个车道边界线端点的世界坐标和像素坐标代入图像-世界坐标转化线性方程组中,求解图像-世界坐标转化矩阵;
将任意一个世界坐标系下某点坐标值代入图像-世界坐标转化矩阵已知的图像-世界坐标转化线性方程组,即可计算出该点对应的图像坐标;在已知世界坐标高度值的前提下,将任意一个图像坐标代入图像-世界坐标转化矩阵已知的图像-世界坐标转化线性方程组,即可计算出该点对应的世界坐标;至此,完成摄像机标定。
9.根据权利要求6或7或8所述的所述的坡道定点停车和起步检测方法,其特征在于,步骤S2中进行标志牌识别的流程如下:
对图像进行阈值分割,获得分割后的图像;
对阈值分割后的图像进行连通域提取,判断连通域长、宽是否符合标志牌标记点图形的长、宽设定值,如果符合,则标记该连通域;
逐个判断标记的连通域能否连接成和实际标记牌一致的形状,包括标记点数量和标记点连线所成的夹角,如果可以,则视连通区域为标记点检测图形,否则舍弃该连通域;重复本步骤,直至遍历所有连通域;
以标记点检测图形为参考点,标识出其它附加字母和数字区域并识别,至此完成整个标志牌的识别。
10.根据权利要求9所述的所述的坡道定点停车和起步检测方法,其特征在于,本检测方法中步骤S3中进行车辆位置姿态检测的步骤流程为:
将标志牌识别程序中获取的标记点检测图形的图像坐标代入摄像机标定程序的图像-世界坐标转化线性方程组中,即可获得标记点检测图形的世界坐标;
在世界坐标系中,将标记点检测图形按照标志牌标原始标记点图形的排列规则连成存在交点的线段;
在世界坐标系中,计算交点的坐标以及线段的夹角,交点坐标即为车辆位置,线段夹角即为车辆姿态。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210584043.XA CN103065519B (zh) | 2012-12-28 | 2012-12-28 | 坡道定点停车和起步检测系统及其检测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210584043.XA CN103065519B (zh) | 2012-12-28 | 2012-12-28 | 坡道定点停车和起步检测系统及其检测方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103065519A true CN103065519A (zh) | 2013-04-24 |
CN103065519B CN103065519B (zh) | 2015-04-01 |
Family
ID=48108130
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210584043.XA Active CN103065519B (zh) | 2012-12-28 | 2012-12-28 | 坡道定点停车和起步检测系统及其检测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103065519B (zh) |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104794931A (zh) * | 2015-04-15 | 2015-07-22 | 深圳市景阳信息技术有限公司 | 利用摄像机监测车位使用情况的方法及系统 |
CN105809694A (zh) * | 2016-03-10 | 2016-07-27 | 成都康烨科技有限公司 | 图像数据处理方法以及装置 |
CN106559646A (zh) * | 2015-09-28 | 2017-04-05 | 柳州桂通科技股份有限公司 | 一种服务于驾考车辆的全景光学监测系统及其用于驾考信息的采集和处理方法 |
CN106898195A (zh) * | 2017-02-28 | 2017-06-27 | 广州地理研究所 | 一种基于汽车电子标识的坡道启停考核系统及其应用方法 |
CN106909876A (zh) * | 2015-12-22 | 2017-06-30 | 豪威科技股份有限公司 | 车道检测系统及方法 |
CN108053726A (zh) * | 2018-01-26 | 2018-05-18 | 成都杏仁网络科技有限公司 | 一种用于驾校场地练习的坡道定点停车检测系统 |
CN108538151A (zh) * | 2018-06-19 | 2018-09-14 | 江苏省交通技师学院 | 一种压路机边界施工训练专用装置及方法 |
CN108806371A (zh) * | 2018-08-31 | 2018-11-13 | 成都杏仁网络科技有限公司 | 一种基于驾考科目训练的智能判定方法及系统 |
CN109001757A (zh) * | 2018-05-31 | 2018-12-14 | 重庆大学 | 一种基于2d激光雷达的车位智能检测方法 |
WO2019223586A1 (zh) * | 2018-05-25 | 2019-11-28 | 杭州海康威视数字技术股份有限公司 | 车位使用状况的检测方法、装置、电子设备及存储介质 |
CN110765963A (zh) * | 2019-10-29 | 2020-02-07 | 上海眼控科技股份有限公司 | 车辆制动检测方法、装置、设备及计算机可读存储介质 |
CN111161107A (zh) * | 2019-11-26 | 2020-05-15 | 西安华众电子科技股份有限公司 | 坡道定点停车和起步评判方法、装置、设备和存储介质 |
CN111402671A (zh) * | 2018-10-19 | 2020-07-10 | 上海肩并肩电子科技有限公司 | 一种驾校车语音视频教学方法及装置 |
CN111753716A (zh) * | 2020-06-23 | 2020-10-09 | 中国联合网络通信集团有限公司 | 一种停车压线检测方法及服务器 |
CN112857831A (zh) * | 2021-01-18 | 2021-05-28 | 北京智能车联产业创新中心有限公司 | 自动驾驶车辆起步能力测试方法 |
CN113561897A (zh) * | 2021-07-15 | 2021-10-29 | 河北三国新能源科技有限公司 | 一种基于全景环视的驾考车坡道停车位置判断方法和系统 |
CN113816326A (zh) * | 2020-06-18 | 2021-12-21 | 中国石油化工股份有限公司 | 用于控制加油装置的出油端的方法、装置和系统 |
WO2023028876A1 (zh) * | 2021-08-31 | 2023-03-09 | 宁德时代新能源科技股份有限公司 | 换电方法、模块、设备及介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN2600787Y (zh) * | 2002-08-21 | 2004-01-21 | 张拥军 | 利用数字图像识别技术测量车辆起步时运动轨迹的装置 |
CN2901734Y (zh) * | 2006-01-17 | 2007-05-16 | 东南大学 | 摄像机标定数据的标定板 |
CN201037962Y (zh) * | 2006-06-29 | 2008-03-19 | 北京艾曼特科技有限公司 | 一种电子桩考系统 |
CN202003539U (zh) * | 2011-01-07 | 2011-10-05 | 北京精英智通交通系统科技有限公司 | 机动车驾驶人科目三视频跟踪考试系统 |
JP2012010233A (ja) * | 2010-06-28 | 2012-01-12 | Canon Inc | 画像処理装置、画像処理システム及び画像処理方法 |
CN102768811A (zh) * | 2012-06-18 | 2012-11-07 | 柳州桂通科技有限公司 | 汽车驾驶人驾驶技能练习辅导和考试评分装置及实现方法 |
CN202615664U (zh) * | 2012-06-20 | 2012-12-19 | 深圳市泰慧自动化技术有限公司 | 特种作业实操考试的不安全操作检测系统 |
-
2012
- 2012-12-28 CN CN201210584043.XA patent/CN103065519B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN2600787Y (zh) * | 2002-08-21 | 2004-01-21 | 张拥军 | 利用数字图像识别技术测量车辆起步时运动轨迹的装置 |
CN2901734Y (zh) * | 2006-01-17 | 2007-05-16 | 东南大学 | 摄像机标定数据的标定板 |
CN201037962Y (zh) * | 2006-06-29 | 2008-03-19 | 北京艾曼特科技有限公司 | 一种电子桩考系统 |
JP2012010233A (ja) * | 2010-06-28 | 2012-01-12 | Canon Inc | 画像処理装置、画像処理システム及び画像処理方法 |
CN202003539U (zh) * | 2011-01-07 | 2011-10-05 | 北京精英智通交通系统科技有限公司 | 机动车驾驶人科目三视频跟踪考试系统 |
CN102768811A (zh) * | 2012-06-18 | 2012-11-07 | 柳州桂通科技有限公司 | 汽车驾驶人驾驶技能练习辅导和考试评分装置及实现方法 |
CN202615664U (zh) * | 2012-06-20 | 2012-12-19 | 深圳市泰慧自动化技术有限公司 | 特种作业实操考试的不安全操作检测系统 |
Cited By (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104794931A (zh) * | 2015-04-15 | 2015-07-22 | 深圳市景阳信息技术有限公司 | 利用摄像机监测车位使用情况的方法及系统 |
CN104794931B (zh) * | 2015-04-15 | 2018-10-02 | 深圳市景阳信息技术有限公司 | 利用摄像机监测车位使用情况的方法及系统 |
CN106559646A (zh) * | 2015-09-28 | 2017-04-05 | 柳州桂通科技股份有限公司 | 一种服务于驾考车辆的全景光学监测系统及其用于驾考信息的采集和处理方法 |
CN106559646B (zh) * | 2015-09-28 | 2023-04-28 | 柳州桂通科技股份有限公司 | 一种服务于驾考车辆的全景光学监测系统及其用于驾考信息的采集和处理方法 |
CN106909876A (zh) * | 2015-12-22 | 2017-06-30 | 豪威科技股份有限公司 | 车道检测系统及方法 |
CN106909876B (zh) * | 2015-12-22 | 2021-05-04 | 豪威科技股份有限公司 | 车道检测系统及方法 |
CN105809694A (zh) * | 2016-03-10 | 2016-07-27 | 成都康烨科技有限公司 | 图像数据处理方法以及装置 |
CN105809694B (zh) * | 2016-03-10 | 2018-09-18 | 成都康烨科技有限公司 | 图像数据处理方法以及装置 |
CN106898195A (zh) * | 2017-02-28 | 2017-06-27 | 广州地理研究所 | 一种基于汽车电子标识的坡道启停考核系统及其应用方法 |
CN108053726A (zh) * | 2018-01-26 | 2018-05-18 | 成都杏仁网络科技有限公司 | 一种用于驾校场地练习的坡道定点停车检测系统 |
WO2019223586A1 (zh) * | 2018-05-25 | 2019-11-28 | 杭州海康威视数字技术股份有限公司 | 车位使用状况的检测方法、装置、电子设备及存储介质 |
US11455805B2 (en) | 2018-05-25 | 2022-09-27 | Hangzhou Hikvision Digital Technology Co., Ltd. | Method and apparatus for detecting parking space usage condition, electronic device, and storage medium |
CN109001757A (zh) * | 2018-05-31 | 2018-12-14 | 重庆大学 | 一种基于2d激光雷达的车位智能检测方法 |
CN108538151A (zh) * | 2018-06-19 | 2018-09-14 | 江苏省交通技师学院 | 一种压路机边界施工训练专用装置及方法 |
CN108806371A (zh) * | 2018-08-31 | 2018-11-13 | 成都杏仁网络科技有限公司 | 一种基于驾考科目训练的智能判定方法及系统 |
CN108806371B (zh) * | 2018-08-31 | 2020-06-26 | 成都的卢青创网络科技有限公司 | 一种基于驾考科目训练的智能判定方法及系统 |
CN111402671A (zh) * | 2018-10-19 | 2020-07-10 | 上海肩并肩电子科技有限公司 | 一种驾校车语音视频教学方法及装置 |
CN110765963A (zh) * | 2019-10-29 | 2020-02-07 | 上海眼控科技股份有限公司 | 车辆制动检测方法、装置、设备及计算机可读存储介质 |
CN111161107A (zh) * | 2019-11-26 | 2020-05-15 | 西安华众电子科技股份有限公司 | 坡道定点停车和起步评判方法、装置、设备和存储介质 |
CN113816326A (zh) * | 2020-06-18 | 2021-12-21 | 中国石油化工股份有限公司 | 用于控制加油装置的出油端的方法、装置和系统 |
CN111753716A (zh) * | 2020-06-23 | 2020-10-09 | 中国联合网络通信集团有限公司 | 一种停车压线检测方法及服务器 |
CN111753716B (zh) * | 2020-06-23 | 2023-11-24 | 中国联合网络通信集团有限公司 | 一种停车压线检测方法及服务器 |
CN112857831A (zh) * | 2021-01-18 | 2021-05-28 | 北京智能车联产业创新中心有限公司 | 自动驾驶车辆起步能力测试方法 |
CN113561897A (zh) * | 2021-07-15 | 2021-10-29 | 河北三国新能源科技有限公司 | 一种基于全景环视的驾考车坡道停车位置判断方法和系统 |
WO2023028876A1 (zh) * | 2021-08-31 | 2023-03-09 | 宁德时代新能源科技股份有限公司 | 换电方法、模块、设备及介质 |
EP4169765A4 (en) * | 2021-08-31 | 2023-04-26 | Contemporary Amperex Technology Co., Limited | BATTERY, MODULE, DEVICE, AND HOLDER SWAP METHOD |
JP7460655B2 (ja) | 2021-08-31 | 2024-04-02 | 寧徳時代新能源科技股▲分▼有限公司 | 電池交換方法、モジュール、デバイス及び媒体 |
Also Published As
Publication number | Publication date |
---|---|
CN103065519B (zh) | 2015-04-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103065519B (zh) | 坡道定点停车和起步检测系统及其检测方法 | |
CN103065520B (zh) | 倒车入库检测系统及其检测方法 | |
CN103076007B (zh) | 侧方位停车检测系统及其检测方法 | |
CN106919915B (zh) | 基于adas系统的地图道路标记及道路质量采集装置及方法 | |
CN103000067B (zh) | 直角转弯检测系统及其检测方法 | |
CN102867417B (zh) | 一种出租车防伪系统及方法 | |
CN105302151B (zh) | 一种飞机入坞引导和机型识别的系统及方法 | |
CN110619279B (zh) | 一种基于跟踪的路面交通标志实例分割方法 | |
CN105674880B (zh) | 基于双目原理的接触网几何参数测量方法及系统 | |
CN110142785A (zh) | 一种基于目标检测的巡检机器人视觉伺服方法 | |
CN105550654B (zh) | 高速列车图像采集系统、实时车号检测系统及方法 | |
CN105654732A (zh) | 一种基于深度图像的道路监控系统及方法 | |
CN103941746A (zh) | 无人机巡检图像处理系统及方法 | |
TW201344645A (zh) | 交通流量管控系統及方法 | |
CN106251695A (zh) | 基于车位状态监控的目的地停车位智能推荐系统及方法 | |
CN103837087B (zh) | 基于主动形状模型的受电弓自动检测方法 | |
KR102119033B1 (ko) | 영상을 이용한 도로의 노면 표시 훼손 정보 제공 장치 및 방법 | |
CN102538762A (zh) | 一种高铁接触网在线巡检装置、巡检方法以及其构成的高铁接触网检测系统 | |
CN102446355B (zh) | 一种基于双视场的无标定平面突起目标检测方法 | |
CN104506800A (zh) | 一种多方向电警摄像机场景合成及综合监控方法和装置 | |
CN103077639B (zh) | 曲线行驶检测系统及其检测方法 | |
CN114812403A (zh) | 基于无人机及机器视觉的大跨度钢结构吊装变形监测方法 | |
CN105869413A (zh) | 基于摄像头视频检测车流量和车速的方法 | |
CN206863768U (zh) | 一种基于方向盘图像的司机疲劳检测装置 | |
CN115857040A (zh) | 一种机车车顶异物动态视觉检测装置及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |