CN102538766A - 一种主动式智能车用障碍物检测方法 - Google Patents
一种主动式智能车用障碍物检测方法 Download PDFInfo
- Publication number
- CN102538766A CN102538766A CN2011104307848A CN201110430784A CN102538766A CN 102538766 A CN102538766 A CN 102538766A CN 2011104307848 A CN2011104307848 A CN 2011104307848A CN 201110430784 A CN201110430784 A CN 201110430784A CN 102538766 A CN102538766 A CN 102538766A
- Authority
- CN
- China
- Prior art keywords
- coordinate system
- testee
- reference frame
- point
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Image Processing (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
技术领域
本发明涉及一种基于立体视觉和光栅投射技术融合的主动式智能车用障碍物检测方法。
背景技术
公路交通事故已成为全世界广为关注的严重社会问题。中国拥有全世界1.9%的汽车,引发的交通死亡事故却占了全球的15%,成为交通事故最多发国家,随着汽车保有量的不断上升,交通安全问题日益成为一个突出的问题。
目前国内大多数汽车要保持安全行驶状态,仅在车尾部安装倒车雷达,或者在车内安装安全气囊,即在汽车发生事故时保护驾驶人员。这种系统在事故发生时存在诸多缺点。一、系统发生作用时,必然对驾驶人员会造成一定伤害;二、事故必然会造成一定的经济损失,轻则车辆损坏,重则车毁人亡;三、该系统一旦发生作用就完全报废,不能再次使用。
在国内外ITS以及Ⅳ研究领域中.关于车辆行驶路径上的障碍物检测研究,提出了许多算法和实施手段。如双目CCD、彩色CCD的计算机视觉方法和基于激光雷达的检测等方法。然而任何一种有效的障碍物检测系统不能只依靠单一传感器进行环境感知,尤其是在野外环境下。地形复杂,高低不平,由此引起车体行驶时的剧烈颠簸,会出现比较严重的障碍物漏检和虚报现象;如遇到恶劣的天气状况,单一传感器一旦失灵,则整个检测系统也就瘫痪,从而造成安全隐患和危险。因此,利用多种传感器信息融合技术检测智能车辆前方障碍物,具有获得信息量丰富、检测鲁棒性及正确率高、应用范围广等诸多优点。
发明内容
本发明所要解决的技术问题是针对目前车辆运行中辅助监测的不足,提出一种结合光栅扫描与立体视觉的主动式智能车用障碍物检测方法,将其应用于车辆障碍物自动识别检测和预警系统,通过直接报警或者与车辆制动装置连动,大幅度降低或减少交通事故发生的几率。
本发明解决上述技术问题所采用的技术方案是:一种主动式智能车用障碍物检测方法,其特征在于包括有以下步骤:
1)先对图像坐标系、车体坐标系和世界坐标系进行定义;
2)通过投影单元和采集单元找到被测物体表面任意一点 在CCD中的匹配位置,从而获得被测物体的图像信息;
3)所述的采集单元与车载计算机单元相联,车载计算机单元处理获得的被测物体的图像信息将其转化为被测物体的3D信息;
4)由车载计算机处理步骤3)中获得的被测物体的3D信息,判断物体是否对车辆行驶造成危害,若会产生危害则发出警报,若驾驶员未做出规避操作,将授权车辆制动系统采取制动动作。
按上述方案,所述的步骤1)对图像坐标系、车体坐标系和世界坐标系进行定义的具体方法是:
原点为车体的几何中心,定义为车辆前进方向、为横向方向、为高度方向,在基于立体视觉的主动光栅投射传感器系统的标定过程中,根据摄像机成像的线性理论,通过测量3D标定板上参考点在车体坐标系中的坐标,计算出以下左右(上角L,R分别代表左,右)相机的投影矩阵:
然后求出各组匹配点对应的3D坐标;
车体坐标系到世界坐标系的转换可描述为:
(5)。
基于立体视觉的主动光栅投射传感器系统,其特征在于包括有投影单元、采集单元和车载计算机单元,所述的投影单元包括有光源5、光栅1、投影物镜3和聚光镜4,其中,光源的前方设置有光栅,光栅的前后分别设置有投影物镜和聚光镜;采集单元包括有两个CCD2,其中CCD位于投影单元的两侧且对称设置,通过采集单元获得被测物体的图像信息,所述的采集单元与车载计算机单元相联,车载计算机单元处理获得的被测物体的图像信息将其转化为被测物体的3D信息,判断被测物体是否对车辆行驶造成危害,若会产生危害则发出警报,若驾驶员未做出规避操作,将授权车辆制动系统采取制动动作。
根据车型的不同,所采用的CCD与投影单元的夹角是可调的。而且,CCD所在的平面与投影单元所在平面一般具有一定的高度差。
本发明相对于现有技术的有益效果是:
本发明提出一种新的智能车用障碍物检测技术,融合立体视觉与光栅投射传感技术,能够快速精度检测到障碍物的方位和大小,可以给车辆准确的避障信息。提高了目标识别的效率,并为最终系统的实时性提供支持,由于使用多传感器相结合的方法使得检测效果更加稳定精确和更好的鲁棒性;使用光栅视觉投射传感器与双CCD摄像机结合的设计,使得系统更加紧凑、经济性更好,控制较为方便;本发明使得障碍物图像匹配点的定位和障碍物图像的匹配精度大大提高,从而大大提高对障碍物测量精度。
附图说明
图1 为发明的基于立体视觉的主动光栅投射传感器系统整体结构示意图;
图3 为本发明的系统流程图;
图4为本发明的图像坐标系、车体坐标系和世界坐标系示意图;
图5为本发明的求取外极约束条件示意图。
具体实施方式
本发明提出了一种基于立体视觉和光栅投射技术融合的主动式障碍物检测方法,主动式是指由测量系统向被测物体投射出特殊的结构光,通过扫描、编码或调制技术,结合立体视觉技术来获得待测物体的3D信息。
该技术首先对所设计的双目视觉系统进行3D标定,以建立双目测量数据与世界坐标的关系;接着基于光栅的编码原理如图2所示:光学投影系统将可以将一组光栅的图案投射到被测物上,并将受被测形面调制成测量图案;最后车载计算机根据检测所获得的图案采取直接报警或者与车辆制动装置连动做出规避动作。
具体的步骤如下(如图3):
1)先对图像坐标系、车体坐标系和世界坐标系进行定义;
3)所述的采集单元与车载计算机单元相联,车载计算机单元处理获得的被测物体的图像信息将其转化为被测物体的3D信息;
4)由车载计算机处理步骤3)中获得的被测物体的3D信息,判断物体是否对车辆行驶造成危害,若会产生危害则发出警报,若驾驶员未做出规避操作,将授权车辆制动系统采取制动动作。
按上述方案,所述的步骤1)对图像坐标系、车体坐标系和世界坐标系进行定义的具体方法是:
原点为车体的几何中心,定义为车辆前进方向、为横向方向、为高度方向,在基于立体视觉的主动光栅投射传感器系统的标定过程中,根据摄像机成像的线性理论,通过测量3D标定板上参考点在车体坐标系中的坐标,计算出以下左右(上角L,R分别代表左,右)相机的投影矩阵:
然后求出各组匹配点对应的3D坐标;
车体坐标系到世界坐标系的转换可描述为:
2) 基于光栅投影技术找到空间点在左右摄像机中的匹配位置
基于光栅投影的编码原理,如图1 所示:基于立体视觉的主动光栅投射传感器系统的投影单元可以将一组光栅的图案投射到被测物体上,并将被测物体的被测形面调制成编码图案。编码图案经车载计算机单元可以显示出的次编码图案,形成空间位二进制编码,则空间上的曲线可对应唯一的位二进制编码。例如,空间直线的编码为(直线 在黑图案区为编码1,在白图案区为编码0)。CCD可根据这一编码来确定匹配的光栅曲线。若被测物体的表面任意一点在CCD中的投影点位于某一经过编码的光栅曲线上,则在其中一侧的CCD中的匹配点必在同一编码的光栅曲线上,于是二维匹配问题可以降为一维匹配,即所需找到的匹配点一定在该经编码的光栅曲线上。
在现有的立体视觉成像系统中,存在着一个非常重要的约束条件,即外极约束。如图4所示设、分别为左右CCD的透视中心,它们的连线分别与左右CCD平面相交于外极中心、点;被测物体的空间点与点、组成外极平面,与左右CCD摄像机平面相交于外极线、。由于这个约束,被测物体的空间点的匹配位置必定在外极线、上。
若已知被测物体的空间点在左CCD摄像机的投射像点坐标,根据以上分析,只需找到被测物体的空间点在右CCD摄像机中的外极线斜率,配合经过编码的光栅曲线即可找到被测物体的空间点在右CCD摄像机中的投射像点的坐标。
3)所述的采集单元与车载计算机单元相联,车载计算机单元处理获得的被测物体的图像信息将其转化为被测物体的3D信息,采用最小二乘法对被测物体的3D信息进行空间平面拟合,最终得到被测物体的3D图形;
4)由车载计算机处理步骤3)中获得的被测物体的3D信息,判断物体是否对车辆行驶造成危害,若会产生危害则发出警报,若驾驶员未做出规避操作,将授权车辆制动系统采取制动动作;若未发现造成危险的物体,则继续步骤1)-4)。
Claims (2)
2.按权利要求1所述的主动式智能车用障碍物检测方法,其特征在于所述的步骤1)对图像坐标系、车体坐标系和世界坐标系进行定义的具体方法是:
1)图像坐标系
1.2) 车体坐标系
原点为车体的几何中心,定义为车辆前进方向、为横向方向、为高度方向,在基于立体视觉的主动光栅投射传感器系统的标定过程中,根据摄像机成像的线性理论,通过测量3D标定板上参考点在车体坐标系中的坐标,计算出以下左右相机的投影矩阵:
(3)
然后求出各组匹配点对应的3D坐标;
1.3) 世界坐标系
车体坐标系到世界坐标系的转换可描述为:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2011104307848A CN102538766A (zh) | 2011-12-21 | 2011-12-21 | 一种主动式智能车用障碍物检测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2011104307848A CN102538766A (zh) | 2011-12-21 | 2011-12-21 | 一种主动式智能车用障碍物检测方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102538766A true CN102538766A (zh) | 2012-07-04 |
Family
ID=46346259
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2011104307848A Pending CN102538766A (zh) | 2011-12-21 | 2011-12-21 | 一种主动式智能车用障碍物检测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102538766A (zh) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103884281A (zh) * | 2014-03-18 | 2014-06-25 | 北京控制工程研究所 | 一种基于主动结构光的巡视器障碍探测方法 |
CN104216936A (zh) * | 2013-06-03 | 2014-12-17 | 通用汽车环球科技运作有限责任公司 | 利用kd-fern 的快速最近邻居搜索 |
CN105366043A (zh) * | 2015-11-30 | 2016-03-02 | 湖北易瓦特科技股份有限公司 | 双桨减震旋翼无人机 |
CN105438457A (zh) * | 2015-11-30 | 2016-03-30 | 湖北易瓦特科技股份有限公司 | 双桨避障旋翼无人机 |
CN106325274A (zh) * | 2016-08-29 | 2017-01-11 | 无锡卓信信息科技股份有限公司 | 基于光栅的无人驾驶汽车避障系统 |
CN106647740A (zh) * | 2016-11-15 | 2017-05-10 | 江苏智石科技有限公司 | 一种基于光栅的智能料盒运输车 |
CN106627463A (zh) * | 2016-12-22 | 2017-05-10 | 深圳市招科智控科技有限公司 | 一种无人驾驶公交车的视觉感知系统及工作方法 |
CN108454553A (zh) * | 2017-12-20 | 2018-08-28 | 安徽云森物联网科技有限公司 | 一种基于人眼视觉识别技术实现障碍物检测技术 |
CN108596009A (zh) * | 2017-12-29 | 2018-09-28 | 西安智加科技有限公司 | 一种用于农机自动驾驶的障碍物检测方法和系统 |
CN112016366A (zh) * | 2019-05-31 | 2020-12-01 | 北京车和家信息技术有限公司 | 一种障碍物定位方法及装置 |
CN112896044A (zh) * | 2021-01-13 | 2021-06-04 | 北华航天工业学院 | 一种基于激光结构光栅格图像分析的倒车系统及方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1924514A (zh) * | 2005-08-31 | 2007-03-07 | 歌乐牌株式会社 | 车辆用障碍物检测装置 |
CN101975951A (zh) * | 2010-06-09 | 2011-02-16 | 北京理工大学 | 一种融合距离和图像信息的野外环境障碍检测方法 |
CN202063101U (zh) * | 2011-04-19 | 2011-12-07 | 山东理工大学 | 一种防止汽车追尾的安全预警装置 |
-
2011
- 2011-12-21 CN CN2011104307848A patent/CN102538766A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1924514A (zh) * | 2005-08-31 | 2007-03-07 | 歌乐牌株式会社 | 车辆用障碍物检测装置 |
CN101975951A (zh) * | 2010-06-09 | 2011-02-16 | 北京理工大学 | 一种融合距离和图像信息的野外环境障碍检测方法 |
CN202063101U (zh) * | 2011-04-19 | 2011-12-07 | 山东理工大学 | 一种防止汽车追尾的安全预警装置 |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104216936B (zh) * | 2013-06-03 | 2017-12-15 | 通用汽车环球科技运作有限责任公司 | 利用kd‑fern的快速最近邻居搜索 |
CN104216936A (zh) * | 2013-06-03 | 2014-12-17 | 通用汽车环球科技运作有限责任公司 | 利用kd-fern 的快速最近邻居搜索 |
CN103884281B (zh) * | 2014-03-18 | 2015-10-21 | 北京控制工程研究所 | 一种基于主动结构光的巡视器障碍探测方法 |
CN103884281A (zh) * | 2014-03-18 | 2014-06-25 | 北京控制工程研究所 | 一种基于主动结构光的巡视器障碍探测方法 |
CN105366043A (zh) * | 2015-11-30 | 2016-03-02 | 湖北易瓦特科技股份有限公司 | 双桨减震旋翼无人机 |
CN105438457A (zh) * | 2015-11-30 | 2016-03-30 | 湖北易瓦特科技股份有限公司 | 双桨避障旋翼无人机 |
CN106325274A (zh) * | 2016-08-29 | 2017-01-11 | 无锡卓信信息科技股份有限公司 | 基于光栅的无人驾驶汽车避障系统 |
CN106647740A (zh) * | 2016-11-15 | 2017-05-10 | 江苏智石科技有限公司 | 一种基于光栅的智能料盒运输车 |
CN106627463A (zh) * | 2016-12-22 | 2017-05-10 | 深圳市招科智控科技有限公司 | 一种无人驾驶公交车的视觉感知系统及工作方法 |
CN108454553A (zh) * | 2017-12-20 | 2018-08-28 | 安徽云森物联网科技有限公司 | 一种基于人眼视觉识别技术实现障碍物检测技术 |
CN108596009A (zh) * | 2017-12-29 | 2018-09-28 | 西安智加科技有限公司 | 一种用于农机自动驾驶的障碍物检测方法和系统 |
CN112016366A (zh) * | 2019-05-31 | 2020-12-01 | 北京车和家信息技术有限公司 | 一种障碍物定位方法及装置 |
CN112016366B (zh) * | 2019-05-31 | 2024-09-06 | 北京车和家信息技术有限公司 | 一种障碍物定位方法及装置 |
CN112896044A (zh) * | 2021-01-13 | 2021-06-04 | 北华航天工业学院 | 一种基于激光结构光栅格图像分析的倒车系统及方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102538766A (zh) | 一种主动式智能车用障碍物检测方法 | |
CN202608712U (zh) | 基于立体视觉的主动光栅投射传感器系统 | |
CN108444390B (zh) | 一种无人驾驶汽车障碍物识别方法及装置 | |
CN101750049B (zh) | 基于道路和车辆自身信息的单目视觉车距测量方法 | |
WO2018105179A1 (ja) | 車載用画像処理装置 | |
CN102390370B (zh) | 一种基于立体视觉的车辆行驶应急处理装置及方法 | |
CN106324618B (zh) | 实现基于激光雷达检测车道线系统的方法 | |
US20100002911A1 (en) | Method for detecting lane departure and apparatus thereof | |
CN102685516A (zh) | 立体视觉主动安全辅助驾驶方法 | |
CN202071799U (zh) | 智能化汽车安全警示装置 | |
CN101763640A (zh) | 车载多目摄像机环视系统的在线标定处理方法 | |
CN110126824A (zh) | 一种集成双目摄像头和毫米波雷达的商用车aebs系统 | |
CN108528337B (zh) | 一种基于视频投影的内轮差智能预警系统及预警方法 | |
CN103593836A (zh) | 一种摄像头参数计算方法及相机确定车体姿态的方法 | |
JP2008051688A (ja) | 車両自動計測装置、車両自動計測システム及び車両自動計測方法 | |
CN105599765A (zh) | 一种车道偏离的判断和预警方法 | |
CN110816527A (zh) | 一种车载夜视安全方法和系统 | |
CN109827516B (zh) | 一种通过车轮来测量距离的方法 | |
CN107229906A (zh) | 一种基于可变部件模型算法的汽车超车预警方法 | |
CN202271980U (zh) | 一种基于立体视觉的车辆行驶应急处理装置 | |
CN112149493B (zh) | 基于双目立体视觉的道路高程测量方法 | |
CN113085838A (zh) | 一种基于多传感器融合的车位检测方法和系统 | |
CN104115203A (zh) | 立体物检测装置 | |
CN104115204A (zh) | 立体物检测装置 | |
JP5056861B2 (ja) | 測距装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C12 | Rejection of a patent application after its publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20120704 |