CN109858440A - 基于测距雷达和机器视觉数据融合的前方车辆检测系统 - Google Patents
基于测距雷达和机器视觉数据融合的前方车辆检测系统 Download PDFInfo
- Publication number
- CN109858440A CN109858440A CN201910091408.7A CN201910091408A CN109858440A CN 109858440 A CN109858440 A CN 109858440A CN 201910091408 A CN201910091408 A CN 201910091408A CN 109858440 A CN109858440 A CN 109858440A
- Authority
- CN
- China
- Prior art keywords
- radar
- camera
- forward sight
- detection system
- machine vision
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Traffic Control Systems (AREA)
- Radar Systems Or Details Thereof (AREA)
Abstract
一种基于测距雷达和机器视觉数据融合的前方车辆检测系统,包括雷达、前视摄像机、标定板以及处理器,所述雷达设置在进气栅位置,所述前视相机设置在前挡风玻璃后视镜位置处,其特征在于雷达与前视相机进行联合标定,使得前视相机和雷达在空间和时间上对准,所述雷达测量用于测量目标相对速度,通过阈值对前车区分静态与动态并进行跟踪,所述标定板用于获得并对准雷达和前视相机获取的空间坐标系和时间坐标系,所述处理器可以接受雷达及摄像机输入的数据,进行计算,最后获形成前车航迹。
Description
技术领域
本公开属于计算机视觉和图形处理技术领域,尤其是涉及基于计算机视觉和图形处理技术的车辆追踪系统。
背景技术
车辆追踪和检测是计算机视觉和图形处理领域中的一个重要应用方向。在该领域中已有使用激光、雷达、例如单目相机或立体相机等摄像机以及多传感器融合对车辆进行追踪检测的研究出现。
基于多传感器的车辆追踪可以检测特定车辆在空间中的位置、速度、轨迹等信息,这对于检测异常车辆、规避潜在风险具有重要的实际意义。由于使用包括视觉传感器的多传感器时,车辆在不同状态下的表征存在区别,使得检测的抗变换性无法保证。且只应用单目可见光摄像机的视觉信息进行车辆追踪,能获取到的仅仅是车辆在图像中的位置、尺寸,缺乏深度信息。这样将无法计算出车辆在三维空间中的位置、速度、轨迹等信息,极大限制了其在交通环境中的应用。而激光雷达能提供准确的深度。将可见光摄像机与激光雷达相结合,不仅可以获取到足够的空间、视觉信息,也能使追踪算法的可信度大大提高。
发明内容
本发明的目的就是为了克服上述技术存在的缺陷而提供一种基于测距雷达和机器视觉数据融合的前方车辆检测系统,该系统包括雷达、前视摄像机、标定板以及处理器,所述雷达设置在进气栅位置,所述前视相机设置在前挡风玻璃后视镜位置处,其特征在于雷达与前视相机进行联合标定,使得前视相机和雷达在空间和时间上对准,所述雷达测量用于测量目标相对速度,通过阈值对前车区分静态与动态并进行跟踪,所述标定板用于获得并对准雷达和前视相机获取的空间坐标系和时间坐标系,所述处理器可以接受雷达及摄像机输入的数据,进行计算,最后获形成前车航迹。
进一步的,所述雷达为毫米波雷达。
进一步的,所述摄像机为可见光摄像机。
与现有技术相比,基于测距雷达和机器视觉数据融合的前方车辆检测系统,可以弥补单个传感器跟踪探测不精准的问题。
附图说明
附图1为车辆智能汽车多传感器融合装置工作时示意图。
具体实施方式
为了更好的理解本发明,申请人通过以下实施例做详细说明。
本发明所述的一种基于测距雷达和机器视觉数据融合的前方车辆检测系统,包括雷达、前视摄像机、标定板以及处理器,所述雷达设置在进气栅位置,所述前视相机设置在前挡风玻璃后视镜位置处,其特征在于雷达与前视相机进行联合标定,使得前视相机和雷达在空间和时间上对准,所述雷达测量用于测量目标相对速度,通过阈值对前车区分静态与动态并进行跟踪,所述标定板用于获得并对准雷达和前视相机获取的空间坐标系和时间坐标系,所述处理器可以接受雷达及摄像机输入的数据,进行计算,最后获形成前车航迹。
参见附图1,示出了车辆智能汽车多传感器融合装置工作时示意图。包括雷达、前视摄像机、标定板以及处理器。所述标定板用于获得雷达坐标系与世界坐标系的关系以及摄像机图像坐标系与世界坐标系的关系。处理器根据所获得的上述坐标系关系得出雷达坐标系与摄像机图像坐标系的转移矩阵。处理器还将雷达数据和摄像机图像的选定的时刻的时间对应关系和基于上述转移矩阵的空间对应关系作为初始条件以评价目标追踪过程中结果的可信度。
Claims (3)
1.一种基于测距雷达和机器视觉数据融合的前方车辆检测系统,包括雷达、前视摄像机、标定板以及处理器,所述雷达设置在进气栅位置,所述前视相机设置在前挡风玻璃后视镜位置处,其特征在于雷达与前视相机进行联合标定,使得前视相机和雷达在空间和时间上对准,所述雷达测量用于测量目标相对速度,通过阈值对前车区分静态与动态并进行跟踪,所述标定板用于获得并对准雷达和前视相机获取的空间坐标系和时间坐标系,所述处理器可以接受雷达及摄像机输入的数据,进行计算,最后获形成前车航迹。
2.根据权利要求2所述的一种基于测距雷达和机器视觉数据融合的前方车辆检测系统,其特征在于所述雷达为毫米波雷达。
3.根据权利要求1所述的一种基于测距雷达和机器视觉数据融合的前方车辆检测系统,其特征在于所述前视摄像机为可见光摄像机。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910091408.7A CN109858440A (zh) | 2019-01-30 | 2019-01-30 | 基于测距雷达和机器视觉数据融合的前方车辆检测系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910091408.7A CN109858440A (zh) | 2019-01-30 | 2019-01-30 | 基于测距雷达和机器视觉数据融合的前方车辆检测系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109858440A true CN109858440A (zh) | 2019-06-07 |
Family
ID=66896879
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910091408.7A Pending CN109858440A (zh) | 2019-01-30 | 2019-01-30 | 基于测距雷达和机器视觉数据融合的前方车辆检测系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109858440A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110376840A (zh) * | 2019-06-13 | 2019-10-25 | 大亚湾核电运营管理有限责任公司 | 一种成像设备标校方法、装置、系统及终端设备 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102508246A (zh) * | 2011-10-13 | 2012-06-20 | 吉林大学 | 车辆前方障碍物检测跟踪方法 |
CN104637059A (zh) * | 2015-02-09 | 2015-05-20 | 吉林大学 | 基于毫米波雷达和机器视觉的夜间前方车辆检测方法 |
CN106296708A (zh) * | 2016-08-18 | 2017-01-04 | 宁波傲视智绘光电科技有限公司 | 车辆追踪方法和装置 |
CN107609522A (zh) * | 2017-09-19 | 2018-01-19 | 东华大学 | 一种基于激光雷达和机器视觉的信息融合车辆检测系统 |
CN109085570A (zh) * | 2018-06-10 | 2018-12-25 | 南京理工大学 | 基于数据融合的车辆检测跟踪算法 |
CN109212521A (zh) * | 2018-09-26 | 2019-01-15 | 同济大学 | 一种基于前视相机与毫米波雷达融合的目标跟踪方法 |
-
2019
- 2019-01-30 CN CN201910091408.7A patent/CN109858440A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102508246A (zh) * | 2011-10-13 | 2012-06-20 | 吉林大学 | 车辆前方障碍物检测跟踪方法 |
CN104637059A (zh) * | 2015-02-09 | 2015-05-20 | 吉林大学 | 基于毫米波雷达和机器视觉的夜间前方车辆检测方法 |
CN106296708A (zh) * | 2016-08-18 | 2017-01-04 | 宁波傲视智绘光电科技有限公司 | 车辆追踪方法和装置 |
CN107609522A (zh) * | 2017-09-19 | 2018-01-19 | 东华大学 | 一种基于激光雷达和机器视觉的信息融合车辆检测系统 |
CN109085570A (zh) * | 2018-06-10 | 2018-12-25 | 南京理工大学 | 基于数据融合的车辆检测跟踪算法 |
CN109212521A (zh) * | 2018-09-26 | 2019-01-15 | 同济大学 | 一种基于前视相机与毫米波雷达融合的目标跟踪方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110376840A (zh) * | 2019-06-13 | 2019-10-25 | 大亚湾核电运营管理有限责任公司 | 一种成像设备标校方法、装置、系统及终端设备 |
CN110376840B (zh) * | 2019-06-13 | 2021-08-24 | 大亚湾核电运营管理有限责任公司 | 一种成像设备标校方法、装置、系统及终端设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8582809B2 (en) | Method and device for detecting an interfering object in a camera image | |
CN107738612B (zh) | 基于全景视觉辅助系统的自动泊车停车位检测与识别系统 | |
EP3792660B1 (en) | Method, apparatus and system for measuring distance | |
CN103448634B (zh) | 与图像裁剪叠加的动态参考 | |
US20200041284A1 (en) | Map road marking and road quality collecting apparatus and method based on adas system | |
CN104181534B (zh) | 交叉路口碰撞警示系统的概率目标选择和威胁评估方法以及应用 | |
CN109031346A (zh) | 一种基于3d激光雷达的周边泊车位辅助检测方法 | |
US8378851B2 (en) | Fusion of images in enhanced obstacle detection | |
EP1909064A1 (en) | Object detection device | |
US20130141520A1 (en) | Lane tracking system | |
CN105049784B (zh) | 用于基于图像的视距估计的方法和设备 | |
CN106651963B (zh) | 一种用于驾驶辅助系统的车载摄像头的安装参数标定方法 | |
CN106168667B (zh) | 具有图像反射检测的车载雷达系统 | |
CN103895572A (zh) | 一种前方视野中车辆行驶信息显示装置及方法 | |
CN103502876A (zh) | 用于校正车辆的投影装置的方法和设备 | |
US10554951B2 (en) | Method and apparatus for the autocalibration of a vehicle camera system | |
US10832428B2 (en) | Method and apparatus for estimating a range of a moving object | |
US11562576B2 (en) | Dynamic adjustment of augmented reality image | |
CN108263389A (zh) | 一种车辆前方虚假目标剔除装置及方法 | |
CN109858440A (zh) | 基于测距雷达和机器视觉数据融合的前方车辆检测系统 | |
CN113459951A (zh) | 车外环境显示方法和装置、车辆、设备和存储介质 | |
KR102003387B1 (ko) | 조감도 이미지를 이용한 교통 장애물의 검출 및 거리 측정 방법, 교통 장애물을 검출하고 거리를 측정하는 프로그램을 저장한 컴퓨터 판독가능 기록매체 | |
CN108454619B (zh) | 一种驾驶辅助方法及系统 | |
CN104931024B (zh) | 障碍物检测装置 | |
CN112835029A (zh) | 面向无人驾驶的多传感器障碍物探测数据融合方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20190607 |
|
WD01 | Invention patent application deemed withdrawn after publication |