CN103176185A - 用于检测道路障碍物的方法及系统 - Google Patents

用于检测道路障碍物的方法及系统 Download PDF

Info

Publication number
CN103176185A
CN103176185A CN2011104406909A CN201110440690A CN103176185A CN 103176185 A CN103176185 A CN 103176185A CN 2011104406909 A CN2011104406909 A CN 2011104406909A CN 201110440690 A CN201110440690 A CN 201110440690A CN 103176185 A CN103176185 A CN 103176185A
Authority
CN
China
Prior art keywords
obstacle
information
road
video image
detection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011104406909A
Other languages
English (en)
Other versions
CN103176185B (zh
Inventor
刘凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SAIC Motor Corp Ltd
Original Assignee
SAIC Motor Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SAIC Motor Corp Ltd filed Critical SAIC Motor Corp Ltd
Priority to CN201110440690.9A priority Critical patent/CN103176185B/zh
Publication of CN103176185A publication Critical patent/CN103176185A/zh
Application granted granted Critical
Publication of CN103176185B publication Critical patent/CN103176185B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)

Abstract

本发明涉及用于检测道路障碍物的方法及系统。本发明公开了基于视频摄像装置的第一障碍物检测模型,基于视频摄像装置和毫米波雷达的第二障碍物检测模型,基于三维激光雷达和红外线摄像装置的第三障碍物检测模型,并且通过基于粗糙集的模糊神经网络算法使得所述多个模型形成互补检测,从而实时获取道路障碍物的特征信息。本发明能够在不同道路场景、不同气候条件下进行实时有效的道路障碍物检测,准确获取不同障碍物的行进速度、方向等参数,从道路交通环境中提取和分析车辆周边环境信息,并针对异常交通行为进行判断,从而缓解目前城市交通压力、提高交通管理的效率。

Description

用于检测道路障碍物的方法及系统
技术领域
本发明属于信息检测和处理技术领域,并且具体地涉及基于多传感器融合的用于检测和识别道路障碍物的方法及系统。
背景技术
随着汽车时代的全面来临,汽车技术,特别是汽车安全技术受到越来越多的重视。除了传统汽车中对汽车安全起决定作用的机电控制以外,实时获取车载信息也是安全驾驶重要的保障。具体而言,车载信息主要包括车辆状态信息和环境信息,其中对环境信息的感知尤为重要。随着技术的发展,各种功能各异的传感器设备可以被用于获取各种实时路况信息。
目前常用的车载传感器主要可以分成声学类(超声波)、光学类(无源红外线、视频摄像机等)、电磁类(毫米波雷达)。每一种传感器探测技术都有其适用的场合以及受限制的方面。举例来说,视频摄像机探测范围广,信号丰富,但是容易受外界因素影响,存在目标缺失、模糊等问题;超声波传感器在小目标反射信号弱的情况下无法探测,而且需温度补偿;无源红外线式传感器通过物体所发射的热能来实现探测,这种传感器不能很准确地确定物体的距离;雷达传感器采用短的大功率红外光脉冲进行探测,根据光脉冲所需的传播时间可以确定物体被测距离,但雷达传感器的缺陷是检测物体轮廓不准确。
在获取环境信息的过程中,非常重要的一个方面是要检测和识别车辆周围的障碍物。传统的汽车通常仅采用基于单一传感器的单个检测模型来获取周围环境的障碍物信息,因而在复杂气候、复杂交通场景下具有很大的局限性,导致无法精确识别出障碍物,为行车安全带来了很大的隐患。
因而,对能够在不同道路场景、不同气候条件下实时有效地进行障碍物检测的方法及系统有很大的需求。
发明内容
为实现上述目标,本发明提供了一种用于检测目标区域中的道路障碍物的方法,其特征在于,所述方法包括以下步骤:利用视频摄像装置获取所述目标区域的视频图像信息;基于所述视频图像信息建立第一障碍物检测模型;利用毫米波雷达获取所述目标区域的第一位置信息;基于所述视频图像信息和所述第一位置信息建立第二障碍物检测模型;利用激光雷达所述目标区域的第二位置信息并且利用红外线摄像装置获取所述目标区域的温度信息;基于所述第二位置信息和所述温度信息建立第三障碍物检测模型;以及利用基于粗糙(vague)集的模糊神经网络算法结合所述第一障碍物检测模型的检测结果、所述第二障碍物检测模型的检测结果和所述第三障碍物检测模型的检测结果以确定所述道路障碍物的特征信息,其中,所述目标区域被划分成一系列三维立体栅格,并且所述第一、第二和第三障碍物检测模型的检测结果均包括表征每个所述三维立体栅格是否被所述道路障碍物占据的栅格信息。
在本发明的一些实施例中,所述利用基于粗糙集的模糊神经网络算法结合每个所述障碍物检测模型的检测结果包括以下步骤:按所述三维立体栅格对每一时刻所述第一、第二和第三障碍物检测模型的检测结果进行加权以得到每一时刻所述第一、第二和第三障碍物检测模型的复合检测结果,并且其中根据周围环境信息以及历史检测结果动态地调整所述第一、第二和第三障碍物检测模型的检测结果的权重。
在本发明的一些实施例中,利用基于粗糙集的模糊神经网络算法结合每个所述障碍物检测模型的检测结果还包括以下步骤:按所述三维立体栅格对预定时间段内每一时刻的所述复合检测结果进行加权,并且根据周围环境信息以及历史检测结果动态地调整每个时刻的所述复合检测结果的权重。
在本发明的一些实施例中,所述周围环境信息包括道路条件和气候条件中的至少一个。
在本发明的一些实施例中,所述建立第一障碍物检测模型包括以下步骤:基于所述视频图像信息计算逆透视变换矩阵;通过所述逆透视变换将所述视频图像从图像坐标系变换至世界坐标系;以及基于斑块聚类算法对所述世界坐标系下的视频图像进行图像分割以确定所述道路障碍物。
在本发明的一些实施例中,所述计算逆透视变换矩阵包括以下步骤:对所述视频图像进行图像分割;在经分割的视频图像中进行道路标志线检测;基于所检测到的道路标志线确定消隐点;根据所述消隐点的坐标对所述视频摄像装置的参数进行估计;基于所估计得到的参数值计算所述逆透视矩阵,其中所述参数包括所述视频摄像装置的水平孔径角和垂直孔径角。
在本发明的一些实施例中,基于直方图算法对所述视频图像进行图像分割。
在本发明的一些实施例中,所述建立第二障碍物模型包括以下步骤:根据所述第一位置信息估计所述道路障碍物的方位;将所述第一位置信息映射到所述视频图像所处的图像坐标系中以确定所估计的道路障碍物方位的中心点;以及基于所述视频图像信息跟踪所述中心点以确定所述道路障碍物。
在本发明的一些实施例中,基于所述视频图像信息跟踪所述中心点包括以下步骤:计算所述视频图像的单应性矩阵;以及通过所述单应性矩阵对所述视频图像进行配准。
在本发明的一些实施例中,所述第二位置信息包括每个所述三维立体栅格与所述激光雷达之间的距离                                               
Figure 696462DEST_PATH_IMAGE001
,并且所述建立第三障碍物模型包括根据以下公式计算每个所述三维立体栅格被所述道路障碍物占据的概率:
其中
Figure 432654DEST_PATH_IMAGE003
为由所述激光雷达测得该栅格被所述道路障碍物占据及其温度信息的联合分布概率。
在本发明的一些实施例中,所述建立第三障碍物模型还包括基于概率超过预定阈值的三维立体栅格联结成的斑块来确定所述道路障碍物。
本发明还提供了一种用于检测目标区域中的道路障碍物的系统,其特征在于,所述系统包括:视频摄像装置,用于获取所述目标区域的视频图像信息;毫米波雷达,用于获取所述目标区域的第一位置信息;激光雷达,用于获取所述目标区域的第二位置信息;红外线摄像装置,用于获取所述目标区域的温度信息;以及数据处理装置,其被配置用于基于所述视频图像信息建立第一障碍物检测模型;基于所述视频图像信息和所述第一位置信息建立第二障碍物检测模型;基于所述第二位置信息和所述温度信息建立第三障碍物检测模型;并且利用基于粗糙集的模糊神经网络算法结合所述第一障碍物检测模型的检测结果、所述第二障碍物检测模型的检测结果和所述第三障碍物检测模型的检测结果以确定所述道路障碍物的特征信息,其中所述目标区域被划分成一系列三维立体栅格,并且每个所述障碍物检测模型的检测结果均包括表征每个所述三维立体栅格是否被所述道路障碍物占据的栅格信息。
在本发明的一些实施例中,所述视频摄像装置和所述红外线摄像装置被布置在汽车前挡风玻璃的上端,并且所述毫米波雷达和所述激光雷达被布置在汽车车头前部大体上正中的位置。
本发明建立了基于包括视频摄像装置、毫米波雷达、三维激光雷达和红外线摄像装置在内的多种传感器的多个障碍物检测模型,并且通过基于粗糙集的模糊神经网络算法使得所述多个模型形成互补检测,从而实时获取道路障碍物的特征信息。本发明能够在不同道路场景、不同气候条件下进行实时有效的道路障碍物检测,准确获取不同障碍物的行进速度、方向等参数,从道路交通环境中提取和分析车辆周边环境信息,并针对异常交通行为进行判断,从而缓解目前城市交通压力、提高交通管理的效率。
附图说明
以下将结合附图和实施例,对本发明的技术方案作进一步的详细描述。
图1是本发明所提供的用于检测道路障碍物的方法的示意图。
图2是根据本发明的实施例的用于建立第一障碍物检测模型的流程图。
图3是根据本发明的实施例的用于建立第二障碍物检测模型的流程图。
图4是根据本发明的实施例的用于建立第三障碍物检测模型的流程图。
图5是根据本发明的实施例的利用基于粗糙集的模糊神经网络算法结合第一、第二和第三障碍物检测模型的过程的示意图。
具体实施方式
为使本发明的上述目的、特征和优点更加明显易懂,以下结合附图和具体实施例进一步详细描述本发明。需要说明的是,附图中的各结构只是示意性的而不是限定性的,以使本领域普通技术人员最佳地理解本发明的原理,其不一定按比例绘制。
在图1中示出了本发明所提供的用于检测道路障碍物的方法的示意图。如图1所示,基于不同的传感器装置建立了三个不同的障碍物检测模型,所述传感器装置包括视频摄像装置、毫米波雷达、激光雷达和红外线摄像装置。在本发明的优选实施例中,可以将视频摄像装置和红外线摄像装置布置在汽车前挡风玻璃的上端,并且将毫米波雷达和激光雷达被布置在汽车车头前部大体上正中的位置,从而使得这些传感器装置可以同时感测例如汽车正前方5~10米区域范围内道路上的障碍物。由此,不同传感器装置所获得的目标区域的感测结果可以互补和融合,以更准确全面地获取障碍物的特征信息,诸如其行进速度、方向、轮廓形状、类型等等。
根据本发明所提供的方法,第一障碍物检测模型单一地基于视频摄像装置所获取的视频图像信息来建立,其中所述视频摄像装置包括如摄像机等能够拍摄视频的设备。结合视频摄像装置所获取的视频图像信息以及毫米波雷达所获取的位置信息共同建立第二障碍物检测模型。所述毫米波雷达的工作频率可以选在30~300 GHz范围内,其可以是调频连续波(FMCW)雷达或者脉冲雷达。在使用中,毫米波雷达实时监测车辆的前方,连续收集目标区域中可能的障碍物的位置信息。这样的位置信息与视频摄像装置所获取的视频图像信息可以形成良好的互补而准确地得到障碍物的轮廓信息,这将在下文中结合图3更详细地说明。
第三障碍物检测模型基于激光雷达所获取的位置信息和红外线摄像装置所获取的温度信息。所述激光雷达可以是工作在从红外到紫外光谱段的雷达系统,该传感器装置能够精确测量包括道路障碍物的距离和角度、运动状态(速度、振动和姿态)和形状在内的各种信息。所使用的激光雷达可以采用脉冲或连续波工作方式,探测方法按照探测的原理不同可以包括米散射、瑞利散射、拉曼散射、布里渊散射、荧光、多普勒等。激光雷达所获取的道路障碍物的三维立体位置和红外线摄像装置所获取的目标温度可以被结合以更精确地判断道路障碍物的空间位置,这将在下文中结合图4更详细地说明。
如前所述,本发明所使用的视频摄像装置、毫米波雷达、激光雷达以及红外线摄像装置都将被布置用于感测同一目标区域中的道路障碍物。相应地,对于所述第一、第二和第三障碍物检测模型中的每一个而言,可以将该目标区域划分成一系列三维立体栅格,并且使得每个模型的检测结果均包括表征每个三维立体栅格是否被道路障碍物占据的栅格信息。每个模型的检测结果都可以分别对应到每个三维立体栅格,由此可以更容易且准确地融合这三个模型的检测结果以最终确定目标区域中的障碍物存在情况。
在上述第一、第二和第三障碍物检测模型分别被建立之后,可以进一步利用基于粗糙集的模糊神经网络算法结合每个模型的检测结果。模糊神经网络是具有模糊权系数或者输入信号是模糊量的神经网络,其关键在于不断需要学习和优化权系数。然而,当该神经网络规模较大、样本较多时,其学习和训练的时间将会变得很长,这对于道路障碍物检测这样的需要不断获取即时结果的应用而言并非理想的选择。粗糙集理论的主要思想是利用已知的知识库,将不精确或不确定的知识用已知的知识库中的知识来近似刻画,其能有效地化简训练样本集,消除冗余数据。应用粗糙集化简模糊神经网络的训练样本数据集,在保留重要信息的前提下消除了多余的数据,大大提高了模糊神经网络的训练速度,从而适用于融合上述三个障碍物检测模型的结果以在不同道路、不同气候条件下均能够实时地提供准确的障碍物特征信息。
在图2中示出了根据本发明的优选实施例的用于建立第一障碍物检测模型的流程图。如本领域的技术人员所知,单个视频摄像装置所拍摄的记录目标区域情况的视频由许多连续的二维视频图像构成。在本发明的优选实施例中,通过逆透视变换矩阵将二维视频图像变换到三维空间坐标下以建立第一障碍物检测模型。具体而言,在欧式空间中定义两个坐标系
Figure 212708DEST_PATH_IMAGE005
,分别表示三维的世界坐标系和二维的图像坐标系:
Figure 718776DEST_PATH_IMAGE006
Figure 934993DEST_PATH_IMAGE007
逆透视变换的实质就是将如车载摄像机的视频摄像装置所获取的图像坐标系下的道路图像变换到世界坐标系下。
如图2的实施例所示,为实现上述逆透视变换,首先在步骤S201中对所获取的原始视频图像进行图像分割,也就是将数字图像细分为多个图像子区域以使得图像更容易理解和分析。优选地,可以基于直方图算法进行这样的图像分割,但也可以采用本领域中已知的其他恰当的图像分割算法。
接着,在经分割的视频图像中进行道路标志线检测,如步骤S203所示。优选地,在检测道路标志线之前可以对视频图像信息进行时域滤波以去除不必要的噪点及干扰信息。可以使用例如Hough变换、链码等直线检测方法对分割后的每个图像块进行直线检测来确定道路标志线。在步骤S205中,根据所检测到的道路标志线确定多个消隐点。在视频摄像装置的逆透视变换矩阵的计算中:俯仰角和偏航角是最重要的两个参数,而消隐点中含有这两个参数的信息,由此如步骤S207所示,在确定消隐点之后就可以对视频摄像装置的参数进行估计。假设
Figure 846449DEST_PATH_IMAGE010
是摄像机的水平孔径角和垂直孔径角,
Figure 166889DEST_PATH_IMAGE012
为消隐点坐标,M*N是图像的分辨率,则俯仰角
Figure 92119DEST_PATH_IMAGE008
和偏航角
Figure 254110DEST_PATH_IMAGE009
计算公式如下:
Figure 581186DEST_PATH_IMAGE013
Figure 865537DEST_PATH_IMAGE014
在计算得到必要的摄像机参数之后计算逆透视变换矩阵,如步骤S209所示,并且在步骤S211中实施坐标变换。假定
Figure 278064DEST_PATH_IMAGE015
是图像坐标系中的坐标点,
Figure 712588DEST_PATH_IMAGE016
是对应的世界坐标系中的坐标点,R是根据俯仰角和偏航角所计算得到的逆透视变换矩阵,则坐标变换过程可由下式表示:
Figure 894170DEST_PATH_IMAGE017
 其中,
Figure 349422DEST_PATH_IMAGE018
K是世界坐标系到图像坐标系的基本变换向量,可根据不同时刻两个坐标系下相对应的点的坐标来计算这两个参数,I为单位向量矩阵。
经过上述步骤后可以得到视频摄像装置获取的视频图像所对应的所述目标区域的三维空间信息。接着,在步骤S213中基于例如斑块聚类对这样的三维空间信息进行分割,从而基于分割的结果在步骤步骤S215中确定目标区域内的障碍物,包括例如确定障碍物的位置坐标等等。由此,第一障碍物检测模型的建立得以完成。
在图3中示出了根据本发明的优选实施例的用于建立第二障碍物检测模型的流程图。如前所述,该第二障碍物检测模型基于毫米波雷达和视频摄像装置两者分别所获得的目标区域的信息。如图3的实施例所示,由毫米波雷达在步骤S301中估计目标区域内的障碍物的方位,即感测可能的障碍物并且确定其各个位置的三维空间坐标。接着,在步骤S303中,通过坐标变换将毫米波雷达所感测到的障碍物的位置映射到视频摄像装置所获取的视频图像所处的图像坐标系中。假定Q为毫米波雷达坐标系到图像坐标系变换的映射矩阵,则可以根据下式进行位置点从毫米波雷达坐标系到图像坐标系的变换:
Figure 449578DEST_PATH_IMAGE019
根据所建立的映射关系,可以确定由毫米波雷达所感测到的障碍物的中心点在图像坐标系中的位置,如步骤S305所示。通过对该位置的跟踪可以更准确地获得障碍物的轮廓信息,弥补常规的毫米波雷达检测的缺陷。根据本发明的方法,将充分利用视频摄像装置所获得的视频图像信息来辅助实现这样的目标跟踪。
为此,在步骤S307中计算视频图像的单应性矩阵。单应性矩阵是一个数学概念,它定义了同一坐标系下不同时刻两幅图像之间的相互关系,一帧图像上的任意一点可以在另一帧图像上找到对应的点,且对应点惟一,反之亦然。假定在
Figure 15688DEST_PATH_IMAGE020
Figure 51778DEST_PATH_IMAGE021
时刻,例如车载摄像机的视频摄像装置的逆透视变换系数分别为:
Figure 677931DEST_PATH_IMAGE022
Figure 2733DEST_PATH_IMAGE023
其中
Figure 106955DEST_PATH_IMAGE024
Figure 263130DEST_PATH_IMAGE025
为世界坐标系中的基准点,
Figure 732289DEST_PATH_IMAGE026
Figure 341125DEST_PATH_IMAGE021
时刻车载摄像机在世界坐标系中的坐标,T为前后两帧的时间差,d为车载摄像机和路面的距离,则单应性矩阵的计算公式如下:
对应点坐标计算公式为:
Figure 525298DEST_PATH_IMAGE028
Figure 792649DEST_PATH_IMAGE030
基于该单应性矩阵可以在步骤S309中实现对视频图像系中的各个图像的配准。在图像配准的情况下,可以容易地对上述已确定的障碍物中心点进行跟踪,从而目标区域内的障碍物,特别是确定障碍物的轮廓。由此,第二障碍物检测模型的建立得以完成。
在图4中示出了根据本发明的优选实施例的用于建立第三障碍物检测模型的流程图。如前所述,该第三障碍物检测模型基于激光雷达和红外线摄像装置两者分别所获得的目标区域的信息。可以采用具有4层波束的激光雷达,其具备良好的三维立体探测功能。如前所述,目标区域被划分成一系列三维立体栅格,而激光雷达可以被用于确定表示每个栅格是否被障碍物占据的概率。如步骤S401所示,首先由激光雷达估计目标区域内的障碍物的位置信息,包括每个三维立体栅格与激光雷达之间的距离
Figure 238673DEST_PATH_IMAGE001
同时,在步骤S403中,利用红外线摄像机探测获得目标区域中各个位置的的温度信息,该温度信息也可以按栅格被划分,即每个栅格具有与其对应的栅格温度信息。
在步骤S405中计算每个栅格被道路障碍物占据的概率,计算公式如下:
Figure 41544DEST_PATH_IMAGE002
其中
Figure 180402DEST_PATH_IMAGE003
为由所述激光雷达测得的位置信息以及由红外线摄像装置测得的温度信息的联合分布概率。
在步骤S407中可以根据计算得到的联合分布概率来确定目标区域内的障碍物。在本发明的优选实施例中,基于概率超过预定阈值的三维立体栅格联结成的斑块来确定所述道路障碍物。例如,可以将概率超过0.5的栅格联结而成的斑块确定为检测到的物体。由此,第三障碍物检测模型的建立得以完成。
图5是根据本发明的实施例的利用基于粗糙集的模糊神经网络算法结合上述第一、第二和第三障碍物检测模型的过程的示意图。参照图5,所述三个模型分别被表示为X1、X2和X3,并且假定目标区域被划分成三个三维立体栅格U1、U2和U3。应理解的是,在具体实践中三维立体栅格的数量将远远大于三个,在这个仅是为了方便描述。根据本发明的一些实施例,在分别得到第一、第二和第三模型的检测结果之后,可以按三维立体栅格对每一时刻所述第一、第二和第三障碍物检测模型的检测结果进行加权以得到每一时刻所述第一、第二和第三障碍物检测模型的复合检测结果。例如对栅格U1而言,
Figure 763830DEST_PATH_IMAGE031
,而所述复合检测结果则是由栅格数量个类似结果构成,其中
Figure 13546DEST_PATH_IMAGE032
为每个模型的检测结果的权重。可以根据周围环境信息以及历史检测结果动态地调整该权重值,这可以基于所采用的模糊神经网络算法的学习模式来实现。周围环境信息可以包括道路条件或者气候条件,历史检测结果可以包括先前所获得的检测结果以及对该结果最终的准确性判断。
进一步地,还可以按三维立体栅格对预定时间段内每一时刻的复合检测结果进行加权,并且同样根据周围环境信息以及历史检测结果动态地调整每个时刻的复合检测结果的权重。由此得到的最终检测结果将各种道路状况、天气状况以及传感器装置本身的检测能力均考虑在内,从而使得相应的系统在不同的条件下均具备准确检测道路障碍物的能力。此外,该方法充分考虑对冗余信息的剔除,从而保证了所提供的信息的及时性和可靠性。
综上所述,本发明建立了基于多种传感器的多个检测模型,并通过基于粗糙集的模糊神经网络目标识别决策算法使得多个检测模型形成互补检测,实时得出准确的障碍物特征信息,从而能够在不同道路条件、不同气候条件下准确有效地进行道路障碍物检测,大大保障了行车安全。
以上列举了若干具体实施例来详细阐明本发明,这些个例仅供说明本发明的原理及其实施方式之用,而非对本发明的限制,在不脱离本发明的精神和范围的情况下,本领域的普通技术人员还可以做出各种变形和改进。因此所有等同的技术方案均应属于本发明的范畴并为本发明的各项权利要求所限定。

Claims (13)

1. 一种用于检测目标区域中的道路障碍物的方法,其特征在于,所述方法包括以下步骤:
利用视频摄像装置获取所述目标区域的视频图像信息;
基于所述视频图像信息建立第一障碍物检测模型;
利用毫米波雷达获取所述目标区域的第一位置信息;
基于所述视频图像信息和所述第一位置信息建立第二障碍物检测模型;
利用激光雷达所述目标区域的第二位置信息并且利用红外线摄像装置获取所述目标区域的温度信息;
基于所述第二位置信息和所述温度信息建立第三障碍物检测模型;以及
利用基于粗糙集的模糊神经网络算法结合所述第一障碍物检测模型的检测结果、所述第二障碍物检测模型的检测结果和所述第三障碍物检测模型的检测结果以确定所述道路障碍物的特征信息,
其中,所述目标区域被划分成一系列三维立体栅格,并且所述第一、第二和第三障碍物检测模型的检测结果均包括表征每个所述三维立体栅格是否被所述道路障碍物占据的栅格信息。
2. 如权利要求1所述的方法,其特征在于,其中所述利用基于粗糙集的模糊神经网络算法结合每个所述障碍物检测模型的检测结果包括以下步骤:
按所述三维立体栅格对每一时刻所述第一、第二和第三障碍物检测模型的检测结果进行加权以得到每一时刻所述第一、第二和第三障碍物检测模型的复合检测结果,并且其中根据周围环境信息以及历史检测结果动态地调整所述第一、第二和第三障碍物检测模型的检测结果的权重。
3. 如权利要求2所述的方法,其特征在于,所述利用基于粗糙集的模糊神经网络算法结合每个所述障碍物检测模型的检测结果还包括以下步骤:
按所述三维立体栅格对预定时间段内每一时刻的所述复合检测结果进行加权,并且根据周围环境信息以及历史检测结果动态地调整每个时刻的所述复合检测结果的权重。
4. 如权利要求2或3所述的方法,其特征在于,其中所述周围环境信息包括道路条件和气候条件中的至少一个。
5. 如权利要求1所述的方法,其特征在于,其中所述建立第一障碍物检测模型包括以下步骤:
基于所述视频图像信息计算逆透视变换矩阵;
通过所述逆透视变换将所述视频图像从图像坐标系变换至世界坐标系;以及
基于斑块聚类算法对所述世界坐标系下的视频图像进行图像分割以确定所述道路障碍物。
6. 如权利要求5所述的方法,其特征在于,其中所述计算逆透视变换矩阵包括以下步骤:
对所述视频图像进行图像分割;
在经分割的视频图像中进行道路标志线检测;
基于所检测到的道路标志线确定消隐点;
根据所述消隐点的坐标对所述视频摄像装置的参数进行估计;
基于所估计得到的参数值计算所述逆透视矩阵,其中所述参数包括所述视频摄像装置的水平孔径角和垂直孔径角。
7. 如权利要求6所述的方法,其特征在于,其中基于直方图算法对所述视频图像进行图像分割。
8. 如权利要求1所述的方法,其特征在于,其中所述建立第二障碍物模型包括以下步骤:
根据所述第一位置信息估计所述道路障碍物的方位;
将所述第一位置信息映射到所述视频图像所处的图像坐标系中以确定所估计的道路障碍物方位的中心点;以及
基于所述视频图像信息跟踪所述中心点以确定所述道路障碍物。
9. 如权利要求8所述的方法,其特征在于,其中基于所述视频图像信息跟踪所述中心点包括以下步骤:
计算所述视频图像的单应性矩阵;以及
通过所述单应性矩阵对所述视频图像进行配准。
10. 如权利要求1所述的方法,其特征在于,其中所述第二位置信息包括每个所述三维立体栅格与所述激光雷达之间的距离                                               
Figure 2011104406909100001DEST_PATH_IMAGE002
,并且所述建立第三障碍物模型包括根据以下公式计算每个所述三维立体栅格被所述道路障碍物占据的概率:
Figure 2011104406909100001DEST_PATH_IMAGE004
其中
Figure 2011104406909100001DEST_PATH_IMAGE006
为由所述激光雷达测得的第二位置信息以及由所述红外线摄像装置测得的温度信息的联合分布概率。
11. 如权利要求10所述的方法,其特征在于,其中所述建立第三障碍物模型还包括基于概率超过预定阈值的三维立体栅格联结成的斑块来确定所述道路障碍物。
12. 一种用于检测目标区域中的道路障碍物的系统,其特征在于,所述系统包括:
视频摄像装置,用于获取所述目标区域的视频图像信息;
毫米波雷达,用于获取所述目标区域的第一位置信息;
激光雷达,用于获取所述目标区域的第二位置信息;
红外线摄像装置,用于获取所述目标区域的温度信息;以及
数据处理装置,其被配置用于基于所述视频图像信息建立第一障碍物检测模型;基于所述视频图像信息和所述第一位置信息建立第二障碍物检测模型;基于所述第二位置信息和所述温度信息建立第三障碍物检测模型;并且利用基于粗糙集的模糊神经网络算法结合所述第一障碍物检测模型的检测结果、所述第二障碍物检测模型的检测结果和所述第三障碍物检测模型的检测结果以确定所述道路障碍物的特征信息,其中所述目标区域被划分成一系列三维立体栅格,并且每个所述障碍物检测模型的检测结果均包括表征每个所述三维立体栅格是否被所述道路障碍物占据的栅格信息。
13. 如权利要求1所述的系统,其特征在于,其中所述视频摄像装置和所述红外线摄像装置被布置在汽车前挡风玻璃的上端,并且所述毫米波雷达和所述激光雷达被布置在汽车车头前部大体上正中的位置。
CN201110440690.9A 2011-12-26 2011-12-26 用于检测道路障碍物的方法及系统 Expired - Fee Related CN103176185B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110440690.9A CN103176185B (zh) 2011-12-26 2011-12-26 用于检测道路障碍物的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110440690.9A CN103176185B (zh) 2011-12-26 2011-12-26 用于检测道路障碍物的方法及系统

Publications (2)

Publication Number Publication Date
CN103176185A true CN103176185A (zh) 2013-06-26
CN103176185B CN103176185B (zh) 2015-01-21

Family

ID=48636169

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110440690.9A Expired - Fee Related CN103176185B (zh) 2011-12-26 2011-12-26 用于检测道路障碍物的方法及系统

Country Status (1)

Country Link
CN (1) CN103176185B (zh)

Cited By (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104760537A (zh) * 2015-04-21 2015-07-08 重庆大学 一种新型车载安全驾驶辅助系统
CN104777839A (zh) * 2015-04-16 2015-07-15 北京工业大学 基于bp神经网络和距离信息的机器人自主避障方法
CN105730330A (zh) * 2014-12-11 2016-07-06 财团法人车辆研究测试中心 行车安全系统及其障碍物筛选方法
CN106060517A (zh) * 2015-04-17 2016-10-26 丰田自动车株式会社 立体物检测装置以及立体物检测方法
CN106156742A (zh) * 2016-07-06 2016-11-23 尚艳燕 一种平衡车障碍物规避方法和装置
CN106569497A (zh) * 2016-11-15 2017-04-19 江苏智石科技有限公司 一种基于雷达的智能料盒运输车
CN106686165A (zh) * 2016-12-30 2017-05-17 维沃移动通信有限公司 一种路况检测的方法及移动终端
CN106778548A (zh) * 2016-11-30 2017-05-31 百度在线网络技术(北京)有限公司 用于检测障碍物的方法和装置
CN106842193A (zh) * 2017-02-17 2017-06-13 北京国电经纬工程技术有限公司 道路检测信息的处理方法、装置和系统
CN106845424A (zh) * 2017-01-24 2017-06-13 南京大学 基于深度卷积网络的路面遗留物检测方法
CN107015559A (zh) * 2015-10-19 2017-08-04 福特全球技术公司 使用散列加权积分和求和的目标跟踪的概率推理
CN107180432A (zh) * 2017-05-16 2017-09-19 重庆邮电大学 一种导航的方法和设备
CN108020838A (zh) * 2016-11-02 2018-05-11 惠州市德赛西威汽车电子股份有限公司 一种毫米波雷达信号在自适应巡航中的处理方法
CN108152832A (zh) * 2017-12-11 2018-06-12 开沃新能源汽车集团有限公司 通过激光雷达探测目标障碍物的方法
CN108169730A (zh) * 2016-12-07 2018-06-15 岭纬公司 基于区域的激光雷达变密度扫描系统及方法
CN108436922A (zh) * 2018-06-15 2018-08-24 成都精位科技有限公司 伴随运动机器人及其控制方法、装置、系统
CN108482427A (zh) * 2018-02-22 2018-09-04 中车长春轨道客车股份有限公司 一种非接触式轨道车辆障碍物检测系统和安全控制方法
CN108509972A (zh) * 2018-01-16 2018-09-07 天津大学 一种基于毫米波和激光雷达的障碍物特征提取方法
CN108536149A (zh) * 2018-04-25 2018-09-14 吉林大学 一种基于Dubins路径的无人驾驶车辆避障控制装置及控制方法
CN108572663A (zh) * 2017-03-08 2018-09-25 通用汽车环球科技运作有限责任公司 目标跟踪
CN108846336A (zh) * 2018-05-31 2018-11-20 深圳市易成自动驾驶技术有限公司 目标检测方法、装置及计算机可读存储介质
CN108898697A (zh) * 2018-07-25 2018-11-27 广东工业大学 一种路面特征获取方法及相关装置
WO2018213954A1 (zh) * 2017-05-21 2018-11-29 李仁涛 无人驾驶汽车避障装置及方法
CN108983251A (zh) * 2018-07-27 2018-12-11 杭州电子科技大学 一种便携式立定跳远测量方法
CN108983218A (zh) * 2017-05-31 2018-12-11 本田技研工业株式会社 物体目标识别系统、物体目标识别方法及存储介质
CN109212532A (zh) * 2017-07-04 2019-01-15 百度在线网络技术(北京)有限公司 用于检测障碍物的方法和装置
CN109214987A (zh) * 2017-07-03 2019-01-15 百度(美国)有限责任公司 从上采样的低分辨率lidar 3-d点云和摄像机图像生成高分辨率3-d点云
CN109212530A (zh) * 2017-07-04 2019-01-15 百度在线网络技术(北京)有限公司 用于确定障碍物速度的方法和装置
CN109300143A (zh) * 2018-09-07 2019-02-01 百度在线网络技术(北京)有限公司 运动向量场的确定方法、装置、设备、存储介质和车辆
CN109298415A (zh) * 2018-11-20 2019-02-01 中车株洲电力机车有限公司 一种轨道和道路障碍物检测方法
CN109697861A (zh) * 2019-02-21 2019-04-30 武昌理工学院 一种道路障碍识别装置及识别方法
CN109784294A (zh) * 2019-01-25 2019-05-21 中国科学院合肥物质科学研究院 一种基于粗糙集理论候选框选择技术的枸杞图像识别定位方法
CN109975794A (zh) * 2019-03-29 2019-07-05 江西理工大学 一种利用高光谱成像测距模型进行智能制造系统检测及控制的方法
CN110108282A (zh) * 2019-05-09 2019-08-09 仲恺农业工程学院 多源信息避障装置及避障系统
CN110329316A (zh) * 2019-07-29 2019-10-15 江苏必得科技股份有限公司 一种城市轨道障碍物检测装置及检测方法
CN110582803A (zh) * 2017-04-26 2019-12-17 三菱电机株式会社 处理装置和物体识别信息的生成方法
CN110660186A (zh) * 2018-06-29 2020-01-07 杭州海康威视数字技术股份有限公司 基于雷达信号在视频图像中识别目标对象的方法及装置
CN110738850A (zh) * 2019-10-17 2020-01-31 深圳成谷科技有限公司 路侧安全监控管理系统、控制方法和设备
CN110967699A (zh) * 2018-09-30 2020-04-07 长城汽车股份有限公司 用于确定车辆的环境目标所处的区域的方法及装置
CN111177869A (zh) * 2020-01-02 2020-05-19 北京百度网讯科技有限公司 传感器布局方案的确定方法、装置及设备
CN111613077A (zh) * 2019-02-26 2020-09-01 本田技研工业株式会社 道路管理系统
CN111699407A (zh) * 2019-03-29 2020-09-22 深圳市大疆创新科技有限公司 微波雷达检测栅栏附近静止物体的方法和毫米波雷达
CN111982124A (zh) * 2020-08-27 2020-11-24 华中科技大学 基于深度学习的玻璃场景下三维激光雷达导航方法及设备
US10891499B2 (en) 2016-08-23 2021-01-12 Suteng Innovation Technology Co., Ltd. Target detection method and system
CN112347953A (zh) * 2020-11-11 2021-02-09 上海伯镭智能科技有限公司 无人驾驶车辆路况不规则障碍物的识别装置
CN112581612A (zh) * 2020-11-17 2021-03-30 上汽大众汽车有限公司 基于激光雷达和环视摄像头融合的车载栅格地图生成方法及系统
CN112823321A (zh) * 2018-10-10 2021-05-18 韩国机器人融合研究院 对基于多种类型传感器的位置识别结果进行混合的位置定位系统及其方法
WO2021226776A1 (zh) * 2020-05-11 2021-11-18 华为技术有限公司 一种车辆可行驶区域检测方法、系统以及采用该系统的自动驾驶车辆
CN114407901A (zh) * 2022-02-18 2022-04-29 北京小马易行科技有限公司 自动驾驶车辆的控制方法、装置以及自动驾驶系统
CN114730468A (zh) * 2019-09-20 2022-07-08 大陆汽车有限责任公司 用于确定交通障碍物的模型的方法
WO2023184868A1 (zh) * 2022-04-02 2023-10-05 合众新能源汽车股份有限公司 障碍物朝向的确定方法、装置、系统、设备、介质及产品

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106249239B (zh) * 2016-08-23 2019-01-01 深圳市速腾聚创科技有限公司 目标检测方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101183427A (zh) * 2007-12-05 2008-05-21 浙江工业大学 基于计算机视觉的违章停车检测装置
CN101214851A (zh) * 2008-01-10 2008-07-09 黄席樾 船舶行驶智能型全天候主动安全预警系统及其预警方法
CN101837782A (zh) * 2009-01-26 2010-09-22 通用汽车环球科技运作公司 用于碰撞预备系统的多目标融合模块
WO2010127650A1 (de) * 2009-05-06 2010-11-11 Conti Temic Microelectronic Gmbh Verfahren zur auswertung von sensordaten für ein kraftfahrzeug
CN102076531A (zh) * 2008-04-24 2011-05-25 通用汽车环球科技运作公司 车辆畅通路径检测
CN102156476A (zh) * 2011-04-14 2011-08-17 山东大学 智能空间与护士机器人多传感器系统及其信息融合方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101183427A (zh) * 2007-12-05 2008-05-21 浙江工业大学 基于计算机视觉的违章停车检测装置
CN101214851A (zh) * 2008-01-10 2008-07-09 黄席樾 船舶行驶智能型全天候主动安全预警系统及其预警方法
CN102076531A (zh) * 2008-04-24 2011-05-25 通用汽车环球科技运作公司 车辆畅通路径检测
CN101837782A (zh) * 2009-01-26 2010-09-22 通用汽车环球科技运作公司 用于碰撞预备系统的多目标融合模块
WO2010127650A1 (de) * 2009-05-06 2010-11-11 Conti Temic Microelectronic Gmbh Verfahren zur auswertung von sensordaten für ein kraftfahrzeug
CN102156476A (zh) * 2011-04-14 2011-08-17 山东大学 智能空间与护士机器人多传感器系统及其信息融合方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
姜元清: "多传感器融合技术在汽车避障中的应用", 《中国优秀硕士学位论文全文数据库 工程科技II辑》 *

Cited By (75)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105730330A (zh) * 2014-12-11 2016-07-06 财团法人车辆研究测试中心 行车安全系统及其障碍物筛选方法
CN105730330B (zh) * 2014-12-11 2018-09-28 财团法人车辆研究测试中心 行车安全系统及其障碍物筛选方法
CN104777839A (zh) * 2015-04-16 2015-07-15 北京工业大学 基于bp神经网络和距离信息的机器人自主避障方法
CN106060517A (zh) * 2015-04-17 2016-10-26 丰田自动车株式会社 立体物检测装置以及立体物检测方法
CN104760537A (zh) * 2015-04-21 2015-07-08 重庆大学 一种新型车载安全驾驶辅助系统
CN107015559A (zh) * 2015-10-19 2017-08-04 福特全球技术公司 使用散列加权积分和求和的目标跟踪的概率推理
CN106156742A (zh) * 2016-07-06 2016-11-23 尚艳燕 一种平衡车障碍物规避方法和装置
US10891499B2 (en) 2016-08-23 2021-01-12 Suteng Innovation Technology Co., Ltd. Target detection method and system
CN108020838A (zh) * 2016-11-02 2018-05-11 惠州市德赛西威汽车电子股份有限公司 一种毫米波雷达信号在自适应巡航中的处理方法
CN106569497A (zh) * 2016-11-15 2017-04-19 江苏智石科技有限公司 一种基于雷达的智能料盒运输车
CN106778548A (zh) * 2016-11-30 2017-05-31 百度在线网络技术(北京)有限公司 用于检测障碍物的方法和装置
CN106778548B (zh) * 2016-11-30 2021-04-09 百度在线网络技术(北京)有限公司 用于检测障碍物的方法和装置
CN108169730A (zh) * 2016-12-07 2018-06-15 岭纬公司 基于区域的激光雷达变密度扫描系统及方法
CN106686165A (zh) * 2016-12-30 2017-05-17 维沃移动通信有限公司 一种路况检测的方法及移动终端
CN106686165B (zh) * 2016-12-30 2018-08-17 维沃移动通信有限公司 一种路况检测的方法及移动终端
CN106845424A (zh) * 2017-01-24 2017-06-13 南京大学 基于深度卷积网络的路面遗留物检测方法
CN106842193B (zh) * 2017-02-17 2020-03-27 北京国电经纬工程技术有限公司 道路检测信息的处理方法、装置和系统
CN106842193A (zh) * 2017-02-17 2017-06-13 北京国电经纬工程技术有限公司 道路检测信息的处理方法、装置和系统
CN108572663A (zh) * 2017-03-08 2018-09-25 通用汽车环球科技运作有限责任公司 目标跟踪
CN108572663B (zh) * 2017-03-08 2021-12-21 通用汽车环球科技运作有限责任公司 目标跟踪
CN110582803B (zh) * 2017-04-26 2022-02-08 三菱电机株式会社 处理装置
CN110582803A (zh) * 2017-04-26 2019-12-17 三菱电机株式会社 处理装置和物体识别信息的生成方法
CN107180432A (zh) * 2017-05-16 2017-09-19 重庆邮电大学 一种导航的方法和设备
WO2018213954A1 (zh) * 2017-05-21 2018-11-29 李仁涛 无人驾驶汽车避障装置及方法
CN108983218A (zh) * 2017-05-31 2018-12-11 本田技研工业株式会社 物体目标识别系统、物体目标识别方法及存储介质
CN109214987A (zh) * 2017-07-03 2019-01-15 百度(美国)有限责任公司 从上采样的低分辨率lidar 3-d点云和摄像机图像生成高分辨率3-d点云
CN109212532B (zh) * 2017-07-04 2021-08-20 百度在线网络技术(北京)有限公司 用于检测障碍物的方法和装置
US11054518B2 (en) 2017-07-04 2021-07-06 Baidu Online Network Technology (Beijing) Co., Ltd. Method and apparatus for determining obstacle speed
CN109212532A (zh) * 2017-07-04 2019-01-15 百度在线网络技术(北京)有限公司 用于检测障碍物的方法和装置
CN109212530A (zh) * 2017-07-04 2019-01-15 百度在线网络技术(北京)有限公司 用于确定障碍物速度的方法和装置
CN109212530B (zh) * 2017-07-04 2022-03-11 阿波罗智能技术(北京)有限公司 用于确定障碍物速度的方法和装置
CN108152832A (zh) * 2017-12-11 2018-06-12 开沃新能源汽车集团有限公司 通过激光雷达探测目标障碍物的方法
CN108509972A (zh) * 2018-01-16 2018-09-07 天津大学 一种基于毫米波和激光雷达的障碍物特征提取方法
CN108482427A (zh) * 2018-02-22 2018-09-04 中车长春轨道客车股份有限公司 一种非接触式轨道车辆障碍物检测系统和安全控制方法
CN108536149A (zh) * 2018-04-25 2018-09-14 吉林大学 一种基于Dubins路径的无人驾驶车辆避障控制装置及控制方法
CN108536149B (zh) * 2018-04-25 2023-07-28 吉林大学 一种基于Dubins路径的无人驾驶车辆避障控制方法
CN108846336A (zh) * 2018-05-31 2018-11-20 深圳市易成自动驾驶技术有限公司 目标检测方法、装置及计算机可读存储介质
CN108436922A (zh) * 2018-06-15 2018-08-24 成都精位科技有限公司 伴随运动机器人及其控制方法、装置、系统
CN110660186A (zh) * 2018-06-29 2020-01-07 杭州海康威视数字技术股份有限公司 基于雷达信号在视频图像中识别目标对象的方法及装置
CN110660186B (zh) * 2018-06-29 2022-03-01 杭州海康威视数字技术股份有限公司 基于雷达信号在视频图像中识别目标对象的方法及装置
CN108898697A (zh) * 2018-07-25 2018-11-27 广东工业大学 一种路面特征获取方法及相关装置
CN108983251A (zh) * 2018-07-27 2018-12-11 杭州电子科技大学 一种便携式立定跳远测量方法
US11227395B2 (en) 2018-09-07 2022-01-18 Apollo Intelligent Driving Technology (Beijing) Co., Ltd. Method and apparatus for determining motion vector field, device, storage medium and vehicle
CN109300143A (zh) * 2018-09-07 2019-02-01 百度在线网络技术(北京)有限公司 运动向量场的确定方法、装置、设备、存储介质和车辆
CN110967699A (zh) * 2018-09-30 2020-04-07 长城汽车股份有限公司 用于确定车辆的环境目标所处的区域的方法及装置
CN110967699B (zh) * 2018-09-30 2022-03-22 毫末智行科技有限公司 用于确定车辆的环境目标所处的区域的方法及装置
CN112823321B (zh) * 2018-10-10 2024-04-16 韩国机器人融合研究院 对基于多种类型传感器的位置识别结果进行混合的位置定位系统及其方法
CN112823321A (zh) * 2018-10-10 2021-05-18 韩国机器人融合研究院 对基于多种类型传感器的位置识别结果进行混合的位置定位系统及其方法
CN109298415B (zh) * 2018-11-20 2020-09-22 中车株洲电力机车有限公司 一种轨道和道路障碍物检测方法
CN109298415A (zh) * 2018-11-20 2019-02-01 中车株洲电力机车有限公司 一种轨道和道路障碍物检测方法
CN109784294A (zh) * 2019-01-25 2019-05-21 中国科学院合肥物质科学研究院 一种基于粗糙集理论候选框选择技术的枸杞图像识别定位方法
CN109697861A (zh) * 2019-02-21 2019-04-30 武昌理工学院 一种道路障碍识别装置及识别方法
CN111613077A (zh) * 2019-02-26 2020-09-01 本田技研工业株式会社 道路管理系统
CN111699407B (zh) * 2019-03-29 2024-08-02 深圳市卓驭科技有限公司 微波雷达检测栅栏附近静止物体的方法和毫米波雷达
WO2020198973A1 (zh) * 2019-03-29 2020-10-08 深圳市大疆创新科技有限公司 微波雷达检测栅栏附近静止物体的方法和毫米波雷达
CN111699407A (zh) * 2019-03-29 2020-09-22 深圳市大疆创新科技有限公司 微波雷达检测栅栏附近静止物体的方法和毫米波雷达
CN109975794B (zh) * 2019-03-29 2022-12-09 江西理工大学 一种利用高光谱成像测距模型进行智能制造系统检测及控制的方法
CN109975794A (zh) * 2019-03-29 2019-07-05 江西理工大学 一种利用高光谱成像测距模型进行智能制造系统检测及控制的方法
CN110108282A (zh) * 2019-05-09 2019-08-09 仲恺农业工程学院 多源信息避障装置及避障系统
CN110108282B (zh) * 2019-05-09 2023-11-07 仲恺农业工程学院 多源信息避障装置及避障系统
CN110329316A (zh) * 2019-07-29 2019-10-15 江苏必得科技股份有限公司 一种城市轨道障碍物检测装置及检测方法
CN114730468A (zh) * 2019-09-20 2022-07-08 大陆汽车有限责任公司 用于确定交通障碍物的模型的方法
CN110738850A (zh) * 2019-10-17 2020-01-31 深圳成谷科技有限公司 路侧安全监控管理系统、控制方法和设备
CN111177869A (zh) * 2020-01-02 2020-05-19 北京百度网讯科技有限公司 传感器布局方案的确定方法、装置及设备
CN111177869B (zh) * 2020-01-02 2023-09-01 北京百度网讯科技有限公司 传感器布局方案的确定方法、装置及设备
WO2021226776A1 (zh) * 2020-05-11 2021-11-18 华为技术有限公司 一种车辆可行驶区域检测方法、系统以及采用该系统的自动驾驶车辆
CN111982124B (zh) * 2020-08-27 2022-11-01 华中科技大学 基于深度学习的玻璃场景下三维激光雷达导航方法及设备
CN111982124A (zh) * 2020-08-27 2020-11-24 华中科技大学 基于深度学习的玻璃场景下三维激光雷达导航方法及设备
CN112347953A (zh) * 2020-11-11 2021-02-09 上海伯镭智能科技有限公司 无人驾驶车辆路况不规则障碍物的识别装置
CN112347953B (zh) * 2020-11-11 2021-09-28 上海伯镭智能科技有限公司 无人驾驶车辆路况不规则障碍物的识别装置
CN112581612B (zh) * 2020-11-17 2022-11-01 上汽大众汽车有限公司 基于激光雷达和环视摄像头融合的车载栅格地图生成方法及系统
CN112581612A (zh) * 2020-11-17 2021-03-30 上汽大众汽车有限公司 基于激光雷达和环视摄像头融合的车载栅格地图生成方法及系统
CN114407901A (zh) * 2022-02-18 2022-04-29 北京小马易行科技有限公司 自动驾驶车辆的控制方法、装置以及自动驾驶系统
CN114407901B (zh) * 2022-02-18 2023-12-19 北京小马易行科技有限公司 自动驾驶车辆的控制方法、装置以及自动驾驶系统
WO2023184868A1 (zh) * 2022-04-02 2023-10-05 合众新能源汽车股份有限公司 障碍物朝向的确定方法、装置、系统、设备、介质及产品

Also Published As

Publication number Publication date
CN103176185B (zh) 2015-01-21

Similar Documents

Publication Publication Date Title
CN103176185B (zh) 用于检测道路障碍物的方法及系统
CN106997688B (zh) 基于多传感器信息融合的停车场停车位检测方法
WO2018177026A1 (zh) 确定道路边沿的装置和方法
CN101075376B (zh) 基于多视点的智能视频交通监控系统及方法
CN111461088B (zh) 一种基于图像处理与目标识别的轨道交通避障系统
CN110738121A (zh) 一种前方车辆检测方法及检测系统
CN112363167A (zh) 一种基于毫米波雷达与单目相机融合的扩展目标跟踪方法
CN112740225B (zh) 一种路面要素确定方法及装置
CN112149550A (zh) 一种基于多传感器融合的自动驾驶车辆3d目标检测方法
CN107389084A (zh) 行车路径规划方法及存储介质
CN113850102B (zh) 基于毫米波雷达辅助的车载视觉检测方法及系统
CN102592454A (zh) 一种基于车辆侧面与路面交线检测的交叉口车辆运动参数测量方法
CN112215306A (zh) 一种基于单目视觉与毫米波雷达融合的目标检测方法
Yang et al. Driving assistance system based on data fusion of multisource sensors for autonomous unmanned ground vehicles
CN114495064A (zh) 一种基于单目深度估计的车辆周围障碍物预警方法
CN113034586B (zh) 道路倾角检测方法和检测系统
CN116310679A (zh) 多传感器融合目标检测方法、系统、介质、设备及终端
CN103204104A (zh) 一种车辆全视角驾驶监控系统及方法
CN116699602A (zh) 一种基于毫米波雷达和相机融合的目标检测系统及方法
CN115690713A (zh) 一种基于双目相机的雷视融合事件检测方法
CN113792598B (zh) 基于车载摄像头的汽车碰撞预测系统和方法
CN114084129A (zh) 一种基于融合的车辆自动驾驶控制方法及系统
CN117197019A (zh) 一种车辆三维点云图像融合方法及系统
CN116912786A (zh) 一种基于车路协同的智能网联汽车多模态融合检测方法
CN116129553A (zh) 一种基于多源车载设备的融合感知方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150121

Termination date: 20211226

CF01 Termination of patent right due to non-payment of annual fee