CN104899855A - 三维障碍物检测方法和装置 - Google Patents
三维障碍物检测方法和装置 Download PDFInfo
- Publication number
- CN104899855A CN104899855A CN201410080028.0A CN201410080028A CN104899855A CN 104899855 A CN104899855 A CN 104899855A CN 201410080028 A CN201410080028 A CN 201410080028A CN 104899855 A CN104899855 A CN 104899855A
- Authority
- CN
- China
- Prior art keywords
- information
- barrier
- road surface
- binocular camera
- shooting head
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Length Measuring Devices By Optical Means (AREA)
- Image Processing (AREA)
Abstract
本发明提出了一种基于双目摄像头系统和三维激光雷达的三维障碍物检测方法,包括:通过三维激光雷达采集周边环境信息,建立由周边信息点构成的周边信息点云图;通过双目摄像头采集前方路面视频信息,确定最远端可检测路面边界信息;根据所确定的最远端可检测路面边界信息确定双目摄像头系统可检测区域和双目摄像头系统非检测区域;以及针对可检测区域内的每一个周边信息点,根据可检测区域内的路面信息,确定该周边信息点属于障碍物还是属于路面,以及针对非检测区域内的每一个周边信息点,根据最远端可检测路面边界信息,确定该周边信息点属于障碍物还是属于路面,由此,从周边信息点云图中提取出障碍物的正面、侧面和/或背面信息区域范围。
Description
技术领域
本发明涉及一种基于双目摄像头系统和三维激光雷达的三维障碍物检测方法,能够利用安装在车辆上的两个摄像头拍摄的影像进行前方路面识别的判断检测,并与三维激光雷达数据融合,进行障碍物的三维数据重建。
背景技术
随着汽车时代的全面来临,汽车安全技术受到越来越多的重视。其中基于传感器的障碍物检测和识别算法在汽车安全领域中起着至关重要的作用。
各种功能各异的传感器设备可以被用于获取各种实时路况信息。目前常用的车载传感器主要可以分为视觉类(红外线、单目摄像机、立体摄像机等)、测距类(超声波、毫米波雷达、激光雷达等)。每一种传感器探测技术都有其适用的场合以及受限制的方面。传统的障碍物检测基于单一的传感器单个检测模型来获取周边环境的障碍物信息,在复杂气候、复杂交通场景下单源信息局限性大,误差大,可靠性差具,存在着许多不足,导致无法精确识别出障碍物,为行车安全带来了很大的隐患。以激光雷达和立体摄像机为例。三维激光雷达传感器快速扫描整个360度视界,通常采用77GHZ或者24GHz激光脉冲,探测距离可达150米。通过测量发射光和从物体表面反射光之间的时间差来进行探测,根据光脉冲所需的传播时间确定物体被测距离,获取空间物体三维数据,提供激光碰到目标的点云数据。一般来说三维激光雷达距离测量精度较高,能准确的得到车辆周边环境的三维信息,对于目标的轮廓识别性能很高,能够为主车辆提供最直接反映客观事物的真实形态特征。并且该传感器对天气的鲁棒性较好。但是该传感器存在一定的缺陷,一方面不能获取环境的颜色信息,另一方面比较难区分出目标的类型,特别是在复杂环境下无法将路面和障碍物情况区别开。立体摄像机采集环境信息丰富,能提供环境的颜色信息,可以快速获取物体的外形、纹理信息,根据前方障碍物的轮廓有效分辨物体类型,捕捉前方目标。但是该传感器对光照环境要求较高,具有受恶劣天气及环境因素的外界环境影响较大的天生缺陷,存在目标缺失、模糊等问题。并且摄像机可视范围有限,会有监视盲区。
鉴于单一类型传感器都存在一定的缺陷和不足,多传感器融合能很好的补充上述缺陷,两者实现功能互补。目前在车辆前方障碍物检测方面广泛采用传感器融合的方法,主要有视觉传感器和测距传感器的融合,测距传感器和惯性传感器的融合等。例如在《使用3-D激光测距仪的目标和车辆检测及跟踪》中(中国专利申请号201110120951.9,公开日2011年11月23日,通用汽车环球科技运作有限责任公司申请)公开了一种基于三维激光雷达的障碍物检测方法及其装置,采用来自底盘动态惯性传感器的仰俯角和倾侧角数据确定先前路面状态,然后应用于激光雷达点云数据来估计地平面位置。基于点云数据结合地平面计算障碍物的空间位置,检测和跟踪动态障碍物。但是该专利只能通过已行驶过的路面状态来推断前方路面的状态,如果处于复杂路面情况,根据当前路面无法准确估计前方路面时,该方法就会失去效力。
将摄像机与激光雷达进行融合是障碍物检测领域的热门。激光雷达扫描数据和摄像头图像信息对环境的描述具有很强的互补性,如三维激光雷达扫描数据可以快速准确地获取物体表面密集的三维坐标,而摄像机图像包含了丰富的信息可以对目标进行分类。中国专利申请号201310124199.4,公开日2013年7月10日,由浙江大学申请的《一种基于双模态数据融合的道路检测》公开了一种基于三维激光雷达和摄像机的道路检测方法,其中根据非路区域和道路区域的颜色混合高斯模型的区别对三维点云信息中路面区域进行判断。该专利只能通过摄像机采集的颜色特征来区分三维激光雷达扫描范围里的路面区域和非路面区域,但是对于路面和周边环境颜色很接近的情况下该方法就很难利用颜色信息来区分路面范围区域,检测障碍物。
但是上述两种公开技术对于复杂的路面环境,特别是在路面区域和周边环境颜色相近或者路面结构很复杂的情况下,这些方法无法实施用于检测路面上的障碍物。因而能够在不同路面场景条件下实时有效地进行障碍物检测的方法及系统有很大的需求。
发明内容
为了解决现有技术的上述问题提出了本发明。因此,本发明的目的是提出一种基于双目摄像头系统和三维激光雷达的三维障碍物检测方法,能够利用安装在车辆上的两个摄像头拍摄的影像进行前方路面识别的判断检测,并与三维激光雷达数据融合,进行障碍物的三维数据重建。
为了实现上述目的,根据本发明,提出了一种基于双目摄像头系统和三维激光雷达的三维障碍物检测方法,包括:通过三维激光雷达采集周边环境信息,建立由周边信息点构成的周边信息点云图;通过双目摄像头采集前方路面视频信息,确定最远端可检测路面边界信息;根据所确定的最远端可检测路面边界信息确定双目摄像头系统可检测区域和双目摄像头系统非检测区域;以及针对双目摄像头系统可检测区域内的每一个周边信息点,根据双目摄像头系统可检测区域内的路面信息,确定该周边信息点属于障碍物还是属于路面,以及针对双目摄像头系统非检测区域内的每一个周边信息点,根据所述最远端可检测路面边界信息,确定该周边信息点属于障碍物还是属于路面,由此,从周边信息点云图中提取出障碍物的正面、侧面和/或背面信息区域范围。
优选地,所述方法还包括:将所述前方路面视频信息转化为视差图,将所述视差图转化为一系列子V视差图和U视差图,分别对各个子V视差图和U视差图采用自适应哈夫变换进行自适应线段拟合,从而分别拟合出障碍物映射线段,并根据分别拟合出的障碍物映射线段,得出障碍物正面信息区域范围。
优选地,所述方法还包括:将提取出的所述障碍物的正面、侧面和/或背面信息区域范围与拟合后得出的所述障碍物正面信息区域范围执行区域融合,以针对障碍物形成具有颜色特征的三维点云信息。
优选地,所述确定最远端可检测路面边界信息的步骤包括:利用移动窗口,将所述视差图分割为一系列子V视差图,对各个子V视差图采用自适应哈夫变换进行自适应线段拟合,拟合出路面映射线段,确定并记录各个子视差图中的最远端路面映射线段的端点的参数信息;根据摄像头参数信息计算出最远端路面映射线段的每个端点在世界坐标系中所对应的实际高度和实际景深;以及根据摄像头参数信息计算出最远端路面边界在主车体坐标系中的实际空间坐标。
优选地,所述最远端路面映射线段的端点的参数信息包括:该端点的坐标信息和对应的视差值。
优选地,所述方法应用于自动挖掘车的检测。
另外,根据本发明,提出了一种基于双目摄像头系统和三维激光雷达的三维障碍物检测装置,包括:通过三维激光雷达采集周边环境信息,建立由周边信息点构成的周边信息点云图的单元;通过双目摄像头采集前方路面视频信息,确定最远端可检测路面边界信息的单元;根据所确定的最远端可检测路面边界信息确定双目摄像头系统可检测区域和双目摄像头系统非检测区域的单元;针对双目摄像头系统可检测区域内的每一个周边信息点,根据双目摄像头系统可检测区域内的路面信息,确定该周边信息点属于障碍物还是属于路面,以及针对双目摄像头系统非检测区域内的每一个周边信息点,根据所述最远端可检测路面边界信息,确定该周边信息点属于障碍物还是属于路面,由此,从周边信息点云图中提取出障碍物的正面、侧面和/或背面信息区域范围的单元。
本发明建立了基于包括立体摄像头装置、三维激光雷达装置在内的多种传感器用来感知外界环境,共同捕捉主车辆前方信息,目标识别和对比,准确定位车前环境;建立多个障碍物检测模型,并且对所属多个数据模型进行互补检测,从而有效地提取和分割复杂环境中障碍物的有效点云,判定候选前方障碍物的存在,提取候选障碍物的物体形状参数并且可以指示障碍物类型信息。
本发明采用立体摄像机图像的采集与三维激光雷达数据的接收同步进行。立体摄像机装置用于获取前方区域中的视频图像信息;三维激光雷达装置用于获取周边环境点云图。当三维激光雷达和立体摄像机都探测到候选障碍物时,对已由立体摄像机探测到的路面信息以及已由三维激光雷达探测到的全局点云信息相结合,通过立体摄像头所采集的路面信息点,在三维激光雷达点云数据上获取障碍物激光雷达三维点的子集,建立障碍物的感兴趣区域,得到不带颜色的障碍物正/侧/背面点云区域。再将立体视觉正面彩色数据点投影到三维激光雷达坐标系上,以非常精确方式探测到的参数执行融合,且将这些信息作为前方障碍物的物体形状参数。
本发明提出了一种基于立体摄像头和三维激光雷达数据融合的三维障碍物检测方法及系统。包括:利用立体摄像头系统的障碍物正面信息和路面信息采集装置,利用立体摄像头系统前方环境进行拍摄以区分障碍物和路面区域;利用三维激光雷达和立体摄像头的障碍物正/侧/背面信息检测装置,基于立体摄像头所分析的路面情况,从三维激光数据中区分出障碍物区域;障碍物信息融合装置,利用双模态数据融合出更精确的具有颜色特征的三维点云信息。本发明实现利用传感器感知环境中障碍物,对复杂环境的鲁棒性不受路面结构影响;能有效地提取和分割复杂环境中障碍物的有效点云;并且输出的结果可以应用于自动驾驶挖掘车,用以判断是否对前方矿车进行机械臂操作判断。
本发明优势在于能够在不同路面结构场景下进行有效的障碍物检测,并且克服单源传感器获取信息可靠性差,误差大以及存在信息盲区的缺点。融合了激光雷达扫描数据和摄像头图像信息可以获得无人驾驶车辆行驶环境更加全面的信息,提高了障碍物检测的快速性和对复杂环境的适应能力。本装置有广泛的应用前景,可以应用于自动驾驶领域、辅助驾驶领域或其他一些特定的场合。
附图说明
通过参考以下组合附图对所采用的优选实施方式的详细描述,本发明的上述目的、优点和特征将变得更显而易见,其中:
图1是示出了根据本发明的实施例的用于障碍物检测的装置的构成的方框图。
图2是示出了根据本发明的实施例产生的基于立体摄像机障碍物正面信息检测的流程图。
图3是示出了根据本发明的实施例产生的基于立体摄像机路面区域检测的流程图。
图4是示出了根据本发明的实施例产生的基于立体摄像机和三维激光雷达的障碍物正/侧/背面信息检测的流程图。
图5是示出了根据本发明的实施例产生的基于立体摄像机和三维激光雷达的双模态数据融合形成的障碍物检测流程图。
图6是示出了根据本发明的实施例产生的三维障碍物检测结果,进行的挖掘车机械臂工作判断过程的流程图。
具体实施方式
为使本发明的上述目的、特征和优点更加明显易懂,以下结合附图和具体实施例进一步详细描述本发明。需要说明的是,附图中的各结构只是示意性的而不是限定性的,以使本领域普通技术人员最佳地理解本发明的原理,其不一定按比例绘制。下面将结合附图对本发明的实施例进行详细说明。
图1是示出了根据本发明的实施例的周边环境识别驾驶辅助设备的结构的方框图。如图1所示,根据本发明的障碍物检测装置可以包括:立体摄像头(双目摄像头)采集装置110、三维激光雷达采集装置120、障碍物正面信息采集装置130、路面信息采集装置140、障碍物正/侧/背面信息检测装置150、障碍物信息融合装置160以及障碍物检测输出装置170。根据本发明,可以将该周边环境识别驾驶辅助设备安装在车辆等上,以对车辆等在周边环境识别上的驾驶进行辅助。
在本发明的实施例中,立体摄像头采集装置110为安装在车体的适当位置(可以布置在汽车前挡风玻璃的上端)的立体摄像头系统,即两部(或多部)相同的摄像头系统,采集并存储来自车体前方的视频信息。摄像头系统通常由光学系统与摄像头组成,光学系统可以具有变倍功能、自动调焦功能等。摄像头可以采用彩色CCD(电荷耦合元件)摄像机。
三维激光雷达采集装置120可以布置在汽车车头前部大体上正中的位置。该三维激光雷达可以是工作在从红外到紫外光谱段的雷达系统,所使用的激光雷达可以采用脉冲或连续波工作方式,探测方法按照探测的原理可以包括瑞利散射、拉曼散射、多普勒等。
由此三维激光雷达所获取的障碍物的三维点云信息与立体摄像机装置所获取的视频图像信息可以形成良好的互补和融合,从而使得可以同时感测汽车正前方60米区域范围内路面上的障碍物,以更准确全面地获取障碍物的轮廓范围。
下面,将参考图2,来说明根据本发明的实施例的障碍物正面信息采集装置130执行过程。
在步骤S310,输入立体摄像头采集装置110采集的前方路况视频信息,并将其分帧转化为立体图像对。
在步骤S320,对立体图像对进行立体匹配,寻找立体图像对的两个图像之间的相对关联点,计算每个相对关联点的视差,由此,将立体图像对转化为视差图。
在步骤S330,根据U视差生成原则,累加视差图像每一列上具有相同水平视差的像素个数,以该个数作为对应于该像素的灰度值,将视差图转化成一幅高度是最大视差值、宽度和原图像一致的U视差图
接下来,在步骤S340,对U视差图通过自适应Hough变换进行线段拟合,拟合出障碍物映射线段。
在步骤S350,利用移动窗口对视差图进行划分生成子视差图,该窗长的宽度选择能够确保经过V视差处理可以实时检测到障碍物和路面细节。由此,可以利用移动窗口将上述视差图分割成一系列子视差图。
在步骤S360,根据V视差图生成准则,将各子视差图转化为各子V视差图。
接下来,在步骤S370,对各子V视差图进行线段拟合,拟合出障碍物映射线段。
在步骤380,根据U视差图和各个V视差图中的障碍物映射线段信息,从图像中分割出障碍物范围区域。并根据摄像头参数信息(相关的内部参数:左右摄像头的焦距、径向、左摄像头内参数矩阵、右摄像头内参数矩阵;相关的外部参数:左摄像头相对世界坐标旋转参数矩阵、右摄像头相对世界坐标旋转参数矩阵、左摄像头射影变换矩阵、右摄像头射影变换矩阵),计算出障碍物感兴趣区域在主车体坐标系中的实际空间坐标(X01,Y01,Z01,R,G,B)。
需要说明的是该系统所有输出结果均统一为主车体坐标系,其中原点0位于车体的某个定点,可以设置为三维激光雷达光源在与地面重合的平面上的投影,X轴指向车体正右方,Y轴指向车体正上方,Z轴指向车体正前方,但是本发明并不局限于这样的坐标系定义。上述实际空间坐标中(X01,Y01,Z01)为障碍物空间坐标信息,属于障碍物的某一点(x01,y01,z01,R01,G01,B01),其中该点颜色信息为(R01,G01,B01)。
这里,作为示例,利用U视差图拟合出的障碍物映射线段主要采集的是障碍物宽度横向信息,而利用V视差图拟合出的障碍物映射线段主要采集的是障碍物高度纵向信息。
下面,将参考图3,来说明根据本发明的实施例的路面信息采集装置140执行过程。其中大部分细节跟障碍物正面信息采集装置130部份步骤雷同。
在步骤S410,输入立体摄像头采集装置110采集的前方路况视频信息,并将其分帧转化为立体图像对。
在步骤S420,对立体图像对进行立体匹配,寻找立体图像对的两个图像之间的相对关联点,计算每个相对关联点的视差,由此,将立体图像对转化为视差图。
在步骤S430,利用移动窗口将上述视差图分割成一系列子视差图。
在步骤S440,根据V视差生成原则,将子视差图转化成一系列高度和原子视差图像一致的子V视差图。
在步骤S450,对各子V视差图进行线段拟合,拟合出路面映射线段,确定并记录各个子视差图中的最远端路面映射线段的端点的参数信息包括:路面映射线段的端点的坐标信息和对应的视差值。
在步骤S460,根据摄像头参数信息计算最远端路面映射线段每个端点在世界坐标系中所对应的实际高度和实际景深。利用路面映射线段的两个端点的实际景深和实际高度,根据数学式1,来求得该处路面相对于前一个路面的可视坡度。其中A、B表示某路面映射线段的两个端点,在世界坐标系中所对应的实际景深可以表示为dep(A),实际高度为hig(A)。
在步骤S470,根据摄像头参数信息计算出最远端路面边界在主车体坐标系中的实际空间坐标(Xgf,Ygf,Zgf,θ),此时输出结果依旧统一为主车体坐标系,该定义参考S380。(Xgf,Ygf,Zgf)为最远端路面边界空间坐标信息,针对最远端路面边界上的某一点(xgf,ygf,zgf,θ),其中θ表示根据数学式1计算的坡度值。
下面,将参考图4,来说明根据本发明的实施例的障碍物正/侧/背面信息检测装置150执行过程。
在步骤S510,输入三维激光雷达采集装置120采集的周边环境信息。在步骤S520,建立由周边信息点构成的周边信息点云图,周边信息点的坐标由(X2,Y2,Z2)来表示。
在步骤S530,输入立体摄像头采集装置110采集的最远端可检测路面边界信息(Xgf,Ygf,Zgf,θ),据此确定双目摄像头系统可检测区域和双目摄像头系统非检测区域。其中双目摄像头系统可检测区域指的是图片中可以显示的区域信息;非检测区域是指因为障碍物的遮挡,以障碍物为车为例,车体相对于双目摄像头背面的不可视区域以及被车体遮挡的后方区域均为双目摄像头非检测区域。
在步骤S540和S550,对于立体摄像机可检测区域的每一个周边信息点(X2,Y2),如果Y2>Yg,其中Yg为立体摄像头检测的路面信息的高度,(X2,Y2,Z2)判定为障碍物,其他判定为路面。即,根据双目摄像头系统可检测区域内的所述路面信息(现行基于双目摄像头检测路面信息方法有平面拟合、V视差、区域生长、投影变换等),确定该周边信息点属于障碍物还是属于路面。对于立体摄像机非检测区域的每一个周边信息点(X2,Y2),如果Y2>Ygf+H,(X2,Y2,Z2),则判定为障碍物,其他判定为路面。其中H=tanθ×(Z2-Zgf)。即,针对双目摄像头系统非检测区域内的每一个周边信息点,根据所述最远端可检测路面边界信息,确定该周边信息点属于障碍物还是属于路面。
在步骤S560,从周边信息点云图中提取并输出障碍物正/侧/背面信息区域范围(X01,Y01,Z01)。
下面,将参考图5,来说明根据本发明的实施例的障碍物信息融合装置160执行过程。
在步骤S610和步骤S620,分别输入以上提到的障碍物正面信息区域范围(X01,Y01,Z01,R,G,B)和障碍物正/侧/背面信息区域范围(X02,Y02,Z02)。
在步骤S630,对于立体摄像机可检测区域的每一个(X0,Y0),如果Z01=Z02,(X0,Y0,Z0,R,G,B)=(X01,Y01,Z01,R,G,B)。其他(X0,Y0,Z0,R,G,B)=(X02,Y02,Z02,Null,Null,Null)。对于立体摄像机非检测区域的每一个(X0,Y0),
(X0,Y0,Z0,R,G,B)=(X02,Y02,Z02,Null,Null,Null)。根据上述步骤,通过双目摄像头系统可检测区域内的信息,来确定激光雷达信息点属于障碍物还是属于路面;针对双目摄像头系统非检测区域内的每一个周边信息点,根据所述最远端可检测路面边界信息,确定激光雷达信息点属于障碍物还是属于路面。
该发明的障碍物检测输出装置170可以应用于自动驾驶挖掘车的对于向矿车放置砂土进行实时对准,通过挖掘车上安装的立体摄像机和激光雷达,用以获取前方矿车的图像信息,经过计算机计算分析当前矿车承载土的位置高度,自动控制挖掘车机械臂动作。从而能有效保证挖掘臂对准质量,提高挖掘效率。
下面,将参考图6,来简单说明根据本发明的实施例的障碍物检测输出装置170在自动挖掘车上的延展应用。
在步骤S810,输入基于立体摄像机和三维激光雷达双模数据的障碍物检测结果。
在步骤S820,与已存矿车模板相匹配,判断该障碍物是否为矿车。如果不是矿车,机械臂无动作指示。
在步骤S830,判断当前障碍物是矿车后,通过正面信息与已存车头信息比对,判断是否当车挖掘车正对矿车车头。如果是真,此时机械臂施工必将产生危险,所以机械臂在此状态下接受工作指示。
在步骤S840,与已存矿车模板作比对,根据当前检测到的矿车体积,计算当前矿车的承载量。并识别是否已经达到承载量。如果已达到,挖掘车不进行机械臂施工。如果没有达到,机械臂接受施工命令,进行挖土装车施工。
以上列举了若干具体实施例来详细阐明本发明,这些个例仅说明本发明的原理及其实施方法之用,而非对本发明的限制,在不脱离本发明的精神和范围的情况下,本领域的技术人员还可以做出各种变形和改进。因此,本发明不应由上述实施例来限定,而应由所附权利要求及其等价物来限定。
Claims (7)
1.一种基于双目摄像头系统和三维激光雷达的三维障碍物检测方法,包括:
通过三维激光雷达采集周边环境信息,建立由周边信息点构成的周边信息点云图;
通过双目摄像头采集前方路面视频信息,确定最远端可检测路面边界信息;
根据所确定的最远端可检测路面边界信息确定双目摄像头系统可检测区域和双目摄像头系统非检测区域;以及
针对双目摄像头系统可检测区域内的每一个周边信息点,根据双目摄像头系统可检测区域内的路面信息,确定该周边信息点属于障碍物还是属于路面,以及针对双目摄像头系统非检测区域内的每一个周边信息点,根据所述最远端可检测路面边界信息,确定该周边信息点属于障碍物还是属于路面,由此,从周边信息点云图中提取出障碍物的正面、侧面和/或背面信息区域范围。
2.根据权利要求1所述的方法,还包括:
将所述前方路面视频信息转化为视差图,将所述视差图转化为一系列子V视差图和U视差图,分别对各个子V视差图和U视差图采用自适应哈夫变换进行自适应线段拟合,从而分别拟合出障碍物映射线段,并根据分别拟合出的障碍物映射线段,得出障碍物正面信息区域范围。
3.根据权利要求2所述的方法,还包括:
将提取出的所述障碍物的正面、侧面和/或背面信息区域范围与拟合后得出的所述障碍物正面信息区域范围执行区域融合,以针对障碍物形成具有颜色特征的三维点云信息。
4.根据权利要求1所述的方法,其中,所述确定最远端可检测路面边界信息的步骤包括:
利用移动窗口,将所述视差图分割为一系列子V视差图,对各个子V视差图采用自适应哈夫变换进行自适应线段拟合,拟合出路面映射线段,确定并记录各个子视差图中的最远端路面映射线段的端点的参数信息;
根据摄像头参数信息计算出最远端路面映射线段的每个端点在世界坐标系中所对应的实际高度和实际景深;以及
根据摄像头参数信息计算出最远端路面边界在主车体坐标系中的实际空间坐标。
5.根据权利要求1所述的方法,其中,
所述最远端路面映射线段的端点的参数信息包括:该端点的坐标信息和对应的视差值。
6.根据权利要求1所述的方法,其中,
所述方法应用于自动挖掘车的检测。
7.一种基于双目摄像头系统和三维激光雷达的三维障碍物检测装置,包括:
通过三维激光雷达采集周边环境信息,建立由周边信息点构成的周边信息点云图的单元;
通过双目摄像头采集前方路面视频信息,确定最远端可检测路面边界信息的单元;
根据所确定的最远端可检测路面边界信息确定双目摄像头系统可检测区域和双目摄像头系统非检测区域的单元;
针对双目摄像头系统可检测区域内的每一个周边信息点,根据双目摄像头系统可检测区域内的路面信息,确定该周边信息点属于障碍物还是属于路面,以及针对双目摄像头系统非检测区域内的每一个周边信息点,根据所述最远端可检测路面边界信息,确定该周边信息点属于障碍物还是属于路面,由此,从周边信息点云图中提取出障碍物的正面、侧面和/或背面信息区域范围的单元。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410080028.0A CN104899855A (zh) | 2014-03-06 | 2014-03-06 | 三维障碍物检测方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410080028.0A CN104899855A (zh) | 2014-03-06 | 2014-03-06 | 三维障碍物检测方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104899855A true CN104899855A (zh) | 2015-09-09 |
Family
ID=54032503
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410080028.0A Pending CN104899855A (zh) | 2014-03-06 | 2014-03-06 | 三维障碍物检测方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104899855A (zh) |
Cited By (52)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105480227A (zh) * | 2015-12-29 | 2016-04-13 | 大连楼兰科技股份有限公司 | 主动驾驶技术中基于红外雷达与视频图像信息融合的方法 |
CN105955303A (zh) * | 2016-07-05 | 2016-09-21 | 北京奇虎科技有限公司 | 无人机自主避障方法、装置 |
CN106646474A (zh) * | 2016-12-22 | 2017-05-10 | 中国兵器装备集团自动化研究所 | 一种非结构化道路凹凸障碍物检测装置 |
CN107346551A (zh) * | 2017-06-28 | 2017-11-14 | 太平洋未来有限公司 | 一种光场光源定向方法 |
CN107367767A (zh) * | 2017-06-27 | 2017-11-21 | 上海卓思智能科技股份有限公司 | 一种通风柜窗口异物检测方法和系统以及一种控制器 |
CN107389084A (zh) * | 2017-06-09 | 2017-11-24 | 深圳市速腾聚创科技有限公司 | 行车路径规划方法及存储介质 |
CN107548466A (zh) * | 2016-04-27 | 2018-01-05 | 华为技术有限公司 | 一种检测道路障碍物的方法及装置 |
CN107678036A (zh) * | 2017-08-15 | 2018-02-09 | 株洲嘉成科技发展有限公司 | 一种车载非接触式接触网几何参数动态检测系统及方法 |
CN107729856A (zh) * | 2017-10-26 | 2018-02-23 | 海信集团有限公司 | 一种障碍物检测方法及装置 |
CN108169730A (zh) * | 2016-12-07 | 2018-06-15 | 岭纬公司 | 基于区域的激光雷达变密度扫描系统及方法 |
JP2018096826A (ja) * | 2016-12-13 | 2018-06-21 | 日本電信電話株式会社 | 点群画素位置決定装置、方法、及びプログラム |
CN108197590A (zh) * | 2018-01-22 | 2018-06-22 | 海信集团有限公司 | 一种路面检测方法、装置、终端及存储介质 |
CN108318895A (zh) * | 2017-12-19 | 2018-07-24 | 深圳市海梁科技有限公司 | 用于无人驾驶车辆的障碍物识别方法、装置及终端设备 |
CN108419441A (zh) * | 2016-03-14 | 2018-08-17 | 欧姆龙株式会社 | 路面形状测定装置、测定方法及程序 |
CN108470469A (zh) * | 2018-03-12 | 2018-08-31 | 海信集团有限公司 | 道路障碍物预警方法、装置及终端 |
CN108508885A (zh) * | 2018-02-09 | 2018-09-07 | 意诺科技有限公司 | 一种导航地图构建方法及装置 |
CN108507541A (zh) * | 2018-03-01 | 2018-09-07 | 广东欧珀移动通信有限公司 | 建筑物识别方法及系统,以及移动终端 |
CN108982546A (zh) * | 2018-08-29 | 2018-12-11 | 燕山大学 | 一种智能机器人涂胶质量检测系统及方法 |
CN109003276A (zh) * | 2018-06-06 | 2018-12-14 | 上海国际汽车城(集团)有限公司 | 基于双目立体视觉与低线束激光雷达的融合矫正方法 |
CN109059780A (zh) * | 2018-09-11 | 2018-12-21 | 百度在线网络技术(北京)有限公司 | 检测障碍物高度的方法、装置、设备及存储介质 |
CN109166155A (zh) * | 2018-09-26 | 2019-01-08 | 北京图森未来科技有限公司 | 一种车载双目摄像机测距误差的计算方法和装置 |
CN109271944A (zh) * | 2018-09-27 | 2019-01-25 | 百度在线网络技术(北京)有限公司 | 障碍物检测方法、装置、电子设备、车辆及存储介质 |
CN109521427A (zh) * | 2018-11-15 | 2019-03-26 | 上海赫千电子科技有限公司 | 车载以太网雷达系统 |
CN109633688A (zh) * | 2018-12-14 | 2019-04-16 | 北京百度网讯科技有限公司 | 一种激光雷达障碍物识别方法和装置 |
CN109725634A (zh) * | 2017-10-27 | 2019-05-07 | 百度(美国)有限责任公司 | 用于自动驾驶车辆的使用分色镜的3d lidar系统 |
CN109747530A (zh) * | 2017-11-02 | 2019-05-14 | 郭宇铮 | 一种双摄像头和毫米波融合汽车感知系统 |
CN109766793A (zh) * | 2018-12-25 | 2019-05-17 | 百度在线网络技术(北京)有限公司 | 数据处理方法和装置 |
CN110363058A (zh) * | 2018-03-26 | 2019-10-22 | 国际商业机器公司 | 使用单触发卷积神经网络的用于避障的三维对象定位 |
CN110458055A (zh) * | 2019-07-29 | 2019-11-15 | 江苏必得科技股份有限公司 | 一种障碍物检测方法及系统 |
CN110568861A (zh) * | 2019-09-19 | 2019-12-13 | 中国电子科技集团公司电子科学研究院 | 一种人机运动障碍物监测方法、可读存储介质和无人机 |
CN110633600A (zh) * | 2018-06-21 | 2019-12-31 | 海信集团有限公司 | 一种障碍物检测方法及装置 |
CN110959143A (zh) * | 2017-08-04 | 2020-04-03 | 索尼公司 | 信息处理装置、信息处理方法、程序和移动体 |
CN111027401A (zh) * | 2019-11-15 | 2020-04-17 | 电子科技大学 | 一种摄像头和激光雷达融合的端到端目标检测方法 |
CN111035543A (zh) * | 2019-12-31 | 2020-04-21 | 北京新能源汽车技术创新中心有限公司 | 一种智能导盲机器人 |
CN111274976A (zh) * | 2020-01-22 | 2020-06-12 | 清华大学 | 基于视觉与激光雷达多层次融合的车道检测方法及系统 |
CN111767761A (zh) * | 2019-04-01 | 2020-10-13 | 北京地平线机器人技术研发有限公司 | 可移动设备的行驶区域的确定方法、确定装置及电子设备 |
CN111814548A (zh) * | 2020-06-03 | 2020-10-23 | 中铁第四勘察设计院集团有限公司 | 一种异常行为检测方法和装置 |
CN111890358A (zh) * | 2020-07-01 | 2020-11-06 | 浙江大华技术股份有限公司 | 双目避障方法、装置、存储介质及电子装置 |
CN112241987A (zh) * | 2019-07-19 | 2021-01-19 | 杭州海康威视数字技术股份有限公司 | 确定防区的系统、方法、装置及存储介质 |
CN112308052A (zh) * | 2020-12-29 | 2021-02-02 | 智道网联科技(北京)有限公司 | 一种道路异常区域检测方法、装置、电子设备及存储介质 |
CN112507899A (zh) * | 2020-12-15 | 2021-03-16 | 上海有个机器人有限公司 | 一种三维激光雷达图像识别方法以及设备 |
CN112561997A (zh) * | 2020-12-10 | 2021-03-26 | 之江实验室 | 一种面向机器人的行人定位方法、装置、电子设备及介质 |
US10984588B2 (en) | 2018-09-07 | 2021-04-20 | Baidu Online Network Technology (Beijing) Co., Ltd | Obstacle distribution simulation method and device based on multiple models, and storage medium |
US11113546B2 (en) | 2018-09-04 | 2021-09-07 | Baidu Online Network Technology (Beijing) Co., Ltd. | Lane line processing method and device |
US11126875B2 (en) | 2018-09-13 | 2021-09-21 | Baidu Online Network Technology (Beijing) Co., Ltd. | Method and device of multi-focal sensing of an obstacle and non-volatile computer-readable storage medium |
CN113536867A (zh) * | 2020-04-22 | 2021-10-22 | 杭州海康威视数字技术股份有限公司 | 物体识别的方法、装置及系统 |
CN113706737A (zh) * | 2021-10-27 | 2021-11-26 | 北京主线科技有限公司 | 基于自动驾驶车辆的路面巡检系统及方法 |
US11205289B2 (en) | 2018-09-07 | 2021-12-21 | Baidu Online Network Technology (Beijing) Co., Ltd. | Method, device and terminal for data augmentation |
US11307302B2 (en) | 2018-09-07 | 2022-04-19 | Baidu Online Network Technology (Beijing) Co., Ltd | Method and device for estimating an absolute velocity of an obstacle, and non-volatile computer-readable storage medium |
US11636690B2 (en) | 2020-11-30 | 2023-04-25 | Metal Industries Research & Development Centre | Environment perception device and method of mobile vehicle |
US11718318B2 (en) | 2019-02-22 | 2023-08-08 | Apollo Intelligent Driving (Beijing) Technology Co., Ltd. | Method and apparatus for planning speed of autonomous vehicle, and storage medium |
US11780463B2 (en) | 2019-02-19 | 2023-10-10 | Baidu Online Network Technology (Beijing) Co., Ltd. | Method, apparatus and server for real-time learning of travelling strategy of driverless vehicle |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101975951A (zh) * | 2010-06-09 | 2011-02-16 | 北京理工大学 | 一种融合距离和图像信息的野外环境障碍检测方法 |
CN102303605A (zh) * | 2011-06-30 | 2012-01-04 | 中国汽车技术研究中心 | 基于多传感器信息融合的碰撞及偏离预警装置及预警方法 |
CN202163431U (zh) * | 2011-06-30 | 2012-03-14 | 中国汽车技术研究中心 | 基于多传感器信息融合的碰撞及偏离预警装置 |
CN102542843A (zh) * | 2010-12-07 | 2012-07-04 | 比亚迪股份有限公司 | 防止车辆碰撞的预警方法及装置 |
CN102564431A (zh) * | 2011-11-14 | 2012-07-11 | 南京理工大学 | 基于多传感器融合的非结构化环境理解方法 |
CN103002309A (zh) * | 2012-09-25 | 2013-03-27 | 浙江大学 | 对于多目同步摄像机拍摄的动态场景视频的时空一致性深度恢复的方法 |
CN103198302A (zh) * | 2013-04-10 | 2013-07-10 | 浙江大学 | 一种基于双模态数据融合的道路检测方法 |
CN103837139A (zh) * | 2012-11-23 | 2014-06-04 | 株式会社日立制作所 | 不平路面驾驶辅助设备和用于不平路面驾驶辅助的方法 |
-
2014
- 2014-03-06 CN CN201410080028.0A patent/CN104899855A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101975951A (zh) * | 2010-06-09 | 2011-02-16 | 北京理工大学 | 一种融合距离和图像信息的野外环境障碍检测方法 |
CN102542843A (zh) * | 2010-12-07 | 2012-07-04 | 比亚迪股份有限公司 | 防止车辆碰撞的预警方法及装置 |
CN102303605A (zh) * | 2011-06-30 | 2012-01-04 | 中国汽车技术研究中心 | 基于多传感器信息融合的碰撞及偏离预警装置及预警方法 |
CN202163431U (zh) * | 2011-06-30 | 2012-03-14 | 中国汽车技术研究中心 | 基于多传感器信息融合的碰撞及偏离预警装置 |
CN102564431A (zh) * | 2011-11-14 | 2012-07-11 | 南京理工大学 | 基于多传感器融合的非结构化环境理解方法 |
CN103002309A (zh) * | 2012-09-25 | 2013-03-27 | 浙江大学 | 对于多目同步摄像机拍摄的动态场景视频的时空一致性深度恢复的方法 |
CN103837139A (zh) * | 2012-11-23 | 2014-06-04 | 株式会社日立制作所 | 不平路面驾驶辅助设备和用于不平路面驾驶辅助的方法 |
CN103198302A (zh) * | 2013-04-10 | 2013-07-10 | 浙江大学 | 一种基于双模态数据融合的道路检测方法 |
Cited By (81)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105480227B (zh) * | 2015-12-29 | 2017-12-15 | 大连楼兰科技股份有限公司 | 主动驾驶技术中基于红外雷达与视频图像信息融合的方法 |
CN105480227A (zh) * | 2015-12-29 | 2016-04-13 | 大连楼兰科技股份有限公司 | 主动驾驶技术中基于红外雷达与视频图像信息融合的方法 |
CN108419441B (zh) * | 2016-03-14 | 2020-06-02 | 欧姆龙株式会社 | 路面形状测定装置、测定方法及计算机可读存储介质 |
CN108419441A (zh) * | 2016-03-14 | 2018-08-17 | 欧姆龙株式会社 | 路面形状测定装置、测定方法及程序 |
CN107548466B (zh) * | 2016-04-27 | 2021-07-16 | 华为技术有限公司 | 一种检测道路障碍物的方法及装置 |
CN107548466A (zh) * | 2016-04-27 | 2018-01-05 | 华为技术有限公司 | 一种检测道路障碍物的方法及装置 |
CN105955303A (zh) * | 2016-07-05 | 2016-09-21 | 北京奇虎科技有限公司 | 无人机自主避障方法、装置 |
CN108169730A (zh) * | 2016-12-07 | 2018-06-15 | 岭纬公司 | 基于区域的激光雷达变密度扫描系统及方法 |
JP2018096826A (ja) * | 2016-12-13 | 2018-06-21 | 日本電信電話株式会社 | 点群画素位置決定装置、方法、及びプログラム |
CN106646474A (zh) * | 2016-12-22 | 2017-05-10 | 中国兵器装备集团自动化研究所 | 一种非结构化道路凹凸障碍物检测装置 |
CN107389084A (zh) * | 2017-06-09 | 2017-11-24 | 深圳市速腾聚创科技有限公司 | 行车路径规划方法及存储介质 |
CN107367767A (zh) * | 2017-06-27 | 2017-11-21 | 上海卓思智能科技股份有限公司 | 一种通风柜窗口异物检测方法和系统以及一种控制器 |
CN107346551A (zh) * | 2017-06-28 | 2017-11-14 | 太平洋未来有限公司 | 一种光场光源定向方法 |
CN110959143B (zh) * | 2017-08-04 | 2023-09-22 | 索尼公司 | 信息处理装置、信息处理方法、程序和移动体 |
CN110959143A (zh) * | 2017-08-04 | 2020-04-03 | 索尼公司 | 信息处理装置、信息处理方法、程序和移动体 |
CN107678036A (zh) * | 2017-08-15 | 2018-02-09 | 株洲嘉成科技发展有限公司 | 一种车载非接触式接触网几何参数动态检测系统及方法 |
CN107678036B (zh) * | 2017-08-15 | 2021-06-04 | 株洲嘉成科技发展有限公司 | 一种车载非接触式接触网几何参数动态检测系统及方法 |
CN107729856A (zh) * | 2017-10-26 | 2018-02-23 | 海信集团有限公司 | 一种障碍物检测方法及装置 |
WO2019080557A1 (zh) * | 2017-10-26 | 2019-05-02 | 海信集团有限公司 | 一种障碍物检测方法及装置 |
CN109725634B (zh) * | 2017-10-27 | 2023-04-28 | 百度(美国)有限责任公司 | 用于自动驾驶车辆的使用分色镜的3d lidar系统 |
CN109725634A (zh) * | 2017-10-27 | 2019-05-07 | 百度(美国)有限责任公司 | 用于自动驾驶车辆的使用分色镜的3d lidar系统 |
CN109747530A (zh) * | 2017-11-02 | 2019-05-14 | 郭宇铮 | 一种双摄像头和毫米波融合汽车感知系统 |
WO2019119350A1 (zh) * | 2017-12-19 | 2019-06-27 | 深圳市海梁科技有限公司 | 用于无人驾驶车辆的障碍物识别方法、装置及终端设备 |
CN108318895B (zh) * | 2017-12-19 | 2020-02-07 | 深圳市海梁科技有限公司 | 用于无人驾驶车辆的障碍物识别方法、装置及终端设备 |
CN108318895A (zh) * | 2017-12-19 | 2018-07-24 | 深圳市海梁科技有限公司 | 用于无人驾驶车辆的障碍物识别方法、装置及终端设备 |
CN108197590B (zh) * | 2018-01-22 | 2020-11-03 | 海信集团有限公司 | 一种路面检测方法、装置、终端及存储介质 |
CN108197590A (zh) * | 2018-01-22 | 2018-06-22 | 海信集团有限公司 | 一种路面检测方法、装置、终端及存储介质 |
CN108508885A (zh) * | 2018-02-09 | 2018-09-07 | 意诺科技有限公司 | 一种导航地图构建方法及装置 |
CN108507541A (zh) * | 2018-03-01 | 2018-09-07 | 广东欧珀移动通信有限公司 | 建筑物识别方法及系统,以及移动终端 |
CN108470469A (zh) * | 2018-03-12 | 2018-08-31 | 海信集团有限公司 | 道路障碍物预警方法、装置及终端 |
CN110363058B (zh) * | 2018-03-26 | 2023-06-27 | 国际商业机器公司 | 使用单触发卷积神经网络的用于避障的三维对象定位 |
CN110363058A (zh) * | 2018-03-26 | 2019-10-22 | 国际商业机器公司 | 使用单触发卷积神经网络的用于避障的三维对象定位 |
CN109003276A (zh) * | 2018-06-06 | 2018-12-14 | 上海国际汽车城(集团)有限公司 | 基于双目立体视觉与低线束激光雷达的融合矫正方法 |
CN110633600A (zh) * | 2018-06-21 | 2019-12-31 | 海信集团有限公司 | 一种障碍物检测方法及装置 |
CN108982546A (zh) * | 2018-08-29 | 2018-12-11 | 燕山大学 | 一种智能机器人涂胶质量检测系统及方法 |
US11113546B2 (en) | 2018-09-04 | 2021-09-07 | Baidu Online Network Technology (Beijing) Co., Ltd. | Lane line processing method and device |
US11205289B2 (en) | 2018-09-07 | 2021-12-21 | Baidu Online Network Technology (Beijing) Co., Ltd. | Method, device and terminal for data augmentation |
US11307302B2 (en) | 2018-09-07 | 2022-04-19 | Baidu Online Network Technology (Beijing) Co., Ltd | Method and device for estimating an absolute velocity of an obstacle, and non-volatile computer-readable storage medium |
US10984588B2 (en) | 2018-09-07 | 2021-04-20 | Baidu Online Network Technology (Beijing) Co., Ltd | Obstacle distribution simulation method and device based on multiple models, and storage medium |
US11047673B2 (en) | 2018-09-11 | 2021-06-29 | Baidu Online Network Technology (Beijing) Co., Ltd | Method, device, apparatus and storage medium for detecting a height of an obstacle |
CN109059780A (zh) * | 2018-09-11 | 2018-12-21 | 百度在线网络技术(北京)有限公司 | 检测障碍物高度的方法、装置、设备及存储介质 |
CN109059780B (zh) * | 2018-09-11 | 2019-10-15 | 百度在线网络技术(北京)有限公司 | 检测障碍物高度的方法、装置、设备及存储介质 |
US11519715B2 (en) | 2018-09-11 | 2022-12-06 | Baidu Online Network Technology (Beijing) Co., Ltd. | Method, device, apparatus and storage medium for detecting a height of an obstacle |
US11126875B2 (en) | 2018-09-13 | 2021-09-21 | Baidu Online Network Technology (Beijing) Co., Ltd. | Method and device of multi-focal sensing of an obstacle and non-volatile computer-readable storage medium |
CN109166155A (zh) * | 2018-09-26 | 2019-01-08 | 北京图森未来科技有限公司 | 一种车载双目摄像机测距误差的计算方法和装置 |
CN109166155B (zh) * | 2018-09-26 | 2021-12-17 | 北京图森智途科技有限公司 | 一种车载双目摄像机测距误差的计算方法和装置 |
US11393219B2 (en) | 2018-09-27 | 2022-07-19 | Apollo Intelligent Driving Technology (Beijing) Co., Ltd. | Method and apparatus for detecting obstacle, electronic device, vehicle and storage medium |
CN109271944B (zh) * | 2018-09-27 | 2021-03-12 | 百度在线网络技术(北京)有限公司 | 障碍物检测方法、装置、电子设备、车辆及存储介质 |
CN109271944A (zh) * | 2018-09-27 | 2019-01-25 | 百度在线网络技术(北京)有限公司 | 障碍物检测方法、装置、电子设备、车辆及存储介质 |
CN109521427B (zh) * | 2018-11-15 | 2020-01-14 | 上海赫千电子科技有限公司 | 车载以太网雷达系统 |
CN109521427A (zh) * | 2018-11-15 | 2019-03-26 | 上海赫千电子科技有限公司 | 车载以太网雷达系统 |
CN109633688A (zh) * | 2018-12-14 | 2019-04-16 | 北京百度网讯科技有限公司 | 一种激光雷达障碍物识别方法和装置 |
CN109766793A (zh) * | 2018-12-25 | 2019-05-17 | 百度在线网络技术(北京)有限公司 | 数据处理方法和装置 |
CN109766793B (zh) * | 2018-12-25 | 2021-05-28 | 百度在线网络技术(北京)有限公司 | 数据处理方法和装置 |
US11780463B2 (en) | 2019-02-19 | 2023-10-10 | Baidu Online Network Technology (Beijing) Co., Ltd. | Method, apparatus and server for real-time learning of travelling strategy of driverless vehicle |
US11718318B2 (en) | 2019-02-22 | 2023-08-08 | Apollo Intelligent Driving (Beijing) Technology Co., Ltd. | Method and apparatus for planning speed of autonomous vehicle, and storage medium |
CN111767761A (zh) * | 2019-04-01 | 2020-10-13 | 北京地平线机器人技术研发有限公司 | 可移动设备的行驶区域的确定方法、确定装置及电子设备 |
CN112241987A (zh) * | 2019-07-19 | 2021-01-19 | 杭州海康威视数字技术股份有限公司 | 确定防区的系统、方法、装置及存储介质 |
CN112241987B (zh) * | 2019-07-19 | 2023-11-14 | 杭州海康威视数字技术股份有限公司 | 确定防区的系统、方法、装置及存储介质 |
CN110458055B (zh) * | 2019-07-29 | 2021-10-15 | 江苏必得科技股份有限公司 | 一种障碍物检测方法及系统 |
CN110458055A (zh) * | 2019-07-29 | 2019-11-15 | 江苏必得科技股份有限公司 | 一种障碍物检测方法及系统 |
CN110568861A (zh) * | 2019-09-19 | 2019-12-13 | 中国电子科技集团公司电子科学研究院 | 一种人机运动障碍物监测方法、可读存储介质和无人机 |
CN110568861B (zh) * | 2019-09-19 | 2022-09-16 | 中国电子科技集团公司电子科学研究院 | 一种人机运动障碍物监测方法、可读存储介质和无人机 |
CN111027401B (zh) * | 2019-11-15 | 2022-05-03 | 电子科技大学 | 一种摄像头和激光雷达融合的端到端目标检测方法 |
CN111027401A (zh) * | 2019-11-15 | 2020-04-17 | 电子科技大学 | 一种摄像头和激光雷达融合的端到端目标检测方法 |
CN111035543A (zh) * | 2019-12-31 | 2020-04-21 | 北京新能源汽车技术创新中心有限公司 | 一种智能导盲机器人 |
US10929694B1 (en) | 2020-01-22 | 2021-02-23 | Tsinghua University | Lane detection method and system based on vision and lidar multi-level fusion |
CN111274976A (zh) * | 2020-01-22 | 2020-06-12 | 清华大学 | 基于视觉与激光雷达多层次融合的车道检测方法及系统 |
CN113536867B (zh) * | 2020-04-22 | 2023-09-22 | 杭州海康威视数字技术股份有限公司 | 物体识别的方法、装置及系统 |
CN113536867A (zh) * | 2020-04-22 | 2021-10-22 | 杭州海康威视数字技术股份有限公司 | 物体识别的方法、装置及系统 |
CN111814548A (zh) * | 2020-06-03 | 2020-10-23 | 中铁第四勘察设计院集团有限公司 | 一种异常行为检测方法和装置 |
CN111890358B (zh) * | 2020-07-01 | 2022-06-14 | 浙江大华技术股份有限公司 | 双目避障方法、装置、存储介质及电子装置 |
CN111890358A (zh) * | 2020-07-01 | 2020-11-06 | 浙江大华技术股份有限公司 | 双目避障方法、装置、存储介质及电子装置 |
US11636690B2 (en) | 2020-11-30 | 2023-04-25 | Metal Industries Research & Development Centre | Environment perception device and method of mobile vehicle |
CN112561997A (zh) * | 2020-12-10 | 2021-03-26 | 之江实验室 | 一种面向机器人的行人定位方法、装置、电子设备及介质 |
CN112507899B (zh) * | 2020-12-15 | 2024-05-28 | 上海有个机器人有限公司 | 一种三维激光雷达图像识别方法以及设备 |
CN112507899A (zh) * | 2020-12-15 | 2021-03-16 | 上海有个机器人有限公司 | 一种三维激光雷达图像识别方法以及设备 |
CN112308052A (zh) * | 2020-12-29 | 2021-02-02 | 智道网联科技(北京)有限公司 | 一种道路异常区域检测方法、装置、电子设备及存储介质 |
CN112308052B (zh) * | 2020-12-29 | 2021-08-17 | 智道网联科技(北京)有限公司 | 一种道路异常区域检测方法、装置、电子设备及存储介质 |
CN113706737A (zh) * | 2021-10-27 | 2021-11-26 | 北京主线科技有限公司 | 基于自动驾驶车辆的路面巡检系统及方法 |
CN113706737B (zh) * | 2021-10-27 | 2022-01-07 | 北京主线科技有限公司 | 基于自动驾驶车辆的路面巡检系统及方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104899855A (zh) | 三维障碍物检测方法和装置 | |
US11734848B2 (en) | Pseudo lidar | |
US10943355B2 (en) | Systems and methods for detecting an object velocity | |
Häne et al. | Obstacle detection for self-driving cars using only monocular cameras and wheel odometry | |
EP3283843B1 (en) | Generating 3-dimensional maps of a scene using passive and active measurements | |
CN103176185B (zh) | 用于检测道路障碍物的方法及系统 | |
CN101975951B (zh) | 一种融合距离和图像信息的野外环境障碍检测方法 | |
CN104964672B (zh) | 一种基于线结构光的远距离障碍感知传感器 | |
JP2020525809A (ja) | 両眼画像に基づき高解像度地図を更新するためのシステムおよび方法 | |
CN105225482A (zh) | 基于双目立体视觉的车辆检测系统和方法 | |
CN103578117A (zh) | 确定摄像头相对于环境的姿态的方法 | |
CN112698306A (zh) | 一种多激光雷达结合相机解决地图构建盲区的系统和方法 | |
CN103487034A (zh) | 一种基于立式标靶的车载单目摄像头测距测高方法 | |
CN113850102B (zh) | 基于毫米波雷达辅助的车载视觉检测方法及系统 | |
CN103424112A (zh) | 一种基于激光平面辅助的运动载体视觉导航方法 | |
Shunsuke et al. | GNSS/INS/on-board camera integration for vehicle self-localization in urban canyon | |
CN103499337A (zh) | 一种基于立式标靶的车载单目摄像头测距测高装置 | |
CN104902261A (zh) | 用于低清晰度视频流中的路面识别的装置和方法 | |
CN204881619U (zh) | 一种基于线结构光的远距离障碍感知传感器 | |
CN111222441B (zh) | 基于车路协同的点云目标检测和盲区目标检测方法及系统 | |
WO2021262976A1 (en) | Systems and methods for detecting an open door | |
Musleh et al. | Uv disparity analysis in urban environments | |
US20220412772A1 (en) | Systems and methods for monitoring lane mark quality | |
CN115236673A (zh) | 一种大型车辆多雷达融合感知系统和方法 | |
CN110136186A (zh) | 一种用于移动机器人目标测距的检测目标匹配方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
AD01 | Patent right deemed abandoned | ||
AD01 | Patent right deemed abandoned |
Effective date of abandoning: 20180928 |