CN114509045A - 车轮区域高程检测方法和系统 - Google Patents

车轮区域高程检测方法和系统 Download PDF

Info

Publication number
CN114509045A
CN114509045A CN202210401313.2A CN202210401313A CN114509045A CN 114509045 A CN114509045 A CN 114509045A CN 202210401313 A CN202210401313 A CN 202210401313A CN 114509045 A CN114509045 A CN 114509045A
Authority
CN
China
Prior art keywords
point cloud
elevation
wheel
area
dimensional
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210401313.2A
Other languages
English (en)
Inventor
裴姗姗
杨超
苏文秀
孙钊
肖志鹏
姚纯纯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Smarter Eye Technology Co Ltd
Original Assignee
Beijing Smarter Eye Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Smarter Eye Technology Co Ltd filed Critical Beijing Smarter Eye Technology Co Ltd
Priority to CN202210401313.2A priority Critical patent/CN114509045A/zh
Publication of CN114509045A publication Critical patent/CN114509045A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C5/00Measuring height; Measuring distances transverse to line of sight; Levelling between separated points; Surveyors' levels
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20228Disparity calculation for image-based rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30256Lane; Road marking

Abstract

本发明公开了一种车轮区域高程检测方法和系统,所述方法包括:获取同时刻的双目图像,并计算双目图像的视差图;计算检测区域的各图像像素点的三维信息坐标,对所述三维点云图进行点云筛选,以得到目标三维点云图;基于预存的路面模型,分别计算目标三维点云图中每个像素点的垂直高度值,以及每个像素点在俯视栅格图上的投影数据;对目标三维点云图中所有像素点的垂直高度值和投影数据进行高度数据累计和融合,以得到基于所述检测区域的高程图;获取车轮参数,并基于车轮参数和所述高程图,得到车轮区域的高程曲线。通过该方法为汽车控制系统做出驾驶策略处理提供更准确的数据支持,解决了现有技术中自动驾驶舒适性和安全性较差的技术问题。

Description

车轮区域高程检测方法和系统
技术领域
本发明涉及智能驾驶技术领域,具体涉及一种车轮区域高程检测方法和系统。
背景技术
随着自动驾驶的发展,在保障车辆及驾驶员安全的基础上,舒适性的要求也越来越高。监测前方道路并评估其危险情况是自动驾驶技术发展中的关键的环节,因此,提供一种车轮区域高程检测方法,利用车轮区域高程检测实时识别前方道路环境,为汽车控制系统做出驾驶策略处理提供数据支持,从而提高驾驶的舒适性和安全性,就成为本领域技术人员亟待解决的问题。
发明内容
为此,本发明一种车轮区域高程检测方法和系统,以至少部分解决现有技术中自动驾驶舒适性和安全性较差的技术问题。
为了实现上述目的,本发明实施例提供如下技术方案:
一种车轮区域高程检测方法,其特征在于,所述方法包括:
获取同时刻的双目图像,并计算所述双目图像的视差图;
在视差图中划定检测区域,并计算所述检测区域的各图像像素点的三维信息坐标,以得到三维点云图;
对所述三维点云图进行点云筛选,以得到目标三维点云图;
基于预存的路面模型,分别计算所述目标三维点云图中每个像素点的垂直高度值,以及每个像素点在俯视栅格图上的投影数据;
对所述目标三维点云图中所有像素点的垂直高度值和投影数据进行高度数据累计和融合,以得到基于所述检测区域的高程图;
获取车轮参数,并基于所述车轮参数和所述高程图,得到车轮区域的高程曲线。
进一步地,在视差图中划定检测区域,并计算所述检测区域的图像像素点的三维信息,具体包括:
依据预存的双目立体视觉系统成像模型选取成像中心点下侧的区域作为检测区域,通过三维重建获取各图像像素点的三维信息坐标:
Figure 604745DEST_PATH_IMAGE001
其中:(cx,cy)是成像图像的成像中心点坐标,base_line是车载双目视觉传感器的基线,(Xi,Yi)是图像像素点,
Figure 944459DEST_PATH_IMAGE002
是图像像素点计算得到的三维信息坐标。
进一步地,对所述三维点云图进行点云筛选,以得到目标三维点云图,具体包括:
根据预存的可行驶区域检测结果对三维点云筛选,以选取可行驶区域内的点云拟合路面模型;且/或,
根据预存的路面语义分割结果对三维点云筛选,仅保留在路面上有高度起伏变化类别的点云,以得到目标三维点云图。
进一步地,判定路面模型为直线模型
Figure 971321DEST_PATH_IMAGE003
,则利用以下公式,分别计算所述目标三维点云图中每个像素点的垂直高度值:
Figure 562840DEST_PATH_IMAGE004
其中,a,b,c和d是路面模型方的参数项,
Figure 991547DEST_PATH_IMAGE002
是图像像素点计算得到的三维信息坐标;height为图像像素点距离路面模型的垂直距离。
进一步地,判定路面模型为平面模型
Figure 502163DEST_PATH_IMAGE005
,则利用以下公式,分别计算所述目标三维点云图中每个像素点的垂直高度值:
Figure 281900DEST_PATH_IMAGE006
其中,a,b,c和d是路面模型方的参数项,
Figure 411530DEST_PATH_IMAGE002
是图像像素点计算得到的三维信息坐标;height为图像像素点距离路面模型的垂直距离。
进一步地,利用以下公式,计算每个像素点在俯视栅格图上的投影数据:
Figure 694744DEST_PATH_IMAGE007
其中,
Figure 376261DEST_PATH_IMAGE008
是图像像素点
Figure 377715DEST_PATH_IMAGE002
在俯视栅格图上的投影位置,
Figure 311036DEST_PATH_IMAGE009
Figure 573390DEST_PATH_IMAGE010
是俯视栅格图上一个格子代表的真实横向宽度和纵向长度,
Figure 566754DEST_PATH_IMAGE011
是俯视栅格图像素宽度的一半。
进一步地,获取车轮参数,并基于所述车轮参数和所述高程图,得到车轮区域的高程曲线,具体包括:
获取世界坐标系下的车轮宽度和两车轮间距,依据预存的双目立体视觉系统成像模型和小孔成像模型完成世界坐标系向图像坐标系的转换,获得车轮区域在俯视栅格图上的位置坐标;
所述高程图上,对车轮区域内的位置坐标数据进行统计分析,在每个车轮区域中,每个距离对应输出一组高度数据,以获得在车轮区域内每个距离下的高程值;
将车轮区域内的所有像素点对应的高度数据显示为高程曲线。
本发明还提供一种车轮区域高程检测系统,所述系统包括:
图像获取单元,用于获取同时刻的双目图像,并计算所述双目图像的视差图;
点云计算单元,用于在视差图中划定检测区域,并计算所述检测区域的各图像像素点的三维信息坐标,以得到三维点云图;
点云筛选单元,用于对所述三维点云图进行点云筛选,以得到目标三维点云图;
高度值计算单元,用于基于预存的路面模型,分别计算所述目标三维点云图中每个像素点的垂直高度值,以及每个像素点在俯视栅格图上的投影数据;
高程图计算单元,用于对所述目标三维点云图中所有像素点的垂直高度值和投影数据进行高度数据累计和融合,以得到基于所述检测区域的高程图;
高程曲线计算单元,用于获取车轮参数,并基于所述车轮参数和所述高程图,得到车轮区域的高程曲线。
本发明还提供一种智能终端,所述智能终端包括:数据采集装置、处理器和存储器;
所述数据采集装置用于采集数据;所述存储器用于存储一个或多个程序指令;所述处理器,用于执行一个或多个程序指令,用以执行如上所述的方法。
本发明还提供一种计算机可读存储介质,所述计算机可读存储介质中包含一个或多个程序指令,所述一个或多个程序指令用于执行如上所述的方法。
本发明所提供的车轮区域高程检测方法,通过获取同时刻的双目图像,并计算所述双目图像的视差图,而后在视差图中划定检测区域,并计算所述检测区域的各图像像素点的三维信息坐标,以得到三维点云图;对所述三维点云图进行点云筛选,以得到目标三维点云图;基于预存的路面模型,分别计算所述目标三维点云图中每个像素点的垂直高度值,以及每个像素点在俯视栅格图上的投影数据;从而对所述目标三维点云图中所有像素点的垂直高度值和投影数据进行高度数据累计和融合,以得到基于所述检测区域的高程图;进而获取车轮参数,并基于所述车轮参数和所述高程图,得到车轮区域的高程曲线。这样,该车轮区域高程检测方法,利用车轮区域高程检测实时识别前方道路环境,为汽车控制系统做出驾驶策略处理提供数据支持,从而提高驾驶的舒适性和安全性,解决了现有技术中自动驾驶舒适性和安全性较差的技术问题。
附图说明
为了更清楚地说明本发明的实施方式或现有技术中的技术方案,下面将对实施方式或现有技术描述中所需要使用的附图作简单地介绍。显而易见地,下面描述中的附图仅仅是示例性的,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图引伸获得其它的实施附图。
本说明书所绘示的结构、比例、大小等,均仅用以配合说明书所揭示的内容,以供熟悉此技术的人士了解与阅读,并非用以限定本发明可实施的限定条件,故不具技术上的实质意义,任何结构的修饰、比例关系的改变或大小的调整,在不影响本发明所能产生的功效及所能达成的目的下,均应仍落在本发明所揭示的技术内容得能涵盖的范围内。
图1为本发明说提供的车轮区域高程检测方法一种具体实施方式的流程图;
图2为一个使用场景下检测区域的示意图;
图3为图2所示使用场景下可行驶区域检测结果示意图;
图4为图2所示使用场景下语义分割结构示意图;
图5为图2所示使用场景下得到的高度栅格图;
图6为图2所示使用场景下得到的高程图;
图7为图2所示使用场景下车轮区域的投影示意图;
图8为图7所示车轮区域的高程曲线图。
图9为本发明说提供的车轮区域高程检测系统一种具体实施方式的结构框图。
具体实施方式
以下由特定的具体实施例说明本发明的实施方式,熟悉此技术的人士可由本说明书所揭露的内容轻易地了解本发明的其他优点及功效,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要指出的是,在该实施例中,为了方便描述,以双目立体相机坐标系为参考系,沿左目相机光轴方向是Z轴距离方向,双目立相机基线方向为X轴横向方向,竖直方向为Y轴纵向方向。
请参考图1,图1为本发明说提供的车轮区域高程检测方法一种具体实施方式的流程图。
在一种具体实施方式中,本发明所提供的车轮区域高程检测方法包括以下步骤:
S101:获取同时刻的双目图像,并计算所述双目图像的视差图。具体地,通过车载双目视觉传感器,获取同时刻的双目图像,并对所述双目图像进行处理,通过立体匹配算法,得到双目图像的稠密视差图,简称视差图。
S102:在视差图中划定检测区域,并计算所述检测区域的各图像像素点的三维信息坐标,以得到三维点云图;
在一些实施例中,视差图中划定检测区域时,如图2所示,可依据预存的双目立体视觉系统成像模型选取成像中心点下侧的区域作为检测区域,通过三维重建获取各图像像素点的三维信息坐标:
Figure 55504DEST_PATH_IMAGE012
其中:(cx,cy)是成像图像的成像中心点坐标,base_line是车载双目视觉传感器的基线,(Xi,Yi)是图像像素点,
Figure 526936DEST_PATH_IMAGE002
是图像像素点计算得到的三维信息坐标。
S103:对所述三维点云图进行点云筛选,以得到目标三维点云图。
具体地,首先根据预存的可行驶区域检测结果对三维点云筛选,以选取可行驶区域内的点云拟合路面模型。
其中,可行驶区域检测方法不限,可行驶区域检测是一种常见的用于自动驾驶方向的检测技术,实现了路面区域边界感知,应用可行使区域边界信息,可以有效选择出属于路面区域的点云,以得到如图3所示的可行驶区域检测结果示意图。
进一步地,在通过可行驶区域检测结果进行点云筛选之后,还可以根据预存的路面语义分割结果对三维点云筛选,仅保留在路面上有高度起伏变化类别的点云,以得到目标三维点云图。
其中,路面语义分割可以对道路中所可能出现的地形情况进行分析,对地形常见场景类别进行像素级别的分类,可识别路面上无高度起伏变化的类别,如阴影识别,路面标识识别,也可识别路面上有高度起伏变化的目标,如减速带,井盖,破损,坑洞和其他障碍物,例如图4所示的路面和减速带的分类。
这样,在不损失感知能力的前提下,通过可行驶区域检测结果、路面语义分割结果对三维点云的筛选,显著降低了三维点云的数据量,提高了计算效率。通过可行驶区域检测结果、路面语义分割结果的筛选方法可选取一种使用,也可全部使用,后续步骤仅采用筛选后形成的目标三维点云图进行处理。
S104:基于预存的路面模型,分别计算所述目标三维点云图中每个像素点的垂直高度值,以及每个像素点在俯视栅格图上的投影数据;
在实际使用场景中,路面模型可以为直线模型,也可以为平面模型。据此,在步骤S104中,当判定路面模型为直线模型
Figure 909376DEST_PATH_IMAGE013
时,则利用以下公式,分别计算所述目标三维点云图中每个像素点的垂直高度值:
Figure 73641DEST_PATH_IMAGE014
其中,a,b,c和d是路面模型方的参数项,
Figure 784108DEST_PATH_IMAGE002
是图像像素点计算得到的三维信息坐标;height为图像像素点距离路面模型的垂直距离。
当判定路面模型为平面模型
Figure 59232DEST_PATH_IMAGE015
时,则利用以下公式,分别计算所述目标三维点云图中每个像素点的垂直高度值:
Figure 561757DEST_PATH_IMAGE016
其中,a,b,c和d是路面模型方的参数项,
Figure 631344DEST_PATH_IMAGE002
是图像像素点计算得到的三维信息坐标;height为图像像素点距离路面模型的垂直距离。
进一步地,在S104中,高度数据投影时,将三维点云投影至在俯视栅格图(X0Z平面)上,具体地,利用以下公式,计算每个像素点在俯视栅格图上的投影数据:
Figure 94687DEST_PATH_IMAGE017
其中,
Figure 907922DEST_PATH_IMAGE018
是图像像素点
Figure 264954DEST_PATH_IMAGE002
在俯视栅格图上的投影位置,
Figure 505443DEST_PATH_IMAGE019
Figure 456081DEST_PATH_IMAGE020
是俯视栅格图上一个格子代表的真实横向宽度和纵向长度,
Figure 73007DEST_PATH_IMAGE021
是俯视栅格图像素宽度的一半。
如图5所示的高度栅格图中,当
Figure 284546DEST_PATH_IMAGE019
Figure 961515DEST_PATH_IMAGE020
选取较小的值时,一个格子代表的区域也较小,可近似将该区域高度看作一致的通过三维点云投影,将三维点的高度数据记录在对应网格中,生成栅格高度图。双目传感器感知数据生成的栅格高度图和常见激光雷达传感器获得的相比,点云更稠密。
S105:对所述目标三维点云图中所有像素点的垂直高度值和投影数据进行高度数据累计和融合,以得到基于所述检测区域的高程图;
应当理解的是,上述步骤S104是单帧图像的栅格高度图的计算过程, 由于单帧观测数据存在观测误差,因此需要积累世界坐标系下同位置的多次观测高度数据,该处理需要帧与帧之间的高度数据位置对齐,通过传感器,车身姿态算法,图像位姿算法可实现数据对齐,完成高度数据积累。
通过高度数据的积累,同位置可以获得一个测高数据集合,对该数据集合滤波(中值滤波,均值滤波等常见滤波方式都可以),每个位置确定唯一高度值,即可生成如图6所示的高程图。应当理解的是,高程图是地形检测功能的高度感知结果,表示了车辆前方区域,检测区域内每个位置的高度信息。
S106:获取车轮参数,并基于所述车轮参数和所述高程图,得到车轮区域的高程曲线。
在一些实施例中,步骤S106具体包括以下步骤:
获取世界坐标系下的车轮宽度和两车轮间距,依据预存的双目立体视觉系统成像模型和小孔成像模型完成世界坐标系向图像坐标系的转换,获得车轮区域在俯视栅格图上的位置坐标;
所述高程图上,对车轮区域内的位置坐标数据进行统计分析,在每个车轮区域中,每个距离对应输出一组高度数据,以获得在车轮区域内每个距离下的高程值;
将车轮区域内的所有像素点对应的高度数据显示为高程曲线。
车辆行驶过程中,车轮行驶区域的路面状况和驾车舒适性紧密相关,为获得准确的车轮行驶区域高程变化,作为主动悬架功能的信息输入,以此提高驾车舒适性,基于高程图做进一步处理:依据真实世界坐标系下的车轮宽度,两车轮间距,依据双目立体视觉系统成像模型和小孔成像模型完成世界坐标系向图像坐标系的转换,获得车轮区域在俯视栅格图(X0Z平面)的位置,如图7所示,其中说明了车轮区域在俯视栅格图(X0Z平面)的位置。
车轮区域高程检测时,在俯视栅格图(X0Z平面)上的高程图上,对车轮区域内的数据进行统计分析,在每个车轮区域中,每个距离仅有唯一的高度数据输出。以此获得在车轮区域内每个距离下的高程值,将这些高度数据显示为如图8所示的高程曲线效果图。
在上述具体实施方式中,本发明所提供的车轮区域高程检测方法,通过获取同时刻的双目图像,并计算所述双目图像的视差图,而后在视差图中划定检测区域,并计算所述检测区域的各图像像素点的三维信息坐标,以得到三维点云图;对所述三维点云图进行点云筛选,以得到目标三维点云图;基于预存的路面模型,分别计算所述目标三维点云图中每个像素点的垂直高度值,以及每个像素点在俯视栅格图上的投影数据;从而对所述目标三维点云图中所有像素点的垂直高度值和投影数据进行高度数据累计和融合,以得到基于所述检测区域的高程图;进而获取车轮参数,并基于所述车轮参数和所述高程图,得到车轮区域的高程曲线。这样,该车轮区域高程检测方法,利用车轮区域高程检测实时识别前方道路环境,为汽车控制系统做出驾驶策略处理提供数据支持,从而提高驾驶的舒适性和安全性,解决了现有技术中自动驾驶舒适性和安全性较差的技术问题。
除了上述方法,本发明还提供一种车轮区域高程检测系统,如图9所示,所述系统包括:
图像获取单元100,用于获取同时刻的双目图像,并计算所述双目图像的视差图;
点云计算单元200,用于在视差图中划定检测区域,并计算所述检测区域的各图像像素点的三维信息坐标,以得到三维点云图;
点云筛选单元300,用于对所述三维点云图进行点云筛选,以得到目标三维点云图;
高度值计算单元400,用于基于预存的路面模型,分别计算所述目标三维点云图中每个像素点的垂直高度值,以及每个像素点在俯视栅格图上的投影数据;
高程图计算单元500,用于对所述目标三维点云图中所有像素点的垂直高度值和投影数据进行高度数据累计和融合,以得到基于所述检测区域的高程图;
高程曲线计算单元600,用于获取车轮参数,并基于所述车轮参数和所述高程图,得到车轮区域的高程曲线。
在上述具体实施方式中,本发明所提供的车轮区域高程检测系统,通过获取同时刻的双目图像,并计算所述双目图像的视差图,而后在视差图中划定检测区域,并计算所述检测区域的各图像像素点的三维信息坐标,以得到三维点云图;对所述三维点云图进行点云筛选,以得到目标三维点云图;基于预存的路面模型,分别计算所述目标三维点云图中每个像素点的垂直高度值,以及每个像素点在俯视栅格图上的投影数据;从而对所述目标三维点云图中所有像素点的垂直高度值和投影数据进行高度数据累计和融合,以得到基于所述检测区域的高程图;进而获取车轮参数,并基于所述车轮参数和所述高程图,得到车轮区域的高程曲线。这样,该车轮区域高程检测方法,利用车轮区域高程检测实时识别前方道路环境,为汽车控制系统做出驾驶策略处理提供数据支持,从而提高驾驶的舒适性和安全性,解决了现有技术中自动驾驶舒适性和安全性较差的技术问题。
本发明还提供一种智能终端,所述智能终端包括:数据采集装置、处理器和存储器;
所述数据采集装置用于采集数据;所述存储器用于存储一个或多个程序指令;所述处理器,用于执行一个或多个程序指令,用以执行如上所述的方法。
与上述实施例相对应的,本发明实施例还提供了一种计算机可读存储介质,该计算机可读存储介质中包含一个或多个程序指令。其中,所述一个或多个程序指令用于被一种双目相机深度标定系统执行如上所述的方法。
在本发明实施例中,处理器可以是一种集成电路芯片,具有信号的处理能力。处理器可以是通用处理器、数字信号处理器(Digital Signal Processor,简称DSP)、专用集成电路(Application Specific工ntegrated Circuit,简称ASIC)、现场可编程门阵列(FieldProgrammable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。处理器读取存储介质中的信息,结合其硬件完成上述方法的步骤。
存储介质可以是存储器,例如可以是易失性存储器或非易失性存储器,或可包括易失性和非易失性存储器两者。
其中,非易失性存储器可以是只读存储器(Read-Only Memory,简称ROM)、可编程只读存储器(Programmable ROM,简称PROM)、可擦除可编程只读存储器(Erasable PROM,简称EPROM)、电可擦除可编程只读存储器(Electrically EPROM,简称EEPROM)或闪存。
易失性存储器可以是随机存取存储器(Random Access Memory,简称RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(Static RAM,简称SRAM)、动态随机存取存储器(Dynamic RAM,简称DRAM)、同步动态随机存取存储器(Synchronous DRAM,简称SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data RateSDRAM,简称DDRSDRAM)、增强型同步动态随机存取存储器(EnhancedSDRAM,简称ESDRAM)、同步连接动态随机存取存储器(Synchlink DRAM,简称SLDRAM)和直接内存总线随机存取存储器(DirectRambus RAM,简称DRRAM)。
本发明实施例描述的存储介质旨在包括但不限于这些和任意其它适合类型的存储器。
本领域技术人员应该可以意识到,在上述一个或多个示例中,本发明所描述的功能可以用硬件与软件组合来实现。当应用软件时,可以将相应功能存储在计算机可读介质中或者作为计算机可读介质上的一个或多个指令或代码进行传输。计算机可读介质包括计算机可读存储介质和通信介质,其中通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。存储介质可以是通用或专用计算机能够存取的任何可用介质。
以上的具体实施方式,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上仅为本发明的具体实施方式而已,并不用于限定本发明的保护范围,凡在本发明的技术方案的基础之上,所做的任何修改、等同替换、改进等,均应包括在本发明的保护范围之内。

Claims (10)

1.一种车轮区域高程检测方法,其特征在于,所述方法包括:
获取同时刻的双目图像,并计算所述双目图像的视差图;
在视差图中划定检测区域,并计算所述检测区域的各图像像素点的三维信息坐标,以得到三维点云图;
对所述三维点云图进行点云筛选,以得到目标三维点云图;
基于预存的路面模型,分别计算所述目标三维点云图中每个像素点的垂直高度值,以及每个像素点在俯视栅格图上的投影数据;
对所述目标三维点云图中所有像素点的垂直高度值和投影数据进行高度数据累计和融合,以得到基于所述检测区域的高程图;
获取车轮参数,并基于所述车轮参数和所述高程图,得到车轮区域的高程曲线。
2.根据权利要求1所述的车轮区域高程检测方法,其特征在于,在视差图中划定检测区域,并计算所述检测区域的图像像素点的三维信息,具体包括:
依据预存的双目立体视觉系统成像模型选取成像中心点下侧的区域作为检测区域,通过三维重建获取各图像像素点的三维信息坐标:
Figure 993271DEST_PATH_IMAGE001
其中:(cx,cy)是成像图像的成像中心点坐标,
Figure 336528DEST_PATH_IMAGE002
是车载双目视觉传感器的基线,(Xi,Yi)是图像像素点,
Figure 369075DEST_PATH_IMAGE003
是图像像素点计算得到的三维信息坐标。
3.根据权利要求2所述的车轮区域高程检测方法,其特征在于,对所述三维点云图进行点云筛选,以得到目标三维点云图,具体包括:
根据预存的可行驶区域检测结果对三维点云筛选,以选取可行驶区域内的点云拟合路面模型;且/或,
根据预存的路面语义分割结果对三维点云筛选,仅保留在路面上有高度起伏变化类别的点云,以得到目标三维点云图。
4.根据权利要求3所述的车轮区域高程检测方法,其特征在于,判定路面模型为直线模型
Figure 379756DEST_PATH_IMAGE004
,则利用以下公式,分别计算所述目标三维点云图中每个像素点的垂直高度值:
Figure 82133DEST_PATH_IMAGE005
其中,a,b,c和d是路面模型方的参数项,
Figure 912686DEST_PATH_IMAGE006
是图像像素点计算得到的三维信息坐标;height为图像像素点距离路面模型的垂直距离。
5.根据权利要求4所述的车轮区域高程检测方法,其特征在于,判定路面模型为平面模型
Figure 624290DEST_PATH_IMAGE007
,则利用以下公式,分别计算所述目标三维点云图中每个像素点的垂直高度值:
Figure 223898DEST_PATH_IMAGE008
其中,a,b,c和d 是路面模型方的参数项,
Figure 221810DEST_PATH_IMAGE006
是图像像素点计算得到的三维信息坐标;height 为图像像素点距离路面模型的垂直距离。
6.根据权利要求5所述的车轮区域高程检测方法,其特征在于,利用以下公式,计算每个像素点在俯视栅格图上的投影数据:
Figure 805238DEST_PATH_IMAGE009
其中,
Figure 789375DEST_PATH_IMAGE010
是图像像素点
Figure 509069DEST_PATH_IMAGE006
在俯视栅格图上的投影位置,
Figure 818828DEST_PATH_IMAGE011
Figure 623973DEST_PATH_IMAGE012
是俯视栅格图上一个格子代表的真实横向宽度和纵向长度,
Figure 536434DEST_PATH_IMAGE013
是俯视栅格图像素宽度的一半。
7.根据权利要求6所述的车轮区域高程检测方法,其特征在于,获取车轮参数,并基于所述车轮参数和所述高程图,得到车轮区域的高程曲线,具体包括:
获取世界坐标系下的车轮宽度和两车轮间距,依据预存的双目立体视觉系统成像模型和小孔成像模型完成世界坐标系向图像坐标系的转换,获得车轮区域在俯视栅格图上的位置坐标;
所述高程图上,对车轮区域内的位置坐标数据进行统计分析,在每个车轮区域中,每个距离对应输出一组高度数据,以获得在车轮区域内每个距离下的高程值;
将车轮区域内的所有像素点对应的高度数据显示为高程曲线。
8.一种车轮区域高程检测系统,其特征在于,所述系统包括:
图像获取单元,用于获取同时刻的双目图像,并计算所述双目图像的视差图;
点云计算单元,用于在视差图中划定检测区域,并计算所述检测区域的各图像像素点的三维信息坐标,以得到三维点云图;
点云筛选单元,用于对所述三维点云图进行点云筛选,以得到目标三维点云图;
高度值计算单元,用于基于预存的路面模型,分别计算所述目标三维点云图中每个像素点的垂直高度值,以及每个像素点在俯视栅格图上的投影数据;
高程图计算单元,用于对所述目标三维点云图中所有像素点的垂直高度值和投影数据进行高度数据累计和融合,以得到基于所述检测区域的高程图;
高程曲线计算单元,用于获取车轮参数,并基于所述车轮参数和所述高程图,得到车轮区域的高程曲线。
9.一种智能终端,其特征在于,所述智能终端包括:数据采集装置、处理器和存储器;
所述数据采集装置用于采集数据;所述存储器用于存储一个或多个程序指令;所述处理器,用于执行一个或多个程序指令,用以执行如权利要求1-6任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中包含一个或多个程序指令,所述一个或多个程序指令用于执行如权利要求1-6任一项所述的方法。
CN202210401313.2A 2022-04-18 2022-04-18 车轮区域高程检测方法和系统 Pending CN114509045A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210401313.2A CN114509045A (zh) 2022-04-18 2022-04-18 车轮区域高程检测方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210401313.2A CN114509045A (zh) 2022-04-18 2022-04-18 车轮区域高程检测方法和系统

Publications (1)

Publication Number Publication Date
CN114509045A true CN114509045A (zh) 2022-05-17

Family

ID=81554706

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210401313.2A Pending CN114509045A (zh) 2022-04-18 2022-04-18 车轮区域高程检测方法和系统

Country Status (1)

Country Link
CN (1) CN114509045A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112348781A (zh) * 2020-10-26 2021-02-09 广东博智林机器人有限公司 一种基准面高度检测方法、装置、设备及存储介质
CN114708567A (zh) * 2022-06-06 2022-07-05 济南融瓴科技发展有限公司 一种基于双目摄像头的路面坑洼检测和避让方法及系统
CN114964071A (zh) * 2022-06-14 2022-08-30 广东工业大学 混凝土表面粗糙度测试系统、方法、介质、设备及终端
CN115205809A (zh) * 2022-09-15 2022-10-18 北京中科慧眼科技有限公司 路面凹凸度检测方法和系统
CN115346003A (zh) * 2022-10-18 2022-11-15 中科慧眼(天津)研究开发有限公司 一种基于双目立体视觉的路面冲击分级方法和系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103593529A (zh) * 2013-11-15 2014-02-19 江苏省基础地理信息中心 一种基于数学形态学的复杂桥梁对象自动符号化方法
CN112434707A (zh) * 2020-11-14 2021-03-02 武汉中海庭数据技术有限公司 一种交通路口rpp点自动提取方法及装置
CN112561348A (zh) * 2020-12-18 2021-03-26 广州市城市规划设计所 一种路网密度的估算方法、装置、设备及存储介质
CN113674275A (zh) * 2021-10-21 2021-11-19 北京中科慧眼科技有限公司 基于稠密视差图的路面不平度检测方法、系统和智能终端
CN113689565A (zh) * 2021-10-21 2021-11-23 北京中科慧眼科技有限公司 基于双目立体视觉的路面平整度等级检测方法、系统和智能终端
CN113792707A (zh) * 2021-11-10 2021-12-14 北京中科慧眼科技有限公司 基于双目立体相机的地形环境检测方法、系统和智能终端

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103593529A (zh) * 2013-11-15 2014-02-19 江苏省基础地理信息中心 一种基于数学形态学的复杂桥梁对象自动符号化方法
CN112434707A (zh) * 2020-11-14 2021-03-02 武汉中海庭数据技术有限公司 一种交通路口rpp点自动提取方法及装置
CN112561348A (zh) * 2020-12-18 2021-03-26 广州市城市规划设计所 一种路网密度的估算方法、装置、设备及存储介质
CN113674275A (zh) * 2021-10-21 2021-11-19 北京中科慧眼科技有限公司 基于稠密视差图的路面不平度检测方法、系统和智能终端
CN113689565A (zh) * 2021-10-21 2021-11-23 北京中科慧眼科技有限公司 基于双目立体视觉的路面平整度等级检测方法、系统和智能终端
CN113792707A (zh) * 2021-11-10 2021-12-14 北京中科慧眼科技有限公司 基于双目立体相机的地形环境检测方法、系统和智能终端

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112348781A (zh) * 2020-10-26 2021-02-09 广东博智林机器人有限公司 一种基准面高度检测方法、装置、设备及存储介质
CN114708567A (zh) * 2022-06-06 2022-07-05 济南融瓴科技发展有限公司 一种基于双目摄像头的路面坑洼检测和避让方法及系统
CN114708567B (zh) * 2022-06-06 2022-09-06 济南融瓴科技发展有限公司 一种基于双目摄像头的路面坑洼检测和避让方法及系统
CN114964071A (zh) * 2022-06-14 2022-08-30 广东工业大学 混凝土表面粗糙度测试系统、方法、介质、设备及终端
CN115205809A (zh) * 2022-09-15 2022-10-18 北京中科慧眼科技有限公司 路面凹凸度检测方法和系统
CN115346003A (zh) * 2022-10-18 2022-11-15 中科慧眼(天津)研究开发有限公司 一种基于双目立体视觉的路面冲击分级方法和系统

Similar Documents

Publication Publication Date Title
CN114509045A (zh) 车轮区域高程检测方法和系统
CN112906449B (zh) 基于稠密视差图的路面坑洼检测方法、系统和设备
US11393126B2 (en) Method and apparatus for calibrating the extrinsic parameter of an image sensor
CN108520536B (zh) 一种视差图的生成方法、装置及终端
CN114495043B (zh) 基于双目视觉系统的上下坡路况检测方法、系统和智能终端
CN103731652B (zh) 移动面分界线认知装置和方法、以及移动体设备控制系统
CN110555407B (zh) 路面车辆空间识别方法及电子设备
US20230144678A1 (en) Topographic environment detection method and system based on binocular stereo camera, and intelligent terminal
CN112578406B (zh) 一种车辆环境信息感知方法及装置
CN112465831B (zh) 基于双目立体相机的弯道场景感知方法、系统和装置
CN110962844A (zh) 一种车辆航向角修正方法及系统、存储介质及终端
CN108596899A (zh) 道路平坦性检测方法、装置及设备
Lion et al. Smart speed bump detection and estimation with kinect
CN113781543B (zh) 基于双目相机的限高装置检测方法、系统和智能终端
CN113140002B (zh) 基于双目立体相机的道路状况检测方法、系统和智能终端
CN113689565B (zh) 基于双目立体视觉的路面平整度等级检测方法、系统和智能终端
CN111754574A (zh) 基于双目相机的距离测试方法、装置、系统和存储介质
CN110375659B (zh) 检测障碍物高度的方法、装置、设备及存储介质
CN115100621A (zh) 基于深度学习网络的地面场景检测方法和系统
CN115100290B (zh) 交通场景下的单目视觉定位方法及装置、设备、存储介质
US20230147557A1 (en) Real-time ground fusion method and system based on binocular stereo vision, and intelligent terminal
CN113674275B (zh) 基于稠密视差图的路面不平度检测方法、系统和智能终端
CN114972470A (zh) 基于双目视觉的路面环境获取方法和系统
CN114049307A (zh) 基于双目立体视觉的路面高度检测方法、系统和智能终端
CN116740670A (zh) 一种障碍物分割识别方法与系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination