发明内容
本发明的一个目的是解决至少上述问题,并提供至少后面将说明的优点。
本发明还有一个目的是提供一种高速公路自动驾驶上下匝道的系统,能够对匝道出入口的车道线进行准确的识别,尤其在匝道路口车道线异形以及车道线缺失的情况下,也能利用局部地图信息提供的车道线形成最佳行驶路径,从而保证车辆在自动驾驶状态下顺利上下匝道。
为了实现根据本发明的这些目的和其它优点,提供了一种高速公路自动驾驶上下匝道的系统,包括:
地图服务模块,其内设置有高精度地图;
障碍物感知预测模块,其通过车辆上设置的传感器的实时感知数据结合高精度地图得到障碍物信息和道路元素信息;
融合定位模块,其利用所述车辆的全球导航卫星系统获得所述车辆的低精全局定位信息,并通过所述低精全局定位信息、道路元素信息与所述高精度地图的比对获得所述车辆的高精全局定位信息;
局部地图融合模块,其根据所述高精全局定位信息生成所述车辆附近预设距离内的局部地图,并将所述局部地图和所述道路元素信息进行融合,得到局部地图信息;
决策规划控制模块,其将所述障碍物信息、局部地图信息和高精全局定位信息综合分析得到基于所述局部地图的行驶路径,并控制所述车辆按照所述行驶路径进行行驶。
优选的是,所述的高速公路自动驾驶上下匝道的系统中,所述高精度地图为由所述地图服务模块从云端下载至本地的包含所述车辆行驶路径的高精度地图。
优选的是,所述的高速公路自动驾驶上下匝道的系统中,所述道路元素信息信息包括车道线信息和路牌信息。
优选的是,所述的高速公路自动驾驶上下匝道的系统中,所述传感器包括:毫米波雷达、智能相机、惯性测量单元,以及轮速计。
优选的是,所述的高速公路自动驾驶上下匝道的系统中,所述地图服务模块还将包含车辆行驶路径的电子导航地图由云端下载至本地,所述决策规划控制模块通过所述电子导航地图和所述高精全局定位信息获得所述车辆距离岔路口的距离信息。
一种高速公路自动驾驶上下匝道的方法,包括以下步骤:
S1、障碍物感知预测模块通过车辆上的传感器实时感知车辆周围的障碍物和道路元素;
S2、车辆上的全球导航卫星系统将获得所述车辆的低精全局定位信息实时发送给融合定位模块,融合定位模块将低精全局定位信息和道路元素与地图服务模块提供的高精度地图进行比对,得到车辆的高精全局定位信息;
S3、局部地图融合模块以所述高精全局定位信息的定位位置为中心生成预设距离内的局部地图,而后将局部地图和道路元素融合生成局部地图信息;
S4、决策规划控制模块将障碍物信息、局部地图信息和高精全局定位信息综合分析得到基于局部地图的行驶路径,并控制车辆按照所述行驶路径进行行驶。
优选的是,所述的高速公路自动驾驶上下匝道的方法中,S1前还包括:
S0、地图服务模块根据由全球导航卫星系统获得的所述车辆的低精全局定位信息由云端下载包含所述车辆在预设的待行驶路径范围内的高精度地图。
优选的是,所述的高速公路自动驾驶上下匝道的方法中,S1中障碍物感知预测模块通过车辆的智能相机获取的图像分析得到环境元素一,而后将环境元素一与车辆的毫米波雷达识别的环境元素二进行融合后,得到环境元素三,最后将环境元素三中包含的车道线和路牌分离出来作为道路元素,其余的作为障碍物。
优选的是,所述的高速公路自动驾驶上下匝道的方法中,S1前还包括所述决策规划控制模块通过由地图服务模块保存的电子导航地图与高精全局定位信息获得车辆距离岔路口的距离信息,并在所述距离信息达到预定的阈值时,触发所述高速公路自动驾驶上下匝道的系统进入工作状态。
本发明至少包括以下有益效果:
本发明的高速公路自动驾驶上下匝道的系统,。
本发明的其它优点、目标和特征将部分通过下面的说明体现,部分还将通过对本发明的研究和实践而为本领域的技术人员所理解。
具体实施方式
下面结合附图对本发明做进一步的详细说明,以令本领域技术人员参照说明书文字能够据以实施。
应当理解,本文所使用的诸如“具有”、“包含”以及“包括”术语并不排除一个或多个其它元件或其组合的存在或添加。
如图1所示,本发明提供一种高速公路自动驾驶上下匝道的系统,包括:
地图服务模块,其内设置有高精度地图;
障碍物感知预测模块,其通过车辆上设置的传感器的实时感知数据结合高精度地图得到障碍物信息和道路元素信息;
融合定位模块,其利用所述车辆的全球导航卫星系统获得所述车辆的低精全局定位信息,并通过所述低精全局定位信息、道路元素信息与所述高精度地图的比对获得所述车辆的高精全局定位信息;
局部地图融合模块,其根据所述高精全局定位信息生成所述车辆附近预设距离内的局部地图,并将所述局部地图和所述道路元素信息进行融合,得到局部地图信息;
决策规划控制模块,其将所述障碍物信息、局部地图信息和高精全局定位信息综合分析得到基于所述局部地图的行驶路径,并控制所述车辆按照所述行驶路径进行行驶。
在上述方案中,所述高速公路自动驾驶上下匝道的系统中,障碍物感知预测模块通过车辆传感器的检测数据实时得到障碍物信息和道路元素信息,然后融合定位模块通过车辆的米级的低精全局定位信息以及道路元素信息与高精度地图的比对获得车辆的厘米级的高精全局定位信息,进而通过高精全局定位信息生成局部地图,并得到局部地图信息,最后通过决策规划控制模块对障碍物信息、局部地图信息和高精全局定位信息综合分析就能够得到车辆上下匝道的最佳行驶路径,并使得车辆按照该行驶路径顺利上下匝道。即采用所述的高速公路自动驾驶上下匝道的系统,实现了不依赖高精度的全球导航卫星系统GNSS全局定位,只需要米级的低精全局定位,然后利用车道线路牌等道路元素提高横纵向的定位精度,进而得到厘米级的高精全局定位信息,最后辅以局部地图信息,则可实现在匝道路口车道线异形或车道线缺失的情况下,仍可根据局部地图信息提供的车道线形成最佳的行驶路径的技术效果,有效的保证了自动驾驶车辆上下匝道的安全性,并提高了车辆自动驾驶时在匝道区域行驶的稳定性,以及体感的舒适性。
该系统通过利用高精度地图先验信息,对于系统来说,不论匝道类型复杂多样,均可规划最佳行驶路线;融合多传感器实时定位和感知信息,实现车辆在匝道出入口的精确定位。实现精确定位的超高可靠性和适应性;不依赖实时差分技术,无需基站覆盖,在通讯不发达区域也能实现车辆自主进出匝道。
所述障碍物感知预测模块通过车辆上的传感器(包括智能相机,智能相机,毫米波雷达与超声波雷达等),对周围障碍物进行多传感器融合检测,并通过地图服务模块输出的高精度地图中的车辆可行驶区域Freespace对检测的障碍物进行过滤,同时,预测得到障碍物行为、位置、速度、距离以及未来轨迹,并将最终得到的障碍物信息发送给决策规划控制模块,用以辅助决策规划。
融合定位模块利用所述车辆的全球导航卫星系统获得所述车辆的低精全局定位信息,并通过所述低精全局定位信息、道路元素信息与所述高精度地图的比对获得所述车辆的厘米级精度的高精全局定位信息。
局部地图融合模块根据所述高精全局定位信息生成所述车辆附近预设距离内的局部地图,并将所述局部地图和所述道路元素信息进行融合,得到局部地图信息,该局部地图信息包括短距离的车道线和短距离的道路拓扑,以利于在车道线缺失或车道线异形的匝道口,准确的规划出车辆上下匝道的行驶路径。具体的,局部地图融合模块用来对岔路口附近的局部地图进行处理,在接近岔路口时,局部地图融合模块会首先将岔路口的局部地图做缓存,然后生成一份关于岔路口的有向图,最后根据位置信息实时地将局部地图的坐标转换到车身坐标系下。
决策规划控制模块通过障碍物信息与地图信息的辅助,选择合适的策略,并根据所选策略做出路径规划,并最终输出对车辆的纵向/横向控制。其中,决策规划控制模块通过连接整车CAN网络来控制车辆底盘的执行机构,包含刹车,油门(电门),方向盘等;另外,该模块还负责与HMI的交互或通信,以及与ICP/TJP/LC等功能的互相切换,例如:功能是否开启指令、目的地信息、提前多大距离变道至最右侧车道等等。
一个优选方案中,所述高精度地图为由所述地图服务模块从云端下载至本地的包含所述车辆行驶路径的高精度地图。
在上述方案中,所述地图服务模块通过地图云服务器即云端下载并缓存地图数据至本地,为其他模块提供地图信息与服务,如输出Freespace,用于障碍物感知预测模块对路面障碍物的过滤,以及路口策略和局部地图,用于辅助决策路径规划;同时采用高精度地图由云端进行下载的方式,能够有效减少占用的内存,进而提高系统的运行速度。
一个优选方案中,所述道路元素信息信息包括车道线信息和路牌信息。
一个优选方案中,所述传感器包括:毫米波雷达、智能相机、惯性测量单元,以及轮速计。
一个优选方案中,所述地图服务模块还将包含车辆行驶路径的电子导航地图由云端下载至本地,所述决策规划控制模块通过所述电子导航地图和所述高精全局定位信息获得所述车辆距离岔路口的距离信息。
在上述方案中,电子导航地图负责处理导航相关的消息,在获取融合定位模块发送的定位信息之后,地图服务模块会首先进行车道级的地图匹配,将当前位置精确匹配到地图上,然后根据用户特定的路线来进行路径规划,最后根据结构化道路信息进行导航决策,生成导航信息和道路信息,即能够实现实时获得车辆距离岔路口的距离值。
导航信息包括道路级别的结构化地图信息、车道级别的结构化地图信息、车道编号、限速信息、精确道路信息(坡度、顶角、斜率等)。道路信息为一个局部的地图模型,与地图内部存储的道路数据采用相同的方式进行组织。
一种高速公路自动驾驶上下匝道的方法,包括以下步骤:
S1、障碍物感知预测模块通过车辆上的传感器实时感知车辆周围的障碍物和道路元素;
S2、车辆上的全球导航卫星系统将获得所述车辆的低精全局定位信息实时发送给融合定位模块,融合定位模块将低精全局定位信息和道路元素与地图服务模块提供的高精度地图进行比对,得到车辆的高精全局定位信息;
S3、局部地图融合模块以所述高精全局定位信息的定位位置为中心生成预设距离内的局部地图,而后将局部地图和道路元素融合生成局部地图信息;
S4、决策规划控制模块将障碍物信息、局部地图信息和高精全局定位信息综合分析得到基于局部地图的行驶路径,并控制车辆按照所述行驶路径进行行驶。
在上述方案中,障碍物感知预测模块通过车辆传感器的检测数据实时得到障碍物信息和道路元素信息,然后融合定位模块通过车辆的米级的低精全局定位信息以及道路元素信息与高精度地图的比对获得车辆的厘米级的高精全局定位信息,进而通过高精全局定位信息生成局部地图,并得到局部地图信息,最后通过决策规划控制模块对障碍物信息、局部地图信息和高精全局定位信息综合分析就能够得到车辆上下匝道的最佳行驶路径,并使得车辆按照该行驶路径顺利上下匝道。即采用所述的高速公路自动驾驶上下匝道的系统,实现了不依赖高精度的全球导航卫星系统GNSS全局定位,只需要米级的低精全局定位,然后利用车道线路牌等道路元素提高横纵向的定位精度,进而得到厘米级的高精全局定位信息,最后辅以局部地图信息,则可实现在匝道路口车道线异形或车道线缺失的情况下,仍可根据局部地图信息提供的车道线形成最佳的行驶路径的技术效果,有效的保证了自动驾驶车辆上下匝道的安全性,并提高了车辆自动驾驶时在匝道区域行驶的稳定性,以及体感的舒适性。
一个优选方案中,S1前还包括:
S0、地图服务模块根据由全球导航卫星系统获得的所述车辆的低精全局定位信息由云端下载包含所述车辆在预设的待行驶路径范围内的高精度地图。
在上述方案中,所述地图服务模块通过地图云服务器即云端下载并缓存地图数据至本地,为其他模块提供地图信息与服务,如输出Freespace,用于障碍物感知预测模块对路面障碍物的过滤,以及路口策略和局部地图,用于辅助决策路径规划;同时采用高精度地图由云端进行下载的方式,能够有效减少占用的内存,进而提高系统的运行速度。
一个优选方案中,S1中障碍物感知预测模块通过车辆的智能相机获取的图像分析得到环境元素一,而后将环境元素一与车辆的毫米波雷达识别的环境元素二进行融合后,得到环境元素三,最后将环境元素三中包含的车道线和路牌分离出来作为道路元素,其余的作为障碍物。
一个优选方案中,S1前还包括所述决策规划控制模块通过由地图服务模块保存的电子导航地图与高精全局定位信息获得车辆距离岔路口的距离信息,并在所述距离信息达到预定的阈值时,触发所述高速公路自动驾驶上下匝道的系统进入工作状态。
在上述方案中,可根据设定,距离匝道路口一定距离,提前进行变道,确保即使在复杂路况下,仍可成功让自动驾驶车辆自主上下匝道。
所述高速公路自动驾驶上下匝道的系统中各模块的详细功能介绍:
1、障碍物感知预测模块
该模块通过车身感知传感器(智能相机、毫米波雷达等)对车辆周围障碍进行感知,并输出障碍物信息,包括位置、速度、距离,行为以及未来预测轨迹等。该模块可以进一步划分为三个子功能模块,包括视觉检测、感知融合以及预测。该模块整体框架如图2所示。
其中视觉检测功能模块负责视觉相关障碍物检测,即通过单目相机(包括广角、长焦、环视等)组成的视觉感知传感器系统,对车辆周围障碍物进行位置、速度等信息的检测,其处理逻辑为:基于卷积神经网络CNN的障碍物检测,得到障碍物的2D信息,而后根据高精度地图、高精全局定位信息以及障碍物的2D坐标信息,通过特定算法得到障碍物在3D坐标系下的信息。
感知融合功能模块负责融合视觉检测、智能相机以及毫米波雷达的障碍物检测结果,输出最终的障碍物位置、速度等信息;其处理逻辑为:通过毫米波雷达监测结果的轨迹聚类,获取障碍物的平均位置和速度,而后将雷达障碍物与视觉检测障碍物融合,如果二者可以匹配,障碍物会被赋予雷达障碍物的x方向值和视觉检测障碍物的y方向值,如果匹配失败,则分别对匹配/未匹配的障碍物进行卡尔曼滤波。
预测功能模块负责通过感知融合返回的障碍物信息,预测障碍物在未来可能的行为和运动轨迹;其处理逻辑为:根据局部地图信息(包含车道间的拓扑关系,车道类型信息及车道所对应的车道线信息),对障碍物的意图分类,判断进入换道判断模型还是交互模型,而后根据障碍物的意图生成各种意图下对应的轨迹,最后根据各种意图的轨迹、本车的状态,以及道路结构判断车辆在每种意图下的概率。
2、融合定位模块
该模块通过获取组合导航、IMU、VIO、车道线、初始车道线定位、标识牌检测与高精地图信息,在后端进行多传感器融合,得到稳定的高精定位结果。该模块整体框架如图3所示。
其中,标牌获取通过匹配视觉检测到的路牌,以及高精地图中的路牌,形成通信correspondence,发送给后端优化模块进行融合定位,具体包括:
(1)获取分割结果、地图标识牌数据和先验姿态;
(2)将3D地图中心点通过先验姿态投影到2D图像平面;
(3)将分割结果的每个轮廓的2D中心点和地图投影得到的2D点进行匹配,产生信号通信SignCorrespondence。
车道线获取通过智能相机检测到的车道线,以及高精地图中的车道线,形成车道线通信LaneCorrespondence,发送给后端优化模块进行融合定位,具体包括:
(1)智能相机获得检测车道线并且检测车道线的置信度满足要求(>=0.5);
(2)获得当前时刻的初始对准;
(3)获得里程表DROdometry做车道匹配;
(4)根据车道匹配的结果获得对应高精地图的车道线信息;
(5)通过有效长度设定,截取智能相机检测的车道线,并将有效长度内的车道线沿着车体坐标系纵向分成若干段,分别用直线拟合;
(6)根据优先姿势priorpose将对应车道线的地图车道线坐标投影到车体坐标系下,截取有效点,并关联对应的直线;
(7)根据上述方式获得若干对通信correspondences,发送给融合定位模块。
后端优化模块通过对多源定位信息输入构建因子图,进行图优化的方式,获取多传感器融合定位,具体包括:
(1)判断是否满足先验条件:是否有传感器数据到达;
(2)添加传感器数据:接受传感器数据存入MeasurementManager;
(3)数据预处理:如果未初始化,则从MeasurementManager中获取SINS数据进行初始化。如果已经初始化则对数据进行处理(检测是否可用,过滤掉不需要的数据,生成标识牌Correspondence和车道线Correspondence,对IMU进行与积分);
(4)将预处理后的数据构建因子图,如果构建成功则进行优化,输出融合定位结果。
地图服务模块
该模块负责坡道起步辅助系统HSA相关的地图信息服务,包括地图数据在线下载、缓存以及分析处理等相关工作,并为HSA其他模块提供地图导航和数据服务,其主要功能模块包括:高精地图数据下载与缓存,高精地图导航服务与局部地图服务。
其中,高精地图导航服务功能负责处理导航相关的消息,在获取融合定位模块发送的定位信息之后,高精地图导航服务会首先进行车道级的地图匹配,将当前位置精确匹配到地图上,然后根据用户特定的路线来进行路径规划,最后根据结构化道路信息进行导航决策,生成导航信息和道路信息。
导航信息包括道路级别的结构化地图信息、车道级别的结构化地图信息、车道编号、限速信息、精确道路信息(坡度、顶角、斜率等)。
道路信息为一个局部的地图模型,与地图内部存储的道路数据采用相同的方式进行组织。
局部地图服务用来对岔路口附近的局部地图进行处理,在接近岔路口时,局部地图服务会首先将岔路口的局部地图做缓存,然后生成一份关于岔路口的有向图,最后根据位置信息实时地将局部地图的坐标转换到车身坐标系下。
决策规划控制模块
该模块在拥有高精度地图的先验信息,高精度定位保持稳定,感知模块正常工作、准确输出的情况下,解决部分上下匝道场景的决策规划控制问题。使得车辆可以自主完成主路和匝道,匝道和匝道之间的切换。该模块主要包括决策、规划和控制三个子功能模块。
其中决策功能模块负责从局部地图表示的道路间连接关系,结合传感器给出的实时障碍物信息,给出车道级别的全局导航指导,以及对应车道推荐的终点目标状态,以减少下游规划算法所需要搜索的解的空间并提升规划成功率和路径质量。
规划功能模块负责根据决策给出的指导性建议和定位、感知、地图信息、车辆信息,对车辆未来一定时间窗口或者位移窗口内的轨迹进行运动规划,生成安全、舒适、合理、优选的轨迹供控制模块执行。其中,一条安全、舒适、合理、优选的轨迹,其中至少包含5个车辆位姿点(每个点之间的时间间隔相等或者在frenet坐标系下的位置间距相等),每个点包含对应的车辆速度、车辆朝向角、加速度、道路曲率、坡度信息,以及到达对应位姿所需要的时间间隔(或者位置间隔)。
控制功能模块负责接受规划信息和车辆信息,给出控制器能够执行的控制指令,以追踪规划目标点。
尽管本发明的实施方案已公开如上,但其并不仅仅限于说明书和实施方式中所列运用,它完全可以被适用于各种适合本发明的领域,对于熟悉本领域的人员而言,可容易地实现另外的修改,因此在不背离权利要求及等同范围所限定的一般概念下,本发明并不限于特定的细节和这里示出与描述的图例。