CN115195743B - 基于无人驾驶的车辆自动变道方法、装置、设备及介质 - Google Patents
基于无人驾驶的车辆自动变道方法、装置、设备及介质 Download PDFInfo
- Publication number
- CN115195743B CN115195743B CN202211128210.XA CN202211128210A CN115195743B CN 115195743 B CN115195743 B CN 115195743B CN 202211128210 A CN202211128210 A CN 202211128210A CN 115195743 B CN115195743 B CN 115195743B
- Authority
- CN
- China
- Prior art keywords
- lane
- vehicle
- track
- information
- changing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 58
- 238000003062 neural network model Methods 0.000 claims abstract description 50
- 230000006870 function Effects 0.000 claims description 55
- 230000008859 change Effects 0.000 claims description 52
- 238000005457 optimization Methods 0.000 claims description 34
- 238000003860 storage Methods 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 12
- 238000012549 training Methods 0.000 claims description 10
- 238000009499 grossing Methods 0.000 claims description 5
- 238000004891 communication Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 12
- 238000012545 processing Methods 0.000 description 6
- 239000000872 buffer Substances 0.000 description 4
- 238000013461 design Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000011144 upstream manufacturing Methods 0.000 description 3
- 240000004050 Pentaglottis sempervirens Species 0.000 description 2
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000002787 reinforcement Effects 0.000 description 2
- 230000004888 barrier function Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/18—Propelling the vehicle
- B60W30/18009—Propelling the vehicle related to particular drive situations
- B60W30/18163—Lane change; Overtaking manoeuvres
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
- B60W40/06—Road conditions
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/0098—Details of control systems ensuring comfort, safety or stability not otherwise provided for
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W2050/0001—Details of the control system
- B60W2050/0019—Control system elements or transfer functions
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2552/00—Input parameters relating to infrastructure
- B60W2552/53—Road markings, e.g. lane marker or crosswalk
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T10/00—Road transport of goods or passengers
- Y02T10/10—Internal combustion engine [ICE] based vehicles
- Y02T10/40—Engine management systems
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Human Computer Interaction (AREA)
- Traffic Control Systems (AREA)
Abstract
本发明提供的基于无人驾驶的车辆自动变道方法、装置、设备及介质,首先若车辆处于换道状态,将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型,进而一方面能够减少代码之间的冲突,提高系统稳定性,另一方面使得自动驾驶更为智能,变道更为平滑,提高了在换道场景下的躲避动态障碍物的能力。
Description
技术领域
本发明涉及智能驾驶技术领域,具体涉及基于无人驾驶的车辆自动变道方法、装置、电子设备及存储介质。
背景技术
自动驾驶车辆的决策规划模块是整个算法中的核心模块。基于规则的运动规划算法一般解耦为路径规划和速度规划。路径规划作为运动规划的重要组成部分,主要作用是接收上游感知、地图、定位和决策数据,通过对当前环境的整合,实时规划出局部范围内安全和平滑的可行路径点序列。
当前的路径规划算法会先根据道路结构生成一条道路引导线,将这条引导线作为原始的参考路径,将障碍物边界进行膨胀生成一个凸空间,然后将路径规划问题转换为在凸空间内的二次规划(Quadratic Program,QP)问题。常用的QP代价函数一般包括两项:光滑项和引导项,约束条件为横向上的障碍物上下边界和车辆动力学限制。该类算法的效果是规划路径会在保证安全避障的前提下,尽量贴近引导线行驶。
聚焦到交通场景中常见的换道场景,目前已有的路径规划算法已经比较成熟,但还是存在以下两个待优化的地方:
一是路径规划模块所规划出的路径不符合乘坐人的期待,第一把会比较猛之后会比较平缓导致乘客在换道过程中较强烈地感受到是机器在驾驶,而不是一个“老司机”;
二是目前的路径规划换道场景只支持让车变道,模块会在打转向灯之后0.5s进行变道。不支持动态障碍物的规划换道。与目前规划模块输出的换道轨迹相比,一个熟练的人类司机的变道轨迹更合理,更符合乘坐人的舒适性要求。
发明内容
针对现有技术中的问题,本发明提供一种基于无人驾驶的车辆自动变道方法、装置、电子设备及存储介质,旨在解决目前车辆自动变道技术的缺陷。
为解决上述技术问题,本发明提供以下技术方案:
本申请第一方面实施例提供一种基于无人驾驶的车辆自动变道方法,包括:
获取车辆当前帧的车道信息以及自车行驶信息;
若车辆处于换道状态,将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型,所述神经网络模型输出变道行驶轨迹;
结合所述变道行驶轨迹、代价优化函数和目标车道的参考线,生成更新的变道行驶轨迹,以使车辆以所述更新的变道行驶轨迹进行变道。
在可选的实施例中,其特征在于,还包括:
利用边界生成器,结合所述车道信息,生成各个车道的边界信息;
所述结合所述变道行驶轨迹、代价优化函数和目标车道的参考线,生成更新的变道行驶轨迹,包括:
将所述变道行驶轨迹和所述边界信息输入至预设的轨迹合理性判断模型,所述轨迹合理性判断模型判断当前的变道行驶轨迹是否合理,若合理,则结合所述变道行驶轨迹和所述目标车道的参考线输出轨迹初始解;
根据所述轨迹初始解,结合所述变道行驶轨迹和代价优化函数,生成更新的变道行驶轨迹。
在可选的实施例中,则结合所述变道行驶轨迹和所述目标车道的参考线输出轨迹初始解,包括:
对所述变道行驶轨迹和目标车道的参考线进行拼接处理,得到组合轨迹;
对所述组合轨迹进行平滑处理,得到所述轨迹初始解。
在可选的实施例中,根据所述轨迹初始解,结合所述变道行驶轨迹、代价优化函数,生成更新的变道行驶轨迹包括:
将所述轨迹初始解作为所述代价优化函数的引导项;其中所述代价优化函数的约束条件为横向上的障碍物上下边界和车辆动力学限制条件;
计算所述代价优化函数在所述约束条件下的最小损失对应的行驶轨迹,并用该最小损失对应的行驶轨迹更新所述变道行驶轨迹,得到更新的变道行驶轨迹。
在可选的实施例中,所述车道信息包括障碍车信息、车道线投影;
在将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型之前,还包括:
将当前帧以及当前帧之前若干帧的自车行驶信息、障碍车信息以及车道线投影分别绘制于预设鸟瞰图的不同通道中;
相对应地,所述将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型包括:
将绘制之后的所述预设鸟瞰图作为所述神经网络模型的输入,进而将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型。
在可选的实施例中,还包括:
建立所述神经网络模型;
利用一段时间内的连续多帧对应的车道信息和自车行驶信息训练所述神经网络模型。
在可选的实施例中,还包括:
从多个神经网络模型中载入其中一个神经网络模型;每个神经网络模型是利用不同驾驶风格下的历史车道信息和历史自车行驶信息训练形成。
本申请第二方面实施例提供一种基于无人驾驶的车辆自动变道装置,包括:
获取模块,获取车辆当前帧的车道信息以及自车行驶信息;
变道行驶轨迹输出模块,若车辆处于换道状态,将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型,所述神经网络模型输出变道行驶轨迹;
车辆自动变道模块,结合所述变道行驶轨迹、代价优化函数和目标车道的参考线,生成更新的变道行驶轨迹,以使车辆以所述更新的变道行驶轨迹进行变道。
本发明的又一个方面,提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现所述的基于无人驾驶的车辆自动变道方法。
本发明的又一个方面,提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现基于无人驾驶的车辆自动变道方法。
由上述技术方案可知,本发明提供的基于无人驾驶的车辆自动变道方法、装置、电子设备及存储介质,首先若车辆处于换道状态,将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型,进而一方面能够减少代码之间的冲突,提高系统稳定性,另一方面使得自动驾驶更为智能,变道更为平滑,提高了在换道场景下的躲避动态障碍物的能力。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例中一种基于无人驾驶的车辆自动变道方法的流程示意图。
图2为本发明实施例中一种基于无人驾驶的车辆自动变道方法中步骤S3的具体流程示意图。
图3为本发明实施例中一种基于无人驾驶的车辆自动变道方法中步骤S31的具体流程示意图。
图4为本发明实施例中一种基于无人驾驶的车辆自动变道方法中步骤S32的具体流程示意图。
图5为本发明实施例中的场景示意图。
图6示出了本申请实施例中变道的轨迹变化示意图。
图7为一种基于无人驾驶的车辆自动变道装置的结构示意图。
图8为本发明实施例中的电子设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整的描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
当前的路径规划算法会先根据道路结构生成一条道路引导线,将这条引导线作为原始的参考路径,将障碍物边界进行膨胀生成一个凸空间,然后将路径规划问题转换为在凸空间内的二次规划(Quadratic Program,QP)问题。常用的QP代价函数一般包括两项:光滑项和引导项,约束条件为横向上的障碍物上下边界和车辆动力学限制。该类算法的效果是规划路径会在保证安全避障的前提下,尽量贴近引导线行驶。
聚焦到交通场景中常见的换道场景,目前已有的路径规划算法已经比较成熟,但还是存在以下两个待优化的地方:
一是路径规划模块所规划出的路径不符合乘坐人的期待,第一把会比较猛之后会比较平缓导致乘客在换道过程中较强烈地感受到是机器在驾驶,而不是一个“老司机”;
二是目前的路径规划换道场景只支持让车变道,模块会在打转向灯之后0.5s进行变道。不支持动态障碍物的规划换道。与目前规划模块输出的换道轨迹相比,一个熟练的人类司机的变道轨迹更合理,更符合乘坐人的舒适性要求。
本申请的核心构思在于在原有的lane follow场景下加入学习模型生成换道轨迹的task。来实现在上游发出换道指令后,加载模型生成轨迹点,作为后面的二次优化的参考线初解,而不再使用原始的规划模块提供的参考线,从而让QP优化出一条更拟人的轨迹让下游的控制去执行。
结合图1所示,本申请第一方面实施例提供一种基于无人驾驶的车辆自动变道方法,包括:
S1:获取车辆当前帧的车道信息以及自车行驶信息;
S2:若车辆处于换道状态,将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型,所述神经网络模型输出变道行驶轨迹;
S3:结合所述变道行驶轨迹、代价优化函数和目标车道的参考线,生成更新的变道行驶轨迹,以使车辆以所述更新的变道行驶轨迹进行变道。
本发明提供的基于无人驾驶的车辆自动变道方法,首先若车辆处于换道状态,将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型,进而一方面能够减少代码之间的冲突,提高系统稳定性,另一方面使得自动驾驶更为智能,变道更为平滑,提高了在换道场景下的躲避动态障碍物的能力。
下面结合图2至图6对本申请实施例进行详细说明,其中图5示出了本申请实施例中的车道变道示意图,图6示出了本申请的整体框架示意图。
本申请实施例中,执行所述基于无人驾驶的车辆自动变道方法的主体可以是安装在车辆上的车载设备,例如车机,也可以是与车辆通信连接(例如蓝牙连接)的移动终端,例如手机、便携式笔记本等,进一步的,本申请也可以是车辆通过无线通讯模块将相关数据发送至云端服务器,由云端服务器执行后将结果传输给车辆进行控制,本申请对此不做限制。
在本申请实施例中,车道信息具体可以包括每个车道的边界线、车道标识、车道上的警示物以及车道上的障碍物等。
示例性的,本申请实施例中的一个场景下,车道信息包括三个单向车道的边界线、车道上显示的客车通道、货车通道、限速100等,以及车道上因车祸导致的障碍区,此时障碍物为故障车辆。
在本申请实施例中,自车行驶信息可以包括自车的速度、驾驶方向、发动机扭矩、处于哪个车道、目前的方向盘方向、刹车扭矩以及车辆的导航信息等。
示例性的,本申请实施例中的一个场景下,自车行驶信息为:车速100,驾驶方向朝正南方向,发动机扭矩为A,方向盘方向左打10°,刹车扭矩为B,车辆导航到C地点。
进一步的,本申请实施例中上述信息可以通过采集或者直接获取得到,例如车道信息可以通过图像识别、激光雷达识别等方式采集得到,导航信息可以通过车机自身内部数据调取或者从手机等终端调取得到,本申请对此不做限制。
本申请实施例中,当前帧之前若干帧的车道信息和自车行驶信息可以通过预存储实现,对于模型输入的数据需要提前做好存储和构造,通过在处理器的全局变量中声明,将上游传入的过去10帧和当前帧的车道信息,本车的速度、朝向信息和预测得到的障碍物信息存到全局变量中,为学习模型调用做好基础准备。
进一步的,在可选的实施例中,所述车道信息包括障碍车信息、车道线投影;
在将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型之前,还包括:将当前帧以及当前帧之前若干帧的自车行驶信息、障碍车信息以及车道线投影分别绘制于预设鸟瞰图的不同通道中;相对应地,所述将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型包括:将绘制之后的所述预设鸟瞰图作为所述神经网络模型的输入,进而将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型。
本申请实施例中,结合图5和图6,首先判断车辆目前的状态是否在换道状态,如果不在换道状态,将会直接跳过本次任务;在换道状态下,首先会对获取的上游数据进行组合,将过去10帧和当前帧的本车信息,障碍车信息和车道线投影分别绘制到鸟瞰图的不同通道中,将其作为模型的输入。之后,将预先训练好的模型加载,将最终的结果存到系统的全局变量中。
在可选的实施例中,还包括:利用边界生成器,结合所述车道信息,生成各个车道的边界信息。
如图所示,边界生成器是根据车道信息生成车道的边界信息,最终形成图中的轨迹图。该实施例中,所述结合所述变道行驶轨迹、代价优化函数和目标车道的参考线,生成更新的变道行驶轨迹,如图2所示,包括:
S31:将所述变道行驶轨迹和所述边界信息输入至预设的轨迹合理性判断模型,所述轨迹合理性判断模型判断当前的变道行驶轨迹是否合理,若合理,则结合所述变道行驶轨迹和所述目标车道的参考线输出轨迹初始解;
S32:根据所述轨迹初始解,结合所述变道行驶轨迹和代价优化函数,生成更新的变道行驶轨迹。
具体而言,这部分是判断学习模型输出的轨迹的合理性,要求其处在边界生成器生成的边界内,即判断拟人轨迹的有效性。如果无效,则在换道场景依旧使用原始的方法;有效,则需要把生成的轨迹线和目标车道的参考线进行拼接平滑,作为后续优化器的初解进行传入。
可以理解,本申请实施例中结合所述变道行驶轨迹和所述目标车道的参考线输出轨迹初始解,如图3所示,包括:
S311:对所述变道行驶轨迹和目标车道的参考线进行拼接处理,得到组合轨迹;
S312:对所述组合轨迹进行平滑处理,得到所述轨迹初始解。
在可选的实施例中,如图4所示,根据所述轨迹初始解,结合所述变道行驶轨迹、代价优化函数,生成更新的变道行驶轨迹包括:
S321:将所述轨迹初始解作为所述代价优化函数的引导项;其中所述代价优化函数的约束条件为横向上的障碍物上下边界和车辆动力学限制条件;
S322:计算所述代价优化函数在所述约束条件下的最小损失对应的行驶轨迹,并用该最小损失对应的行驶轨迹更新所述变道行驶轨迹,得到更新的变道行驶轨迹。
具体的,将路径规划问题转换为在凸空间内的二次规划(Quadratic Program,QP)问题,本申请实施例通过生成目标函数实现,使目标函数所计算的cost最小,从而得到一条最优的曲线,本申请上述实施例提出的学习模型的曲线,可以作为目标函数的一个优化项,加入到优化当中来,通过加入这个优化项和调整优化项的权重,来实现调整优化无人驾驶汽车运动轨迹的功能。
示例性的,具体的,可以在更新的变道行驶轨迹上等距或者不等距地配置不同目标点,不同目标点标记为i,变道行驶轨迹的起点标记为1,终点标记为end。
无人车的路径规划来自于参考线的sl坐标系(s为本车行使方向,车辆纵向,l为车辆的横向),所以状态变量为sl坐标系下一系列采样点的优化值、一阶导、二阶导,即
可以在需要更新的变道行驶轨迹上等距或者不等距地配置不同目标点(默认等距),规划的起始点为l0。
在可选的实施例中,代价函数为:
约束函数主要目的是实现避障,以及满足车辆运动学要求,在可选的实施例中,约束函数如下:
其中α'max为前轮转向角速度,可以从方向盘最大转向角速度得到。L为轴距,v为车速。
对于第5,6个约束,主要是保证优化的变量x,x一阶导,x二阶导之间的依赖关系的。
上述实施例介绍的这一部分对应图5的QP优化器优化,即为其中的考虑了学习模型轨迹的代价函数,本步骤之后就是路径规划和速度规划解耦后的速度规划,从而再两者结合,再输送给控制模块。
本实施例中,为了保证行驶的安全性,模型的输出仅作为代价优化函数的引导项。代价优化函数的约束条件为横向上的障碍物上下边界和车辆动力学限制,其光滑项不进行改变。最终优化器会输出一个cost最小的轨迹,作为后续速度规划和控制模块执行的前提。通过提出这样一种轨迹方法,可以使自动驾驶汽车的运行轨迹更加合理,提高乘客的乘坐感受。本专利提出的方法可以针对换道场景载入各种不同的模型,同时后续可以用同样的方法对适用的场景进行设计。
可以理解的是,常用的QP代价函数一般包括两项:光滑项和引导项,约束条件为横向上的障碍物上下边界和车辆动力学限制。该类算法的效果是规划路径会在保证安全避障的前提下,尽量贴近引导线行驶。
可以看出,通过上述方法实现,通过神经网络的方法从“老司机”驾车轨迹中学习一条拟人化的轨迹出来,并将其与二次规划问题所结合,作为QP代价函数中的引导项,即作为路径二次优化模块的初解进行输入,从而让输入的路径更为合理,更为舒适。从而解决在变道场景下目前变道轨迹不够合理,不够拟人的问题,同时提高路径规划模块在换道场景下的躲避动态障碍物的能力。同时为各种模仿学习、强化学习、离线强化学习等基于学习的模型结合到现有路径规划模块提供一种通用的方法。
在可选的实施例中,还包括:
S01:建立所述神经网络模型;
S02:利用一段时间内的连续多帧对应的车道信息和自车行驶信息训练所述神经网络模型。
本申请实施例中,具体的训练过程可以通过采集司机的手动行驶信息和对应场景下的车道信息组合形成训练集,并标注司机形成的变道轨迹,之后输入到神经网络模型中,更具体的,训练集具体可以组合形成鸟瞰图的形式加载到神经网络模型中。
在可选的实施例中,还包括:从多个神经网络模型中载入其中一个神经网络模型;每个神经网络模型是利用不同驾驶风格下的历史车道信息和历史自车行驶信息训练形成。
本实施例中可以采用多个不同司机风格的神经网络模型,相对应地,其训练数据采用不同风格司机的实际驾驶数据进行训练,以达到“老司机”的效果。
可以看出,本申请通过利用从真实人类驾驶数据中学习人类驾驶轨迹的模型,在现有的路径规划方法的基础上进行改进,提出了一种结合神经网络的自动驾驶换道轨迹规划方法。首先可以让自动驾驶汽车能够按照更拟人的轨迹行驶,提高乘客的舒适性感受,原始的换道轨迹合理但不合情,不够智能;同时,还能通过更改模型来使换道轨迹体现不同司机的驾驶风格,丰富驾驶轨迹的多样性;再者,本方法相对于现有的规划系统,能增加躲避动态障碍物的驾驶轨迹设计,不用传统的方法去设计动态避障场景下的换道,反而用神经网络模型去设计,能大幅度减少代码之间的冲突性,提高系统的稳定性;此外,本申请具有良好的扩展性,可以随着人类驾驶数据的增加进行模型的迭代,区分不同的驾驶风格,同时还能脱离换道场景,再其他场景中实现泛化设计。
本申请第二方面实施例提供一种基于无人驾驶的车辆自动变道装置,如图7所示,包括:
获取模块1,获取车辆当前帧的车道信息以及自车行驶信息;
变道行驶轨迹输出模块2,若车辆处于换道状态,将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型,所述神经网络模型输出变道行驶轨迹;
车辆自动变道模块3,结合所述变道行驶轨迹、代价优化函数和目标车道的参考线,生成更新的变道行驶轨迹,以使车辆以所述更新的变道行驶轨迹进行变道。
通过上述实施例可知,本发明提供的基于无人驾驶的车辆自动变道装置,通过配置获取模块、变道行驶轨迹输出模块以及车辆自动变道模块,首先若车辆处于换道状态,将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型,进而一方面能够减少代码之间的冲突,提高系统稳定性,另一方面使得自动驾驶更为智能,变道更为平滑,提高了在换道场景下的躲避动态障碍物的能力。
从硬件层面来说,为了本发明提供一种用于实现所述基于无人驾驶的车辆自动变道方法中的全部或部分内容的电子设备的实施例,所述电子设备具体包含有如下内容:
处理器(processor) 、存储器(memory) 、通信接口(Communications Interface)和总线;其中,所述处理器、存储器、通信接口通过所述总线完成相互间的通信;所述通信接口用于实现服务器、装置、分布式消息中间件集群装置、各类数据库以及用户终端等相关设备之间的信息传输;该电子设备可以是台式计算机、平板电脑及移动终端等,本实施例不限于此。在本实施例中,该电子设备可以参照实施例中的基于无人驾驶的车辆自动变道方法的实施例,以及,基于无人驾驶的车辆自动变道装置的实施例进行实施,其内容被合并于此,重复之处不再赘述。
图8为本发明实施例的电子设备9600的系统构成的示意框图。如图8所示,该电子设备9600可以包括中央处理器9100和存储器9140;存储器9140耦合到中央处理器9100。值得注意的是,该图8是示例性的;还可以使用其他类型的结构,来补充或代替该结构,以实现电信功能或其他功能。
一实施例中,基于无人驾驶的车辆自动变道功能可以被集成到中央处理器9100中。
在另一个实施方式中,基于无人驾驶的车辆自动变道装置可以与中央处理器9100分开配置,例如可以将基于无人驾驶的车辆自动变道配置为与中央处理器9100连接的芯片,通过中央处理器的控制来实现基于无人驾驶的车辆自动变道功能。
如图8所示,该电子设备9600还可以包括:通信模块9110、输入单元9120、音频处理器9130、显示器9160、电源9170。值得注意的是,电子设备9600也并不是必须要包括图8中所示的所有部件;此外,电子设备9600还可以包括图8中没有示出的部件,可以参考现有技术。
如图8所示,中央处理器9100有时也称为控制器或操作控件,可以包括微处理器或其他处理器装置和/或逻辑装置,该中央处理器9100接收输入并控制电子设备9600的各个部件的操作。
其中,存储器9140,例如可以是缓存器、闪存、硬驱、可移动介质、易失性存储器、非易失性存储器或其它合适装置中的一种或更多种。可储存上述与失败有关的信息,此外还可存储执行有关信息的程序。并且中央处理器9100可执行该存储器9140存储的该程序,以实现信息存储或处理等。
输入单元9120向中央处理器9100提供输入。该输入单元9120例如为按键或触摸输入装置。电源9170用于向电子设备9600提供电力。显示器9160用于进行图像和文字等显示对象的显示。该显示器例如可为LCD显示器,但并不限于此。
该存储器9140可以是固态存储器,例如,只读存储器(ROM)、随机存取存储器(RAM)、SIM卡等。还可以是这样的存储器,其即使在断电时也保存信息,可被选择性地擦除且设有更多数据,该存储器的示例有时被称为EPROM等。存储器9140还可以是某种其它类型的装置。存储器9140包括缓冲存储器9141(有时被称为缓冲器)。存储器9140可以包括应用/功能存储部9142,该应用/功能存储部9142用于存储应用程序和功能程序或用于通过中央处理器9100执行电子设备9600的操作的流程。
存储器9140还可以包括数据存储部9143,该数据存储部9143用于存储数据,例如联系人、数字数据、图片、声音和/或任何其他由电子设备使用的数据。存储器9140的驱动程序存储部9144可以包括电子设备的用于通信功能和/或用于执行电子设备的其他功能(如消息传送应用、通讯录应用等)的各种驱动程序。
通信模块9110即为经由天线9111发送和接收信号的发送机/接收机9110。通信模块(发送机/接收机)9110耦合到中央处理器9100,以提供输入信号和接收输出信号,这可以和常规移动通信终端的情况相同。
基于不同的通信技术,在同一电子设备中,可以设置有多个通信模块9110,如蜂窝网络模块、蓝牙模块和/或无线局域网模块等。通信模块(发送机/接收机)9110还经由音频处理器9130耦合到扬声器9131和麦克风9132,以经由扬声器9131提供音频输出,并接收来自麦克风9132的音频输入,从而实现通常的电信功能。音频处理器9130可以包括任何合适的缓冲器、解码器、放大器等。另外,音频处理器9130还耦合到中央处理器9100,从而使得可以通过麦克风9132能够在本机上录音,且使得可以通过扬声器9131来播放本机上存储的声音。
本发明的实施例还提供能够实现上述实施例中的执行主体可以为服务器的基于无人驾驶的车辆自动变道方法中全部步骤的一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述实施例中的基于无人驾驶的车辆自动变道方法的全部步骤。
本领域内的技术人员应明白,本发明的实施例可提供为方法、装置、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(装置)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
本发明中应用了具体实施例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种基于无人驾驶的车辆自动变道方法,其特征在于,包括:
获取车辆当前帧的车道信息以及自车行驶信息;
若车辆处于换道状态,将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型,所述神经网络模型输出变道行驶轨迹;
结合所述变道行驶轨迹、代价优化函数和目标车道的参考线,生成更新的变道行驶轨迹,以使车辆以所述更新的变道行驶轨迹进行变道;其中,神经网络模型的输出仅作为代价优化函数的引导项,代价优化函数的约束条件为横向上的障碍物上下边界和车辆动力学限制。
2.根据权利要求1所述的基于无人驾驶的车辆自动变道方法,其特征在于,还包括:
利用边界生成器,结合所述车道信息,生成各个车道的边界信息;
所述结合所述变道行驶轨迹、代价优化函数和目标车道的参考线,生成更新的变道行驶轨迹,包括:
将所述变道行驶轨迹和所述边界信息输入至预设的轨迹合理性判断模型,所述轨迹合理性判断模型判断当前的变道行驶轨迹是否合理,若合理,则结合所述变道行驶轨迹和所述目标车道的参考线输出轨迹初始解;
根据所述轨迹初始解,结合所述变道行驶轨迹和代价优化函数,生成更新的变道行驶轨迹。
3.根据权利要求2所述的基于无人驾驶的车辆自动变道方法,其特征在于,则结合所述变道行驶轨迹和所述目标车道的参考线输出轨迹初始解,包括:
对所述变道行驶轨迹和目标车道的参考线进行拼接处理,得到组合轨迹;
对所述组合轨迹进行平滑处理,得到所述轨迹初始解。
4.根据权利要求2或3所述的基于无人驾驶的车辆自动变道方法,其特征在于,根据所述轨迹初始解,结合所述变道行驶轨迹、代价优化函数,生成更新的变道行驶轨迹包括:
将所述轨迹初始解作为所述代价优化函数的引导项;其中所述代价优化函数的约束条件为横向上的障碍物上下边界和车辆动力学限制条件;
计算所述代价优化函数在所述约束条件下的最小损失对应的行驶轨迹,并用该最小损失对应的行驶轨迹更新所述变道行驶轨迹,得到更新的变道行驶轨迹。
5.根据权利要求4所述的基于无人驾驶的车辆自动变道方法,其特征在于,所述车道信息包括障碍车信息、车道线投影;
在将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型之前,还包括:
将当前帧以及当前帧之前若干帧的自车行驶信息、障碍车信息以及车道线投影分别绘制于预设鸟瞰图的不同通道中;
相对应地,所述将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型包括:
将绘制之后的所述预设鸟瞰图作为所述神经网络模型的输入,进而将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型。
6.根据权利要求4所述的基于无人驾驶的车辆自动变道方法,其特征在于,还包括:
建立所述神经网络模型;
利用一段时间内的连续多帧对应的车道信息和自车行驶信息训练所述神经网络模型。
7.根据权利要求1所述的基于无人驾驶的车辆自动变道方法,其特征在于,还包括:
从多个神经网络模型中载入其中一个神经网络模型;每个神经网络模型是利用不同驾驶风格下的历史车道信息和历史自车行驶信息训练形成。
8.一种基于无人驾驶的车辆自动变道装置,其特征在于,包括:
获取模块,获取车辆当前帧的车道信息以及自车行驶信息;
变道行驶轨迹输出模块,若车辆处于换道状态,将当前帧以及当前帧之前若干帧的车道信息和自车行驶信息输入至预设的神经网络模型,所述神经网络模型输出变道行驶轨迹;
车辆自动变道模块,结合所述变道行驶轨迹、代价优化函数和目标车道的参考线,生成更新的变道行驶轨迹,以使车辆以所述更新的变道行驶轨迹进行变道;其中,神经网络模型的输出仅作为代价优化函数的引导项,代价优化函数的约束条件为横向上的障碍物上下边界和车辆动力学限制。
9.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现权利要求1至7任一项所述的基于无人驾驶的车辆自动变道方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1至7任一项所述的基于无人驾驶的车辆自动变道方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211128210.XA CN115195743B (zh) | 2022-09-16 | 2022-09-16 | 基于无人驾驶的车辆自动变道方法、装置、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211128210.XA CN115195743B (zh) | 2022-09-16 | 2022-09-16 | 基于无人驾驶的车辆自动变道方法、装置、设备及介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115195743A CN115195743A (zh) | 2022-10-18 |
CN115195743B true CN115195743B (zh) | 2022-12-23 |
Family
ID=83573152
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211128210.XA Active CN115195743B (zh) | 2022-09-16 | 2022-09-16 | 基于无人驾驶的车辆自动变道方法、装置、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115195743B (zh) |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9989964B2 (en) * | 2016-11-03 | 2018-06-05 | Mitsubishi Electric Research Laboratories, Inc. | System and method for controlling vehicle using neural network |
CN111413973A (zh) * | 2020-03-26 | 2020-07-14 | 北京汽车集团有限公司 | 车辆的换道决策方法及装置、电子设备、存储介质 |
CN112455445A (zh) * | 2020-12-04 | 2021-03-09 | 苏州挚途科技有限公司 | 自动驾驶的变道决策方法、装置和车辆 |
CN112965489B (zh) * | 2021-02-05 | 2022-04-08 | 北京理工大学 | 一种基于碰撞检测的智能车高速换道规划方法 |
CN113386766B (zh) * | 2021-06-17 | 2022-09-23 | 东风汽车集团股份有限公司 | 一种连续的、周期自适应同步的在线轨迹规划系统及方法 |
CN113978465A (zh) * | 2021-09-28 | 2022-01-28 | 阿波罗智能技术(北京)有限公司 | 一种变道轨迹规划方法、装置、设备以及存储介质 |
CN114194215B (zh) * | 2021-12-30 | 2024-05-10 | 江苏大学 | 一种智能车辆避障换道轨迹规划方法及系统 |
-
2022
- 2022-09-16 CN CN202211128210.XA patent/CN115195743B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN115195743A (zh) | 2022-10-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108268034B (zh) | 用于车辆的专家模式 | |
US20220266821A1 (en) | Testing Predictions For Autonomous Vehicles | |
CN110015306B (zh) | 驾驶轨迹获取方法及装置 | |
CN109085820A (zh) | 临界条件的自主车辆驾驶系统和方法 | |
KR20180063069A (ko) | 운전 제어 장치 및 운전 제어 방법, 그리고 프로그램 | |
JPWO2017057060A1 (ja) | 運転制御装置、および運転制御方法、並びにプログラム | |
US20190339716A1 (en) | Method and system for providing an at least partially automatic guidance of a following transportation vehicle | |
US11577723B2 (en) | Object trajectory association and tracking | |
CN110126825A (zh) | 用于低级别前馈车辆控制策略的系统和方法 | |
CN113264059B (zh) | 支持多驾驶行为的基于深度强化学习的无人车运动决策控制方法 | |
CN112406904B (zh) | 自动驾驶策略的训练方法、自动驾驶方法、设备和车辆 | |
CN108791184A (zh) | 用于自主车辆的车门致动器调整 | |
US20220017082A1 (en) | Travel control system for vehicle | |
CN114148348A (zh) | 自动驾驶车辆的停止控制方法、装置及计算机程序 | |
CN110293903A (zh) | 一种车辆转向灯控制方法、装置、设备及存储介质 | |
US20210269051A1 (en) | Systems and methods for parallel autonomy of a vehicle | |
US11518393B2 (en) | Vehicle trajectory dynamics validation and interpolation | |
US20240075814A1 (en) | Apparatus, method and computer program for providing virtual driver service | |
Schitz et al. | Model-predictive cruise control for direct teleoperated driving tasks | |
US11753047B2 (en) | Impaired driver assistance | |
Wille et al. | Comprehensive treated sections in a trajectory planner for realizing autonomous driving in Braunschweig's urban traffic | |
CN115195743B (zh) | 基于无人驾驶的车辆自动变道方法、装置、设备及介质 | |
CN116811898A (zh) | 一种基于车道线的弯道自动驾驶路网生成方法与装置 | |
CN114291092B (zh) | 车辆换道控制方法、装置、电子控制单元及存储介质 | |
JP2020204839A (ja) | 外部環境認識装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |