CN105930625A - Q学习结合神经网络的智能驾驶行为决策系统的设计方法 - Google Patents
Q学习结合神经网络的智能驾驶行为决策系统的设计方法 Download PDFInfo
- Publication number
- CN105930625A CN105930625A CN201610415197.4A CN201610415197A CN105930625A CN 105930625 A CN105930625 A CN 105930625A CN 201610415197 A CN201610415197 A CN 201610415197A CN 105930625 A CN105930625 A CN 105930625A
- Authority
- CN
- China
- Prior art keywords
- vehicle
- information
- decision
- car
- lane
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/20—Design optimisation, verification or simulation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/30—Circuit design
- G06F30/36—Circuit design at the analogue level
- G06F30/367—Design verification, e.g. using simulation, simulation program with integrated circuit emphasis [SPICE], direct methods or relaxation methods
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/167—Driving aids for lane monitoring, lane changing, e.g. blind spot detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/52—Network services specially adapted for the location of the user terminal
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Evolutionary Computation (AREA)
- Geometry (AREA)
- General Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Microelectronics & Electronic Packaging (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Computing Systems (AREA)
- Health & Medical Sciences (AREA)
- Traffic Control Systems (AREA)
Abstract
本发明涉及的是Q学习结合神经网络的智能驾驶行为决策系统的设计方法,通过车载传感器及组播网络的主从节点通信,实现了车与车的数据交换,通过多车预警算法在有危险时对驾驶员进行预警,用Q学习结合神经网络的方法进行智能决策,为驾驶员提供安全快速的行为决策。验证实验结果表明,本文设计的智能决策系统数据获取的时间和决策算法的时间都较短,总时延在0.5s,能为驾驶员提供实时的最优驾驶行为决策,以辅助驾驶员安全驾驶。
Description
技术领域
本发明涉及的是Q学习结合神经网络的智能驾驶行为决策系统的设计方法。先通过车载传感器及组播网络的主从节点通信,实现了车与车的数据交换,然后通过多车预警算法在有危险时对驾驶员进行预警,最后用Q学习结合神经网络的方法进行智能决策,为驾驶员提供安全快速的行为决策。
背景技术
汽车在行驶过程中,驾驶员必须时刻观察周围环境信息,做出正确的判断才能保证汽车行驶的安全性,严重的交通事故往往是由于驾驶员决策不当造成的。驾驶员在决策过程中,如果能实时获得周围车辆的确定信息,包括位置、速度、行驶方向等,就能及时做出正确的驾驶行为以避免交通事故的发生。然而收到的信息并不都是有用的,如果需要驾驶员整合这些信息,就会由于花费时间长易造成机会丢失或误判。因此,对信息进行快速筛选和处理,对驾驶员在极短时间内做出正确决策是非常有帮助的。
目前驾驶行为决策的研究,如基于层次状态机与多属性决策方法的无人驾驶决策模型,其中上层状态机进行驾驶场景的转换,下层状态机是基于多属性决策模型进行驾驶行为择优。该模型是通过摄像头和雷达获取数据的,会存在时延和误差,导致数据类型只有距离和速度,而且没有明确决策所需的时间。基于模糊逻辑决策算法的驾驶行为决策,用不同的函数描述每个驾驶行为特征,根据车间距离、位置,输出正确的决策以避免车辆碰撞。该算法只以车间距离作为决策依据,决策时间也未给出。基于增强学习的智能驾驶方法,先对汽车当前状态离散化,设计行车道行驶和超车道行驶两个驾驶行为,采用Q学习算法进行驾驶决策。该方法由于状态离散化导致数据不完整,而两个驾驶行为不足以涵盖所有驾驶行为,且决策时间较长,需0.82s。
发明内容
上述方法首先没有考虑车与车之间的相互影响;而且数据获取都是用传感器、摄像头和雷达,不可避免的会产生误差和时延;再加上算法本身所需时间,最后实现的智能辅助驾驶效果有限。针对这些问题,在研究的多三角网组播通信模型的基础上,在车与车(V2V)应用层面进行数据的快速交互,保证数据的全面性和准确性;并设计了结合神经网络的Q学习算法的快速智能决策系统,确保输出的是接近实时的最优决策以辅助驾驶员安全驾驶。
1、数据交换
WAVE协议是V2V、车与路之间进行数据交互的协议。WAVE协议应用层采用SAEJ2735协议作为安全消息集。集中基本消息类型(BSM,Basic Safety Message)定义了车辆本身的信息:位置、速度、加速度等。为了便于预警和决策,本专利新增了三个消息类型,如表1黑体字。其中action表示要实施的智能驾驶行为;emergencyBrake是急刹车预警的条件,是根据brakes定义的;changeLane是换道预警的条件,是根据lightSet和变道安全距离定义的。
表1消息定义
类型 | 名称 | 占用字节数 |
speed | Speed | 2bytes |
brakes | BrakeSystemStatus | 1byte |
lightSet | ExteriorLights | 1byte |
action | Action | 1byte |
emergencyBrake | EmergencyBrake | 2bit |
changeLane | ChangeLane | 2bit |
在研究多三角形网络组播通信模型的基础上,进行车辆主从节点通信,实现实时数据交换后,获取周围车辆信息。车与车的数据交换过程如下:
1)车载传感器时刻监听自身状态,并将接收到的信息用SAE J2735标准进行定义,通过网络层的WSMP(WAVE Short Message Protocol)协议对其进行封装,先经LLC层,再经物理层以多三角网组播通信的路由形式发送出去;
2)发送出去的WSM(WAVE Short Message)信息在控制信道上(CCH)被周围车辆实时监听,当周围车辆监听到WSM消息后,将该数据包提交给相应的程序;
3)相应的程序先对WSM进行解包,得到符合J2735标准格式的消息,然后获取其中的位置和速度等信息;
4)将提取的信息显示在用户界面上,并发送给智能决策系统,作为智能决策的依据。
图1(a)是双向8车道高速公路的仿真界面,箭头所指为车辆行驶方向,车辆位置对应的是XY平面上的坐标,在实际应用中,是由GPS得到。由于高速公路车辆速度为60-120km/h,为了便于仿真,对20-140km/h用七个量化等级量化,对应图1(b)中的速度1-7。当选择Car5为研究对象时,Car5收到的信息如图1(b)所示,其中负号的数据是与Car5方向相反的数据。
2、智能决策
智能决策系统从V2V数据交换中得到了外部环境信息,以及该车的车载传感器监测到的行驶信息。它对这两类信息进行筛选,然后送到预警和Q学习决策模块,处理后把预警或最优决策提供给驾驶员,如图2所示。
1)筛选
外部环境信息和汽车行驶信息并非都对决策有用,需要进行筛选。由于WAVE协议的通信距离是300m,只要每辆车获取通信距离内的前方车辆信息,并与之保持安全距离,就可以保证每辆车安全行驶。首先提取该车道和相邻车道前方车辆的有用信息,包括位置、速度、驾驶行为、刹车情况和变道情况;最后将这些信息进行处理,作为预警和决策的输入。
2)预警
汽车在行驶时,一旦前方驾驶员决策不当(如急刹车),若后方驾驶员不能及时作出反应,很容易造成多车连环相撞。传统的预警算法大多是基于安全距离的本车预警,对于该车道后方的车辆没有警示作用。因此,本专利设计了多车预警算法。
在进行多车预警之前有以下定义:
a、最小安全距离
安全距离是指前车刹车时与后车之间的距离要大于等于两车刹车距离之差。由于安全消息集中增加了3个定义,因此这里对车联网环境下最小安全距离Ds在公式(1)中重新定义如下:
其中Dl、Df分别是前车及后车的刹车距离,vl、vf分别是前车及后车的速度,al、af分别是前车及后车的最大减速度,τtra是数据交换时间,τsys是智能决策系统决策时间,τhum是驾驶员收到智能决策系统输出的反应时间。
b、变道安全距离
如果驾驶员换道不当,容易发生交通事故。因此,提醒驾驶员变道的安全性是十分必要的。对变道过程进行建模,如图3(a)所示。如果M与Lo、Ld和Fo的距离均大于最小安全距离,则M变道时,只要M与Fd的距离Dc大于安全换道距离,就可以保证换道安全。仿真得到M与Fd的安全距离曲线如图3(b)所示,为了安全起见,本专利以安全性为99.9%的曲线所代表的距离作为M与Fd之间的安全换道距离。
根据筛选后的信息判断该车和前方车辆是否存在危险。如果存在则对驾驶员进行预警。以SAE J2735协议为基础,以变道预警和急刹车预警为例,描述多车预警的具体步骤如表2所示。
表2多车预警步骤
以急刹车为例,对多车预警仿真结果如图4所示。当Car1急刹车之后,立即向周围车辆发送信息,位于Car1通信距离内、同一车道的后方车辆:Car3、Car6、Car8,通过自身智能决策系统中的多车预警算法,发出预警的同时转发了该危险信息的内容,如图4(b)。相关研究表明,只要提前2s以上预警,就可以防止追尾事故的发生。由于WAVE通信时延在0.1s内,且数据筛选和预警的处理时延都在毫秒级,因此,如果车速为120km/h,600m内某车道最多有6辆车,第6辆车收到第1辆车急刹信息的最大时延是0.6s,远远小于2s,因此该预警方式可以避免高速上因急刹车导致的多车连环相撞。而600m外的汽车已经有足够的时间应对前方的急刹车,没必要对其进行预警,如图4(a)中的Car9虽然收到了危险信息但是没有发出预警。对变道预警的仿真,和急刹车预警类似,多次仿真结果表明通过多车预警,驾驶员可以快速准确的得到变道信息,及时做出反应。
3)Q学习决策
Q学习是一种与模型无关的强化学习算法。它的一个典型特征是:一个目标明确的Agent在与不确定性环境交互中,可以将所有问题考虑进去从而找到一个最优决策。Q学习算法的更新方式如公式(2):
其中,(st,at)为时刻t下的状态-行为对,r(st,at)是在状态st下执行at获得的立即回报,α是学习率,γ是折扣因子。Q(st,at)是累积回报函数。该算法的目标是在状态st下找到能使Q值最大的最优行为at。
状态-行为对分别来自于状态空间和行为空间。定义汽车的状态空间为:该车的速度V,该车与前车的距离D1,前车的速度Vl1,与目标车道前车的距离D2,目标车道前车的速度Vl2,与目标车道后车的距离D3,目标车道后车的速度Vf3和车道最大限速Vlim。定义驾驶行为空间为:加速(CarAccelerate),减速(CarDecelerate),车辆保持(CarKeep),左变道(CarLeftLane)和右变道(CarRightLane)。
根据相关研究,定义行车安全指标,如公式(3),行车效率指标,如公式(4)。
其中Ds是最小安全距离,D是两车的实际距离。A1∈[0,1],随着A1的增大,汽车安全性增大。
其中,Vf是车的速度,Vlim是车道允许的最大速度。A2∈[0,1],随着A2的增大,行车效率增大。
基于行车安全和行车效率,如公式(5)定义奖励函数:
r(s,a)代表了行车安全与行车效率二者的折中,r(s,a)是有界的,其值越大,表示当前的行车距离和行车速度越理想。
有了上述相关定义之后,考虑用Q学习算法来进行智能驾驶行为决策。然而,由于汽车的状态变量在实际中是一个连续变化的量,如果只采用Q学习,则要对汽车状态进行离散化,从而出现状态变量的空间复杂性问题(维数灾难)。因此,本专利利用BP神经网络的泛化能力,结合Q学习算法来解决这一问题,即利用神经网络来训练和保存Q值,从而实现对状态连续变化的汽车进行智能决策。基于神经网络的Q学习如图5所示,神经网络的输入是筛选后的数据及预警信息,输出是驾驶员采取每个行为所对应的Q值,经过行为选择,得到最优决策Qmax。
结合神经网络的Q学习决策步骤如下:
①初始化BP神经网络权值及各项参数(公式(2)中α=1,γ=0.9);
②输入汽车状态-行为的离线数据,进行学习,以训练神经网络;
③把获得的当前环境下的数据,输入已训练好的神经网络中,计算输出的Q值,若Qmax=QchangeLane,判断换道的安全性如下:
a.换道安全,则Qmax=QChangeLane
b.换道不安全,则Qmax=Qmax(other)
④根据Qmax值,输出选择的最优驾驶行为argmax Q*;
⑤更新决策,转到③
通过上述决策算法,可以得到汽车当前状态驾驶员应采取的最优行为,从而为驾驶员提供辅助安全驾驶。
附图说明
图1 V2V的数据交换(a)界面显示(b)收到的信息
图2智能决策系统
图3安全换道距离(a)安全换道距离模型(b)M与Fd的安全距离曲线
图4多车预警仿真(a)用户界面显示(b)预警信息
图5基于神经网络的Q学习
图6决策仿真图(a)初始图(b)决策后图
图7最优决策输出
具体实施方式
在双向8车道高速公路上,对智能决策算法进行测试。车辆的初始位置和量化速度如图6(a)所示。以Car1为研究对象,驾驶员执行决策结果如图6(b)所示。其中,中间环节的智能决策输出如图7。
图7给出了决策系统在得到环境信息后,对其进行筛选、处理后,输出的最优决策。收到Car2的action是要左变道,Car3~6均在加速。Car1智能决策系统收到Car2~6发送的信息,通过筛选并且结合自身的情况,由算法得到每个行为的Q值。其中,车辆保持的Q值最大,即车辆保持是当前环境下的最优行为。由于Car2速度等于Car1速度,并且Car2要左变道,对于Car1,车辆保持是最优驾驶行为。
本专利通过随机分布的车辆,共进行了50次仿真,统计得到智能决策系统输出最优决策的时间平均是0.4s,由于基于WAVE协议的车联网数据交换时延在0.1s以内,可以得出,智能决策系统的总时延在0.5s,小于基于增强学习的驾驶决策时间0.82s。
Claims (1)
1.一种Q学习结合神经网络的智能驾驶行为决策系统的设计方法,包括以下步骤:
A.数据交换
车与车的数据交换过程如下:
i、车载传感器时刻监听自身状态,并将接收到的信息用SAE J2735标准进行定义,通过网络层的WSMP(WAVE Short Message Protocol)协议对其进行封装,先经LLC层,再经物理层以多三角网组播通信的路由形式发送出去;
ii、发送出去的WSM(WAVE Short Message)信息在控制信道上(CCH)被周围车辆实时监听,当周围车辆监听到WSM消息后,将该数据包提交给相应的程序;
iii、相应的程序先对WSM进行解包,得到符合J2735标准格式的消息,然后获取其中的位置和速度等信息;
iv、将提取的信息显示在用户界面上,并发送给智能决策系统,作为智能决策的依据
B.数据筛选
外部环境信息和汽车行驶信息并非都对决策有用,需要进行筛选,由于WAVE协议的通信距离是300m,只要每辆车获取通信距离内的前方车辆信息,并与之保持安全距离,就可以保证每辆车安全行驶;提取该车道和相邻车道前方车辆的有用信息,包括位置、速度、驾驶行为、刹车情况和变道情况;将这些信息进行处理,作为预警和决策的输入;
C.预警
根据筛选后的信息判断该车和前方车辆是否存在危险,如果存在则对驾驶员进行预警:
i、对于车辆交道过程,当传感器检测到变道灯亮起时,在SAE J2735的ExteriorLights消息中,leftTurnSignalOn或rightTurnSignalOn为真,根据车联网数据交换的周边车辆信息,分析汽车与同一车道及目标车道前后车辆之间的距离,如果不满足安全换道距离阈值,则判定换道不可行(changeLane=False),在用户界面发出警告,提醒驾驶员取消此次变道;若换道可行(changeLane=True),向周围车辆发送换道消息,周围车辆收到汽车的变道信息后,判断与自身的相关性(同一车道或目标车道),提醒驾驶员做出反应;
ii、在急刹车预警中,当刹车片检测到驾驶员急刹或者速度传感器检测到在1s内车辆速度减幅超过50%,即判定车辆急刹车(emergencyBrake=True),将此时的BrakeAppliedStatus消息发送出去,当车辆收到急刹车辆发出的信息,判断车辆与急刹车辆的是否位于同一车道,若是则对驾驶员进行预警;
D.决策
i、定义汽车的状态空间为:该车的速度V,该车与前车的距离D1,前车的速度Vl1,与目标车道前车的距离D2,目标车道前车的速度Vl2,与目标车道后车的距离D3,目标车道后车的速度Vf3和车道最大限速Vlim;定义驾驶行为空间为:加速(CarAccelerate),减速(CarDecelerate),车辆保持(CarKeep),左变道(CarLeftLane)和右变道(CarRightLane);
ii、定义行车安全指标,如公式(3):
其中Ds是最小安全距离,D是两车的实际距离,A1∈[0,1],随着A1的增大,汽车安全性增大;
定义行车效率指标,如公式(4):
其中,Vf是车的速度,Vlim是车道允许的最大速度,A2∈[0,1],随着A2的增大,行车效率增大;
基于行车安全和行车效率,定义奖励函数,如公式(5):
其中,r(s,a)代表了行车安全与行车效率二者的折中取值,r(s,a)是有界的,其值越大,表示当前的行车距离和行车速度越理想;
iii、结合神经网络的Q学习决策步骤如下:
①初始化BP神经网络权值及各项参数;
②输入汽车状态-行为的离线数据,进行学习,以训练神经网络;
③把获得的当前环境下的数据,输入已训练好的神经网络中,计算输出的Q值,若Qmax=QChangeLane,换道安全性的判断如下:
a.换道安全,则Qmax=QChangeLane
b.换道不安全,则Qmax=Qmax(other)
④根据Qmax值,输出选择的最优驾驶行为π*=argmax Q*;
⑤更新决策,转到③
通过上述决策算法,可以得到汽车当前状态驾驶员应采取的最优行为,从而为驾驶员提供辅助安全驾驶。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610415197.4A CN105930625B (zh) | 2016-06-13 | 2016-06-13 | Q学习结合神经网络的智能驾驶行为决策系统的设计方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610415197.4A CN105930625B (zh) | 2016-06-13 | 2016-06-13 | Q学习结合神经网络的智能驾驶行为决策系统的设计方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105930625A true CN105930625A (zh) | 2016-09-07 |
CN105930625B CN105930625B (zh) | 2018-12-14 |
Family
ID=56832827
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610415197.4A Expired - Fee Related CN105930625B (zh) | 2016-06-13 | 2016-06-13 | Q学习结合神经网络的智能驾驶行为决策系统的设计方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105930625B (zh) |
Cited By (33)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106347359A (zh) * | 2016-09-14 | 2017-01-25 | 北京百度网讯科技有限公司 | 用于操作自动驾驶车辆的方法和装置 |
CN106740457A (zh) * | 2016-12-07 | 2017-05-31 | 镇江市高等专科学校 | 基于bp神经网络模型的车辆换道决策方法 |
CN106875511A (zh) * | 2017-03-03 | 2017-06-20 | 深圳市唯特视科技有限公司 | 一种基于自编码正则化网络学习驾驶风格的方法 |
CN107367929A (zh) * | 2017-07-19 | 2017-11-21 | 北京上格云技术有限公司 | 更新q值矩阵的方法、存储介质和终端设备 |
CN107499262A (zh) * | 2017-10-17 | 2017-12-22 | 芜湖伯特利汽车安全系统股份有限公司 | 基于机器学习的acc/aeb系统及车辆 |
CN107506830A (zh) * | 2017-06-20 | 2017-12-22 | 同济大学 | 面向智能汽车规划决策模块的人工智能训练平台 |
CN107992939A (zh) * | 2017-12-06 | 2018-05-04 | 湖北工业大学 | 基于深度增强学习的等切削力齿轮加工方法 |
CN108920805A (zh) * | 2018-06-25 | 2018-11-30 | 大连大学 | 具有状态特征提取功能的驾驶员行为建模系统 |
CN109360445A (zh) * | 2018-07-09 | 2019-02-19 | 重庆大学 | 一种基于横向与纵向运动学特征分布的高速换道风险检测方法 |
CN109543497A (zh) * | 2017-09-20 | 2019-03-29 | 顾泽苍 | 一种适于自动驾驶的多目的控制机器学习模型的构建方法 |
CN109670597A (zh) * | 2017-09-20 | 2019-04-23 | 顾泽苍 | 一种自动驾驶的机器学习多目的控制方法 |
CN109752952A (zh) * | 2017-11-08 | 2019-05-14 | 华为技术有限公司 | 一种获取多维随机分布及强化控制器的方法和装置 |
CN110231820A (zh) * | 2019-05-31 | 2019-09-13 | 辽宁工业大学 | 一种基于物联网的车辆行驶控制方法 |
CN110244701A (zh) * | 2018-03-08 | 2019-09-17 | 通用汽车环球科技运作有限责任公司 | 用于基于自动生成的课程序列的自主车辆的强化学习的方法和装置 |
CN110363295A (zh) * | 2019-06-28 | 2019-10-22 | 电子科技大学 | 一种基于dqn的智能车多车道换道方法 |
WO2020010526A1 (en) * | 2018-07-10 | 2020-01-16 | Beijing Didi Infinity Technology And Development Co., Ltd. | Systems and methods for determining a marketing strategy for an online to offline service |
CN110751827A (zh) * | 2018-07-24 | 2020-02-04 | 东旭科技集团有限公司 | 输出提示信息的方法、装置、智能路灯及可读存储介质 |
CN110941275A (zh) * | 2019-12-06 | 2020-03-31 | 格物汽车科技(苏州)有限公司 | 用于车辆自动驾驶的数据处理方法 |
CN110956851A (zh) * | 2019-12-02 | 2020-04-03 | 清华大学 | 一种智能网联汽车协同调度换道方法 |
CN111081067A (zh) * | 2019-12-27 | 2020-04-28 | 武汉大学 | 车联网环境下基于iga-bp神经网络的车辆碰撞预警系统及方法 |
CN111081061A (zh) * | 2018-10-22 | 2020-04-28 | 杭州海康威视数字技术股份有限公司 | 碰撞预警方法及装置 |
CN111091727A (zh) * | 2018-10-24 | 2020-05-01 | 上汽通用汽车有限公司 | 基于移动车联网的用于变更车道的方法和系统 |
CN111246425A (zh) * | 2020-01-14 | 2020-06-05 | 大连理工大学 | 基于dsrc车载v2x系统的动态自适应安全预警方法和bsm仿真平台 |
CN111580526A (zh) * | 2020-05-27 | 2020-08-25 | 多伦科技股份有限公司 | 面向固定车辆编队场景的协同驾驶方法 |
CN111667513A (zh) * | 2020-06-01 | 2020-09-15 | 西北工业大学 | 一种基于ddpg迁移学习的无人机机动目标跟踪方法 |
CN112052776A (zh) * | 2020-09-01 | 2020-12-08 | 中国人民解放军国防科技大学 | 无人车自主驾驶行为优化方法、装置和计算机设备 |
US10878346B2 (en) | 2018-10-17 | 2020-12-29 | Automotive Research & Testing Center | Intelligent driving method for passing intersections based on support vector machine and intelligent driving system thereof |
CN112150808A (zh) * | 2020-09-25 | 2020-12-29 | 天津大学 | 一种基于深度学习的城市交通系统调度策略生成方法 |
CN113257045A (zh) * | 2021-07-14 | 2021-08-13 | 四川腾盾科技有限公司 | 一种基于大型固定翼无人机电子围栏的无人机控制方法 |
EP3886073A1 (en) * | 2020-03-27 | 2021-09-29 | INTEL Corporation | Collaborative safety driving model (sdm) for autonomous vehicles |
CN113734170A (zh) * | 2021-08-19 | 2021-12-03 | 崔建勋 | 一种基于深度q学习的自动驾驶换道决策方法 |
CN114464005A (zh) * | 2022-02-28 | 2022-05-10 | 重庆长安汽车股份有限公司 | 一种车辆辅助驾驶的方法及系统 |
CN115082900A (zh) * | 2022-07-19 | 2022-09-20 | 湖南大学无锡智能控制研究院 | 一种停车场场景下智能车辆行驶决策系统及方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001229213A (ja) * | 2000-02-17 | 2001-08-24 | Toshiba Corp | システム設計支援装置 |
CN102682455A (zh) * | 2012-05-10 | 2012-09-19 | 天津工业大学 | 一种基于单目视觉的前方车辆检测方法 |
WO2014056558A1 (en) * | 2012-10-12 | 2014-04-17 | Technische Universität Dortmund | Computer implemented method for hybrid simulation of power distribution network and associated communication network for real time applications |
CN105151044A (zh) * | 2015-08-24 | 2015-12-16 | 奇瑞汽车股份有限公司 | 车辆辅助驾驶方法及装置 |
-
2016
- 2016-06-13 CN CN201610415197.4A patent/CN105930625B/zh not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001229213A (ja) * | 2000-02-17 | 2001-08-24 | Toshiba Corp | システム設計支援装置 |
CN102682455A (zh) * | 2012-05-10 | 2012-09-19 | 天津工业大学 | 一种基于单目视觉的前方车辆检测方法 |
WO2014056558A1 (en) * | 2012-10-12 | 2014-04-17 | Technische Universität Dortmund | Computer implemented method for hybrid simulation of power distribution network and associated communication network for real time applications |
CN105151044A (zh) * | 2015-08-24 | 2015-12-16 | 奇瑞汽车股份有限公司 | 车辆辅助驾驶方法及装置 |
Cited By (50)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106347359A (zh) * | 2016-09-14 | 2017-01-25 | 北京百度网讯科技有限公司 | 用于操作自动驾驶车辆的方法和装置 |
CN106740457A (zh) * | 2016-12-07 | 2017-05-31 | 镇江市高等专科学校 | 基于bp神经网络模型的车辆换道决策方法 |
CN106875511A (zh) * | 2017-03-03 | 2017-06-20 | 深圳市唯特视科技有限公司 | 一种基于自编码正则化网络学习驾驶风格的方法 |
CN107506830A (zh) * | 2017-06-20 | 2017-12-22 | 同济大学 | 面向智能汽车规划决策模块的人工智能训练平台 |
CN107367929A (zh) * | 2017-07-19 | 2017-11-21 | 北京上格云技术有限公司 | 更新q值矩阵的方法、存储介质和终端设备 |
CN109543497A (zh) * | 2017-09-20 | 2019-03-29 | 顾泽苍 | 一种适于自动驾驶的多目的控制机器学习模型的构建方法 |
CN109670597A (zh) * | 2017-09-20 | 2019-04-23 | 顾泽苍 | 一种自动驾驶的机器学习多目的控制方法 |
CN107499262A (zh) * | 2017-10-17 | 2017-12-22 | 芜湖伯特利汽车安全系统股份有限公司 | 基于机器学习的acc/aeb系统及车辆 |
CN109752952A (zh) * | 2017-11-08 | 2019-05-14 | 华为技术有限公司 | 一种获取多维随机分布及强化控制器的方法和装置 |
CN109752952B (zh) * | 2017-11-08 | 2022-05-13 | 华为技术有限公司 | 一种获取多维随机分布及强化控制器的方法和装置 |
CN107992939A (zh) * | 2017-12-06 | 2018-05-04 | 湖北工业大学 | 基于深度增强学习的等切削力齿轮加工方法 |
CN110244701A (zh) * | 2018-03-08 | 2019-09-17 | 通用汽车环球科技运作有限责任公司 | 用于基于自动生成的课程序列的自主车辆的强化学习的方法和装置 |
CN108920805A (zh) * | 2018-06-25 | 2018-11-30 | 大连大学 | 具有状态特征提取功能的驾驶员行为建模系统 |
CN108920805B (zh) * | 2018-06-25 | 2022-04-05 | 大连大学 | 具有状态特征提取功能的驾驶员行为建模系统 |
CN109360445A (zh) * | 2018-07-09 | 2019-02-19 | 重庆大学 | 一种基于横向与纵向运动学特征分布的高速换道风险检测方法 |
CN109360445B (zh) * | 2018-07-09 | 2021-02-09 | 重庆大学 | 一种基于横向与纵向运动学特征分布的高速换道风险检测方法 |
CN110914856B (zh) * | 2018-07-10 | 2023-11-21 | 北京嘀嘀无限科技发展有限公司 | 用于确定线上到线下服务的营销策略的系统和方法 |
US11055729B2 (en) | 2018-07-10 | 2021-07-06 | Beijing Didi Infinity Technology And Development Co., Ltd. | Systems and methods for determining a marketing strategy for an online to offline service |
WO2020010526A1 (en) * | 2018-07-10 | 2020-01-16 | Beijing Didi Infinity Technology And Development Co., Ltd. | Systems and methods for determining a marketing strategy for an online to offline service |
CN110914856A (zh) * | 2018-07-10 | 2020-03-24 | 北京嘀嘀无限科技发展有限公司 | 用于确定线上到线下服务的营销策略的系统和方法 |
CN110751827A (zh) * | 2018-07-24 | 2020-02-04 | 东旭科技集团有限公司 | 输出提示信息的方法、装置、智能路灯及可读存储介质 |
CN110751827B (zh) * | 2018-07-24 | 2021-03-02 | 东旭光电科技股份有限公司 | 输出提示信息的方法、装置、智能路灯及可读存储介质 |
US10878346B2 (en) | 2018-10-17 | 2020-12-29 | Automotive Research & Testing Center | Intelligent driving method for passing intersections based on support vector machine and intelligent driving system thereof |
CN111081061A (zh) * | 2018-10-22 | 2020-04-28 | 杭州海康威视数字技术股份有限公司 | 碰撞预警方法及装置 |
CN111081061B (zh) * | 2018-10-22 | 2021-09-21 | 杭州海康威视数字技术股份有限公司 | 碰撞预警方法及装置 |
CN111091727A (zh) * | 2018-10-24 | 2020-05-01 | 上汽通用汽车有限公司 | 基于移动车联网的用于变更车道的方法和系统 |
CN110231820B (zh) * | 2019-05-31 | 2022-08-05 | 江苏亿科达科技发展有限公司 | 一种基于物联网的车辆行驶控制方法 |
CN110231820A (zh) * | 2019-05-31 | 2019-09-13 | 辽宁工业大学 | 一种基于物联网的车辆行驶控制方法 |
CN110363295A (zh) * | 2019-06-28 | 2019-10-22 | 电子科技大学 | 一种基于dqn的智能车多车道换道方法 |
CN110956851B (zh) * | 2019-12-02 | 2020-11-24 | 清华大学 | 一种智能网联汽车协同调度换道方法 |
CN110956851A (zh) * | 2019-12-02 | 2020-04-03 | 清华大学 | 一种智能网联汽车协同调度换道方法 |
CN110941275A (zh) * | 2019-12-06 | 2020-03-31 | 格物汽车科技(苏州)有限公司 | 用于车辆自动驾驶的数据处理方法 |
CN111081067A (zh) * | 2019-12-27 | 2020-04-28 | 武汉大学 | 车联网环境下基于iga-bp神经网络的车辆碰撞预警系统及方法 |
CN111081067B (zh) * | 2019-12-27 | 2021-07-20 | 武汉大学 | 车联网环境下基于iga-bp神经网络的车辆碰撞预警系统及方法 |
CN111246425A (zh) * | 2020-01-14 | 2020-06-05 | 大连理工大学 | 基于dsrc车载v2x系统的动态自适应安全预警方法和bsm仿真平台 |
EP3886073A1 (en) * | 2020-03-27 | 2021-09-29 | INTEL Corporation | Collaborative safety driving model (sdm) for autonomous vehicles |
CN111580526A (zh) * | 2020-05-27 | 2020-08-25 | 多伦科技股份有限公司 | 面向固定车辆编队场景的协同驾驶方法 |
CN111580526B (zh) * | 2020-05-27 | 2022-11-22 | 多伦科技股份有限公司 | 面向固定车辆编队场景的协同驾驶方法 |
CN111667513A (zh) * | 2020-06-01 | 2020-09-15 | 西北工业大学 | 一种基于ddpg迁移学习的无人机机动目标跟踪方法 |
CN111667513B (zh) * | 2020-06-01 | 2022-02-18 | 西北工业大学 | 一种基于ddpg迁移学习的无人机机动目标跟踪方法 |
CN112052776A (zh) * | 2020-09-01 | 2020-12-08 | 中国人民解放军国防科技大学 | 无人车自主驾驶行为优化方法、装置和计算机设备 |
CN112052776B (zh) * | 2020-09-01 | 2021-09-10 | 中国人民解放军国防科技大学 | 无人车自主驾驶行为优化方法、装置和计算机设备 |
CN112150808B (zh) * | 2020-09-25 | 2022-06-17 | 天津大学 | 一种基于深度学习的城市交通系统调度策略生成方法 |
CN112150808A (zh) * | 2020-09-25 | 2020-12-29 | 天津大学 | 一种基于深度学习的城市交通系统调度策略生成方法 |
CN113257045A (zh) * | 2021-07-14 | 2021-08-13 | 四川腾盾科技有限公司 | 一种基于大型固定翼无人机电子围栏的无人机控制方法 |
CN113734170A (zh) * | 2021-08-19 | 2021-12-03 | 崔建勋 | 一种基于深度q学习的自动驾驶换道决策方法 |
CN113734170B (zh) * | 2021-08-19 | 2023-10-24 | 崔建勋 | 一种基于深度q学习的自动驾驶换道决策方法 |
CN114464005A (zh) * | 2022-02-28 | 2022-05-10 | 重庆长安汽车股份有限公司 | 一种车辆辅助驾驶的方法及系统 |
CN115082900A (zh) * | 2022-07-19 | 2022-09-20 | 湖南大学无锡智能控制研究院 | 一种停车场场景下智能车辆行驶决策系统及方法 |
CN115082900B (zh) * | 2022-07-19 | 2023-06-16 | 湖南大学无锡智能控制研究院 | 一种停车场场景下智能车辆行驶决策系统及方法 |
Also Published As
Publication number | Publication date |
---|---|
CN105930625B (zh) | 2018-12-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105930625A (zh) | Q学习结合神经网络的智能驾驶行为决策系统的设计方法 | |
CN103996312B (zh) | 具有社会行为交互的无人驾驶汽车控制系统 | |
US20180037227A1 (en) | System and method for vehicle control in tailgating situations | |
CN111145552B (zh) | 基于5g网络的车辆动态换道轨迹的规划方法 | |
DE102020127043A1 (de) | Sicherheitssystem für ein fahrzeug | |
CN113561974B (zh) | 基于车辆行为交互与道路结构耦合的碰撞风险预测方法 | |
CN105774800A (zh) | 一种混合车辆队列中车辆间的碰撞缓解方法及装置 | |
Gelbal et al. | Elastic band based pedestrian collision avoidance using V2X communication | |
DE102017221616A1 (de) | System und Verfahren für einen Einfädelassistenten unter Anwendung von Fahrzeugkommunikation | |
CN111332283A (zh) | 用于控制机动车的方法和系统 | |
CN108694841A (zh) | 一种基于v2x技术的智能车辆通行路口红绿灯方法 | |
Mo et al. | Simulation and analysis on overtaking safety assistance system based on vehicle-to-vehicle communication | |
DE102020115356A1 (de) | Systeme und verfahren zur netzknotenkommunikation unter verwendung dynamisch konfigurierbarer interaktionsmodi | |
Burger et al. | Rating cooperative driving: A scheme for behavior assessment | |
CN108275152A (zh) | 紧随场景下用于车辆控制的系统和方法 | |
CN109455178A (zh) | 一种基于双目视觉的道路交通车辆行驶主动控制系统及方法 | |
Pan et al. | Research on the behavior decision of connected and autonomous vehicle at the unsignalized intersection | |
CN114889610A (zh) | 一种基于循环神经网络的目标车辆换道时刻预测方法及系统 | |
CN114283593A (zh) | 作为交通信号灯相位定时有效性的感测平台的交通工具 | |
Mahjoub et al. | A learning-based framework for two-dimensional vehicle maneuver prediction over v2v networks | |
CN112977477B (zh) | 一种基于神经网络的混合车车协同汇流系统和方法 | |
CN113635900B (zh) | 一种预测巡航过程中基于能量管理的换道决策控制方法 | |
Selvaraj et al. | A full-fledge simulation framework for the assessment of connected cars | |
Lu et al. | An anti-collision algorithm for self-organizing vehicular ad-hoc network using deep learning | |
CN112351407A (zh) | 一种基于5g分级决策的aeb策略方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20181214 Termination date: 20190613 |
|
CF01 | Termination of patent right due to non-payment of annual fee |