CN112733908A - 一种高精度的车辆轨迹多模态预测方法 - Google Patents
一种高精度的车辆轨迹多模态预测方法 Download PDFInfo
- Publication number
- CN112733908A CN112733908A CN202011629289.5A CN202011629289A CN112733908A CN 112733908 A CN112733908 A CN 112733908A CN 202011629289 A CN202011629289 A CN 202011629289A CN 112733908 A CN112733908 A CN 112733908A
- Authority
- CN
- China
- Prior art keywords
- track
- vehicle
- trajectory
- vector
- neural network
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 20
- 239000013598 vector Substances 0.000 claims abstract description 50
- 238000011176 pooling Methods 0.000 claims abstract description 13
- 230000006870 function Effects 0.000 claims description 30
- 238000013528 artificial neural network Methods 0.000 claims description 23
- 230000007787 long-term memory Effects 0.000 claims description 7
- 230000006403 short-term memory Effects 0.000 claims description 7
- 230000004913 activation Effects 0.000 claims description 6
- 230000015654 memory Effects 0.000 claims description 5
- 230000003993 interaction Effects 0.000 claims description 4
- 230000002776 aggregation Effects 0.000 claims description 2
- 238000004220 aggregation Methods 0.000 claims description 2
- 238000013144 data compression Methods 0.000 claims description 2
- 238000005070 sampling Methods 0.000 abstract description 3
- 230000002452 interceptive effect Effects 0.000 abstract description 2
- 230000007246 mechanism Effects 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 4
- 206010000117 Abnormal behaviour Diseases 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/213—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods
- G06F18/2134—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on separation criteria, e.g. independent component analysis
- G06F18/21347—Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods based on separation criteria, e.g. independent component analysis using domain transformations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/047—Probabilistic or stochastic networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/049—Temporal neural networks, e.g. delay elements, oscillating neurons or pulsed inputs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/04—Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T10/00—Road transport of goods or passengers
- Y02T10/10—Internal combustion engine [ICE] based vehicles
- Y02T10/40—Engine management systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Business, Economics & Management (AREA)
- General Engineering & Computer Science (AREA)
- Economics (AREA)
- Human Resources & Organizations (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computing Systems (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Strategic Management (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- General Health & Medical Sciences (AREA)
- Tourism & Hospitality (AREA)
- Game Theory and Decision Science (AREA)
- Entrepreneurship & Innovation (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Probability & Statistics with Applications (AREA)
- General Business, Economics & Management (AREA)
- Bioinformatics & Computational Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Development Economics (AREA)
- Evolutionary Biology (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Traffic Control Systems (AREA)
Abstract
本发明公开了一种高精度的车辆轨迹多模态预测方法,包括以下步骤:对车辆轨迹进行编码;使用概率分布剪裁模块剪裁轨迹;解码生成轨迹;使用能量网络判别轨迹质量;训练损失函数。本发明使用以能量函数为核心的能量网络实现对于训练轨迹样本的拟合,因而在理论上实现了在充分拟合数据的前提下对于轨迹多样性生成的需要。本发明的多样性轨迹预测方法采用数据驱动的方式,将同一时刻的车辆轨迹编码为隐层状态向量后加入池化层以提供车辆的交互轨迹生成。本发明采用了基于概率分布裁剪机制实现对于能够生成高质量轨迹样本的概率分布裁剪,显著降低了采样难度的同时也有更高的机会采集到高概率区域样本,生成质量更高、更加真实的车辆轨迹。
Description
技术领域
本发明涉及一种车辆轨迹预测技术,特别是一种高精度的车辆轨迹多模态预测方法。
背景技术
现代社会,随着人口的汇集与增长,越来越多的车辆行驶场景出现,在中国庞大的人口基数下,这种现象愈发明显,密集车辆轨迹预测有助于制定相对应的安全管理策略,设计更好的车辆分流模式,实时统计密集车辆的流量、检测密集车辆的异常行为,保障广大公民的人身安全。
目前的预测技术存在着以下问题:对于单个车辆的轨迹预测仅仅预测最有可能的路径,然而多数场景下车辆根据目的不同不仅只是按照之前的最可能出现的轨迹,实际上是一组可能的轨迹中随机选取,现有的技术虽然在考虑车辆之间的信息交互与多样性轨迹生成时,考虑到了多路径的选取,但是并未生成足够多的待选轨迹组以及足够的真实性。到目前为止,行驶车辆的轨迹预测存在着候选轨迹不足与真实性不够高的难题。
发明内容
为解决现有技术存在的上述问题,本发明提出一种能生成足够多的候选轨迹并提高真实性的高精度车辆轨迹多模态预测方法。
为了实现上述目的,本发明的技术方案如下:一种高精度的车辆轨迹多模态预测方法,包括以下步骤:
A、对车辆轨迹进行编码
读取车辆的轨迹后,将轨迹进行编码压缩为低维向量,然后与通过车辆之间的交互池化操作获取的车辆交互向量进行拼接,最终获取拼接后的隐层状态向量信息,具体方法如下;
A1、利用长短期记忆模块进行数据压缩
式中,为读取的第i-1辆车辆在t时刻的轨迹点坐标,为由第0到t-1时刻的车辆轨迹生成的隐层状态向量,所述的隐层状态向量为潜在的注意力状态向量,fc(.)是使用RELU函数作为激活函数的信息聚合函数,Wvec是信息聚合神经网络的权重,Wencoder是长短期记忆模块的权重且在一个场景内为所有的车辆轨迹所共享,i为当前车辆的序号;
A2、使用池化层实现不同车辆信息的汇总
B、使用概率分布剪裁模块剪裁轨迹
zt-1=U(Gψ,U6,α)~N(α;0,1),
式中,ω(.)是概率分布裁剪函数,该函数具有从能量概率分布中取出更加真实轨迹的噪声的功能。Gψ为轨迹解码生成器,Uθ为能量函数,α为随机变量,Concat(·)为向量拼接操作函数。其中,为拼接后的隐层状态向量。为了生成轨迹,我们需要对拼接后的向量送入长短期记忆网络生成t时刻的隐层状态向量其公式如下:
C、解码生成轨迹
为了让轨迹解码生成器生成的轨迹分布更加多样性,引入互信息网络。最大化互信息等于最小化二值交叉熵,下式即为轨迹解码生成器的互信息估计公式:
D、使用能量网络判别轨迹质量
能量网络由一个编码器与多层感知机神经网络构成。首先将轨迹解码生成器生成的轨迹输入到长短期记忆模块,编码成低维度向量,然后送入多层感知机神经网络进行判别是否符合车辆未来基准的轨迹,最后将经过编码器编码的隐层状态向量加入带有激活函数的全连接神经网络实现对于分类的打分,使用能量网络对神经网络预测出来的轨迹进行质量判断,质量高的轨迹代表真实性高,质量差的轨迹代表真实性低。采取如下公式判断生成的轨迹是否与未来基准轨迹相近:
其中,MLP(·)是带有激活函数的全连接神经网络。如果预测出来的轨迹通过能量网络后得分为Tfake=1,则认为预测的轨迹与车辆未来基准轨迹具有一致,即生成的轨迹真实性高。Tfake=0,则生成轨迹真实性差。
E、训练损失函数
使用L2损失函数评估生成轨迹与真实轨迹之间的差异,公式如下:
式中,L2为损失函数。trajreal为未来基准的轨迹,trajpred为使用轨迹解码生成器生成的对应预测轨迹。同时对于整个轨迹预测方法,将能量网络误差Uloss和轨迹解码生成器误差Gmi_loss加入,训练整个神经网络结构采用的误差损失函数如下所示:
Tloss=Uloss+Gmi_loss+L2。
整个轨迹预测方法通过最小化Tloss来减小生成的轨迹trajpred与未来基准轨迹trajreal的差异。
与现有技术相比,本发明具有以下有益效果:
1、本发明使用以能量函数为核心的能量网络实现对于训练轨迹样本的拟合,因而在理论上实现了在充分拟合数据的前提下对于轨迹多样性生成的需要,相较于先前的模型,本发明不仅在生成轨迹质量上有所提升,同时能产生更多的候选轨迹。
2、本发明的多样性轨迹预测方法采用数据驱动的方式,将同一时刻的车辆轨迹编码为隐层状态向量后加入池化层以提供车辆的交互轨迹生成。
3、本发明采用了基于概率分布裁剪机制实现对于能够生成高质量轨迹样本的概率分布裁剪,对比于先前的模型,显著降低了采样难度的同时也有更高的机会采集到高概率区域样本,生成质量更高、更加真实的车辆轨迹。
附图说明
图1是车辆轨迹预测结果图。
图2是真实车辆预测轨迹示意图。
图3是本发明的流程图。
具体实施方式
下面结合附图对本发明进行进一步的描述,图1是车辆轨迹预测结果图,车辆按照预先设定的的三叉树模态行走,分为左侧路线、中间路线以及右侧路线。虚线为车辆行驶的历史轨迹,实线是本发明预测出来的多样性轨迹,在三种路线上都有多种可能的路径供车辆选择。图2是在真实场景中预测轨迹图,黑色实线代表车辆可能选择的路径。然后,按照图3的流程对多样性与兼顾真实性的车辆轨迹进行预测。首先读取连续的具有时序相关的车辆轨迹到长短期记忆模块中进行编码,压缩为隐层状态向量,然后再进入池化层,得到同一场景内的车辆的信息汇总的状态向量。下一步,拼接长短记忆模块编码后隐层状态向量与信息汇总后的状态向量,进入概率分布裁剪模块,采样到能够生成高质量的轨迹的样本,并反向通过全连接的神经网络来得到解码后的车辆轨迹,实现轨迹的多样性预测。最后,对预测出来的多样性轨迹送入能量网络,判断轨迹的质量。本发明采用损失函数训练发明方法。
本发明不局限于本实施例,任何在本发明披露的技术范围内的等同构思或者改变,均列为本发明的保护范围。
Claims (1)
1.一种高精度的车辆轨迹多模态预测方法,其特征在于:包括以下步骤:
A、对车辆轨迹进行编码
读取车辆的轨迹后,将轨迹进行编码压缩为低维向量,然后与通过车辆之间的交互池化操作获取的车辆交互向量进行拼接,最终获取拼接后的隐层状态向量信息,具体方法如下;
A1、利用长短期记忆模块进行数据压缩
式中,为读取的第i-1辆车辆在t时刻的轨迹点坐标,为由第0到t-1时刻的车辆轨迹生成的隐层状态向量,所述的隐层状态向量为潜在的注意力状态向量,fc(.)是使用RELU函数作为激活函数的信息聚合函数,Wvec是信息聚合神经网络的权重,Wencoder是长短期记忆模块的权重且在一个场景内为所有的车辆轨迹所共享,i为当前车辆的序号;
A2、使用池化层实现不同车辆信息的汇总
B、使用概率分布剪裁模块剪裁轨迹
zt-1=ω(Gψ,Uθ,α)~N(α;0,1),
式中,ω(.)是概率分布裁剪函数,该函数具有从能量概率分布中取出更加真实轨迹的噪声的功能;Gψ为轨迹解码生成器,Uθ为能量函数,α为随机变量,Concat(·)为向量拼接操作函数;其中,为拼接后的隐层状态向量;为了生成轨迹,我们需要对拼接后的向量送入长短期记忆网络生成t时刻的隐层状态向量其公式如下:
C、解码生成轨迹
为了让轨迹解码生成器生成的轨迹分布更加多样性,引入互信息网络;最大化互信息等于最小化二值交叉熵,下式即为轨迹解码生成器的互信息估计公式:
D、使用能量网络判别轨迹质量
能量网络由一个编码器与多层感知机神经网络构成;首先将轨迹解码生成器生成的轨迹输入到长短期记忆模块,编码成低维度向量,然后送入多层感知机神经网络进行判别是否符合车辆未来基准的轨迹,最后将经过编码器编码的隐层状态向量加入带有激活函数的全连接神经网络实现对于分类的打分,使用能量网络对神经网络预测出来的轨迹进行质量判断,质量高的轨迹代表真实性高,质量差的轨迹代表真实性低;采取如下公式判断生成的轨迹是否与未来基准轨迹相近:
其中,MLP(·)是带有激活函数的全连接神经网络;如果预测出来的轨迹通过能量网络后得分为Tfake=1,则认为预测的轨迹与车辆未来基准轨迹具有一致,即生成的轨迹真实性高;Tfake=0,则生成轨迹真实性差;
E、训练损失函数
使用L2损失函数评估生成轨迹与真实轨迹之间的差异,公式如下:
式中,L2为损失函数;trajreal为未来基准的轨迹,trajpred为使用轨迹解码生成器生成的对应预测轨迹;同时对于整个轨迹预测方法,将能量网络误差Uloss和轨迹解码生成器误差Gmi_loss加入,训练整个神经网络结构采用的误差损失函数如下所示:
Tloss=Uloss+Gmi_loss+L2;
整个轨迹预测方法通过最小化Tloss来减小生成的轨迹trajpred与未来基准轨迹trajreal的差异。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011629289.5A CN112733908B (zh) | 2020-12-31 | 2020-12-31 | 一种高精度的车辆轨迹多模态预测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011629289.5A CN112733908B (zh) | 2020-12-31 | 2020-12-31 | 一种高精度的车辆轨迹多模态预测方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112733908A true CN112733908A (zh) | 2021-04-30 |
CN112733908B CN112733908B (zh) | 2023-06-23 |
Family
ID=75608195
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011629289.5A Active CN112733908B (zh) | 2020-12-31 | 2020-12-31 | 一种高精度的车辆轨迹多模态预测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112733908B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113344056A (zh) * | 2021-05-31 | 2021-09-03 | 北京邮电大学 | 一种人员移动性预测模型的训练方法及装置 |
CN113657433A (zh) * | 2021-07-01 | 2021-11-16 | 华南理工大学 | 一种车辆轨迹多模态预测方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20190094867A1 (en) * | 2017-09-28 | 2019-03-28 | Nec Laboratories America, Inc. | Generative adversarial inverse trajectory optimization for probabilistic vehicle forecasting |
CN111931902A (zh) * | 2020-07-03 | 2020-11-13 | 江苏大学 | 一种生成对抗网络模型、及利用该生成对抗网络模型的车辆轨迹预测方法 |
CN111930110A (zh) * | 2020-06-01 | 2020-11-13 | 西安理工大学 | 一种结合社会生成对抗网络的意图轨迹预测方法 |
-
2020
- 2020-12-31 CN CN202011629289.5A patent/CN112733908B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20190094867A1 (en) * | 2017-09-28 | 2019-03-28 | Nec Laboratories America, Inc. | Generative adversarial inverse trajectory optimization for probabilistic vehicle forecasting |
CN111930110A (zh) * | 2020-06-01 | 2020-11-13 | 西安理工大学 | 一种结合社会生成对抗网络的意图轨迹预测方法 |
CN111931902A (zh) * | 2020-07-03 | 2020-11-13 | 江苏大学 | 一种生成对抗网络模型、及利用该生成对抗网络模型的车辆轨迹预测方法 |
Non-Patent Citations (1)
Title |
---|
温惠英;张伟罡;赵胜;: "基于生成对抗网络的车辆换道轨迹预测模型", 华南理工大学学报(自然科学版), no. 05 * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113344056A (zh) * | 2021-05-31 | 2021-09-03 | 北京邮电大学 | 一种人员移动性预测模型的训练方法及装置 |
CN113344056B (zh) * | 2021-05-31 | 2022-11-22 | 北京邮电大学 | 一种人员移动性预测模型的训练方法及装置 |
CN113657433A (zh) * | 2021-07-01 | 2021-11-16 | 华南理工大学 | 一种车辆轨迹多模态预测方法 |
CN113657433B (zh) * | 2021-07-01 | 2023-07-21 | 华南理工大学 | 一种车辆轨迹多模态预测方法 |
Also Published As
Publication number | Publication date |
---|---|
CN112733908B (zh) | 2023-06-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110781838B (zh) | 一种复杂场景下行人的多模态轨迹预测方法 | |
CN113269115B (zh) | 一种基于Informer的行人轨迹预测方法 | |
CN112733908A (zh) | 一种高精度的车辆轨迹多模态预测方法 | |
CN113269114B (zh) | 一种基于多隐变量预测器及关键点的行人轨迹预测方法 | |
CN111931902B (zh) | 一种生成对抗网络模型、及利用该生成对抗网络模型的车辆轨迹预测方法 | |
CN111930110A (zh) | 一种结合社会生成对抗网络的意图轨迹预测方法 | |
CN112949597B (zh) | 一种基于时间模式注意力机制的车辆轨迹预测与驾驶操纵识别方法 | |
CN115471851A (zh) | 融合双重注意力机制的缅甸语图像文本识别方法及装置 | |
CN113255750B (zh) | 一种基于深度学习的vcc车辆攻击检测方法 | |
CN114360005B (zh) | 一种基于AU区域和多层级Transformer融合模块的微表情分类方法 | |
CN116383616B (zh) | 基于轨迹相似度和深度学习的轨迹gps坐标恢复方法及框架 | |
CN114913396A (zh) | 一种电机轴承故障诊断方法 | |
CN112183544A (zh) | 一种融合双通道的三层架构数学公式识别方法、系统和存储设备 | |
CN116578661A (zh) | 一种基于注意力机制的车辆轨迹时空重构方法及系统 | |
CN113954863B (zh) | 基于双注意力机制和改进Social Gan的车辆轨迹预测方法 | |
Zhang et al. | Knowledge amalgamation for object detection with transformers | |
CN111130942A (zh) | 一种基于消息大小分析的应用流量识别方法 | |
Tian et al. | Steganalysis of AMR speech based on multiple classifiers combination | |
CN117522920A (zh) | 一种基于改进时空图注意力网络的行人轨迹预测方法 | |
Ma et al. | A Transformer and Convolution-Based Learning Framework for Automatic Modulation Classification | |
CN116503631A (zh) | 一种yolo-tgb车辆检测系统及方法 | |
Zhong et al. | Encoding broad learning system: An effective shallow model for anti-fraud | |
CN114332699A (zh) | 路况预测方法、装置、设备及存储介质 | |
Gu et al. | Exploiting ResNeXt with Convolutional Shortcut for Signal Modulation Classification at Low SNRs | |
CN117113063B (zh) | 用于纳米孔信号的编解码系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |