CN109584557B - 一种基于动态分解模式和矩阵填充的交通流预测方法 - Google Patents

一种基于动态分解模式和矩阵填充的交通流预测方法 Download PDF

Info

Publication number
CN109584557B
CN109584557B CN201811536443.7A CN201811536443A CN109584557B CN 109584557 B CN109584557 B CN 109584557B CN 201811536443 A CN201811536443 A CN 201811536443A CN 109584557 B CN109584557 B CN 109584557B
Authority
CN
China
Prior art keywords
traffic
matrix
data
variable
snapshot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811536443.7A
Other languages
English (en)
Other versions
CN109584557A (zh
Inventor
丁文鹏
于雅冬
张勇
刘浩
汪洋
王少帆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing University of Technology
Original Assignee
Beijing University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing University of Technology filed Critical Beijing University of Technology
Priority to CN201811536443.7A priority Critical patent/CN109584557B/zh
Publication of CN109584557A publication Critical patent/CN109584557A/zh
Application granted granted Critical
Publication of CN109584557B publication Critical patent/CN109584557B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0125Traffic data processing
    • G08G1/0133Traffic data processing for classifying traffic situation
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/065Traffic control systems for road vehicles by counting the vehicles in a section of the road or in a parking area, i.e. comparing incoming count with outgoing count

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Traffic Control Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种基于动态分解模式和矩阵填充的交通流预测方法,本方法从设置在道路上的各种交通探测器中得到的交通数据,将其处理成m‑1列的数据快照矩阵的形式,然后分成两个快照矩阵来分别代表原始数据的前m列和后m列。之后利用低秩矩阵填充中的映射算子方法生成对应于每一个数据快照矩阵的映射矩阵P,然后将映射矩阵与对应的数据快照矩阵进行点乘操作,最后通过基于动态模式分解方法的模型进行交通预测得到待估计的交通量。在动态模式分解进行交通流预测的模型基础上,考虑了由于外界天气或交通设备自身会发生失灵等问题,会造成交通数据发生丢失的问题。

Description

一种基于动态分解模式和矩阵填充的交通流预测方法
技术领域
本发明涉及动态模式分解和矩阵填充以及矩阵的低秩特性,并被应用在交通领域中的交通流预测相关研究之中。
背景技术
动态模式分解(Dynamic Mode Decomposition,DMD)是一种可以用来降维的方法,而后又被提出可以作为一种用来提取本质动态特性的有效手段。
动态模式分解提取出原始数据中的隐含动态特征,要求原始数据的形式如下:
Figure BDA0001907001190000011
并且认为相邻的向量之间存在着线性对应关系,具体关系表示如下:
vi+1≈Avi (2)
值得注意的是,相邻向量的对应关系不是严格线性的,其实之间是存在一个非常小的残留误差:
vi+1=Avi+γ (3)
其中,γ是残留误差。
又因为动态模式分解与动力学中的非线性系统Koopman光谱分析有关,所以引入Koopman算符来表示两个相邻向量之间的近似线性关系。
yk+1=Kyk (4)
使用动态模式分解方法来处理的原始数据通常用数据快照矩阵的形式表现:
Figure BDA0001907001190000021
其中,Y1代表时间序列0帧到m-1帧的交通数据;而Y2代表时间序列 1帧到m帧的交通数据。所以引入Koopman算符后,两个相邻数据快照矩阵之间的关系如下:
Y2=KY1 (6)
在交通预测问题中,所需要用到的交通数据大多数来自于道路上的交通探测器,但是由于天气的原因,数据大多数会受到外部因素影响,而造成部分偏差,所以在交通流预测中测量值通常会加上高斯噪声项 E使其更加接近真实交通数据。所以公式(6)就变成了:
Z2+E2=K(Z1+E1) (7)
其中Z1,Z2分别代表对应于数据快照矩阵(5)的通过交通探测器得到的交通数据矩阵;E1,E2则分别对应于数据快照矩阵(5)的高斯噪声矩阵;K表示交通流相邻时刻变化的关系。
另外通过式(5)可知第一个数据快照矩阵的后m-1列与第二个快照矩阵的前m-1列相同,所以对于作用在这部分上的高斯噪音项E 也要存在同样的相等关系,所以定义了两个操作分别是||0、||0,其中
||0=[0|Im-1]' (8)
||0=[Im-1|0]' (9)
即:||0表示去掉矩阵的第一列;||0表示去掉矩阵的最后一列。
所以高斯噪声项E1和E2之间要满足的约束是:
E1||0=E2||0 (10)
表示加在交通矩阵上相同位置的噪声是一致的。所以利用动态模式分解进行交通预测的模型如下:
Figure BDA0001907001190000031
其中e0表示噪声矩阵的第一列。
公式(11)的思想是在两个交通快照矩阵的对应线性关系和噪声项对应关系确定的约束下,保证交通流相邻时间之间的对应关系K 准确和噪声项最小,从而得到准确的交通状态估计值。
发明内容
本发明提出了一种基于动态模式分解并结合了矩阵填充相关技术的交通预测方法。此方法能够直接处理从交通探测器得到的交通数据所形成的数据快照矩阵。与传统的动态模式分解方法相比,本方法针对交通数据部分会出现丢失的现象,结合了映射算子使交通预测更符合实际情况,并且提升了预测准确率。
在传统的动态模式分解进行交通流预测的模型(式11)基础上,考虑了由于外界天气或交通设备自身会发生失灵等问题,会造成交通数据发生丢失的问题。对于缺失的部分需要与已知的部分进行分开处理,所以考虑引入矩阵填充中的相关技术解决这一问题。
对于矩阵填充问题,假设原始数据中部分发生丢失,则最标准的矩阵填充问题可以利用秩最小化的约束来进行求解,其具体表达内容如下:
Figure BDA0001907001190000041
其中,rank(X)表示交通数据矩阵X的秩,PΩ表示数据快照矩阵对应的映射算子,若矩阵中某一位置交通数据已知,则对应的PΩ为1,反之则为0,具体数学表达式为:
Figure BDA0001907001190000042
(式13)表示若交通矩阵某位置数据为M且该位置未发生丢失,则经过映射算子作用后值认为M;反之为0。
所以本发明中的交通流预测模型的形式就变成了:
Figure BDA0001907001190000043
其中,K为相邻时间交通矩阵之间的对应关系矩阵,P1和P2分别是对应数据快照矩阵(5)的两个映射算子矩阵。||K||*代表求解矩阵K的核范数;
Figure BDA0001907001190000044
代表求矩阵的F范数的平方;
Figure BDA0001907001190000045
表示求向量的2范数的平方,Z1,Z2表示交通流的观测数据矩阵,E1,E2代表加在交通矩阵上的噪声矩阵。
预测模型的主要思想就是在确定两个噪声项的关系以及数据快照矩阵之间的对应关系,考虑了交通数据的缺失这一系列约束下,使得K和噪声最小,从而得到准确的交通估计值。
预测模型(14)中关于K的核范数求解先将K表示为L和R的表达形式:K=LR',其中:L∈RN×r,R∈RN×r。这样处理减少后续相关计算的复杂性。所以K的核范数表示为如下的形式:
Figure BDA0001907001190000051
所以将模型(14)中所有的K都以L和R的形式进行替换,得到如下模型(16):
Figure BDA0001907001190000052
将有约束的待求解问题转化为无约束问题,所以引入了拉格朗日算子,模型变成:
Figure BDA0001907001190000053
其中,令C=R'(P1⊙(Z1+E1)) (18)
H1=P1⊙E1 (19)
H2=P2⊙E2 (20)
其中,C,H1,H2为辅助变量,P,Q,W,A1,A2是拉格朗日乘子,μ,η,ρ, β12是增广拉格朗日参数。然后对各个变量分别进行求解,即将所有包含该变量的表达式放到一起并进行计算,具体各个变量的计算过程如下:
变量L的求解:
Figure BDA0001907001190000061
变量C的求解:
Figure BDA0001907001190000062
变量R的求解:
Figure BDA0001907001190000063
变量H1的求解:
Figure BDA0001907001190000064
变量H2的求解:
Figure BDA0001907001190000065
本模型的主要思想是:从设置在道路上的各种交通探测器中得到的交通数据,将其处理成m-1列的数据快照矩阵的形式,然后分成两个快照矩阵来分别代表原始数据的前m列和后m列。之后利用低秩矩阵填充中的映射算子方法生成对应于每一个数据快照矩阵的映射矩阵P,然后将映射矩阵与对应的数据快照矩阵进行点乘操作,最后通过基于动态模式分解方法的模型进行交通预测得到待估计的交通量。
附图说明
图1是利用低秩动态模式分解做交通流预测的整体流程。
具体实施方式
步骤1:通过探测器得到交通数据,处理得到交通矩阵(每一行代表某路段从0时刻到M时刻的交通流量,每一列代表某时刻不同相邻路段的交通流量);
步骤2:将交通矩阵分解为两个数据快照矩阵,得到对应于每一个快照矩阵的映射算子矩阵;
步骤3:利用动态模式分解,结合低秩约束,迭代计算得到两个相邻时间矩阵的关系K,进而进行交通预测。
本发明中所做的所有实验选择了青岛市道路交通探测器于2017 年1月份所采集的路段数据。通过青岛市道路探测器所能得到的交通流相关指标有交通流量、速度、密度、车道编号、记录时间等,在本实验中只选择车道编号,路段编号、流量指标。
一共做了以时间间隔为区分指标的三组实验,间隔分别为5分钟、10分钟和20分钟。为了对比不同方法的准确率如何,引入了两个误差指标—平均绝对误差(MeanAbsoluteError,MAE)和均方根误差(RootMean Square Error,RMSE)。两个误差的数学公式为:
Figure BDA0001907001190000081
Figure BDA0001907001190000082
其中,predictedt表示t时刻的交通流量预测结果;observedt则表示t时刻的交通流量观测值。
在预测方法上,选择了交通预测领域经典的方法卡尔曼方法以及神经网络并且还利用了在时序方面非常著名的ARIMA模型作为对比实验。同样选择了最近很流行的深度学习方法LSTM(Long Short-Term Memory)进行对比。最后将本发明中的方法与传统的动态模式分解方法进行比较。具体的实验结果如下表所示:
表1基本的DMD相对其它预测方法的误差率对比
Figure BDA0001907001190000083
表1是传统的动态模式分解和一些常见的交通预测方法的对比结果,不难发现在大多数情况下,动态模式分解方法的误差率均小于其他四种传统的方法,但在个别时刻动态模式分解方法的误差率会略大于ARIMA方法,却仍小于剩下的三种方法,可以分析出动态模式分解在某些情况下对于个别路段的估计值会偏差大于使用其他方法,但是从整体来看预测准确率却是要高于其他方法的。所以整体来看动态模式分解方法是这五种方法中预测准确度最好的。
表2基本的DMD与结合矩阵填充的DMD的误差率对比
Figure BDA0001907001190000091
表2是传统动态模式分解和本发明提出的方法之间的预测误差率对比,可以发现两者的误差率并没有相差太多,但是本发明中提出的方法误差率无论在哪种情况下误差率都是低于传统的动态模式分解,所以结合了矩阵填充中的映射算子技术的动态模式分解方法要优于传统的动态模式分解方法。

Claims (1)

1.一种基于动态分解模式和矩阵填充的交通流预测方法,该方法包括如下步骤,步骤1:通过探测器得到交通数据,处理得到交通矩阵;每一行代表某路段从0时刻到M时刻的交通流量,每一列代表某时刻不同相邻路段的交通流量;
步骤2:将交通矩阵分解为两个数据快照矩阵,得到对应于每一个快照矩阵的映射算子矩阵;
步骤3:利用动态模式分解,结合低秩约束,迭代计算得到两个相邻时间矩阵的关系K,进而进行交通预测;
假设原始数据中部分发生丢失,则最标准的矩阵填充问题利用秩最小化的约束来进行求解,其具体表达内容如下:
Figure FDA0002832875690000011
其中,rank(X)表示交通矩阵X的秩,PΩ表示数据快照矩阵对应的映射算子,若矩阵中某一位置交通数据已知,则对应的PΩ为1,反之则为0,具体数学表达式为:
Figure FDA0002832875690000012
式(13)表示若交通矩阵某位置数据为M且该位置未发生丢失,则经过映射算子作用后值认为M;反之为0;
所以交通流预测模型的形式就变成了:
Figure FDA0002832875690000013
其中,K为相邻时间交通矩阵之间的对应关系矩阵,P1和P2分别是对应数据快照矩阵的两个映射算子矩阵;||K||*代表求解矩阵K的核范数;
Figure FDA0002832875690000021
代表求矩阵的F范数的平方;
Figure FDA0002832875690000022
表示求向量的2范数的平方,Z1,Z2表示交通流的观测数据矩阵,E1,E2代表加在交通矩阵上的噪声矩阵;
预测模型的主要思想就是在确定两个噪声项的关系以及数据快照矩阵之间的对应关系,考虑了交通数据的缺失这一系列约束下,使得K和噪声最小,从而得到准确的交通估计值;
预测模型(14)中关于K的核范数求解先将K表示为L和R的表达形式:K=LR',其中:L∈RN ×r,R∈RN×r;这样处理减少后续相关计算的复杂性;所以K的核范数表示为如下的形式:
Figure FDA0002832875690000023
所以将预测模型(14)中所有的K都以L和R的形式进行替换,得到如下模型(16):
Figure FDA0002832875690000024
s.t P2⊙(Z2+E2)=LR'P1⊙(Z1+E1)
E1||0=E2||0 (16)
将有约束的待求解问题转化为无约束问题,所以引入了拉格朗日算子,模型(16)
Figure FDA0002832875690000025
变成:
Figure FDA0002832875690000026
其中,令C=R'(P1⊙(Z1+E1)) (18)
H1=P1⊙E1 (19)
H2=P2⊙E2 (20)
其中,C,H1,H2为辅助变量,P,Q,W,A1,A2是拉格朗日乘子,μ,η,ρ,β1,β2是增广拉格朗日参数;然后对各个变量分别进行求解,即将所有包含该变量的表达式放到一起并进行计算,具体各个变量的计算过程如下:
变量L的求解:
Figure FDA0002832875690000031
变量C的求解:
Figure FDA0002832875690000032
变量R的求解:
Figure FDA0002832875690000033
变量H1的求解:
Figure FDA0002832875690000034
变量H2的求解:
Figure FDA0002832875690000041
CN201811536443.7A 2018-12-14 2018-12-14 一种基于动态分解模式和矩阵填充的交通流预测方法 Active CN109584557B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811536443.7A CN109584557B (zh) 2018-12-14 2018-12-14 一种基于动态分解模式和矩阵填充的交通流预测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811536443.7A CN109584557B (zh) 2018-12-14 2018-12-14 一种基于动态分解模式和矩阵填充的交通流预测方法

Publications (2)

Publication Number Publication Date
CN109584557A CN109584557A (zh) 2019-04-05
CN109584557B true CN109584557B (zh) 2021-02-26

Family

ID=65929664

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811536443.7A Active CN109584557B (zh) 2018-12-14 2018-12-14 一种基于动态分解模式和矩阵填充的交通流预测方法

Country Status (1)

Country Link
CN (1) CN109584557B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110188427B (zh) * 2019-05-19 2023-10-27 北京工业大学 一种基于非负低秩动态模式分解的交通数据填充方法
CN110276113A (zh) * 2019-06-11 2019-09-24 嘉兴深拓科技有限公司 一种网络结构预测方法
CN111105617B (zh) * 2019-12-19 2020-11-27 浙大网新系统工程有限公司 基于矩阵稳定性分析的智能交通预测系统
CN111259328B (zh) * 2020-01-16 2021-03-02 东南大学 一种自由振动位移响应驱动的航天器结构非线性特征检测方法
CN113506440B (zh) * 2021-09-08 2021-11-30 四川国蓝中天环境科技集团有限公司 一种拉格朗日坐标系下多源数据融合的交通状态估计方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103136239B (zh) * 2011-11-29 2015-03-25 北京理工大学 一种基于张量重建的交通数据丢失恢复方法
CN105279964B (zh) * 2015-08-07 2017-10-24 北京工业大学 一种基于低秩算法的路网交通数据的补全方法
CN106548016A (zh) * 2016-10-24 2017-03-29 天津大学 基于张量时域相关性分解模型的时间序列分析方法
CN107610464B (zh) * 2017-08-11 2019-02-12 河海大学 一种基于高斯混合时间序列模型的轨迹预测方法
CN107992536B (zh) * 2017-11-23 2020-10-30 中山大学 基于张量分解的城市交通缺失数据填补方法
CN108010320B (zh) * 2017-12-21 2020-06-16 北京工业大学 一种基于自适应时空约束低秩算法的路网交通数据的补全方法

Also Published As

Publication number Publication date
CN109584557A (zh) 2019-04-05

Similar Documents

Publication Publication Date Title
CN109584557B (zh) 一种基于动态分解模式和矩阵填充的交通流预测方法
Han et al. A deep learning method for bias correction of ECMWF 24–240 h forecasts
CN107358293B (zh) 一种神经网络训练方法及装置
CA3104652C (en) Detection and replacement of transient obstructions from high elevation digital images
Sang et al. Covariance approximation for large multivariate spatial data sets with an application to multiple climate model errors
CN109214470B (zh) 一种基于编码网络微调的图像能见度检测方法
CN107748942B (zh) 基于速度场感知网络的雷达回波外推预测方法和系统
CN110390561B (zh) 基于动量加速随机梯度下降的用户-金融产品选用倾向高速预测方法和装置
CN110188427A (zh) 一种基于非负低秩动态模式分解的交通数据填充方法
CN109785279B (zh) 一种基于深度学习的图像融合重建方法
CN111460316B (zh) 一种面向知识系统的个性化推荐方法及计算机存储介质
CN111161199A (zh) 一种空谱融合的高光谱影像混合像元低秩稀疏分解方法
CN111047078B (zh) 交通特征预测方法、系统及存储介质
CN110210687A (zh) 一种基于局部加权慢特征回归的非线性动态生产过程产品质量预测方法
CN116451553A (zh) 一种改进的变分模态分解与BiGRU融合的水质预测方法
CN104778341B (zh) 磁共振线圈合并系数计算方法、磁共振成像方法及其装置
CN106204597A (zh) 一种基于自步式弱监督学习的视频物体分割方法
CN114863348A (zh) 基于自监督的视频目标分割方法
Salem A basic recurrent neural network model
Shen On modeling and forecasting time series of smooth curves
CN111047654A (zh) 一种基于色彩信息的高清高速视频背景建模方法
CN114070262B (zh) 附加扰动的集成混合集合Kalman滤波天气预报同化方法及装置
CN110705408A (zh) 基于混合高斯人数分布学习的室内人数统计方法及系统
CN114595890A (zh) 基于bp-svr组合模型的船舶备件需求预测方法及系统
CN113468471A (zh) 基于张量型加权Schatten-p范数的交通数据修复方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant