CN109584557A - 一种基于动态分解模式和矩阵填充的交通流预测方法 - Google Patents
一种基于动态分解模式和矩阵填充的交通流预测方法 Download PDFInfo
- Publication number
- CN109584557A CN109584557A CN201811536443.7A CN201811536443A CN109584557A CN 109584557 A CN109584557 A CN 109584557A CN 201811536443 A CN201811536443 A CN 201811536443A CN 109584557 A CN109584557 A CN 109584557A
- Authority
- CN
- China
- Prior art keywords
- matrix
- traffic
- data
- variable
- snapshot
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/01—Detecting movement of traffic to be counted or controlled
- G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
- G08G1/0125—Traffic data processing
- G08G1/0133—Traffic data processing for classifying traffic situation
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/065—Traffic control systems for road vehicles by counting the vehicles in a section of the road or in a parking area, i.e. comparing incoming count with outgoing count
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Traffic Control Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种基于动态分解模式和矩阵填充的交通流预测方法,本方法从设置在道路上的各种交通探测器中得到的交通数据,将其处理成m‑1列的数据快照矩阵的形式,然后分成两个快照矩阵来分别代表原始数据的前m列和后m列。之后利用低秩矩阵填充中的映射算子方法生成对应于每一个数据快照矩阵的映射矩阵P,然后将映射矩阵与对应的数据快照矩阵进行点乘操作,最后通过基于动态模式分解方法的模型进行交通预测得到待估计的交通量。在动态模式分解进行交通流预测的模型基础上,考虑了由于外界天气或交通设备自身会发生失灵等问题,会造成交通数据发生丢失的问题。
Description
技术领域
本发明涉及动态模式分解和矩阵填充以及矩阵的低秩特性,并被应用在交通领域中的交通流预测相关研究之中。
背景技术
动态模式分解(Dynamic Mode Decomposition,DMD)是一种可以用来降维的方法,而后又被提出可以作为一种用来提取本质动态特性的有效手段。
动态模式分解提取出原始数据中的隐含动态特征,要求原始数据的形式如下:
并且认为相邻的向量之间存在着线性对应关系,具体关系表示如下:
vi+1≈Avi (2)
值得注意的是,相邻向量的对应关系不是严格线性的,其实之间是存在一个非常小的残留误差:
vi+1=Avi+γ (3)
其中,γ是残留误差。
又因为动态模式分解与动力学中的非线性系统Koopman光谱分析有关,所以引入Koopman算符来表示两个相邻向量之间的近似线性关系。
yk+1=Kyk (4)
使用动态模式分解方法来处理的原始数据通常用数据快照矩阵的形式表现:
其中,Y1代表时间序列0帧到m-1帧的交通数据;而Y2代表时间序列1帧到m帧的交通数据。所以引入Koopman算符后,两个相邻数据快照矩阵之间的关系如下:
Y2=KY1 (6)
在交通预测问题中,所需要用到的交通数据大多数来自于道路上的交通探测器,但是由于天气的原因,数据大多数会受到外部因素影响,而造成部分偏差,所以在交通流预测中测量值通常会加上高斯噪声项E使其更加接近真实交通数据。所以公式(6)就变成了:
Z2+E2=K(Z1+E1) (7)
其中Z1,Z2分别代表对应于数据快照矩阵(5)的通过交通探测器得到的交通数据矩阵;E1,E2则分别对应于数据快照矩阵(5)的高斯噪声矩阵;K表示交通流相邻时刻变化的关系。
另外通过式(5)可知第一个数据快照矩阵的后m-1列与第二个快照矩阵的前m-1列相同,所以对于作用在这部分上的高斯噪音项E也要存在同样的相等关系,所以定义了两个操作分别是||0、||0,其中
||0=[0|Im-1]' (8)
||0=[Im-1|0]' (9)
即:||0表示去掉矩阵的第一列;||0表示去掉矩阵的最后一列。
所以高斯噪声项E1和E2之间要满足的约束是:
E1||0=E2||0 (10)
表示加在交通矩阵上相同位置的噪声是一致的。所以利用动态模式分解进行交通预测的模型如下:
其中e0表示噪声矩阵的第一列。
公式(11)的思想是在两个交通快照矩阵的对应线性关系和噪声项对应关系确定的约束下,保证交通流相邻时间之间的对应关系K准确和噪声项最小,从而得到准确的交通状态估计值。
发明内容
本发明提出了一种基于动态模式分解并结合了矩阵填充相关技术的交通预测方法。此方法能够直接处理从交通探测器得到的交通数据所形成的数据快照矩阵。与传统的动态模式分解方法相比,本方法针对交通数据部分会出现丢失的现象,结合了映射算子使交通预测更符合实际情况,并且提升了预测准确率。
在传统的动态模式分解进行交通流预测的模型(式11)基础上,考虑了由于外界天气或交通设备自身会发生失灵等问题,会造成交通数据发生丢失的问题。对于缺失的部分需要与已知的部分进行分开处理,所以考虑引入矩阵填充中的相关技术解决这一问题。
对于矩阵填充问题,假设原始数据中部分发生丢失,则最标准的矩阵填充问题可以利用秩最小化的约束来进行求解,其具体表达内容如下:
其中,rank(X)表示交通数据矩阵X的秩,PΩ表示数据快照矩阵对应的映射算子,若矩阵中某一位置交通数据已知,则对应的PΩ为1,反之则为0,具体数学表达式为:
(式13)表示若交通矩阵某位置数据为M且该位置未发生丢失,则经过映射算子作用后值认为M;反之为0。
所以本发明中的交通流预测模型的形式就变成了:
其中,K为相邻时间交通矩阵之间的对应关系矩阵,P1和P2分别是对应数据快照矩阵(5)的两个映射算子矩阵。||K||*代表求解矩阵K的核范数;代表求矩阵的F范数的平方;表示求向量的2范数的平方,Z1,Z2表示交通流的观测数据矩阵,E1,E2代表加在交通矩阵上的噪声矩阵。
预测模型的主要思想就是在确定两个噪声项的关系以及数据快照矩阵之间的对应关系,考虑了交通数据的缺失这一系列约束下,使得K和噪声最小,从而得到准确的交通估计值。
预测模型(14)中关于K的核范数求解先将K表示为L和R的表达形式:K=LR',其中:L∈RN×r,R∈RN×r。这样处理减少后续相关计算的复杂性。所以K的核范数表示为如下的形式:
所以将模型(14)中所有的K都以L和R的形式进行替换,得到如下模型(16):
将有约束的待求解问题转化为无约束问题,所以引入了拉格朗日算子,模型变成:
其中,令C=R'(P1⊙(Z1+E1)) (18)
H1=P1⊙E1 (19)
H2=P2⊙E2 (20)
其中,C,H1,H2为辅助变量,P,Q,W,A1,A2是拉格朗日乘子,μ,η,ρβ1,β2是增广拉格朗日参数。然后对各个变量分别进行求解,即将所有包含该变量的表达式放到一起并进行计算,具体各个变量的计算过程如下:
变量L的求解:
变量C的求解:
变量R的求解:
变量H1的求解:
变量H2的求解:
本模型的主要思想是:从设置在道路上的各种交通探测器中得到的交通数据,将其处理成m-1列的数据快照矩阵的形式,然后分成两个快照矩阵来分别代表原始数据的前m列和后m列。之后利用低秩矩阵填充中的映射算子方法生成对应于每一个数据快照矩阵的映射矩阵P,然后将映射矩阵与对应的数据快照矩阵进行点乘操作,最后通过基于动态模式分解方法的模型进行交通预测得到待估计的交通量。
附图说明
图1是利用低秩动态模式分解做交通流预测的整体流程。
具体实施方式
步骤1:通过探测器得到交通数据,处理得到交通矩阵(每一行代表某路段从0时刻到M时刻的交通流量,每一列代表某时刻不同相邻路段的交通流量);
步骤2:将交通矩阵分解为两个数据快照矩阵,得到对应于每一个快照矩阵的映射算子矩阵;
步骤3:利用动态模式分解,结合低秩约束,迭代计算得到两个相邻时间矩阵的关系K,进而进行交通预测。
本发明中所做的所有实验选择了青岛市道路交通探测器于2017年1月份所采集的路段数据。通过青岛市道路探测器所能得到的交通流相关指标有交通流量、速度、密度、车道编号、记录时间等,在本实验中只选择车道编号,路段编号、流量指标。
一共做了以时间间隔为区分指标的三组实验,间隔分别为5分钟、10分钟和20分钟。为了对比不同方法的准确率如何,引入了两个误差指标—平均绝对误差(MeanAbsoluteError,MAE)和均方根误差(RootMean Square Error,RMSE)。两个误差的数学公式为:
其中,predictedt表示t时刻的交通流量预测结果;observedt则表示t时刻的交通流量观测值。
在预测方法上,选择了交通预测领域经典的方法卡尔曼方法以及神经网络并且还利用了在时序方面非常著名的ARIMA模型作为对比实验。同样选择了最近很流行的深度学习方法LSTM(Long Short-Term Memory)进行对比。最后将本发明中的方法与传统的动态模式分解方法进行比较。具体的实验结果如下表所示:
表1基本的DMD相对其它预测方法的误差率对比
表1是传统的动态模式分解和一些常见的交通预测方法的对比结果,不难发现在大多数情况下,动态模式分解方法的误差率均小于其他四种传统的方法,但在个别时刻动态模式分解方法的误差率会略大于ARIMA方法,却仍小于剩下的三种方法,可以分析出动态模式分解在某些情况下对于个别路段的估计值会偏差大于使用其他方法,但是从整体来看预测准确率却是要高于其他方法的。所以整体来看动态模式分解方法是这五种方法中预测准确度最好的。
表2基本的DMD与结合矩阵填充的DMD的误差率对比
表2是传统动态模式分解和本发明提出的方法之间的预测误差率对比,可以发现两者的误差率并没有相差太多,但是本发明中提出的方法误差率无论在哪种情况下误差率都是低于传统的动态模式分解,所以结合了矩阵填充中的映射算子技术的动态模式分解方法要优于传统的动态模式分解方法。
Claims (1)
1.一种基于动态分解模式和矩阵填充的交通流预测方法,该方法包括如下步骤,步骤1:通过探测器得到交通数据,处理得到交通矩阵;每一行代表某路段从0时刻到M时刻的交通流量,每一列代表某时刻不同相邻路段的交通流量;
步骤2:将交通矩阵分解为两个数据快照矩阵,得到对应于每一个快照矩阵的映射算子矩阵;
步骤3:利用动态模式分解,结合低秩约束,迭代计算得到两个相邻时间矩阵的关系K,进而进行交通预测;
假设原始数据中部分发生丢失,则最标准的矩阵填充问题可以利用秩最小化的约束来进行求解,其具体表达内容如下:
其中,rank(X)表示交通矩阵X的秩,PΩ表示数据快照矩阵对应的映射算子,若矩阵中某一位置交通数据已知,则对应的PΩ为1,反之则为0,具体数学表达式为:
式(13)表示若交通矩阵某位置数据为M且该位置未发生丢失,则经过映射算子作用后值认为M;反之为0;
所以交通流预测模型的形式就变成了:
其中,K为相邻时间交通矩阵之间的对应关系矩阵,P1和P2分别是对应数据快照矩阵的两个映射算子矩阵;||K||*代表求解矩阵K的核范数;代表求矩阵的F范数的平方;表示求向量的2范数的平方,Z1,Z2表示交通流的观测数据矩阵,E1,E2代表加在交通矩阵上的噪声矩阵;
预测模型的主要思想就是在确定两个噪声项的关系以及数据快照矩阵之间的对应关系,考虑了交通数据的缺失这一系列约束下,使得K和噪声最小,从而得到准确的交通估计值;
预测模型(14)中关于K的核范数求解先将K表示为L和R的表达形式:K=LR',其中:L∈RN ×r,R∈RN×r;这样处理减少后续相关计算的复杂性;所以K的核范数表示为如下的形式:
所以将模型(14)中所有的K都以L和R的形式进行替换,得到如下模型(16):
将有约束的待求解问题转化为无约束问题,所以引入了拉格朗日算子,模型变成:
其中,令C=R'(P1⊙(Z1+E1)) (18)
H1=P1⊙E1 (19)
H2=P2⊙E2 (20)
其中,C,H1,H2为辅助变量,P,Q,W,A1,A2是拉格朗日乘子,μ,η,ρβ1,β2是增广拉格朗日参数;然后对各个变量分别进行求解,即将所有包含该变量的表达式放到一起并进行计算,具体各个变量的计算过程如下:
变量L的求解:
变量C的求解:
变量R的求解:
变量H1的求解:
变量H2的求解:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811536443.7A CN109584557B (zh) | 2018-12-14 | 2018-12-14 | 一种基于动态分解模式和矩阵填充的交通流预测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811536443.7A CN109584557B (zh) | 2018-12-14 | 2018-12-14 | 一种基于动态分解模式和矩阵填充的交通流预测方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109584557A true CN109584557A (zh) | 2019-04-05 |
CN109584557B CN109584557B (zh) | 2021-02-26 |
Family
ID=65929664
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811536443.7A Active CN109584557B (zh) | 2018-12-14 | 2018-12-14 | 一种基于动态分解模式和矩阵填充的交通流预测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109584557B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110188427A (zh) * | 2019-05-19 | 2019-08-30 | 北京工业大学 | 一种基于非负低秩动态模式分解的交通数据填充方法 |
CN110276113A (zh) * | 2019-06-11 | 2019-09-24 | 嘉兴深拓科技有限公司 | 一种网络结构预测方法 |
CN111105617A (zh) * | 2019-12-19 | 2020-05-05 | 浙大网新系统工程有限公司 | 基于矩阵稳定性分析的智能交通预测系统 |
CN111259328A (zh) * | 2020-01-16 | 2020-06-09 | 东南大学 | 一种自由振动位移响应驱动的航天器结构非线性特征检测方法 |
CN113506440A (zh) * | 2021-09-08 | 2021-10-15 | 四川国蓝中天环境科技集团有限公司 | 一种拉格朗日坐标系下多源数据融合的交通状态估计方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103136239A (zh) * | 2011-11-29 | 2013-06-05 | 北京理工大学 | 一种基于张量重建的交通数据丢失恢复方法 |
CN105279964A (zh) * | 2015-08-07 | 2016-01-27 | 北京工业大学 | 一种基于低秩算法的路网交通数据的补全方法 |
CN106548016A (zh) * | 2016-10-24 | 2017-03-29 | 天津大学 | 基于张量时域相关性分解模型的时间序列分析方法 |
CN107610464A (zh) * | 2017-08-11 | 2018-01-19 | 河海大学 | 一种基于高斯混合时间序列模型的轨迹预测方法 |
CN107992536A (zh) * | 2017-11-23 | 2018-05-04 | 中山大学 | 基于张量分解的城市交通缺失数据填补方法 |
CN108010320A (zh) * | 2017-12-21 | 2018-05-08 | 北京工业大学 | 一种基于自适应时空约束低秩算法的路网交通数据的补全方法 |
-
2018
- 2018-12-14 CN CN201811536443.7A patent/CN109584557B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103136239A (zh) * | 2011-11-29 | 2013-06-05 | 北京理工大学 | 一种基于张量重建的交通数据丢失恢复方法 |
CN105279964A (zh) * | 2015-08-07 | 2016-01-27 | 北京工业大学 | 一种基于低秩算法的路网交通数据的补全方法 |
CN106548016A (zh) * | 2016-10-24 | 2017-03-29 | 天津大学 | 基于张量时域相关性分解模型的时间序列分析方法 |
CN107610464A (zh) * | 2017-08-11 | 2018-01-19 | 河海大学 | 一种基于高斯混合时间序列模型的轨迹预测方法 |
CN107992536A (zh) * | 2017-11-23 | 2018-05-04 | 中山大学 | 基于张量分解的城市交通缺失数据填补方法 |
CN108010320A (zh) * | 2017-12-21 | 2018-05-08 | 北京工业大学 | 一种基于自适应时空约束低秩算法的路网交通数据的补全方法 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110188427A (zh) * | 2019-05-19 | 2019-08-30 | 北京工业大学 | 一种基于非负低秩动态模式分解的交通数据填充方法 |
CN110188427B (zh) * | 2019-05-19 | 2023-10-27 | 北京工业大学 | 一种基于非负低秩动态模式分解的交通数据填充方法 |
CN110276113A (zh) * | 2019-06-11 | 2019-09-24 | 嘉兴深拓科技有限公司 | 一种网络结构预测方法 |
CN111105617A (zh) * | 2019-12-19 | 2020-05-05 | 浙大网新系统工程有限公司 | 基于矩阵稳定性分析的智能交通预测系统 |
CN111105617B (zh) * | 2019-12-19 | 2020-11-27 | 浙大网新系统工程有限公司 | 基于矩阵稳定性分析的智能交通预测系统 |
CN111259328A (zh) * | 2020-01-16 | 2020-06-09 | 东南大学 | 一种自由振动位移响应驱动的航天器结构非线性特征检测方法 |
CN113506440A (zh) * | 2021-09-08 | 2021-10-15 | 四川国蓝中天环境科技集团有限公司 | 一种拉格朗日坐标系下多源数据融合的交通状态估计方法 |
CN113506440B (zh) * | 2021-09-08 | 2021-11-30 | 四川国蓝中天环境科技集团有限公司 | 一种拉格朗日坐标系下多源数据融合的交通状态估计方法 |
Also Published As
Publication number | Publication date |
---|---|
CN109584557B (zh) | 2021-02-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109584557A (zh) | 一种基于动态分解模式和矩阵填充的交通流预测方法 | |
CN107451102B (zh) | 一种基于改进自训练算法的半监督高斯过程回归软测量建模对脱丁烷塔底丁烷浓度进行预测的方法 | |
Li et al. | Applying various algorithms for species distribution modelling | |
EP3514823A2 (en) | Machine learning-based semiconductor manufacturing yield prediction system and method | |
CN108062561A (zh) | 一种基于长短时记忆网络模型的短时数据流预测方法 | |
CN107274020B (zh) | 一种基于协同过滤思想的学习者学科总测成绩预测系统及方法 | |
CN108664690A (zh) | 基于深度信念网络的多应力下长寿命电子器件可靠性寿命评估方法 | |
CN107168063B (zh) | 基于集成变量选择型偏最小二乘回归的软测量方法 | |
CN111199270A (zh) | 一种基于深度学习的区域波高预报方法及终端 | |
CN105654117A (zh) | 基于sae深度网络的高光谱图像空谱联合的分类方法 | |
CN107491793B (zh) | 一种基于稀疏散射全卷积的极化sar图像分类方法 | |
CN106548016A (zh) | 基于张量时域相关性分解模型的时间序列分析方法 | |
CN104008420A (zh) | 一种基于自动编码机的分布式离群点检测方法及系统 | |
CN109981749A (zh) | 一种基于极限梯度提升的云工作流任务执行时间预测方法 | |
CN108229300A (zh) | 视频分类方法、装置、计算机可读存储介质和电子设备 | |
CN105334504A (zh) | 基于大边界的非线性判别投影模型的雷达目标识别方法 | |
CN114492150A (zh) | 一种基于数字孪生体的配电网典型业务场景预警方法 | |
CN117235510A (zh) | 节理粗糙度预测方法与节理粗糙度预测模型训练方法 | |
Gorelova et al. | Strategy of complex systems development based on the synthesis of foresight and cognitive modelling methodologies | |
Saluja et al. | Original Research Article Designing new student performance prediction model using ensemble machine learning | |
Febvre et al. | Training neural mapping schemes for satellite altimetry with simulation data | |
Tiwari et al. | Bayesian neural network modeling of tree-ring temperature variability record from the Western Himalayas | |
CN117636467A (zh) | 一种动作质量的评估方法、装置、电子设备及存储介质 | |
CN117271979A (zh) | 一种基于深度学习的赤道印度洋表层海流流速预测方法 | |
Ju et al. | Object detection for similar appearance objects based on entropy |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |