CN113503888A - 一种基于交通信息物理系统的动态路径引导方法 - Google Patents

一种基于交通信息物理系统的动态路径引导方法 Download PDF

Info

Publication number
CN113503888A
CN113503888A CN202110780421.0A CN202110780421A CN113503888A CN 113503888 A CN113503888 A CN 113503888A CN 202110780421 A CN202110780421 A CN 202110780421A CN 113503888 A CN113503888 A CN 113503888A
Authority
CN
China
Prior art keywords
time
road
action
road section
guidance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110780421.0A
Other languages
English (en)
Inventor
陈卓然
韩定定
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fudan University
Original Assignee
Fudan University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fudan University filed Critical Fudan University
Priority to CN202110780421.0A priority Critical patent/CN113503888A/zh
Publication of CN113503888A publication Critical patent/CN113503888A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/3407Route searching; Route guidance specially adapted for specific applications
    • G01C21/343Calculating itineraries, i.e. routes leading from a starting point to a series of categorical destinations using a global route restraint, round trips, touristic trips
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/3446Details of route searching algorithms, e.g. Dijkstra, A*, arc-flags, using precalculated routes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/3453Special cost functions, i.e. other than distance or default speed limit of road segments
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/3453Special cost functions, i.e. other than distance or default speed limit of road segments
    • G01C21/3492Special cost functions, i.e. other than distance or default speed limit of road segments employing speed data or traffic data, e.g. real-time or historical
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0968Systems involving transmission of navigation instructions to the vehicle
    • G08G1/096833Systems involving transmission of navigation instructions to the vehicle where different aspects are considered when computing the route
    • G08G1/096844Systems involving transmission of navigation instructions to the vehicle where different aspects are considered when computing the route where the complete route is dynamically recomputed based on new data

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明公开了一种基于交通信息物理系统的动态路径引导方法,能够减少车辆通行时间、提升道路通行能力、更为充分地利用路网资源,给出了一种利用Q‑learning进行动态路径引导方法,该方法在综合利用实时道路信息(平均通行时间)和车辆信息(所处位置和目的地)的基础上,动态更新奖赏和Q值表,并依据引导方式和频率利用最大化值函数给出最佳路径。最后对该引导方法进行了仿真验证,有效提高了道路网络的通行能力。

Description

一种基于交通信息物理系统的动态路径引导方法
技术领域
本发明属于信息物理系统领域,涉及一种基于交通信息物理系统的动态路径引导方法。在综合利用实时道路信息(平均通行时间)和车辆信息(所处位置和目的地)的基础上,动态利用路径引导策略,减少道路通行时间、提升道路通行能力、更为充分地利用路网资源。
背景技术
近年来,随着物联网和大数据技术的快速发展,城市交通问题的治理方案不断推陈出新。交通系统中,道路和车辆上的监控和传感设备收集的大量信息,经过实时的处理和分析可用于描述道路和车辆的状态和动态行为,通过在线模型及时决策和规划能充分利用交通系统资源、提高道路通行能力。信息物理系统(Cyber-Physical Systems,CPS)可用于管理此类大数据架构。CPS集成了感知、计算、通信、控制等技术,实现了信息空间和物理空间中人、机、物、环境、信息等要素的相互映射、适时交互、相互协同,应用范围涵盖了智能电网等能源与资源分配网络、智能汽车与交通网络、医疗护理、环境监测与灾害响应、机器人团体协作、工业自动化等众多领域。
可靠、有效的实时交通信息在CPS感知、计算、决策、执行过程中的闭环流通,提高了城市交通系统的服务质量,例如其关键服务之一的动态路径引导。动态路径引导,一方面可以考虑通过实时信息对道路中的拥堵迹象进行判断、平衡路网中交通负荷,另一方面可以考虑将Dijkstra最短路径方法作用于实时更新的拓扑。
目前已有不少基于交通信息物理系统(Transportation CPS,TCPS)在动态路径引导方面的尝试,如利用物联网技术从路段和车辆中采集和聚合实时数据并将短期交通预测与实时路径优化相结合,增强路段与车辆之间的协作;研究由物理交通系统和与其相当的人工交通系统组成的并行智能交通系统,用大量的长期迭代模拟来预测和分析预期的操作结果;考虑道路长度、天气状况、事故等综合成本的最小化,将路网建模为一个不断更新的加权有向图,根据时间表用综合成本最小化策略和最快策略进行引导等。
但现有的方法往往只为单一车辆的出行推荐最优路线,未考虑不同车辆采取相同路径后的可能会导致潜在的交通拥堵。在实时全局交通信息已知的情况下,如何以合适的频率对出行个体进行引导,如何权衡全局和个体,或许会是未来城市交通系统面临的挑战。
发明内容
本发明提供了一种基于交通信息物理系统的动态路径引导方法。其目的是,在综合利用实时道路信息(平均通行时间)和车辆信息(所处位置和目的地)的基础上,动态利用路径引导策略,减少道路通行时间、提升道路通行能力、更为充分地利用路网资源。
本发明的具体技术方案是:
一种基于交通信息物理系统的动态路径引导方法,特点是:该方法包括以下具体步骤:
步骤1:获取车辆目的地和当前位置,创建或维护Q值表,具体包括:获取车辆目的地所在路段编号,查询有无该编号所对应的Q值表,若存在则维护Q值表,不存在则创建Q值表;获取车辆当前位置所在的路段编号作为状态x,将能够驶入的路段作为当前状态的动作空间A,补充Q值表中当前位置到目的地范围内路段的动作空间;
步骤2:实时获取路段的平均通行时间更新奖赏,具体包括:
实时获取动作空间的动作驶入路段的平均通行时间;获取车辆的当前位置和目的地所在路段编号,判断当前位置的动作空间中的动作a驶入的下一个路段是否是目的地所在路段,若是目的地所在路段则足够大的正数更新奖赏(该奖赏取决于实际路网规模,应保证Q值为正),否则以动作驶入的路段的平均通行时间作为惩罚:
Figure BDA0003156570730000021
j是动作a驶入的下一路段的编号,i→j表示从路段i驶入路段j,
Figure BDA0003156570730000022
表示采取动作从路段i驶入路段j的奖赏,ATT是道路平均通行时间:
Figure BDA0003156570730000023
l为当前道路长度,
Figure BDA0003156570730000024
为当前路段i上所有车辆的平均速度,;步骤3:根据奖赏更新Q值表
Figure BDA0003156570730000025
t为当前时刻,t+1为下一时刻,x′是在状态x执行动作a后转移的状态,a′是在x′上基于策略π选择的动作,
Figure BDA0003156570730000026
是道路x到道路编号x’的动作的奖赏,α和γ分别为学习率和折扣因子,其中策略π通常采用ε-贪婪:
Figure BDA0003156570730000027
其中,ε为采用随机探索的可能性,取值[0,1];
步骤4:选择引导方式和时间间隔,具体包括:
1)静态引导:只根据静态路网信息,用最短路径方法生成时间最短路径;
2)一次性动态引导:只在车辆进入路网时,根据该时刻的实时交通信息进行一次引导;
3)周期性同时引导:按时间间隔τ,对路网中所有车辆同时进行引导;
4)周期性各自引导:从车辆各自发车时刻开始,按时间间隔τ进行单独引导;
步骤5:依据Q值表、最大化值策略引导车辆,具体包括:
π(x)=argmaxa″Q(x,a″)
a″属于当前状态的动作空间;
步骤6:通过平均通行时间和平均行驶距离评价网络整体性能,具体包括:
获取经过引导的所有车辆从出发位置到目的地的通行时间和行驶距离,求平均。
本发明的有益效果:本发明提出了一种基于交通信息物理系统的动态路径引导方法,通过结合实时道路平均行驶时间以及车辆位置和目的地等实时交通信息,考虑一次性引导、周期性同时引导和周期性各自引导等三种引导方式。对比基于静态拓扑信息的最短通行时间路径引导策略,本发明提出的动态路径引导策略减少了通行时间、提高了道路通行能力、能够更为充分地利用路网资源。
附图说明
图1是本发明的交通信息物理系统框架图;
图2是本发明的动态路径引导流程图;
图3是本发明的具体实施案例中仿真的路网示意图;
图4是本发明具体实施例中周期性同时引导和周期性各自引导在不同时间间隔下平均通行时间、平均等待时间和平均行驶距离的示意图;
图5是本发明具体实施例中周期性同时引导路网中车数、周期性各自引导路网中车数、周期性同时引导到达车辆平均行驶时间和周期性各自引导到达车辆平均行驶时间随仿真时间的变化趋势示意图;
图6是本发明具体实施例中静态引、一次性引导、周期性同时引导和周期性各自引导的总通行时间、等待时间及非等待时间与到达次序的关系示意图。
具体实施方式
为了使本发明所要解决的技术问题、技术方案及发明优点更加清楚明白,以下结合附图及实施例,对本发明进行详细的说明。应当说明的是,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
本发明提供了一种基于交通信息物理系统(图1)的动态路径引导方法。其目的是,在综合利用实时道路信息(平均通行时间)和车辆信息(所处位置和目的地)的基础上,动态利用路径引导策略,减少道路通行时间、提升道路通行能力、更为充分地利用路网资源,缓解静态引导可能的潜在拥堵问题。通过在微观交通仿真器SUMO中进行仿真,分析不同方式和引导时间间隔下的平均通行时间和行驶距离等指标,和静态引导方法进行对比,验证动态路径方法的有效性。
实施例
本实施例的所有结果均是在内存8GB,64位Windows10操作系统,SUMO 1.6.0实验环境下获得的。仿真中道路网络为一个6×3的东西向和南北向路段长分别为200m和100m的矩形网络如图3所示,路口无信号灯、采用默认的南北优先。以最小时间间隔从A1B1到E1F1输入100辆车,采用默认的Krauss car-following模型。
参阅图2,本实施例具体步骤如下:
步骤1:获取车辆目的地和当前位置,创建或维护Q值表,具体包括:获取车辆目的地所在路段编号,查询有无该编号所对应的Q值表,若存在则维护Q值表,不存在则创建Q值表;获取车辆当前位置所在的路段编号作为状态x,将能够驶入的路段作为当前状态的动作空间A,补充Q值表中当前位置到目的地范围内路段的动作空间;
步骤2:实时获取路段的平均通行时间更新奖赏,具体包括:
实时获取动作空间的动作驶入路段的平均通行时间;获取车辆的当前位置和目的地所在路段编号,判断当前位置的动作空间中的动作a驶入的下一个路段是否是目的地所在路段,若是目的地所在路段则足够大的正数更新奖赏(该奖赏取决于实际路网规模,应保证Q值为正),否则以动作驶入的路段的平均通行时间作为惩罚:
Figure BDA0003156570730000041
j是动作a驶入的下一路段的编号,i→j表示从路段i驶入路段j,
Figure BDA0003156570730000042
表示采取动作从路段i驶入路段j的奖赏,ATT是道路平均通行时间:
Figure BDA0003156570730000043
l为当前道路长度,
Figure BDA0003156570730000044
为当前路段i上所有车辆的平均速度,;步骤3:根据奖赏更新Q值表
Figure BDA0003156570730000045
t为当前时刻,t+1为下一时刻,x′是在状态x执行动作a后转移的状态,a′是在x′上基于策略π选择的动作,
Figure BDA0003156570730000046
是道路x到道路编号x’的动作的奖赏,α和γ分别为学习率和折扣因子,其中策略π通常采用ε-贪婪:
Figure BDA0003156570730000047
其中,ε为采用随机探索的可能性,取值[0,1];
步骤4:选择引导方式和时间间隔,具体包括:
1)静态引导:只根据静态路网信息,用最短路径方法生成时间最短路径;
2)一次性动态引导:只在车辆进入路网时,根据该时刻的实时交通信息进行一次引导;
3)周期性同时引导:按时间间隔τ,对路网中所有车辆同时进行引导;
4)周期性各自引导:从车辆各自发车时刻开始,按时间间隔τ进行单独引导;
步骤5:依据Q值表、最大化值策略引导车辆,具体包括:
π(x)=argmaxa″Q(x,a″)
a″属于当前状态的动作空间;
步骤6:通过平均通行时间和平均行驶距离评价网络整体性能,具体包括:
获取经过引导的所有车辆从出发位置到目的地的通行时间和行驶距离,求平均。
参阅图4,图(a)是周期性同时引导在不同时间间隔下平均通行时间、平均等待时间和平均行驶距离的示意图;图(b)是周期性各自引导在不同时间间隔下平均通行时间、平均等待时间和平均行驶距离的示意图。
不同时间间隔τ对动态路径引导的影响。τ越小,引导越频繁;τ越大,车辆上一次引导的保持时间越长。受限于路网大小,τ>30时,在周期性同时引导中会出现尚未对车辆进行引导车辆就已驶入坑洼路段的情况。因此取τ=1,2,3,...,30。注意到,同时引导和各自引导在τ=1时是等价的,因此两子图在τ=1的数值相同。
车辆的平均行驶距离反应了整体的博弈的强度。随着τ的增大,引导频率降低,车辆维持上一次引导的时间变长,平均行驶距离整体呈现下降趋势,博弈强度减小。其中,同时引导的博弈强度随着τ的下降速度更快。考虑到同时引导会使处于相同状态即位于同一条道路上的车辆采取相同动作,当τ较大时,同时引导更容易形成车队。而引导一旦采取了与τ时刻前不同的动作路径,在引导的早期阶段一般都是博弈行为,博弈的结果是路径经过优先级较高的南北向。此时同时引导因为产生车队,在优先级的路口更具有竞争优势,能够较快通行、减少行驶距离;但产生的后果是会有车队整体被更高优先级路口的其他车队较长时间截断,因此即使行驶距离降低较快,但在平均通行时间和等待时间上并无明显优势。各自引导可视为批次的同时引导,因此在频率较大或较小,即τ<13或τ>23时,不同批次的车辆实际上所处的状态在引导早期阶段基本相同,效果和同时引导相近;在τ=15左右时,各自引导呈现出对交通信息更为敏感的特性,平均行驶距离较长、平均等待时间较长,表明其充分利用了路网资源但又受限于路口优先级。
参阅图5,图(a)是本发明具体实施例中周期性同时引导路网中车数变化趋势示意图;图(b)是本发明具体实施例中周期性各自引导路网中车数变化趋势示意图;图(c)是周期性同时引导到达车辆平均行驶时间的变化趋势示意图;图(d)是周期性各自引导到达车辆平均行驶时间随仿真时间的变化趋势示意图。
动态路径引导都明显优于静态路径引导,能够明显减少路网中车辆数量,降低所有车辆通过路网的用时;到达车辆的平均行驶时间呈上升趋势,意味着车辆在交叉口的等待是影响其通过路网用时的主要因素之一。
参阅图6,图(a)、(b)、(c)、(d)分别是本发明的具体实施例中静态引导、一次性引导、周期性同时引导和周期性各自引导的总通行时间、等待时间及非等待时间与到达次序的关系示意图。
静态引导的车辆全体经过了坑洼路段,整个过程车流没有停滞,但前60辆车的用时不断增加,说明车队在行驶过程中会受到驾驶员差异的影响。图6(b)(c)(d)中,非等待时间均处于[100,200]区间内,说明当车辆运动时,基本上以较快速度行驶,其通行时间差异主要由等待时间引起。一次性引导中,最后到达的一部分车辆都经历了长时间等待;而周期性引导通过基于实时交通信息的多次引导能缓解这部分潜在的拥堵,这也是周期性引导在平均通行时间上优于一次性引导的原因。另外,如图6(d)所示,各自引导的等待时间呈现多个尖峰中,说明有个别车辆的经历了长时间的等待,成为引导过程中的信息敏感性对出行个体带来的不稳定性的牺牲品。

Claims (1)

1.一种基于交通信息物理系统的动态路径引导方法,其特征在于,该方法包括如下具体步骤:
步骤1:获取车辆目的地和当前位置,创建或维护Q值表,具体包括:
获取车辆目的地所在路段编号,查询有无该编号所对应的Q值表,若存在则维护Q值表,不存在则创建Q值表;获取车辆当前位置所在的路段编号x作为状态,将能够驶入的路段作为当前状态的动作空间A,补充Q值表中当前位置到目的地范围内路段的动作空间;
步骤2:实时获取路段的平均通行时间更新奖赏,具体包括:
实时获取动作空间的动作a驶入路段的平均通行时间;获取车辆的当前位置和目的地所在路段编号,判断当前位置的动作空间中的动作驶入的下一个路段是否是目的地所在路段,若是目的地所在路段则足够大的正数更新奖赏,该奖赏取决于实际路网规模,应保证Q值为正,否则以动作驶入的路段的平均通行时间作为惩罚:
Figure FDA0003156570720000011
j是动作a驶入的下一路段的编号,i→j表示从路段i驶入路段j,
Figure FDA0003156570720000012
表示采取动作从路段i驶入路段j的奖赏,ATT是道路平均通行时间:
Figure FDA0003156570720000013
l为当前道路长度,
Figure FDA0003156570720000014
为当前路段i上所有车辆的平均速度;
步骤3:根据奖赏更新Q值表
Figure FDA0003156570720000015
t为当前时刻,t+1为下一时刻,x′是在状态x执行动作a后转移的状态,a′是在x′上基于策略π选择的动作,
Figure FDA0003156570720000016
是路段编号x到路段编号x’的动作的奖赏,α和γ分别为学习率和折扣因子,其中策略π通常采用ε-贪婪:
Figure FDA0003156570720000017
其中,ε为采用随机探索的可能性,取值[0,1];
步骤4:选择引导方式和时间间隔,具体包括:
1)静态引导:只根据静态路网信息,用最短路径方法生成时间最短路径;
2)一次性动态引导:只在车辆进入路网时,根据该时刻的实时交通信息进行一次引导;
3)周期性同时引导:按时间间隔τ,对路网中所有车辆同时进行引导;
4)周期性各自引导:从车辆各自发车时刻开始,按时间间隔τ进行单独引导;
步骤5:依据Q值表、最大化值策略引导车辆,具体包括:
π(x)=argmaxa″Q(x,a″)
a″属于当前状态的动作空间;
步骤6:通过平均通行时间和平均行驶距离评价网络整体性能,具体包括:
获取经过引导的所有车辆从出发位置到目的地的通行时间和行驶距离,求平均。
CN202110780421.0A 2021-07-09 2021-07-09 一种基于交通信息物理系统的动态路径引导方法 Pending CN113503888A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110780421.0A CN113503888A (zh) 2021-07-09 2021-07-09 一种基于交通信息物理系统的动态路径引导方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110780421.0A CN113503888A (zh) 2021-07-09 2021-07-09 一种基于交通信息物理系统的动态路径引导方法

Publications (1)

Publication Number Publication Date
CN113503888A true CN113503888A (zh) 2021-10-15

Family

ID=78012569

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110780421.0A Pending CN113503888A (zh) 2021-07-09 2021-07-09 一种基于交通信息物理系统的动态路径引导方法

Country Status (1)

Country Link
CN (1) CN113503888A (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106411749A (zh) * 2016-10-12 2017-02-15 国网江苏省电力公司苏州供电公司 一种基于q学习的用于软件定义网络的路径选择方法
CN108847037A (zh) * 2018-06-27 2018-11-20 华中师范大学 一种面向非全局信息的城市路网路径规划方法
CN109238297A (zh) * 2018-08-29 2019-01-18 沈阳理工大学 一种用户最优及系统最优的动态路径选择方法
CN109269516A (zh) * 2018-08-29 2019-01-25 沈阳理工大学 一种基于多目标Sarsa学习的动态路径诱导方法
CN109579861A (zh) * 2018-12-10 2019-04-05 华中科技大学 一种基于强化学习的路径导航方法及系统
CN111091711A (zh) * 2019-12-18 2020-05-01 上海天壤智能科技有限公司 基于强化学习和交通车道竞争理论的交通控制方法及系统
CN111898211A (zh) * 2020-08-07 2020-11-06 吉林大学 基于深度强化学习的智能车速度决策方法及其仿真方法
CN112116129A (zh) * 2020-08-24 2020-12-22 中山大学 一种基于深度强化学习的动态路径优化问题求解方法
CN112417753A (zh) * 2020-11-04 2021-02-26 中国科学技术大学 一种基于城市公共交通资源联合调度方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106411749A (zh) * 2016-10-12 2017-02-15 国网江苏省电力公司苏州供电公司 一种基于q学习的用于软件定义网络的路径选择方法
CN108847037A (zh) * 2018-06-27 2018-11-20 华中师范大学 一种面向非全局信息的城市路网路径规划方法
CN109238297A (zh) * 2018-08-29 2019-01-18 沈阳理工大学 一种用户最优及系统最优的动态路径选择方法
CN109269516A (zh) * 2018-08-29 2019-01-25 沈阳理工大学 一种基于多目标Sarsa学习的动态路径诱导方法
CN109579861A (zh) * 2018-12-10 2019-04-05 华中科技大学 一种基于强化学习的路径导航方法及系统
CN111091711A (zh) * 2019-12-18 2020-05-01 上海天壤智能科技有限公司 基于强化学习和交通车道竞争理论的交通控制方法及系统
CN111898211A (zh) * 2020-08-07 2020-11-06 吉林大学 基于深度强化学习的智能车速度决策方法及其仿真方法
CN112116129A (zh) * 2020-08-24 2020-12-22 中山大学 一种基于深度强化学习的动态路径优化问题求解方法
CN112417753A (zh) * 2020-11-04 2021-02-26 中国科学技术大学 一种基于城市公共交通资源联合调度方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
KOH SONG SANG,ET AL: "Reinforcement Learning for Vehicle Route Optimization in SUMO", 《2018 IEEE 20TH INTERNATIONAL CONFERENCE ON HIGH PERFORMANCE COMPUTING AND COMMUNICATIONS》 *
姜成友: "基于深度强化学习的路径诱导算法研究", 《中国优秀博硕士学位论文全文数据库(硕士) 工程科技Ⅱ辑》 *
彭理群等: "基于Q-learning的定制公交跨区域路径规划研究", 《交通运输系统工程与信息》 *

Similar Documents

Publication Publication Date Title
Qadri et al. State-of-art review of traffic signal control methods: challenges and opportunities
US20220374712A1 (en) Decision making for motion control
CN109959388B (zh) 一种基于栅格扩展模型的智能交通精细化路径规划方法
EP3035314B1 (en) A traffic data fusion system and the related method for providing a traffic state for a network of roads
CN108873905A (zh) 自动驾驶车辆控制方法、自动驾驶车辆及可读存储介质
EP2973494A1 (en) Lane-level vehicle navigation for vehicle routing and traffic management
Mikluščák et al. Using neural networks for route and destination prediction in intelligent transport systems
CN110021161B (zh) 一种交通流向的预测方法及系统
Rida et al. Ant colony optimization for real time traffic lights control on a single intersection
Yu et al. State-of-the-art review on traffic control strategies for emergency vehicles
CN112309138A (zh) 交通信号控制方法、装置、电子设备及可读存储介质
CN109489679A (zh) 一种导航路径中的到达时间计算方法
CN115062202A (zh) 驾驶行为意图及轨迹的预测方法、装置、设备及存储介质
CN117746640B (zh) 一种道路交通车流量滚动预测方法、系统、终端及介质
Maiti et al. Ad-hoc platoon formation and dissolution strategies for multi-lane highways
CN113503888A (zh) 一种基于交通信息物理系统的动态路径引导方法
Bailey et al. Comasig: a collaborative multi-agent signal control to support senior drivers
CN114413923B (zh) 一种行驶路线推荐方法、装置、存储介质及系统
Habibi et al. Improvement of Multi-agent Routing Guidance with an Intelligent Traffic Light Scheduling and the Ability to Select Intermediate Destinations
JP2023005015A (ja) 交通状況予測装置、および、交通状況予測方法
CN110853346B (zh) 交叉路口的车流控制方法和系统
JP2023092971A (ja) 交通状況予測装置、および、交通状況予測方法
Kutty et al. Optimizing university campus shuttle bus congestion focusing on system effectiveness and reliability: A combined modeling based-routing approach
Pourmehrab et al. Real-time Intersection Optimization for Signal Phasing, Timing, and Automated Vehicles' Trajectories
Ni et al. A comparative analysis of information provision strategies for parking variable message sign display problems

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20211015

RJ01 Rejection of invention patent application after publication