基于分布式深度循环Q网络的交通灯控制方法

作者:方敏; 闫呈祥; 徐维; 陈烨; 徐筱; 李海昆
来源:2019-06-21, 中国, CN201910545162.6.

摘要

本发明公开了一种基于分布式深度循环Q网络的交通灯控制方法,主要解决现有技术难以实现多路口之间协作及对多路口建模出现状态空间过大的问题。其实现方案是:1)读取城市交通路网信息,建立各个路口的车辆交通状态集合,并采用协作图的方法将读取的城市交通路网信息转换为邻接矩阵进行存储;2)根据路网中的车辆等待时间和车辆到达目的地数量,设置通用的性能评价指标;3)从各个路口车辆交通状态集合中获取各个路口各时刻的状态集、动作集和动作奖励值;4)建立分布式深度循环Q网络交通灯控制模型,根据该模型对城市路网交通灯进行控制。本发明能实现各路口之间的协作,避免了状态空间爆炸问题,可用于城市交通管理,减少城市交通拥堵。