一种基于3DQN_PSER算法的单交叉口信号控制方法

摘要

本发明涉及一种基于3DQN_PSER算法的单交叉口信号控制方法，本发明结合典型单交叉路口的特点并遵循信号控制基本原则，在离散交通状态编码的基础上增加信号灯状态；并引入动作奖惩系数来满足最小最大绿灯时间约束；还采用排队长度、累计等待时间、刹车次数和相位是否切换进行多指标系数加权奖励。在此基础上，考虑到交通流数据和信号方案之间存在时序相关性，采用基于优先序列经验重放的方式来更新经验池中的样本数据优先级，并通过双Q网络来调整Q值的选择，以及使用竞争架构Q网络来微调网络结构。本发明克服了原有的单一状态设计的局限性问题，通过信号控制，可以大大缓解交通拥堵问题。