基于联邦强化学习的多路口智能交通信号灯控制方法及系统

发明专利有效专利

申请号：
CN202110779122.5
IPC分类号：G08G1/07;G06F30/27;G06N3/04;G06N3/08;G08G1/01;G08G1/08;G08G1/095
申请日期：
2021-07-09
申请人：
华东师范大学

基础信息

权利要求

说明书

PDF全文

法律信息

引证文献

著录项信息

专利名称	基于联邦强化学习的多路口智能交通信号灯控制方法及系统
申请号	CN202110779122.5	申请日期	2021-07-09
法律状态	公开	申报国家	中国
公开/公告日	2021-11-12	公开/公告号	CN113643553A
优先权	暂无	优先权号	暂无
主分类号	G08G1/07 ? IPC结构图谱： G 物理 G0 仪器 G08 信号装置 G08G 交通控制系统（指导铁路交通，保证铁路交通安全的入B61L；专用于交通控制的雷达或类似系统、声纳系统或激光雷达系统入G01S 13/91、G01S 15/88、G01S 17/88；专用于防碰撞目的的雷达或类似系统、声纳系统或激光雷达系统入G01S 13/93、G01S 15/93、G01S 17/93；陆地、水上、空中或太空中的运载工具的位置、航道、高度或姿态的控制，不限于交通环境入G05D 1/00）〔2〕 G08G1/00 道路车辆的交通控制系统（道路标志或交通信号装置入E01F 9/00） G08G1/07 交通信号控制	IPC分类号	G;0;8;G;1;/;0;7;;;G;0;6;F;3;0;/;2;7;;;G;0;6;N;3;/;0;4;;;G;0;6;N;3;/;0;8;;;G;0;8;G;1;/;0;1;;;G;0;8;G;1;/;0;8;;;G;0;8;G;1;/;0;9;5查看分类表>
申请人	华东师范大学	申请人地址	上海市闵行区东川路500号变更专利地址、主体等相关变化，请及时变更，防止失效
权利人	华东师范大学	当前权利人	华东师范大学
发明人	陈铭松;叶豫桐;赵吴攀
代理机构	上海德禾翰通律师事务所	代理人	夏思秋

摘要

本发明提出了一种基于联邦强化学习的多路口智能交通信号灯控制方法，主要包含以下几方面的内容：步骤1：通过对真实路口的精准建模，使用交通模拟软件Cityflow对城市交通和交通流量进行模拟。步骤2：每个强化学习智能体使用Advantage Actor‑Critic(A2C)强化学习算法，根据路口车流情况对交通信号灯实时控制，每个交叉路口的强化学习智能体由云服务器协调训练；步骤3：提出一种新的基于云‑边协同的联邦强化学习框架；步骤4：引入类似联邦学习的梯度共享与参数传递过程，在强化学习智能体之间实现知识共享。本发明还提出了一种基于联邦强化学习的多路口智能交通信号灯控制系统。本发明法不仅在车辆平均行驶时间方面取得了较好的控制效果，而且能快速收敛到全局最优解。

序号	公开(公告)号	公开(公告)日	申请日	专利名称	申请人
该专利没有引用任何外部专利数据！

序号	公开(公告)号	公开(公告)日	申请日	专利名称	申请人
该专利没有被任何外部专利所引用！

我浏览过的专利

专利服务由北京酷爱智慧知识产权代理公司提供