基于强化学习的综合能源系统多目标能量管理研究

目录

声明

摘要

第1章绪论

1．1课题研究的背景及意义

1．1．1综合能源系统的发展

1．1．2研究意义

1．2研究现状

1．2．1能量管理研究现状

1．2．2强化学习研究现状

1．3本文主要研究思路与内容

第2章综合能源系统模型及其评价体系的建立

2．1独立型单元模型的建立

2．1．1光伏组件模型

2．1．2蓄电池模型

2．1．3热力管网模型

2．1．4天然气管网模型

2．2耦合设备模型的建立

2．2．2电-气-热耦合设备模型

2．3评价体系的建立

2．3．1经济成本

2．3．2环境成本

2．4本章小结

第3章综合能源系统能量管理优化策略

3．1能量管理的多目标决策方法

3．2优化设计模型

3．2．1综合能源系统的构建及其运行分析

3．2．2优化目标函数

3．2．3约束条件

3．3求解算法

3．3．1马尔科夫决策过程

3．3．2 Q学习算法

3．3．3能量管理的Q学习模型

3．3．4基于Q学习的能量管理流程

3．4算例分析

3．4．1无储能设备的综合能源系统能量管理策略

3．4．2含电储能设备的综合能源系统能量管理策略

3．4．3多目标耦合关系分析

3．4．4 Q学习算法收敛性分析

3．5本章小结

第4章基于自适应Q学习的综合能源系统能量管理

4．1基于变学习率Q学习算法的能量管理策略

4．1．1变步长方法

4．1．2变学习率Q学习算法

4．1．3变学习率Q学习算法能量管理流程

4．1．4算例分析

4．2基于自适应Q学习算法的能量管理策略

4．2．1值函数拟合

4．2．2自适应Q学习算法

4．2．3自适应Q学习算法能量管理流程

4．2．4算例分析

4．3本章小结

第5章总结与展望

5．1结论

5．2展望

参考文献

致谢

攻读硕士期间所发表论文