马尔可夫决策过程在无线缓存网络中的应用

目录

第1 章绪 论

1.1 课题背景及研究的目的和意义

1.2 无线缓存技术的研究现状

1.2.1 缓存节点中文件的放置

1.2.2 给定文件放置情况下的文件传递设计

1.2.3 文件放置和文件传递的联合设计

1.3 马尔可夫决策过程的研究现状

1.4 本文的贡献

第2 章无线缓存网络的系统架构

2.1 引言

2.2 启用缓存节点的无线网络模型

2.3 物理层模型

2.4 缓存文件的动态变化

2.5 系统状态和调度策略

2.6 本章小结

第3 章动态规划问题的建模和最优无线缓存资源调度算法设计

3.1 引言

3.2 动态规划问题的建模

3.3 最优调度策略的结构

3.4 渐进最优的多播功率和多播符号数量分配结构

3.5 本章小结

第4 章低复杂度无线资源调度算法设计

4.1 引言

4.2 减少阶段数的灵活近似框架

4.3 线性近似值函数

4.3.1缓存节点未覆盖区域平均传输代价的近似

4.3.2 高热门程度文件所对应的值函数近似

4.3.3 低热门程度文件所对应的值函数近似

4.3.4 值函数近似过程总结与复杂度分析

4.4 值函数的上界和下界

4.4.1 值函数的上界

4.4.2 值函数的下界

4.4.3 值函数近似误差的上界

4.5 基于近似值函数的调度算法

4.6 本章小结

第5 章系统统计信息未知情况下的强化学习算法

5.1 引言

5.2 强化学习算法

5.3 算法分析

5.4 本章小结

第6 章数值仿真结果

6.1 引言

6.2 仿真场景与基准方案介绍

6.2.1 仿真场景与仿真参数

6.2.2 基准方案介绍

6.3 已知系统统计信息的调度结果

6.4 未知系统统计信息的调度结果

6.5 本章小结

结 论

参考文献

攻读硕士学位期间发表的论文及其它成果

声明

致 谢