基于分布式Q学习的Femtocell两层网络功率控制方法

摘要

随着下一代无线通信技术的发展,Femtocell的概念应运而生。Femtocell是一种可以改善室内覆盖的家庭基站,其主要致力于增加室内覆盖,改善系统性能,减少Macrocell网络通信负担。然而,在Femtocell与Macrocell共存的双层网络中存在同信道干扰问题,这会降低系统性能。本文首先分析了分布式Q学习算法在Femtocell与Macrocell构成的两层网络下行链路功率控制中的应用,在此基础上仿真并分析了独立Q学习(Independent Q-learning,IQL)算法和合作Q学习(Cooperation Q-learning,CQL)算法,并对CQL进行了改进,保证在满足基站发射功率和容量性能的情况下回报函数值是正值,其他情况下是负值,经matlab仿真验证,这可提高系统容量效率和公平性。