基于Hadoop平台的优化协同过滤推荐算法研究

摘要

针对协同过滤推荐算法在大数据环境下存在的数据稀疏性和可扩展性问题,在分析研究Hadoop分布式平台与协同过滤推荐算法后,本文提出一种基于Hadoop平台的优化协同过滤推荐算法.该推荐算法将相似度高的用户或项目聚为一类,再设计用户和项目矩阵,以更有效的获得各自的最近邻居集,采用加权系数处理两者的预测评分,并对设计矩阵完成MapReduce并行化实现,这种加权系数处理后的推荐架构,很好的缓和了数据稀疏性且提高了预测精度.实验验证该算法能有效提高推荐系统的推荐效率,同时获得良好的可扩展性.