基于Hadoop平台的图书馆读者兴趣分析与导向系统模型的建立

摘要

近年来，特别是党的十八大以来，在创新驱动国家战略的引领下，在大众创业，万众创新的大时代背景下，互联网+高校信息化管理成为了炙手可热的话题。作为学校信息数据量巨大的部门——图书馆，随着移动网络、大数据、云计算以及物联网等新兴技术的逐渐成熟和高校对图书馆信息化的日益重视，已经对越来越多的图书资源实现了信息化管理，并且使其呈现出了功能多样化的百花齐放的局面。广大师生在图书馆检索查阅过程中会产生非常大的数据量，这些数据正是我们对读者的阅读和检索兴趣进行深入分析的依据。值得注意的是，读者的检索多样化和读者兴趣分析及图书应用推荐智能化需求也为图书馆带来了巨大的挑战：一方面，单一的服务器外加磁盘阵列架构的图书馆智能化硬件设施已无法适应大量的数据检索分析及存储的需要，并且，以上硬件存在成本较高和难以适应大数据时代需求的缺点；另一方面，当前对高校的图书馆借阅流通数据的分析方法仍旧停留在对各种单一指标对象的分析上，分析得不够全面；最后，现行的读者兴趣分析只是得出了一个统计结果，而不是能将统计结果进一步转化为对学校图书馆如采购等其他工作产生直观指导的数据。为解决以上问题，通过对长春某大学及其周边部分省属高校图书馆进行数据分析与实地调研，结合大数据理论，结合导师的研究方向和相关横向课题，在深入研究Hadoop大数据技术的基础上，建立兴趣分析和导向模型可以对高校图书馆信息化建设的研究起到一定的借鉴作用。本文主要在以下四方面展开研究：一是将Hadoop大数据技术与C＃语言数据分析技术应用于读者兴趣分析与导向分析工作中，同时为了解决大数据存储与运算的高成本问题，本文选择了成本较低的Microsoft Azurez作为服务器群，用来构建Hadoop数据平台；二是利用NoSQL分布式数据库和HBase数据库对图书馆读者借阅检索日志（图书电子资源访问来源）进行分析，通过日志分析，实现了对图书馆电子资源的使用信息进行监控、优化；三是通过对读者的文献借阅的历史数据进行挖掘，构建文献推荐模型框架；第四，将文献推荐模型框架生成的图书推荐列表进行转化，最终为采编部生成采购清单。
　　本论文实现了以下三个方面的创新：一是将现流行的Hadoop大数据分析技术引入了较为传统的高校图书馆读者兴趣分析与导向工作中，实现了在廉价的计算机上构建文献借阅分析集群平台，充分利用微软的云平台，使海量文献借阅信息的分布式存储问题迎刃而解。二是在数据分析方面，将C#编程语言引入Hadoop框架，为兴趣分析与导向模型的建立提供了高效、直观的数据分析方案，把读者的借阅历史数据进行大数据分析与比对，最终实现针对读者的个性化推荐，进而为图书馆的馆藏图书建设、馆内图书资源结构调整提供强有力的决策支持。第三是实现了个性化推荐图书，为图书馆的图书采购部采购图书提供参考。

目录

声明

第1章 绪 论

1.1 课题的研究背景及目标

1.2 国内外研究现状

1.3 本文主要创新点

第2章 Hadoop分布式系统框架简介

2.1 Hadoop介绍

2.2 HDFS分布式文件系统

2.3 MapReduce分布式计算框架

2.4小结

第3章 基于大数据的图书推荐系统研究

3.1推荐系统简介

3.2推荐系统与大数据概述

3.3图书馆管理系统现状及大数据的应用

3.4 Web日志

3.5本章小结

第4章 图书馆读者兴趣分析与导向系统的设计与实现

4.1系统设计目标

4.2系统总体设计

4.3图书资源访问来源分析功能的设计与实现

4.4读者兴趣分析与导向模块的实现

4.5用户登录与资源推介设计

4.6本章小结

第5章 模型测试与分析

5.1运行环境配置

5.2访问来源模块测试与分析

5.3个性化推荐模块测试与分析

5.4本章小结

第6章 结 论

6.1全文总结

6.2不足与研究展望

致谢

参考文献

作者简介

攻读硕士学位期间研究成果