基于文本的手机视频搜索系统的设计与实现

摘要

手机视频业务日益受到广大移动终端用户的喜爱，这也为各相关运营商带来了可观的收益。能否及时掌握根据用户的趋势并对运营系统做出及时调整，能否为订购用户（已经订购相关产品的用户）提供个性化的服务，已经成为一个手机视频运营系统成败的关键，这些在很大程度上有赖于一个良好的搜索系统的实现。
　　Z公司是移动视频基地的重要合作伙伴，在手机视频行业具备一定的影响力及代表性。针对上述问题，本文以 Z公司手机视频搜索系统项目为背景，针对掌握用户趋势和个性化服务的实际需求提出了合理的解决方案，设计并实现了一个手机视频搜索系统。该系统实现了搜索引擎的功能，并且实现了可视化的后台管理功能；能够根据用户的订购关系，对搜索结果进行重组，实现基于订购关系的个性化搜索；能够对大量的搜索日志进行统计分析，并对分析结果进行可视化展示，便于系统管理员及时掌握用户趋势。对该手机视频搜索系统进行了功能性测试、非功能性测试以及三个月的实际上线运行，验证了该系统的可行性和有效性。
　　本文的工作内容有如下几点：
　　1.搜索引擎及其可视化管理：为实现基本的搜索引擎及其可视化管理功能，本文在SSH2框架的基础上，使用Solr技术，对搜索引擎功能进行了实现，并能够为用户提供基本的智能搜索功能；使用JSP技术和ExtJS技术，对管理后台进行了可视化实现。
　　2.个性化搜索：为了让订购用户及时获取符合自身特点的优质视频，本文通过缓存用户的订购关系，并在用户发起搜索请求的同时，将这些信息组装到搜索请求中，由于用户订购的栏目在视频源中分属相应路径，可在拼装搜索结果时对这些路径下的搜索结果进行优先展示，从而达到根据订购关系进行个性化搜索的目标。
　　3.日志统计分析：为了从系统的搜索日志中及时得到用户的搜索趋势，本文首先对搜索日志格式进行定义，并且通过HDFS技术对汇总后的日志文件进行分布式存储；其次，通过MapReduce技术对搜索日志进行统计分析，并对统计数据进行存储；最后，使用ExtJS技术对统计分析结果进行图表化展示。

目录

封面

声明

中文摘要

英文摘要

目录

1 绪 论

1. 1 研究背景和意义

1. 2 国内外研究现状

1. 3 本文的研究目标及内容

1. 4 论文的组织结构及其章节安排

1. 5本章小结

2 相关技术综述

2.1 Hadoop技术

2.2 Solr技术

2.3 ExtJS技术

2. 4 本章小结

3 系统的架构分析与设计

3. 1 搜索系统业务分析

3. 2 搜索系统需求分析

3. 3 搜索系统架构设计

3. 4 本章小结

4 核心模块的设计与实现

4. 1 检索模块的设计与实现

4. 2 索引模块的设计与实现

4. 3 统计分析模块的设计与实现

4. 4 系统管理模块的设计与实现

4. 5 个性化搜索实现

4. 6 本章小结

5 系统测试及应用

5. 1 系统测试

5. 2 系统应用

5. 3 本章小结

6 总结与展望

6. 1 本文工作总结

6. 2 下一步的工作

参考文献

致谢

攻读学位期间发表的学术论文目录

答辩决议书