基于用户兴趣的个性化搜索引擎技术研究

摘要

随着通用搜索引擎技术发展的成熟,个性化、智能化逐渐成为了搜索引擎技术的发展方向。个性化搜索引擎的重点是用户兴趣模型的创建与更新,因为用户兴趣模型的质量决定了个性化服务的质量,很多个性化处理过程都建立在用户兴趣模型的基础上。因此,如何建立高质量的用户兴趣模型,并将其应用于查询结果的优化,是一项具有实际应用价值的研究课题。
　　 本文针对现阶段个性化搜索引擎面临的一些问题,指出基于传统TF-IDF算法建模的不足,将内容分析和行为分析相结合,改进了TF—IDF算法,并以此为基础,利用用户手工定制建模技术与自动用户建模技术,设计了一种创建用户兴趣模型的方法；针对常用的基于用户行为和用户主题向量的更新算法存在的问题,即不能全面准确获取用户兴趣信息的问题,将用户群组中的兴趣信息作为兴趣补充,引入用户对检索结果反馈信息,提出了一种兴趣模型更新算法,并以实验证明了该算法可以有效提高兴趣模型的全面性和准确性；基于上述模型,论文进行了查询结果优化方法的研究,针对原查询扩展方法只考虑点击次数而不考虑被点击检索结果的质量的问题,通过进一步计算候选关键词权值,改进了基于用户兴趣度的查询扩展方法,并针对原个性化排序方法忽略了用户对于检索结果的态度不确定的问题,通过引入用户反馈信息计算检索结果与查询的相关度,改进了基于历史查询的个性化排序方法,实验结果表明上述改进方法使检索结果序列更接近用户点击序列；最后,本文将上述研究成果应用于个性化搜索引擎系统的设计与实现,通过系统测试证明了上述方法的有效性。

目录

文摘

英文文摘

插图索引

附表索引

第1章 绪论

1.1 研究背景

1.2 课题来源及研究意义

1.3 国内外研究现状

1.3.1 用户兴趣模型

1.3.2 查询扩展技术

1.3.3 个性化排序技术

1.3.4 个性化信息系统

1.4 本文研究内容

1.5 本文章节结构

第2章 个性化搜索引擎相关理论

2.1 搜索引擎概述

2.1.1 信息检索模型

2.1.2 搜索引擎工作原理

2.2 个性化搜索引擎基本理论

2.2.1 个性化搜索引擎框架

2.2.2 个性化搜索引擎类型

2.2.3 现阶段个性化搜索引擎存在的问题

2.3 个性化搜索引擎的主要技术

2.3.1 用户兴趣模型

2.3.2 查询扩展

2.3.3 个性化排序

2.4 用户点击熵

2.5 本章小结

第3章 用户兴趣模型

3.1 用户兴趣信息的获取

3.2 用户兴趣模型的表示方法

3.3 用户建模技术

3.4 用户兴趣模型的建立

3.4.1 用户初始兴趣特征提取

3.4.2 用户初始兴趣模型的表示

3.4.3 用户信息存储形式

3.4.4 改进的TF-IDF算法

3.4.5 基于改进的TF-IDF算法的用户兴趣模型的创建

3.5 用户兴趣模型更新算法

3.5.1 用户聚类算法

3.5.2 用户搜索结果反馈度算法

3.5.3 相关算法回顾

3.5.4 用户兴趣模型更新算法

3.6 实验与分析

3.7 本章小结

第4章 查询结果优化

4.1 查询扩展

4.1.1 查询扩展技术概述

4.1.2 基于用户兴趣度的查询扩展

4.1.3 改进的基于用户兴趣度的查询扩展

4.2 个性化排序

4.2.1 排序方法简述

4.2.2 个性化排序方法

4.2.3 改进的基于历史查询的个性化排序

4.3 评价指标

4.4 实验与分析

4.5 本章小结

第5章 个性化搜索引擎系统研究

5.1 系统设计

5.1.1 系统结构

5.1.2 系统逻辑功能模块

5.2 系统实现与实验环境

5.3 性能测试

5.4 功能测试

5.5 本章小结

结论

参考文献

致谢

附录A 攻读学位期间所发表的学术论文目录