分布式搜索引擎索引安全及缓存策略研究

摘要

本课题所依托的国家863 项目“分布式密文全文检索系统关键技术研究”的主要应用场景是具有较高文档保密需求的政府机关和大中型企业。这些机构的文档保有规模和用户数量十分巨大，需要使用分布式搜索引擎才能满足日常搜索需要，而且他们对文档的安全性和访问控制均有较高要求，希望在满足日常搜索需求的同时可以兼顾索引安全和访问控制，尽量减少不必要的信息外泄。
　　 作者所在课题组研究索引安全和分布式检索已有时日，先后研发出集中式密文全文检索系统和分布式密文全文检索系统，并且在湖北省电子政务领域有成功的应用案例。但是先期系统仍然存在索引安全性不高，无独立缓存机制等不足之处，本课题在已有成果的基础上，针对上述问题进行了优化和改进。
　　 对索引安全策略的加密对象和加密方式进行了结构性调整，采用基于索引词倒排表物理分块加密的安全索引结构，直接面向底层索引文件进行操作，全部分块保持相同长度，避免了恶意用户利用分块大小不同进行统计攻击的可能性，获得了更高的安全性和索引处理效率。
　　 新增了适用于原有系统的分布式缓存机制，为检索服务器和索引服务器分别设置缓存。检索服务器缓存查询结果集，并且融入了对访问控制信息的支持；索引服务器缓存索引词倒排表，分为静态和动态两部分，前者存放日常查询中的高频索引词倒排表，负责处理大多数长期稳定的通用查询请求；后者存放系统新近查询用到的索引词倒排表，满足短期突发性热点词汇的查询需求。

目录

文摘

英文文摘

声明

第1章 绪论

第2章 搜索引擎概述

第3章 分布式搜索引擎索引安全研究

第4章 分布式搜索引擎缓存策略研究

第5章 分布式密文全文检索系统设计与实现

第6章 总结与展望

参考文献

致 谢

附录