垂直搜索技术在石油勘探生产门户中的应用研究

摘要

勘探与生产信息门户作为中国石油一级门户之一，信息量的剧增降低了门户使用者对信息查询检索的效率，需要寻求一种更好的信息搜索技术使用户能够快速的检索到其所需的信息。垂直检索技术作为针对特定内容的搜索引擎，通过对数据库内的信息进行一次重新的整合，实现从海量的数据中进行数据抽取，进行处理后实现查询结果的反馈。相对于通用的搜索引擎，垂直检索技术是一个新的服务模式，它能够针对特定的领域与人群，为用户提供更专业和具体的搜索反馈。 本文对垂直搜索引擎的关键技术进行了研究，在对通用搜索引擎与垂直搜索引擎进行对比的基础上，得到垂直搜索引擎在专业领域应用的优势分析。本文针对勘探生产门户的应用需求，将垂直检索技术应用到勘探生产门户中，通过对垂直搜索引擎应用的需求分析，进行勘探生产门户搜索引擎的设计，并对搜索引擎的网络爬虫、网页解析、索引建立、检索等模块进行了设计与实现。垂直搜索技术在勘探生产门户中的应用能够有效的整合信息资源，并通过网页解析增强内容资源的相关性，使用户能够方便的获取特定领域的信息，更好的发挥信息的作用，使勘探生产门户能够达到一站式的检索和导航服务，进一步提升勘探生产门户的信息服务水平。

目录

声明

摘要

第一章 绪论

1．1 研究背景

1．2 国内外发展现状

1．2．1 搜索引擎

1．2．2 垂直搜索

1．3 研究目的

1．4 研究内容

第二章 搜索引擎的关键技术

2．1 索引

2．1．1 倒排索引

2．1．2 归并索引方法

2．1．3 动态索引

2．2 网络下载

2．2．1 网络爬虫

2．2．2 搜索策略

2．3 链接分析

2．4 中文分词机制

第三章 实现垂直搜索的技术路线

3．1 网页采集

3．2 网页信息抽取技术

3．3 网页解析

3．4 索引与检索技术

3．5 文本挖掘

第四章 基于门户的垂直搜索系统设计

4．1 门户系统中搜索引擎需求分析

4．2 垂直搜索引擎设计思路

4．2．1 优化数据采集策略

4．2．2 数据挖掘

4．2．3 集成行业优势

4．3 系统总体设计

4．4 垂直搜索引擎体系结构设计

4．5 系统详细设计

4．5．1 数据采集

4．5．2 数据预处理

4．5．3 建立索引

4．5．4 查询请求

4．5．5 查询检索

第五章 垂直搜索技术在门户中的应用

5．1 勘探与生产信息门户简介

5．2 开发环境

5．3 网络爬虫模块

5．3．1 技术路线

5．3．2 模块实现

5．4 信息抽取模块

5．4．1 技术路线

5．4．2 模块实现

5．5 索引模块

5．5．1 技术路线

5．5．2 模块实现

5．6 检索模块

5．6．1 技术路线

5．6．2 模块实现

第六章 总结

致谢

参考文献

攻读硕士学位期问发表的论文