一种面向对等网络的可定义搜索重点的网络爬虫方法

摘要

本发明公开了一种面向对等网络的可定义搜索重点的网络爬虫方法，属于计算机网络信息检索领域，本发明要解决的技术问题为如何将对等网络和网络爬虫结合，实现可定义搜索重点的网络爬虫对特定领域和主题实现描述的难度较小而且准确度较高，采用的技术方案为：该方法是利用基于站点页面链接结构的链接导航技术来提高主题信息的抓取准确率和速度，采用易于操作的主题描述来实现高可定制性的网络爬虫，通过配置文件来实现可定制，最终构建出一个可控性强、资源消耗小、数据采集准确性高的轻量级聚焦网络爬虫，以满足P2P搜索的需求。