面向热点新闻的爬虫系统设计与实现

摘要

在现今随着互联网的发展,时刻流通的信息变得更加庞大而繁杂,获取信息,整合提取有实际效益的信息成为了一个难题.要想了解当今世界发生了什么,获取新闻这种记录社会、传播信息、反映时代的文体.显然是最佳的选择.本文提出了一个基于网络爬虫的热点新闻发布系统,并在此系统中设计了相应的爬虫逻辑用于爬取热点新闻,以及编写了资源存储,信息展示等相关功能.进行了有效的信息整合,极大的提高了获取信息的效率.