目前互联网中的网络爬虫的原理和影响

摘要

cqvip:网络爬虫(Web Crawler)是目前的网络环境中非常主流的的一种获取互联网中有效目标信息的一种技术,爬虫设计和实现已经十分成熟.爬虫的出现给当代互联网带来了巨大的影响,同时也出现在爬虫技术应用上的利弊体现.通过描述爬虫应用的出现的利弊现象,分析其中原理和原因,并给其中爬虫设计方法,及其基于java语言的分析.