深层网网络爬虫设计

摘要

传统的搜索引擎忽略了大量高质量、隐藏于搜索表单后的数据,要想提取这些数据,首先必须要找到搜索表单并用正确的值来填充它。为了满足以上要求,本文设计了一个深层网网络爬虫,并描述了该爬虫的系统结构。