通用网页数据采集系统设计

摘要

设计了一种通用的网页数据采集系统.用户首先设置采集源和目标数据表,系统辅助用户完成其余采集参数的配置,包括动态生成的采集项配置信息,然后系统依据采集配置信息,自动分析页面,匹配采集规则,抽取目的数据,并写入数据库.经测试,系统可以满足实际需求.