首页> 中文会议>中国农业工程学会电气信息与自动化专委会、中国电机工程学会农村电气化分会科技与教育专委会2010年学术年会 >一种按需配置的Web文本信息定向抓取方法

一种按需配置的Web文本信息定向抓取方法

页面导航

摘要
著录项
相似文献
相关主题

摘要

本文提出一种模拟客户端HTTP请求定向获取web 文本并进一步加工以抓取所需数据的方法,以第二次提取数据的形式实施数据的重复利用.利用一个可以制定抓取页面内容并制定抓取页面保存结果的配置文件,通过HttpClient模拟用户对服务器页面的请求并利用HtmlParser 提取指定的DOM 结构,有针对性的对页面信息进行抓取和保存.

著录项

来源
《中国农业工程学会电气信息与自动化专委会、中国电机工程学会农村电气化分会科技与教育专委会2010年学术年会》|2010年|1-5|共5页
会议地点北京
作者
徐山川; 高万林; 张树亮; 卢帅州;
展开▼
作者单位

中国电机工程学会;

中国农业工程学会;

展开▼
会议组织
正文语种
原文格式 PDF
中图分类 TP393.09;TP311.13;
关键词
Web文本信息; 定向抓取; 数据过滤; DOM结构;
入库时间 2022-08-17 10:38:31

相似文献

中文文献
外文文献
专利

1. WebPass:一种通过Web页面作定向广播的方法 [J] . 唐绿岸 ,李红燕 . 计算机应用研究 . 2004,第012期
2. 一种面向虚拟化数字中心资源按需重配置方法 [J] . 米海波 ,王怀民 ,尹刚 . 软件学报 . 2011,第009期
3. 基于伴随文本信息的Web图像批量标注方法 [J] . 郭蕾蕾 ,俞璐 ,段国仑 . 微型机与应用 . 2018,第009期
4. 基于伴随文本信息的Web图像批量标注方法 [J] . 郭蕾蕾 ,俞璐 ,段国仑 . 信息技术与网络安全 . 2018,第009期
5. Web文本信息抽取与挖掘方法 [J] . 许建潮 ,王颖楠 ,胥桂仙 . 长春工业大学学报（自然科学版） . 2002,第0z1期
6. 一种支持按需服务的Web服务聚合和发现方法 [C] . ZENG Cheng ,曾诚 ,CHEN Dan . 第六届中国计算机学会服务计算学术会议 . 2015
7. 基于Web文本信息挖掘的城市居民小区宜居性评价方法的研究 [A] . 冯鹏 . 2017

一种按需配置的Web文本信息定向抓取方法

摘要

著录项

相似文献

相关主题

期刊订阅