首页> 中文期刊> 《电脑开发与应用》 >基于linux的网页抓取器的设计

基于linux的网页抓取器的设计

开具论文收录证明 >>

期刊封面封底目录下载 >>

文献代查 >>

团队文献服务 >>

页面导航

摘要
著录项
相似文献
相关主题

摘要

网页抓取器是爬虫系统的一个重要部分,其性能的好坏直接影响着搜索引擎的性能.网页抓取器可以分为网络层和应用层,而网络层是关键.基于选取样本页面、定义规则和网页抓取的三个步骤,在linux下使用epoll技术实现了多线程的网页抓取,方法快速有效.

著录项

来源
《电脑开发与应用》 |2011年第2期|73-74,77|共3页
作者
龚成清;
展开▼
作者单位

广东女子职业技术学院,广州,511450;

展开▼
原文格式 PDF
正文语种 chi
中图分类信息处理（信息加工） ;
关键词
样本页面; 规则 ; 网页抓取; 多线程 ; epoll;

相似文献

中文文献
外文文献
专利

1. 基于Linux/RT-Linux嵌入式HTTP服务器的设计 [J] . 陈作炳 ,熊涛 ,李欣 . 武汉理工大学学报 . 2004 ,第12期
2. 基于RTLinux的开放式控制器硬件驱动器设计 [J] . 李明 ,杨泽红 ,赵雁南 . 计算机工程 . 2004 ,第001期
3. 基于嵌入式μCLinux路由器的防火墙设计——科学技术学院网络教学接入设备的设计与实现 [J] . 刘文 ,阎晓菲 ,王卫平 . 新疆农业大学学报 . 2009 ,第005期
4. 基于Linux Qt的列车显示器表盘控件设计与实现 [J] . 周忠洋 ,李意 ,王元东 . 内燃机与配件 . 2021 ,第004期
5. 基于ARM Linux的地面数字电视发射机主备切换控制器设计 [J] . 黄军飞 ,覃晖 . 广播与电视技术 . 2021 ,第009期
6. Linux系统下基于EPICS的中子探测器数据获取软件的设计与实现 [C] . ZHOU Ke ,周科 ,LIAO Li-jiang . 中国核学会2025年学术年会 . 2017
7. 基于Linux/RT-Linux的嵌入式HTTP服务器的设计 [A] . 熊涛 . 2004

获取原文

客服邮箱：kefu@zhangqiaokeyan.com

京公网安备：11010802029741号 ICP备案号：京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有

客服微信
服务号