首页 | 本学科首页   官方微博 | 高级检索  
     检索      

网络爬虫技术研究
引用本文:于成龙,于洪波.网络爬虫技术研究[J].东莞理工学院学报,2011,18(3):25-29.
作者姓名:于成龙  于洪波
作者单位:牡丹江大学电子信息工程系,黑龙江牡丹江,157011
摘    要:网络爬虫为搜索引擎从互联网上下载网页,是搜索引擎不可或缺的组成部分.介绍网络爬虫的分类、工作原理及存在的问题,并对主题爬虫进行了详细设计,最后总结了设计高性能网络爬虫需要解决的技术难题.

关 键 词:网络爬虫  搜索引擎  高性能

Research on Web Crawler Technology
YU Cheng-long,YU Hong-bo.Research on Web Crawler Technology[J].Journal of Dongguan Institute of Technology,2011,18(3):25-29.
Authors:YU Cheng-long  YU Hong-bo
Institution:YU Cheng-long YU Hong-bo(Department of Information and Electrical Engineering,Mudanjiang University,Mudanjiang 157011,China)
Abstract:As an indispensable part of search engine,web crawler is used to download web pages from Internet.Classifications and principles of web crawler are introduced.The topic crawler is designed in detail,and then technical problems of designing high-performance web crawler to be solved are summarized.
Keywords:web crawler  search engine  high-performance  
本文献已被 CNKI 维普 万方数据 等数据库收录!
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号