期刊文献+

网络蜘蛛的研究与实现 被引量:5

在线阅读 下载PDF
导出
摘要 本文从搜索引擎的应用出发,探讨了网络蜘蛛在搜索引擎中的作用和地位,提出了网络蜘蛛的功能和设计要求。在对网络蜘蛛系统结构和工作原理所做分析的基础上,研究了线程调度、页面爬取等策略和方法。然后选取了几种常见的网络蜘蛛算法进行比较,并综合应用试验法和归纳法研究它们的性能。
作者 李浩 蒋蘋
出处 《科技信息》 2012年第26期49-49,51,共2页 Science & Technology Information
  • 相关文献

参考文献4

二级参考文献22

  • 1赫枫龄,左万利.用有向图法解决网页爬行中循环链接问题[J].吉林大学学报(理学版),2004,42(3):402-404. 被引量:7
  • 2于满泉,陈铁睿,许洪波.基于分块的网页信息解析器的研究与设计[J].计算机应用,2005,25(4):974-976. 被引量:55
  • 3Lawerce S,Giles L.Accessibility and distribution of information on the Web[J].Nature .1999,400(8):107-109.
  • 4Brewington B E,Cybenko G.How dynamic is the Web? [A]In:Proc of the 9th Internationai World Wide Web Conference[C].2000.
  • 5Ester M,GrobM,Kriegel H.Focused Web crawling:a generic framwork for specifying the user interest and for adaptive crawling stratrgies[ A].In:Proc of the International Conference on Very Large Database(VLDB'01) [C],2001.
  • 6Bra D P,Houben G,Kornatzky et al.Information retrieval in distributed hypertexts[A].In:Proc of the 4th RIAO Conference[C],1994,481-491.
  • 7Hersovici M,Heydon A,Mitzenmacher M,Najork Y S,Pelleg D,Shtalhan M,Ur S.The shark-search algorithm-An application:Tailored Web site mapping[A].In:Proc of the 7th International World-Wide Web Conference[ C],1998.
  • 8Aggarwal C,AI-GarawiF,YuSP.Intelligent crawling on the Wide Wide Web with arbitrary Predicates[A].In:Proc of the 10th International World Wide Web Conference[C],2001.
  • 9Cho J,Garcia-Molina H,Page L.Efficient crawling through URL ordering[J].Computer Networks.1998,30(1-7):161-172.
  • 10Chakrabarti S,van den Berg M,Dom B.Focused crawling:a new approach to topic-specific Web resource discovery [ J ].Computer Networks.1999,31 (11-16):1623-1640.

共引文献16

同被引文献33

引证文献5

二级引证文献7

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部