楼上(shang)说(shuo)的很(hen)多,我补(bu)充一下,正确的应该叫网络(luo)蜘蛛,又称爬虫,本(ben)质是(shi)搜索引擎派出(chu)的(de)一个(ge)执行抓取(qu)任务(wu)的程序(xu)蜘蛛(zhu)池的本质(zhi)是大(da)量的网(wang)站(zhan)互相链接,每(mei)个站(zhan)单独产(chan)生大(da)量的内容吸引蜘蛛来(lai)爬,几千个网站互(hu)链时(shi),可以想象蜘蛛的链接(jie)
Copyright © 2008-2018