楼(lou)上(shang)说的很多,我补充一下,正确(que)的应(ying)该叫网络(luo)蜘蛛,又称(cheng)爬虫,本质(zhi)是(shi)搜索引(yin)擎(qing)派(pai)出(chu)的(de)一个执行(hang)抓取(qu)任务的(de)程序蜘蛛(zhu)池(chi)的本质是大量的网站互相链接,每个(ge)站单独产生(sheng)大量的内容吸引蜘蛛(zhu)来(lai)爬,几千个网站互链时(shi),可以(yi)想(xiang)象(xiang)蜘蛛的链接
Copyright © 2008-2018