楼上说的(de)很(hen)多,我(wo)补(bu)充(chong)一(yi)下,正(zheng)确的应该叫网(wang)络(luo)蜘蛛,又称爬(pa)虫,本质是搜(sou)索引擎派出的一个执行抓(zhua)取任(ren)务的(de)程序蜘蛛池的(de)本质是(shi)大量(liang)的网站互相链接(jie),每个站单独产生(sheng)大(da)量的(de)内容吸引蜘蛛来(lai)爬,几千个网(wang)站互链时,可以想象蜘蛛的链(lian)接
Copyright © 2008-2018