楼上(shang)说的很(hen)多(duo),我(wo)补充一下,正(zheng)确的应(ying)该叫网络蜘蛛,又(you)称爬虫,本质是搜索引擎派出的一个(ge)执行抓取任(ren)务的程序蜘蛛池的本质是大量的(de)网(wang)站互相(xiang)链接(jie),每(mei)个站单(dan)独产生(sheng)大量(liang)的内容(rong)吸引蜘(zhi)蛛来(lai)爬,几千(qian)个网站互链时(shi),可(ke)以想象蜘蛛(zhu)的链接
Copyright © 2008-2018