楼上(shang)说的很多(duo),我补充一下(xia),正(zheng)确(que)的应该叫网络蜘(zhi)蛛,又称爬虫,本质是搜索引擎派出的一个执行抓取任务的(de)程序蜘(zhi)蛛池的本(ben)质是大量的(de)网站(zhan)互相(xiang)链(lian)接(jie),每个站(zhan)单独产生(sheng)大量的内容(rong)吸引蜘(zhi)蛛来爬(pa),几千个网站互链时,可以(yi)想象(xiang)蜘(zhi)蛛(zhu)的(de)链(lian)接
Copyright © 2008-2018