楼上说的很多，我补充一下，正确(que)的(de)应该(gai)叫网(wang)络蜘蛛，又称爬虫，本质(zhi)是(shi)搜(sou)索引擎派(pai)出的(de)一个(ge)执行抓取任(ren)务的程(cheng)序蜘(zhi)蛛池的本质是大量的(de)网站互相链接，每个站单独产生(sheng)大量的(de)内(nei)容吸(xi)引蜘蛛来爬(pa)，几千个网站互链时，可以(yi)想象蜘(zhi)蛛(zhu)的链接