楼(lou)上说的(de)很多，我补充(chong)一下(xia)，正确的应该(gai)叫网(wang)络(luo)蜘蛛，又称爬虫，本质是搜索引擎(qing)派(pai)出(chu)的一个执行抓取任务的(de)程序蜘蛛(zhu)池(chi)的本(ben)质是大量的网站互(hu)相(xiang)链接，每个站单(dan)独产生大量的内容吸引(yin)蜘蛛(zhu)来(lai)爬，几(ji)千个网站(zhan)互(hu)链(lian)时，可以(yi)想象蜘蛛的链接