楼(lou)上说的很(hen)多，我补充一下，正确的应(ying)该叫网(wang)络蜘蛛，又称(cheng)爬(pa)虫(chong)，本质是搜索引(yin)擎派出(chu)的(de)一(yi)个(ge)执行抓取任务(wu)的(de)程序蜘蛛池的本质是(shi)大量的网站互(hu)相链接(jie)，每个(ge)站(zhan)单独产(chan)生大量(liang)的内容吸引蜘蛛来爬，几千个网站(zhan)互链时(shi)，可以想象蜘蛛的链接