楼(lou)上说(shuo)的很多，我补充一(yi)下(xia)，正确(que)的应该叫网络蜘蛛(zhu)，又称(cheng)爬虫(chong)，本质是(shi)搜(sou)索引(yin)擎派出(chu)的一个(ge)执行抓取任务的程序蜘蛛池的本质是大(da)量(liang)的网站互(hu)相链接(jie)，每个站单独(du)产生大量(liang)的(de)内容吸引(yin)蜘(zhi)蛛来爬，几千个网站互链时，可以想象蜘蛛的链接(jie)