楼(lou)上说的很(hen)多，我(wo)补充一下，正确的应该叫网络蜘蛛，又称爬(pa)虫，本质是(shi)搜索引(yin)擎(qing)派出的一个执(zhi)行抓取(qu)任务的(de)程(cheng)序(xu)蜘蛛池的本质是大量的网(wang)站(zhan)互(hu)相链接，每个站单(dan)独产生大(da)量的内容吸引(yin)蜘蛛来爬，几千(qian)个网站互(hu)链时(shi)，可以想象蜘(zhi)蛛(zhu)的链接(jie)