楼上说的很多(duo)，我(wo)补充一下，正确的(de)应该叫网(wang)络(luo)蜘蛛，又称爬虫(chong)，本(ben)质(zhi)是搜索引(yin)擎派出的一个执行抓(zhua)取(qu)任务的程序蜘蛛池的(de)本质是大量的(de)网(wang)站(zhan)互相链(lian)接，每个站单独产生大量(liang)的内容吸(xi)引(yin)蜘蛛(zhu)来爬，几千个(ge)网站(zhan)互链时(shi)，可以想象(xiang)蜘蛛的(de)链(lian)接