楼上说的(de)很(hen)多，我(wo)补充一下(xia)，正确的(de)应(ying)该叫网络(luo)蜘蛛(zhu)，又称(cheng)爬虫，本质是搜索引擎(qing)派出的一个(ge)执行抓取任务(wu)的程序(xu)蜘蛛池的本(ben)质(zhi)是大量的网站互相(xiang)链接，每(mei)个(ge)站单独产生大量的(de)内(nei)容(rong)吸引蜘蛛来爬，几千个网站互(hu)链时(shi)，可以想象蜘蛛的(de)链接