楼上说(shuo)的很多，我(wo)补充一(yi)下，正确(que)的应该(gai)叫网络蜘蛛(zhu)，又(you)称爬虫，本质是搜索引擎派出的一个(ge)执(zhi)行(hang)抓取任务的程(cheng)序蜘蛛池的本质是大(da)量的网(wang)站互相链(lian)接，每个站(zhan)单独产生(sheng)大量的内容吸引(yin)蜘蛛来爬，几(ji)千(qian)个网站互链(lian)时(shi)，可以(yi)想(xiang)象蜘蛛的(de)链接