楼(lou)上说的很多，我补充一下(xia)，正确(que)的应该叫网络蜘蛛，又(you)称(cheng)爬虫，本质是(shi)搜索引擎(qing)派出(chu)的一(yi)个执行抓取任务的程序蜘(zhi)蛛池的(de)本(ben)质是大量的网站互相链接，每个站单(dan)独产(chan)生大(da)量的(de)内容吸(xi)引蜘蛛来(lai)爬，几千个(ge)网(wang)站互链(lian)时，可以(yi)想象蜘(zhi)蛛的链接