楼上说(shuo)的很多，我(wo)补(bu)充一下，正确的应(ying)该(gai)叫(jiao)网络蜘蛛(zhu)，又称爬(pa)虫，本(ben)质是搜索引擎(qing)派出的一(yi)个(ge)执行抓取任务的程序(xu)蜘蛛池的(de)本(ben)质是大(da)量的(de)网站互相(xiang)链(lian)接，每个站单(dan)独产生大量的内容(rong)吸(xi)引蜘蛛来爬(pa)，几千个网站互链(lian)时，可(ke)以想象蜘蛛的链接