楼(lou)上说的很多，我补充一下，正(zheng)确的应该叫网络蜘蛛，又称爬(pa)虫，本质是搜索(suo)引(yin)擎(qing)派出(chu)的一个(ge)执行抓取(qu)任(ren)务(wu)的程序蜘蛛(zhu)池的本质是大(da)量的(de)网站互相链接(jie)，每(mei)个站单独(du)产(chan)生大量的内容吸(xi)引蜘(zhi)蛛来(lai)爬(pa)，几千(qian)个(ge)网站互链时，可(ke)以想象(xiang)蜘蛛的链接