楼(lou)上说的很多，我补充一(yi)下(xia)，正确的应(ying)该叫(jiao)网络蜘蛛(zhu)，又称(cheng)爬虫，本质是搜(sou)索(suo)引擎派出(chu)的一个执行抓取任务的程序(xu)蜘(zhi)蛛池的(de)本质是大量的网站互相(xiang)链(lian)接，每(mei)个站(zhan)单(dan)独(du)产生大量的内容吸引蜘蛛来(lai)爬，几千个网(wang)站互(hu)链(lian)时，可以想象蜘(zhi)蛛(zhu)的链接