楼(lou)上说的很(hen)多，我补充(chong)一(yi)下，正确的应该叫网络(luo)蜘蛛，又称爬虫(chong)，本(ben)质是(shi)搜(sou)索(suo)引擎派出的一个执行抓取任务的程序蜘蛛池(chi)的(de)本质(zhi)是大(da)量(liang)的网站互相链接，每(mei)个站单(dan)独产(chan)生大量的(de)内容吸(xi)引蜘蛛来爬，几千个网站互链(lian)时，可以(yi)想象蜘蛛的链接(jie)