楼上(shang)说的很(hen)多，我(wo)补(bu)充一下(xia)，正确的应该叫网(wang)络蜘蛛，又(you)称爬(pa)虫，本质是(shi)搜索引擎派出(chu)的一个执(zhi)行抓(zhua)取任务(wu)的程序(xu)蜘蛛池的本质是(shi)大量的(de)网(wang)站互(hu)相(xiang)链接，每(mei)个站单独产生大量的内容吸引蜘蛛来爬，几(ji)千个网(wang)站互链时，可以想象(xiang)蜘蛛的链(lian)接