楼上(shang)说(shuo)的很(hen)多(duo)，我(wo)补充一下，正确的应(ying)该叫网络蜘蛛，又称爬(pa)虫，本质是搜索(suo)引擎派出的一个执行抓取任务(wu)的程序蜘蛛(zhu)池的本(ben)质(zhi)是(shi)大(da)量的网站(zhan)互(hu)相链接(jie)，每个站单独产生(sheng)大量的内容吸(xi)引蜘蛛来爬，几(ji)千个网(wang)站互链时(shi)，可以想象蜘蛛(zhu)的链接