楼(lou)上说的很多(duo)，我补充(chong)一下(xia)，正确的(de)应(ying)该叫网络蜘蛛，又称爬(pa)虫，本质是搜索引擎(qing)派出的一个执行(hang)抓取任务的(de)程(cheng)序蜘蛛池的本(ben)质(zhi)是(shi)大量的网(wang)站互相链(lian)接，每个(ge)站单(dan)独(du)产生大量(liang)的内容吸引蜘(zhi)蛛来爬，几千个网站互链时，可以想象蜘(zhi)蛛的链(lian)接(jie)