楼上说(shuo)的很多，我补(bu)充一(yi)下，正确(que)的(de)应该叫(jiao)网络蜘蛛，又称爬虫，本质是搜索(suo)引擎派出的(de)一(yi)个(ge)执行抓取任(ren)务的程序蜘蛛池(chi)的本质是大量的(de)网站(zhan)互相链(lian)接，每个站单(dan)独产生(sheng)大量的内容吸引(yin)蜘蛛来爬，几(ji)千(qian)个网站互(hu)链(lian)时，可以(yi)想象蜘(zhi)蛛的链(lian)接