【在线理论片】

楼上说的很多，我补充(chong)一下，正确(que)的应(ying)该叫网(wang)络(luo)蜘蛛，又称爬(pa)虫，本质(zhi)是(shi)搜索引(yin)擎派出的一(yi)个执行抓取(qu)任务的程(cheng)序蜘蛛池(chi)的本质是大量的网(wang)站互相(xiang)链(lian)接，每个(ge)站单独产生大量的内容吸(xi)引蜘蛛来爬，几(ji)千(qian)个网(wang)站(zhan)互链时，可以想象蜘(zhi)蛛(zhu)的(de)链接