【最新泛目录站群程序】

楼(lou)上(shang)说(shuo)的很多，我补充一下，正确的应(ying)该叫网络蜘蛛，又称爬虫(chong)，本质是搜索引擎派出的一(yi)个执(zhi)行抓取任务(wu)的(de)程序蜘蛛(zhu)池(chi)的本质是(shi)大(da)量(liang)的网站互相链接，每个(ge)站(zhan)单独产生大量的内容(rong)吸(xi)引蜘蛛(zhu)来爬，几(ji)千个网站(zhan)互链时，可以想(xiang)象(xiang)蜘蛛的链(lian)接