【最新泛目录站群程序】

楼上说的很(hen)多，我补(bu)充一下(xia)，正(zheng)确的应该叫(jiao)网络蜘蛛，又(you)称爬虫(chong)，本(ben)质是(shi)搜(sou)索引擎(qing)派(pai)出的一个执行抓取任务的程(cheng)序(xu)蜘蛛(zhu)池(chi)的本质(zhi)是大(da)量的网站互相链接，每个站单独产生大量的(de)内(nei)容吸引蜘蛛来爬，几(ji)千个网(wang)站互链时(shi)，可(ke)以想象(xiang)蜘蛛的链接(jie)