楼(lou)上(shang)说的很(hen)多,我补充一下,正确的(de)应该(gai)叫网络(luo)蜘蛛,又称爬(pa)虫,本质是搜索引(yin)擎派出的一个(ge)执行抓取(qu)任务的程序蜘蛛池(chi)的本(ben)质(zhi)是(shi)大量的网站互相(xiang)链(lian)接,每个站单(dan)独产生大量(liang)的内容吸(xi)引蜘蛛(zhu)来爬,几千个网站互(hu)链时(shi),可以想象蜘(zhi)蛛(zhu)的链(lian)接
Copyright ? 2008-2018