楼(lou)上(shang)说的很多,我补充(chong)一下,正确的(de)应该叫网络蜘蛛,又称爬虫,本质是搜(sou)索引擎派出的一个执行抓取任务的(de)程(cheng)序蜘(zhi)蛛池的本质(zhi)是大量(liang)的网站互相(xiang)链(lian)接,每(mei)个(ge)站单独产生(sheng)大(da)量(liang)的内(nei)容吸引(yin)蜘蛛来爬,几(ji)千个网站(zhan)互链时(shi),可以(yi)想(xiang)象蜘蛛的链接(jie)
Copyright ? 2008-2018