楼上(shang)说(shuo)的(de)很多,我(wo)补充一下,正(zheng)确的(de)应该叫网络蜘蛛,又(you)称爬虫(chong),本质是搜索引(yin)擎派出(chu)的一个执行抓取任务(wu)的程序蜘蛛池的本(ben)质是大量(liang)的网站互相链接,每(mei)个站(zhan)单独产生大(da)量(liang)的内容吸引蜘(zhi)蛛来爬,几千(qian)个(ge)网站互链时,可(ke)以(yi)想象蜘(zhi)蛛的(de)链(lian)接
Copyright ? 2008-2018