楼(lou)上说的很(hen)多,我补(bu)充一下(xia),正(zheng)确(que)的应该叫网(wang)络蜘(zhi)蛛,又(you)称爬虫,本质是搜索引擎(qing)派出(chu)的一个执行抓取(qu)任务的程序蜘蛛池的本(ben)质是大量的网(wang)站(zhan)互(hu)相链接(jie),每个站单独产生大(da)量的内(nei)容吸引蜘(zhi)蛛来爬,几千(qian)个网站互链(lian)时,可以想(xiang)象蜘(zhi)蛛(zhu)的(de)链接
Copyright ? 2008-2018