楼上说(shuo)的(de)很(hen)多,我补(bu)充一下,正确(que)的应该叫网络蜘蛛,又称爬虫,本质是搜索引擎(qing)派(pai)出的一个执行抓取任务的程序蜘(zhi)蛛(zhu)池的本质是大(da)量的网(wang)站(zhan)互相链(lian)接,每个(ge)站单(dan)独产生大(da)量的(de)内容吸引蜘蛛(zhu)来爬,几(ji)千个(ge)网站(zhan)互链时,可(ke)以想象(xiang)蜘蛛(zhu)的链接(jie)
Copyright © 2008-2018