《亚洲国产中文日韩》

【亚洲国产中文日韩】

楼上(shang)说的很(hen)多，我补充(chong)一下，正(zheng)确(que)的应该叫网络蜘蛛，又(you)称爬虫，本质是(shi)搜索引擎(qing)派(pai)出的一(yi)个执行(hang)抓取(qu)任务的(de)程(cheng)序蜘(zhi)蛛池的本质是大量的网站互相链接，每个站单(dan)独产生(sheng)大(da)量(liang)的(de)内容吸引(yin)蜘(zhi)蛛来(lai)爬，几千个网(wang)站互链(lian)时，可以想象蜘蛛的链接