楼上(shang)说的很多(duo),我补(bu)充(chong)一下(xia),正确的应该叫网络蜘(zhi)蛛,又称(cheng)爬(pa)虫,本(ben)质是搜索(suo)引擎派出的一个执行抓取任务的程序蜘(zhi)蛛(zhu)池的(de)本质是大(da)量(liang)的(de)网站互相链接(jie),每个站单(dan)独产生大(da)量的内容吸引蜘(zhi)蛛来(lai)爬,几千(qian)个网站互链时(shi),可以想(xiang)象蜘(zhi)蛛的链接
Copyright © 2008-2018