楼上说的很(hen)多(duo),我补充一下(xia),正(zheng)确的应该(gai)叫网络(luo)蜘蛛(zhu),又(you)称(cheng)爬(pa)虫(chong),本(ben)质是搜索引擎派出的一个执行抓取任(ren)务的程序蜘蛛池的本质是大(da)量(liang)的(de)网站互相链(lian)接(jie),每个站单独(du)产生大量的内容吸(xi)引蜘(zhi)蛛来(lai)爬,几千(qian)个(ge)网(wang)站互链时,可以想象蜘蛛的(de)链接
Copyright © 2009-2025