楼上说的(de)很多,我(wo)补(bu)充一(yi)下(xia),正(zheng)确的应(ying)该(gai)叫(jiao)网(wang)络(luo)蜘(zhi)蛛,又称爬(pa)虫,本质(zhi)是(shi)搜索引擎派出的一个执行抓取任(ren)务(wu)的程序蜘(zhi)蛛(zhu)池的本质(zhi)是大量的网站互相(xiang)链接,每个(ge)站单独产(chan)生大量的内容吸引蜘蛛来爬,几千个网站互链时,可(ke)以想象蜘(zhi)蛛的链接
Copyright © 2009-2025