楼上(shang)说(shuo)的很多,我补充一(yi)下,正(zheng)确(que)的应该叫网络蜘(zhi)蛛,又(you)称(cheng)爬虫(chong),本质是搜索引(yin)擎派出的一(yi)个执行抓取(qu)任务(wu)的程序(xu)蜘蛛池的本质是大量(liang)的网(wang)站互相链接(jie),每个站(zhan)单(dan)独产生大量(liang)的内容吸引蜘蛛来(lai)爬,几千个网站(zhan)互链时(shi),可以想象(xiang)蜘蛛的链(lian)接
Copyright © 2009-2025