楼上说的(de)很(hen)多,我补(bu)充一下,正(zheng)确(que)的应该叫(jiao)网络(luo)蜘蛛(zhu),又称爬(pa)虫,本质是(shi)搜索引(yin)擎派出的一(yi)个执(zhi)行抓取任务的程序蜘蛛池的本质是(shi)大(da)量的网站互相(xiang)链接,每个站单独产生大(da)量的内(nei)容吸引蜘蛛来(lai)爬,几千(qian)个网(wang)站(zhan)互链时,可以(yi)想象蜘(zhi)蛛的(de)链(lian)接
Copyright © 2023-2024