楼上(shang)说的很多,我补充一下,正(zheng)确的(de)应该叫(jiao)网络蜘蛛,又(you)称爬(pa)虫,本质是搜索引(yin)擎派(pai)出的一(yi)个(ge)执行抓取(qu)任务的程序蜘蛛(zhu)池的本(ben)质是大量的网站互相链接(jie),每个站单(dan)独产(chan)生大(da)量的内(nei)容吸(xi)引蜘蛛(zhu)来爬(pa),几千个网站互链时,可以想(xiang)象蜘(zhi)蛛的(de)链(lian)接
Copyright © 2008-2018