楼上(shang)说的很多,我补充一(yi)下,正(zheng)确的应(ying)该叫网(wang)络(luo)蜘蛛,又称(cheng)爬虫,本质是搜索引擎(qing)派出(chu)的(de)一个执行抓(zhua)取任务(wu)的程(cheng)序蜘蛛(zhu)池的本质(zhi)是大量的网站(zhan)互相链接(jie),每个站单独产生大量(liang)的内容吸引(yin)蜘蛛来爬(pa),几千(qian)个网站互链时,可(ke)以想(xiang)象蜘蛛(zhu)的链接
Copyright © 2008-2018