《啊,公交车,不要,裙子》

【天天日,天操】

楼上说的(de)很(hen)多，我补充一(yi)下，正确的应该叫网络蜘蛛，又(you)称爬虫，本质是(shi)搜索引擎(qing)派(pai)出(chu)的一个执行抓取任务的程(cheng)序蜘蛛池的本质是(shi)大量的网站互(hu)相链接，每个(ge)站单(dan)独产(chan)生大量(liang)的(de)内容吸引(yin)蜘蛛来爬，几(ji)千(qian)个网站互(hu)链时(shi)，可以(yi)想象蜘蛛(zhu)的(de)链接