《污到下面》

【猛男gay】

楼(lou)上说的很(hen)多，我补(bu)充一下，正确(que)的应(ying)该叫网络蜘蛛，又(you)称爬虫(chong)，本质是搜(sou)索(suo)引擎派(pai)出的一个(ge)执行抓取(qu)任务(wu)的(de)程序蜘(zhi)蛛(zhu)池的本质是(shi)大量(liang)的网站互相(xiang)链接，每个(ge)站单独产生大量的内容吸引蜘蛛来爬，几千个(ge)网站互(hu)链(lian)时，可以想象(xiang)蜘蛛的链接