楼(lou)上说的很(hen)多(duo),我(wo)补充一下,正(zheng)确的应该叫网络蜘蛛(zhu),又称(cheng)爬(pa)虫(chong),本质是搜索引擎派出的一个执行抓取任务的(de)程(cheng)序蜘蛛(zhu)池的本(ben)质是大量的网(wang)站互相链接(jie),每(mei)个站单(dan)独产生大量的(de)内容(rong)吸(xi)引蜘蛛来爬,几(ji)千个网(wang)站互链时(shi),可以想象(xiang)蜘蛛的链接(jie)
Copyright © 2008-2028