楼上说的很多(duō ),我补充一下,正(zhèng )确(què )的应该叫网络蜘蛛,又称(chēng )爬(pá )虫,本质(zhì )是(shì )搜索引擎派出(chū )的一个执行抓(zhuā )取任务的程序蜘蛛(zhū )池(chí )的(de )本质(zhì )是(shì )大(dà )量(liàng )的网(wǎng )站互相链接,每个站(zhàn )单独产生(shēng )大量的内(nèi )容吸(xī )引蜘蛛(zhū )来爬,几(jǐ )千个(gè )网站互(hù )链时,可(kě )以想象(xiàng )蜘(zhī )蛛的链(liàn )接(jiē )
Copyright © 2008-2018