楼(lóu )上说(shuō )的很多(duō ),我补充(chōng )一下,正确(què )的应该叫网络(luò )蜘蛛,又称爬虫,本质是(shì )搜索(suǒ )引(yǐn )擎派出(chū )的一个(gè )执行抓取(qǔ )任(rèn )务(wù )的(de )程序(xù )蜘蛛(zhū )池的本质是大量的网站互相(xiàng )链(liàn )接,每个(gè )站单独产生大量的内(nèi )容吸引(yǐn )蜘蛛来爬(pá ),几千个(gè )网站互(hù )链时(shí ),可以想象蜘(zhī )蛛(zhū )的链(liàn )接(jiē )
Copyright © 2008-2018