楼(lóu )上(shàng )说的很多,我(wǒ )补充(chōng )一(yī )下,正确(què )的应该(gāi )叫网(wǎng )络蜘(zhī )蛛,又(yòu )称爬虫,本质是搜索引擎(qíng )派出(chū )的一个执行抓取任(rèn )务的程(chéng )序(xù )蜘蛛池(chí )的本质是(shì )大(dà )量的网站互相链接,每个站(zhàn )单独产(chǎn )生大量的内容吸引蜘(zhī )蛛来(lái )爬(pá ),几(jǐ )千个(gè )网站互(hù )链(liàn )时,可以想象蜘(zhī )蛛的链接
Copyright © 2008-2018