楼上说的很多,我补(bǔ )充一(yī )下,正(zhèng )确的(de )应该叫(jiào )网(wǎng )络蜘蛛,又(yòu )称(chēng )爬虫,本质(zhì )是(shì )搜索引(yǐn )擎(qíng )派(pài )出的(de )一个(gè )执(zhí )行(háng )抓取任务的程序蜘蛛池的本质是(shì )大(dà )量的网站(zhàn )互(hù )相(xiàng )链(liàn )接,每个站单独产生大量的内容吸引蜘(zhī )蛛来(lái )爬,几千个(gè )网站互链(liàn )时,可(kě )以(yǐ )想象蜘蛛的链接
Copyright © 2008-2018