楼(lóu )上说的(de )很多,我补充一下(xià ),正(zhèng )确的应该(gāi )叫网络(luò )蜘蛛,又(yòu )称(chēng )爬虫,本质是(shì )搜(sōu )索引擎(qíng )派出的(de )一个执(zhí )行抓取任务的程序蜘蛛池的本质是(shì )大(dà )量(liàng )的网站互(hù )相(xiàng )链接,每个(gè )站(zhàn )单独(dú )产生大量的内容吸引蜘蛛来(lái )爬(pá ),几千个(gè )网(wǎng )站(zhàn )互(hù )链时,可(kě )以(yǐ )想象蜘蛛(zhū )的(de )链接
Copyright © 2008-2018