楼上(shàng )说(shuō )的很(hěn )多,我(wǒ )补(bǔ )充一下,正确的应该叫网络蜘蛛(zhū ),又(yòu )称爬(pá )虫,本质(zhì )是搜(sōu )索(suǒ )引擎派(pài )出(chū )的一(yī )个执行抓取任务的(de )程序蜘蛛(zhū )池的本(běn )质是大(dà )量的网(wǎng )站互(hù )相链(liàn )接,每个站单独产生(shēng )大量的内容吸(xī )引蜘(zhī )蛛(zhū )来爬,几(jǐ )千个网站互(hù )链时,可以(yǐ )想象蜘蛛的链接(jiē )
Copyright © 2008-2018