楼上说(shuō )的很多(duō ),我补充一下,正(zhèng )确(què )的应该叫网络蜘蛛,又(yòu )称爬(pá )虫,本质是(shì )搜(sōu )索引擎派出的一(yī )个执行(háng )抓取任务的程(chéng )序蜘(zhī )蛛池的本(běn )质(zhì )是大量(liàng )的网站(zhàn )互相链接,每(měi )个站单(dān )独(dú )产生大量的(de )内(nèi )容吸引蜘蛛来爬,几(jǐ )千(qiān )个网站互链(liàn )时(shí ),可以想象蜘(zhī )蛛(zhū )的链(liàn )接
Copyright © 2008-2018