楼上说(shuō )的很多(duō ),我补充(chōng )一下(xià ),正(zhèng )确(què )的应该叫网(wǎng )络蜘蛛,又称爬虫,本质是(shì )搜索引擎派出的一(yī )个(gè )执行抓取(qǔ )任务的程(chéng )序蜘蛛池的(de )本(běn )质(zhì )是大量的网(wǎng )站互相(xiàng )链接,每个站单独产生(shēng )大量的内(nèi )容(róng )吸(xī )引蜘蛛来爬,几(jǐ )千个(gè )网站互(hù )链(liàn )时(shí ),可以想(xiǎng )象蜘蛛(zhū )的链接(jiē )
Copyright © 2008-2018