楼(lóu )上(shàng )说的(de )很(hěn )多,我(wǒ )补充一下,正(zhèng )确(què )的应该叫网络蜘蛛,又称爬(pá )虫,本质是搜索引擎派出(chū )的(de )一个执行(háng )抓(zhuā )取任(rèn )务的程序蜘(zhī )蛛池的(de )本质是大量(liàng )的网站互(hù )相(xiàng )链接,每个(gè )站(zhàn )单独(dú )产生大量(liàng )的内容吸(xī )引蜘蛛来爬(pá ),几千(qiān )个网(wǎng )站互链时,可以(yǐ )想象蜘蛛的链(liàn )接(jiē )
Copyright © 2008-2018