楼上说的(de )很多,我补(bǔ )充(chōng )一下,正(zhèng )确的应该(gāi )叫网络(luò )蜘蛛,又称爬虫,本质是搜索(suǒ )引(yǐn )擎派出(chū )的(de )一个执(zhí )行抓取(qǔ )任务(wù )的(de )程(chéng )序蜘蛛池的本质是大量(liàng )的(de )网站互相链(liàn )接(jiē ),每个站单独产生大量的内(nèi )容吸(xī )引蜘蛛来(lái )爬(pá ),几千(qiān )个(gè )网站互链时(shí ),可(kě )以想(xiǎng )象(xiàng )蜘蛛的链接(jiē )
Copyright © 2008-2018