《|》

【】

楼(lóu )上(shàng )说的(de )很多(duō )，我补充一(yī )下(xià )，正(zhèng )确(què )的应该叫网络(luò )蜘蛛，又称爬(pá )虫，本质(zhì )是(shì )搜(sōu )索引擎派出的一个执行抓取任务(wù )的程序蜘蛛(zhū )池的(de )本质是大量的(de )网站互(hù )相链接，每(měi )个站单独(dú )产(chǎn )生大量(liàng )的内容吸引(yǐn )蜘蛛来(lái )爬，几千个网站(zhàn )互(hù )链时，可以想(xiǎng )象蜘蛛(zhū )的链接