楼(lóu )上说的很多(duō ),我(wǒ )补充(chōng )一下,正(zhèng )确的应该叫网络(luò )蜘(zhī )蛛,又称(chēng )爬(pá )虫(chóng ),本质(zhì )是搜(sōu )索引擎派出的一(yī )个(gè )执(zhí )行抓取任务(wù )的程序(xù )蜘蛛池的本质是(shì )大量的网站互相链接,每个站单(dān )独产生大(dà )量的内(nèi )容吸(xī )引(yǐn )蜘蛛来(lái )爬(pá ),几千个网站(zhàn )互链(liàn )时,可以想象(xiàng )蜘蛛的链接
Copyright © 2008-2018