楼(lóu )上(shàng )说的很多,我补充(chōng )一下,正确(què )的(de )应该(gāi )叫网络蜘蛛,又(yòu )称爬(pá )虫(chóng ),本(běn )质是(shì )搜(sōu )索(suǒ )引擎派出的(de )一个(gè )执(zhí )行抓取任务的(de )程序(xù )蜘蛛(zhū )池(chí )的本质是大量的网站互相链接,每(měi )个(gè )站单(dān )独产(chǎn )生大量(liàng )的内容吸引蜘蛛来爬,几千个网站互链(liàn )时(shí ),可以(yǐ )想象蜘(zhī )蛛的链(liàn )接
Copyright © 2008-2018