楼(lóu )上(shàng )说的很多,我补充(chōng )一下(xià ),正确的应该(gāi )叫网络(luò )蜘蛛,又(yòu )称爬(pá )虫,本质(zhì )是搜索引擎(qíng )派(pài )出的一(yī )个执行抓取(qǔ )任务的(de )程序(xù )蜘蛛(zhū )池的本(běn )质是大量(liàng )的(de )网(wǎng )站(zhàn )互相(xiàng )链(liàn )接,每个站单(dān )独产生大(dà )量的内容吸引蜘蛛来爬,几千(qiān )个网站互链时,可以想(xiǎng )象(xiàng )蜘蛛(zhū )的(de )链(liàn )接
Copyright © 2008-2018