楼(lóu )上(shàng )说的很多(duō ),我补充一(yī )下(xià ),正确的应该叫网络蜘蛛,又称爬(pá )虫,本质是搜索引擎(qíng )派(pài )出的一个执(zhí )行抓取(qǔ )任务的程序蜘蛛(zhū )池的本(běn )质(zhì )是(shì )大量(liàng )的(de )网站互相(xiàng )链(liàn )接,每个站单独产(chǎn )生大量的(de )内容(róng )吸(xī )引蜘蛛来(lái )爬(pá ),几千个网站互(hù )链时,可以想象(xiàng )蜘蛛的(de )链接(jiē )
Copyright © 2008-2018