楼(lóu )上(shàng )说的很多,我(wǒ )补充(chōng )一下,正确的(de )应(yīng )该叫网络蜘(zhī )蛛(zhū ),又(yòu )称爬虫,本质是(shì )搜索引擎派出的一个执(zhí )行(háng )抓取(qǔ )任务的程(chéng )序蜘蛛池的本质是大量(liàng )的网站(zhàn )互相链接(jiē ),每(měi )个(gè )站单(dān )独(dú )产生(shēng )大量的(de )内容吸引蜘(zhī )蛛(zhū )来爬,几千个(gè )网站互(hù )链(liàn )时,可以想(xiǎng )象蜘蛛的链接(jiē )
Copyright © 2008-2018