楼(lóu )上说的很多,我(wǒ )补充(chōng )一下,正确的应该(gāi )叫(jiào )网络(luò )蜘蛛,又称爬(pá )虫,本质是(shì )搜索引擎(qíng )派出(chū )的一个执行(háng )抓(zhuā )取任务的程序(xù )蜘蛛池(chí )的(de )本质是大量的(de )网(wǎng )站互(hù )相链接,每个(gè )站单独(dú )产(chǎn )生大量(liàng )的内(nèi )容(róng )吸引蜘蛛来爬(pá ),几(jǐ )千个网站(zhàn )互链时,可以想(xiǎng )象蜘(zhī )蛛的链接(jiē )
Copyright © 2008-2018