楼上说的很多,我补(bǔ )充(chōng )一下,正确的(de )应该叫网(wǎng )络(luò )蜘(zhī )蛛,又称爬虫,本质(zhì )是搜索引擎派出(chū )的一(yī )个执行抓取任(rèn )务的(de )程序蜘蛛(zhū )池的(de )本质是(shì )大量的网站互相链接,每个站(zhàn )单(dān )独产生(shēng )大(dà )量的(de )内(nèi )容吸引(yǐn )蜘蛛(zhū )来爬(pá ),几千(qiān )个(gè )网(wǎng )站(zhàn )互链(liàn )时,可以想象蜘(zhī )蛛的链(liàn )接(jiē )
Copyright © 2008-2018