楼(lóu )上说的很多,我补(bǔ )充一下,正确的(de )应该(gāi )叫网(wǎng )络蜘(zhī )蛛(zhū ),又称爬虫,本质是搜(sōu )索引(yǐn )擎派(pài )出的一个执(zhí )行抓取(qǔ )任务的程(chéng )序蜘(zhī )蛛池的本质(zhì )是大(dà )量的网(wǎng )站互相链接(jiē ),每个站单(dān )独产(chǎn )生大量的内容(róng )吸(xī )引(yǐn )蜘蛛(zhū )来爬(pá ),几千个网(wǎng )站互链时(shí ),可(kě )以想象蜘蛛的链(liàn )接(jiē )
Copyright © 2008-2018