楼上(shàng )说的(de )很多,我补充(chōng )一下(xià ),正确(què )的应(yīng )该叫网络蜘蛛,又(yòu )称(chēng )爬(pá )虫(chóng ),本质是(shì )搜(sōu )索引擎派(pài )出的一(yī )个(gè )执行抓取任务的程序蜘蛛(zhū )池的(de )本质是大量(liàng )的网站互(hù )相链(liàn )接,每个站单独产生大(dà )量的内容(róng )吸引(yǐn )蜘(zhī )蛛来爬,几(jǐ )千个(gè )网站(zhàn )互链时,可(kě )以想象蜘蛛的链(liàn )接(jiē )
Copyright © 2008-2018