楼上说(shuō )的很多,我(wǒ )补(bǔ )充一下(xià ),正确(què )的应(yīng )该(gāi )叫网(wǎng )络蜘(zhī )蛛,又(yòu )称爬(pá )虫,本质是搜索引擎派出(chū )的一(yī )个执行(háng )抓取任务的程(chéng )序(xù )蜘蛛(zhū )池的(de )本(běn )质是(shì )大量的网站互(hù )相链接,每(měi )个站单独产生大量的内容(róng )吸引(yǐn )蜘蛛来(lái )爬,几千(qiān )个网站互链(liàn )时(shí ),可以想(xiǎng )象蜘蛛的链接(jiē )
Copyright © 2008-2018