爬行(crawler)
作者:Promise.(承諾)
瀏覽:379次
發(fā)布時(shí)間:2018-04-11




蜘蛛程序(spider)是搜索引擎的一部分,負(fù)責(zé)在互聯(lián)網(wǎng)上定位和索引每個(gè)網(wǎng)頁(yè),這樣就能夠響應(yīng)搜索者的搜索要求,成功的搜索引擎營(yíng)銷依賴于爬在一個(gè)網(wǎng)站上找到幾乎所有的網(wǎng)頁(yè)。