-
觸屏版
-
全國服務(wù)熱線：0571-87205688
- 云客網(wǎng)首頁
-
登錄
- |
-
注冊
- |
-
客戶中心
- |
-
關(guān)注云客
如何解決百度蜘蛛只爬取首頁的問題
分享
評論
贊1
我們看網(wǎng)站日志的時(shí)候不能只是看搜索引擎的日志爬取的頻率和返回的http碼！要想了解搜索引擎，就必須從它的動態(tài)看起，就是要看它一系列都抓取了什么，最長見的問題就是百度蜘蛛只爬取首頁的問題，很多站長沒有察覺到這個(gè)細(xì)節(jié)，而只是抱怨為什么百度蜘蛛頻繁抓取，而快照、搜錄并沒有很好的表現(xiàn)，甚至出現(xiàn)搜錄減少，快照延遲一個(gè)星期以上，這些都是百度蜘蛛只爬取首頁所帶來的問題，下面就來分析一下。
1.robots.txt、服務(wù)器限制和優(yōu)化策略。如果出現(xiàn)百度蜘蛛只爬取首頁的問題，首先就是要看我們網(wǎng)站的robots.txt，是不是通配符用錯(cuò)了，而導(dǎo)致屏蔽了所有的內(nèi)頁。其次就要看看我們的服務(wù)器，同服務(wù)器的網(wǎng)站是不是也是這樣，看看網(wǎng)站日志是否近期有爬取內(nèi)頁的行為，返回碼是什么，等都可以看出來。在此就是想一下自己的優(yōu)化手段是否合理，比如有沒有文章純采集或者群發(fā)等行為。
2.網(wǎng)站的結(jié)構(gòu)和內(nèi)容。假如服務(wù)器，網(wǎng)站robots.txt，優(yōu)化策略都沒有問題，還是沒有解決如何解決百度蜘蛛只爬取首頁的問題，那么就要從網(wǎng)站本身的結(jié)構(gòu)上分析，網(wǎng)站結(jié)構(gòu)是否混亂，首頁有沒有足夠的鏈接指向內(nèi)頁。還要看看網(wǎng)站的質(zhì)量上，首先就是網(wǎng)站是不是一個(gè)超新站，站內(nèi)內(nèi)容跟新是否有規(guī)律等。
猜你喜歡
評論(0人參與，0條評論)
發(fā)布評論
最新評論