這幾天再查看網(wǎng)站日志的時候發(fā)現(xiàn)了一個很奇怪的現(xiàn)象,大部分站長都會有日志分析的習慣,一般國內(nèi)是以百度與Google這兩大搜索引擎。在檢查日志時出現(xiàn)了幾個陌生的百度蜘蛛IP號段,哈哈!你猜對了,這就是傳說中的百度偽蜘蛛,有人會奇怪怎么蜘蛛還有真?zhèn)螁?是的今天就來聊聊這個真?zhèn)伟俣戎┲搿?br/> 在檢查日志的時候發(fā)現(xiàn)了幾個陌生的百度蜘蛛IP號段,三個IP分別是117.28.225.37、117.34.73.70、.116.55.241.24上面也標志著(BaiDu Spider) 如果不去注意分辨的話會覺的這就是百度的蜘蛛,哈!其實你錯了,這個就是傳說中的偽蜘蛛,查了IP這幾個IP分別是福建廈門、陜西西安、云南昆明,是的這些只是我發(fā)現(xiàn)的百度偽蜘蛛中的幾個,網(wǎng)絡有很多的網(wǎng)絡蜘蛛在游蕩。說不定有天就光臨貴站了。
在檢查日志的時候發(fā)現(xiàn)了幾個陌生的百度蜘蛛IP號段除了用IP工具來查詢是否是百度蜘蛛也還有另一種方法,在運行中輸入cmd后再輸入nslookup+ip就可以顯示出是真是偽。這樣的方法會更為準確。
在運行中輸入cmd后再輸入nslookup+ip(如圖)就可以顯示出是真是偽正常百度蜘蛛的IP都是220.181.108.*或123.125.71.*號段的(順便科普一下,這兩個IP段的百度蜘蛛沒有所謂高權重和降權之分)。
那么假的百度蜘蛛對于我們網(wǎng)站有什么危害呢?
這些假蜘蛛對于我們的網(wǎng)站的危害是十分巨大的,具體有以下幾點:
1.占用網(wǎng)站帶寬,導致網(wǎng)站流量上升,增加額外開銷
2.在有限帶寬的前提下,阻礙了正常蜘蛛的抓取
3.誤導了我們在對網(wǎng)站開展SEO工作時的思路
4.部分偽裝成假蜘蛛的采集工具剽竊了我們的工作
當然既然出現(xiàn)了這樣的偽裝蜘蛛,我們就必須要想辦法怎么把其屏蔽了才可以,具體怎么屏蔽呢?這個還得再編輯一篇文章才能完整的來回答這個問題,所以抽空詳細的來說明一下。
評論(0人參與,0條評論)
發(fā)布評論
最新評論