觸屏版
全國(guó)服務(wù)熱線:0571-87205688
登錄
注冊(cè)
客戶中心
關(guān)注云客
有一些網(wǎng)站設(shè)計(jì)做的對(duì)于搜索引擎來(lái)說(shuō)很不友好,就導(dǎo)致了不利于蜘蛛的爬行和抓取,其實(shí)這樣就構(gòu)成了一個(gè)蜘蛛陷阱。官方說(shuō)法,“蜘蛛陷阱”是阻止蜘蛛程序爬行網(wǎng)站的障礙物,通常是那些顯示網(wǎng)頁(yè)的技術(shù)方法,目前很多瀏覽器在設(shè)計(jì)的時(shí)候考慮過(guò)這些因素,所以可能網(wǎng)頁(yè)界面看起來(lái)非常正常,但這些蜘蛛陷阱會(huì)對(duì)蜘蛛程序造成障礙,如果消除這些蜘蛛陷阱,可以使蜘蛛程序收錄更多的網(wǎng)頁(yè)。SEO工作中,網(wǎng)頁(yè)被收錄是基礎(chǔ)工作,但對(duì)于搜索引擎來(lái)講,極少情況會(huì)100%收錄你網(wǎng)站的所有網(wǎng)頁(yè),搜索引擎的爬蟲程序設(shè)計(jì)的再精巧,也難以逾越所謂的蜘蛛陷阱。
搜索引擎蜘蛛陷阱有著怎樣的危害呢?
搜索引擎蜘蛛陷阱導(dǎo)致了不利于蜘蛛的爬行和抓取,從而導(dǎo)致網(wǎng)站收錄情況不佳,最終影響網(wǎng)站關(guān)鍵詞排名。
搜索引擎蜘蛛陷阱的主要類別
1、登錄要求
有些企業(yè)站和個(gè)人站的設(shè)置一定要注冊(cè)登錄后才能看到相關(guān)的文章內(nèi)容,這種對(duì)蜘蛛不是很友好,蜘蛛不會(huì)注冊(cè)、也不會(huì)登錄。
2、動(dòng)態(tài)URL
什么叫動(dòng)態(tài)URL、什么叫靜態(tài)URL,簡(jiǎn)單的說(shuō)就是帶有問(wèn)號(hào)、等號(hào)及參數(shù)的網(wǎng)址就是動(dòng)態(tài)URL,動(dòng)態(tài)URL不利于搜索引擎蜘蛛的爬行和抓取。
3、強(qiáng)制用Cookies
部分站長(zhǎng)為了讓用戶記住登陸信息,強(qiáng)迫用戶使用Cookies如果未開(kāi)啟,則無(wú)法進(jìn)行訪問(wèn),訪問(wèn)頁(yè)面顯示的也不會(huì)正常,這種方式會(huì)讓蜘蛛無(wú)法進(jìn)行訪問(wèn)。
4、框架結(jié)構(gòu)
首先各位站長(zhǎng)你知道什么叫框架結(jié)構(gòu)的世界嗎?如果你不知道恭喜你,這個(gè)蜘蛛陷阱你已經(jīng)躲避了,也不要去了解,所以有關(guān)框架結(jié)構(gòu)的設(shè)計(jì)不做任何的介紹。雖然說(shuō)框架結(jié)構(gòu)對(duì)網(wǎng)站的維護(hù)和更新有一定的方便性。但是,它不利于搜索引擎蜘蛛抓取。這也就是現(xiàn)在框架結(jié)構(gòu)不流行的因素之一。
5、各種跳轉(zhuǎn)
對(duì)搜素引擎來(lái)說(shuō)只對(duì)301跳轉(zhuǎn)相對(duì)來(lái)說(shuō)比較友好,對(duì)其他形式的跳轉(zhuǎn)都是比較敏感,例如:JavaScrit跳轉(zhuǎn)、MetaRefresh跳轉(zhuǎn)、Flash跳轉(zhuǎn)、302跳轉(zhuǎn)。
有些網(wǎng)站的做法很讓人無(wú)奈,當(dāng)你打開(kāi)網(wǎng)頁(yè)后會(huì)自動(dòng)轉(zhuǎn)向其他頁(yè)面,就算打開(kāi)的頁(yè)面和你要找的頁(yè)面主體先關(guān)也算過(guò)得去。但是很大部分的網(wǎng)站轉(zhuǎn)向讓你無(wú)任何理由和目的這種轉(zhuǎn)向不推薦大家使用,如果你非要做轉(zhuǎn)向,只推薦用301永久跳轉(zhuǎn),可以將權(quán)重進(jìn)行傳遞,除了此轉(zhuǎn)向其他都不推薦,因?yàn)楹芏嗟恼加闷渌D(zhuǎn)向欺騙用戶和搜索引擎,也是heimao的一種手段,所以建議大家不要使用,以免網(wǎng)站被K。
6、Flash
有的網(wǎng)站頁(yè)面使用Flash視覺(jué)效果是很正常的,比如用Flash做的Logo、廣告、圖表等,這些對(duì)搜索引擎抓取和收錄是沒(méi)有問(wèn)題的,很多網(wǎng)站的首頁(yè)是一個(gè)大的Flash文件,這種就叫蜘蛛陷阱,在蜘蛛抓取時(shí)HTML代碼中只是一個(gè)鏈接,并沒(méi)有文字,雖然大的Flash效果看上去很好,外觀看著也很漂亮,但可惜搜素引擎看不到,無(wú)法讀取任何內(nèi)容所以為了能體現(xiàn)網(wǎng)站優(yōu)化的最好效果,不提倡這種Flash做首頁(yè)圖片。
7、Javascript鏈接
因?yàn)镴S有很多吸引人們眼球的驚人的各種效果,很多站長(zhǎng)呢,就用Javascript腳本做一些導(dǎo)航。其實(shí),Javascript同樣也是比較嚴(yán)重的蜘蛛陷阱之一。
當(dāng)然,有的搜索引擎是可以獲得Javascript上的鏈接,甚至可以執(zhí)行腳本并跟蹤鏈接。但對(duì)于一些權(quán)重比較低的網(wǎng)站來(lái)說(shuō),還是大可不必浪費(fèi)時(shí)間,不如多更新一些高質(zhì)量的文章,多做幾個(gè)外鏈。
8、Session ID
如果我們的網(wǎng)站使用Session ID跟蹤用戶訪問(wèn),這樣就會(huì)出現(xiàn)一種現(xiàn)象,搜索引擎每一次訪問(wèn)我們的頁(yè)面時(shí)出現(xiàn)一個(gè)不一樣的Session ID,即使訪問(wèn)的是同一個(gè)頁(yè)面,它也會(huì)出現(xiàn)不一樣的ID,但是內(nèi)容卻是一樣的,就形成了大量的重復(fù)性內(nèi)容,這也就形成了一個(gè)蜘蛛陷阱,也不利于網(wǎng)站的優(yōu)化。那么我們通常建議大家使用cookies而不要生成Session ID。
如何避免搜索引擎蜘蛛陷阱?
1、采用session id的頁(yè)面,有的銷售類站點(diǎn)為了分析用戶的某些信息會(huì)采用會(huì)話ID來(lái)跟蹤用戶,訪問(wèn)站點(diǎn)的時(shí)候每個(gè)用戶訪問(wèn)都會(huì)增加一次session id而加入到URL中,同樣蜘蛛的每一次訪問(wèn)也會(huì)被當(dāng)做為一個(gè)新用戶,每次蜘蛛來(lái)訪問(wèn)的URL中都會(huì)加入一個(gè)session id,這樣就會(huì)產(chǎn)生了同一個(gè)頁(yè)面但URL不同的情況,這種的一來(lái)會(huì)產(chǎn)生復(fù)制內(nèi)容頁(yè)面,造成了高度重復(fù)的內(nèi)容頁(yè),同時(shí)也是最常見(jiàn)的蜘蛛陷阱之一。比如說(shuō)有的網(wǎng)站的為了提高銷售業(yè)績(jī),而進(jìn)行彈窗會(huì)話等,比如說(shuō)您好來(lái)自XXX地的朋友等。
2、常識(shí)性的蜘蛛陷阱,采用強(qiáng)制注冊(cè)或登錄才能訪問(wèn)的頁(yè)面,這種的對(duì)于蜘蛛來(lái)說(shuō)就相當(dāng)為難了,因?yàn)橹┲霟o(wú)法提交注冊(cè),更無(wú)法輸入用戶名和密碼登錄查看內(nèi)容,對(duì)于蜘蛛來(lái)說(shuō)我們直接點(diǎn)擊查看到的內(nèi)容也是蜘蛛所能看到的內(nèi)容。
3、喜歡采用flash的站點(diǎn),之所以說(shuō)是喜歡采用flash的站點(diǎn)是因?yàn)閷?duì)于一些中小型企業(yè)來(lái)說(shuō),因?yàn)閒lash本身可以做很多種效果,尤其是放在導(dǎo)航上視覺(jué)效果強(qiáng),所以不少企業(yè)站喜歡弄個(gè)flash來(lái)展示自己公司的實(shí)力,文化,產(chǎn)品等,甚至一些企業(yè)站點(diǎn)的網(wǎng)站首頁(yè)就是一個(gè)flash,要么是在多長(zhǎng)時(shí)間后通過(guò)flash跳轉(zhuǎn)到另外一個(gè)頁(yè)面,要么就是通過(guò)flash上的鏈接讓用戶自己點(diǎn)擊后進(jìn)入一個(gè)新的頁(yè)面,但是對(duì)于蜘蛛來(lái)說(shuō)一來(lái)是很難讀取flash中的內(nèi)容,所以蜘蛛也很難點(diǎn)擊flash上的鏈接。
4、動(dòng)態(tài)URL,在url中加入過(guò)多的符號(hào)或者網(wǎng)址參數(shù)等,這種蜘蛛陷阱我在url優(yōu)化中曾經(jīng)有提到,雖然說(shuō)隨著搜索引擎的的技術(shù)發(fā)展,動(dòng)態(tài)url對(duì)于蜘蛛的抓取已經(jīng)越來(lái)越不是問(wèn)題了,但是從搜索引擎友好度上來(lái)講,靜態(tài)哪怕是偽靜態(tài)url相對(duì)來(lái)說(shuō)都比動(dòng)態(tài)url要好,可以看下很多SEO同行對(duì)于url中的處理方式。
5、框架,在早期框架到處被泛濫使用,而現(xiàn)在框架網(wǎng)頁(yè)很多網(wǎng)站已經(jīng)很少使用了,一是因?yàn)楝F(xiàn)在隨著各大CMS系統(tǒng)的開(kāi)發(fā)問(wèn)世,網(wǎng)站維護(hù)相對(duì)也越來(lái)越簡(jiǎn)單了,早期網(wǎng)站使用框架是因?yàn)閷?duì)網(wǎng)站頁(yè)面的維護(hù)有一定的便利性了,現(xiàn)在已經(jīng)大可不必了,而且不利于搜索引擎收錄也是框架越來(lái)越少被使用的原因之一。
6、JS,雖然現(xiàn)在搜索引擎對(duì)于javascript里的鏈接是可以跟蹤甚至在嘗試拆解分析的,但是我們最好不要寄望于搜索引擎自己克服困難,雖然說(shuō)通過(guò)js可以做一些效果不錯(cuò)的導(dǎo)航,但是css同樣可以做到;為了提高網(wǎng)站對(duì)搜索引擎的友好度建議使網(wǎng)頁(yè)能夠更好的蜘蛛爬行,就盡量不要采用js,當(dāng)然在seo中,js有一個(gè)好處就是站長(zhǎng)不希望被收錄的頁(yè)面或者友情鏈接可以采用js。還有一種方法可以消除JavaScript 蜘蛛程序陷阱,即使用
頁(yè)面SEO優(yōu)化技巧
優(yōu)惠券的設(shè)計(jì)指南(二):優(yōu)惠券系統(tǒng)篇
從設(shè)計(jì)指南說(shuō)起,詳解iOS系統(tǒng)組件分類體系
SEO優(yōu)化中不可忽視的蜘蛛陷阱
頁(yè)面SEO優(yōu)化技巧
網(wǎng)站SEO站內(nèi)優(yōu)化需要做什么?
網(wǎng)站優(yōu)化中常被降權(quán)的五大原因
SEO優(yōu)化選擇網(wǎng)站關(guān)鍵詞技巧
三大要領(lǐng)提升用戶體驗(yàn),讓你的站內(nèi)優(yōu)化更加完美
網(wǎng)站優(yōu)化如何應(yīng)對(duì)百度最新排名算法
評(píng)論(0人參與,0條評(píng)論)
發(fā)布評(píng)論
最新評(píng)論