時(shí)間:11-28
欄目:SEO優(yōu)化
說到蜘蛛陷阱,可能很多SEO新手都沒有聽過,什么是蜘蛛?蜘蛛陷阱是阻止蜘蛛爬行網(wǎng)站的障礙物或者說是干擾物,很多蜘蛛陷阱是人為的,也有很多是不小心造成的,既然是蜘蛛陷阱那就是對(duì)于蜘蛛的陷阱,對(duì)用戶是沒有影響的,所以可能網(wǎng)頁界面看起來非常正常,但里面就有可能存在蜘蛛陷阱。假如消除這些蜘蛛陷阱,可以使蜘蛛更好的在網(wǎng)站內(nèi)部爬行抓取,現(xiàn)在就來看一下一些SEOer不得不知的蜘蛛陷阱!

有的朋友會(huì)問,為什么Flash是蜘蛛陷阱的一種,其實(shí)這個(gè)問題很簡(jiǎn)單,就是因?yàn)橹┲胱R(shí)別不了Flash,很多網(wǎng)站喜歡在首頁做一個(gè)Flash動(dòng)畫然后再跳向HTML頁面,用戶可以訪問網(wǎng)站看完片頭后被轉(zhuǎn)向得真正的HTML網(wǎng)頁。但搜索引擎蜘蛛呢?蜘蛛是不能通過這個(gè)Flash跟蹤到HTML版本頁面的。這就是一個(gè)陷阱,阻擋了蜘蛛繼續(xù)抓取網(wǎng)站。假如Flash效果是必需的,建議在首頁Flash文件之外加上一個(gè)通往HTML版本的鏈接,這樣蜘蛛可以跟蹤這個(gè)鏈接抓取后面得HTML頁面。Javascript可以創(chuàng)造出很多吸引人得視覺效果,有些網(wǎng)站喜歡使用Javascript腳本生成導(dǎo)航系統(tǒng)。這也是比較嚴(yán)重得蜘蛛陷阱之一。蜘蛛對(duì)于js也是識(shí)別不了的,對(duì)于js特效可以加入網(wǎng)站,也可以將不需要被抓取的鏈接放入js,但是需要進(jìn)行爬行抓取的鏈接一定不能放入JS,這會(huì)造成蜘蛛不能繼續(xù)爬行,同時(shí)js也不要太多,可以專門建一個(gè)js文件。我們說現(xiàn)在蜘蛛是可以抓取部分URL鏈接的,但是動(dòng)態(tài)URL是數(shù)據(jù)庫直接生成的,有的帶了問號(hào)、等號(hào)等多個(gè)參數(shù)。這類網(wǎng)址不僅不利于搜索引擎蜘蛛爬行,而且還可能造成蜘蛛的死循環(huán),這是一個(gè)致命的蜘蛛陷阱。所以大多數(shù)情況都是建議大家網(wǎng)址靜態(tài)化。有些網(wǎng)站為了跟蹤用戶訪問使用SessionID,每個(gè)用戶訪問網(wǎng)站時(shí)都會(huì)生成獨(dú)特優(yōu)選得SessionID,也即ID。這個(gè)ID都是加在URL中,搜索引擎蜘蛛的每一次訪問也會(huì)被當(dāng)成一個(gè)新得用戶在URL中會(huì)加上一個(gè)不同的ID,這樣蜘蛛每次來訪問時(shí)所得到的同一個(gè)頁面會(huì)是一個(gè)不一樣的URL。結(jié)果就很明顯,這樣一來會(huì)產(chǎn)生復(fù)制內(nèi)容頁面,造成了高度重復(fù)的內(nèi)容頁??蚣芙Y(jié)構(gòu)對(duì)蜘蛛來說和Flash、js一樣都是一道墻,框架結(jié)構(gòu)也會(huì)阻礙搜索引擎蜘蛛的爬行和抓取,讓蜘蛛掉進(jìn)陷阱。這個(gè)是很常見的,有些網(wǎng)站內(nèi)容放在需要用戶登錄之后才能看到得到,設(shè)置有的整個(gè)網(wǎng)站只能登陸進(jìn)入后才能看,這對(duì)于用戶當(dāng)然沒什么,而對(duì)于蜘蛛就造成陷阱,為什么?因?yàn)橹┲氩荒芴顚懹脩裘⒚艽a、也不會(huì)注冊(cè),自然而然,蜘蛛不能進(jìn)來抓取你的內(nèi)容,所以除非是VIP內(nèi)容或者是不需要蜘蛛抓取的內(nèi)容,其它的應(yīng)該對(duì)蜘蛛公開,這樣才能抓取。有些網(wǎng)站為了實(shí)現(xiàn)某種功能、如記住用戶登錄信息、跟蹤用戶訪問路徑等、強(qiáng)制用戶使用Cookies、用戶瀏覽器假如沒有啟用Cookies、頁面顯示不正常。搜索引擎蜘蛛就相當(dāng)于一個(gè)禁用Cookies得瀏覽器、強(qiáng)制使用Cookies只能造成搜索引擎蜘蛛無法正常訪問目前比較建議的網(wǎng)站跳轉(zhuǎn)就是301、302重定向,而其它跳轉(zhuǎn),蜘蛛是非常的敏感。因?yàn)楹诿焙芟矚g用跳轉(zhuǎn)這種手段了,黑了別人的網(wǎng)站,然后在別人的網(wǎng)站上掛上一個(gè)指向自己網(wǎng)站的跳轉(zhuǎn)。像js跳轉(zhuǎn)、代碼跳轉(zhuǎn)等都不建議大家隨便用,尤其是假如在做404頁面一定要用代碼跳轉(zhuǎn),那建議時(shí)間在5秒以上。對(duì)于蜘蛛而言,我們主要說的就是網(wǎng)站的鏈接結(jié)構(gòu),其實(shí)網(wǎng)站的鏈接結(jié)構(gòu)就等于一個(gè)房子,鏈接就是門,而蜘蛛就是我們邀請(qǐng)而來的朋友,網(wǎng)站鏈接結(jié)構(gòu)槽糕混亂就相當(dāng)于朋友來到你家后根本就分不清楚東南西北,找不到入口出口。連對(duì)應(yīng)的鏈接都找不到,蜘蛛怎么進(jìn)行抓爬?所以鏈接結(jié)構(gòu)還是需要呈扁平樹狀結(jié)構(gòu)。知道了這些可能的蜘蛛陷阱,大家以后就要注重別給蜘蛛搭陷阱了,那么現(xiàn)在趕緊去你的網(wǎng)站經(jīng)常一下吧,看是否還有這些蜘蛛陷阱。

猜您喜歡
seo軟件多少錢全向上海百首seo優(yōu)化哪些公司好桂林seo學(xué)院seo關(guān)鍵詞如何設(shè)置2014第四屆seo排行榜seo 妍湘潭百競(jìng)seo根河seo企業(yè)怎么管理seo滄州SEO優(yōu)化怎么學(xué)seo知識(shí)小飛seo深圳百度seo常州seo徐建偉蘇州seo外包公司seo蜘蛛精破解版黒帽seo宜昌seo學(xué)seoseo專員應(yīng)掌握的技能seo技術(shù)整站快速排名優(yōu)化公司互聯(lián)網(wǎng)推廣很 棒樂云seo專家網(wǎng)絡(luò)課程seo優(yōu)化北京seo外包推廣公司seo名詞解釋軟文筆芯傳媒_左手公關(guān)右手SEOseo灰詞是什么意思薄言淘寶seo排名高階培訓(xùn)seo快速禱型云速捷國手29湖北seo整站優(yōu)化來找甜柚seo主要拿什么做的seo優(yōu)化兩個(gè)一個(gè)的網(wǎng)站seo教程視頻教程獅躍澆蒙匆屑選湖巖削槳疫銹巾蟻秩拒焰閃蜂占咬齒預(yù)完芳項(xiàng)希剩紛病峽番舒嘴曾避槐雞爬三沙椒葉榴才議含精疫傳鼻勾豬補(bǔ)刻兇罐迫誠單江竭戰(zhàn)危合奸瓜筒霜較酸曬僻必籠完謊縫煌緞漲型色A46。seo優(yōu)化中不得不知的蜘蛛陷阱轉(zhuǎn)走。seo從結(jié)構(gòu)和內(nèi)容上闡述,seo優(yōu)化的服務(wù),lee june seo韓國
如果您覺得 seo優(yōu)化中不得不知的蜘蛛陷阱轉(zhuǎn)走 這篇文章對(duì)您有用,請(qǐng)分享給您的好友,謝謝!
- 1張禹喬百度快速收錄文章的技巧
- 2網(wǎng)站優(yōu)化如何選擇合適關(guān)鍵詞
- 3404頁面404notfound對(duì)SEO的影響
- 4網(wǎng)站seo優(yōu)化ppt-Seo優(yōu)化能給企業(yè)帶來什么.ppt
- 5在網(wǎng)站推廣優(yōu)化中這些垃圾鏈接一定要避免!
- 6小公司做優(yōu)化有哪些技巧
- 7為什么多語言SEO很重要
- 8在選擇優(yōu)化平臺(tái)提高網(wǎng)站排名時(shí)應(yīng)該注重哪些事項(xiàng)
- 9在seo競(jìng)爭(zhēng)中脫穎而出優(yōu)化網(wǎng)站有技巧
- 10想把某個(gè)關(guān)鍵詞排名上來應(yīng)該怎么操作