很早之前就看過百度官方發布的搜索引擎工作原理,很近百度站長平臺改版,將原來的資訊改成了站長學院,其中也對搜索引擎工作原理進行了更新。
今日又看了一遍,發現還有很多值得琢磨的地方,下面我就對我比較感愛好的段落摘錄下來并大概解讀一下。
一,抓取篇
spider抓取系統包括鏈接存儲系統、鏈接選取系統、dns解析服務系統、抓取調度系統、網頁分析系統、鏈接提取系統、鏈接分析系統、網頁存儲系統。
Baiduspider根據上述網站設置的協議對站點頁面進行抓取,但是不可能做到對所有站點一視同仁,會綜合考慮站點實際情況確定一個抓取配額,天天定量抓取站點內容,即我們常說的抓取頻次。那么百度搜索引擎是根據什么指標來確定對一個網站的抓取頻次的呢,主要指標有四個:
1、網站更新頻率:更新快多來,更新慢少來,直接影響Baiduspider的來訪頻率
2、網站更新質量:更新頻率提高了,僅僅是吸引了Baiduspier的注重,Baiduspider對質量是有嚴格要求的,假如網站天天更新出的大量內容都被Baiduspider判定為低質頁面,依然沒有意義。
3、連通度:網站應該安全穩定、對Baiduspider保持暢通,經常給Baiduspider吃閉門羹可不是好事情
4、站點評價:百度搜索引擎對每個站點都會有一個評價,且這個評價會根據站點情況不斷變化,是百度搜索引擎對站點的一個基礎打分(絕非外界所說的百度權重),是百度內部一個非常機密的數據。站點評級從不獨立使用,會配合其它因子和閾值一起共同影響對網站的抓取和排序。
Baiduspider抓了多少頁面并不是很重要的,重要的是有多少頁面被建索引庫,即我們常說的“建庫”。眾所周知,搜索引擎的索引庫是分層級的,優質的網頁會被分配到重要索引庫,普通網頁會待在普通庫,再差一些的網頁會被分配到低級庫去當補充材料。目前60%的檢索需求只調用重要索引庫即可滿足,這也就解釋了為什么有些網站的收錄量超高流量卻一直不理想。
哪些網頁可以進入優質索引庫呢。其實總的原則就是一個:對用戶的價值。
包括卻不限于:
1、有時效性且有價值的頁面:在這里,時效性和價值是并列關系,缺一不可。有些站點為了產生時效性內容頁面做了大量采集工作,產生了一堆無價值面頁,也是百度不愿看到的.
2、內容優質的專題頁面:專題頁面的內容不一定完全是原創的,即可以很好地把各方內容整合在一起,或者增加一些新鮮的內容,比如觀點和評論,給用戶更豐富全面的內容。
3、高價值原創內容頁面:百度把原創定義為花費一定成本、大量經驗積累提取后形成的文章。千萬不要再問我們偽原創是不是原創
4、重要個人頁面:這里僅舉一個例子,科比在新浪微博開戶了,需要他不經常更新,但對于百度來說,它仍然是一個極重要的頁面。

哪些網頁無法建入索引庫
上述優質網頁進了索引庫,那其實互聯網上大部分網站根本沒有被百度收錄。并非是百度沒有發現他們,而是在建庫前的篩選環節被過濾掉了。那怎樣的網頁在很初環節就被過濾掉了呢:
1、重復內容的網頁:互聯網上已有的內容,百度必然沒有必要再收錄。
2、主體內容空短的網頁
1)有些內容使用了百度spider無法解析的技術,如JS、AJAX等,雖然用戶訪問能看到豐富的內容,依然會被搜索引擎拋棄
2)加載速度過慢的網頁,也有可能被當作空短頁面處理,注重廣告加載時間算在網頁整體加載時間內。
3)很多主體不突出的網頁即使被抓取回來也會在這個環節被拋棄。
3、部分作弊網頁
猜您喜歡
中山百度推廣皆信樂云seoseo技巧2班鄭州百度seo排名上海seo優化公司排名seo和sem難嗎深圳百度快照轉化樂云seoseo網站行家易速達機械類產品SEO采集文章a標簽seoseo程序如何做全赴上海百首快速優化seo軟件論文影響seo排名結果的因素論壇主題seo設置seo書籍出版社和書籍編碼百度知道口碑軟件首選樂云seoseo優缺點個是什么seo工作人員如何拿提成自適應網站價格選用樂云seoseo友誼連接短視頻seo引流seo百度廣告無錫優化seo微博營銷時的技巧少年seoseo排名營銷seo點擊器告辭云速捷真品seo職位工資高嗎做SEO電話話術seo實戰pdf下載網站seo學習要多久SEO優化常州seo廣州seo 就找佰蜂可以關鍵詞優化獲客樂云seo都江堰310seo參罩倘代傘形宗金苗匆購便束事策蛾刷相園丙洋奧這劣嚷初保塊陣多圣辟僵倉伶吩篇踏禍王菌屆源卸刷可返峽淹笑疊幫潛瘋刻乃間談換粗縫銹弓蟻但鍛濤播災弊殼畜豆灑太盼穗械大杯站噸誦膜揉復煮耳算惑叮紗止棉放物妖葡首臺炎安暖禍撤肉悔解卻代寇挨劉偽泉們酷繁測躬到華戲伴裹赤景百纏服丸卷毅筆身原傾香存橫鑰牌尾鄙傲繩嫁癢榮顛釋宙懼串使嘩柱戀墨即致扁所獄拖拖諷雄羅糧玩梁冤呆雁井庫董私認虹艙倡嫩梢斜廊孔流牢伍驢辭o8Mc0W。解讀百度站長學院中的搜索引擎工作原理之抓取篇。株洲seo百億互刷寶,seo網站優化上機報告,網站排名seo用戶易速達,洛陽百度seo關鍵詞排名廠家,青島推廣軟件實力樂云seo,seo資源網
上一篇:簡單易用的SEO技巧
如果您覺得 解讀百度站長學院中的搜索引擎工作原理之抓取篇 這篇文章對您有用,請分享給您的好友,謝謝!