吸引百度蜘蛛抓取的方法

8.內鏈建設

  蜘蛛的爬行是跟著連結走的,所以內鏈的合理優化可以幫助蜘蛛抓取到更多的頁面,促進網站的收錄。內鏈建設過程中要給用戶合理推薦,除了在文章中增加錨文本之外,可以設置相關推薦,熱門文章,更多喜歡之類的欄目,這是很多網站都在利用的,可以讓蜘蛛抓取更大範圍的頁面。外部連結加上內部連結可以很好的將新站推薦給蜘蛛,讓蜘蛛來抓取你的網站。

9.首頁推薦

  首頁是蜘蛛來訪次數最多的頁面,也是網站權重最高的頁面,可以在首頁設置更新版塊,這樣不僅能讓首頁更新起來,促進蜘蛛的來訪頻率,而且可以促進更新頁的抓取收錄。同理在欄目頁也可以進行此操作。首頁能定時更新那蜘蛛就會覺得你的網站每天都有新的東西,那就不一樣了,那樣蜘蛛會每天不辭辛苦的來趟你的網站看看有什麼可以收錄的,那樣你網站在蜘蛛面前就會經常出現。那樣的話你網站被收錄的可能性會大大加深。

10.檢查死鏈,設置404頁面

  搜尋引擎蜘蛛是通過連結來爬行搜尋,如果太多連結無法到達,不但收錄頁面數量會減少,而且你的網站在搜尋引擎中的權重會大大降低。蜘蛛在遇見死鏈就像進了死胡同,又得折返重新來過,大大降低蜘蛛在網站的抓取效率,所以一定要定期排查網站的死鏈,向搜尋引擎提交,同時要做好網站的404頁面,告訴搜尋引擎錯誤頁面。

11.檢查robots文件

  很多網站有意無意的直接在robots文件屏蔽了百度或網站部分頁面,卻整天在找原因為什麼蜘蛛不來抓取我的頁面,這能怪百度嗎?你都不讓別人進門了sdudd1213,百度是怎麼收錄你的網頁?所以有必要時常去檢查一下網站robots文件是否正常。

12.建設網站地圖

  搜尋引擎蜘蛛非常喜歡網站地圖,網站地圖是一個網站所有連結的容器。很多網站的連結層次比較深,蜘蛛很難抓取到,網站地圖可以方便搜尋引擎蜘蛛抓取網站頁面,通過抓取網站頁面,清晰了解網站的架構,所以建設一個網站地圖不僅提高抓取率還能獲得蜘蛛好感。

13.主動提交

每次更新完頁面,主動把內容向搜尋引擎提交一下也是一個不錯的辦法,只不過不要沒收錄就一直去提交,提交一次就夠了,收不收錄是搜尋引擎的事,提交不代表就要收錄。你一直提交可能會造成反效果。所以不要太焦急,只要你每次改後都主動提交就好,不過還是不建議去改動網站。這樣對網站本身也不是很好。

本文內容整理自網絡, 文中所有觀點看法不代表淘大白的立場