隨著搜索引擎的技術不斷的提升,抓取網站內容的深度越來越深,在加上CMS系統的大力推廣,網站的結構更加符合搜索引擎的要求,總之對於搜索引擎抓取內容變得更加容易,一般情況下即便不向搜索引擎提交網站地圖,同樣也能獲得不錯的收錄,那麼Sitemap地圖是否對搜索引擎的抓取還有幫助?
我個人認為Sitemap地圖對搜索引擎抓取內容到現在仍然是有幫助的,特別是對大站以及新站抓取內容幫助非常大,這裡值得注意一點,由於網站大小、結構、類型不一樣,那麼我們制作Sitemap地圖的時候也會不一樣,比如資訊類網站,由於內容龐大,建議做txt格式的地圖可能比較好。要注意的事項的幾點事項如下:
1、一般情況下,我們在制作sitemap時,建議大家使用XML格式,不建議大家用html以及txt的格式,假如你的網站是電商方面或者是資訊類網站,信息量非常大,而且結構也復雜,頁面也非常多,這個時候你可以考慮使用txt的格式。因為txt模式不能夠設置更新頻率和權重所以不建議使用這種模式。
2、如果你網站不是靜態,也不是偽靜態,完全是純動態網站,那麼sitemap地圖url不要出現參數,例如問號,等號等這些特殊符號,也就是說不帶有參數的這些特殊符號。我們可以通過轉換的形式來解決特殊參數符號,因為問號和等號等字符是需要用相對應的代碼進行表示。
3、建議把一些重要的url網址盡量放在最上面,比如欄目頁的url,頻道頁url,專題頁url等,當然到底什麼樣的url頁面重要,完全是由網站本身決定,我這裡只是舉幾個例子,為什麼要把重要的url放在最上面呢?大家都知道,蜘蛛是從左到右,上到下的爬行規律的,舉個例子,之前有個同行把某個已刪除的頻道提交到網站地圖,而且還是放在最前面,結果這個刪除的欄目下的所有頁面都被抓取,而其他沒有刪除的欄目卻因為網頁眾多沒有被抓取。
4、如果你網站由於某些原因,有些站把制作後的地圖並且已經提交給搜索引擎的頁面刪除了,但是sitamap地圖中的url並沒有隨網站同步而刪除,那麼就會出現404頁面,所以,在刪除網站頁面的同時,一定要進行同步刪除sitamap地圖中的URL。
5、新站不建議使用比daily長的周期,以免出現問題。所有的頁面更新頻率都是always屬於作弊。也不要所有的更新頻率都一模一樣,不可能。另外,權重方面要注意一下,不建議所有的網站權重都是1.0,因為這個網站權重是站內網站權重的分布,而不是站外網站權重的分布,在設置的網站總權重不變。SEO需要考慮那些頁面需要推廣,可以適當的給予高權重,不推廣的頁面不建議設置高權重。