第一步:獲取網站原始日志
如果是windows主機,在ftp的根目錄下就可以找到網站的原始訪問日志目錄。如果是linux主機,以cPanel面板為例,從cPanel面板的日志—>原始訪問日志中獲取網站的原始訪問日志
第二步:使用日志格式化工具www.dnzg.cn
將原始訪問日志導入到日志格式工具中,在這裡推薦使用在線的日志格式化工具(http://xiaoxia.de/upload/apache-log-formatter.html),格式化工具將提供詳盡的來路ip、受訪頁面、User-Agent等信息,通過這些基礎信息,我們可以找到蜘蛛來路ip和頁面的對應關系。
第三步:使用excel統計
分析蜘蛛喜好,從而評估整站的權重分布,文章價值等很多站長都把數據統計分析的門檻想得太高,其實通過簡單的excel統計,即能看出高權重蜘蛛ip在整站頁面的布局。
由於篇幅有限,關於百度蜘蛛ip權重分布的數據,請自行百度“百度蜘蛛IP段“查詢
總結:本人的小站兒童安全座椅全計劃(www.babysafe360.com)通過使用此種簡單的方法,再結合百度統計的用戶頁面訪問量,評估出了一些價值低、權重低、訪問量少的內頁,並強化高權重頁頁的用戶體驗,增強轉化率,再通過合理的整站權重布局策略,在SEO上取得了不錯的效果,歡迎廣大站長與我交流