首先，我想說，搜索引擎優化，沒有所謂的高手或者低手，分別只是你有沒有用心觀察，有沒有獨立思考和判斷的能力，如同每個人都讀書，但書的讀法其實千變萬化，有智慧的人才能盡得真理。以高手進階為標題，標題黨而已，在這個系列裡我將把我從事搜索引擎優化的所有經驗列入其中，希望對從事這個領域的額朋友有所幫助。
作為一個搜索引擎研究者，我認為每個人都應該具備獨立思考的能力，否則seo的能力將難以為繼，觀察搜索引擎，首先應該也必須從服務器日志，觀察蜘蛛的爬行時間、軌跡和規律等等。如果你曾經長期跟蹤觀察過自身服務器蜘蛛的爬行痕跡，你會發現一些非常有價值的東西，比如蜘蛛在某個時間段內在你的站停留的時間幾乎是固定的、站在搜索引擎的眼裡是分階段的、剛開始是一個無名小卒，一步一步的建立搜索引擎的信任感，最終成為搜索引擎眼裡非常重要的一個網站，這也是很多人所謂的權重，這個東西是很致命的。
既然蜘蛛在某個時間段內，停留的時間是固定的，那麼怎麼利用這有限的時間讓蜘蛛收錄盡可能多的站內內容呢？這裡涉及到了，收錄多有什麼意義？意義很大，比如引來長尾詞的流量，比如意味著網站的規模，比如跟權重存在一定的正比例關系。所以，想盡辦法在力所能及的范圍盡可能增加收錄是非常重要的。那麼怎麼在現有的環境下，盡可能的迎合蜘蛛，以獲得良好的收錄呢？
一、網站的層次、結構就不用說了，盡可能的讓所有文章從首頁開始在三次點擊內能點到;
二、網站的階段感，這個怎麼說呢，粗俗一點說，就是你做的事情應該適合你的身份，一個新的，
一點地位都沒有的人，一夜之間，開著一輛奔馳500，傻子都知道這裡面有不合理的東西，這個東
西只能憑自己的經驗去感覺，所以seo有時候感覺也是能起一定作用的;
三、robots文件的使用，可能造成重復頁面的url，如果不能有效處理，使用robots批量禁止是必須的，比如這個游戲網站，用的是discuz的程序，大家都知道discuz在重復頁面的處理方面表現很差，所以就必須使用robots文件了;如果你不能確定自己的網站是否有重復頁面，那麼使用google的網站管理員工具自己檢查一下，不得不說這個工具是個非常務實的工具;
四、這個是我最想說的一點，使用標簽，比如nofollow，我們舉個例子來說，站長網的首頁，有些頁面對搜索引擎來說是沒有意義的，比如登錄頁面，比如注冊頁面，比如部分廣告頁面等，這些頁面即時被收錄，也沒有任何意義，何不用nofollow標簽告訴蜘蛛這些鏈接不需要收錄，不要浪費時間抓取這些鏈接，把節省下來的時間去抓取那些新鮮的文章鏈接，這不是挺好的嗎？
總結，這篇文章的核心是如何利用蜘蛛在特定時期停留的有限時間內讓它抓取盡可能多的文章，當然可能還有其他朋友有更多更好的方法，歡迎大家發布評論說說自己的看法。
我寫文章，可能天馬星空，想到什麼寫到什麼，但我會寫出來的一定是我認為在當下是有效果的，因為我不想誤人子弟。高手進階（二），明日發布。本文由www.1836.com 站長供稿
感謝 4399 的投稿