搜索引擎蛛蛛大家都知道，他只是個程序。沒有生命也不是大家說的“上帝”，既然是程序那麼它一定會有他的一個運算方式，這個也就是我們大家常說的搜索引擎工作原理或者稱為算法。那麼反過來說，要是我們能很好的把握它的一個算法或者了解搜索引擎是如何來判斷我們的網站的主題，我們是不是可以就針對這個做些SEO上面的技巧性優化？
搜索引擎蛛蛛通過網絡上的鏈接或者其它路徑爬到我們的網站，它第一接觸的是什麼？對，是我們網站的域名，域名也是一個鏈接地址只不過他是我們網站的主要入口。如若你的網站域名中包括你所優化的關鍵詞，這就在第一時間讓蛛蛛有了方向感，比如我的博客是寫SEO為主的，我的域名選擇上也就包含了SEO這個詞。當然這個也不能說明蛛蛛判斷我們網站主題的主要參考數據。
接下來，我們可以從網站的源碼來一步步分析。對於一般的網站來說接下來的肯定就是我們的網站的三個最重要的描述標簽（description title keywords）這三個SEO標簽的優化詳細的就不說了，我提下重點。特別是我們網站的標題，在做SEO優化的時候一定要特別的去重視。標題標簽一定要包含你要優化的關鍵詞。當然描述標簽等一些也要相應的做調整。這點也是蛛蛛判斷我們網站主題非常重要的參考標准。
其它標簽的運用。比如我們大家經常會用的H標簽。H1標簽中所包含的關鍵詞，加粗加黑的這些關鍵詞也會是蛛蛛參考的一個標准。
網站出現在的關鍵詞的密度問題。這個也是大家經常會提到的一個東西，包括關鍵詞的密碼也會有相應的工具可以供我們去查閱，你要優化的詞在關鍵詞上密度上要做好合理的優化。在我寫的中關村網站優化分析中就特別寫到了這點。值得注意的是，大家千萬不要為了加密度而忘記了我們做SEO的初衷——用戶體驗。
再一個我們得說一下網站的導航。對SEO有研究的朋友相信我這裡所說的導航應該不只一個。包括了主導航與次導航。這裡面的關鍵詞的設置也是值我們去注意與優化的。特別是網站經常會容易犯的一個情況，在主導航上出現的首頁這兩個詞的鏈接，我建議大家去把首頁這兩個詞改成我們的要優化的目標關鍵詞或相關關鍵詞。這樣會在一定程度上合理而自然的增加了我們的網站的關鍵詞密度。
以上是搜索引擎蛛蛛判斷網站主題，幾個非常重要的地方。對這些地方做一些合理的利用與優化對網站的整個優化會起到一定的作用。