蜘蛛陷阱這一詞我相信從業SEO的人員都聽說過,這些會對蜘蛛爬取的過程造成障礙,我們去除這些陷阱可以使蜘蛛在我們的網頁中爬取更長的時間,可以收錄我們更多的網頁。下面我們來總結一下一些不利於蜘蛛抓取的陷阱:
1.框架結構的使用(iframe)標簽引入板塊的
我們見過好多網站使用了框架結構,框架結構可以讓我們使用起來更方便,但是方便的同時影響了百度蜘蛛爬取,框架結構還是不建議使用的。
2.flash
flash做出來的動畫非常好看,有的網站用的一個大塊的flash,但是這個時候影響了蜘蛛的爬取,百度一般的是抓取的HTML代碼,這個時候影響了蜘蛛爬取。
3.JavaScript
JavaScript和flash是差不多的,同樣也可以制作出特效吸引眼球,但是好多網站都是用的js寫的一些導航,這個就是一個蜘蛛陷阱。
4.動態URL
動態URL指的是網址裡面帶有一些無規則的字母、問號、還有一些參數等。這個時候動態的URL也是不利於蜘蛛爬取,我們應盡量使用靜態URL。
以上就是我們常見的蜘蛛陷阱,了解了這些我們應該避免給“蜘蛛”創造一個良好的環境!