今天來說說怎樣辨別Google蜘蛛。
點擊Windows系統裡的“開始” – “運行”,輸入tracert 203.208.60.179,點擊確定。
運行結果顯示:crawl-203-208-60-179.googlebot.com
這種方法叫做反向DNS查找,和辨別百度蜘蛛真偽的操作是一樣的。但我發現現在的采集越來越高明,也會偽造反向DNS來指向***.googlebot.com。這時候,我們需要驗證運行結果的反向DNS得出的IP地址。
點擊Windows系統裡的“開始” – “運行”,輸入tracert crawl-203-208-60-179.googlebot.com,點擊確定。
運行結果得出的IP地址與原本檢測IP對應即可。
希望這個分享對大家發現老奸巨猾的采集者有幫助。本文地址:http://yihuiblog.com/a/341.html,轉載請注明原文鏈接。
感謝 一灰 的投稿