中文字幕在线观看,亚洲а∨天堂久久精品9966,亚洲成a人片在线观看你懂的,亚洲av成人片无码网站,亚洲国产精品无码久久久五月天

如何識別百度蜘蛛Baiduspider?

2015-03-23    來源:

容器云強勢上線!快速搭建集群,上萬Linux鏡像隨意使用

上周百度站長平臺接到某站長求助,表示誤封禁了Baiduspider的IP,詢問是否有辦法獲得Baiduspider的所有IP,打算放入白名單加以保護,防止再次誤封。在此要告訴各位站長,Baiduspider的IP池是不斷變動的,我們無法提供IP全集。


除此之外,之前還有站長發(fā)來質疑說Baiduspider光顧過于頻繁,已超越服務器承受能力。而百度站長平臺追查發(fā)現(xiàn),Baiduspider對該站點的抓取并無異常,那只spider極有可能是個李鬼。


那么,站長該如何通過IP來判斷此spider是不是來自百度搜索引擎的呢?


可以通過DNS反查方式來解決這個問題。根據平臺不同驗證方法不同,如linux/windows/os三種平臺下的驗證方法分別如下:


1、在linux平臺下,您可以使用host ip命令反解ip來判斷是否來自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。

071341413170362.jpg

2、在windows平臺或者IBM OS/2平臺下,您可以使用nslookup ip命令反解ip來 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 來判斷是否來自Baiduspider的抓取,Baiduspider的hostname以*.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。


3、在mac os平臺下,您可以使用dig 命令反解ip來 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 來判斷是否來自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。


標簽: dns linux 服務器 搜索 搜索引擎 問題

版權申明:本站文章部分自網絡,如有侵權,請聯(lián)系:west999com@outlook.com
特別注意:本站所有轉載文章言論不代表本站觀點!
本站所提供的圖片等素材,版權歸原作者所有,如需使用,請與原作者聯(lián)系。

上一篇:2014年國內搜索引擎市場份額分析

下一篇:百度站長平臺助站長撬動10億移動流量