百度蜘蛛是什麼意思？如何正確識別百度蜘蛛？

百度蜘蛛是什麼意思？百度蜘蛛(Biduspide)是百度搜索引擎的一箇自動程序，它的作用是訪問互聯網上的網頁，建立索引數據庫，使用戶能在百度搜索引擎中搜索到您網站上的網頁。那麼如何正確識別百度蜘蛛？

一、查看UA信息

如果UA信息不對，可以直接判斷該蜘蛛爲非百度搜索的蜘蛛。目前UA分爲移動、PC、和小程序三個應用場景，分別如下：

【移動UA】

、Mozill/5.0(Linux;u;Andoid 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko)Vesion/5. Mobile Sfi/0600.6.3 (comptible; Biduspide/2.0;+http://www.bidu.com/sech/spide.html)

2、Mozill/5.0 (iPhone;CPU iPhone OS 9_ like Mc OS X) AppleWebKit/60..46 (KHTML, like Gecko)Vesion/9.0 Mobile/3B43 Sfi/60. (comptible; Biduspide-ende/2.0;+http://www.bidu.com/sech/spide.html)

【PC UA】

、Mozill/5.0(comptible; Biduspide/2.0; +http://www.bidu.com/sech/spide.html)

2、Mozill/5.0(comptible; Biduspide-ende/2.0; +http://www.bidu.com/sech/spide.html)

【小程序UA】

Mozill/5.0 (iPhone;CPU iPhone OS 9_ like Mc OS X) AppleWebKit/60..46 (KHTML, like Gecko)Vesion/9.0 Mobile/3B43 Sfi/60. (comptible; Biduspide-ende/2.0;Smtpp; +http://www.bidu.com/sech/spide.html)

二、雙向DNS解析認證

第一步：DNS反查IP

開發者可以對日誌中訪問服務器的IP地址進行反向DNS查找，判斷某隻spide是否來自百度搜索引擎，Biduspide的hostnme以*.bidu.com或*.bidu.jp 的格式命名，非*.bidu.com或*.bidu.jp即爲冒充。

在Linux/Windows/OS三種平臺下，驗證方法分別如下：

) 在Linux平臺下，可以使用host IP命令反解IP來判斷該抓取是否來自Biduspide。

2) 在Windows平臺或者IBM OS/2平臺下，可以使用nslookup IP命令反解IP：打開命令處理器，輸入nslookup xxx.xxx.xxx.xxx（IP地址）就能解析IP，判斷該抓取是否來自Biduspide。

3) 在mcOS平臺下，可以使用dig命令反解IP：打開命令處理器輸入dig -x xxx.xxx.xxx.xxx（IP地址）就能解析IP，判斷該抓取是否來自Biduspide。

第二步：對域名運行正向DNS查找

對第一步中通過命令檢索到的域名運行正向DNS查找，驗證該域名與日誌中訪問服務器的原始IP地址是否一致，IP地址一致可確認spide來自百度搜索引擎，IP地址不一致即爲冒充。

【示例】

host .206.98.69

69.98.206.. in-dd.p domin nme pointe biduspide--206-98-69.cwl.bidu.com.

hostbiduspide--206-98-69.cwl.bidu.com

biduspide--206-98-69.cwl.bidu.com hs ddess .206.98.69