我經(jīng)常聽(tīng)到網(wǎng)站管理員問(wèn)，百度蜘蛛是什么？最近百度蜘蛛經(jīng)常來(lái)到服務(wù)器，最近百度蜘蛛都沒(méi)有來(lái)。有多少網(wǎng)站想要獲得百度蜘蛛的IP段，想要添加IP白名單，但I(xiàn)P不固定，我們無(wú)法發(fā)布它。

那么我們?nèi)绾巫R(shí)別正確的百度蜘蛛呢？來(lái)吧，只需兩步教你正確識(shí)別百度蜘蛛

1.檢查UA。如果UA不正確，可以直接判斷非百度搜索蜘蛛。已向公眾宣布的UA是：

移動(dòng)UA: Mozilla/5.0（Linux; u; Android 4.2.2; zh-cn;）AppleWebKit/534.46（KHTML，likeGecko）版本/5.1 Mobile Safari/10600.6.3（兼容; Baiduspider/2.0; +http://www.baidu的.com /搜索/spider.html）

PC UA: Mozilla/5.0（兼容; Baiduspider/2.0; +http://www.baidu.com/search/spider.html）

添加了渲染UA:

移動(dòng)UA：Mozilla/5.0（iPhone; CPU iPhone OS 9_1喜歡Mac OS X）AppleWebKit/601.1.46（KHTML，類(lèi)似Gecko）版本/9.0 Mobile/13B143Safari/601.1（兼容; Baiduspider-render/2.0; +http://www.baidu的.com /搜索/spider.html）

PC UA：Mozilla/5.0（兼容; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html）

2.檢查IP

網(wǎng)站管理員可以使用DNS檢查IP以確定蜘蛛是否來(lái)自百度搜索引擎。根據(jù)平臺(tái)的不同驗(yàn)證方法，linux/windows/os三個(gè)平臺(tái)下的驗(yàn)證方法如下：

1）在Linux平臺(tái)下，您可以使用host ip命令來(lái)反轉(zhuǎn)ip以確定它是否來(lái)自Baiduspider。 Baiduspider的主機(jī)名以* .baidu.com或* .baidu.jp的格式命名，不是* .baidu.com或* .baidu.jp。

2）在Windows平臺(tái)或IBM OS/2平臺(tái)上，您可以使用nslookup ip命令反轉(zhuǎn)ip以確定它是否來(lái)自Baiduspider。打開(kāi)命令處理器并輸入nslookup xxx.xxx.xxx.xxx（IP地址）來(lái)解析ip以確定它是否來(lái)自Baiduspider。 Baiduspider的主機(jī)名以* .baidu.com或* .baidu.jp的格式命名。非* .baidu.com或* .baidu.jp是假冒。

3），在mac os平臺(tái)下，你可以使用dig命令來(lái)反轉(zhuǎn)ip，以確定它是否來(lái)自Baiduspider爬行。打開(kāi)命令處理器并輸入dig xxx.xxx.xxx.xxx（IP地址）來(lái)解析ip以確定它是否來(lái)自Baiduspider。 Baiduspider的主機(jī)名以* .baidu.com或* .baidu.jp的格式命名。非* .baidu.com或* .baidu.jp是假冒。

« FF北京辦事處違反物業(yè)費(fèi)用被停止：我希望恒大不要讓員工成為受害者 | 劃算的雙11爆煉金術(shù) »