嘉創網絡

  • 網絡營銷論壇新浪微博
  • 網絡營銷論壇
當前位置: 嘉創網絡 > 網絡推廣 > 只需兩步,正確識別百度蜘蛛

只需兩步,正確識別百度蜘蛛

時間:2018-08-06 16:17 來源:未知 作者:admin
  

經常聽到站長們問,百度蜘蛛是什么?最近百度蜘蛛來的太頻繁服務器抓爆了,最近百度蜘蛛都不來了怎么辦,還有很多站點想得到百度蜘蛛的IP段,想把IP加入白名單,但IP不固定,我們無法對外公布。

那怎么才能識別正確的百度蜘蛛呢?來來來,只需兩步,教你正確識別百度蜘蛛

1、查看UA,如果UA都不對,可以直接判斷非百度搜索的蜘蛛,目前對外公布過的UA是:

移動UA:Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,likeGecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)

PC UA:Mozilla/5.0 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html

新增渲染UA:

移動UA:Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 likeMac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143Safari/601.1 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

PC UA:Mozilla/5.0 (compatible;Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

2、反查IP

站長可以通過DNS反查IP的方式判斷某只spider是否來自百度搜索引擎。根據平臺不同驗證方法不同,如linux/windows/os三種平臺下的驗證方法分別如下:

1)、在linux平臺下,您可以使用host ip命令反解ip來判斷是否來自Baiduspider的抓取。Baiduspiderhostname *.baidu.com  *.baidu.jp 的格式命名,非 *.baidu.com  *.baidu.jp 即為冒充。

2)、在windows平臺或者IBM OS/2平臺下,您可以使用nslookup ip命令反解ip 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入nslookup xxx.xxx.xxx.xxxIP 址)就能解析ip 來判斷是否來自Baiduspider的抓取,Baiduspiderhostname*.baidu.com *.baidu.jp 的格式命名,非 *.baidu.com  *.baidu.jp 即為冒充。

3)、 在mac os平臺下,您可以使用dig 命令反解ip 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入dig xxx.xxx.xxx.xxxIP 址)就能解析ip 來判斷是否來自Baiduspider的抓取,Baiduspiderhostname *.baidu.com *.baidu.jp 的格式命名,非 *.baidu.com  *.baidu.jp 即為冒充。

 
------分隔線----------------------------

關于嘉創

  • 嘉創旗下網站

營銷型網站 全網營銷 網絡營銷論壇

嘉創網絡  嘉創微博 網絡營銷論壇  嘉創微博

十年專業的網絡營銷服務提供商

廣東省互聯網協會合作單位

粵ICP備16010550號-2

官方二維碼

掃描以下二維碼關注我們:

網絡營銷論壇微信公眾號

聯系我們

  • 總機:0769-81007865 (共八線)
  • 免費咨詢:18938176917 微信
  • 24小時技術:13418378255
  • 9184598 1024992072
  • 周一至周五9:30~17:30上班

  • 返回頂部
  • 0769-81007865
  • 18938176917
  • QQ在線咨詢
  • 微信公眾號:
    微信公眾號
500竟彩胜平负