百度官方說明 只需兩步,正確識別百度蜘蛛

[復制鏈接]

馬上注冊,一起探討正確快速的建站方法

您需要 登錄 才可以下載或查看,沒有帳號?快速注冊

x
經常聽到站長們問,百度蜘蛛是什么?最近百度蜘蛛來的太頻繁服務器抓爆了,最近百度蜘蛛都不來了怎么辦,還有很多站點想得到百度蜘蛛的IP段,想把IP加入白名單,但IP不固定,我們無法對外公布。

那怎么才能識別正確的百度蜘蛛呢?來來來,只需兩步,教你正確識別百度蜘蛛

1、查看UA,如果UA都不對,可以直接判斷非百度搜索的蜘蛛,目前對外公布過的UA是:

移動UA:Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,likeGecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)

PC UA:Mozilla/5.0 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)

新增渲染UA:

移動UA:Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 likeMac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143Safari/601.1 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

PC UA:Mozilla/5.0 (compatible;Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

2、反查IP

站長可以通過DNS反查IP的方式判斷某只spider是否來自百度搜索引擎。根據平臺不同驗證方法不同,如linux/windows/os三種平臺下的驗證方法分別如下:

1)、在linux平臺下,您可以使用host ip命令反解ip來判斷是否來自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。

2)、在windows平臺或者IBM OS/2平臺下,您可以使用nslookup ip命令反解ip來 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 來判斷是否來自Baiduspider的抓取,Baiduspider的hostname以*.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。

3)、 在mac os平臺下,您可以使用dig 命令反解ip來 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 來判斷是否來自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。




上一篇:不常見的后綴域名可能會出現搜索收錄延遲
分享到:  QQ好友和群QQ好友和群
收藏收藏

大神點評43

跳轉到指定樓層
4
downun 發表于 2017-6-21 11:03:04 [百度官方說明] 只看該作者
學習了哦
很給力,希望分享更多給力的帖子啊。
[url=http://www.alihuixuan.com]九塊九包郵[/url]
6
fghy 發表于 2017-7-15 13:57:41 [百度官方說明] 只看該作者
學習了
7
calmrelic 發表于 2017-7-18 16:02:59 [百度官方說明] 只看該作者
非常好的分享,謝謝樓主。
[url=http://www.jlsy
謝謝分享  http://www.hxstlhh.com/
<a  target="_blank">河北地質大學華信學院 社團聯合會</a>
www.hxstlhh.com
本帖最后由 tsc3396455731 于 2017-7-21 13:49 編輯

111111
www.hxstlhh.com
10
fyj1818 發表于 2017-7-26 10:10:44 [百度官方說明] 只看該作者
百度要是一直不收,該怎么辦了
www.foreeca.com
11
hdt 發表于 2017-7-26 10:52:41 [百度官方說明] 只看該作者
多謝樓主分享,學習了
http://www.shhssz.ne
很給力,希望分享更多給力的帖子啊。
13
fyj1818 發表于 2017-8-7 09:52:40 [百度官方說明] 只看該作者
好專業,不會搞啊
www.foreeca.com
謝謝分享,漲姿勢了,樓主能幫忙看看我們網站還存在哪些問題嗎?http://www.zaf.cc/
http://www.zaf.cc
可以直接判斷非百度搜索的蜘蛛,目前對外公布過的UA是
www.bjhxjp.org|做網站|清洗煙道|
您需要登錄后才可以回帖 登錄 | 快速注冊

本版積分規則

建站高手

精英站長

  • 3489 積分
  • 999 帖數
  • 0 日志
廣告招商 QQ: 5620010
快速回復 返回頂部 返回列表
铁板炒面能赚钱不