百度官方教你如何正确识别百度蜘蛛-Ferry资源网

很多站长查看网站日志的时候，会看到有百度蜘蛛来访问自己的网站，但有时候会发现真真假假的蜘蛛都有来访，但不知道如何识别真假。下面魏艾斯笔记分享一下百度官方对于如何正确识别百度蜘蛛的教程，以及老魏的一些判断方法汇总。

文章目录
隐藏

1、查看UA

2、DNS 反查 IP

3、宝塔面板自带蜘蛛

4、网络搜集搜索引擎蜘蛛IP

5、老魏总结

1、查看UA

UA是 User agent的缩写。如果UA不对就能直接判断不是百度搜索的蜘蛛。

找到并打开你的网站日志（虚拟主机、服务器都有），搜索 Baiduspider，按照下面百度官方公布过的UA自行比对：

移动UA：Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

PC端 UA：Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

新增渲染UA:

移动UA：Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

PC UA：Mozilla/5.0 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

小程序UA：Mozilla/5.0 (iPhone;CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko)Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0;Smartapp; +http://www.baidu.com/search/spider.html)

大家用日志中找到的 UA与上述的 UA比对一下，从这个角度能说明 UA 是否真实。

但是，这不代表就是百度搜索的蜘蛛，因为任何人都可以伪造这么一个 UA的访问记录，来仿冒百度搜索蜘蛛的身份。下面我们再看看进一步合适蜘蛛IP的身份。

2、DNS 反查 IP

上面的蜘蛛UA只是一个简单的判断方式，但不完全准确。下面分享通过 DNS 反查 IP 的方式，来判断蜘蛛是否来自百度搜索引擎。

针对不同平台的验证方法也不同，我们本地常用的 Linux/windows/os 三种平台的验证方法如下：

Windows平台按键盘的视窗键 win+R，在运行中输入cmd，回车后看到命令行窗口，使用nslookup ip命令反向解析 ip 判断对方是否是来自 Baiduspider 的抓取。
Linux平台使用 host ip命令反解ip来判断是否来自Baiduspider的抓取。
mac os平台使用dig 命令反解ip来判断是否来自Baiduspider的抓取。

打开命令窗口输入nslookup xxx.xxx.xxx.xxx(IP地址)，回车。看返回结果，Baiduspider 的 hostname以.baidu.com 或.baidu.jp 的格式命名，非 *.baidu.com 或 *.baidu.jp 即为冒充。

老魏实测网上公开的一些百度蜘蛛IP，用上面方法有的是符合，有的直接返回找不到， Non-existent domain，这样的就不好判断了。

3、宝塔面板自带蜘蛛

宝塔面板会不定期更新各大搜索引擎的蜘蛛IP，供用户使用。

宝塔面板付费防火墙提供了蜘蛛池，通过手动点击“同步”的方法，不定期汇总各大搜索引擎蜘蛛，避免意外的屏蔽对网站SEO产生不利影响。

如果你的网站打算长期运行，老魏建议购买宝塔付费防火墙使用，保障服务器及网站安全、平稳运行。

购买方式有以下三种：

单独购买宝塔付费防火墙，按月付费
购买宝塔面板专业版或企业版，可免费使用付费防火墙

老魏建议：宝塔面板适合新手、小白建站，支持Linux、Windows系统，点击直达宝塔官网注册账号并免费领取￥3188元专业版大礼包（专业版永久授权仅需1188元），新用户可享受0.99元体验7天专业版。
宝塔面板建议选择阿里云、腾讯云服务器

更多内容请看宝塔面板专题
点击查看网易云课堂《宝塔Linux面板新手入门教程》