非凡资讯

SEOSEM培训资讯>百度蜘蛛是什么?百度SEM竞价培训老师带你识别百度蜘蛛

百度蜘蛛是什么?百度SEM竞价培训老师带你识别百度蜘蛛
发布日期:2020/2/16 17:47:16    上海百度SEM培训班 18 分享
百度SEM竞价培训老师经常听到同学们问,百度蜘蛛是什么?最近百度蜘蛛来的太频繁服务器抓爆了,最近百度蜘蛛都不来了怎么办,还有很多站点想得到百度蜘蛛的IP段,想把IP加入白名单,但IP不固定,我们无法对外公布。
上海百度SEM竞价培训
上海百度SEM竞价培训
那怎么才能识别正确的百度蜘蛛呢?只需简单2步,教你正确识别百度蜘蛛:
 
1.查看UA,如果UA都不对,可以直接判断非百度搜索的蜘蛛,目前UA分为移动、PC、和小程序三个应用场景,这三个渠道UA分别如下:
 
移动UA: 
 
Mozilla/5.0(Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko)Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)
 
 
Mozilla/5.0 (iPhone;CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko)Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0;+http://www.baidu.com/search/spider.html) 
 
PC UA:
 
Mozilla/5.0(compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
 
 
Mozilla/5.0(compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)
 
小程序UA:
 
Mozilla/5.0 (iPhone;CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko)Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0;Smartapp; +http://www.baidu.com/search/spider.html)
 
2.反查IP
 
站长可以通过DNS反查IP的方式判断某只spider是否来自百度搜索引擎。根据平台不同验证方法不同,如linux/windows/os三种平台下的验证方法分别如下:
 
1).在linux平台下,您可以使用hostip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以*.baidu.com或*.baidu.jp 的格式命名,非*.baidu.com或*.baidu.jp即为冒充。
 
2).在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup xxx.xxx.xxx.xxx(IP地址)就能解析ip,来判断是否来自Baiduspider的抓取,Baiduspider的hostname以*.baidu.com或*.baidu.jp的格式命名,非*.baidu.com或*.baidu.jp即为冒充。
 
3).在macos平台下,您可以使用dig命令反解ip来判断是否来自Baiduspider的抓取。打开命令处理器输入dig xxx.xxx.xxx.xxx(IP地址)就能解析ip,来判断是否来自Baiduspider的抓取,Baiduspider的hostname以*.baidu.com或*.baidu.jp的格式命名,非*.baidu.com或*.baidu.jp即为冒充。

本文来源:网络。整理:百度SEM竞价培训学校。更多资讯【请关注微信号:feifanxueyuan】(版权声明:推送文章和图片我们都会注明作者和来源,除非无法确认。部分文章和图片推送时未能与原作者取得联系,若涉及版权,烦请原作者联系小编更正,谢谢!)
相关文章:
上海非凡教育SEM培训班教你网站如何获取百度统计代码
上海非凡教育SEM竞价培训班老师教你网站如何手动安装百度统计代码
上海非凡教育SEM培训班老师教你网站如何自动安装百度统计代码
上海非凡教育SEM培训班分享建站工具中百度统计代码的安装方法
百度蜘蛛是什么?百度SEM竞价培训老师带你识别百度蜘蛛
免费试听热门课程
在线客服
免费试听
助学分期
学费查询
开班查询
就业薪资