主页 > SEO查询和工具 > 如何正确识别百度蜘蛛?只需做这两点
很多SEO从业人员在刚刚接触这个行业的时候,经常会问——百度蜘蛛是什么?我们可以理解为百度蜘蛛就是用来抓取网站链接的IP,小编经常会听到百度蜘蛛来的太频繁,服务器要被抓爆了,如果你无法识别百度蜘蛛,你怎么知道是百度蜘蛛抓 […]
很多SEO从业人员在刚刚接触这个行业的时候,经常会问——百度蜘蛛是什么?我们可以理解为百度蜘蛛就是用来抓取网站链接的IP,小编经常会听到百度蜘蛛来的太频繁,服务器要被抓爆了,如果你无法识别百度蜘蛛,你怎么知道是百度蜘蛛抓爆的呢?也有出现百度蜘蛛都不来了的情况,还有很多站点想得到百度蜘蛛的IP段,想把IP加入白名单,但无法识别百度IP。
那怎么才能识别正确的百度蜘蛛呢?来来来,只需做着两点,就能正确识别百度蜘蛛
一、查看UA,如果UA都不对,可以直接判断非百度搜索的蜘蛛,目前对外公布过的UA是:
移动UA:Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,likeGecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +)
PC UA:Mozilla/5.0 (compatible; Baiduspider/2.0; +)
新增渲染UA:
移动UA:Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 likeMac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0; +)
PC UA:Mozilla/5.0 (compatible; Baiduspider-render/2.0; +)
二、反查IP
站长可以通过DNS反查IP的方式判断某只spider是否来自百度搜索引擎。根据平台不同验证方法不同,如linux/windows/os三种平台下的验证方法分别如下:
(1)、在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
(2)、在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以*.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
(3)、 在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
- 上一篇:SEO博客就是SEO工作者最好的名片
- 下一篇:哪些cms最有利于seo
猜你?#19981;?/h2>
- 搜索
-
- 2019-12-03优化关键词的时候,需掌握的3大搜索关键
- 2019-12-03搜索引擎关键词优化方法(8个关键词优化
- 2019-12-03学会关键词优化技巧,网站轻松有排名!
- 2019-12-03SEOer如何提升网站关键词排名?(关键词排
- 2019-12-035大优化方法让排名稳住!(网站排名优化
- 2019-12-03流行美参与益动广东2016公益徒步赛助贫困
- 2019-12-032016年11月第3周国际时事政治新闻热点汇总
- 2019-12-03第四届范敬宜新闻教育奖评奖结果公告
- 2019-12-03更有不少网友看完感叹:百度真心不易
- 2019-12-03特朗普贸易政策曝光?#21644;?#27490;TPP 修改或退出
- 2019-12-03网站排名下滑的原因
- 2019-12-03SEO项目指?#21152;?#35813;避免行动和目的相抵触
- 2019-12-03《你好邻居》收官,这档新闻和综艺兼备
- 2019-12-03做SEO的同学需要监测的数据
- 2019-12-03“重走范长江之路”大型新闻教育?#23548;?#27963;
- 2019-12-03联想AR?#21482;?#20142;相工信部网站 竟?#20852;?#20010;摄像
- 2019-12-03文化简讯:四川省与中国人民大学创办文
- 2019-12-03直播新规出台:平台?#25163;?#38656;?#29616;?新闻类应
- 2019-12-03曾经很实用的一些SEO技巧
- 2019-12-03大拿分享:巧用站长平台工具做SEO数据分
- 2019-12-03【金鳞榜】凡拓创意(833414):数字多?#25945;?#23637;
- 2019-12-03【金鳞榜】凡拓创意(833414):数字多?#25945;?#23637;
- 2019-12-02工程机械转型升级 大数据“+互联网”成
- 2019-12-02白宫新闻发言人厄内斯特:菲律宾总统杜
- 2019-12-02一周新闻热点回顾(2016. 11.6~12)2016第
- 2019-12-022019-12-02?#24863;?#36757;早报」汽车行业重点新闻2016.11.1
- 2019-12-02一周新闻热点回顾(2016.11.20~26)2016第
- 2019-12-02一周新闻热点回顾(2016.11.20~26)2016第
- 2019-12-02 一周新闻汇总 佳能6D Mark II?#38382;?#26333;光(4)
- 2019-10-16企业的推广方?#25509;?#21738;些?
- 2019-10-10哪些cms最有利于seo
- 2019-10-10如何正确识别百度蜘蛛?只需做这两点
- 2019-10-10SEO博客就是SEO工作者最好的名片
- 2019-09-23营销型的文章有排名却没有咨询?
- 2019-09-22百度seo刷排名网址
- 2019-09-22seo文章关键词怎么布局才?#34892;?#26524;
- 2019-09-22织梦做网站难不难?
- 2019-09-22做SEO一个月进账38万是如何做到的?
- 2019-09-22seo发展前景【读懂seo职场前景】
- 2019-09-21seo转sem可行吗
- 2019-09-21seo营销是什么?营销策略操作点!
- 2019-09-21SEO现在好找工作吗?
- 2019-09-21【百度快照劫持的原因】快照被劫持怎么
- 2019-09-21一张图详解seo工作流程
- 2019-09-20分享seo工作中的一些心得体会
- 2019-09-20seo运营要学什么
- 2019-09-11分享一个我在给客户网站SEO优化时遇到的
- 2019-09-11鸡年的第一次SEO面试经历
- 2019-09-11如何组建靠谱的seo团队?
- 2019-09-11网站优化知识之一:HTTPS的优点和缺点
- 2019-09-112019-09-11逆向思考赚钱要怎么搞
- 2019-09-11创业公司应该采用怎样的SEO对策
- 2019-09-11思路决定出路,改变出路从思维开始
- 2019-09-11网站建设中不能忽视的问题你知多少?
- 2019-09-11seo要学ps吗?
- 2019-09-11seo推广原理【更?#34892;?#30340;seo推广方式】
- 2019-09-11seo运营是什么意思?
- 2019-09-11月嫂类地域性网站SEO赚钱案例
- 2019-09-24成都网站关键词排名优化外包服务公司—
- 2019-01-05SEO碰撞SEM推广模式的火花,谁主推广领军
- 2019-01-05文章优化秒收获取排名推广手法?
- 2019-01-05搜索引擎关键词精准排名技巧
- 2019-01-05如何做网站优化?
- 2019-01-05什么是搜索引擎,SEO的意思是什么
- 2019-01-05搜索引擎的蜘蛛是如何爬的,如何吸引蜘
- 2018-12-30全网营销与关键词优化的推广特点
- 2018-12-29成都SEO:拆分培训行业乱象丛生
- 2018-12-29优化是应专注营销还是推广技术?
- 2018-12-28seo培训:移动端网站开发注意事项!
- 2018-12-28企业进行优化不可缺少哪三大步骤?
- 2018-12-27seo新?#30452;?#23398;!企业建设网站基本过程讲解
- 2018-12-27网站优化过程经常陷入哪些窘境?
- 2018-12-26提升网站关键词排名有技巧?新手速成教学
- 2018-12-26seo培训:成都网站建设操作步骤讲解!
- 2018-12-25企业网站建设常见问题及解决方法!
- 2018-12-25seo技巧:如何设计网站更吸引用户?
- 2018-12-24企业制作了pc端网站是否需要做移动端?
- 2018-12-24网站如何维护才能更好地?#24179;?#20225;业发展
- 2018-12-22商城网站前期制作需要考虑什么细节问题
- 2018-12-22网站制作如何超越同行获取排名竞争优势
- 2018-12-21网站建设:定制网站以何优势吸引蜘蛛
- 2018-12-21成都seo:网站标题优化小技巧!
- 2018-12-20企业提高百度权重的思维与技巧!
- 2018-12-19seo优化:企业网?#23601;?#29255;优化细节!
- 2018-12-19移动端网站制作不容忽视的细节!
- 2018-12-18成都网络推广需要注意的几大要素!
- 2018-12-18网站引流推广选择seo的?#20040;?#20309;在?
- 2018-12-17浅析站长工具有哪些使用技巧!