2018最新最全各大搜索蜘蛛名称汇总

最新最全各大搜索蜘蛛名称汇总

   作为seo分析网站日记是seoer从业者必备技能之一,从网站日记我们可以看到很多统计网站看不到的内容,譬如就是搜索引擎蜘蛛,我们可以通过网站日记记录信息,可以看到都有什么搜索引擎蜘蛛来爬去、什么时间爬去、都喜欢爬去什么样的内容等等。我们可以针对以上问题,专门针对的做更新内容,更新什么样的内容等等。更有利于seo工作,尤其是对于新站而言,了解搜索引擎蜘蛛才能更好做好前期工作,如果你的资源较少,可以屏蔽一些没用的蜘蛛,让更多资源来服务你需要的搜索引擎蜘蛛;如果你是做中文网站,你就需要关心百度蜘蛛、360蜘蛛和搜狗蜘蛛,如果你是做英文网站你就需要关注谷歌蜘蛛了。
 
   1、百度蜘蛛
 
   最新的百度蜘蛛名称Baiduspider/2.0,去年百度曾经对百度蜘蛛进行升级,Baiduspider/2.0可以做到PC与移动端版本统一。
 
   在网站日记具体显示为:
 
   PC :
 
   Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
 
   移动:
 
   Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;)
 
   AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3
 
   (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
 
   在这里友情提示:如果你网站robots封禁Baiduspider,会对PC和移动同时生效。
 
   其他常见的百度蜘蛛还有移动网页抓取蜘蛛Baiduspider-mobile(抓取wap)、百度视频抓取蜘蛛Baiduspider-video(抓取视频)、百度新闻抓取蜘蛛Baiduspider-news(抓取新闻)。
 
   2、360蜘蛛
 
   360搜索网页抓取蜘蛛最新名称为360Spider或HaosouSpider
 
   3、谷歌蜘蛛:Googlebot
 
   谷歌跟百度不同,把PC端和移动端蜘蛛分开,分别进行抓取。谷歌网页抓取蜘蛛最新名称为“compatible; Googlebot/2.1;”。谷歌移动网页抓取蜘蛛名称为Googlebot-Mobile。
 
   4、搜狗蜘蛛:Sogou+web+spider/4.0
 
   搜狗网页抓取蜘蛛最新名称为Sogou+web+spider/4.0,搜狗蜘蛛还包括如下这些:Sogou+inst+spider、Sogou+spider2、Sogou+blog、Sogou+News+Spider、Sogou+Orion+spider,
 
   搜狗最常见蜘蛛为"Sogou+web+spider/4.0" ;"Sogou+News+Spider/4.0" ;"Sogou+inst+spider/4.0"。
 
   5、神马蜘蛛:YisouSpider
 
   神马网页抓取蜘蛛最新名称为YisouSpider。现在神马搜索在移动端搜索量很厉害,如果你有专门的移动端网页,神马搜索绝对不能放过。
 
   6、必应蜘蛛:bingbot 
 
   必应搜索抓取蜘蛛最新名称为(compatible; bingbot/2.0;)
 
   7、一搜蜘蛛:YisouSpider
 
   一搜搜索抓取蜘蛛最新名称为YisouSpider,同时Yisouspider也是神马搜索的网页爬虫,同时也在为CNZZ云推荐提供服务。
 
   其它常用搜索引擎蜘蛛还有,MSN蜘蛛:msnbot,msnbot-media、Alexa蜘蛛:ia_archiver、即刻蜘蛛:JikeSpider等等。
 
请尊重我们的辛苦付出,未经允许,请不要转载济南seo-关注网站优化推广和网络营销-老米seo技术博客的文章!
上一篇:Seo该如选择确定适合你网站的关键词?
下一篇:没有了