网站优化中的搜索引擎Robots协议是什么?
作者:乐优优 发布日期:2014/6/28 0:06:58 文章来源:苏州乐优广告网 关注度: 次  
苏州网络营销      Robots协议是网站出于安全和隐私考虑,防止搜索引擎抓取敏感信息而设置的。搜索引擎的原理是通过一种爬虫spider程序,自动搜集互联网上的网页并获取相关信息。而鉴于网络安全与隐私的考虑,每个网站都会设置自己的Robots协议,来明示搜索引擎,哪些内容是愿意和允许被搜索引擎收录的,哪些则不允许。搜索引擎则会按照Robots协议给予的权限进行抓取。

  Robots协议代表了一种契约精神,互联网企业只有遵守这一规则,才能保证网站及用户的隐私数据不被侵犯。违背Robots协议将带来巨大安全隐忧——此前,曾经发生过这样一个真实的案例:国内某公司员工郭某给别人发了封求职的电子邮件,该Email存储在某邮件服务公司的服务器上。因为该网站没有设置robots协议,导致该Email被搜索引擎抓取并被网民搜索到,为郭某的工作生活带来极大困扰。

  如果将网站视为酒店里的一个房间,robots.txt就是主人在房间门口悬挂的“请勿打扰”或“欢迎打扫”的提示牌。这个文件告诉来访的搜索引擎哪些房间可以进入和参观,哪些不对搜索引擎开放。但是不是所有的搜索引擎对robots文件的都是这样的。

  百度对robots.txt是有反应的,但比较慢,在减少禁止目录抓取的同时也减少了正常目录的抓取。原因应该是入口减少了,正常目录收录需要后面再慢慢增加。

  Google对robots.txt反应很到位,禁止目录马上消失了,部分正常目录收录马上上升了。/comment/目录收录也下降了,还是受到了一些老目标减少的影响。

  搜狗抓取呈现普遍增加的均势,部分禁止目录收录下降了。

  总结一下:Google似乎最懂站长的意思,百度等其它搜索引擎只是被动的受入口数量影响了。

    原文网址:http://www.szleyou.net/433.html

联系电话:18914010750
联 系 人:林小姐
客服QQ苏州报纸广告客服QQ
苏州SEO优化
江苏遗失声明登报
   苏州乐优传媒作为全媒体整合营销商,全面代理江苏省各城市报纸广告新华日报、江苏经济报、江苏法制报、现代快报、扬子晚报、姑苏晚报、城市商报、城市早8点、苏州日报等各类报纸广告,如遗失声明登报、注销公告登报、减资公告登报、拍卖公告等各类声明公告登报,同时也提供苏州遗失登报,苏州遗失声明登报,苏州日报遗失声明登报,苏州证件挂失遗失登报、苏州网络营销推广,苏州夹报广告,从网站建设到网站托管、网站推广、网络营销再到网站运营及管理的全媒体整合营销服务,且包含各类遗失声明,注销公告登报等服务。
  • 淘宝担保付款,安全方便!
  • 推荐先见报,后确认付款!
  • 保证有效,免费赠送报纸!
  • 电话:18914010750  苏州遗失声明登报:18914010750  客服QQ:1483853248  备案/许可:苏ICP备13060250号
    CopyRight © 2010-2020 苏州乐优传媒有限公司 All Rights Reserved.
关键词:苏州乐优广告专业提供苏州网络营销推广,苏州网络广告,苏州社区广告,苏州社区广告价格,苏州网站优化多少钱,苏州微信营销,网站SEO优化,苏州夹报广告,苏州网站优化,苏州社区广告,苏州社区公告栏广告,苏州万网域名空间,苏州网站SEO优化等苏州网络营销服务,且提供江苏各省市级报纸广告刊登服务,如苏州遗失声明登报,苏州证件遗失声明登报苏州注销公告登报现代快报扬子晚报新华日报江苏法制报江苏经济报注销公告登报江苏商报、苍梧晚报、常州日报、常州晚报、江海晚报、江南晚报、江苏经济时报、金陵晚报、京江晚报、昆山日报、连云港日报、南京晨报、南京日报、南通日报、苏州日报、宿迁日报、泰州晚报、无锡日报、吴江日报、扬州日报、扬州时报、扬州晚报、宜兴日报、张家港日报、镇江日报、扬子晚报广告姑苏晚报广告城市商报广告苏州报纸广告苏州扬子晚报招聘广告登报苏州姑苏晚报广告苏州城市商报广告苏州日报广告苏州扬子晚报广告姑苏晚报广告城市商报广告报价姑苏晚报广告价格城市商报广告价格苏州日报广告价格姑苏晚报分类广告苏州报纸广告价格、苏州遗失声明登报电话是多少?苏州遗失声明登报要多少钱?苏州遗失声明登报到哪里办理?