只做快速排名刷流量的软件

客服QQ
点站宝 SEO软件 V2.8.3 关键词排名+相关搜索+下拉词 免费加入,优化排名见效快 查看设置方法>> 免费下载

文件大小:600KB

更新日期:2015.07.09

支持:Win8/Vista/2003/XP

推荐虚拟机运行>>

带你玩转robots协议,新手必备

发布时间:2017-03-17 11:18:26

  2013年2月8日北京市第一中级人民法院正式受理了百度诉奇虎360违反“Robots协议”抓取、复制其网站内容的不正当竞争行为一案,索赔金额高达一亿元,这可以看做2012年下半年“3B大战”的继续。在此次索赔案件中,百度称自己的Robots文本中已设定不允许360爬虫进入,而360的爬虫依然对“百度知道”、“百度百科”等百度网站内容进行抓取。            


  其 实早在2012年11月初,针对双方摩擦加剧的情况,在中国互联网协会的牵头下,包括百度、新浪、奇虎360在内的12家互联网公司已共同签署了《互联网 搜索引擎服务自律公约》,在公约第七条承诺“遵循国际通行的行业惯例与商业规则,遵守机器人协议(robots协议)。
  今天就找个机会聊聊一夜成名的robots协议。
  初识robots协议
  什么是robots
  要 了解robots协议首先要了解robots,本文说的robots不是《I,robot》里的威尔