百度360掀Robots协议大战:谁是最后赢家?

近日，百度和360因为“Robots协议”一事，再次对簿公堂。两搜索巨头之间的竞争正在不断蔓延。

IT商业新闻网记者发现，从16日开始到现在，点开百度新闻和360新闻的首页都会看到在第三条的位置上呈现一个专题。百度新闻的专题是《360违反Robots协议：泄露隐私 阻碍创新》，而360新闻专题的标题是《360诉百度“强制转跳”索赔4亿元》。双方都在利用自身的优势条件进行一场自辩。

百度的“冤情”

百度认为，360违反Robots协议，可能导致网民隐私泄露。

百度公关部郭彪表示，Robots协议是网站信息和网民隐私保护的国际通行规范之一，理应得到全球互联网公司的共同遵守。不尊重Robots协议将可能导致网民隐私大规模泄露。

百度方面称，360搜索在2012年8月悄然上线后不久即违反Robots协议，强行抓取百度旗下网站百度知道、百度百科、百度贴吧、百度旅游等内容。360搜索在百度Robots文本中还未将360爬虫写入的情况下，违反Robots协议内容，强制对“百度知道”、“百度百科”等百度网站内容进行了抓取。

郭彪表示，奇虎360最为恶劣的，并非是其搜索爬虫故意违反Robots协议的做法，而是它利用360浏览器等客户端，强行抓取网民的浏览数据和信息到搜索服务器，完全无视Robots协议。这一做法目前已经导致大量企业内网信息被泄露。

据中国之声《央广新闻》报道，由于360搜索并不遵守搜索引擎通用的Robots协议，导致很多网站出于安全和隐私的考虑、不允许搜索引擎抓取的一些内网信息，也被泄漏在了360搜索上，这些隐私甚至可能包括银行帐号、密码、内部邮件等一些信息。

百度公司认为，奇虎360的行为违背了国际通行的行业规则、不顾百度的权利声明和技术措施，非法抓取、复制百度网站内容，直接以快照形式向网民提供，严重侵害了百度的合法权益，构成了不正当竞争。

为此，百度向360索赔一亿元。

360的反击

百度对360索赔一个亿。360也不甘示弱：百度恶意“强制跳转”、滥用Robots协议、设置歧视性条款的目的就是限制竞争，针对巨头百度强行拦截其搜索用户，索赔4亿，案件标的金额创下新高。案件已被北京市高级人民法院受理。

360称，百度公司恶意阻断360搜索引擎用户的访问，拦截360用户，强迫其到百度首页进行搜索，且该等技术手段仅歧视性地对待360搜索引擎用户，这些行为不仅严重影响了用户体验，且已经构成了不正当竞争，给360造成重大损失。

对于百度所言的Robots协议标准，360方面认为，Robots协议并不具有任何法律效力，而是百度利用了Robots协议自设白名单，谷歌、微软必应、雅虎、搜狗、SOSO等搜索引擎均可以抓取这些内容，唯独禁止360搜索抓取，属于打压竞争对手，涉嫌违反《反垄断法》。

360同时称， “Robots协议”不是法规，不是标准，也不是合约，不存在违反与不违反的问题。这些内容页面实际上是由网友提供，根据互联网的通行规则，这些页面的版权属于网友，360搜索索引这些内容页面并不侵犯百度的知识产权，实际上还为百度带来了大量的用户和流量。

360认为，百度与360同属互联网信息服务提供者，本应尽力做好产品，服务于广大用户，但百度为保持市场优势，排挤竞争对手，恶意阻止其他搜索引擎用户的访问，违反了自愿、平等、公平、诚实信用的基本法律原则，属不正当竞争。

专家热辩“Robots协议”

“Robots协议”也称“爬虫协议”、“机器人协议”等，其全称为“网络爬虫排除标准”。其本质是网站和搜索引擎爬虫的沟通方式，网站通过“Robots协议”告诉搜索引擎哪些页面可以抓取，哪些页面不能。

对于Robots协议的争议，业内人士也看法不一。

中国社会科学院信息化研究中心秘书长姜奇平用一个故事比喻双方关系：“一个客人在酒店住宿时在门上挂了一块‘请勿打扰’的牌子，但现在有服务员说要给客人提供贴心的服务，强行摘下牌子进入房间。”他表示，如果各方都不遵守这一规范，则对行业发展不利。(责任编辑：韩杰)