中新网报道10月16日报道 百度诉奇虎360违反“Robots协议”抓取、复制其网站内容侵权一案，10月16日上午在北京市第一中级人民法院开庭审理。百度方面认为，360搜索在未获得百度公司允许的情况下，违反业内公认的Robots协议，抓取百度旗下百度知道、百度百科、百度贴吧等网站的内容，已经构成了不正当竞争，并向奇虎索赔1亿元。
百度公关部郭彪向媒体表示，Robots协议是网站信息和网民隐私保护的国际通行规范之一，理应得到全球互联网公司的共同遵守。不尊重Robots协议将可能导致网民隐私大规模泄露。此前，360服务器抓取网民隐私存在自己的服务器上，因自身网站的漏洞被谷歌搜索抓取，导致奇瑞汽车内部采购文件、三峡集团财务报表等商业秘密，以及140万网民隐私被泄露和传播。违反Robots协议再次暴露了360无视网站版权和网民隐私的一贯思维。
郭彪表示，更严重的是，奇虎360还利用360浏览器等客户端，强行抓取网民的浏览数据和信息到搜索服务器，完全无视Robots协议。这一做法目前已经导致大量企业内网信息被泄露。去年底，百度工程师通过一个名为“鬼节捉鬼”的测试，证明了360浏览器存在私自上传“孤岛页面”等隐私内容到360搜索的行为。
360方面则认为，百度公司滥用Robots协议，设置歧视性条款以达到限制正当竞争的目的。360抓取的内容页面实际上是由网友提供的，根据互联网的通行规则，这些页面的相关权利属于网友，360搜索索引这些内容页面并不涉嫌侵犯百度的权益，实际上还为百度带来了大量的用户和流量。
百度：360违反Robots协议 可能导致网民隐私泄露
据中国之声《央广新闻》报道，由于360搜索并不遵守搜索引擎通用的Robots协议，导致很多网站出于安全和隐私的考虑、不允许搜索引擎抓取的一些内网信息，也被泄漏在了360搜索上，这些隐私甚至可能包括银行帐号、密码、内部邮件等一些信息。
度公关部郭彪对此表示，此前媒体报道的宝钢、 AMD、台湾长庚大学等知名机构内部要求卸载360全部产品，正是因为担心内部商业信息和个人隐私可能被上传泄露。Robots协议的目的，也是为保护网站数据和敏感信息以及用户个人信息和隐私不被侵犯。作为隐私保护的国际通行规范，Robots协议应该得到业内的共同遵守，这也是最大程度保护网民隐私和利益的前提。
“如果百度都无法以Robots协议保护自己，那么淘宝、京东等商业数据网站，国内大量中小网站，甚至企业内网，就更没有保护自己的能力了。”百度公关部郭彪认为。
据百度介绍，早在2008年，淘宝通过Robots协议以保护商业信息为由不同程度禁止百度、谷歌等搜索爬虫对其商品信息的抓取。尽管淘宝数据存在巨大商业利益，百度在技术上也完全具备抓取能力，但百度严格遵守了Robots协议，立即停止了抓取淘宝网内容。
2012年11月，中国《互联网搜索引擎服务自律公约》首次将遵守Robots协议(爬虫协议)的规定纳入实质性条款，确定了Robots协议作为行业规范的地位。《自律公约》第七条明确指出，搜索引擎服务应当“遵循国际通行的行业惯例与商业规则，遵守机器人协议(Robots协议)”，第九条则规定了违反Robots协议抓取内容的企业，应在收到权利人符合法律规定的通知后，及时删除、断开侵权链接，努力维护健康有序的网络环境。
违规抓取相当于“对不动产的非法侵入”？
事实上，关于Robot协议的法律纷争此前在国内外都曾出现。对于Robots协议，早在12年前，美国加州北部的联邦地方法院就在著名的eBay VS. Bidder's Edge案中引用Robots协议对案件进行裁定。针对专门提供拍卖信息的聚合网站Bidder's Edge 违反Robots协议强制抓取ebay网站内容的行为，受理此案的美国联邦法官在经过多方调查取证后做出裁定，认定BE侵权成立，禁止了BE的违规行为。在法官看来：“eBay 的网站内容属于私有财产，eBay有权通过Robots协议对其进行限制。”违规抓取的行为无异于“对不动产的非法侵入。”
同样在国内，垂直搜索引擎爱帮网也因未经允许抓取大众点评网的大量内容也被判败诉。
2008年，大众点评曾状告爱帮网，以“垂直搜索”之名，无视Robots协议，将大众点评花费心血组织用户发布的点评内容抓到自己的平台上。最终，法院判决爱帮网败诉，除了赔偿最高限额外，也要立即停止这一侵权行为。法院认为，这些信息内容被爱帮网未付出劳动、未支出成本、未做出贡献，却直接利用技术手段在爱帮网上展示，并以此获取商业利益，属于反不正当竞争法理论中典型的“不劳而获”和“搭便车”的行为。
来源：中新网
