专家详细解读爬虫技术背后的法律问题

Posted 2021-04-30 IP参考

背景材料

  

因认为杭州快忆科技有限公司（下称杭州快忆）针对微信产品开发爬虫工具和提供爬取结果数据包的行为，干扰了微信公众平台的正常运行，涉嫌构成不正当竞争，深圳市腾讯计算机系统有限公司、腾讯科技（深圳）有限公司（下统称腾讯公司）将其起诉至杭州铁路运输法院。在诉讼过程中，‍‍‍‍‍‍‍‍‍腾讯公司申请行为保全。

杭州快忆辩称，首先，法院已就该案作出财产保全，公司已无法开展正常经营行为，申请人再申请行为保全是重复加重被申请人负担；其次，杭州快忆在收到起诉书后已经删除涉案被诉侵权产品和服务，也删除了相关涉案服务模块，行为保全的紧急性和必要性已无必要。

目前，被诉侵权产品和服务已下架。

强行爬取数据一定侵权吗？

网络爬虫，又称网络蜘蛛或网络机器人，是一种按照一定的规则自动抓取互联网信息的程序或者脚本。与爬虫技术相对应的是反爬虫协议（即Robots协议），其规定了网络爬虫可以抓取或者禁止抓取哪些数据，功能好比酒店房门悬挂的“请勿打扰”或“立即打扫”的指示牌。

从技术中立角度来说，网络爬虫并不违法，但如果其违反Robots协议，强行抓取他人数据，这样的行为是否一定侵权吗？

为此IP参考采访了华东政法大学竞争法研究中心执行主任翟巍教授。

翟巍：总体而言，我国尚未有专门规制爬虫技术适用的法律法规，但依据爬虫技术应用的具体情形，该类应用行为既可能构成合法合规行为，亦可能在个案情形下构成违反《反垄断法》《反不正当竞争法》《消费者权益保护法》及民事法律、刑事法律、知识产权法律的违法行为。

在一般情形下，假设数据控制企业是经过自身的技术开发与人力、物力、财力付出而获得与保有相应的数据资源，那么该数据控制企业就对这类数据资源享有使用权益。（需要明确的是，数据控制者享受的这种权益一般不等同于财产权。）在此前提下，如果数据控制企业在robots协议中设定禁止爬虫技术爬取的相应条款，那么在网络公司违反robots协议使用爬虫技术，擅自爬取数据控制企业不允许爬取数据信息的情形下，网络公司就涉嫌构成侵犯数据控制企业合法使用权益的违法行为。

进一步而言，如果数据控制企业与使用爬虫技术的网络公司处于市场竞争关系，而网络公司违反robots协议使用爬虫技术，擅自爬取数据控制企业的经营信息与用户信息，那么网络公司涉嫌构成违反《反不正当竞争法》第9条的侵犯商业秘密不正当竞争行为。

有无不构成侵权的例外情形？

翟巍：数据爬取者违反Robots协议强行获取数据的行为，在特定条件下可能免责，但其适用条件十分严格。

在特殊情形下，假设数据控制企业经过自身的技术开发与人力、物力、财力付出已经独家掌握某种大数据资源，而获得这种大数据资源又是其他经营者参与一个或若干个相关市场竞争的必要条件，那么数据控制企业应当免费或以合理对价向其他经营者开放此类大数据资源。

在此特殊情形下，如果数据控制企业在robots协议中设定禁止爬虫技术爬取的相应条款，并且拒绝以合理方式向其他经营者开放此类大数据资源，这一行为就涉嫌构成《反垄断法》第17条禁止的滥用市场支配地位垄断行为。在数据控制企业实施垄断行为的前提下，如果网络公司违反robots协议使用爬虫技术，擅自爬取数据控制者不允许抓取的数据，那么这种爬取行为应被视为合理行为；网络公司应当不承担法律责任，或者应被免除或减轻法律责任。相关典型案例为2017年美国HiQ Labs与LinkedIn领英的数据纠纷案。

 

来都来了，就关注一下嘛