近期多个大数据公司被查 爬虫技术使用须谨慎

Posted 2021-04-30 杰汇营

1.最近的大数据行业，风声鹤唳。

在中秋节前一天，中国电信控股的子公司天翼征信传出风声，其总经理、副总经理以及市场人员被警察带走，原因是与其合作的大数据公司被警方调查。

在天翼之前，新颜科技CEO黄向前被警方带走、魔蝎科技公司CEO周江翔涉事被查、公信宝公司门口被贴了封条、知名第三方数据服务公司聚信立宣布将暂停对外提供用户授权的运营商爬虫服务……

此外，国内大数据风控平台龙头同盾科技也被曝爬虫部门已解散，CEO蒋韬已出国避风头，对此，同盾科技昨日发表辟谣声明表示，子公司杭州信川科技有限公司确实停止爬虫业务，但其他言论均属不实。

.....

据内部消息，最近监管对数据乱象出手，开始清理行动，15家公司被列入调查名单，其中几家估值都超几十亿。

国内很多大数据公司的数据来源多多少少都有一定的问题，随着我国今年6月1日起，《中华人民共和国网络安全法》将实施，所有的网上行为将越来越严格，如果还按照之前的惯性去操作，迟早会出问题。

2.谨慎使用爬虫技术

不知道大家是否发现，随着国家经济的不断发展，以前可能处于灰色阶段的行业，现在几乎都慢慢不能做了。写这篇文章的目的，也是为了警示大家技术是无罪的，但是用到了错的地方代价也是非常巨大的。

一个程序员因为爱好写了一个小程序，并且把此程序上传到了互联网上，没想到过了两年之后，有人利用这个小程序非法获利500多万。

虽然这名程序员并没有因为这个程序而获利，但是间接给犯罪人员提供了犯罪的工具，最后被判刑 2 年缓期 2 年执行。

技术本身是不违法的，就好像一把水果刀，如果用来削苹果削梨没有任何问题，但是用来伤人就是凶器，就要被列入物证list。

爬虫也是如此，在大多数情况下，只是采集互联网上的公开信息，很难说是违法行为。但是一旦涉及入侵到别人系统去获取数据，那必然存在着法律风险。