众所周知，当下的大数据行业风声鹤唳。近日，央视一则关于“揭秘套路贷背后的罪恶利益链”的调查报道，揭开上海、杭州两家大数据公司非法爬取数据为套路贷服务一事，再次将人人自危的大数据行业推上风口浪尖。北京商报记者调查发现，严监管下，包括同盾科技在内的多家大数据公司纷纷“断臂求生”砍掉爬虫业务。同时，也有合作企业应监管要求主动暂停与相关大数据公司的爬虫业务合作。业内广泛关注的是，面对舆论风波四起、爬虫整顿压顶，切掉重要盈利业务的大数据公司该如何求生？
央视曝光
大数据公司卷入套路贷风波
近日，央视一则关于“揭秘套路贷背后的罪恶利益链”的调查报道，将本不平静的大数据行业再次推上风口浪尖。该报道揭露了两家大数据公司非法获利超10亿的细节。据警方透露，涉案的上海某数据公司，自2016年7月以来，利用非法获取的公民个人信息非法获利1亿余元；而另一家位于杭州的数据公司，同样利用非法获取的公民个人信息，为互联网放贷机构提供风控测评，非法获利9亿余元。
北京商报记者注意到，前述报道中，上海大数据公司聚信立和杭州大数据公司同盾科技均出现在报道页面中。报道指出，该非法利益链中，为套路贷犯罪团伙提供数据支撑服务的公司，往往以大数据风控或大数据征信的面目出现，主要通过强制借款人授权，利用爬虫技术，在数百家网站非法爬取公民的个人信息，包括公民身份验证、电信运营商通话详单、电商数据、公积金、社保信息、学历信息、外卖信息、法院信息等，再做成详细报告，提供给套路贷犯罪团伙作为放贷催收依据，使得套路贷犯罪团伙，可以对受害人有的放矢。
多位业内人士告诉北京商报记者，被央视截图点名的公司中，同盾科技是互金行业熟知的一家大数据风控公司。正如同盾科技官方宣称，其是一家智能风险管理平台，为互联网金融、电商、O2O、银行、保险等行业提供一站式风控反欺诈方案，服务客户已超10000家。一知情人士告诉北京商报记者，近年来同盾科技的服务客户主要是互金行业，主要通过输出数据、风控系统以及建模服务三种方式对外合作，盈利模式包括收取数据费用、系统模型费用，以及部分模型分润费用等。
对于前述央视曝光的内容、公司业务及客户占比情况，北京商报记者曾尝试向同盾科技进行采访，但截至发稿，对方未有相关回应。
山雨欲来风满楼，央行前述曝光内容并非毫无预兆。在今年下半年，同盾科技便屡次被卷入跑路或被查风波。而在整顿压顶下，包括同盾科技在内的多家公司纷纷称暂停爬虫业务。对于此事，北京商报记者向同盾科技多个合作方进行了采访，有企业称已在10月接到监管通知，暂停了与同盾科技的爬虫业务合作；也有互金平台回应称目前仍在合作，主要是基于大数据风控进行合作，但至于合作的细节内容，基于商业条款限定暂不便透露。
北京商报记者注意到，自今年9月起，同盾科技公司便不是很“太平”。9月16日晚间，业内传出同盾科技爬虫部门解散以及创始人CEO蒋韬“跑路”等消息。9月17日，同盾科技紧急发布辟谣声明称，CEO蒋韬近日一直在国内处理公司事务；涉及爬虫技术的产品数聚魔盒为子公司杭州信川科技有限公司(以下简称“杭州信川”)独立运营产品。目前杭州信川已停止相关服务，员工已正常调岗。
然而在辟谣过后不到10天，9月26日，再有消息称同盾科技子公司爬虫业务负责人被查。与此前辟谣不同的是，此次消息获同盾科技官方确认。9月27日，同盾科技官方回应称，“为配合警方调查曾经服务的某第三方单位，杭州信川及有关人员正积极协助警方调查取证，以协助相关部门查清该第三方单位的情况”。
整顿压顶
多家公司断臂求生
同盾科技子公司爬虫业务负责人被查一事，仅是大数据行业的一个缩影。事实上，自今年下半年以来，大数据风控行业便风声鹤唳。7月18日，立木征信法人及大部分员工被警方带走；9月初，魔蝎科技、新颜科技两家大数据风控服务商相关人员也因涉嫌利用爬虫技术侵犯个人隐私被警方调查；9月11日，公信宝公司办公地被警方贴上封条，有知情人士推测被查原因同样与其爬虫业务有关；紧接着9月12日，业内再曝天翼征信公司多位高管及员工被警方调查的消息。
对于前述公司被查一事及最新进展，北京商报记者相继向其进行了采访联系。其中，立木征信公司已被注销，联系电话无人接通；魔蝎科技官网则显示因站点更换网址或服务不稳定等原因可能无法正常访问，且联系电话无人接听；公信宝官网正常，但联系电话无人接听；而新颜科技工作人员则称对该事件以及最新进展暂不清楚；而至于天翼征信被查一事，北京商报记者向其工作人员询问，截至发稿对方未有进一步回应。
整顿压顶，大数据风控行业如履薄冰。在人人自危的态势下，包括聚信立、杭州有盾、天机数据等公司纷纷暂停爬虫服务。此外，同盾科技也多次声明称，自2018年便开始逐步调整业务，截至目前已全部停止相关服务。
不过，多位业内人士告诉记者，爬虫服务是多数大数据公司的重要盈利点，停掉该业务后，其公司经营或将受到重创。
“大数据公司生产资料是海量数据本身，目前这个行业除了利用爬虫技术抓取数据外，就是找第三方购买数据，但第三方购买的成本会侵蚀掉大部分利润，因此大多大数据服务商都会选择自己开发爬虫抓取数据。”南京信息工程大学滨江学院产业教授刘峰直言，若大数据公司停止爬虫业务，势必会让主业成本急剧上升，自身价格失去优势，增加的成本会让其丢掉市场，同时合作的服务商也会选择减少合作业务甚至停止合作。
此外，另一位不愿具名的资深业内人士也指出，“停掉爬虫业务会对同盾科技等公司业务经营造成很大影响，因为金融机构需要数据以及基于数据的其他系统层面合作。如果没有数据，金融机构合作意愿会大大降低”。不过，该人士也指出，数据只是同盾科技公司其中一方面的收入，其还有大量本地化或云化部署的决策平台、线上贷款管理平台，是不涉及数据的，因此其经营是否受到重创暂不得而知。
爬虫业务究竟给同盾科技贡献了多大利润？砍掉爬虫业务又将对其经营造成怎样的影响？北京商报记者同样向同盾科技发去了采访提纲，但截至发稿，对方未进行回复。
穿透监管下
技术驱动是出路
“这一波大数据行业整顿中，涉及的问题包含多方面，一方面是数据非法获取问题，另一方面则是利用数据非法牟利问题。”多位接受北京商报记者采访的业内人士指出。当前，监管已经给金融行业大数据风控公司划下红线，只要未经允许非法获取、传输个人隐私数据、参与到套路贷以及非法催收等环节，便会严惩不贷。
正如杭州电子科技大学副教授徐伟栋所称，这一轮整顿对大数据行业来说可谓是灭顶之灾，尽管缘起打击套路贷，但由此带出了大数据行业在数据非法储存、使用与转移(并因此获利)方面的深水区。
另一资深行业人士同样指出，今年下半年的大数据行业整顿态势，反映了金融科技监管落到了实处。数据获取的合法性、数据使用的合法性，未来监管都会穿透式管理。他进一步预测，大数据风控等金融科技服务未来都将要求持牌，金融科技产品要通过认证。同时，行业也要加强和持牌机构合作，积极配合监管整顿。
也正是在行业严监管下，包括同盾科技在内的多家大数据风控公司发展踩下急刹车，一方面切掉数据爬虫业务，另一方面则不断加大与持牌金融机构的合作。然而，风向骤转之下，面对舆论风波四起、爬虫整顿压顶，又切掉重要盈利业务的大数据公司，又该如何在互联网金融下半场求生？
对此，前述资深人士称，大数据风控公司应将数据驱动的经营转为技术驱动的经营。通过知识图谱、自然语言处理、物联网传感数据建模等深度学习探索，成为行业内的技术供应商或是一条可行之路。
刘峰则指出，从此次整顿来看，行业一方面不能投机取巧，需要合法合规地进行业务，规避潜在法律风险；另一方面也要倒逼自身业务进行改革升级，通过综合性的服务和更高的附加值来带动自身大数据服务的利润率。他进一步指出，从另一层面来看，能够在此轮整顿中存活下来的企业，也能从被淘汰企业中获取更多市场，从而在未来受益。
徐伟栋同样称，目前从业者在逐步合规化的同时，暂时不宜再进行大的业务拓展，应顺着监管的风向调整战略。此外，资本市场对大数据公司商业模式的认知以及估值模型也需同步改变。
368 thoughts on “爬虫业务整肃 断臂后的大数据公司去哪”