互金爬虫大清洗：曾与现金贷共生共荣

本篇文章3116字，读完约8分钟

擅长清理数据的第三方数据行业这次已经被自己“清理”了。

从9月初开始，杭州的欣彦科技和魔蝎科技两家数据公司的负责人被带走进行调查，随后工信宝和天一信用信息也被纳入调查范围，直到行业的龙头平台——通盾科技被派出解散整个爬虫部门。

虽然通盾科技第一次传言响应国家有关个人信息保护的政策，其产品新川科技数字魔盒于2018年开始逐步调整业务，目前所有相关服务已经停止，但这也印证了目前数据行业面临的困境。

多米诺骨牌仍在倒下。9月19日，市场消息称，首贷超市平台信贷管家被警方突袭。一位修炼者激动地说:“整风还在进行，谁也不知道下一个会是谁？”

一位接近监管机构的人士告诉Prism，自今年年初以来，监管机构一直计划清理数据公司，“(这一次)这应该是一个重大举措。”

“蛇七英寸”

孙丹(化名)是一个中层贷款平台，他最近准备换工作。她的公司也参与了大数据业务。虽然现在一切都一样，但暂时没有受到影响。然而，" xx平台被调查"的消息让她焦虑不安，她最终决定辞职，远离这个曾经标榜技术和前沿的领域。

“业内每个人都面临风险。”她告诉棱镜。

虽然警方没有公开通知上述调查，但业内人士都很清楚，这种高概率与为“714”高射炮平台和“常规贷款”提供数据信用服务的第三方数据公司非法获取和转售个人数据有关。

“714”高射炮是指期限为7天或14天的包括砍头利息在内的超额利润贷款。在今年315聚会上被曝光后，他们受到了监管机构的严厉惩罚。为“714”高射炮和“常规贷款”提供土壤的数据公司不可避免地受到影响。

据Prism称，目前，许多涉及爬虫业务的数据公司都暂停或调整了服务，这导致了更大的蝴蝶效应。

消费金融平台市场部的一位人士告诉棱镜网，依靠数据公司提供服务的现金贷款平台突然失去了风险控制能力，这些天来，他们已经陆续从各种渠道撤掉了贷款产品。“(他们的)风控模型仍在重新调试中，估计短期内不会正常发布。”

作为第三方数据公司的副总裁，李良(化名)能够感受到真正的影响力。在他看来，数据行业受到的冲击比以往现金贷款行业的整顿更为严重，效果也更为明显。

“蛇七英寸！”李良提到，大数据是现金贷款、“714”高射炮和常规贷款的关键。没有数据支持，他们无法放贷。

此外，对于一些相对合规的贷款平台，虽然数据公司暂停服务尚未对其造成灾难性影响，但它们仍需要立即对数据来源和策略进行一些调整，以应对市场环境的变化。

监管是否会扩大库存范围是悬在他们头上的一把达摩克利斯之剑。

兴宇现金贷款

在许多业内人士的印象中，第三方数据行业在2013年和2014年开始崛起，并在2017-2018年爆发。这与p2p在线借贷和现金借贷从兴起到爆发的时间线基本一致。

一家总部贷款平台的高管向棱镜表示，薄弱的前端风险控制和主要依赖贷后收款是原始现金贷款平台的主要特征，而数据公司擅长利用大数据构建风险控制模型。现金贷款行业吸收黄金的惊人能力让每个人都意识到卖水的数据行业也能赚钱。此外，行业模式相对成熟，“因此越来越多的人正在这样做”。

根据一友智库2018年11月发布的《2018年中国智能风险控制研究报告》(以下简称“报告”)，截至当时，金融风险控制企业有573家，其中60%以上成立于2014-2016年。

巨大的市场机遇也吸引了风投们的注意力。根据上述报告的统计，在573家金融风险控制企业中，已有192家企业获得投资，投资额超过1000亿元人民币，其中30%获得三项以上投资。

在风险投资的支持下，这个行业取得了长足的进步。以通盾科技为例，根据刘欣财务上一次报告，通盾科技2016年至2018年的经营收入分别为6066万元、2.61亿元和5.42亿元，呈几何级数增长。截至2018年底，通盾科技已积累了2421名客户，覆盖了90%以上的共同黄金行业。

据Prism称，第三方数据公司主要依靠抓取工具等大数据工具为市场提供基于场景的定制大数据相关产品。这些数据主要分为司法信息、电子商务信息、银行卡信息、运营商信息、社会信息和公开数据。在这些数据维度中，最受黄金互助客户欢迎的是覆盖面广、规范性强的普通数据，如身份认证和过期黑名单信息，这些数据通常是通过淘宝、社交网络和网上银行获取的。

在数据行业，每条消息都有自己的价格标签。

根据Prism从总部数据公司获得的报价，只有信息验证服务被细分为43个项目，包括实名验证、银行卡“三要素”验证、用户消费偏好和经济能力预测等。单次询价的价格从每件2美分到10元不等，如果是一年一次的话，还有一个折扣。

总部数据公司的部分报价

此外，公司还为客户提供“逾期管家”、“监管人”等贷后风险控制产品，包括逾期客户还款提醒和逾期客户还款提醒。此外，该公司还帮助客户智能联系收款公司，并收取10%的返还佣金作为平台使用费。

上述贷款平台的高管告诉Prism，每个数据源的价格从几美分到几美元不等，只要不太贵，一般都会多收几个。最终，一个借款人的数据成本一般在2元到10元之间，少数可以达到20元左右。

Prism从接近监管机构的人士那里了解到，用户的地理位置、资产收入、运营商的爬虫、信息修复和许可证比较等数据将是此次验证的重点。

灰色区域中的“爬虫”

根据某些规则，自动抓取互联网信息的程序或脚本称为“爬虫”。在这场行业整顿风暴中，利用爬虫技术非法获取和转卖用户个人信息，向用户发放“日常贷款”，成为公安部严厉打击的对象。

9月3日，国家公安机关加大了对“常规贷款”的打击力度，公安部公布了“常规贷款”的十个典型案例。例如，犯罪嫌疑人王某某设立了24个“动物部”网上借贷平台，如“天图”。开展非法侵犯公民个人信息和“路由贷款”犯罪活动，非法获取482万人的电话记录、电话簿、银行卡号码等公民个人信息，获利10.79亿元。

Prism认为，爬虫的技术门槛不高，但需要一个专门的团队来维护，成本也很高。对于大多数贷款平台来说，通过购买从第三方数据公司获得爬虫数据是一种更经济的方法。

中国银联的一位风险专家向棱镜提到，爬虫的本质是一种获取数据的方式，技术好坏没有区别。然而，法律明确规定获取数据需要客户授权，因此数据公司很容易触及法律红线，触及侵犯公民个人信息罪。

在他看来，数据行业总是希望自己获得数据，而这种逻辑本身就有问题。“大数据公司应该提供技术服务，而不是充当数据中介。”

2017年6月1日生效的《网络安全法》明确提出，网络运营商在收集和使用个人信息时，应遵循合法性、合法性和必要性原则，公开收集和使用规则，并明确说明收集和使用信息的目的、方法和范围。并经收藏家同意；网络运营商不得收集与其提供的服务无关的个人信息；未经被征集人同意，不得向他人提供个人信息。

这也意味着，只要数据源未经用户授权，就存在法律风险。

在监管环境的压力下，许多数据公司已经开始转型。一位顶级数据公司的产品负责人向棱镜提到:首先，客户方向已经改变。在过去的一两年中，p2p闪电爆炸和互助金监管变得越来越严格，导致互助金客户数量减少。将目光投向银行等传统金融机构是大势所趋。

此前有报道称，第三方金融技术、数据服务和风险控制服务机构逐渐将服务重点从新的金融领域转移到银行业机构，这是近年来的一个明显趋势。同盾科技，一个相对大规模的数字平台。

其次，业务方向发生了转变，单纯的数据服务已经不能满足市场需求。大数据与人工智能技术有效结合，金融机构通过风险控制规则建模的方式输出评分和决策结果，从而转化为技术授权。

转型之路漫长而漫长。目前，在公安部“彻底铲除‘日常放贷’违法犯罪活动滋生地”的严厉声明下，可以预见，第三方数据行业的整顿仍将继续。