发布日期:
“爬虫”技术支撑了现金贷的黄金时期
最近，现金贷行业出现一种“同业爬虫”产品，可以直接将其他现金贷平台的放款额和风控数据爬出来。
“别人放多少，我就放多少，自己都不用做风控了”，某产品使用者称，这一“风控奇招”在圈内开始悄然盛行。
爬虫凶猛
同业爬虫是一款专门爬取现金贷数据的产品，只需要你提供其他现金贷平台的用户名和密码，就可以爬取用户的所有信息。
“这个产品，最早是我们给玖富定制的，他们使用了一年，爬过100多家同业的数据”，摩羯科技的商务人员称，后来发现产品运行不错，所以决定变成产品大规模推广。可爬取数据的现金贷平台，目前摩羯科技的产品介绍上显示为95家。
“只需用户授权账号和密码，成功率在85%以上”，魔蝎科技的商务表示。而产品说明中，同业爬虫的优势被描述得极为诱人：相对于电商、社交等弱数据而言，同业数据本身属于金融范畴，最能反映个人近期的征信信息。
在没有足够能力做大数据风控的情况下，同业爬虫可借鉴多平台的风控经验。这种产品一出现，不少准备做现金贷的平台就蜂拥而至。在人人都做现金贷的时代，这个“剑走偏锋”的技术，确实省去风控环节，让项目得以快速上线。
而更多有趣的爬虫产品，在不断推向市场。众所周知支付宝的数据“金贵”，市面上也开始出现一些专门爬取支付宝数据的产品。
摩羯科技的支付宝爬虫产品操作极为简单，只需要用支付宝扫描一下登录“二维码”，就可登录。而后台的爬取结果无比细致，支付宝用户的各项详细信息都可获得。
爬虫产品远远不止这些。某大数据公司的业务员称，公司最近开发了新项目，可爬取旅行网站、外卖平台、地图、共享单车等平台的个人信息，甚至可以定制化抓取，“拿到第一手鲜活原始数据”。
光明与黑暗
爬虫技术分为三步，“爬”上网页、“铲”下数据，进行加工清洗。
爬虫有光明的一面。类似百度谷歌这样的搜索引擎，其核心逻辑，也是爬虫爬到用户要的关键词，再展现搜索结果。
大数据时代，爬虫成为低成本获取数据的捷径，也经常沦为“黑暗武器”。“爬虫生态链里有这么一类公司，专门替人爬虫，增加APP的虚拟访问量”，某一爬虫公司的联合创始人金苑称。
光明与黑暗的交集中，爬虫行业在2016年，才迎来了真正爆发。
2016年，现金贷行业成为爬虫产品的最大买家。爬虫公司为其提供五花八门的服务如爬取淘宝、社交网络、网上银行，甚至连央行的征信报告都能爬等。
在这一波浪潮中，崛起了众多爬虫公司，其中做得最大的是“聚信立”。“爬取通讯录，主要是用于用户失联后，可以找他们的亲朋好友催款”，某平台的风控负责人平元鑫称。“聚信立爬取一次的价格，是1到3元，聚信立因此赚了很多钱，成了现金贷时期的大赢家之一”，平元鑫认为。
某种程度上，爬虫技术撑起了现金贷的黄金时代，为其提供大量的风控养料。
未来之路
今年6月1日，《网络安全法》开始实施，对非法或未经用户授权而获取用户信息进行严惩。
整个大数据行业面临生死劫，上万数据接口关停，大量数据源被切断，行业内90%的公司面临淘汰。
而有意思的是，在这轮清洗中，爬虫技术却成了最后的救命稻草。“安全法规定，获取用户的数据，必须授权，而爬虫就打了一个擦边球”，某大数据公司的CEO称。“爬虫需要用户授权用户名和密码，只是大部分用户并不知道如何确保这些数据的安全”，该CEO称。
但激烈竞争依然存在，业内人士称，现金贷早期，客户资质都比较好，后期骗贷和欺诈的都来了，随之国家的监控措施会越来越严格，市场竞争逐步加剧，爬虫公司已很难生存下去。
已有多家爬虫公司开始转型的尝试，有爬虫公司正准备将所有数据整合，做一整套的现金贷风控解决方案，为其它行业或公司提供咨询服务。戈森
“别人放多少，我就放多少，自己都不用做风控了”，某产品使用者称，这一“风控奇招”在圈内开始悄然盛行。
爬虫凶猛
同业爬虫是一款专门爬取现金贷数据的产品，只需要你提供其他现金贷平台的用户名和密码，就可以爬取用户的所有信息。
“这个产品，最早是我们给玖富定制的，他们使用了一年，爬过100多家同业的数据”，摩羯科技的商务人员称，后来发现产品运行不错，所以决定变成产品大规模推广。可爬取数据的现金贷平台，目前摩羯科技的产品介绍上显示为95家。
“只需用户授权账号和密码，成功率在85%以上”，魔蝎科技的商务表示。而产品说明中，同业爬虫的优势被描述得极为诱人：相对于电商、社交等弱数据而言，同业数据本身属于金融范畴，最能反映个人近期的征信信息。
在没有足够能力做大数据风控的情况下，同业爬虫可借鉴多平台的风控经验。这种产品一出现，不少准备做现金贷的平台就蜂拥而至。在人人都做现金贷的时代，这个“剑走偏锋”的技术，确实省去风控环节，让项目得以快速上线。
而更多有趣的爬虫产品，在不断推向市场。众所周知支付宝的数据“金贵”，市面上也开始出现一些专门爬取支付宝数据的产品。
摩羯科技的支付宝爬虫产品操作极为简单，只需要用支付宝扫描一下登录“二维码”，就可登录。而后台的爬取结果无比细致，支付宝用户的各项详细信息都可获得。
爬虫产品远远不止这些。某大数据公司的业务员称，公司最近开发了新项目，可爬取旅行网站、外卖平台、地图、共享单车等平台的个人信息，甚至可以定制化抓取，“拿到第一手鲜活原始数据”。
光明与黑暗
爬虫技术分为三步，“爬”上网页、“铲”下数据，进行加工清洗。
爬虫有光明的一面。类似百度谷歌这样的搜索引擎，其核心逻辑，也是爬虫爬到用户要的关键词，再展现搜索结果。
大数据时代，爬虫成为低成本获取数据的捷径，也经常沦为“黑暗武器”。“爬虫生态链里有这么一类公司，专门替人爬虫，增加APP的虚拟访问量”，某一爬虫公司的联合创始人金苑称。
光明与黑暗的交集中，爬虫行业在2016年，才迎来了真正爆发。
2016年，现金贷行业成为爬虫产品的最大买家。爬虫公司为其提供五花八门的服务如爬取淘宝、社交网络、网上银行，甚至连央行的征信报告都能爬等。
在这一波浪潮中，崛起了众多爬虫公司，其中做得最大的是“聚信立”。“爬取通讯录，主要是用于用户失联后，可以找他们的亲朋好友催款”，某平台的风控负责人平元鑫称。“聚信立爬取一次的价格，是1到3元，聚信立因此赚了很多钱，成了现金贷时期的大赢家之一”，平元鑫认为。
某种程度上，爬虫技术撑起了现金贷的黄金时代，为其提供大量的风控养料。
未来之路
今年6月1日，《网络安全法》开始实施，对非法或未经用户授权而获取用户信息进行严惩。
整个大数据行业面临生死劫，上万数据接口关停，大量数据源被切断，行业内90%的公司面临淘汰。
而有意思的是，在这轮清洗中，爬虫技术却成了最后的救命稻草。“安全法规定，获取用户的数据，必须授权，而爬虫就打了一个擦边球”，某大数据公司的CEO称。“爬虫需要用户授权用户名和密码，只是大部分用户并不知道如何确保这些数据的安全”，该CEO称。
但激烈竞争依然存在，业内人士称，现金贷早期，客户资质都比较好，后期骗贷和欺诈的都来了，随之国家的监控措施会越来越严格，市场竞争逐步加剧，爬虫公司已很难生存下去。
已有多家爬虫公司开始转型的尝试，有爬虫公司正准备将所有数据整合，做一整套的现金贷风控解决方案，为其它行业或公司提供咨询服务。戈森