風(fēng)口變“封口”，復(fù)盤數(shù)據(jù)行業(yè)的墮落之路

從P2P到現(xiàn)金貸“714高炮”，依賴爬蟲(chóng)技術(shù)爬得的大數(shù)據(jù)，互聯(lián)網(wǎng)在線貸款業(yè)務(wù)蓬勃發(fā)展，但也踩上了數(shù)據(jù)來(lái)源違法、濫用的紅線。

最近數(shù)月來(lái)，數(shù)據(jù)行業(yè)迎來(lái)又一輪強(qiáng)監(jiān)管風(fēng)暴，曾經(jīng)的創(chuàng)業(yè)風(fēng)口，如今不少?gòu)臉I(yè)者卻直接被監(jiān)管帶走調(diào)查……

一個(gè)爬蟲(chóng)引發(fā)的案件

2019年的某個(gè)工作日，在一家大數(shù)據(jù)公司工作的程序員張明，接到了技術(shù)部領(lǐng)導(dǎo)的需求，要求寫一段爬蟲(chóng)批量從一家互聯(lián)網(wǎng)公司網(wǎng)站的一個(gè)接口抓取數(shù)據(jù)，爬蟲(chóng)開(kāi)發(fā)完并測(cè)試沒(méi)有問(wèn)題后，張明就將程序上傳到了公司服務(wù)器。

程序運(yùn)行了一段時(shí)間，張明打算對(duì)爬蟲(chóng)程序進(jìn)行進(jìn)一步優(yōu)化，他將爬蟲(chóng)的線程數(shù)調(diào)大。完善后的程序上傳到服務(wù)器，張明跟蹤了下爬蟲(chóng)的進(jìn)展，發(fā)現(xiàn)運(yùn)行平穩(wěn)并且速度快了很多。提交之后像往常一樣，張明就把這件事情忘了。

數(shù)天之后，張明所在的公司突然闖入一大群警察，公司全體上下200多人包括張明無(wú)差別地全部被抓。原來(lái)張明之前調(diào)大的爬蟲(chóng)抓取數(shù)值，直接導(dǎo)致被爬取數(shù)據(jù)的互聯(lián)網(wǎng)公司服務(wù)器崩潰不能訪問(wèn)，被爬取公司面對(duì)這種“非法入侵”的數(shù)據(jù)竊取行為，果斷決定報(bào)案處理。

在去警察局的路上，張明一直在想：這是不是搞錯(cuò)了？自己只是一名技術(shù)人員，怎么也會(huì)怎么被抓起來(lái)……

上述是公眾號(hào)“純潔的微笑”整理的，關(guān)于簡(jiǎn)歷大數(shù)據(jù)公司巧達(dá)科技今年3月被警方一鍋端的一段故事，而隨著公安部門今年以來(lái)對(duì)爬蟲(chóng)公司打擊力度的加強(qiáng)，大數(shù)據(jù)行業(yè)也迎來(lái)了規(guī)模空前的整治風(fēng)暴。

自2019年9月以來(lái)，多家涉及大數(shù)據(jù)風(fēng)控業(yè)務(wù)和爬蟲(chóng)技術(shù)應(yīng)用的知名大數(shù)據(jù)公司相關(guān)人員被抓或被調(diào)查，包括魔蝎科技、新顏科技高管相繼被警方帶走，公信寶運(yùn)營(yíng)公司被杭州警方查封，貸款超市頭部機(jī)構(gòu)“信用管家”辦公室被警方清查。此外，還有多家大數(shù)據(jù)風(fēng)控公司人士“協(xié)助調(diào)查”，包括同盾科技、百融云創(chuàng)等多家機(jī)構(gòu)。與此同時(shí)，白騎士、天機(jī)數(shù)據(jù)、立木征信、聚信立等紛紛宣布暫停爬蟲(chóng)業(yè)務(wù)。

“2019年捕獲獨(dú)角獸最多的機(jī)構(gòu)：紅杉、阿里、騰訊、警方?！边@是流傳在大數(shù)據(jù)行業(yè)微信群的一個(gè)段子，或可形容目前公安部門打擊爬蟲(chóng)公司違規(guī)爬取網(wǎng)絡(luò)個(gè)人信息的力度。

隨著大數(shù)據(jù)公司人員被抓捕、被調(diào)查的消息不斷傳出，行業(yè)也掀起了一波離職潮。據(jù)了解，一些大數(shù)據(jù)公司的爬蟲(chóng)團(tuán)隊(duì)被解散、裁員，大量人員主動(dòng)離職，其中技術(shù)人員占一多半。

“要么死掉；如果能躲過(guò)這一波強(qiáng)監(jiān)管、沒(méi)有出大事，也得被迫轉(zhuǎn)向其他業(yè)務(wù)?！币晃淮髷?shù)據(jù)風(fēng)控公司高管曾向媒體表示。

“今年這么難，這個(gè)行業(yè)目前的現(xiàn)狀，我也是沒(méi)想到的?！痹?jīng)在一家頭部大數(shù)據(jù)公司就職的李成健對(duì)消金社感慨道。

黃金時(shí)代

時(shí)間倒回到2013年9月，彼時(shí)蔣韜還是阿里巴巴集團(tuán)安全部的技術(shù)總監(jiān)，是阿里風(fēng)險(xiǎn)控制和反欺詐基礎(chǔ)平臺(tái)和眾多基礎(chǔ)產(chǎn)品創(chuàng)立者。但是，是繼續(xù)服務(wù)阿里還是離職創(chuàng)業(yè)，這個(gè)問(wèn)題他反復(fù)斟酌。

一個(gè)月之后，蔣韜做出了決定，隨后同盾科技成立，并拉上了一幫阿里的前同事加入團(tuán)隊(duì)。頭頂阿里系離職員工創(chuàng)業(yè)光環(huán)，公司開(kāi)業(yè)不到一個(gè)月，便獲得了千萬(wàn)級(jí)的融資。當(dāng)年，余額寶的發(fā)布引發(fā)了互聯(lián)網(wǎng)金融熱潮，同盾剛成立便站上了風(fēng)口。

數(shù)據(jù)顯示，從2013年到2015年，中國(guó)市場(chǎng)上P2P網(wǎng)貸平臺(tái)數(shù)量就從800家增長(zhǎng)至2595家，累計(jì)交易規(guī)模超過(guò)1.4萬(wàn)億。

最初，P2P平臺(tái)的主流風(fēng)控模式為擔(dān)保型風(fēng)控，包括設(shè)立風(fēng)險(xiǎn)保證金、第三方提供擔(dān)保、實(shí)物抵押、平臺(tái)代償?shù)确绞?，但這些方式缺點(diǎn)明顯：一方面效率低，需要很高的人力物力成本，另一方面這種風(fēng)控方式也不符合監(jiān)管后來(lái)對(duì)網(wǎng)貸平臺(tái)“借貸信息中介”的定位。

“在互聯(lián)網(wǎng)金融行業(yè)興起時(shí)，互金平臺(tái)缺少數(shù)據(jù)源，因此十分需要第三方數(shù)據(jù)公司的幫助來(lái)構(gòu)建基于大數(shù)據(jù)應(yīng)用的線上風(fēng)控體系，而那幾年也堪稱數(shù)據(jù)行業(yè)的‘黃金時(shí)代’”，作為大數(shù)據(jù)行業(yè)興起的親歷者，李成建對(duì)消金社介紹道。

在P2P監(jiān)管政策出臺(tái)后，行業(yè)增速有所放緩，但現(xiàn)金貸平臺(tái)洶涌，到2016年，國(guó)內(nèi)現(xiàn)金貸平臺(tái)數(shù)量飛速增長(zhǎng)到數(shù)千家，放貸規(guī)模達(dá)萬(wàn)億量級(jí)。

在我國(guó)征信體系并不完善的背景下，P2P和現(xiàn)金貸平臺(tái)，包括銀行、消費(fèi)金融公司等持牌金融機(jī)構(gòu)，從獲客到風(fēng)控，再到催收都需要數(shù)據(jù)的支持和輔助，而頻繁的數(shù)據(jù)調(diào)取、使用，龐大的市場(chǎng)需求也讓同盾科技這樣的大數(shù)據(jù)公司賺得盆滿缽滿。

新流財(cái)經(jīng)曾披露的一份文件顯示，同盾科技在2016年的付費(fèi)調(diào)用量已經(jīng)達(dá)到4.99億次，這一數(shù)據(jù)在2017年攀升至18.08億次，到2018年進(jìn)一步增長(zhǎng)至驚人的22.87億次。與此同時(shí)，單次調(diào)用的價(jià)格也水漲船高，從2016年的0.09元/次增長(zhǎng)至2018年的0.21元/次。

墮落之路

據(jù)了解，大數(shù)據(jù)公司的一般數(shù)據(jù)的來(lái)源主要有兩個(gè)：一類是通過(guò)合規(guī)渠道獲取，如對(duì)接政府部門、征信公司拿到數(shù)據(jù)，或得到用戶授權(quán)進(jìn)行數(shù)據(jù)查詢。

據(jù)了解，2017年，當(dāng)時(shí)市場(chǎng)上一些知名第三方數(shù)據(jù)公司，其爬蟲(chóng)接口已經(jīng)做到了可授權(quán)爬取上千家網(wǎng)站，覆蓋了幾乎所有的電商平臺(tái)、90%以上的公積金網(wǎng)站、主流保險(xiǎn)網(wǎng)站、社保網(wǎng)站，同時(shí)涵蓋央行征信、運(yùn)營(yíng)商數(shù)據(jù)、學(xué)歷學(xué)籍、信用卡賬單、電商數(shù)據(jù)等多種信息，儼然成為了互聯(lián)網(wǎng)貸款市場(chǎng)中隱形的“征信中心”和“信息共享中心”，而這也極大降低了線上放貸的門檻。

數(shù)據(jù)源的另一類，則是從非法渠道接入，包括爬取、買入、交換、撞庫(kù)等，這是一條低成本獲取數(shù)據(jù)的捷徑，當(dāng)然這種方式也更沒(méi)有底線。

2016年5月曾曝出一家新興科技公司“通付盾”起訴同盾通過(guò)不正當(dāng)手段剽竊通付盾“設(shè)備指紋”技術(shù)。此外，據(jù)媒體報(bào)道，知名大數(shù)據(jù)公司摩羯科技曾開(kāi)發(fā)出一種“同業(yè)爬蟲(chóng)”產(chǎn)品，可以直接將其他現(xiàn)金貸平臺(tái)的放款額和風(fēng)控?cái)?shù)據(jù)爬出來(lái)，相當(dāng)于野蠻竊取了別家的風(fēng)控成果。

“不管是網(wǎng)站還是APP，只要有賬號(hào)密碼就可以爬，連央行的征信報(bào)告都能爬”，某數(shù)據(jù)負(fù)責(zé)人在接受媒體采訪時(shí)聲稱，“技術(shù)好，就沒(méi)有爬不到的數(shù)據(jù)”。

看到做大數(shù)據(jù)爬蟲(chóng)業(yè)務(wù)賺錢，越來(lái)越多人和公司開(kāi)始涌入，而這個(gè)技術(shù)本來(lái)就門檻不高，一時(shí)間渠道商、代理商也層出不窮，大家為搶奪客戶，開(kāi)始打價(jià)格戰(zhàn)。

“這其實(shí)不是一個(gè)很暴利的行業(yè)?！崩畛山?duì)消金社表示。

激烈的市場(chǎng)競(jìng)爭(zhēng)，也導(dǎo)致一部分大數(shù)據(jù)公司開(kāi)始“獨(dú)辟蹊徑”。

現(xiàn)金貸早期，客戶資質(zhì)都比較好，后期騙貸和欺詐的都來(lái)了，只靠簡(jiǎn)單的爬蟲(chóng)技術(shù)，很難擋住他們。后來(lái)，有數(shù)據(jù)公司不僅爬取用戶通話記錄、芝麻信用、社保、黑名單等常見(jiàn)的信息維度，甚至連個(gè)人支付寶和微信的一些隱私信息也一并爬取。而部分大數(shù)據(jù)公司則更瘋狂，直接將非法獲取的數(shù)據(jù)進(jìn)行交易和售賣。

近日被調(diào)查的考拉征信，被曝光其非法緩存倒賣了上億公民的個(gè)人信息，公司從上游公司獲取接口后，又將查詢接口出售，供下游公司查詢牟利。

不僅如此，部分大數(shù)據(jù)上下游的公司在通過(guò)販賣信息獲利的同時(shí)，還經(jīng)營(yíng)現(xiàn)金貸平臺(tái)，利用手上掌握的個(gè)人信息進(jìn)行貸款推銷、軟暴力催收等。

據(jù)財(cái)新報(bào)道，這輪針對(duì)大數(shù)據(jù)風(fēng)控公司的強(qiáng)監(jiān)管主要是由于公安機(jī)關(guān)在打擊“套路貸”時(shí)，發(fā)現(xiàn)爬蟲(chóng)為套路貸爬取通訊錄、地址定位等個(gè)人敏感信息，引發(fā)命案及相關(guān)刑事調(diào)查。有接近公安部的人士認(rèn)為，在此類案件中，“套路貸是主犯，而爬蟲(chóng)公司是從犯”。

在大數(shù)據(jù)整治風(fēng)暴下，有不少金融平臺(tái)表示，它們合作的數(shù)據(jù)接口，大部分都被切斷，尤其是各種數(shù)據(jù)來(lái)源不合規(guī)的爬蟲(chóng)產(chǎn)品?！澳壳般y行已有明確要求，不允許使用來(lái)源不明的第三方公司產(chǎn)品，數(shù)據(jù)源頭必須合規(guī)合法?！蹦炒髷?shù)據(jù)公司業(yè)務(wù)負(fù)責(zé)人劉彬告訴消金社。

草莽時(shí)代落幕

“我從來(lái)沒(méi)借過(guò)高利貸，借的都是超利貸?！睌]貸老哥袁夢(mèng)調(diào)侃道，他有著數(shù)十家現(xiàn)金貸平臺(tái)的“成功”擼貸經(jīng)驗(yàn)，基本上是一下款就卸載APP，再換一個(gè)手機(jī)號(hào)。袁夢(mèng)告訴消金社，那種利息越高的他越愿意借，因?yàn)檫@種平臺(tái)本身就不合規(guī)，而且反正也不上征信。

“現(xiàn)在情況變了，不太好擼了?！痹瑝?mèng)表示，一方面平臺(tái)數(shù)量少了，許多現(xiàn)金貸平臺(tái)經(jīng)過(guò)這一輪的行業(yè)清洗消失了。另一方面，平臺(tái)的風(fēng)控普遍變得更加嚴(yán)厲了?！爸安簧俳枇瞬挥眠€的，就憑身份證號(hào)和手機(jī)號(hào)，再填寫兩個(gè)緊急聯(lián)系人能立刻下款，現(xiàn)在不僅要身份證照片，而且有的平臺(tái)還要進(jìn)行刷臉認(rèn)證，尤其最近一段時(shí)間，下款更是不容易。”袁夢(mèng)表示。

知名網(wǎng)貸系統(tǒng)供應(yīng)商帝友公司的一位客戶經(jīng)理告訴消金社，現(xiàn)在找他們購(gòu)買系統(tǒng)，不再是給錢就發(fā)貨，而需要買家提供互聯(lián)網(wǎng)小貸牌照等合規(guī)資質(zhì)。

“現(xiàn)在這種嚴(yán)打的環(huán)境下，那些714高炮如果還敢頂風(fēng)作案，等著它們的就是被判定為‘套路貸’，然后被抓被判。”李成健對(duì)消金社表示。

一位業(yè)內(nèi)人士表示，受爬蟲(chóng)風(fēng)波影響，部分第三方數(shù)據(jù)公司的數(shù)據(jù)“斷供”，目前有不少現(xiàn)金貸平臺(tái)的業(yè)務(wù)開(kāi)始收縮，有的只能針對(duì)之前還款記錄良好的老客戶放款，不再新增。而且部分銀行也暫時(shí)停止了線上放貸業(yè)務(wù)。

作為一家年?duì)I業(yè)額約一億元的大數(shù)據(jù)公司，在此輪的行業(yè)整治過(guò)程中，劉彬他們公司以及客戶受到的影響不大，因?yàn)樗麄兊闹饕蛻羧阂恢笔倾y行等持牌金融機(jī)構(gòu)，而且在數(shù)據(jù)的獲取方式上，他們不采用非法的爬蟲(chóng)技術(shù)手段，而是通過(guò)接入與工商局、稅務(wù)局等能提供數(shù)據(jù)源的合作平臺(tái)來(lái)取得。

“明顯的變化是，之前那些十分在意價(jià)格的客戶，現(xiàn)在對(duì)數(shù)據(jù)的合規(guī)性更看重了。”據(jù)劉彬介紹，“感覺(jué)客戶越來(lái)越愿意從數(shù)據(jù)源頭拿東西，不愿跟渠道商、代理商合作，因?yàn)檫@樣能清晰地知道對(duì)接的數(shù)據(jù)是否合法合規(guī)，而這正好也是我們這類正規(guī)數(shù)據(jù)公司的機(jī)會(huì)。”

從相關(guān)政策來(lái)看，大數(shù)據(jù)行業(yè)的“緊箍咒”也越來(lái)越嚴(yán)。

2017年6月1日，《中華人民共和國(guó)網(wǎng)絡(luò)安全法》開(kāi)始施行，其特別加強(qiáng)和明確了個(gè)人信息保護(hù)方面的要求?！毒W(wǎng)絡(luò)安全法》中明確規(guī)定，網(wǎng)絡(luò)產(chǎn)品、服務(wù)具有收集用戶信息功能的，其提供者應(yīng)當(dāng)向用戶明示并取得同意。未經(jīng)被收集者同意，不得向他人提供個(gè)人信息。

今年年中，國(guó)家互聯(lián)網(wǎng)信息辦公室發(fā)布《數(shù)據(jù)安全管理辦法（征求意見(jiàn)稿）》，文件系統(tǒng)地規(guī)定了網(wǎng)絡(luò)運(yùn)營(yíng)者數(shù)據(jù)收集、數(shù)據(jù)處理使用等合規(guī)要求，以及強(qiáng)制捆綁授權(quán)、網(wǎng)絡(luò)爬蟲(chóng)等新型數(shù)據(jù)安全問(wèn)題。

消金社在一個(gè)爬蟲(chóng)技術(shù)交流群發(fā)現(xiàn)，雖政策愈加嚴(yán)厲，但目前仍有不少人企圖通過(guò)違規(guī)爬取借貸平臺(tái)數(shù)據(jù)獲利，一位正在招聘爬蟲(chóng)技術(shù)人員的群友表示：“爬蟲(chóng)技術(shù)過(guò)硬的，而且有反爬經(jīng)驗(yàn)的，月薪3萬(wàn)起?！?/p>

在劉彬看來(lái)，不論目前市場(chǎng)上還存在哪些牛鬼蛇神，之前靠野路子猛沖猛打的草莽時(shí)代已經(jīng)結(jié)束，參與者只有腳踏實(shí)地，才能走得穩(wěn)、走得遠(yuǎn)。劉彬透露，他們公司明年的業(yè)績(jī)指標(biāo)會(huì)設(shè)置得更高?！?strong>在消費(fèi)金融繁榮的大背景下，市場(chǎng)足夠大，而且經(jīng)過(guò)這輪整治風(fēng)暴，合規(guī)、持牌，成為行業(yè)主旋律，相信以后就是有真實(shí)數(shù)據(jù)公司‘正規(guī)軍’的天下?！?/p>

李成建對(duì)消金社表示，嚴(yán)監(jiān)管推動(dòng)“良幣驅(qū)逐劣幣”的行業(yè)洗牌，“這讓從業(yè)者深刻地認(rèn)識(shí)到了做事的界限在哪里，整治后的行業(yè)發(fā)展到了一個(gè)新的關(guān)口，而這也許并非壞事?！?/p>

注：文中部分受訪者為化名。

本文已標(biāo)注來(lái)源和出處，版權(quán)歸原作者所有，如有侵權(quán)，請(qǐng)聯(lián)系我們。

生成海報(bào)

免責(zé)聲明：本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請(qǐng)進(jìn)一步核實(shí)，并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏，概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí)，應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說(shuō)明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。