
社交數(shù)據(jù)在征信領(lǐng)域的應(yīng)用探索
在WOT”互聯(lián)網(wǎng)+”時代大數(shù)據(jù)技術(shù)峰會上,來自騰訊數(shù)據(jù)挖掘高級工程師劉黎春做了以《社交數(shù)據(jù)在征信領(lǐng)域的應(yīng)用探索》為主題的演講,主要內(nèi)容由社交征信背景、騰訊社交網(wǎng)絡(luò)數(shù)據(jù)、個體用戶畫像研究、社團(tuán)圈子研究、模型建設(shè)及應(yīng)用這五部分構(gòu)成,下面我們就逐一為大家介紹各部分的內(nèi)容。
社交征信背景
劉黎春表示,征信并不是一個簡單征信評分的模型,而是由數(shù)據(jù)公司、征信公司、征信使用方三部分組成。數(shù)據(jù)公司就是采集或做一些數(shù)據(jù)的初步挖掘,這類公司可能會有特殊的數(shù)據(jù)源,例如法院、公安等這些數(shù)據(jù)都是需要深入行業(yè)背景才能拿到。征信公司是有一個產(chǎn)權(quán)聯(lián)系,另外它也會向第三方一些數(shù)據(jù)公司去購買一些數(shù)據(jù)回來,豐富它數(shù)據(jù)的維度,并且基于這些數(shù)據(jù)去做一些征信的事情,提供一些征信級的解決方案。征信使用方就是征信的解決方案最后給到誰來用。一般來說我們的理解就是銀行和P2P的貸款機(jī)構(gòu)。這三部分綜合起來,就形成了一個整體的征信行業(yè)的產(chǎn)業(yè)鏈。
傳統(tǒng)征信相關(guān)機(jī)構(gòu)
美國著名征信公司
國內(nèi)征信發(fā)展歷程
綜合以上四圖的數(shù)據(jù)來看,如果社交數(shù)據(jù)可以用到征信中的話,是不是可以對央行的征信系統(tǒng)做一個很好的補(bǔ)充呢?劉黎春表示,這是騰訊在做社交征信項目時最開始思考的問題。社交數(shù)據(jù)非常龐大,但并不一定都是有效數(shù)據(jù),還要看具體應(yīng)用的業(yè)務(wù)場景是不是和數(shù)據(jù)有相關(guān)性,這些數(shù)據(jù)是不是真的能夠用到最后的模型或者算法中去。這樣問題就接踵而來,社交數(shù)據(jù)與信用評級有關(guān)系嗎? 交易數(shù)據(jù)天然具備金融屬性,社交數(shù)據(jù)有嗎? 社交數(shù)據(jù)非結(jié)構(gòu)化程度高,怎么挖掘并有效使用?
騰訊社交網(wǎng)絡(luò)數(shù)據(jù)
在談騰訊社交網(wǎng)絡(luò)數(shù)據(jù)構(gòu)成之前,劉黎春先介紹了傳統(tǒng)征信的分析維度。其一是用戶的基礎(chǔ)信息,如年齡、性別、職業(yè)、收入、婚姻狀況,工作年限,工作狀況等基本上和每家銀行或者每個做征信的機(jī)構(gòu)獲得的數(shù)據(jù)都差不多。其二是信貸情況,看用戶申請幾張信用卡,最近一個月的征信報告被查詢的次數(shù),因為我們大家都知道征信報告被查詢的次數(shù)可以直接代表最近有沒有比較頻繁地做貸款的申請或者信用卡申請。如果最近的次數(shù)特別多,那說明這個人最近非常缺錢,可能就會影響信用,直接影響授信額度。
上圖是騰訊的數(shù)據(jù)現(xiàn)狀,包含了很多維度的數(shù)據(jù),覆蓋的用戶數(shù)相對來說更加全面一些。
騰訊社交征信SWOT分析
上圖為騰訊社交征信SWOT分析,優(yōu)勢、劣勢、機(jī)會、風(fēng)險一目了然。有了這樣詳細(xì)的分析,做個人征信是必然的事情,但做征信之前要清楚的知道征信對象是什么樣子,所以開始著手做個體用戶畫像的研究。
個體用戶畫像研究
劉黎春表示,做個體用戶畫像研究遇到的挑戰(zhàn)主要有如下三方面:其一,如何充分利用騰訊各種豐富的數(shù)據(jù)資源及之間的聯(lián)系?其二,如何使用戶畫像適應(yīng)各種不同的應(yīng)用場景?其三,如何高效的處理海量的用戶數(shù)據(jù)(超過10億的QQ用戶, 超過千億級別的各類日志數(shù)據(jù)) ?面對這些挑戰(zhàn),劉黎春給出來相應(yīng)的解決方案如下:
1.針對不同的底層數(shù)據(jù)類型設(shè)計特定的挖掘算法,挖掘用戶的行為特征,形成底 層標(biāo)簽。綜合考慮不同數(shù)據(jù)來源的,形成更上層的抽象用戶標(biāo)簽
2.建立完善的用戶畫像標(biāo)簽體系結(jié)構(gòu),從不同維度、粒度對用戶進(jìn)行描述。
3.搭建用戶畫像挖掘系統(tǒng),基于大規(guī)模存儲和機(jī)器學(xué)習(xí)計算平臺,定期對全 量用戶數(shù)據(jù)進(jìn)行計算和挖掘,并提供用戶標(biāo)簽的使用和查詢服務(wù)。
用戶畫像系統(tǒng)架構(gòu)
用戶畫像行業(yè)挖掘
用戶畫像挖掘結(jié)果
個人用戶畫像研究的結(jié)果就是把結(jié)構(gòu)化數(shù)據(jù),文本分類,LBS數(shù)據(jù),社交網(wǎng)絡(luò)傳播擴(kuò)散這些挖掘之后形成一個比較完整的畫像,比如說人口的一些基礎(chǔ)屬性如年齡、家鄉(xiāng)、興趣等。同時也會對用戶婚姻狀況來做一個判斷。有了這些數(shù)據(jù)之后,就可以基于這些用戶數(shù)據(jù)去做很多社交征信工作。
社團(tuán)圈子研究
這里說到的社團(tuán)圈子其實就是QQ圈子,劉黎春表示,在2012年有一個社交網(wǎng)絡(luò)的成果非常有影響力,那就是把挖掘出來的結(jié)果作用到整個前端的QQ用戶。具體案例就是如用戶的某個同事,你們并不是直接的好友關(guān)系,但騰訊會知道這期間的潛在關(guān)系,或自動分到同事分組并同時加上備注。這個結(jié)果在當(dāng)時引起了很大爭議有人覺得對于他們找到一些潛在好友提供便利,但有些人覺得觸碰了他們的隱私。
QQ圈子除了它自己本身之外,也會把它作用到很多場其他景里去,比如說用它來挖掘?qū)W歷的信息,基于QQ圈子好友的備注,如說很多人把這個用戶備注成一個本科同學(xué),那系統(tǒng)可能會判斷我的學(xué)歷是本科學(xué)歷。這樣的數(shù)據(jù)騰訊是拿一些真實的數(shù)據(jù)做過驗證,數(shù)據(jù)覆蓋率大概能覆蓋74%,準(zhǔn)確到90%以上。
社交網(wǎng)絡(luò)拓?fù)涞膽?yīng)用
社交網(wǎng)絡(luò)拓?fù)涞膽?yīng)用無外乎有兩種,其一是是判斷拓?fù)涞念愋?,其二是研究這些類型在這個關(guān)系鏈里的影響力。比較有標(biāo)志性的拓?fù)漕愋陀腥切魏托男蛢煞N結(jié)構(gòu)。
模型建設(shè)及應(yīng)用
那么要如何把個體用戶畫像和社團(tuán)圈子的研究,用到模型中去呢?劉黎春表示,首先要做的事情就是先建立一個社交模型,但在建模之前要做一些基本假設(shè),如兩個QQ號碼是屬于同一個人的話有一些比較明顯的特征,第一個他會經(jīng)常在同一個設(shè)備里面登陸,或者在同樣的IP里面登陸,或者它有其他特征的表現(xiàn)等等。最后把這些特征用來建立模型,去判斷說某幾個QQ號碼背后對應(yīng)的到底是不是同樣一個人,這個的準(zhǔn)確率大概是85%,覆蓋率是75%左右。
變量衍生與模型結(jié)果
模型整體效果
微粒貸應(yīng)用
最后劉黎春介紹征信模型運(yùn)用到微粒貸中的具體應(yīng)用流程,上圖為產(chǎn)品截圖。打開QQ如果能夠看到微粒貸入口,說明是在騰訊篩選出的白名單里面。只要你點(diǎn)擊了申請開通,它會馬上給你算一個額度出來,如果你要借款,這個也是非??欤灰憬壎四愕你y行卡,應(yīng)該在兩分鐘之內(nèi)會把你的借款打到你的賬上。其實這個相對于去傳統(tǒng)銀行借款的話,它這個效率是有一個質(zhì)的飛躍。但其前臺產(chǎn)品表現(xiàn)得越簡單,它背后的技術(shù)可能是越復(fù)雜的技術(shù)。征信模型作為微粒貸背后技術(shù)就是為了篩選具有良好信用的用戶,為這些用戶提供貸款服務(wù)。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計的實用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動決策的時代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點(diǎn),而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗:捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗:數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨(dú)特的門控機(jī)制,在 ...
2025-07-07統(tǒng)計學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動態(tài)、了解消費(fèi)者需求的重要途徑,而統(tǒng)計學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03