
作者:小伍哥
來(lái)源:小伍哥聊風(fēng)控
大家好,我是小伍哥,今天跟大家聊個(gè)比較深入點(diǎn)的話(huà)題,技術(shù)好就能做好風(fēng)控么?
風(fēng)控算法或風(fēng)控策略,確實(shí)需要很深、很廣泛的技術(shù)儲(chǔ)備,但是也需要很高的應(yīng)用藝術(shù)和想象力。風(fēng)控不像其他業(yè)務(wù)技術(shù)或算法,算法的出現(xiàn)本身就有了比較確定性的場(chǎng)景了,比如推薦,直接套用就行,但是很多算法在風(fēng)控領(lǐng)域應(yīng)用的時(shí)候,場(chǎng)景需要自己去挖掘和發(fā)現(xiàn)。
怎么抽象場(chǎng)景,怎么使用算法,就是一個(gè)藝術(shù)活了。下面用一個(gè)圖異常檢測(cè)算法的一個(gè)點(diǎn)舉例說(shuō)明。算法鏈接:OddBall-圖異常點(diǎn)檢測(cè)
這篇文章,我相信很多讀者看到是圖算法,基本就放棄,認(rèn)為需要要自己寫(xiě)很復(fù)雜的算法才能部署和實(shí)現(xiàn),其實(shí)對(duì)這個(gè)算法充分理解后,簡(jiǎn)單的統(tǒng)計(jì)就能用了,難點(diǎn)在于對(duì)算法的理解,以及對(duì)業(yè)務(wù)中場(chǎng)景的抽象,我們看看這個(gè)算法的一個(gè)點(diǎn)。
算法如下:DominantPair(主導(dǎo)邊)這個(gè)類(lèi)型的風(fēng)險(xiǎn),Dominant heavy links指“主導(dǎo)的邊”,Ego-Net中存在某條邊權(quán)重異常大,如下圖所示。
度量方法:主特征值~總權(quán)重,大多數(shù)節(jié)點(diǎn)Ego-net對(duì)應(yīng)帶權(quán)鄰接矩陣中主特征值(principal eigenvalue,即最大特征值)~總邊權(quán)重也服從冪律分布,其中系數(shù) λ 表示Ego-net中邊權(quán)均勻分布, λ 接近1表示存在DominantPair的情況,衡量的公式如下:
我們來(lái)簡(jiǎn)化下這個(gè)算法思想:其實(shí)一句話(huà),就是一個(gè)點(diǎn)有很多個(gè)鄰居,某個(gè)鄰居權(quán)重占所有鄰居總權(quán)重的比例特別大
再來(lái)個(gè)更具體的例子:一個(gè)商家一個(gè)月賣(mài)了10000個(gè)訂單,100個(gè)消費(fèi)者,其中一個(gè)消費(fèi)者買(mǎi)了9900單,那這個(gè)消費(fèi)者占比9000/10000=90%,形成了主導(dǎo)邊,那這個(gè)商家可能就存在異常。我們其實(shí)只要統(tǒng)計(jì)商家的總訂單,以及每個(gè)商家-消費(fèi)者維度的訂單聚合,然后相除就解決了,這就是個(gè)簡(jiǎn)單的SQL計(jì)算問(wèn)題,完全不用什么復(fù)雜的寫(xiě)算法。
當(dāng)然,這里的訂單數(shù)可以換成金額
訂單換成點(diǎn)擊:可以監(jiān)控惡意流量什么的
訂單換成領(lǐng)券:可以監(jiān)控羊毛黨什么的
·········
商家和消費(fèi)者也可以換成其他的角色,根據(jù)自己的平臺(tái)設(shè)計(jì)這種監(jiān)控指標(biāo),我覺(jué)得能發(fā)現(xiàn)傳統(tǒng)發(fā)現(xiàn)不了的異常,因?yàn)楹苌儆腥诉@么思考過(guò)。
那消費(fèi)者-換地址關(guān)系呢?情況就變了,權(quán)重大反而是正常的,小反而不正常,可能是黃牛什么的,因?yàn)檎H说玫刂罚鄬?duì)比較集中,就那個(gè)幾個(gè)固定的。
那消費(fèi)者-充值手機(jī)呢?也是同樣的,權(quán)重大反而是正常的,小反而不正常,可能是銷(xiāo)贓款或者洗錢(qián)什么的。因?yàn)檎H?,給自己手機(jī)充值,或者加幾個(gè)家里人和同學(xué)什么的,有些賬戶(hù)給幾千幾萬(wàn)人充值,那可能就異常了。
那這個(gè)是不是可以再抽象一點(diǎn),比如消費(fèi)者-購(gòu)物類(lèi)目關(guān)系網(wǎng)絡(luò),按道理,每個(gè)人的購(gòu)物,基本均勻分布在不同的類(lèi)目,有吃穿的也有用的,如果發(fā)現(xiàn)一個(gè)用戶(hù),大量購(gòu)買(mǎi)集中在某些偏門(mén)的類(lèi)目,那是不是有可能這個(gè)用戶(hù)或者被購(gòu)買(mǎi)的商家有異常?是不是要買(mǎi)制毒的原材料?是不是在圖謀什么?或者在交易什么?
每個(gè)公司的業(yè)務(wù)不一樣,但是很多思路,都是可以順著這個(gè)算法的結(jié)構(gòu)去思考的,需要充分理解算法,充分理解業(yè)務(wù),充分的想象力。
我們看到了異常檢測(cè),看到了圖,但是要更加深入的去看到業(yè)務(wù)與之匹配的地方,多維度的思考,聯(lián)想,并進(jìn)行應(yīng)用,才能讓算法產(chǎn)生價(jià)值,所以,風(fēng)控,不僅是技術(shù)問(wèn)題,也是藝術(shù)。
風(fēng)控挖掘的樂(lè)趣,大抵也在此了。
數(shù)據(jù)分析咨詢(xún)請(qǐng)掃描二維碼
若不方便掃碼,搜微信號(hào):CDAshujufenxi
SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實(shí)戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無(wú)論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢(xún)效率:打破 “拆分必慢” 的認(rèn)知誤區(qū) 在 MySQL 數(shù)據(jù)庫(kù)管理中,“大表” 始終是性能優(yōu)化繞不開(kāi)的話(huà)題。 ...
2025-09-18CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫(kù)表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動(dòng)態(tài)隨機(jī)一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開(kāi)始提取前,需先判斷 TIF 文件的類(lèi)型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價(jià)值的專(zhuān)業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲(chǔ)的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫(kù)表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實(shí)戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫(kù))處理 Excel 數(shù)據(jù)時(shí),“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗(yàn)與 t 檢驗(yàn):差異、適用場(chǎng)景與實(shí)踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計(jì)學(xué)領(lǐng)域,假設(shè)檢驗(yàn)是驗(yàn)證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專(zhuān)業(yè)操盤(pán)手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲(chǔ)的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計(jì)劃中 rows 數(shù)量的準(zhǔn)確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計(jì)劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對(duì)象的 text 與 content:區(qū)別、場(chǎng)景與實(shí)踐指南 在 Python 進(jìn)行 HTTP 網(wǎng)絡(luò)請(qǐng)求開(kāi)發(fā)時(shí)(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價(jià)值的核心操盤(pán)手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫(kù)表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請(qǐng)求工具對(duì)比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請(qǐng)求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長(zhǎng)浮點(diǎn)數(shù)據(jù)的科學(xué)計(jì)數(shù)法問(wèn)題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長(zhǎng)浮點(diǎn)數(shù)據(jù)時(shí)的科學(xué)計(jì)數(shù)法問(wèn)題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價(jià)值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運(yùn)營(yíng)問(wèn)題、提升執(zhí)行效率的核心手段,其價(jià)值 ...
2025-09-12用 SQL 驗(yàn)證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實(shí)戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過(guò)程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計(jì)” 與 “用戶(hù)體驗(yàn) ...
2025-09-11塔吉特百貨孕婦營(yíng)銷(xiāo)案例:數(shù)據(jù)驅(qū)動(dòng)下的精準(zhǔn)零售革命與啟示 在零售行業(yè) “流量紅利見(jiàn)頂” 的當(dāng)下,精準(zhǔn)營(yíng)銷(xiāo)成為企業(yè)突圍的核心方 ...
2025-09-11CDA 數(shù)據(jù)分析師與戰(zhàn)略 / 業(yè)務(wù)數(shù)據(jù)分析:概念辨析與協(xié)同價(jià)值 在數(shù)據(jù)驅(qū)動(dòng)決策的體系中,“戰(zhàn)略數(shù)據(jù)分析”“業(yè)務(wù)數(shù)據(jù)分析” 是企業(yè) ...
2025-09-11Excel 數(shù)據(jù)聚類(lèi)分析:從操作實(shí)踐到業(yè)務(wù)價(jià)值挖掘 在數(shù)據(jù)分析場(chǎng)景中,聚類(lèi)分析作為 “無(wú)監(jiān)督分組” 的核心工具,能從雜亂數(shù)據(jù)中挖 ...
2025-09-10統(tǒng)計(jì)模型的核心目的:從數(shù)據(jù)解讀到?jīng)Q策支撐的價(jià)值導(dǎo)向 統(tǒng)計(jì)模型作為數(shù)據(jù)分析的核心工具,并非簡(jiǎn)單的 “公式堆砌”,而是圍繞特定 ...
2025-09-10