大數(shù)據(jù)挖掘在銀行業(yè)務(wù)領(lǐng)域的應(yīng)用

隨著云計算、移動互聯(lián)網(wǎng)等網(wǎng)絡(luò)新技術(shù)的應(yīng)用、發(fā)展與普及，海量數(shù)據(jù)的產(chǎn)生與流轉(zhuǎn)成為常態(tài)，世界各國對數(shù)據(jù)的依賴急速上升。鑒于大數(shù)據(jù)潛在的巨大影響力，世界各國已將大數(shù)據(jù)研究上升為國家戰(zhàn)略。美國奧巴馬政府早在2012年便發(fā)布了“大數(shù)據(jù)研發(fā)計劃”;歐盟提出“數(shù)據(jù)價值鏈戰(zhàn)略計劃”;聯(lián)合國推出“全球脈動”項目;日本也積極謀劃利用大數(shù)據(jù)改造國家治理體系;我國十八屆五中全會通過的“十三五”規(guī)劃建議也提出了“實施國家大數(shù)據(jù)戰(zhàn)略，推進數(shù)據(jù)資源開放共享”的發(fā)展戰(zhàn)略，國務(wù)院發(fā)布《促進大數(shù)據(jù)發(fā)展行動綱要》，旨在大力促進中國大數(shù)據(jù)技術(shù)的發(fā)展。由此可見，世界經(jīng)濟已進入大數(shù)據(jù)時代。

當前，銀行已經(jīng)深刻意識到大數(shù)據(jù)戰(zhàn)略對其經(jīng)營管理、客戶營銷和產(chǎn)品優(yōu)化等方面的重要作用，以及對銀行未來發(fā)展方向的深刻影響。因此，必須做好銀行內(nèi)外部海量異構(gòu)數(shù)據(jù)的專業(yè)化整合清洗，統(tǒng)一存放、分析處理和共享利用，深度挖掘大數(shù)據(jù)蘊涵的巨大價值，從而推動銀行產(chǎn)品、服務(wù)和管理的創(chuàng)新。

一、銀行業(yè)大數(shù)據(jù)的發(fā)展前景

世界經(jīng)濟論壇有關(guān)大數(shù)據(jù)的一份研究報告顯示，全球每天有幾十億人在使用計算機、手機、平板、GPS定位等設(shè)備，源源不斷地產(chǎn)生大量數(shù)據(jù)。在以大數(shù)據(jù)為主導(dǎo)的時代，“去哪兒”可以通過集成以往的飛機票價畫出未來票價走勢;“百度地圖”可以通過大數(shù)據(jù)分析出實時路況;“世紀佳緣”可以利用大數(shù)據(jù)分析來幫助需要的人匹配合適的對象。這些無不體現(xiàn)出大數(shù)據(jù)與人們的工作、生活息息相關(guān)。馬云在卸任演講時說，“大家還沒搞清PC時代的時候，移動互聯(lián)網(wǎng)來了，還沒搞清移動互聯(lián)網(wǎng)的時候，大數(shù)據(jù)時代來了?！睆倪@句話可以看出，PC互聯(lián)網(wǎng)時代已經(jīng)成為過去，如今正處于移動互聯(lián)網(wǎng)全面爆發(fā)時期，數(shù)據(jù)在持續(xù)地增多變大，誰能充分利用數(shù)據(jù)，把握市場的脈搏，誰就能在未來市場競爭中贏得勝利。

隨著信息技術(shù)的發(fā)展，數(shù)據(jù)量已達到PB級別，海量數(shù)據(jù)的存儲和使用已經(jīng)成為銀行的負擔，銀行領(lǐng)導(dǎo)者迫切希望在牽引銀行未來發(fā)展的同時能獲得銀行過往數(shù)據(jù)的分析支撐。美國麥肯錫全球研究院在研究報告中指出，目前，金融業(yè)在大數(shù)據(jù)價值潛力指數(shù)排名中位居第一。經(jīng)過近幾年的發(fā)展，大數(shù)據(jù)平臺和技術(shù)日臻成熟，可以整合、存儲和處理更多的數(shù)據(jù)，并從海量數(shù)據(jù)中挖掘數(shù)據(jù)隱藏的價值。大數(shù)據(jù)已經(jīng)從最初的概念提出走向價值應(yīng)用，并逐步邁向?qū)嵤┖万炞C階段。

相較于其他行業(yè)，數(shù)據(jù)已經(jīng)成為銀行業(yè)的核心基礎(chǔ)設(shè)施與資產(chǎn)，大數(shù)據(jù)對銀行業(yè)而言更是具有巨大的潛在價值。銀行業(yè)正處于轉(zhuǎn)型發(fā)展的重要關(guān)口，應(yīng)積極響應(yīng)“十三五”號召，從大數(shù)據(jù)就是大資產(chǎn)的高度，制定大數(shù)據(jù)戰(zhàn)略，充分研究和利用大數(shù)據(jù)技術(shù)，踐行大數(shù)據(jù)思維，通過改革來實現(xiàn)發(fā)展模式轉(zhuǎn)型、金融創(chuàng)新和管理升級等，提升銀行體系的競爭力和穩(wěn)健性。

面對強大的競爭壓力，大數(shù)據(jù)挖掘技術(shù)的重要性日益顯現(xiàn)。通過大數(shù)據(jù)挖掘，才有可能確保銀行發(fā)展戰(zhàn)略在既有的業(yè)務(wù)機制的支撐下，充分發(fā)展和擴大客戶資源，實現(xiàn)大數(shù)據(jù)資源的全面、深度和綜合應(yīng)用，實現(xiàn)為客戶創(chuàng)造價值和為銀行盈利的“雙贏”目標，從而打造銀行的核心競爭力，支持銀行業(yè)務(wù)經(jīng)營可持續(xù)發(fā)展。

二、大數(shù)據(jù)的挖掘

(一)數(shù)據(jù)挖掘涵義

大數(shù)據(jù)時代下的數(shù)據(jù)挖掘是一種新的商業(yè)信息處理技術(shù)。銀行需要將有價值的信息從數(shù)據(jù)海洋中發(fā)掘出來，而數(shù)據(jù)挖掘技術(shù)可以很好地幫助銀行實現(xiàn)這一點，其主要特點是對金融信息系統(tǒng)數(shù)據(jù)庫中的大量業(yè)務(wù)數(shù)據(jù)進行抽取、轉(zhuǎn)換、分析和其他模型化處理，從中提取能輔助商業(yè)性決策的關(guān)鍵性數(shù)據(jù)。同時，數(shù)據(jù)挖掘也是多學(xué)科交叉融合的技術(shù)，主要用到聚類分析、分類分析、回歸分析、關(guān)聯(lián)規(guī)則、描述和可視化等數(shù)據(jù)挖掘技術(shù)。從本質(zhì)上說，數(shù)據(jù)挖掘就是從海量數(shù)據(jù)中發(fā)現(xiàn)隱含的知識和規(guī)律。

傳統(tǒng)的數(shù)據(jù)獲取和處理方法多采用樣本抽取和樣本分析方法，同時涉及多種算法，有源于機器學(xué)習的神經(jīng)網(wǎng)絡(luò)、決策樹，也有基于統(tǒng)計學(xué)習理論的支持向量機、分類回歸樹和關(guān)聯(lián)分析等諸多算法。大數(shù)據(jù)時代的數(shù)據(jù)挖掘是跳出傳統(tǒng)數(shù)據(jù)分析和處理方法框架的一種新思維，最顯著的特征就是不再使用抽樣數(shù)據(jù)，而是通過實時監(jiān)測、跟蹤研究對象在互聯(lián)網(wǎng)上產(chǎn)生的全部數(shù)據(jù)(包括所有結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù))并進行挖掘分析，揭示出其中的規(guī)律，提出研究結(jié)論和對策。如今，利用數(shù)據(jù)挖掘技術(shù)提升競爭力已成為銀行業(yè)信息科技專家都在追求的目標。

目前銀行業(yè)已具備實施大數(shù)據(jù)的基本條件，其不僅擁有所有客戶的賬戶、資金收付交易等結(jié)構(gòu)化數(shù)據(jù)，還擁有客服音頻、網(wǎng)點視頻、網(wǎng)上銀行記錄、電子商務(wù)記錄等非結(jié)構(gòu)化數(shù)據(jù)，以及豐富的傳統(tǒng)數(shù)據(jù)處理經(jīng)驗，加之充足的預(yù)算使其可以利用多項大數(shù)據(jù)新技術(shù)，同時，較高的薪酬也能夠吸引大數(shù)據(jù)人才。

(二)主要的數(shù)據(jù)挖掘方法

大數(shù)據(jù)時代，數(shù)據(jù)的產(chǎn)生和收集是基礎(chǔ)，數(shù)據(jù)挖掘是關(guān)鍵。大數(shù)據(jù)技術(shù)的戰(zhàn)略意義不在于掌握龐大的數(shù)據(jù)信息，而在于如何通過對數(shù)據(jù)進行專業(yè)化處理來獲取有價值的信息。銀行業(yè)通常采用以下方法對數(shù)據(jù)進行挖掘分析。

1. 分類分析法

不同的客戶具有不同的特征，但這些特征可以進行抽象、歸納和分類。針對收集到的客戶數(shù)據(jù)，銀行采用分類算法，將客戶特征映射到相應(yīng)的類別當中。同類別中的客戶具有大致相同的特點，可視為具有相同的金融行為，銀行可以據(jù)此制定相應(yīng)的營銷和金融產(chǎn)品推送策略，實現(xiàn)面向客戶需求的精準營銷、精確推送和個性化定制服務(wù)，在不斷維系現(xiàn)有客戶、提高客戶服務(wù)滿意度的同時，贏得更多的客戶。

2. 回歸分析法

回歸分析法主要采用時間序列分析方法，預(yù)測客戶金融消費行為的趨勢特征，以及預(yù)測客戶行為之間是否存在一定的關(guān)系等。銀行可以在已經(jīng)擁有的客戶金融行為數(shù)據(jù)基礎(chǔ)上，融合客戶電子商務(wù)數(shù)據(jù)和其他第三方提供的數(shù)據(jù)，對客戶即將發(fā)生的金融行為和金融產(chǎn)品銷售趨勢進行預(yù)測，從而獲知客戶潛在的需求，分析金融產(chǎn)品與客戶潛在需求的匹配度，并制定相應(yīng)的金融產(chǎn)品優(yōu)化方案，從而更加有效地挽留客戶。

3. 聚類分析法

銀行的客戶既存在一定的相似性，也存在一定的差異性，采用聚類分析算法，根據(jù)銀行客戶行為數(shù)據(jù)間的相似性和差異性將銀行客戶分為不同的類別，按照“具有相同行為特征的客戶相似度盡可能高”“不同行為特征的客戶差異度盡可能大”兩個維度對客戶進行分類，從而獲得更加準確的客戶分類，幫助銀行深入了解客戶行為特征和需求特點，制定個性化、定制化的金融服務(wù)方案，向客戶提供更加優(yōu)質(zhì)的金融服務(wù)。

4. 關(guān)聯(lián)規(guī)則分析法

關(guān)聯(lián)是指客戶行為之間的相關(guān)性，由于客戶本身興趣的恒定性及潛在意識的趨勢性，客戶發(fā)生某一行為時，極有可能關(guān)聯(lián)發(fā)生另外一行為。因此，當客戶發(fā)生某一金融消費行為時，基于銀行的歷史數(shù)據(jù)進行關(guān)聯(lián)規(guī)則分析，可以預(yù)判并將客戶另外一行為可能選擇的金融產(chǎn)品推送至客戶，及時滿足客戶的金融服務(wù)需求。

5. 孤立點檢測

在客戶行為數(shù)據(jù)中，如果某一項行為數(shù)據(jù)過于偏離一組數(shù)據(jù)，形成一個孤立點，則為異常行為。此時可采取基于偏差的方法進行孤立點檢測，通過采取輪詢的方式，掃描一組客戶行為數(shù)據(jù)，形成行為的主要特征，然后根據(jù)主要特征定位奇異點，如果某個行為數(shù)據(jù)反映的特征與主要特征過分偏離，則此客戶行為數(shù)據(jù)被認為是孤立點。孤立點檢測常應(yīng)用于詐騙和銀行反洗錢檢測。

(三)數(shù)據(jù)挖掘流程

前面討論了數(shù)據(jù)挖掘的概念和主要方法，下面對風險數(shù)據(jù)挖據(jù)的實現(xiàn)路徑和落地過程做初步探討。具體分為如下6個環(huán)節(jié)。

1. 數(shù)據(jù)挖掘需求分析

該階段主要通過與業(yè)務(wù)部門的溝通交流，完成數(shù)據(jù)挖掘需求的收集、整理和分析，劃定項目目標和項目邊界，確定需求相關(guān)的背景數(shù)據(jù)和業(yè)務(wù)指標，對于缺乏數(shù)據(jù)支持或者需求本身不合理的情況予以提前剔除，形成初步的建模思路。

2. 數(shù)據(jù)取樣

從數(shù)據(jù)倉庫中提取樣本數(shù)據(jù)，對數(shù)據(jù)挖據(jù)的數(shù)據(jù)源進行分析，掌握數(shù)據(jù)分布、數(shù)據(jù)內(nèi)容和數(shù)據(jù)關(guān)系，初步估測數(shù)據(jù)質(zhì)量;將樣本數(shù)據(jù)抽取、清洗、加工后加載至數(shù)據(jù)挖掘集市，作為模型的測試集。

3. 建立模型

在測試集上，通過嘗試不同的數(shù)據(jù)挖據(jù)算法和分析方法，并比較其效果、效率和穩(wěn)定性，從而選擇合適的分析方法，初步建立模型;通過技術(shù)調(diào)整和業(yè)務(wù)溝通，優(yōu)化挖掘模型;通過ETL更新測試集，并基于新測試集重新學(xué)習和訓(xùn)練挖掘模型;最后循環(huán)第二和第三步直至模型在測試集上具有良好的預(yù)測效果和效率。

4. 模型部署

完成數(shù)據(jù)挖掘集市的生產(chǎn)部署，并加載全量生產(chǎn)數(shù)據(jù)，將數(shù)據(jù)挖掘模型部署到生產(chǎn)環(huán)境。

5. 模型評估

監(jiān)控模型預(yù)測結(jié)果的準確性、效率以及穩(wěn)定性，評價模型在業(yè)務(wù)應(yīng)用中是否達到預(yù)期目的，根據(jù)實際應(yīng)用情況，對模型進行完善。

6. 知識同化

將分析所得到的知識采用圖形化工具進行分析展現(xiàn)，或采取一定方式集成到核心業(yè)務(wù)或管理信息系統(tǒng)中，從不同的流程或維度為業(yè)務(wù)經(jīng)營決策提供支撐。

三、大數(shù)據(jù)在銀行領(lǐng)域中的主要應(yīng)用

在建立數(shù)據(jù)分析挖掘模型的基礎(chǔ)上，同時結(jié)合各類金融產(chǎn)品的特點，開展全行融資、貸款、授信等方面的數(shù)據(jù)分析和利用，從大數(shù)據(jù)中挖掘經(jīng)營管理規(guī)律，從而為銀行管理分析、決策支持和業(yè)務(wù)拓展提供服務(wù)，對于銀行加強精細化管理、業(yè)務(wù)創(chuàng)新和風險管控等業(yè)務(wù)轉(zhuǎn)型將起到重要作用。

(一)提升銀行客戶的精準營銷水平

隨著數(shù)據(jù)的不斷積累，關(guān)于客戶的數(shù)據(jù)日趨豐富，基于大數(shù)據(jù)開展客戶關(guān)系管理的基礎(chǔ)已經(jīng)形成。銀行業(yè)發(fā)展戰(zhàn)略也逐步從“以產(chǎn)品為中心”轉(zhuǎn)向“以客戶為中心”，客戶成為銀行發(fā)展的重要驅(qū)動力。在大數(shù)據(jù)平臺的基礎(chǔ)上，通過對消費數(shù)據(jù)、瀏覽記錄、購買路徑等用戶數(shù)據(jù)進行分析和挖掘，將不同客戶群體進行聚類，歸納客戶特征信息，對客戶重新進行精細化標識和分類。深入分析用戶消費習慣、風險收益偏好等特征信息，結(jié)合各類金融產(chǎn)品的特點，洞察客戶資金動向，挖掘客戶活動規(guī)律，提升銀行客戶的精準營銷水平和客戶經(jīng)理在營銷過程中的專業(yè)程度。

(二)拓展和優(yōu)化金融服務(wù)渠道

大數(shù)據(jù)時代，銀行更加重視虛擬化渠道的營銷和推廣。網(wǎng)絡(luò)銀行和移動金融作為銀行的重要渠道，近幾年受到越來越多的關(guān)注和重視，其高效率、低成本和良好的客戶體驗，是銀行面對互聯(lián)網(wǎng)金融企業(yè)競爭的有力反擊。長期以來，銀行只是將電子銀行作為交易渠道對待，對其營銷功能、整合業(yè)務(wù)的創(chuàng)新空間和附加價值認識不足，隨著社交網(wǎng)絡(luò)、微信平臺的興起，銀行應(yīng)以電子銀行為依托，充分發(fā)展手機銀行、微信銀行等移動金融服務(wù)方式，拓展和完善金融服務(wù)渠道。同時借力微信、微博等社交網(wǎng)絡(luò)，將金融服務(wù)渠道虛擬化內(nèi)嵌至社交網(wǎng)絡(luò)中，實現(xiàn)隨時隨地無縫地提供金融服務(wù)。

(三)發(fā)展個性化、定制化的金融產(chǎn)品

在大數(shù)據(jù)時代，標準化金融產(chǎn)品只是基礎(chǔ)，按不同客戶需求定制的金融產(chǎn)品才是銀行和互聯(lián)網(wǎng)金融企業(yè)攻城略地、打造核心競爭力的聚焦點。面對互聯(lián)網(wǎng)金融企業(yè)的挑戰(zhàn)，銀行需要打造個性化、特色化的金融產(chǎn)品，提供量身定制的的金融產(chǎn)品，使服務(wù)不受時空限制，能夠隨時按需獲取，讓客戶能感受到貼心的服務(wù)。同時，銀行要加強與互聯(lián)網(wǎng)金融企業(yè)的合作，獲取互聯(lián)網(wǎng)金融企業(yè)所掌握的客戶行為大數(shù)據(jù)，以此分析和洞察客戶的興趣愛好及行為特征，并配合多種客戶渠道，開發(fā)出多樣化的金融產(chǎn)品以滿足不同客戶的市場需求，從而做到有的放矢，實現(xiàn)差異化競爭。

(四)開展小額貸款業(yè)務(wù)

電子商務(wù)快速發(fā)展，并逐漸融入到日常生活之中，使第三方支付企業(yè)敏銳地洞察到其中的商機，通過支付方式的創(chuàng)新，打造貼身、快捷的支付服務(wù)，其代替了大量原來由銀行承擔的支付功能，使銀行在電子商務(wù)支付領(lǐng)域逐漸被邊緣化和后臺化。同時，電子商務(wù)和第三方支付企業(yè)，掌握了大量來自電子商務(wù)的用戶交易數(shù)據(jù)，對此，銀行應(yīng)該積極與電子商務(wù)和第三方支付企業(yè)開展深度合作，主動掌握商戶的銷售行為、用戶的消費行為及其相關(guān)的信用數(shù)據(jù)，全面利用這些大數(shù)據(jù)，切入小額貸款業(yè)務(wù)。同時基于大數(shù)據(jù)技術(shù)建立信用分析平臺，對申請貸款業(yè)務(wù)的客戶進行信用評價和風險評估，在銀行可接受風險的風險敞口范圍內(nèi)，在線完成小額貸款相關(guān)流程，使小額信貸不受時間和空間的限制，提高信貸工作效率，節(jié)省銀行各類資源。

(五)完善風險管理體系

隨著銀行業(yè)務(wù)的快速發(fā)展，銀行經(jīng)營者必須有效地甄別風險、防范風險和控制風險。風險管理成為銀行穩(wěn)健發(fā)展至關(guān)重要的一環(huán)，僅僅借助傳統(tǒng)的解決方案，無法進行全面的風險管理。社會化媒體的互動、電子商務(wù)和其他新的數(shù)據(jù)源，給銀行風險管理帶來了新的機遇。隨著銀行歷史經(jīng)營管理數(shù)據(jù)不斷積累，風險管理信息化的程度不斷加深，結(jié)合行內(nèi)、同業(yè)及第三方的大量數(shù)據(jù)，使得精確的風險計量成為可能。銀行在大數(shù)據(jù)的基礎(chǔ)上，構(gòu)建風險管理評級模型，建立和完善信用風險、市場風險、操作風險等方面的計量體系，實現(xiàn)對客戶信用、利率、操作等各方面的風險進行量化評價，并可開展風險趨勢分析，實現(xiàn)風險的精細化管理，從而不斷提高風險管理的科學(xué)性和可預(yù)見性，降低銀行的不良率，提高銀行的資產(chǎn)質(zhì)量。