
大數(shù)據(jù)的最終指向是數(shù)據(jù)指引生活_數(shù)據(jù)分析師
隨著互聯(lián)網、社交網絡以及各行各業(yè)在信息化兩化融合過程當中等不斷產生新的數(shù)據(jù),人類社會產生的數(shù)據(jù)量已經達到了ZB級,特別是這兩年隨著移動互聯(lián)網的發(fā)展,現(xiàn)在兩年的數(shù)據(jù)是人類社會產生數(shù)據(jù)量的90%。再往下發(fā)展的速度可能更快,到2020年達到了40ZB或者35ZB。
大數(shù)據(jù)的最終指向是數(shù)據(jù)指引生活
作為大數(shù)據(jù)的研究來講,雖然都在推出很多不同的大數(shù)據(jù)產品,形成了百花齊放的態(tài)勢。但另一方面大數(shù)據(jù)的相關技術還沒有完全定型,還有很大的發(fā)展空間。
這個發(fā)展空間,大數(shù)據(jù)在國家戰(zhàn)略層面來看,世界各國都在推出大數(shù)據(jù)的戰(zhàn)略。就大數(shù)據(jù)在商業(yè)引擎方面的發(fā)展現(xiàn)狀來說,大數(shù)據(jù)在不斷催生服務模式的創(chuàng)新。因為大數(shù)據(jù)的出現(xiàn)和發(fā)展,有很多希望創(chuàng)業(yè)者或者新型的公司也在大數(shù)據(jù)技術發(fā)展浪潮當中不斷的涌現(xiàn)。傳統(tǒng)行業(yè)也有了更合理和高效的數(shù)據(jù)收集和處理技術像制藥、汽車、金融可以更好的通過科學的數(shù)據(jù)化決策來提升企業(yè)運營效率。
數(shù)據(jù)科學家,相應的高校、研究所包括企業(yè)也都設定了研究方向,像中國銀聯(lián)設置了數(shù)據(jù)科學家的崗位來推動大數(shù)據(jù)的研究。同時技術創(chuàng)新驅動了數(shù)據(jù)處理能力的提升,數(shù)據(jù)處理的方法也有新的方法涌現(xiàn),可以通過全量的數(shù)據(jù)得到更好的結果,使得商業(yè)模式創(chuàng)新得以實現(xiàn)。大數(shù)據(jù)是可以幫助提升各方面的工作效率。首先是公共管理方面,大數(shù)據(jù)使得傳統(tǒng)方式的公共管理轉變?yōu)閿?shù)據(jù)為基礎的科學化的工作管理。在工業(yè)化方面也可以看到大數(shù)據(jù)的應用比如福特汽車公司利用汽車傳感網絡數(shù)據(jù)以及用戶社交網絡數(shù)據(jù),來分析用戶的駕駛行為。大數(shù)據(jù)在經濟金融領域也有廣泛的應用,以大數(shù)據(jù)為基礎的新經濟分析體系,可以實現(xiàn)對未來的預測。以銀聯(lián)為例,可以有效預測出來未來幾天大概銀行卡的情況,也可以通過天氣的關聯(lián)性,可以分析今天交易量的多少。
中國銀聯(lián)執(zhí)行副總裁柴洪峰
大數(shù)據(jù)的作用還體現(xiàn)在生活服務方面,在大數(shù)據(jù)出現(xiàn)之前,生活服務都是以產品為中心,為客戶提供的服務。而由大數(shù)據(jù)技術帶來的精準營銷,推薦系統(tǒng)等方法,使得今天的生活服務是以人為中心,可以為每個人提供個性化的服務。著名的互聯(lián)網思維就是用戶為中心,用戶至上,體驗為王??蛻艉陀脩艉唵蔚囊粋€字之差,發(fā)生了很大的變化。因為客戶是買賣關系產生的,而用戶是你享受的服務來產生的。
大數(shù)據(jù)的最終指向是數(shù)據(jù)指引生活。通過大數(shù)據(jù)技術量化生活,記錄一切,量化一切,通過數(shù)據(jù)改善,為人服務為核心,通過大數(shù)據(jù)技術形成大數(shù)據(jù)思維,一切都以數(shù)據(jù)為依據(jù),在數(shù)據(jù)中不斷探索和學習,最終帶來科學化的決策,精細化的生產,可預測的經營以及個性化的服務。
中國銀聯(lián)的大數(shù)據(jù)實踐
中國銀聯(lián)是2002年成立的銀行卡的組織,現(xiàn)在中國銀聯(lián)是400家的成員機構,有400家銀行合作伙伴。銀聯(lián)成立12年來,已經成為發(fā)卡量全球第一的銀行卡組織,網絡規(guī)模已經遍及全球142個國家,交易規(guī)模全球第二。中國銀聯(lián)有豐富的大數(shù)據(jù)資源涉及43億張銀行卡,超過9億的持卡人,超過一千萬戶的商戶,每天有七千萬筆的交易數(shù)據(jù),每天核心交易數(shù)據(jù)都要超過TB級,銀聯(lián)的數(shù)據(jù)資源無論宏觀層面還是微觀層面都有很高的價值。這個價值體體現(xiàn)在:
銀聯(lián)的數(shù)據(jù)價值、支付數(shù)據(jù)的特點是更具參考性,他們可以衡量真實的購買行為,從而促進用戶定向,個性定價,產品推薦,用戶忠誠度和流失建模等策略,這是支付數(shù)據(jù)它的價值。
銀聯(lián)開展大數(shù)據(jù)工作有很多背景要素,從銀聯(lián)支付數(shù)據(jù)看,銀聯(lián)數(shù)據(jù)處理過程中也遇到了挑戰(zhàn)。銀聯(lián)過去的處理方法已經滿足大數(shù)據(jù)的需求,從銀聯(lián)自身業(yè)務看,很多精細化的業(yè)務也需要大數(shù)據(jù)的強力支撐。從合作伙伴角度來看,合作伙伴對多樣性的數(shù)據(jù)服務有需求,從電子商務這個行業(yè)來看,通過大數(shù)據(jù)的挖掘來提升行業(yè)發(fā)展水平。從國家示范項目建設來看,大數(shù)據(jù)相關工作也是銀聯(lián)承接國家項目的工作重點,銀聯(lián)也在這方面加大了力度。
銀聯(lián)對大數(shù)據(jù)有一個“指導思想”:首先希望整合各類內外部的數(shù)據(jù),通過合作,基于這些數(shù)據(jù)建立相應大數(shù)據(jù)基礎設施,可以使這些數(shù)據(jù)可以安全方便獲取?;诖髷?shù)據(jù)的平臺,銀聯(lián)會開展大跨度的數(shù)據(jù)統(tǒng)計分析以及深度化的數(shù)據(jù)挖掘工作,這些分析和挖掘工作對外對內合作伙伴都進行服務。
銀聯(lián)大數(shù)據(jù)主要分為基礎平臺,基礎數(shù)據(jù),模型研究和應用服務等分四個層次。而建設大數(shù)據(jù)平臺是銀聯(lián)開展大數(shù)據(jù)工作的第一步,有一個云平臺,充分匯集各方面的數(shù)據(jù),集成常見的分布式機器學習算法,已經支撐了十幾個業(yè)務應用系統(tǒng)在實際生產。利用大數(shù)據(jù)為持卡人提供數(shù)據(jù)服務,首先持卡人可以通過銀聯(lián)錢包手機APP平臺,查詢到自己銀行卡的歷史交易。同時可以向持卡人提供更為豐富的持卡人帳單服務。
銀聯(lián)大數(shù)據(jù)實踐,基于外部數(shù)據(jù)和數(shù)據(jù)量化的指標以及數(shù)據(jù)總體特征,基于數(shù)據(jù)量化指標,可以分析出每個持卡人的個體特征,基于持卡人個體特征和總體特征,可以為持卡人打上各種類型的標簽。除了持卡人維度,在商戶維度上做了相應的工作,為商戶提供相應的商業(yè)智能分析,可以使商戶認識到自身的經營情況,也為商戶提供了客戶忠誠度、流失商戶的分析、回頭客的分析等。
同時,銀聯(lián)大數(shù)據(jù)還應用到了風險控制領域,利用機器學習的方法,對銀聯(lián)歷史數(shù)據(jù)進行挖掘,得到了七大交易的判斷模型,可以對銀聯(lián)轉接交易系統(tǒng)進行實時的判斷。
大數(shù)據(jù)從1.0,發(fā)展到2.0,3.0不同發(fā)展階段,各階段的成熟度逐步提升,銀聯(lián)很清楚大數(shù)據(jù)資源的質量和價值,但有些不足,使得對終端客戶的到達能力還是有限的,因此希望通過數(shù)據(jù)的集合工作、融合內外部的數(shù)據(jù),從而使銀聯(lián)的數(shù)據(jù)得到價值的提升。在數(shù)據(jù)集合方面嘗試從兩個角度:
第一,利用公開的外部技術進行集合。利用爬蟲技術在互聯(lián)網上找持卡人、商戶的信息。
第二,通過合作伙伴的數(shù)據(jù)進行集合如通信運營商的相關數(shù)據(jù)結合。
金融業(yè)大數(shù)據(jù)未來展望
首先大數(shù)據(jù)是在發(fā)展中完善的。大數(shù)據(jù)一方面在很多行業(yè)被廣泛應用,一方面又不夠成熟。大數(shù)據(jù)使用了全新的技術框架,但有時又不適宜傳統(tǒng)的應用場景,大數(shù)據(jù)概念已經充分被解讀,但高價值的應用卻不豐富。大數(shù)據(jù)一方面百花齊放,一方面存在應用對接不平滑的現(xiàn)象。我們認為,再經過努力,大數(shù)據(jù)的價值可以得到進一步的凸顯,但是是不是一個通用性的技術,有待拷量。
數(shù)據(jù)開放帶來數(shù)據(jù)價值的提升,帶來1+1>2的效果,但是也會帶來信息安全的問題如個人隱私泄露的問題,更好的提升大數(shù)據(jù)的價值,需要法律政策層面的指導,更需要政府和企業(yè)的眾多嘗試及互相支持,能夠產生合作。
對于金融大數(shù)據(jù),這將是大數(shù)據(jù)最有可為的領域之一。金融機構可以說是大數(shù)據(jù)天生的合作者,一方面自身有著強烈的利用技術紅利帶來收益沖動,另一方面又有國內較好良好的信息化基礎,從數(shù)據(jù)層面,金融領域有著優(yōu)質的數(shù)據(jù)資源,從技術層面看,金融企業(yè)的技術團隊也有強大的實力,從思維層面看,金融行業(yè)擁有最專業(yè)的金融能力,可以研究和開發(fā)最專業(yè)的金融大數(shù)據(jù)的產品和服務。
面向金融大數(shù)據(jù)帶給行業(yè)的變革將是全方位的例如在信用風險評估方面。同時也可以在客戶服務方面基于大數(shù)據(jù)的技術,也可以實現(xiàn)對客戶智能化的服務。在智能運營方面,大數(shù)據(jù)技術也可以對金融企業(yè)的數(shù)據(jù)進行分析,從而幫助金融機構進行運營決策,降低成本,在產品創(chuàng)新方面,大數(shù)據(jù)參與新產品的設計,結合各方的數(shù)據(jù),使企業(yè)產品推陳出新??傊?,金融服務將從粗放式管理轉向科學化的管理,從以利潤為中心轉向以客戶為中心。未來,銀聯(lián)大數(shù)據(jù)將圍繞客戶服務展開,結合內外部的資源,形成對持卡人的各方面認知如消費習慣、生活習慣,基于持卡人的認知,我們可以形成持卡人的響應預測。
銀聯(lián)大數(shù)據(jù)工作將圍繞提供穩(wěn)定、高效、豐富的數(shù)據(jù)服務開展工作,還將提升大數(shù)據(jù)系統(tǒng)的穩(wěn)定性和效率。在大數(shù)據(jù)快速發(fā)展的背景下,合作共贏是大勢所趨,合作共贏一方面是數(shù)據(jù)的互補,數(shù)據(jù)的共享、融合,創(chuàng)造新的價值。另一方面是資源的互補,資源的協(xié)同合作將帶來挖掘能力的提升。第三方面是業(yè)務互補。業(yè)務的互補與互用將發(fā)揮出大數(shù)據(jù)的最大效用,通過數(shù)據(jù)、資源等多方面的合作,必然可以產生眾多聯(lián)合跨界的創(chuàng)新成果。合作共贏是銀聯(lián)的一貫態(tài)度,銀聯(lián)愿攜手各方合作伙伴,共建銀行卡產業(yè)的大數(shù)據(jù)生態(tài)系統(tǒng)。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關鍵? 在循環(huán)神經網絡(RNN)家族中,長短期記憶網絡(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報考條件詳解與準備指南? ? 在數(shù)據(jù)驅動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計的實用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實施重大更新。 此次更新旨在確保認 ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務的價值轉化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預測分析中的應用:從數(shù)據(jù)查詢到趨勢預判? ? 在數(shù)據(jù)驅動決策的時代,預測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結束)并非工作的終點,而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報考到取證的全攻略? 在數(shù)字經濟蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗:捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準 ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應用與實戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗:數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領域中,準確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認證作為國內權威的數(shù)據(jù)分析能力認證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應對策略? 長短期記憶網絡(LSTM)作為循環(huán)神經網絡(RNN)的一種變體,憑借獨特的門控機制,在 ...
2025-07-07統(tǒng)計學方法在市場調研數(shù)據(jù)中的深度應用? 市場調研是企業(yè)洞察市場動態(tài)、了解消費者需求的重要途徑,而統(tǒng)計學方法則是市場調研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉日期:解鎖數(shù)據(jù)處理的關鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準確性的基礎 ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產要素的今天,數(shù)據(jù)分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03