淺談電信運營商大數(shù)據(jù)

一、電信運營商的大數(shù)據(jù)及其特點

大數(shù)據(jù)是一種新的方式或能力，這種方式或能力來源于對海量數(shù)據(jù)的收集分析并從數(shù)據(jù)分析中獲得巨大價值，它將極大的改變商家經(jīng)營模式、人們社會生活和思維模式。

電信運營商的大數(shù)據(jù)主要包括以下幾類：客戶信息數(shù)據(jù)（如客戶入網(wǎng)資料、套餐情況）、業(yè)務(wù)過程數(shù)據(jù)（如通話記錄、客戶服務(wù)記錄等）和網(wǎng)絡(luò)運行數(shù)據(jù)（網(wǎng)絡(luò)性能、客戶終端使用情況等）

對于大數(shù)據(jù)IT界歸納了4個V（Volume，Variety，Velocity和Value）的特征，已經(jīng)基本得到大家的一致認同。具體到電信行業(yè)大數(shù)據(jù)的四個V表現(xiàn)如下。

Volume數(shù)據(jù)規(guī)模巨大：電信運營商僅日常運營產(chǎn)生的各類話單數(shù)據(jù)（xDR）和信令數(shù)據(jù)規(guī)模已相當(dāng)可觀，再加入網(wǎng)絡(luò)流量的數(shù)據(jù)采集，數(shù)據(jù)規(guī)模將呈爆炸式增長。一個省一天的數(shù)據(jù)流量可高達PB級。

Variety數(shù)據(jù)類型豐富：除了傳統(tǒng)的來自BOSS、BASS、CRM的結(jié)構(gòu)化數(shù)據(jù)外，移動互聯(lián)網(wǎng)業(yè)務(wù)的發(fā)展帶來了諸如文本、圖片、視頻、位置信息等大量非結(jié)構(gòu)化的數(shù)據(jù)。

Velocity高速實時的數(shù)據(jù)：即時話費查詢、流量監(jiān)管等新功能的應(yīng)用隨之產(chǎn)生了大量的高速動態(tài)數(shù)據(jù)流，對數(shù)據(jù)流的實時分析與處理要求不斷增加，數(shù)據(jù)處理的越及時，產(chǎn)生的價值越大。

Value數(shù)據(jù)價值大密度低：從海量數(shù)據(jù)信息中能挖掘出的有限的知識量，數(shù)據(jù)的價值利用密度低，需要創(chuàng)新的技術(shù)和思維來提升從數(shù)據(jù)中挖掘知識的效率。

二、大數(shù)據(jù)為電信運營商帶來新的機會

1、大數(shù)據(jù)是電信運營商的巨型金礦

運營商掌握用戶的年齡、性別、愛好、消費習(xí)慣、行為特征、終端屬性等信息，可以系統(tǒng)地給用戶做深度、全面、360度全景‘畫像’。這些數(shù)據(jù)與廣告業(yè)、出 版業(yè)、傳媒業(yè)結(jié)合起來，就可以做更加精準的內(nèi)容定制與推薦，做更有效的產(chǎn)品推送，更精準地去營銷產(chǎn)品?？梢詷?gòu)建大數(shù)據(jù)平臺，收集用戶數(shù)據(jù)，通過數(shù)據(jù)挖掘算 法等各種技術(shù)來分析用戶、了解用戶，進行市場定位和精準營銷，優(yōu)化定價策略、提高廣告效果、營銷效率。將大數(shù)據(jù)分析融入其日常經(jīng)營決策中，未來大數(shù)據(jù)分析 將成為運營商經(jīng)營的一項基本能力。

電信運營商通過在應(yīng)用大數(shù)據(jù)，人均產(chǎn)值提升了，而在數(shù)據(jù)價值貢獻方面更是排在了所有行業(yè)的前列。在電信運營商收入增幅日趨放緩的今天，這樣的產(chǎn)值增幅無疑是鼓舞人心的。

2、大數(shù)據(jù)為電信運營商改變經(jīng)營思維

過去，運營商的數(shù)據(jù)分布在不同數(shù)據(jù)庫中并且較獨立的進行統(tǒng)計分析以服務(wù)于不同的運營部門，數(shù)據(jù)分析在 很大程度上僅僅作為部門運營報表輸出和績效考核功能應(yīng)用而存在，這顯然低估了數(shù)據(jù)的價值。在大數(shù)據(jù)時代數(shù)據(jù)的價值來源于數(shù)據(jù)的全面性、數(shù)據(jù)的共享和數(shù)據(jù)的 二次利用。電信運營商應(yīng)該將不同部門、不同數(shù)據(jù)庫收集存儲的數(shù)據(jù)進行共享，重新挖掘歷史數(shù)據(jù)而不是輕易刪除，圍繞客戶進行整合分析，這才是大數(shù)據(jù)下的思維 方式。當(dāng)電信運營商將數(shù)據(jù)進行組合、再利用，形成新的大數(shù)據(jù)集，大數(shù)據(jù)的真正價值才能顯現(xiàn)。

電信運營商擅于利用數(shù)據(jù)分析推動業(yè)務(wù)發(fā)展。經(jīng)營分析決策系統(tǒng)能充分發(fā)揮作用。電信運營商研究過用戶終端換機周期及品牌忠誠度，分析這些用戶將在近幾個月 內(nèi)陸續(xù)換機，電信運營商可以通過向用戶針對性營銷喜愛的終端。通過數(shù)據(jù)分析可以提高營銷的精準性，提高營銷效率并降低營銷成本。

上述舉例僅僅是電信運營商基于大數(shù)據(jù)思維創(chuàng)造新價值、提升運營效率的小應(yīng)用。

3、大數(shù)據(jù)引領(lǐng)電信運營商轉(zhuǎn)型

作為信息管道的經(jīng)營者，電信運營商天然具備數(shù)據(jù)的收集能力。相比互聯(lián)網(wǎng)公司獲取的是用戶在虛擬網(wǎng)絡(luò)中的數(shù)據(jù)，提供用戶入網(wǎng)接入服務(wù)的電信運營商擁有用戶 的真實社會型數(shù)據(jù)信息，而管道的智能化又讓電信運營商擁有獲取用戶在互聯(lián)網(wǎng)虛擬社會數(shù)據(jù)的能力，電信運營商基于管道平臺同時擁有了現(xiàn)實社會和虛擬社會兩套 數(shù)據(jù)，通過用戶屬性的關(guān)聯(lián)實現(xiàn)數(shù)據(jù)的無縫銜接，這是電信運營商特有的數(shù)據(jù)優(yōu)勢，在大數(shù)據(jù)時代這是一個重要的核心資產(chǎn)。

但是擁有大數(shù)據(jù)資產(chǎn)并不一定給電信運營商帶來直接的收入和利潤，還必須具備從數(shù)據(jù)中挖掘價值的技術(shù)和發(fā)現(xiàn)新價值的智慧理念，而大量的互聯(lián)網(wǎng)公司和中小科 技公司卻已經(jīng)行動起來，利用開放的數(shù)據(jù)資源獲得收益。國內(nèi)領(lǐng)先的互聯(lián)網(wǎng)公司如BAT（百度、阿里、騰訊）等都已經(jīng)利用大數(shù)據(jù)來提升自身的產(chǎn)品和服務(wù)，并且 不斷向傳統(tǒng)的通信領(lǐng)域滲透，面對競爭電信運營商必須要積極跟進，利用大數(shù)據(jù)的資產(chǎn)優(yōu)勢，發(fā)展大數(shù)據(jù)技能，開拓大數(shù)據(jù)思維，實現(xiàn)客戶的深入洞察和業(yè)務(wù)決策的 創(chuàng)新，驅(qū)動企業(yè)向圍繞客戶信息服務(wù)為中心的戰(zhàn)略轉(zhuǎn)型。

三、怎樣構(gòu)建電信行業(yè)大數(shù)據(jù)平臺

電信運營商需要從企業(yè)戰(zhàn)略和經(jīng)營思維層面改變，發(fā)現(xiàn)新的機遇和模式并付諸實施，真正將自己所掌握的大數(shù)據(jù)資產(chǎn)和大數(shù)據(jù)技能轉(zhuǎn)變?yōu)槠髽I(yè)價值。電信運營商只有通過改變傳統(tǒng)數(shù)據(jù)處理技術(shù)，構(gòu)建新型大數(shù)據(jù)分析系統(tǒng)才能讓其具備大數(shù)據(jù)分析處理的技能，才能在大數(shù)據(jù)時代獲得成功。

電信運營商一直以來都是非常關(guān)注數(shù)據(jù)的收集和統(tǒng)計分析，BOSS、BASS、CRM等系統(tǒng)都大量部署應(yīng)用了關(guān)系數(shù)據(jù)庫（RDB）或數(shù)據(jù)倉庫（DW），多 采用Oracle、DB2和MySQL等數(shù)據(jù)庫管理系統(tǒng)。這類數(shù)據(jù)庫處理的多是業(yè)務(wù)運營過程數(shù)據(jù)、資源信息、話單記錄等結(jié)構(gòu)化的數(shù)據(jù)類型，隨著互聯(lián)網(wǎng)數(shù)據(jù) 業(yè)務(wù)的發(fā)展，電信運營商需要收集處理更多的業(yè)務(wù)應(yīng)用類數(shù)據(jù)，由此帶來了數(shù)據(jù)量、數(shù)據(jù)類型和分析能力的巨大變化。原有的業(yè)務(wù)運營系統(tǒng)所產(chǎn)生的結(jié)構(gòu)化數(shù)據(jù)量大 約只占所擁有數(shù)據(jù)量的一小半，大部分的新數(shù)據(jù)來自互聯(lián)網(wǎng)、物聯(lián)網(wǎng)等新業(yè)務(wù)應(yīng)用，并且以視頻流量、文本、網(wǎng)絡(luò)點擊行為等各類非結(jié)構(gòu)化的形式存在。面對數(shù)據(jù)對 象的新變化，傳統(tǒng)的數(shù)據(jù)庫系統(tǒng)在處理能力和處理效率上都無法滿足要求，轉(zhuǎn)變勢在必行。

從DB（Database）轉(zhuǎn)向BD（Big Data）是一個大的技術(shù)演進，而不僅僅是需要處理的數(shù)據(jù)規(guī)模的擴大。電信運營商因為互聯(lián)網(wǎng)應(yīng)用的普及和管道智能化演進帶來了大量非結(jié)構(gòu)化數(shù)據(jù)的分析處理 以及高速流量數(shù)據(jù)的實時處理問題，對于這些數(shù)據(jù)處理的效率又不能滿足要求。因此對電信運營商而言一個合適的大數(shù)據(jù)系統(tǒng)至少應(yīng)該具備以下三種能力：分布式處 理能力，非結(jié)構(gòu)化數(shù)據(jù)分析能力和流式數(shù)據(jù)實時處理能力。

大數(shù)據(jù)平臺解決方案充分利用主流的大數(shù)據(jù)處理技術(shù)，并結(jié)合電信運營商數(shù)據(jù)處理的特點，提供融合傳統(tǒng)數(shù)據(jù)倉庫和大數(shù)據(jù)的 專用平臺，可靈活適配各種數(shù)據(jù)規(guī)模、多種業(yè)務(wù)應(yīng)用的場景。以MapReduce技術(shù)為核心的Hadoop開源平臺已成為非結(jié)構(gòu)化大數(shù)據(jù)處理的事實標準，其 適合非結(jié)構(gòu)化數(shù)據(jù)，采用Hadoop開源技術(shù)滿足對業(yè)務(wù)平臺上非結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù)的批量處理需要，大規(guī)模并行處理的特點可以滿足電信運營商的需要。而 在流式大數(shù)據(jù)實時處理方面則可以考慮應(yīng)用CEP（Complex Event Processing）技術(shù)，對網(wǎng)絡(luò)大量的信令、消息、特征媒體流等流數(shù)據(jù)具備良好的實時分析處理能力。CEP技術(shù)可滿足大流量數(shù)據(jù)的實時處理需要，基于 NoSQL的HBase大數(shù)據(jù)存儲架構(gòu)可滿足從GB到TB各種級別的數(shù)據(jù)存儲和快速I/O需要。

從電信運營商目前的情況看，構(gòu)建大數(shù)據(jù)平臺主要考慮數(shù)據(jù)集中化、專業(yè)化、低成本高性能三點。

集中化：使得公司業(yè)務(wù)數(shù)據(jù)集中形成數(shù)據(jù)開放，在保障數(shù)據(jù)安全性的前提下，提供自助化服務(wù)平臺，自動化服務(wù)方式，幫助數(shù)據(jù)分析人員通過自助服務(wù)的方式，降低人工成本，滿足快速增長的需求。

專業(yè)化：從提供大量獨立的系統(tǒng)/工具轉(zhuǎn)變向提供集成、一體化、自動化數(shù)據(jù)開發(fā)平臺服務(wù)。來源各個業(yè)務(wù)塊數(shù)據(jù)進行整合和深入挖掘產(chǎn)生用戶畫像，為業(yè)務(wù)提供有價值的服務(wù)，并且快速孵化更多的數(shù)據(jù)應(yīng)用。

成本與性能：優(yōu)化平臺存儲和計算方案、優(yōu)化的數(shù)據(jù)模型和算法、去除重復(fù)計算和存儲；通過建設(shè)大規(guī)模集群，形成規(guī)模效應(yīng)，提升平臺能力并降低成本；隨著平臺上的數(shù)據(jù)量、用戶數(shù)、任務(wù)數(shù)不斷增長，每個新用戶/新任務(wù)帶來的新增成本不斷降低，成本優(yōu)勢可以不斷放大。