淺談電信運(yùn)營(yíng)商大數(shù)據(jù)

一、電信運(yùn)營(yíng)商的大數(shù)據(jù)及其特點(diǎn)

大數(shù)據(jù)是一種新的方式或能力，這種方式或能力來(lái)源于對(duì)海量數(shù)據(jù)的收集分析并從數(shù)據(jù)分析中獲得巨大價(jià)值，它將極大的改變商家經(jīng)營(yíng)模式、人們社會(huì)生活和思維模式。

電信運(yùn)營(yíng)商的大數(shù)據(jù)主要包括以下幾類：客戶信息數(shù)據(jù)（如客戶入網(wǎng)資料、套餐情況）、業(yè)務(wù)過(guò)程數(shù)據(jù)（如通話記錄、客戶服務(wù)記錄等）和網(wǎng)絡(luò)運(yùn)行數(shù)據(jù)（網(wǎng)絡(luò)性能、客戶終端使用情況等）

對(duì)于大數(shù)據(jù)IT界歸納了4個(gè)V（Volume，Variety，Velocity和Value）的特征，已經(jīng)基本得到大家的一致認(rèn)同。具體到電信行業(yè)大數(shù)據(jù)的四個(gè)V表現(xiàn)如下。

Volume數(shù)據(jù)規(guī)模巨大：電信運(yùn)營(yíng)商僅日常運(yùn)營(yíng)產(chǎn)生的各類話單數(shù)據(jù)（xDR）和信令數(shù)據(jù)規(guī)模已相當(dāng)可觀，再加入網(wǎng)絡(luò)流量的數(shù)據(jù)采集，數(shù)據(jù)規(guī)模將呈爆炸式增長(zhǎng)。一個(gè)省一天的數(shù)據(jù)流量可高達(dá)PB級(jí)。

Variety數(shù)據(jù)類型豐富：除了傳統(tǒng)的來(lái)自BOSS、BASS、CRM的結(jié)構(gòu)化數(shù)據(jù)外，移動(dòng)互聯(lián)網(wǎng)業(yè)務(wù)的發(fā)展帶來(lái)了諸如文本、圖片、視頻、位置信息等大量非結(jié)構(gòu)化的數(shù)據(jù)。

Velocity高速實(shí)時(shí)的數(shù)據(jù)：即時(shí)話費(fèi)查詢、流量監(jiān)管等新功能的應(yīng)用隨之產(chǎn)生了大量的高速動(dòng)態(tài)數(shù)據(jù)流，對(duì)數(shù)據(jù)流的實(shí)時(shí)分析與處理要求不斷增加，數(shù)據(jù)處理的越及時(shí)，產(chǎn)生的價(jià)值越大。

Value數(shù)據(jù)價(jià)值大密度低：從海量數(shù)據(jù)信息中能挖掘出的有限的知識(shí)量，數(shù)據(jù)的價(jià)值利用密度低，需要?jiǎng)?chuàng)新的技術(shù)和思維來(lái)提升從數(shù)據(jù)中挖掘知識(shí)的效率。

二、大數(shù)據(jù)為電信運(yùn)營(yíng)商帶來(lái)新的機(jī)會(huì)

1、大數(shù)據(jù)是電信運(yùn)營(yíng)商的巨型金礦

運(yùn)營(yíng)商掌握用戶的年齡、性別、愛好、消費(fèi)習(xí)慣、行為特征、終端屬性等信息，可以系統(tǒng)地給用戶做深度、全面、360度全景‘畫像’。這些數(shù)據(jù)與廣告業(yè)、出 版業(yè)、傳媒業(yè)結(jié)合起來(lái)，就可以做更加精準(zhǔn)的內(nèi)容定制與推薦，做更有效的產(chǎn)品推送，更精準(zhǔn)地去營(yíng)銷產(chǎn)品?？梢詷?gòu)建大數(shù)據(jù)平臺(tái)，收集用戶數(shù)據(jù)，通過(guò)數(shù)據(jù)挖掘算 法等各種技術(shù)來(lái)分析用戶、了解用戶，進(jìn)行市場(chǎng)定位和精準(zhǔn)營(yíng)銷，優(yōu)化定價(jià)策略、提高廣告效果、營(yíng)銷效率。將大數(shù)據(jù)分析融入其日常經(jīng)營(yíng)決策中，未來(lái)大數(shù)據(jù)分析 將成為運(yùn)營(yíng)商經(jīng)營(yíng)的一項(xiàng)基本能力。

電信運(yùn)營(yíng)商通過(guò)在應(yīng)用大數(shù)據(jù)，人均產(chǎn)值提升了，而在數(shù)據(jù)價(jià)值貢獻(xiàn)方面更是排在了所有行業(yè)的前列。在電信運(yùn)營(yíng)商收入增幅日趨放緩的今天，這樣的產(chǎn)值增幅無(wú)疑是鼓舞人心的。

2、大數(shù)據(jù)為電信運(yùn)營(yíng)商改變經(jīng)營(yíng)思維

過(guò)去，運(yùn)營(yíng)商的數(shù)據(jù)分布在不同數(shù)據(jù)庫(kù)中并且較獨(dú)立的進(jìn)行統(tǒng)計(jì)分析以服務(wù)于不同的運(yùn)營(yíng)部門，數(shù)據(jù)分析在 很大程度上僅僅作為部門運(yùn)營(yíng)報(bào)表輸出和績(jī)效考核功能應(yīng)用而存在，這顯然低估了數(shù)據(jù)的價(jià)值。在大數(shù)據(jù)時(shí)代數(shù)據(jù)的價(jià)值來(lái)源于數(shù)據(jù)的全面性、數(shù)據(jù)的共享和數(shù)據(jù)的 二次利用。電信運(yùn)營(yíng)商應(yīng)該將不同部門、不同數(shù)據(jù)庫(kù)收集存儲(chǔ)的數(shù)據(jù)進(jìn)行共享，重新挖掘歷史數(shù)據(jù)而不是輕易刪除，圍繞客戶進(jìn)行整合分析，這才是大數(shù)據(jù)下的思維 方式。當(dāng)電信運(yùn)營(yíng)商將數(shù)據(jù)進(jìn)行組合、再利用，形成新的大數(shù)據(jù)集，大數(shù)據(jù)的真正價(jià)值才能顯現(xiàn)。

電信運(yùn)營(yíng)商擅于利用數(shù)據(jù)分析推動(dòng)業(yè)務(wù)發(fā)展。經(jīng)營(yíng)分析決策系統(tǒng)能充分發(fā)揮作用。電信運(yùn)營(yíng)商研究過(guò)用戶終端換機(jī)周期及品牌忠誠(chéng)度，分析這些用戶將在近幾個(gè)月 內(nèi)陸續(xù)換機(jī)，電信運(yùn)營(yíng)商可以通過(guò)向用戶針對(duì)性營(yíng)銷喜愛的終端。通過(guò)數(shù)據(jù)分析可以提高營(yíng)銷的精準(zhǔn)性，提高營(yíng)銷效率并降低營(yíng)銷成本。

上述舉例僅僅是電信運(yùn)營(yíng)商基于大數(shù)據(jù)思維創(chuàng)造新價(jià)值、提升運(yùn)營(yíng)效率的小應(yīng)用。

3、大數(shù)據(jù)引領(lǐng)電信運(yùn)營(yíng)商轉(zhuǎn)型

作為信息管道的經(jīng)營(yíng)者，電信運(yùn)營(yíng)商天然具備數(shù)據(jù)的收集能力。相比互聯(lián)網(wǎng)公司獲取的是用戶在虛擬網(wǎng)絡(luò)中的數(shù)據(jù)，提供用戶入網(wǎng)接入服務(wù)的電信運(yùn)營(yíng)商擁有用戶 的真實(shí)社會(huì)型數(shù)據(jù)信息，而管道的智能化又讓電信運(yùn)營(yíng)商擁有獲取用戶在互聯(lián)網(wǎng)虛擬社會(huì)數(shù)據(jù)的能力，電信運(yùn)營(yíng)商基于管道平臺(tái)同時(shí)擁有了現(xiàn)實(shí)社會(huì)和虛擬社會(huì)兩套 數(shù)據(jù)，通過(guò)用戶屬性的關(guān)聯(lián)實(shí)現(xiàn)數(shù)據(jù)的無(wú)縫銜接，這是電信運(yùn)營(yíng)商特有的數(shù)據(jù)優(yōu)勢(shì)，在大數(shù)據(jù)時(shí)代這是一個(gè)重要的核心資產(chǎn)。

但是擁有大數(shù)據(jù)資產(chǎn)并不一定給電信運(yùn)營(yíng)商帶來(lái)直接的收入和利潤(rùn)，還必須具備從數(shù)據(jù)中挖掘價(jià)值的技術(shù)和發(fā)現(xiàn)新價(jià)值的智慧理念，而大量的互聯(lián)網(wǎng)公司和中小科 技公司卻已經(jīng)行動(dòng)起來(lái)，利用開放的數(shù)據(jù)資源獲得收益。國(guó)內(nèi)領(lǐng)先的互聯(lián)網(wǎng)公司如BAT（百度、阿里、騰訊）等都已經(jīng)利用大數(shù)據(jù)來(lái)提升自身的產(chǎn)品和服務(wù)，并且 不斷向傳統(tǒng)的通信領(lǐng)域滲透，面對(duì)競(jìng)爭(zhēng)電信運(yùn)營(yíng)商必須要積極跟進(jìn)，利用大數(shù)據(jù)的資產(chǎn)優(yōu)勢(shì)，發(fā)展大數(shù)據(jù)技能，開拓大數(shù)據(jù)思維，實(shí)現(xiàn)客戶的深入洞察和業(yè)務(wù)決策的 創(chuàng)新，驅(qū)動(dòng)企業(yè)向圍繞客戶信息服務(wù)為中心的戰(zhàn)略轉(zhuǎn)型。

三、怎樣構(gòu)建電信行業(yè)大數(shù)據(jù)平臺(tái)

電信運(yùn)營(yíng)商需要從企業(yè)戰(zhàn)略和經(jīng)營(yíng)思維層面改變，發(fā)現(xiàn)新的機(jī)遇和模式并付諸實(shí)施，真正將自己所掌握的大數(shù)據(jù)資產(chǎn)和大數(shù)據(jù)技能轉(zhuǎn)變?yōu)槠髽I(yè)價(jià)值。電信運(yùn)營(yíng)商只有通過(guò)改變傳統(tǒng)數(shù)據(jù)處理技術(shù)，構(gòu)建新型大數(shù)據(jù)分析系統(tǒng)才能讓其具備大數(shù)據(jù)分析處理的技能，才能在大數(shù)據(jù)時(shí)代獲得成功。

電信運(yùn)營(yíng)商一直以來(lái)都是非常關(guān)注數(shù)據(jù)的收集和統(tǒng)計(jì)分析，BOSS、BASS、CRM等系統(tǒng)都大量部署應(yīng)用了關(guān)系數(shù)據(jù)庫(kù)（RDB）或數(shù)據(jù)倉(cāng)庫(kù)（DW），多 采用Oracle、DB2和MySQL等數(shù)據(jù)庫(kù)管理系統(tǒng)。這類數(shù)據(jù)庫(kù)處理的多是業(yè)務(wù)運(yùn)營(yíng)過(guò)程數(shù)據(jù)、資源信息、話單記錄等結(jié)構(gòu)化的數(shù)據(jù)類型，隨著互聯(lián)網(wǎng)數(shù)據(jù) 業(yè)務(wù)的發(fā)展，電信運(yùn)營(yíng)商需要收集處理更多的業(yè)務(wù)應(yīng)用類數(shù)據(jù)，由此帶來(lái)了數(shù)據(jù)量、數(shù)據(jù)類型和分析能力的巨大變化。原有的業(yè)務(wù)運(yùn)營(yíng)系統(tǒng)所產(chǎn)生的結(jié)構(gòu)化數(shù)據(jù)量大 約只占所擁有數(shù)據(jù)量的一小半，大部分的新數(shù)據(jù)來(lái)自互聯(lián)網(wǎng)、物聯(lián)網(wǎng)等新業(yè)務(wù)應(yīng)用，并且以視頻流量、文本、網(wǎng)絡(luò)點(diǎn)擊行為等各類非結(jié)構(gòu)化的形式存在。面對(duì)數(shù)據(jù)對(duì) 象的新變化，傳統(tǒng)的數(shù)據(jù)庫(kù)系統(tǒng)在處理能力和處理效率上都無(wú)法滿足要求，轉(zhuǎn)變勢(shì)在必行。

從DB（Database）轉(zhuǎn)向BD（Big Data）是一個(gè)大的技術(shù)演進(jìn)，而不僅僅是需要處理的數(shù)據(jù)規(guī)模的擴(kuò)大。電信運(yùn)營(yíng)商因?yàn)榛ヂ?lián)網(wǎng)應(yīng)用的普及和管道智能化演進(jìn)帶來(lái)了大量非結(jié)構(gòu)化數(shù)據(jù)的分析處理 以及高速流量數(shù)據(jù)的實(shí)時(shí)處理問(wèn)題，對(duì)于這些數(shù)據(jù)處理的效率又不能滿足要求。因此對(duì)電信運(yùn)營(yíng)商而言一個(gè)合適的大數(shù)據(jù)系統(tǒng)至少應(yīng)該具備以下三種能力：分布式處 理能力，非結(jié)構(gòu)化數(shù)據(jù)分析能力和流式數(shù)據(jù)實(shí)時(shí)處理能力。

大數(shù)據(jù)平臺(tái)解決方案充分利用主流的大數(shù)據(jù)處理技術(shù)，并結(jié)合電信運(yùn)營(yíng)商數(shù)據(jù)處理的特點(diǎn)，提供融合傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)和大數(shù)據(jù)的 專用平臺(tái)，可靈活適配各種數(shù)據(jù)規(guī)模、多種業(yè)務(wù)應(yīng)用的場(chǎng)景。以MapReduce技術(shù)為核心的Hadoop開源平臺(tái)已成為非結(jié)構(gòu)化大數(shù)據(jù)處理的事實(shí)標(biāo)準(zhǔn)，其 適合非結(jié)構(gòu)化數(shù)據(jù)，采用Hadoop開源技術(shù)滿足對(duì)業(yè)務(wù)平臺(tái)上非結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù)的批量處理需要，大規(guī)模并行處理的特點(diǎn)可以滿足電信運(yùn)營(yíng)商的需要。而 在流式大數(shù)據(jù)實(shí)時(shí)處理方面則可以考慮應(yīng)用CEP（Complex Event Processing）技術(shù)，對(duì)網(wǎng)絡(luò)大量的信令、消息、特征媒體流等流數(shù)據(jù)具備良好的實(shí)時(shí)分析處理能力。CEP技術(shù)可滿足大流量數(shù)據(jù)的實(shí)時(shí)處理需要，基于 NoSQL的HBase大數(shù)據(jù)存儲(chǔ)架構(gòu)可滿足從GB到TB各種級(jí)別的數(shù)據(jù)存儲(chǔ)和快速I/O需要。

從電信運(yùn)營(yíng)商目前的情況看，構(gòu)建大數(shù)據(jù)平臺(tái)主要考慮數(shù)據(jù)集中化、專業(yè)化、低成本高性能三點(diǎn)。

集中化：使得公司業(yè)務(wù)數(shù)據(jù)集中形成數(shù)據(jù)開放，在保障數(shù)據(jù)安全性的前提下，提供自助化服務(wù)平臺(tái)，自動(dòng)化服務(wù)方式，幫助數(shù)據(jù)分析人員通過(guò)自助服務(wù)的方式，降低人工成本，滿足快速增長(zhǎng)的需求。

專業(yè)化：從提供大量獨(dú)立的系統(tǒng)/工具轉(zhuǎn)變向提供集成、一體化、自動(dòng)化數(shù)據(jù)開發(fā)平臺(tái)服務(wù)。來(lái)源各個(gè)業(yè)務(wù)塊數(shù)據(jù)進(jìn)行整合和深入挖掘產(chǎn)生用戶畫像，為業(yè)務(wù)提供有價(jià)值的服務(wù)，并且快速孵化更多的數(shù)據(jù)應(yīng)用。

成本與性能：優(yōu)化平臺(tái)存儲(chǔ)和計(jì)算方案、優(yōu)化的數(shù)據(jù)模型和算法、去除重復(fù)計(jì)算和存儲(chǔ)；通過(guò)建設(shè)大規(guī)模集群，形成規(guī)模效應(yīng)，提升平臺(tái)能力并降低成本；隨著平臺(tái)上的數(shù)據(jù)量、用戶數(shù)、任務(wù)數(shù)不斷增長(zhǎng)，每個(gè)新用戶/新任務(wù)帶來(lái)的新增成本不斷降低，成本優(yōu)勢(shì)可以不斷放大。