華為大數(shù)據(jù)的創(chuàng)新之路

華為始終秉承著以客戶為中心的理念，反映在大數(shù)據(jù)領(lǐng)域，就是要貼近行業(yè)典型客戶進(jìn)行聯(lián)合創(chuàng)新，有針對(duì)性地提供平臺(tái)解決方案，并引領(lǐng)合作伙伴在平臺(tái)上持續(xù)構(gòu)建價(jià)值應(yīng)用。

　　歷史的車輪駛?cè)?015年，人們對(duì)大數(shù)據(jù)的關(guān)注焦點(diǎn)，已經(jīng)從之前的概念炒作，發(fā)展到如何通過大數(shù)據(jù)為客戶業(yè)務(wù)創(chuàng)造價(jià)值。未來，數(shù)據(jù)將以十倍、百倍的速度增長(zhǎng)，信息"過載"已經(jīng)成為許多企業(yè)的一大癥結(jié)。即使是石油，在開采出來之后，還需要經(jīng)過冶煉、蒸餾、精制等，才能為社會(huì)創(chuàng)造價(jià)值。企業(yè)的數(shù)據(jù)，如果不能快速地抽取、分析和變現(xiàn)，也將成為企業(yè)的沉重負(fù)擔(dān)。

　　在各行各業(yè)受到互聯(lián)網(wǎng)沖擊的年代，客戶需要的不僅僅是供應(yīng)商，更是合作伙伴；需要的是持續(xù)的聯(lián)合創(chuàng)新、持續(xù)的開放解決方案供應(yīng)、持續(xù)的咨詢服務(wù)，這樣才能幫助客戶直面競(jìng)爭(zhēng)和挑戰(zhàn)，甚至成功逆襲。

FusionInsight：累計(jì)成功部署500+項(xiàng)目

　　大數(shù)據(jù)已成為華為未來的戰(zhàn)略方向之一。從2009年起，華為就開始有節(jié)奏地投入大數(shù)據(jù)，如今已經(jīng)取得開源社區(qū)、客戶和生態(tài)伙伴的共同認(rèn)可。其具體舉措包括：在ApacheHadoop和Spark社區(qū)投入高級(jí)專家持續(xù)貢獻(xiàn)內(nèi)核代碼，已取得社區(qū)排名全球第4的成績(jī)；2011年發(fā)布第一個(gè)平臺(tái)版本，成功幫助電信運(yùn)營(yíng)商改善了基站投資結(jié)構(gòu)，大幅降低了高端客戶的離網(wǎng)率；2013年發(fā)布全新架構(gòu)的FusionInsight大數(shù)據(jù)平臺(tái)，并快速在金融、公安、政府和教育等行業(yè)取得突破，已累計(jì)成功部署了500+項(xiàng)目，同時(shí)，已有200+合作伙伴的行業(yè)方案采用了FusionInsight平臺(tái)。

　　華為始終秉承著以客戶為中心的理念，反映在大數(shù)據(jù)領(lǐng)域，就是要貼近行業(yè)典型客戶進(jìn)行聯(lián)合創(chuàng)新，有針對(duì)性地提供平臺(tái)解決方案，并引領(lǐng)合作伙伴在平臺(tái)上持續(xù)構(gòu)建價(jià)值應(yīng)用。

　　FusionInsight的整體結(jié)構(gòu)分為三層：最底層的DataOS是基石，可支持主流的開源處理引擎--MapReduce批處理、Spark內(nèi)存迭代、STORM流處理，以及華為自研的MPPDB，它是業(yè)內(nèi)唯一的全棧企業(yè)發(fā)行版，可滿足不同場(chǎng)景的數(shù)據(jù)處理需求。同時(shí)，自研的Elk可支持企業(yè)的SQL應(yīng)用無縫遷移到大數(shù)據(jù)平臺(tái)；中層的DataFarm是伯樂，是讓數(shù)據(jù)有效流動(dòng)起來的關(guān)鍵所在，支持ISV利用平臺(tái)能力進(jìn)行多源數(shù)據(jù)的實(shí)時(shí)集成，支持各類開源的算法庫(kù)，使能客戶和伙伴的挖掘能力，幫助數(shù)據(jù)分析師不斷地進(jìn)行試錯(cuò)和模型訓(xùn)練；最上層的行業(yè)增強(qiáng)解決方案是加速器，在DataOS和DataFarm的基礎(chǔ)上，針對(duì)行業(yè)典型大數(shù)據(jù)場(chǎng)景（比如金融業(yè)的風(fēng)控），有針對(duì)性地優(yōu)化并預(yù)置參數(shù)、算法、模型和邏輯包，大大縮短了基于大數(shù)據(jù)的新業(yè)務(wù)上線時(shí)間，滿足了在線應(yīng)用的高要求，填補(bǔ)了企業(yè)高要求與無序開源的空白，最后聯(lián)合ISV開發(fā)上層應(yīng)用，提供關(guān)鍵場(chǎng)景的端到端解決方案。

大數(shù)據(jù)：走向企業(yè)生產(chǎn)和關(guān)鍵業(yè)務(wù)

　　FusionInsight在平臺(tái)水平能力上持續(xù)做厚，支持多集群統(tǒng)一管理及多租戶、容災(zāi)備份、存儲(chǔ)EC、數(shù)據(jù)加密、OMS支持HA等高級(jí)特性，支持全Web化的交互式體驗(yàn)，以及不斷豐富的數(shù)據(jù)治理工具，讓大數(shù)據(jù)從企業(yè)的實(shí)驗(yàn)平臺(tái)走向生產(chǎn)、走向關(guān)鍵業(yè)務(wù)。

　　金融行業(yè)近年來受互聯(lián)網(wǎng)沖擊很大，去中介化讓金融脫媒、客戶脫媒、甚至信息脫媒甚囂塵上，各大銀行倍感壓力。2014年，隨著以FusionInsight為代表的大數(shù)據(jù)解決方案開始走向商用，這一局面開始得到改觀。比如，國(guó)內(nèi)一家領(lǐng)先的商業(yè)銀行在采用了華為的FusionInsight進(jìn)行潛在小微貸款客戶的全量挖掘后，其名單轉(zhuǎn)化率比采用傳統(tǒng)的數(shù)據(jù)倉(cāng)庫(kù)提升了40倍，或有金融資產(chǎn)預(yù)測(cè)誤差率則降低了一倍；另一家銀行過去主要通過批量發(fā)送推薦短信的方式開展?fàn)I銷活動(dòng)，無法做到個(gè)性化，致使客戶多有抱怨，而采用FusionInsight后，理財(cái)推薦的短信發(fā)送量比過去下降了82%，而命中率卻上升到了95%，真正實(shí)現(xiàn)了千人千面的精準(zhǔn)營(yíng)銷；還有一家銀行在信用卡征信采用FusionInsight后，其發(fā)卡時(shí)間從15天大幅縮減到了立等可取，在安全性更好的前提下達(dá)到了實(shí)時(shí)體驗(yàn)。

　　交通管理是典型的大數(shù)據(jù)行業(yè)，其數(shù)據(jù)特點(diǎn)也是非常典型的5V，面臨著新形勢(shì)下的反恐壓力及人均警力嚴(yán)重不足的困境。華為FusionInsight幫助中國(guó)某省的公安部門實(shí)現(xiàn)了上千個(gè)數(shù)據(jù)庫(kù)的高效集中，形成了統(tǒng)一的大數(shù)據(jù)平臺(tái)，強(qiáng)大的SQL能力幫助交管部門無縫遷移了應(yīng)用，支持秒級(jí)發(fā)現(xiàn)套牌車、分鐘級(jí)發(fā)現(xiàn)同行車、實(shí)時(shí)交互查詢高危車輛、自學(xué)習(xí)優(yōu)化交通網(wǎng)絡(luò)效率，用智能的方法有效緩解了城市擁堵。

　　在政府行業(yè)，很多政府部門都擁有海量的價(jià)值數(shù)據(jù)，但這些數(shù)據(jù)高度分散，應(yīng)用也呈現(xiàn)煙囪式分布。華為通過將其FusionInsight大數(shù)據(jù)平臺(tái)與FusionSphere云平臺(tái)聯(lián)合，正在為多個(gè)政府部門建設(shè)統(tǒng)一的大數(shù)據(jù)云數(shù)據(jù)中心，將云計(jì)算和大數(shù)據(jù)結(jié)合，實(shí)現(xiàn)了大數(shù)據(jù)能力的服務(wù)化，讓數(shù)據(jù)能更加高效地開放，更好地服務(wù)于民生。

　　電信行業(yè)也是數(shù)據(jù)高度密集的行業(yè)，電信運(yùn)營(yíng)商更是應(yīng)用大數(shù)據(jù)的先行者，華為較早就進(jìn)入了這個(gè)領(lǐng)域，通過FusionInsight平臺(tái)幫助全球多個(gè)TOP運(yùn)營(yíng)商構(gòu)筑了融合的大數(shù)據(jù)中心。比如，中國(guó)某省的運(yùn)營(yíng)商利用FusionInsight實(shí)現(xiàn)了VIP客戶的預(yù)防性維挽，并優(yōu)化了基站的投資分布，當(dāng)年就為該客戶節(jié)省了幾百萬元的支出，同時(shí)，通過開放技術(shù)還讓客戶的移動(dòng)位置數(shù)據(jù)很好地服務(wù)于各級(jí)廣告主，讓數(shù)據(jù)真正變現(xiàn)成了貨幣。

　　上述成績(jī)的取得，離不開華為各級(jí)合作伙伴的大力支持，F(xiàn)usionInsight發(fā)布之初就非常注重生態(tài)鏈的構(gòu)建，每個(gè)行業(yè)的TOPISV都與華為的大數(shù)據(jù)實(shí)驗(yàn)室成功實(shí)現(xiàn)了對(duì)接；與此同時(shí)，華為近期還與國(guó)際領(lǐng)先的數(shù)據(jù)挖掘廠商SAS簽署了戰(zhàn)略合作協(xié)議，率先在國(guó)外某客戶成功實(shí)現(xiàn)了FusionInsight的商用，邁出了國(guó)際化的堅(jiān)實(shí)步伐。