
華為大數(shù)據(jù)的創(chuàng)新之路
華為始終秉承著以客戶為中心的理念,反映在大數(shù)據(jù)領(lǐng)域,就是要貼近行業(yè)典型客戶進行聯(lián)合創(chuàng)新,有針對性地提供平臺解決方案,并引領(lǐng)合作伙伴在平臺上持續(xù)構(gòu)建價值應(yīng)用。
歷史的車輪駛?cè)?015年,人們對大數(shù)據(jù)的關(guān)注焦點,已經(jīng)從之前的概念炒作,發(fā)展到如何通過大數(shù)據(jù)為客戶業(yè)務(wù)創(chuàng)造價值。未來,數(shù)據(jù)將以十倍、百倍的速度增長,信息"過載"已經(jīng)成為許多企業(yè)的一大癥結(jié)。即使是石油,在開采出來之后,還需要經(jīng)過冶煉、蒸餾、精制等,才能為社會創(chuàng)造價值。企業(yè)的數(shù)據(jù),如果不能快速地抽取、分析和變現(xiàn),也將成為企業(yè)的沉重負(fù)擔(dān)。
在各行各業(yè)受到互聯(lián)網(wǎng)沖擊的年代,客戶需要的不僅僅是供應(yīng)商,更是合作伙伴;需要的是持續(xù)的聯(lián)合創(chuàng)新、持續(xù)的開放解決方案供應(yīng)、持續(xù)的咨詢服務(wù),這樣才能幫助客戶直面競爭和挑戰(zhàn),甚至成功逆襲。
FusionInsight:累計成功部署500+項目
大數(shù)據(jù)已成為華為未來的戰(zhàn)略方向之一。從2009年起,華為就開始有節(jié)奏地投入大數(shù)據(jù),如今已經(jīng)取得開源社區(qū)、客戶和生態(tài)伙伴的共同認(rèn)可。其具體舉措包括:在ApacheHadoop和Spark社區(qū)投入高級專家持續(xù)貢獻(xiàn)內(nèi)核代碼,已取得社區(qū)排名全球第4的成績;2011年發(fā)布第一個平臺版本,成功幫助電信運營商改善了基站投資結(jié)構(gòu),大幅降低了高端客戶的離網(wǎng)率;2013年發(fā)布全新架構(gòu)的FusionInsight大數(shù)據(jù)平臺,并快速在金融、公安、政府和教育等行業(yè)取得突破,已累計成功部署了500+項目,同時,已有200+合作伙伴的行業(yè)方案采用了FusionInsight平臺。
華為始終秉承著以客戶為中心的理念,反映在大數(shù)據(jù)領(lǐng)域,就是要貼近行業(yè)典型客戶進行聯(lián)合創(chuàng)新,有針對性地提供平臺解決方案,并引領(lǐng)合作伙伴在平臺上持續(xù)構(gòu)建價值應(yīng)用。
FusionInsight的整體結(jié)構(gòu)分為三層:最底層的DataOS是基石,可支持主流的開源處理引擎--MapReduce批處理、Spark內(nèi)存迭代、STORM流處理,以及華為自研的MPPDB,它是業(yè)內(nèi)唯一的全棧企業(yè)發(fā)行版,可滿足不同場景的數(shù)據(jù)處理需求。同時,自研的Elk可支持企業(yè)的SQL應(yīng)用無縫遷移到大數(shù)據(jù)平臺;中層的DataFarm是伯樂,是讓數(shù)據(jù)有效流動起來的關(guān)鍵所在,支持ISV利用平臺能力進行多源數(shù)據(jù)的實時集成,支持各類開源的算法庫,使能客戶和伙伴的挖掘能力,幫助數(shù)據(jù)分析師不斷地進行試錯和模型訓(xùn)練;最上層的行業(yè)增強解決方案是加速器,在DataOS和DataFarm的基礎(chǔ)上,針對行業(yè)典型大數(shù)據(jù)場景(比如金融業(yè)的風(fēng)控),有針對性地優(yōu)化并預(yù)置參數(shù)、算法、模型和邏輯包,大大縮短了基于大數(shù)據(jù)的新業(yè)務(wù)上線時間,滿足了在線應(yīng)用的高要求,填補了企業(yè)高要求與無序開源的空白,最后聯(lián)合ISV開發(fā)上層應(yīng)用,提供關(guān)鍵場景的端到端解決方案。
大數(shù)據(jù):走向企業(yè)生產(chǎn)和關(guān)鍵業(yè)務(wù)
FusionInsight在平臺水平能力上持續(xù)做厚,支持多集群統(tǒng)一管理及多租戶、容災(zāi)備份、存儲EC、數(shù)據(jù)加密、OMS支持HA等高級特性,支持全Web化的交互式體驗,以及不斷豐富的數(shù)據(jù)治理工具,讓大數(shù)據(jù)從企業(yè)的實驗平臺走向生產(chǎn)、走向關(guān)鍵業(yè)務(wù)。
金融行業(yè)近年來受互聯(lián)網(wǎng)沖擊很大,去中介化讓金融脫媒、客戶脫媒、甚至信息脫媒甚囂塵上,各大銀行倍感壓力。2014年,隨著以FusionInsight為代表的大數(shù)據(jù)解決方案開始走向商用,這一局面開始得到改觀。比如,國內(nèi)一家領(lǐng)先的商業(yè)銀行在采用了華為的FusionInsight進行潛在小微貸款客戶的全量挖掘后,其名單轉(zhuǎn)化率比采用傳統(tǒng)的數(shù)據(jù)倉庫提升了40倍,或有金融資產(chǎn)預(yù)測誤差率則降低了一倍;另一家銀行過去主要通過批量發(fā)送推薦短信的方式開展?fàn)I銷活動,無法做到個性化,致使客戶多有抱怨,而采用FusionInsight后,理財推薦的短信發(fā)送量比過去下降了82%,而命中率卻上升到了95%,真正實現(xiàn)了千人千面的精準(zhǔn)營銷;還有一家銀行在信用卡征信采用FusionInsight后,其發(fā)卡時間從15天大幅縮減到了立等可取,在安全性更好的前提下達(dá)到了實時體驗。
交通管理是典型的大數(shù)據(jù)行業(yè),其數(shù)據(jù)特點也是非常典型的5V,面臨著新形勢下的反恐壓力及人均警力嚴(yán)重不足的困境。華為FusionInsight幫助中國某省的公安部門實現(xiàn)了上千個數(shù)據(jù)庫的高效集中,形成了統(tǒng)一的大數(shù)據(jù)平臺,強大的SQL能力幫助交管部門無縫遷移了應(yīng)用,支持秒級發(fā)現(xiàn)套牌車、分鐘級發(fā)現(xiàn)同行車、實時交互查詢高危車輛、自學(xué)習(xí)優(yōu)化交通網(wǎng)絡(luò)效率,用智能的方法有效緩解了城市擁堵。
在政府行業(yè),很多政府部門都擁有海量的價值數(shù)據(jù),但這些數(shù)據(jù)高度分散,應(yīng)用也呈現(xiàn)煙囪式分布。華為通過將其FusionInsight大數(shù)據(jù)平臺與FusionSphere云平臺聯(lián)合,正在為多個政府部門建設(shè)統(tǒng)一的大數(shù)據(jù)云數(shù)據(jù)中心,將云計算和大數(shù)據(jù)結(jié)合,實現(xiàn)了大數(shù)據(jù)能力的服務(wù)化,讓數(shù)據(jù)能更加高效地開放,更好地服務(wù)于民生。
電信行業(yè)也是數(shù)據(jù)高度密集的行業(yè),電信運營商更是應(yīng)用大數(shù)據(jù)的先行者,華為較早就進入了這個領(lǐng)域,通過FusionInsight平臺幫助全球多個TOP運營商構(gòu)筑了融合的大數(shù)據(jù)中心。比如,中國某省的運營商利用FusionInsight實現(xiàn)了VIP客戶的預(yù)防性維挽,并優(yōu)化了基站的投資分布,當(dāng)年就為該客戶節(jié)省了幾百萬元的支出,同時,通過開放技術(shù)還讓客戶的移動位置數(shù)據(jù)很好地服務(wù)于各級廣告主,讓數(shù)據(jù)真正變現(xiàn)成了貨幣。
上述成績的取得,離不開華為各級合作伙伴的大力支持,F(xiàn)usionInsight發(fā)布之初就非常注重生態(tài)鏈的構(gòu)建,每個行業(yè)的TOPISV都與華為的大數(shù)據(jù)實驗室成功實現(xiàn)了對接;與此同時,華為近期還與國際領(lǐng)先的數(shù)據(jù)挖掘廠商SAS簽署了戰(zhàn)略合作協(xié)議,率先在國外某客戶成功實現(xiàn)了FusionInsight的商用,邁出了國際化的堅實步伐。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
訓(xùn)練與驗證損失驟升:機器學(xué)習(xí)訓(xùn)練中的異常診斷與解決方案 在機器學(xué)習(xí)模型訓(xùn)練過程中,“損失曲線” 是反映模型學(xué)習(xí)狀態(tài)的核心指 ...
2025-09-19解析 DataHub 與 Kafka:數(shù)據(jù)生態(tài)中兩類核心工具的差異與協(xié)同 在數(shù)字化轉(zhuǎn)型加速的今天,企業(yè)對數(shù)據(jù)的需求已從 “存儲” 轉(zhuǎn)向 “ ...
2025-09-19CDA 數(shù)據(jù)分析師:讓統(tǒng)計基本概念成為業(yè)務(wù)決策的底層邏輯 統(tǒng)計基本概念是商業(yè)數(shù)據(jù)分析的 “基礎(chǔ)語言”—— 從描述數(shù)據(jù)分布的 “均 ...
2025-09-19CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-19SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢效率:打破 “拆分必慢” 的認(rèn)知誤區(qū) 在 MySQL 數(shù)據(jù)庫管理中,“大表” 始終是性能優(yōu)化繞不開的話題。 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動態(tài)隨機一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開始提取前,需先判斷 TIF 文件的類型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價值的專業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫)處理 Excel 數(shù)據(jù)時,“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗與 t 檢驗:差異、適用場景與實踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計學(xué)領(lǐng)域,假設(shè)檢驗是驗證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專業(yè)操盤手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計劃中 rows 數(shù)量的準(zhǔn)確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對象的 text 與 content:區(qū)別、場景與實踐指南 在 Python 進行 HTTP 網(wǎng)絡(luò)請求開發(fā)時(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價值的核心操盤手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請求工具對比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長浮點數(shù)據(jù)的科學(xué)計數(shù)法問題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長浮點數(shù)據(jù)時的科學(xué)計數(shù)法問題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運營問題、提升執(zhí)行效率的核心手段,其價值 ...
2025-09-12用 SQL 驗證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計” 與 “用戶體驗 ...
2025-09-11塔吉特百貨孕婦營銷案例:數(shù)據(jù)驅(qū)動下的精準(zhǔn)零售革命與啟示 在零售行業(yè) “流量紅利見頂” 的當(dāng)下,精準(zhǔn)營銷成為企業(yè)突圍的核心方 ...
2025-09-11