突破大數(shù)據(jù)應(yīng)用建設(shè)的“最后一公里”

　國企業(yè)的大數(shù)據(jù)建設(shè)，正在經(jīng)歷一個(gè)逐步完善、健全的過程。從數(shù)據(jù)的匯集整合管理，到上層業(yè)務(wù)創(chuàng)新，每一層面都在進(jìn)行著改造甚至重構(gòu)，且不同層面的建設(shè)交叉影響。要想真正實(shí)現(xiàn)“大數(shù)據(jù)+”的業(yè)務(wù)創(chuàng)新整體戰(zhàn)略，如何解決對(duì)底層海量、多來源、多種結(jié)構(gòu)的歷史數(shù)據(jù)清洗、轉(zhuǎn)換、加載、監(jiān)控、管理，以及與上層業(yè)務(wù)的無縫對(duì)接成為關(guān)鍵，即大數(shù)據(jù)的 “最后一公里”挑戰(zhàn)。

　　大數(shù)據(jù)“最后一公里”的生態(tài)建設(shè)

　　想要優(yōu)質(zhì)解決大數(shù)據(jù)“最后一公里”的問題，亟需眾多大數(shù)據(jù)合作伙伴，構(gòu)建開放、完善的大數(shù)據(jù)生態(tài)環(huán)境和生態(tài)鏈，為客戶提供完整的咨詢、軟件產(chǎn)品及實(shí)施、應(yīng)用軟件開發(fā)、運(yùn)營外包、系統(tǒng)集成，以及增值服務(wù)等，幫助企業(yè)實(shí)現(xiàn)“大數(shù)據(jù)+”的建設(shè)目標(biāo)。目前，華為與先進(jìn)數(shù)通聯(lián)合，在解決“大數(shù)據(jù)+”的“最后一公里”道路上共同探索，推出了“大數(shù)據(jù)+”聯(lián)合解決方案。

　　先進(jìn)數(shù)通公司是國內(nèi)最重要的IT集成與實(shí)施廠商之一，多年來致力于數(shù)據(jù)調(diào)度應(yīng)用實(shí)踐，構(gòu)建自研解決方案MOIA。MOIA是一款B/S模式的界面化ETL服務(wù)管理平臺(tái)軟件,面向DW/BI應(yīng)用領(lǐng)域的應(yīng)用集成中間件產(chǎn)品，可以實(shí)現(xiàn)對(duì)企業(yè)DW/BI應(yīng)用數(shù)據(jù)平臺(tái)的應(yīng)用數(shù)據(jù)管理，作業(yè)管理、任務(wù)調(diào)度和系統(tǒng)運(yùn)行監(jiān)控。目前先進(jìn)數(shù)通iMOIA.SMS調(diào)度監(jiān)控管理系統(tǒng)在國內(nèi)銀行、證券、保險(xiǎn)、制造等行業(yè)均有大量的用戶，受到了行業(yè)用戶的認(rèn)可，是大數(shù)據(jù)調(diào)度監(jiān)控管理領(lǐng)域的佼佼者之一。

▲

　　華為FusionInsight是基于Apache Hadoop開源社區(qū)的企業(yè)級(jí)大數(shù)據(jù)存儲(chǔ)、查詢、分析的統(tǒng)一平臺(tái)，F(xiàn)usionInsight Hadoop發(fā)行版緊隨開源社區(qū)的最新技術(shù)，快速集成最新組件，并在可靠性、安全性、管理性方面做企業(yè)級(jí)的增強(qiáng)，持續(xù)改進(jìn)，持續(xù)保持技術(shù)領(lǐng)先。華為FusionInsight對(duì)企業(yè)數(shù)據(jù)全量建模，深度分析和洞察，為企業(yè)的精準(zhǔn)營銷、實(shí)時(shí)決策、客戶維系、數(shù)據(jù)開放等各種應(yīng)用場(chǎng)景提供全面的技術(shù)保障，及時(shí)洞察和決策新的機(jī)會(huì)與風(fēng)險(xiǎn)。目前已經(jīng)在于電信運(yùn)營商、金融、科研、公安和政府等多個(gè)領(lǐng)域獲得成功應(yīng)用，并已成為金融和運(yùn)行商建設(shè)大數(shù)據(jù)的首選平臺(tái)。

▲

　　如何突破大數(shù)據(jù)“最后一公里”挑戰(zhàn)，助力企業(yè)實(shí)現(xiàn)“大數(shù)據(jù)+”？

　　大數(shù)據(jù)下的數(shù)據(jù)管理是企業(yè)大數(shù)據(jù)整體建設(shè)的重要基礎(chǔ)性建設(shè)，必不可少?；谶@一共識(shí)，并結(jié)合雙方的互補(bǔ)優(yōu)勢(shì)，即：先進(jìn)數(shù)通數(shù)據(jù)調(diào)度產(chǎn)品優(yōu)勢(shì)，“+”華為大數(shù)據(jù)運(yùn)算平臺(tái)優(yōu)勢(shì)，突破大數(shù)據(jù)“最后一公里”，形成“大數(shù)據(jù)+”聯(lián)合解決方案。

▲

　　如上圖所示，“大數(shù)據(jù)+”聯(lián)合解決方案，包括兩大部分，即：企業(yè)數(shù)據(jù)調(diào)度與監(jiān)控平臺(tái)MOIA、大數(shù)據(jù)分析平臺(tái)FusionInsight。MOIA的功能涵蓋了作業(yè)管理、全局調(diào)度、集群管理、運(yùn)維監(jiān)控四大塊，是整體方案的調(diào)度總控模塊，調(diào)度總控對(duì)接結(jié)構(gòu)化數(shù)據(jù)源、非結(jié)構(gòu)化數(shù)據(jù)源、數(shù)據(jù)公共管理服務(wù)、傳統(tǒng)數(shù)據(jù)架構(gòu)、FusionInsight大數(shù)據(jù)平臺(tái)、報(bào)表以及相關(guān)業(yè)務(wù)系統(tǒng)。

　　先進(jìn)數(shù)通MOIA平臺(tái)實(shí)現(xiàn)對(duì)數(shù)據(jù)的大數(shù)據(jù)平臺(tái)與第三方數(shù)據(jù)源的清洗、轉(zhuǎn)換、加載、監(jiān)控、管理, 提供實(shí)施、應(yīng)用軟件開發(fā)、系統(tǒng)集成，以及增值服務(wù)等；華為FusionInsight大數(shù)據(jù)平臺(tái)圍繞數(shù)據(jù)的采集、分析和消費(fèi)，在典型場(chǎng)景如數(shù)據(jù)中心運(yùn)維日志分析、歷史數(shù)據(jù)查詢、實(shí)時(shí)事件處理、客戶特征畫像形成系列解決方案，并跟隨客戶業(yè)務(wù)的發(fā)展不斷豐富，提供良好的技術(shù)支持，兩者聯(lián)手共同解決大數(shù)據(jù)平臺(tái)與業(yè)務(wù)的對(duì)接問題，突破“最后一公里”挑戰(zhàn)，共同構(gòu)筑華為先進(jìn)數(shù)通“大數(shù)據(jù)+”聯(lián)合解決方案。

　　同時(shí)，該方案還實(shí)現(xiàn)了穩(wěn)定、擴(kuò)展性高的復(fù)雜集群管理，快捷、簡便的調(diào)度開發(fā)，統(tǒng)一的作業(yè)調(diào)度監(jiān)控，確保數(shù)據(jù)處理業(yè)務(wù)安全、穩(wěn)定、高效地運(yùn)行，為企業(yè)快速構(gòu)建海量數(shù)據(jù)信息處理系統(tǒng)，通過對(duì)企業(yè)內(nèi)部和外部的巨量信息數(shù)據(jù)實(shí)時(shí)與非實(shí)時(shí)的分析挖掘，讓企業(yè)可以從各類繁雜無序的海量數(shù)據(jù)中洞察商機(jī),，幫助企業(yè)穩(wěn)步進(jìn)入大數(shù)據(jù)時(shí)代。

　　強(qiáng)強(qiáng)聯(lián)合，激情碰撞的“大數(shù)據(jù)+”智慧火花

　　基于華為大數(shù)據(jù)平臺(tái)業(yè)界領(lǐng)先的大數(shù)據(jù)處理技術(shù)，與先進(jìn)數(shù)通公司近13年銀行數(shù)據(jù)管理經(jīng)驗(yàn)，使企業(yè)傳統(tǒng)數(shù)據(jù)線與大數(shù)據(jù)平臺(tái)相互結(jié)合，形成智慧的企業(yè)統(tǒng)一數(shù)據(jù)平臺(tái)，激情碰撞出“大數(shù)據(jù)+”的智慧火花：

　　（１）高達(dá)百萬維度的全量建模，深刻洞察用戶行為與特征，為企業(yè)的商業(yè)決策，以及新業(yè)務(wù)上級(jí)的挖掘，提供更加科學(xué)、全面的業(yè)務(wù)支持。

　?。ǎ玻┚o密跟蹤并導(dǎo)入社區(qū)最新科研成果和解決方案，滿足企業(yè)對(duì)海量數(shù)據(jù)進(jìn)行在線實(shí)時(shí)處理的目標(biāo)

　?。ǎ常?duì)產(chǎn)品高性能、高可靠性、高穩(wěn)定性、高安全性的要求設(shè)計(jì)，能夠支撐企業(yè)級(jí)核心業(yè)務(wù)數(shù)據(jù)的處理與分析

　?。ǎ矗┤詣?dòng)化運(yùn)行維護(hù)，自定義Dashboard，自動(dòng)化的二次開發(fā)助手，幫助傳統(tǒng)企業(yè)輕松駕馭大數(shù)據(jù)業(yè)務(wù)

　　目前華為與先進(jìn)數(shù)通的“大數(shù)據(jù)+”聯(lián)合解決方案已經(jīng)在中國建設(shè)銀行、蘇州銀行等多家銀行展開實(shí)踐，為其打造銀行大數(shù)據(jù)應(yīng)用系統(tǒng)。相信這具有借鑒意義的實(shí)踐嘗試，將為后續(xù)更多的方案豐富打開一扇新的數(shù)據(jù)應(yīng)用之門，煥發(fā)數(shù)據(jù)新的活力，綻放新的光彩！