從理論到實踐：大數(shù)據(jù)幫助企業(yè)智慧決策_數(shù)據(jù)分析師

客戶群體如何劃分？哪個類型的客戶利潤最高？

市場如何劃分，有哪些特點？增長最快的是哪個細分市場？

哪些產(chǎn)品更賺錢，如何規(guī)劃發(fā)展？

如何改變集團管理松散的現(xiàn)狀？如何降低成本，提高利潤率？

企業(yè)智慧決策需要解決諸如此類的問題，大數(shù)據(jù)為智慧決策提供依據(jù)。

企業(yè)智慧決策的挑戰(zhàn)

企業(yè)智慧決策就是企業(yè)利用數(shù)據(jù)在各個層面上進行實時科學的決策，企業(yè)經(jīng)過多年的信息化建設，目前一般的企業(yè)都會存在多個業(yè)務系統(tǒng)。這些業(yè)務系統(tǒng)本身已經(jīng)很好地支撐了企業(yè)業(yè)務板塊的一些流程管理，并且能夠提供業(yè)務板塊內的一些比較簡單的數(shù)據(jù)報表。但是，企業(yè)面臨競爭加劇的市場環(huán)境下，企業(yè)市場洞察力、整體戰(zhàn)略和執(zhí)行力成為企業(yè)核心競爭力，能夠及時準確地決策，很大程度上成為企業(yè)發(fā)展成敗關鍵的因素。

用友集團iUAP中心商業(yè)分析產(chǎn)品經(jīng)理王翀認為，“對于企業(yè)智慧決策來說最大的挑戰(zhàn)就是信息碎片化，數(shù)據(jù)散落在不同的部門和不同的系統(tǒng)，這使得企業(yè)回答很簡單的問題就會面臨一些無從著手或者是得不到準確的答案。馬云說過大家還沒搞清楚PC互聯(lián)網(wǎng)的時候，移動互聯(lián)網(wǎng)來了，大家還沒搞清楚移動互聯(lián)網(wǎng)的時候大數(shù)據(jù)的時代又來了。大數(shù)據(jù)時代下，企業(yè)決策過程是無時無刻不在計算和處理這些問題，找到應對方案，并且貫徹到企業(yè)運作當中。把分散在企業(yè)各個業(yè)務系統(tǒng)數(shù)據(jù)有機整合起來，提升企業(yè)在分析層面的落實和監(jiān)控企業(yè)的戰(zhàn)略戰(zhàn)術是企業(yè)決策者面臨非常大的挑戰(zhàn)。”

王翀還舉例說，“實施過程中的一個企業(yè)，最先建立的財務系統(tǒng)，對產(chǎn)品編碼是六位的，后來又建立了一個ERP系統(tǒng)，同樣的產(chǎn)品編碼由于一些新的要求，就被擴充到七位，最后在建立營銷系統(tǒng)的時候，這個產(chǎn)品編碼又被擴充到十五位，它其實指的都是同一個產(chǎn)品。在這種情況下企業(yè)很難看到一個實時聯(lián)動的企業(yè)運維前景，同時耗費大量的人力物力進行低級數(shù)據(jù)的整合，同時數(shù)據(jù)的準確性也存在一定的隱患。”

企業(yè)各類數(shù)據(jù)的總和構成了企業(yè)在數(shù)字世界中一個完整的畫像，企業(yè)大數(shù)據(jù)正成為企業(yè)的核心資產(chǎn)，企業(yè)需要從這些資產(chǎn)中獲得價值，也驅動自己在數(shù)字化社會中得到不斷的發(fā)展。隨著企業(yè)業(yè)務外延從企業(yè)內部不斷向外部、向企業(yè)所處的產(chǎn)業(yè)鏈和生態(tài)圈擴展，企業(yè)的數(shù)據(jù)視野也越來越寬，從主要關注企業(yè)內部數(shù)據(jù)，已經(jīng)延伸到關注社會數(shù)據(jù)，包括交易的數(shù)據(jù)、人工合成的數(shù)據(jù)、機器的數(shù)據(jù)、社會網(wǎng)絡的數(shù)據(jù)等在內的企業(yè)數(shù)據(jù)在不斷被重新認識。

在進行這些海量數(shù)據(jù)管理時，企業(yè)面臨很大的挑戰(zhàn)。據(jù)IDC 2014年5月調查顯示，72%的受訪者認為當前數(shù)據(jù)的指數(shù)增長和復雜性是目前遇到最大的數(shù)據(jù)管理調整，38%的人希望通過一個單一的平臺保護和管理自己所有的數(shù)據(jù)。

避免為大數(shù)據(jù)而大數(shù)據(jù) 企業(yè)大數(shù)據(jù)管理的關鍵要素和原則

用友網(wǎng)絡科技股份有限公司助理總裁兼集團iUAP中心副總經(jīng)理謝東

企業(yè)為了讓資產(chǎn)能夠產(chǎn)生價值，必須要把自己收集到所有的數(shù)據(jù)真正管理好、利用好，大數(shù)據(jù)其實就是在多樣的或者大量數(shù)據(jù)中快速獲取信息的能力，并不是說數(shù)據(jù)放在這兒就可以了。用友網(wǎng)絡科技股份有限公司助理總裁兼集團iUAP中心副總經(jīng)理謝東認為，企業(yè)市場要做好三個方面的事情，才有可能做好大數(shù)據(jù)的管理和應用：

第一，選擇好自己的數(shù)據(jù)基礎架構。企業(yè)數(shù)據(jù)基礎架構變革的驅動力，最基本的驅動力來源于數(shù)據(jù)量的增長，以及數(shù)據(jù)類型的變化。此外，不同的企業(yè)需求不同，實時性、成本、數(shù)據(jù)增長的趨勢可能也會影響數(shù)據(jù)基礎架構的選擇。如果企業(yè)面臨是一個量級不大，結構化的數(shù)據(jù)，也許傳統(tǒng)的關系數(shù)據(jù)庫就可以解決；如果量級增大，10TB左右，可能原有的關系數(shù)據(jù)庫不能滿足，列式數(shù)據(jù)庫是一個比較好的選擇；當它的量級越發(fā)增大，類型越發(fā)增多的時候，需要考慮新型的New SQL、NoSQL，甚至有Hadoop這樣的計算系統(tǒng)和數(shù)據(jù)存儲系統(tǒng)。

第二，做好數(shù)據(jù)的管理工作，選擇好數(shù)據(jù)管理的關鍵技術。企業(yè)的數(shù)據(jù)管理一般都會經(jīng)歷孤立系統(tǒng)、數(shù)據(jù)集、數(shù)據(jù)倉庫和統(tǒng)一元數(shù)據(jù)的數(shù)據(jù)倉庫等幾個階段。企業(yè)在數(shù)據(jù)建設過程中，初期很難從頂層把自己的整體元數(shù)據(jù)管理包括數(shù)據(jù)倉庫規(guī)劃做到位，更易于見效的方式是先做部門級應用或者是領域級的應用，后續(xù)逐步整合。

第三，數(shù)據(jù)應用建設，要把數(shù)據(jù)利用起來，才能真正產(chǎn)生價值。從分析應用來講，分為四個部分：報表報告、交互分析、挖掘預測、決策自動化。其中交互分析涵蓋的東西比較多，很多時候會把敏捷分析、自助分析、多維OLAP分析都放在這里面?？偟膩碚f，企業(yè)應該根據(jù)現(xiàn)今自身所處的階段以及企業(yè)數(shù)據(jù)實際情況來規(guī)劃后續(xù)的數(shù)據(jù)管理和分析應用的發(fā)展路線。

圖一：企業(yè)大數(shù)據(jù)管理的關鍵因素

現(xiàn)階段因為數(shù)據(jù)非常之大，所以難免會陷入為了收集數(shù)據(jù)和整理數(shù)據(jù)而做大數(shù)據(jù)建設的一種可能性，謝東還分享了企業(yè)大數(shù)據(jù)分析建設應該遵循的原則：

圖2：企業(yè)大數(shù)據(jù)分析建設原則

第一，一定是業(yè)務目標驅動的。現(xiàn)在業(yè)務目標很好找，包括不同的領域，比方說提升財務收益或者優(yōu)選供應鏈，比如說零售企業(yè)的定價和促銷策略等等。

第二，自下而上的原則。在數(shù)據(jù)倉庫上，建議采用以點帶面的形式，沒必要初始就做一個頂層的設計，可以先做一些領域級、部門級的應用，把數(shù)據(jù)建起來，多個數(shù)據(jù)集中以后可以快速見到效益。也就是現(xiàn)在逐漸迭代，螺旋式上升的一種發(fā)展路線。

第三，價值最大化的原則?，F(xiàn)在數(shù)據(jù)分析技術很多，我們不應該只停留在簡單的報表報告層面，至少應該做到把交互分析里面很多的技術應用起來。

第四，數(shù)據(jù)價值推向全員應用。全員應用比較好理解，現(xiàn)在決策非?？?，單純靠領導決策也不夠，如果全員都可以收到數(shù)據(jù)的價值，可以在自己的范圍內做快速決策，這也是互聯(lián)網(wǎng)時代全員創(chuàng)新的概念。

總之，企業(yè)做大數(shù)據(jù)管理不是為了應用大數(shù)據(jù)技術而做大數(shù)據(jù)，而是一定要為業(yè)務服務的。

新一代數(shù)據(jù)管理平臺應具備的七大關鍵特性

基于以上分析與認識，用友iUAP認為，目前，能真正在業(yè)務上幫助用戶提升生產(chǎn)力的數(shù)據(jù)管理平臺應具備以下關鍵性： 第一，實時性。用友BQ商業(yè)分析平臺在數(shù)據(jù)采集上采用數(shù)據(jù)庫日志分析技術，在不對業(yè)務系統(tǒng)的性能產(chǎn)生影響的前提下，能夠抓取實時的業(yè)務數(shù)據(jù)，在數(shù)據(jù)處理層，結合列存、行存以及混存的技術，基于內存的多維聚合技術能夠對變化的數(shù)據(jù)進行實時數(shù)據(jù)處理，相比傳統(tǒng)的技術，經(jīng)過測試，可以得到最高50倍的分析能力提升、性能提升。

第二，可視化。在構建數(shù)據(jù)模型報表以及儀表盤開發(fā)過程中全程可視化。大家以前對可視化的概念就是數(shù)據(jù)展現(xiàn)的可視化，用友BQ商業(yè)分析平臺產(chǎn)品設計中擴展了可視化的理念，提出了全程可視化的概念，從模型的構建，報表的設計，數(shù)據(jù)展現(xiàn)到用戶操作交互的過程，都采用了可視化和所見即所得的理念。

第三，對大數(shù)據(jù)的處理架構。對大數(shù)據(jù)的處理架構可以滿足企業(yè)對擴展各種數(shù)據(jù)接入的需求，結構化的數(shù)據(jù)和非結構化的數(shù)據(jù)可以在統(tǒng)一架構下進行處理和計算，能夠接入Hadoop分布式文件處理以及分布式的數(shù)據(jù)庫，從而能夠處理圖象、視頻、網(wǎng)站日志等非結構化和半結構化的數(shù)據(jù)。

第四，數(shù)據(jù)預測。用友BQ商業(yè)分析平臺有一個開放的數(shù)據(jù)挖掘架構，現(xiàn)在企業(yè)已經(jīng)不滿足于簡單看數(shù)據(jù)的匯總報表，有一些企業(yè)積累了比較多的數(shù)據(jù)，希望能夠從大量的數(shù)據(jù)中挖掘出更有價值的知識，用友BQ商業(yè)分析平臺可以擴展基于L元模型的數(shù)據(jù)挖掘的算法，同時在展現(xiàn)層擴展數(shù)據(jù)挖掘的可視化展現(xiàn)方式。

第五，移動分析?，F(xiàn)在用友BQ商業(yè)分析平臺有一個移動數(shù)據(jù)分析產(chǎn)品，叫BQ Mobile，它是一套獨立的面向移動分析的產(chǎn)品，能夠開發(fā)iOS和安卓平臺的應用，針對手機和平板進行移動終端原生分析應用的開發(fā)，這種方式能夠利用移動屏幕比較小的，特有的交互方式，滿足對移動分析能力有較高要求的企業(yè)。

第六，統(tǒng)一元數(shù)據(jù)。對元數(shù)據(jù)管理的支持。數(shù)據(jù)倉庫領域有一句話，如果數(shù)據(jù)準確性得不到保證，那在前端強大的展現(xiàn)效果也沒有意義，依賴于這些數(shù)據(jù)做出的決策也是錯的。針對這種情況用友做了很多工作，用友BQ商業(yè)分析平臺有強大的元數(shù)據(jù)管理能力，提供了影響分析的功能，這個功能可以幫助用戶發(fā)現(xiàn)數(shù)據(jù)處理結果和源頭之間的關聯(lián)，一旦結果的數(shù)據(jù)不準確，可以迅速定位到是源頭的哪一個數(shù)據(jù)字段導致了這個問題。

第七，嵌入式分析。可以嵌入到企業(yè)現(xiàn)有的應用中去，可以嵌入到企業(yè)現(xiàn)有的門戶、網(wǎng)站去，甚至在Word里面可以嵌入到分析的插件，使得Word可以生成基于最新數(shù)據(jù)的報告。

用友集團iUAP中心商業(yè)分析產(chǎn)品經(jīng)理王翀

用友認為，新一代數(shù)據(jù)管理平臺只有具備了以上特性，才能幫助企業(yè)在互聯(lián)網(wǎng)時代迎接大數(shù)據(jù)管理的挑戰(zhàn)。

基于新一代大數(shù)據(jù)管理平臺的成功實踐

理論和工具都離不開實踐的檢驗，用友BQ商業(yè)分析平臺已經(jīng)幫助諸多用戶實現(xiàn)了基于大數(shù)據(jù)管理的業(yè)務目標。

天瑞集團：

天瑞集團是集鑄造、水泥、旅游、煤電鋁、礦業(yè)、商貿物流為一體的綜合性企業(yè)集團，有員工1.6萬人，在2014年中國制造業(yè)企業(yè)500強中位列第196名。

天瑞集團面臨的問題是：缺少一個統(tǒng)一的信息系統(tǒng)來支撐總公司對下屬項目公司的指導和監(jiān)控;下屬公司在管理上容易形成各自為政的情況，總公司也難以了解即時了解各項政策的執(zhí)行;數(shù)據(jù)只能分散存儲在不同的下屬公司或不同的管理部門;總公司與下屬項目公司間的信息傳遞只能依賴于傳統(tǒng)的郵件、電話、 excel 等方式;無法為總公司領導提供準確、及時、全面的管理信息，最終導致決策效率較低，而無法發(fā)揮集團管理的優(yōu)勢。

用友在這個項目上重點針對天瑞關鍵類型的業(yè)務數(shù)據(jù)進行建模、采集、抽取、整合，形成管理、共享的統(tǒng)一商業(yè)分析管控平臺。還通過對財務、資金、供應鏈、生產(chǎn)數(shù)據(jù)的分析洞察企業(yè)問題、降低運營成本、提高利潤和企業(yè)價值，實現(xiàn)與NC一體化的業(yè)務分析體系。通過這些工作，幫天瑞集團純料煤耗大大降低，總體成本縮減4%，生產(chǎn)率也得到了提升。

對于能源消耗型企業(yè)，國家隊其打造綠色工廠以及節(jié)能減排有一定的要求，天瑞集團項目負責人說：“商業(yè)分析系統(tǒng)讓管理視角多樣化起來，看待問題更加客觀分析問題更加透徹。通過部署B(yǎng)Q8 平臺，我們有更多的機會去實現(xiàn)企業(yè)在數(shù)據(jù)治理、數(shù)據(jù)中心、 大數(shù)據(jù)分析方面的規(guī)劃落地；掌握了這套分析工具，也為我們企業(yè)內部積累了一批商業(yè)分析人才。 ”

大娘水餃

大娘水餃是知名的餐飲連鎖企業(yè)，全國擁有連鎖店350多家，在職員工8000多人。每年大娘水餃的消費者超過5千萬人次，年銷售額10億多元。

大娘水餃面臨的問題是：1、多年來大娘水餃在門店、工廠、 OA、財務等方面都進行了一些信息化應用的嘗試，但都屬于局部應用的狀態(tài)，各系統(tǒng)孤立運行，完全沒有形成基本的信息共享，未能達到信息化管理的整體效果。2、大娘水餃已經(jīng)出現(xiàn)了嚴重的集團管控能力不足，包括對經(jīng)營機構和管理機構的預算控制，資金管理和財務核算，高效率集中采購等等方面，已經(jīng)影響到了整個公司的經(jīng)營效益。3、大量的傳統(tǒng)手工管理方式的存在，隨著門店的擴展致使管理更顯得粗放，造成許多不必要的浪費，信息化的、規(guī)范標準的管理系統(tǒng)建設已經(jīng)到了刻不容緩的時刻，特別是對于連鎖經(jīng)營這種業(yè)態(tài)尤為必須。

用友在這個項目里根據(jù)大娘水餃目前的信息化建設程度確立了企業(yè)經(jīng)營管理決策分析平臺的分步實施策略。建設以集中采購、銷售管理、商業(yè)智能分析和人力資源管理的運營支撐平臺。建設了以辦公自動化 OA 和集中核算的集團整體管控平臺。對于大娘水餃的門店經(jīng)理來說，有了用友BQ商業(yè)分析平臺，現(xiàn)在每天在辦公室只要打開電腦十分鐘內就能掌握各分店的最新動態(tài)。而一旦發(fā)現(xiàn)問題，能迅速找到相關負責人，防患于未然。有了這套軟件，以前需要一天解決的事情，現(xiàn)在 1 個小時就足夠了。

清源華衍水務

清源華衍水務集團總資產(chǎn) 36.85 億元，擁有日供水 45 萬噸的自來水廠 1 座，日處理量分別為20 萬噸和15萬噸的污水處理廠2 座。建成投運供水管網(wǎng) 870 公里、污水管網(wǎng) 688 公里 、污水泵站 44 座。

清源華衍水務面臨的問題是：1、水價沒有建立根據(jù)市場供求和成本變化及時調整的機制，供水價格普遍偏低，虧損較為嚴重。由于以上原因，水務企業(yè)在經(jīng)營方式上形成了“ 低水價＋虧損＋財政補貼”的模式，從而造成了行業(yè)經(jīng)營效率不高、盈利能力低微的局面。2、清源華衍水務希望通過加強企業(yè)管理能力，提高財務核算水平，對生成成本、供水成本、污水處理成本、管網(wǎng)運行成本、人力成本等精細核算，在政府水價調整進行聽證時，能夠提供財務依據(jù)。3、清源華衍水務希望提升水務工作效率，提升水務管理和服務水平，運用信息技術手段實時采集源水、出廠水、管網(wǎng)末梢水質數(shù)據(jù)、管網(wǎng)壓力、管網(wǎng)流量數(shù)據(jù)，防范惡劣環(huán)境和突發(fā)事件情況，防止或及時處理突發(fā)事件。

在這個項目里，用友主要將地理信息系統(tǒng)GIS、數(shù)據(jù)采集與監(jiān)視控制系統(tǒng)SCADA、實時數(shù)據(jù)的水力模板等系統(tǒng)數(shù)據(jù)，通過基于SOA架構的系統(tǒng)平臺，集成匯聚生產(chǎn)、輸配等關鍵信息，打造一個管理人員、專家、運營信息高度融合的集成管理環(huán)境，從而實現(xiàn)快速響應和優(yōu)化決策。

通過這個系統(tǒng)使得清源華衍水務的資金利用率從實施前的68%上升到實施后的74%,污水處理利潤率從實施前的5%提升到實施后的8%。通過這個項目，清源華衍已經(jīng)認識到：商業(yè)分析以及大數(shù)據(jù)是未來信息化發(fā)展的必然趨勢，數(shù)據(jù)分析必定能為企業(yè)創(chuàng)造更多價值。

上海醫(yī)藥

上海醫(yī)藥集團是一家總部位于上海的全國性醫(yī)藥產(chǎn)業(yè)集團，主營業(yè)務覆蓋醫(yī)藥研發(fā)與制造、分銷與零售全產(chǎn)業(yè)鏈。企業(yè)綜合排名位居全國醫(yī)藥行業(yè)第二。

上海醫(yī)藥集團面臨的問題是：1、企業(yè)已規(guī)劃并建設完成了集團管控、ERP企業(yè)資源管理等信息化系統(tǒng)布局，并初步建立了一些針對獨立業(yè)務的輔助分析系統(tǒng)。但數(shù)據(jù)多而不精，無法為日常運營決策提供支持。2、各系統(tǒng)在日常運營中產(chǎn)生了大量數(shù)據(jù)，但卻沒有一個統(tǒng)一的數(shù)據(jù)標準，沒有形成信息資源共享和交換的機制。3、現(xiàn)有報表無法為公司高層決策、中層領導管理、業(yè)務層分析應用提供全面、及時、準確的數(shù)據(jù)支持，提高公司應變和決策能力。

在這個項目里，用友為上海醫(yī)療構建精準實時的數(shù)據(jù)分析系統(tǒng)，上藥集團和用友 BA 團隊在現(xiàn)有上藥 ERP、項目管理系統(tǒng)及各類重要非結構化的業(yè)務數(shù)據(jù)應用之上，共同規(guī)劃并由用友BA團隊實施建設了以集成平臺、業(yè)務模型、分析主題這三層架構的分析層次的集團BI系統(tǒng)。上海醫(yī)藥通過實施這個項目，使得其集團數(shù)據(jù)治理比例得到了明顯提升，同時數(shù)據(jù)冗余度從治理前35%下降到治理后的18%，數(shù)據(jù)分析周期也從實施前的T+1天降低到實施后的實時分析。

用大數(shù)據(jù)幫助企業(yè)進行智慧決策，是一項長期而又復雜的系統(tǒng)工程。用友公司從諸多大數(shù)據(jù)實踐中積累了豐富的經(jīng)驗，并將其梳理并上升到理論層面，希望能夠藉此幫助更多的用戶實現(xiàn)其業(yè)務發(fā)展的目標。