你的大數(shù)據(jù)項(xiàng)目失敗的三大關(guān)鍵因素

說到大數(shù)據(jù)，有一個(gè)網(wǎng)上流傳已久的段子： Big data is like teenage sex: everyone talks about it, nobody really knows how to do it, everyone thinks everyone else is doing it, so everyone claims they are doing it. (大數(shù)據(jù)就像是青少年談性：每個(gè)人都在說，不知道誰真的做了，每個(gè)人都認(rèn)為其他人做了，所以每個(gè)人都聲稱自己在做… )

這個(gè)段子雖然是調(diào)侃，但是的確極其準(zhǔn)確的反應(yīng)了機(jī)構(gòu)大數(shù)據(jù)之路的現(xiàn)狀和尷尬處境：現(xiàn)在的大環(huán)境是上至相關(guān)領(lǐng)導(dǎo)，下至基層員工都知道大數(shù)據(jù)的重要性。但是落實(shí)到實(shí)施，很多機(jī)構(gòu)、企業(yè)都面臨相同的困境：自己大數(shù)據(jù)發(fā)展的方法論和落地支點(diǎn)到底在哪里?他山之石如何攻己之玉?我的大數(shù)據(jù)之路在何方?這些都是困擾機(jī)構(gòu)大數(shù)據(jù)項(xiàng)目的難題。

帶著這些問題，筆者分析了現(xiàn)今市場(chǎng)上一些典型的行業(yè)和企業(yè)案例(覆蓋互聯(lián)網(wǎng)、政府、金融、通信、電子商務(wù)和大型企業(yè))和自己過去十幾年服務(wù)過的總計(jì)近百家機(jī)構(gòu)和企業(yè)的大數(shù)據(jù)發(fā)展之路，試圖找出其成敗的關(guān)鍵因素。最終筆者發(fā)現(xiàn)，機(jī)構(gòu)大數(shù)據(jù)之路的關(guān)鍵點(diǎn)可以如下圖所示，即業(yè)務(wù)能力(3個(gè)基礎(chǔ)支點(diǎn))、技術(shù)能力(3個(gè)難點(diǎn))和整合能力：

一個(gè)機(jī)構(gòu)或企業(yè)要做好自己的大數(shù)據(jù)應(yīng)用，業(yè)務(wù)層面首先要做好各個(gè)業(yè)務(wù)系統(tǒng)和業(yè)務(wù)數(shù)據(jù)平臺(tái)的建設(shè)和規(guī)劃，在此基礎(chǔ)上做好合適自己的數(shù)據(jù)運(yùn)營(yíng)支撐體系。

在技術(shù)層面，要求具備一定的搜索、商業(yè)智能和人工智能等技術(shù)在業(yè)務(wù)系統(tǒng)中運(yùn)用的能力。這三項(xiàng)技術(shù)對(duì)技術(shù)人員專業(yè)性的要求比較高。在相關(guān)人才缺乏的市場(chǎng)環(huán)境下，由于眾多VC支撐的新興互聯(lián)網(wǎng)公司高薪瘋搶和囤積相關(guān)人才，使得在傳統(tǒng)IT意識(shí)下運(yùn)營(yíng)操作的機(jī)構(gòu)大數(shù)據(jù)項(xiàng)目一將難求，舉步維艱。

在業(yè)務(wù)和技術(shù)能力的基礎(chǔ)上，機(jī)構(gòu)大數(shù)據(jù)應(yīng)用若要起飛還需要從管理、組織機(jī)構(gòu)和企業(yè)文化的角度建立起自己的運(yùn)營(yíng)支撐體系，讓相關(guān)項(xiàng)目能夠在機(jī)構(gòu)內(nèi)進(jìn)入一個(gè)良性循環(huán)的路徑。

由此可見，要落實(shí)好大數(shù)據(jù)應(yīng)用，機(jī)構(gòu)必或企業(yè)須做好發(fā)生綜合性轉(zhuǎn)變的思想準(zhǔn)備。這種轉(zhuǎn)變是一個(gè)系統(tǒng)工程而不是傳統(tǒng)意義上的IT項(xiàng)目，更不是簡(jiǎn)單的技術(shù)算法工作。以下詳細(xì)說明上述三個(gè)關(guān)鍵點(diǎn)。

業(yè)務(wù)體系的建設(shè)和運(yùn)營(yíng)能力是大數(shù)據(jù)應(yīng)用的基礎(chǔ)

機(jī)構(gòu)要做好自己的大數(shù)據(jù)應(yīng)用，業(yè)務(wù)系統(tǒng)和業(yè)務(wù)數(shù)據(jù)建設(shè)是基礎(chǔ)。金融和電信行業(yè)的機(jī)構(gòu)前些年都建設(shè)了自己的數(shù)據(jù)平臺(tái)(例如數(shù)據(jù)倉(cāng)庫(kù)，MDM等相關(guān)項(xiàng)目)，情況相對(duì)比較良好。其他機(jī)構(gòu)客戶這方面差異比較大，這取決于機(jī)構(gòu)自身過去的IT投入和發(fā)展?fàn)顩r。

筆者建議，正在策劃和推進(jìn)大數(shù)據(jù)項(xiàng)目的機(jī)構(gòu)一定要對(duì)自身業(yè)務(wù)系統(tǒng)發(fā)展?fàn)顟B(tài)、業(yè)務(wù)數(shù)據(jù)平臺(tái)建設(shè)狀態(tài)和數(shù)據(jù)運(yùn)營(yíng)能力有一個(gè)清晰的認(rèn)知，并根據(jù)自身的狀況設(shè)置可實(shí)現(xiàn)的“一個(gè)億”小目標(biāo)。

技術(shù)能力是大數(shù)據(jù)應(yīng)用的核心支撐

做好機(jī)構(gòu)大數(shù)據(jù)應(yīng)用的技術(shù)關(guān)鍵點(diǎn)到達(dá)是什么?微軟大數(shù)據(jù)研究中心的一位專家有這樣的觀點(diǎn)：“hadoop, spark, HBase 等技術(shù)都是實(shí)現(xiàn)手段和IT構(gòu)架元素，大數(shù)據(jù)關(guān)鍵技術(shù)60%是搜索，40%是商業(yè)智能和人工智能。。?！薄８鶕?jù)多年服務(wù)于不同行業(yè)客戶的實(shí)踐，我很認(rèn)同這個(gè)說法。當(dāng)然這里的搜索不是一般人理解的類似百度這樣的搜索， 有一個(gè)專業(yè)的詞叫做“企業(yè)搜索”- Enterprise Search。

搜索為什么這么重要?根據(jù)Gartner等機(jī)構(gòu)的長(zhǎng)期研究，一個(gè)機(jī)構(gòu)內(nèi)部數(shù)據(jù)構(gòu)成如下圖所示，20%結(jié)構(gòu)化， 80%非結(jié)構(gòu)化。數(shù)據(jù)庫(kù)技術(shù)是對(duì)20%的結(jié)構(gòu)化數(shù)據(jù)管理、挖掘和交互的理想技術(shù)。但是數(shù)據(jù)庫(kù)技術(shù)運(yùn)用到占80%的非結(jié)構(gòu)化數(shù)據(jù)上，其效率和能力將隨數(shù)據(jù)量的增長(zhǎng)而呈指數(shù)性下降。企業(yè)搜索技術(shù)正好完美補(bǔ)充了數(shù)據(jù)庫(kù)技術(shù)的這個(gè)空缺。而在大數(shù)據(jù)的世界里，結(jié)構(gòu)化信息和非結(jié)構(gòu)化信息是同等重要的，由此可以看出搜索的重要性不言而喻了。

除了搜索外，商業(yè)智能也是機(jī)構(gòu)大數(shù)據(jù)項(xiàng)目技術(shù)能力的另一個(gè)重要因素。大數(shù)據(jù)時(shí)代的到來要求老的商業(yè)智能必須拓展底層數(shù)據(jù)的覆蓋范圍至非結(jié)構(gòu)化數(shù)據(jù)部分，從而也帶來了新的挑戰(zhàn)。

人工智能、特別是機(jī)器學(xué)習(xí)在數(shù)據(jù)層面可以很好的支撐和提升數(shù)據(jù)挖掘、分類和信息關(guān)聯(lián);在業(yè)務(wù)層面，則可以更智能的滿足管理運(yùn)營(yíng)、營(yíng)銷和戰(zhàn)略決策需求，也是大數(shù)據(jù)體系落實(shí)到具體業(yè)務(wù)系統(tǒng)必須面對(duì)和掌握的技術(shù)關(guān)鍵。

別讓整合能力成為大數(shù)據(jù)系統(tǒng)工程的短板

是否有了業(yè)務(wù)能力的儲(chǔ)備，解決好關(guān)鍵技術(shù)落地問題，機(jī)構(gòu)大數(shù)據(jù)項(xiàng)目就坦途一片了呢?前面我們已經(jīng)談到機(jī)構(gòu)大數(shù)據(jù)項(xiàng)目是一個(gè)系統(tǒng)工程。其原因是我們發(fā)現(xiàn)大數(shù)據(jù)業(yè)務(wù)做得好的機(jī)構(gòu)，其大數(shù)據(jù)推進(jìn)過程中涉及的面不僅包括業(yè)務(wù)、數(shù)據(jù)、運(yùn)營(yíng)和技術(shù)，還包括管理、組織結(jié)構(gòu)、機(jī)構(gòu)工作文化和團(tuán)隊(duì)建設(shè)問題。這其實(shí)是對(duì)一個(gè)機(jī)構(gòu)的綜合整合能力的考驗(yàn)!

這里我想通過分析兩個(gè)案例來說明我的觀察和觀點(diǎn)：

案例一：某知名電商，通過多年的自身投入和并購(gòu)累計(jì)了大量的經(jīng)驗(yàn)和人才，其大數(shù)據(jù)已可有效支撐電子商務(wù)的很多關(guān)鍵業(yè)務(wù)，如精準(zhǔn)營(yíng)銷(SEO, SEM, DSP投放)、會(huì)員營(yíng)銷、聯(lián)盟營(yíng)銷、站內(nèi)搜索和商品管理等，但是運(yùn)行起來依舊存在很多問題。筆者經(jīng)過調(diào)研發(fā)現(xiàn)，公司管理層面存在大數(shù)據(jù)團(tuán)隊(duì)建設(shè)重疊(內(nèi)部就總監(jiān)級(jí)別帶領(lǐng)的大數(shù)據(jù)團(tuán)隊(duì)就有三個(gè)，而這三個(gè)團(tuán)隊(duì)的總監(jiān)并無密切合作);IT落地未能閉合核心數(shù)據(jù)鏈(公司投資數(shù)百萬在國(guó)際知名軟件廠家產(chǎn)品基礎(chǔ)上搭建的相關(guān)產(chǎn)品推薦也存在嚴(yán)重實(shí)施缺陷);電商核心業(yè)務(wù)KPI所需的職責(zé)界定和人員投入反倒顯得很不充分。筆者在這個(gè)案例里發(fā)現(xiàn)的很多問題涉及的是企業(yè)文化、管理、運(yùn)營(yíng)相關(guān)的組織結(jié)構(gòu)和團(tuán)隊(duì)建設(shè)問題，和前面兩部分討論的業(yè)務(wù)體系能力和技術(shù)能力并無太大關(guān)系?，F(xiàn)在看來該電商高額的投入由于自身整合能力的問題并未及時(shí)獲得應(yīng)有的產(chǎn)出，在電商戰(zhàn)場(chǎng)上最終喪失了很多機(jī)會(huì)。

案例二：這是一個(gè)有點(diǎn)黑色幽默的成功案例：某新興媒體公司化重金從某傳統(tǒng)互聯(lián)網(wǎng)公司挖了兩個(gè)關(guān)鍵人物，搭建自己的技術(shù)和運(yùn)營(yíng)體系。系統(tǒng)上線后，各種原因，不盡人意。矛盾焦點(diǎn)聚焦在這兩個(gè)技術(shù)運(yùn)營(yíng)大牛身上。CEO在平衡了各方意見后狠心裁掉了這兩個(gè)高薪大牛。在大牛離職后幾個(gè)月時(shí)間里，在沒有主要更新升級(jí)的情況下，目標(biāo)業(yè)務(wù)數(shù)據(jù)開始越來越好：大牛們搭建大數(shù)據(jù)解決方案效果開始凸顯!CEO方知自己過于急躁，錯(cuò)失良將。大數(shù)據(jù)這條路雖然充滿魅力，但有時(shí)候需要的是多一點(diǎn)的耐心和契合實(shí)際的期望值!

涉及到管理、組織結(jié)構(gòu)調(diào)整和機(jī)構(gòu)文化團(tuán)隊(duì)建設(shè)的機(jī)構(gòu)整合能力，是促成機(jī)構(gòu)大數(shù)據(jù)項(xiàng)目起飛的重要因素。其需要的不光是大數(shù)據(jù)團(tuán)隊(duì)的努力，相關(guān)管理團(tuán)隊(duì)的正確認(rèn)知和支持也是大數(shù)據(jù)項(xiàng)目成敗的重要因素。

結(jié)束語

大數(shù)據(jù)雖然像青少年的“sex life”，充滿魅力和迷惑挑戰(zhàn)，但也是機(jī)構(gòu)和企業(yè)必須面對(duì)和經(jīng)歷的歷程。大數(shù)據(jù)之路對(duì)機(jī)構(gòu)和企業(yè)來說是一種需要集體信念支撐的選擇。筆者認(rèn)為機(jī)構(gòu)無論自身業(yè)務(wù)、技術(shù)和整合能力現(xiàn)階段如何，只要能真正根據(jù)自身發(fā)展階段，制定適合自己的相對(duì)長(zhǎng)期大數(shù)據(jù)發(fā)展策略，設(shè)定現(xiàn)實(shí)可實(shí)現(xiàn)的“小目標(biāo)”，小步快跑，進(jìn)入大數(shù)據(jù)業(yè)務(wù)發(fā)展的正向軌道，則一定能夠到達(dá)勝利的彼岸， 迎來屬于自己的大數(shù)據(jù)春天