阻礙大數(shù)據(jù)成功的常見問題

缺乏熟練的數(shù)據(jù)專業(yè)人員（例如資源和內(nèi)部技術(shù)能力）是很多企業(yè)面臨最大的問題，此外，還缺乏高價值的商業(yè)案例。如今，為了收集大數(shù)據(jù)狀態(tài)的見解，行業(yè)媒體與來自20家企業(yè)的22位高管進(jìn)行了交流，他們主要從事大數(shù)據(jù)工作，或為客戶提供大數(shù)據(jù)解決方案。

當(dāng)人們問：“你們認(rèn)為阻止企業(yè)獲得大數(shù)據(jù)的好處的最常見的問題是什么？”以下是這些高管給出的答案：相信如果企業(yè)建立一個大數(shù)據(jù)湖，其結(jié)果變得明顯。數(shù)據(jù)管理是一個問題。計劃預(yù)期成果和企業(yè)想要實現(xiàn)的見解。思考如何進(jìn)行更多的高級分析。使用正確的工具作業(yè)。確定要在數(shù)據(jù)倉庫中使用的內(nèi)容。企業(yè)不了解業(yè)務(wù)層面的大數(shù)據(jù)。他們沒有確定他們需要解決的業(yè)務(wù)問題，了解什么是正常工作，以及可以做些什么來增加價值。

一半的IT項目正在整合應(yīng)用程序。獲取訪問權(quán)限如何清理和應(yīng)用數(shù)據(jù)治理，看到兩個整合，以及有能力外包的廠商？雖然平臺的訪問費用較低，hadoop和Cassandra的進(jìn)入障礙可能很高。

需要對不同的格式進(jìn)行歸一化，收集，洞察，標(biāo)記，并采用可搜索的格式。

一個常見的問題是簡單地低估了實現(xiàn)一個功能齊全的大數(shù)據(jù)系統(tǒng)的難度。還有很多其他的工具也會讓企業(yè)開始，很多開放源碼是偉大的沙盒，但對于生產(chǎn)級大數(shù)據(jù)系統(tǒng)是完全不同的。隨著業(yè)務(wù)需求的變化，保持系統(tǒng)的運行和發(fā)展是另一個重大挑戰(zhàn)。人們一再聽到同樣的故事，他們了解大數(shù)據(jù)解決方案，并說：“感謝這個想法，我們有一些大數(shù)據(jù)體驗，我們認(rèn)為自己也可以建立。”通常，這些團(tuán)隊在幾個月后將會表示，這比我們想像的還要難。

能夠動態(tài)地連接不同的來源，盡可能地保持工作的進(jìn)程，使他們能夠?qū)Ｗ⒂诟邔哟蔚幕顒?。?fù)雜性加劇了整合和實施數(shù)據(jù)所需的技能。嘗試將所有數(shù)據(jù)集中在一起，以便企業(yè)可以更改訪問數(shù)據(jù)的80:20比例，并分析其數(shù)據(jù)。企業(yè)找不到需要查找的數(shù)據(jù)，因為它有太多的數(shù)據(jù)。有些文件名是神秘的，害怕給人們訪問數(shù)據(jù)，因為不知道數(shù)據(jù)是什么。企業(yè)需要攝取，編目和查找數(shù)據(jù)。

慣性。沒有開始

由公司的能力而異。對大數(shù)據(jù)集群的認(rèn)知是10到50個，只有少數(shù)幾個客戶擁有數(shù)千個節(jié)點。開始運行并及時了解版本，而工具的標(biāo)準(zhǔn)化成為額外的工作。文化。大公司受益于大數(shù)據(jù)分析，擺脫項目必須成功的假設(shè)，允許失敗和學(xué)習(xí)，允許迭代和實驗。像西門子和菲利普斯這樣的創(chuàng)新領(lǐng)導(dǎo)者可以向業(yè)務(wù)團(tuán)隊展示當(dāng)允許失敗時可以獲得多大的成功。固定特定技術(shù)。確定正在嘗試解決什么問題，并準(zhǔn)備隨著時間推移。擁有合適的人選。人才問題很大。企業(yè)必須有合格的候選人。數(shù)據(jù)科學(xué)家必須保持技術(shù)前沿，知道哪些工具正在發(fā)展以解決問題。

他們需要指導(dǎo)。生態(tài)系統(tǒng)正在迅速發(fā)展，企業(yè)必須處于不利地位，才能知道問題的最佳解決方案。Spark需要從存儲密集型到計算密集型的不同架構(gòu)。對于具有傳統(tǒng)系統(tǒng)的傳統(tǒng)企業(yè)而言更為困難。他們傾向于更加緩慢而有條不紊地采取行動。行業(yè)廠商為銀行和保健公司創(chuàng)建了一個商業(yè)價值顧問團(tuán)隊。有客戶設(shè)定具體目標(biāo)（即減少4％的流失）達(dá)到或超過目標(biāo)，然后轉(zhuǎn)到下一個項目。開源的速度對大多數(shù)人來說是壓倒性的。企業(yè)需要知道接下來會發(fā)生什么，所以可以相應(yīng)地進(jìn)行規(guī)劃。行業(yè)廠商正在推動開放標(biāo)準(zhǔn)，使客戶更加靈活，擁有更多技能和便攜性的市場。在云計算和本地的大數(shù)據(jù)方面保證靈活性。

缺乏資源和內(nèi)部的技術(shù)能力。每個人都需要了解人們在自己的網(wǎng)站和博客上做了什么。有幾個好產(chǎn)品可以告訴你這些事情，比如MixPanel和Google Analytics（谷歌分析），而不再需要數(shù)據(jù)科學(xué)家的幫助。存在于孤島的數(shù)據(jù)：太難以及時并入并提取有意義的見解。存儲和忘記大數(shù)據(jù)的方法：沒有明確的分析大數(shù)據(jù)的策略來實現(xiàn)業(yè)務(wù)收益。技能缺口：大數(shù)據(jù)系統(tǒng)/工具太復(fù)雜，無法用于大多數(shù)員工。收集涉及特定個人行為的數(shù)據(jù)時，擔(dān)心法律問題。在B2B中，這是一個真正的關(guān)注點。“數(shù)據(jù)足夠好”的問題總是發(fā)揮作用。這是一個有效的關(guān)注，但是沒有做任何事情都沒有回答這個問題。。如果你失敗了，就會知道你的數(shù)據(jù)收集應(yīng)該在哪里改善。企業(yè)明白可以應(yīng)用的用例，但它是一種新型的項目，目前還沒有很多系統(tǒng)集成商可以支持它們。

無法界定明確的業(yè)務(wù)目標(biāo)。獲得具有技能的人實現(xiàn)目標(biāo)。沒有足夠的人擁有提供大型數(shù)據(jù)項目所需的知識和經(jīng)驗。軟件工程師不僅要了解概念和可能性，還要了解如何提供。人們經(jīng)常認(rèn)為他們需要數(shù)據(jù)科學(xué)家，但他們需要產(chǎn)品所有者，數(shù)據(jù)工程團(tuán)隊，數(shù)據(jù)科學(xué)家等等。