大思維促大數(shù)據(jù)戰(zhàn)略

你一定知道，所有的數(shù)字都是數(shù)據(jù)。如今的硬件和軟件已不能應(yīng)對(duì)以如此高速產(chǎn)生的形式多樣的海量數(shù)據(jù)。大數(shù)據(jù)變得如此復(fù)雜，其變化如此迅速，傳統(tǒng)的數(shù)據(jù)工具已難以對(duì)之進(jìn)行處理、存儲(chǔ)、分析和管理。數(shù)據(jù)量如此之大，以致問對(duì)問題和找對(duì)答案跟大海撈針一樣困難。

幸運(yùn)的是，用現(xiàn)有的硬件、工具和算法能將所有數(shù)據(jù)轉(zhuǎn)化為有用的信息。從這些信息中提|煉出的洞見能用來改善你所在組織的決策，提高其效率，降低其成本并增加收入。大數(shù)據(jù)革|命帶來了廣泛的影響，并且會(huì)遍及各行業(yè)的所有企業(yè)。

大數(shù)據(jù)的七個(gè)V

有一點(diǎn)是公認(rèn)的，即大數(shù)據(jù)可以用三個(gè)“V”來解釋：速度（velocity）、種類（variety）和數(shù)量（volume）。不過，筆者還想加入真實(shí)性（veracity）、可變性（variability）、可視化（visualization）和價(jià)值（value）的概念，以更好地解釋精心計(jì)劃過的大數(shù)據(jù)戰(zhàn)略。

速度：速度是指數(shù)據(jù)產(chǎn)生、存儲(chǔ)、分析和形象化的速度。當(dāng)前數(shù)據(jù)的生成速度幾乎超出我們的想象：每分鐘，我們向YouTube上傳的視頻總時(shí)長達(dá)到100小時(shí)。此外，人們每分鐘發(fā)送超過2億份電子郵件，查看約2,000萬張照片，并將3萬張照片上傳到Flickr相冊(cè)，發(fā)送近30萬條推特消息，谷歌每分鐘處理近250萬次請(qǐng)求。

多樣性：過去所有的數(shù)據(jù)都是結(jié)構(gòu)化的，可以很容易地進(jìn)行歸類，不過這種情況已經(jīng)一去不復(fù)返了。如今，90%的數(shù)據(jù)都是非結(jié)構(gòu)化的。數(shù)據(jù)可以有許多不一樣的格式，包括結(jié)構(gòu)化、半結(jié)構(gòu)化、非結(jié)構(gòu)化，甚至是復(fù)雜結(jié)構(gòu)化的數(shù)據(jù)。

每一類型的數(shù)據(jù)都需要配以不同類型的分析法和解讀工具。像臉書（Facebook）或推特（Tweet）這樣的社交媒體可以提供深入的見解，讓你了解客戶對(duì)企業(yè)的品牌、服務(wù)或產(chǎn)品的看法，而傳感器數(shù)據(jù)提供的信息則是用戶對(duì)產(chǎn)品或機(jī)器的使用情況，讓你獲得可用于改進(jìn)產(chǎn)品的洞見。

數(shù)量：按照如今數(shù)據(jù)產(chǎn)生的速度，每兩年數(shù)據(jù)量就能翻上一倍。在2011年，我們創(chuàng)造的數(shù)據(jù)總量令人咂舌，共有1.8ZB。而根據(jù)IDC在2011年的研究，到了2020年這一數(shù)字將是現(xiàn)在的50倍。這個(gè)數(shù)量是相當(dāng)可觀的，而這個(gè)數(shù)字宇宙中相當(dāng)大的一個(gè)數(shù)據(jù)來源就是物聯(lián)網(wǎng)，物聯(lián)網(wǎng)在世界各地各種設(shè)備上安裝的傳感器每分每秒都在傳輸數(shù)據(jù)。

讓我們來看一些例子。飛機(jī)在引擎上安裝的傳感器每年會(huì)產(chǎn)生約25億TB的數(shù)據(jù)。而安裝在農(nóng)業(yè)拖拉機(jī)上的傳感器也會(huì)產(chǎn)生和采集大量數(shù)據(jù)。約翰迪爾公司（John Deere）使用傳感器數(shù)據(jù)來監(jiān)控機(jī)械的優(yōu)化，控制日益壯大的農(nóng)機(jī)隊(duì)伍，并且?guī)椭r(nóng)產(chǎn)業(yè)者優(yōu)化決策。殼牌（Shell）也在油井中使用高靈敏度傳感器來尋找更多的油，如果公司在所有1萬口油井中安裝這種傳感器，每年大約會(huì)采集10EB的數(shù)據(jù)。

真實(shí)性：如果數(shù)據(jù)本身存在缺陷，那么即使采集高速產(chǎn)生的大量數(shù)據(jù)也毫無價(jià)值。不正確的數(shù)據(jù)可導(dǎo)致組織乃至消費(fèi)者面臨嚴(yán)重的問題。如果你希望組織能夠以信息為中心，那么就需要確保你的數(shù)據(jù)和分析法都正確無誤。在進(jìn)行自動(dòng)化決策時(shí)，這一條尤其關(guān)鍵，因?yàn)檎麄€(gè)過程不再有人的參與。但令人震驚的是，企業(yè)領(lǐng)導(dǎo)者有三分之一不相信他們用來做決策的信息。所以，如果你想要制定大數(shù)據(jù)戰(zhàn)略，就需要高度注重?cái)?shù)據(jù)的正確性以及分析的準(zhǔn)確度。

可變性：可變性往往會(huì)與多樣性的概念相混淆。我們可以舉個(gè)例子說明它們之間的區(qū)別。如果面包店銷售十種不同的面包，這就是多樣性。如果同一種面包每天的口感和香味都不一樣，那就是可變性。在進(jìn)行情感分析時(shí)，可變性與主題的關(guān)聯(lián)非常密切。

可變性意味著定義會(huì)（迅速）改變。在類似的推特消息中，同一個(gè)詞可能會(huì)有截然不同的含義。要想正確地進(jìn)行情感分析，所用的算法必須能夠根據(jù)上下文解讀一個(gè)詞的準(zhǔn)確含義。不過，這一點(diǎn)目前仍然是一個(gè)亟待解決的技術(shù)難題。

可視化：這是大數(shù)據(jù)中比較難辦的部分。這表示你需要幫助受眾以容易閱讀和理解的方式了解大量的數(shù)據(jù)。經(jīng)過正確的可視化操作后，原始數(shù)據(jù)就可以發(fā)揮作用。當(dāng)然，這里說的可視化并不等于普通的圖表或餅狀圖，而是包含多種數(shù)據(jù)變量的復(fù)雜圖表，同時(shí)又易于人們閱讀和理解。

可視化或許不是技術(shù)上難度最大的任務(wù)，但肯定是最具挑戰(zhàn)性的。使用圖表來解說一個(gè)復(fù)雜的故事很有難度，但同樣也極為重要。幸運(yùn)的是，越來越多的大數(shù)據(jù)初創(chuàng)公司專注于解決這個(gè)領(lǐng)域的挑戰(zhàn)。歸根結(jié)底，可視化能發(fā)揮關(guān)鍵的作用，并且它能幫助提高可讀性。

價(jià)值：所有可用數(shù)據(jù)都能為組織、社群和消費(fèi)者創(chuàng)造大量的價(jià)值。大數(shù)據(jù)意味著大量業(yè)務(wù)，各行各業(yè)都能從中有所收益。當(dāng)然，數(shù)據(jù)本身完全沒有價(jià)值。其價(jià)值存在于根據(jù)數(shù)據(jù)完成的分析以及如何將數(shù)據(jù)轉(zhuǎn)化為信息，從而最終變成知識(shí)和智慧。數(shù)據(jù)的價(jià)值在于組織如何使用它們來創(chuàng)造以信息為中心的公司，根據(jù)數(shù)據(jù)分析得出的洞見進(jìn)行決策。

關(guān)于大數(shù)據(jù)的五個(gè)事實(shí)

現(xiàn)在我們已經(jīng)對(duì)大數(shù)據(jù)進(jìn)行了定義，你需要了解你的組織在制定大數(shù)據(jù)戰(zhàn)略時(shí)，應(yīng)當(dāng)注意到其中哪些方面最重要。大數(shù)據(jù)需要對(duì)范式進(jìn)行轉(zhuǎn)變，理解這一點(diǎn)能幫助你的組織在利用大數(shù)據(jù)方面取得進(jìn)展。

1、大數(shù)據(jù)需要不一樣的企業(yè)文化。要想真正發(fā)揮大數(shù)據(jù)的作用，你的組織需要成為以信息為中心的公司。

這種文化上的轉(zhuǎn)變能讓企業(yè)更注重在數(shù)據(jù)的推動(dòng)下進(jìn)行決策，并讓你的員工有機(jī)會(huì)基于真實(shí)的數(shù)據(jù)而非估算結(jié)果來開發(fā)新的運(yùn)營、戰(zhàn)術(shù)和戰(zhàn)略計(jì)劃。利用大數(shù)據(jù)的企業(yè)文化要求公司鼓勵(lì)員工在每一個(gè)客戶接觸點(diǎn)上采集數(shù)據(jù)。他們需要詢問正確的問題，并以精確的數(shù)據(jù)作答。

2、組織內(nèi)的人才是大數(shù)據(jù)背后真正的驅(qū)動(dòng)因子。盡管文化上的轉(zhuǎn)變對(duì)于充分發(fā)揮大數(shù)據(jù)的潛力很重要，大數(shù)據(jù)戰(zhàn)略的開發(fā)卻是由組織內(nèi)的人完成的。尤其是，中層經(jīng)理人和高管應(yīng)當(dāng)明白大數(shù)據(jù)是什么，以及如何將其應(yīng)用到組織上。如果有更多的決策者意識(shí)到大數(shù)據(jù)的好處，就更有可能制定和實(shí)施成功的大數(shù)據(jù)戰(zhàn)略。

要開始成功開發(fā)大數(shù)據(jù)，首先要在組織內(nèi)找到正確的發(fā)起人，尤其是在初期回報(bào)不確定和成本高居不下時(shí)更是如此。最理想的做法就是發(fā)動(dòng)一位高級(jí)管理者或董事會(huì)成員，因?yàn)檫@些人在最初結(jié)果不利的情況下，也有足夠的權(quán)力支持大數(shù)據(jù)項(xiàng)目。

3、大數(shù)據(jù)確實(shí)需要“大”的安全措施。如果一個(gè)組織聚集了大量寶貴數(shù)據(jù)，就需要保護(hù)這些信息免遭不法分子的盜用。因此保護(hù)搜集來的所有數(shù)據(jù)有著極為重要的意義。要保護(hù)你的數(shù)據(jù)，有許多種方法，最常見的是對(duì)信息進(jìn)行正確加密。當(dāng)然，其他的方法也很多，所以你的大數(shù)據(jù)團(tuán)隊(duì)?wèi)?yīng)始終將數(shù)據(jù)的安全性當(dāng)作自己的一項(xiàng)責(zé)任。

不過，每個(gè)組織還是應(yīng)當(dāng)事先準(zhǔn)備應(yīng)急預(yù)案，以防數(shù)據(jù)真的被黑客盜取。出人意料的是，許多公司在遇到與計(jì)算機(jī)相關(guān)的信息安全事件時(shí)完全不知所措。這種安全事件可以給企業(yè)帶來災(zāi)難性的后果。如果公司缺乏必要的安全手段，甚至連被黑客入侵了都沒發(fā)覺，那么后果就更加嚴(yán)重了。

因此，公司應(yīng)當(dāng)委派內(nèi)部人員或使用專門的外部機(jī)構(gòu)的服務(wù)，針對(duì)潛在的信息安全襲擊擬定應(yīng)急預(yù)案。如果公司對(duì)組織和客戶的數(shù)據(jù)不加保護(hù)，那遲早會(huì)關(guān)門大吉。如果未雨綢繆了，情況又會(huì)大不一樣。

4、世界各地的政府正加緊在大數(shù)據(jù)上的投入。與組織一樣，政府也在產(chǎn)生越來越多的數(shù)據(jù)。許多政府也在進(jìn)行數(shù)字化的轉(zhuǎn)型。以荷蘭為例，該國政府希望全面轉(zhuǎn)型數(shù)字化辦公，并在2017年底徹底淘汰紙質(zhì)通信。想象一下，1,700萬公民在跟國家、地區(qū)和縣市各級(jí)政府通信時(shí)可以產(chǎn)生多少數(shù)據(jù)？

隨著這種方案的出現(xiàn)，組織也能夠更廣泛地接觸到公共數(shù)據(jù)集，從而引發(fā)人們針對(duì)世界各地的問題提出創(chuàng)新性的解決方案。私營領(lǐng)域啟動(dòng)的數(shù)據(jù)集項(xiàng)目也越來越多。這種為組織搜集公共和私營數(shù)據(jù)集的行為已經(jīng)形成了市場(chǎng)。用戶能以訪客身份購買數(shù)據(jù)集或是免費(fèi)下|載。在某些網(wǎng)站上，還有組織出|售他們自己的數(shù)據(jù)集。

5、大數(shù)據(jù)的關(guān)鍵并不在于數(shù)據(jù)的量。人們通常認(rèn)為“大數(shù)據(jù)”這個(gè)詞表示大量的數(shù)據(jù)。結(jié)果，許多人認(rèn)為大數(shù)據(jù)戰(zhàn)略只有在你擁有PB或EB級(jí)別的數(shù)據(jù)時(shí)才有用。這是不對(duì)的。大數(shù)據(jù)遠(yuǎn)遠(yuǎn)不只是收集來的大量數(shù)據(jù)。大數(shù)據(jù)更主要的是組合不同來源、不同時(shí)間的不同變量的數(shù)據(jù)集。特別是組合并隨之分析不同的數(shù)據(jù)集，從中找到有價(jià)值的新洞見。

此外，大數(shù)據(jù)指的是對(duì)可用的數(shù)據(jù)進(jìn)行實(shí)時(shí)分析，并利用各種算法來預(yù)測(cè)行為。實(shí)時(shí)的洞見對(duì)于組織來說是十分寶貴的，可以讓組織預(yù)知客戶在短期內(nèi)的行為。