事實(shí)上，大數(shù)據(jù)無(wú)需白手起家_數(shù)據(jù)分析師

是時(shí)候從更高的視角來(lái)看待大數(shù)據(jù)了。大數(shù)據(jù)以及數(shù)據(jù)科學(xué)還在持續(xù)升溫，如何更好地利用大數(shù)據(jù)隱含的價(jià)值成為焦點(diǎn)話題。然而在不知不覺(jué)中，我們所關(guān)注的范圍變得越來(lái)越窄，比如如何存儲(chǔ)海量數(shù)據(jù)，如何用新的方式來(lái)分析數(shù)據(jù)，我們只關(guān)注技術(shù)而忽視了大數(shù)據(jù)以及數(shù)據(jù)科學(xué)在業(yè)務(wù)語(yǔ)境中所起到的作用。

如果想讓大數(shù)據(jù)和數(shù)據(jù)科學(xué)為我們更好地服務(wù)，我們就需要更廣闊的視角，比如：

大數(shù)據(jù)就只是數(shù)據(jù)而已，要處理好所有的數(shù)據(jù)，什么樣的技術(shù)是最佳的技術(shù)？
大數(shù)據(jù)只是拼圖游戲的一部分，要最終得到完美的圖畫(huà)，需要我們思考如何將大數(shù)據(jù)與現(xiàn)有分析系統(tǒng)緊密集成，從而得到最大產(chǎn)出。
大數(shù)據(jù)需要融入業(yè)務(wù)才能改善業(yè)務(wù)，我們?nèi)绾尾拍芾么髷?shù)據(jù)創(chuàng)造更好的產(chǎn)品與服務(wù)？

真假大數(shù)據(jù)

對(duì)大數(shù)據(jù)的狹隘思維主要來(lái)自于錯(cuò)誤的判斷。在技術(shù)方面，由于出現(xiàn)了包括Hadoop、NoSQL在內(nèi)的許多新一代大數(shù)據(jù)技術(shù)，于是人們開(kāi)始認(rèn)為，只要有了這些技術(shù)就可以讓數(shù)據(jù)管理變得簡(jiǎn)單許多。還有一部分人認(rèn)為，要利用這些新技術(shù)就必須把原有的技術(shù)拋開(kāi)，重新打造一個(gè)系統(tǒng)。

人們總是喜歡這樣孤立地思考大數(shù)據(jù)問(wèn)題，就比如說(shuō)數(shù)據(jù)科學(xué)家。前兩年有這樣一種說(shuō)法，即數(shù)據(jù)科學(xué)家是21世紀(jì)最性感的職業(yè)，就好像企業(yè)需要這么一個(gè)神奇的煉金術(shù)師，把紛繁復(fù)雜的信息提煉成價(jià)值連城的金塊。事實(shí)上，無(wú)論是數(shù)據(jù)科學(xué)家還是數(shù)據(jù)科學(xué)團(tuán)隊(duì)都不可以獨(dú)立于其他部門而自立門戶，因?yàn)橐浞掷斫鈽I(yè)務(wù)，他們就必須與企業(yè)其他部門的員工形成良性互動(dòng)。

大數(shù)據(jù)以及數(shù)據(jù)科學(xué)需要漸進(jìn)式的發(fā)展，無(wú)論新的技術(shù)還是新的流程，都要先融入到已有的系統(tǒng)當(dāng)中。也就是說(shuō)，推倒重來(lái)的做法是絕對(duì)錯(cuò)誤的，我們需要通過(guò)新的技術(shù)與方法來(lái)不斷改進(jìn)現(xiàn)有的分析模型，隨著數(shù)據(jù)的持續(xù)增長(zhǎng)來(lái)豐富這些模型。

對(duì)于大數(shù)據(jù)，你需要認(rèn)識(shí)到以下幾點(diǎn)事實(shí)，真假大數(shù)據(jù)就蘊(yùn)含其中：

• 與傳統(tǒng)數(shù)據(jù)不同，新類型的數(shù)據(jù)有著多種多樣的結(jié)構(gòu)，同時(shí)它的數(shù)據(jù)量是前所未有的
• 大數(shù)據(jù)中所包含的“信號(hào)”是非常少的，更多的是“噪聲”?？梢韵胂螅N售數(shù)據(jù)中所包含的價(jià)值是很大的，然而即使是上PB級(jí)的點(diǎn)擊流數(shù)據(jù)也不一定能夠提煉出這么大的價(jià)值。
• 新一代的技術(shù)需要更好的算法才能提供消費(fèi)者行為模式的洞察
• 像Hadoop這樣的新系統(tǒng)有著強(qiáng)大的存儲(chǔ)和處理能力，它為我們應(yīng)對(duì)大規(guī)模數(shù)據(jù)打開(kāi)了新的思路
• 更快的數(shù)據(jù)發(fā)現(xiàn)技術(shù)能讓分析團(tuán)隊(duì)在大數(shù)據(jù)中找到所要的信號(hào)
• 數(shù)據(jù)科學(xué)家和首席數(shù)據(jù)官需要具備數(shù)據(jù)分析，軟件開(kāi)發(fā)，統(tǒng)計(jì)學(xué)以及交互設(shè)計(jì)等多種能力

大數(shù)據(jù)無(wú)需白手起家

新的能力并不意味著我們要按下重啟鍵然后重新來(lái)過(guò)，我們?nèi)匀恍枰獜钠髽I(yè)應(yīng)用系統(tǒng)中獲取數(shù)據(jù)然后為業(yè)務(wù)構(gòu)建一個(gè)完整的結(jié)構(gòu)化模型。我們需要將信息作為資產(chǎn)妥善管理起來(lái)。我們需要控制數(shù)據(jù)的訪問(wèn)來(lái)保護(hù)隱私并確保合規(guī)。我們也需要讓人們能夠盡可能多地對(duì)想要的數(shù)據(jù)進(jìn)行探索。

換句話說(shuō)，大數(shù)據(jù)和數(shù)據(jù)科學(xué)家并不意味著我們要拋棄已經(jīng)建立起來(lái)的商業(yè)智能系統(tǒng)和規(guī)范。我們已經(jīng)知道如何把工作做得更好，現(xiàn)在只是在這一基礎(chǔ)上添加一些新的能力而已。

然而只有少數(shù)公司能滿足自身使用數(shù)據(jù)的狀況，只有三分之一不到的員工會(huì)用到BI工具。這其實(shí)還有很大的提升空間，啟動(dòng)一個(gè)大數(shù)據(jù)項(xiàng)目也不會(huì)立馬清除用戶利用數(shù)據(jù)的障礙。為了能夠取得進(jìn)展，我們需要試著回答兩個(gè)問(wèn)題：

• 我們?nèi)绾卫眯履芰?，把它們添加到已有系統(tǒng)中，然后創(chuàng)建新一代的數(shù)據(jù)架構(gòu)？
• 我們?nèi)绾我龑?dǎo)圍繞在大數(shù)據(jù)周圍的能量，然后實(shí)現(xiàn)真正的企業(yè)文化轉(zhuǎn)型？

對(duì)于大數(shù)據(jù)狹隘的思維總會(huì)忽略上面的兩個(gè)問(wèn)題。我們需謹(jǐn)記，大數(shù)據(jù)并不是一門技術(shù)那么簡(jiǎn)單，它有自己的概念（3個(gè)V），有獨(dú)特的用例，有自身的架構(gòu)，也有專門的人（數(shù)據(jù)科學(xué)家）來(lái)處理數(shù)據(jù)。大數(shù)據(jù)并不是一項(xiàng)運(yùn)動(dòng)，也不是企業(yè)內(nèi)部根深蒂固的思維，它代表的東西更多，我們需要站在更高的角度來(lái)看待大數(shù)據(jù)。