大數(shù)據(jù)時(shí)代下是數(shù)據(jù)思維重要，還是相應(yīng)技術(shù)重要

技術(shù)做到一定程度，逐步發(fā)現(xiàn)自己的瓶頸。不由得開始思考這一方面的問題！到底大數(shù)據(jù)時(shí)代下，是相應(yīng)的數(shù)據(jù)分析技術(shù)重要，還是相應(yīng)數(shù)據(jù)思維重要？

先來說數(shù)據(jù)思維吧！什么是大數(shù)據(jù)思維，個(gè)人感覺應(yīng)該是互聯(lián)網(wǎng)思維的一種。是考慮到全面，而不是局部。是考慮到多維，而不是單一維度。不是靠拍腦門做決定，而是讓數(shù)據(jù)說話，用數(shù)據(jù)做決策。

先說第一點(diǎn)，考慮全面，而不是局部。眾所周知，移動(dòng)互聯(lián)網(wǎng)催生了大數(shù)據(jù)的產(chǎn)生。每一個(gè)人每一天通過手機(jī)能夠的數(shù)據(jù)總和會(huì)是一個(gè)巨大的量。而通過這些非結(jié)構(gòu)化的數(shù)據(jù)，我們首先面對(duì)的是如何處理這些數(shù)據(jù)，這里就涉及到數(shù)據(jù)的存儲(chǔ)，讀取的問題。由于數(shù)據(jù)的非結(jié)構(gòu)化。傳統(tǒng)的處理技術(shù)將不能夠很好的起到作用。不是我們單一抽取幾個(gè)用戶的數(shù)據(jù)加以統(tǒng)計(jì)就可以預(yù)測(cè)出大量用戶的行為。這里需要的全局的數(shù)據(jù)。首先，這一點(diǎn)是大數(shù)據(jù)相對(duì)于其他技術(shù)的第一點(diǎn)不同。

再來說第二點(diǎn)，考慮多維，而不是單一維度。大家都有目共睹，現(xiàn)在的廣告已經(jīng)開始基于我們的瀏覽時(shí)長(zhǎng)而進(jìn)行二次推薦。而在進(jìn)行多維分析后，將不再只關(guān)注用戶的瀏覽數(shù)據(jù)，而相應(yīng)的會(huì)有用戶的文本信息，好友評(píng)論，已購(gòu)買產(chǎn)品信息，用卡頻次.....當(dāng)將用戶數(shù)據(jù)進(jìn)行多個(gè)維度的整合分析后，就可以做到精準(zhǔn)營(yíng)銷。從而打破傳統(tǒng)一維營(yíng)銷的被動(dòng)宣傳不叫好的特點(diǎn)。

最后再看第三點(diǎn)，讓數(shù)據(jù)說話，用數(shù)據(jù)做決策。在這里不得不提一個(gè)軟件R,傳統(tǒng)行業(yè)的業(yè)務(wù)統(tǒng)計(jì)大部分是靠它完成，但他的數(shù)據(jù)呈現(xiàn)有一點(diǎn)的局限。當(dāng)我們將一些數(shù)據(jù)以圖表的形式展現(xiàn)在領(lǐng)導(dǎo)面前時(shí)，我們就可以根據(jù)這些數(shù)據(jù)做新一年的年度規(guī)劃。而不至于拍腦門做決定。而且現(xiàn)在數(shù)據(jù)可視化的應(yīng)用也是非常的多，現(xiàn)實(shí)的應(yīng)用也展現(xiàn)了相應(yīng)的價(jià)值。

說完了上面三點(diǎn)，再來說一說大數(shù)據(jù)技術(shù)。

首先必提的是Hadoop，這樣一個(gè)分布式的存儲(chǔ)現(xiàn)在已經(jīng)在大部分企業(yè)應(yīng)用，而它的分布式存儲(chǔ)又將用戶的讀取時(shí)間縮短。而下一代技術(shù)Spark，也就相當(dāng)于從Hadoop的硬盤存放，轉(zhuǎn)而到了內(nèi)存存放。眾所周知，內(nèi)存的讀取速度會(huì)比硬盤快許多倍。

其次再要說的就是SAS與R，這兩個(gè)軟件都有各自的優(yōu)勢(shì)，SAS做為專業(yè)數(shù)據(jù)統(tǒng)計(jì)的軟件，可以說在大數(shù)據(jù)量時(shí)處理起來有顯著的優(yōu)點(diǎn)。但在超過1T數(shù)據(jù)量的情況下，它的優(yōu)勢(shì)就不再那么明顯。而R軟件在繪圖上有很大的優(yōu)勢(shì)，在數(shù)據(jù)可視化上有很重要的地位。但無奈，R軟件在統(tǒng)計(jì)上略遜色SAS一籌。而與SAS的同類軟件中，SPSS個(gè)人感覺在數(shù)據(jù)量小時(shí)會(huì)有很大的用途。

還有就是數(shù)據(jù)獲取，RCurl與相應(yīng)的爬蟲技術(shù)，而在大數(shù)據(jù)時(shí)期，各網(wǎng)站在反爬蟲方面勢(shì)必會(huì)做要應(yīng)的措施從而保護(hù)自身已有的數(shù)據(jù)。

還有就是ETL，這一點(diǎn)，個(gè)人感覺以后會(huì)在大數(shù)據(jù)落在時(shí)起到非常重要的地位。因?yàn)閲?guó)內(nèi)的數(shù)據(jù)大部分都需要清洗，就像我導(dǎo)師說過的一句話，在中國(guó)做大數(shù)據(jù)，最大的困難就是如何識(shí)別出假數(shù)據(jù)。用真實(shí)的數(shù)據(jù)才能分析出我們所要得到的結(jié)果。

好了，到此為止，以上就是自己學(xué)習(xí)到的大數(shù)據(jù)知識(shí)，分別在思維跟技術(shù)方面的認(rèn)識(shí)。但問題又回來了，對(duì)于企業(yè)來講，盈利是最基本的選擇，到底是選一個(gè)具備大數(shù)據(jù)思維的人還是一個(gè)會(huì)很多大數(shù)據(jù)技術(shù)的人？而對(duì)于自己來說，下一步的方向是繼續(xù)學(xué)習(xí)技術(shù)，還是掌握相應(yīng)的思維。

思維OR技術(shù)，或左或右？或都兩都需要融合，但話題又回來了，工作是很現(xiàn)實(shí)的問題，售前，咨詢，研發(fā)，架構(gòu)，實(shí)施，工程.......到底該如何選擇，抑或就不要選擇，先靜下心來學(xué)習(xí)，等到在職的學(xué)習(xí)畢業(yè)后再去選擇工作。

面對(duì)轉(zhuǎn)行，從通信培訓(xùn)行業(yè)向互聯(lián)網(wǎng)行業(yè)大數(shù)據(jù)的轉(zhuǎn)變，雖然不知前方道路如何，仍有些迷茫，但既然選擇前方，便只顧風(fēng)雨兼程，加油！