大數(shù)據(jù)引發(fā)的新挑戰(zhàn)_數(shù)據(jù)分析師培訓(xùn)

到2015年，數(shù)據(jù)的增長量可能是現(xiàn)在的24倍，不管是CIO還是IT服務(wù)商都需要重新思考IT的新挑戰(zhàn)。

    全球的經(jīng)濟(jì)正在發(fā)生著深層次的轉(zhuǎn)型。在未來的10～15年的時(shí)間里，全球大概有30億人將富裕起來。這意味著像中國這樣在過去20年當(dāng)中的一個(gè)世界的制造中心，正在轉(zhuǎn)型成為世界上最大的消費(fèi)市場，新型經(jīng)濟(jì)體將持續(xù)成為全球經(jīng)濟(jì)發(fā)展的一個(gè)重要動力來源。企業(yè)必須挑戰(zhàn)包括供應(yīng)鏈管理、產(chǎn)業(yè)鏈管理、上下游企業(yè)之間的關(guān)系、以及如何應(yīng)對倉儲、物流的變化等轉(zhuǎn)型。與此同時(shí)，企業(yè)面臨的一個(gè)變化是“大數(shù)據(jù)的爆發(fā)”，數(shù)據(jù)在企業(yè)和整個(gè)商業(yè)世界中發(fā)揮的作用和產(chǎn)生的能量發(fā)生了質(zhì)的變化。
    在2012年IBM舉行的對全球企業(yè)CEO持續(xù)調(diào)研中，1709位領(lǐng)導(dǎo)者給予了我們3個(gè)重要的反饋：第一，必須產(chǎn)生新的人才戰(zhàn)略，以價(jià)值體系激勵員工。舊的管理制度已經(jīng)淘汰，員工所擁有的交流平臺發(fā)生了根本的變化。企業(yè)能否提供更加開放、互相協(xié)作的交流平臺正在愈發(fā)決定了企業(yè)內(nèi)部管理的順暢度。第二，企業(yè)上下游之間、供應(yīng)鏈上的關(guān)系正在發(fā)生較大的變化。必須創(chuàng)建廣泛的伙伴關(guān)系，以協(xié)作促進(jìn)創(chuàng)新。第三，在CEO認(rèn)為的對企業(yè)發(fā)展最重大意義的外部因素中，“技術(shù)”首次被提到了第一位。企業(yè)唯有建立必備的分析洞察能力，才能以個(gè)性化的服務(wù)贏得客戶。數(shù)據(jù)、技術(shù)正在引領(lǐng)著企業(yè)轉(zhuǎn)型，產(chǎn)生新的價(jià)值，為企業(yè)開拓新的市場。從“開源節(jié)流”的角度來講，技術(shù)更多地被企業(yè)理解成為一個(gè)節(jié)流的方式和輔助手段，如何整合內(nèi)部系統(tǒng)和資源，如何能夠更好地管控自己的企業(yè)，如何降低成本、管理好上下游產(chǎn)業(yè)鏈，大數(shù)據(jù)正在為企業(yè)帶來更多的機(jī)會。
   到2015年，數(shù)據(jù)的增長量可能是現(xiàn)在的24倍。信息量在急劇膨脹，信息的性質(zhì)也隨之而改變。我們預(yù)測，所增加的信息絕大部分來源于物聯(lián)網(wǎng)、傳感器、社交網(wǎng)絡(luò)以及語音數(shù)據(jù)等。伴隨著數(shù)據(jù)量的增長，企業(yè)的新挑戰(zhàn)油然而生。首先是數(shù)據(jù)量巨大，數(shù)據(jù)處理規(guī)模正在從TB級增長到EB級；其次，在速度上，數(shù)據(jù)不僅成批量地產(chǎn)生，而且呈流狀涌現(xiàn)。
    因此，商業(yè)智能分析企業(yè)必須實(shí)現(xiàn)數(shù)據(jù)處理的實(shí)時(shí)性，在幾秒甚至幾毫秒內(nèi)做出反應(yīng)。同時(shí)，企業(yè)要思考全新的IT問題，例如：非結(jié)構(gòu)化數(shù)據(jù)與傳統(tǒng)業(yè)務(wù)系統(tǒng)產(chǎn)生的關(guān)系性數(shù)據(jù)之間是怎樣的關(guān)系？是否需要從業(yè)務(wù)角度出發(fā)，進(jìn)行融合及整合等等。數(shù)據(jù)倉庫當(dāng)中的模型有沒有新的變化？語境的搜索、數(shù)據(jù)生命周期的管理、安全性的管理等等。這些都是需要企業(yè)考慮和解決的問題。
    以往，企業(yè)數(shù)據(jù)的含金量很高，即一個(gè)企業(yè)存下來的數(shù)據(jù)都是經(jīng)過思考的，要存什么數(shù)據(jù)，數(shù)據(jù)存儲以后有什么作用，用何種工具進(jìn)行分析，都是預(yù)先想好的，所以留下來的數(shù)據(jù)極其有用，含金量高。但對于淘寶等電商平臺而言，所存儲的是各式各樣非結(jié)構(gòu)化數(shù)據(jù)，這之中有很多是沒有價(jià)值的，“含金量”成為一個(gè)必須探討的問題。
    當(dāng)數(shù)據(jù)的含金量急劇下降時(shí)，如何應(yīng)對這個(gè)挑戰(zhàn)，這對硬件、軟件處理的能力提出了怎樣的新需求？另外，如何構(gòu)建一個(gè)平臺使用戶無需關(guān)注技術(shù)上的細(xì)節(jié)？咨詢、服務(wù)、硬件、軟件，各方面整合起來的能力將是一個(gè)廠商能否足夠解決大數(shù)據(jù)問題的關(guān)鍵所在。文章來源：CDA數(shù)據(jù)分析師官網(wǎng)