大數(shù)據(jù)面臨地問題與挑戰(zhàn)_數(shù)據(jù)分析師

幾大數(shù)據(jù)問題與挑戰(zhàn)仍不小
不過作為一個(gè)新生領(lǐng)域，盡管大數(shù)據(jù)意味著大機(jī)遇，擁有巨大的應(yīng)用價(jià)值，但同時(shí)也遭遇工程技術(shù)、管理政策、資金投入、人才培養(yǎng)等諸多領(lǐng)域的大挑戰(zhàn)。只有解決這些基礎(chǔ)性的挑戰(zhàn)問題，才能充分利用這個(gè)大機(jī)遇，讓大數(shù)據(jù)為企業(yè)為社會(huì)充分發(fā)揮的最大價(jià)值與貢獻(xiàn)。


    一、當(dāng)今大數(shù)據(jù)的運(yùn)用仍面臨多種技術(shù)難關(guān)的束縛。主要有大數(shù)據(jù)的去冗降噪技術(shù)；大數(shù)據(jù)的新型表示方法；高效率低成本的大數(shù)據(jù)存儲；大數(shù)據(jù)的有效融合；非結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù)的高效處理；適合不同行業(yè)的大數(shù)據(jù)挖掘分析工具和開發(fā)環(huán)境；大幅度降低數(shù)據(jù)處理、存儲和通信能耗的新技術(shù)等。這些技術(shù)問題目前都難于有效解決與完善。


    有些行業(yè)的數(shù)據(jù)涉及上百個(gè)參數(shù)，其復(fù)雜性不僅體現(xiàn)在數(shù)據(jù)樣本本身，更體現(xiàn)在多源異構(gòu)、多實(shí)體和多空間之間的交互動(dòng)態(tài)性，而當(dāng)前技術(shù)尚難以用傳統(tǒng)的方法描述與度量，處理的復(fù)雜度很大。


    二、全社會(huì)開放與共享數(shù)據(jù)還很難，這讓數(shù)據(jù)質(zhì)量大打折扣。數(shù)據(jù)增值的關(guān)鍵在于整合，但自由整合的前提是數(shù)據(jù)的開放。在大數(shù)據(jù)的時(shí)代，開放數(shù)據(jù)的意義，不僅僅是滿足公民的知情權(quán)，更在于讓大數(shù)據(jù)時(shí)代最重要的生產(chǎn)資料、生活數(shù)據(jù)自由地流動(dòng)起來，準(zhǔn)確全面應(yīng)用起來，以推動(dòng)知識經(jīng)濟(jì)和網(wǎng)絡(luò)經(jīng)濟(jì)的發(fā)展，促進(jìn)中國的經(jīng)濟(jì)增長由粗放型向精細(xì)型轉(zhuǎn)型升級。然而戰(zhàn)略觀念上的缺失、政府機(jī)構(gòu)協(xié)調(diào)困難、企業(yè)對數(shù)據(jù)共享的認(rèn)識不足及投入不夠、科學(xué)家對大數(shù)據(jù)的渴望無法滿足等都是大數(shù)據(jù)在當(dāng)前我國發(fā)展應(yīng)用中不得不面對的困難。


    三、大數(shù)據(jù)應(yīng)用領(lǐng)域仍窄小，應(yīng)用費(fèi)用過高，制約大數(shù)據(jù)應(yīng)用。國內(nèi)能利用大數(shù)據(jù)背后產(chǎn)業(yè)價(jià)值的行業(yè)主要集中在金融、電信、能源、證券、煙草等超大型、壟斷型企業(yè)，其他行業(yè)談大數(shù)據(jù)價(jià)值為時(shí)尚早。隨著企業(yè)內(nèi)部的資料量愈來愈大，日后大數(shù)據(jù)將成為IT支出中的主要因素，特別是數(shù)據(jù)儲存所耗費(fèi)的成本，很可能造成企業(yè)負(fù)擔(dān)，甚至望而卻步。因此有遠(yuǎn)見的CIO必須預(yù)先做好準(zhǔn)備。


    四、開放與隱私如何平衡，亦是一大難題。任何技術(shù)都是雙刃劍，大數(shù)據(jù)也不例外。如何在推動(dòng)數(shù)據(jù)全面開放、應(yīng)用和共享的同時(shí)有效地保護(hù)公民、企業(yè)隱私，逐步加強(qiáng)隱私立法，將是大數(shù)據(jù)時(shí)代的一個(gè)重大挑戰(zhàn)。


    總之，誰率先具備從各種各樣類型的數(shù)據(jù)中快速獲得有價(jià)值信息的能力與機(jī)會(huì)，誰就是贏家！
    文章來自：  CDA數(shù)據(jù)分析師培訓(xùn)官網(wǎng)