大數(shù)據(jù)是國(guó)家戰(zhàn)略資源_數(shù)據(jù)分析師培訓(xùn)

大數(shù)據(jù)在科學(xué)研究和產(chǎn)業(yè)領(lǐng)域的應(yīng)用價(jià)值是不容小覷的，同時(shí)大數(shù)據(jù)也會(huì)有消極的一面。要認(rèn)識(shí)其中的風(fēng)險(xiǎn)，以便規(guī)范、規(guī)避問(wèn)題，使其有序發(fā)展。

不能過(guò)度神話大數(shù)據(jù)的應(yīng)用價(jià)值。任何一個(gè)科學(xué)研究都有前提假設(shè)，任何一個(gè)科學(xué)問(wèn)題，都是在一定條件下認(rèn)識(shí)和思考的。在任何時(shí)候都不應(yīng)把一個(gè)簡(jiǎn)單、有限事物的價(jià)值過(guò)度夸大。面對(duì)大數(shù)據(jù)，應(yīng)當(dāng)關(guān)注其便捷性和有效性，理性分析自身的需求和應(yīng)用價(jià)值。

大數(shù)據(jù)從本質(zhì)上要求信息開放，而信息開放是一個(gè)復(fù)雜問(wèn)題。有些涉及行業(yè)內(nèi)部競(jìng)爭(zhēng)，受到商業(yè)因素影響，企業(yè)不愿意開放；有些涉及個(gè)人或者行業(yè)本身的隱私或機(jī)密，無(wú)法開放。在大數(shù)據(jù)應(yīng)用的過(guò)程中，對(duì)互聯(lián)網(wǎng)用戶隱私權(quán)和數(shù)據(jù)的保護(hù)，是開放信息時(shí)的重要考慮因素。

在思考這一問(wèn)題時(shí)，國(guó)家應(yīng)該具體問(wèn)題具體分析。政府應(yīng)該審慎分析哪些領(lǐng)域的數(shù)據(jù)能開放，考慮開放共享后數(shù)據(jù)的管理、數(shù)據(jù)的質(zhì)量、數(shù)據(jù)的隱私和數(shù)據(jù)的保護(hù)等問(wèn)題。

有些信息涉及個(gè)人信息、產(chǎn)業(yè)核心機(jī)密，甚至國(guó)家戰(zhàn)略安全，應(yīng)該加強(qiáng)保護(hù)，更有效發(fā)揮它的價(jià)值；有些科學(xué)界的數(shù)據(jù)、大型實(shí)驗(yàn)項(xiàng)目的成果，開放后能夠促進(jìn)學(xué)術(shù)交流，提升研究效率，則應(yīng)該鼓勵(lì)開放。

大數(shù)據(jù)的價(jià)值挖掘

如何發(fā)展大數(shù)據(jù)已經(jīng)成為國(guó)家、社會(huì)、產(chǎn)業(yè)的一個(gè)重要話題。目前，歐美、日韓等國(guó)已經(jīng)將大數(shù)據(jù)上升為國(guó)家層面的戰(zhàn)略。將一個(gè)問(wèn)題提升到國(guó)家和政府層面，說(shuō)明其存在對(duì)社會(huì)和國(guó)家的綜合價(jià)值。

從大數(shù)據(jù)應(yīng)用的角度來(lái)看，大數(shù)據(jù)涉及重要的領(lǐng)域資源問(wèn)題。地球信息科學(xué)、金融、信息技術(shù)、物理領(lǐng)域都在積極推進(jìn)大數(shù)據(jù)應(yīng)用落地。利用大數(shù)據(jù)提供個(gè)性化、規(guī)?；慕逃瑢?duì)人身體機(jī)能進(jìn)行分析進(jìn)而提升癌癥治療效果等，這些關(guān)系到重大民生領(lǐng)域的應(yīng)用也備受關(guān)注。

廣泛應(yīng)用決定了大數(shù)據(jù)技術(shù)的發(fā)展是國(guó)家多行業(yè)、多領(lǐng)域的共同任務(wù)。目前，各界對(duì)大數(shù)據(jù)的理解還不夠成熟，這需要政府、學(xué)界和產(chǎn)業(yè)合作推進(jìn)各界對(duì)這一問(wèn)題的認(rèn)識(shí)。

挖掘大數(shù)據(jù)的價(jià)值，推動(dòng)大數(shù)據(jù)的發(fā)展，政府需要發(fā)揮作用。大數(shù)據(jù)是一個(gè)眾多關(guān)鍵行業(yè)關(guān)注的問(wèn)題，從國(guó)家角度來(lái)看，大數(shù)據(jù)是一種重要的戰(zhàn)略資源。

同時(shí)，學(xué)術(shù)界要和產(chǎn)業(yè)界共同支持和鼓勵(lì)大數(shù)據(jù)的發(fā)展。只有學(xué)術(shù)和產(chǎn)業(yè)價(jià)值融合，才能真正發(fā)揮大數(shù)據(jù)的應(yīng)用價(jià)值。雖然學(xué)術(shù)界和產(chǎn)業(yè)界關(guān)注的價(jià)值點(diǎn)并不完全一致，但仍存在一些共性。發(fā)現(xiàn)和利用其中的共性，對(duì)解決發(fā)展大數(shù)據(jù)戰(zhàn)略中出現(xiàn)的問(wèn)題很重要。

跨界合作是積極且有意義的嘗試，學(xué)術(shù)界可以致力于基礎(chǔ)技術(shù)的研究，盈利模式的分析則由企業(yè)去完成。同時(shí)，學(xué)術(shù)界和產(chǎn)業(yè)界在某些交叉領(lǐng)域形成競(jìng)爭(zhēng)也是一種良性的模式。一些大企業(yè)會(huì)對(duì)前沿技術(shù)和數(shù)據(jù)積累追蹤最新的學(xué)術(shù)成果，甚至自己做學(xué)術(shù)研究，學(xué)術(shù)界也在積極推進(jìn)產(chǎn)業(yè)化思考。

目前，我國(guó)互聯(lián)網(wǎng)產(chǎn)業(yè)在經(jīng)過(guò)一段時(shí)間后，已經(jīng)具備一定的數(shù)據(jù)分析基礎(chǔ)，在很多領(lǐng)域具有結(jié)合實(shí)踐發(fā)展的能力。但是大數(shù)據(jù)的價(jià)值密度是比較低的，有針對(duì)性地選擇和分析，才能使數(shù)據(jù)的價(jià)值最大化，或者說(shuō)使隱含的價(jià)值被人們逐步認(rèn)識(shí)和挖掘出來(lái)。這應(yīng)是學(xué)術(shù)界和產(chǎn)業(yè)界共同努力的方向。

大數(shù)據(jù)的科學(xué)問(wèn)題

大數(shù)據(jù)是指利用現(xiàn)有分析工具無(wú)法在合理時(shí)間內(nèi)處理的數(shù)據(jù)，意味著數(shù)據(jù)海量、傳播速度快捷、種類豐富。大數(shù)據(jù)的本質(zhì)是一個(gè)科學(xué)計(jì)算問(wèn)題。

物聯(lián)網(wǎng)的興起、移動(dòng)計(jì)算技術(shù)的發(fā)展、各類傳感器等嵌入系統(tǒng)的廣泛應(yīng)用都使得人類取得的數(shù)據(jù)量在短時(shí)間內(nèi)激增。每18個(gè)月，甚至每10個(gè)月，需要處理的數(shù)據(jù)量就會(huì)翻一番。在這一背景下，現(xiàn)有的數(shù)據(jù)分析工具在數(shù)據(jù)的表示方法、計(jì)算模式、價(jià)值挖掘技術(shù)等領(lǐng)域遇到了瓶頸。

一方面，極大的數(shù)據(jù)量使傳統(tǒng)的商業(yè)數(shù)據(jù)庫(kù)在處理價(jià)值密度低的大數(shù)據(jù)時(shí)，需要付出極高成本；另一方面，從數(shù)據(jù)計(jì)算角度看，傳統(tǒng)計(jì)算機(jī)采用的算法復(fù)雜度非常高。傳統(tǒng)計(jì)算機(jī)的計(jì)算方式依賴于機(jī)器復(fù)雜的算法，在面臨極大規(guī)模的數(shù)據(jù)時(shí)，數(shù)據(jù)計(jì)算的能力受到了挑戰(zhàn)。

這種高成本的數(shù)據(jù)處理、復(fù)雜化的數(shù)據(jù)計(jì)算，使得小樣本空間下計(jì)算的優(yōu)劣判定方法在大數(shù)據(jù)時(shí)代發(fā)生變化。這種挑戰(zhàn)敦促學(xué)者嘗試在研究過(guò)程中找到科學(xué)計(jì)算的特性，在信息處理模式、數(shù)據(jù)多樣性表示方法上取得突破。

目前在研究大數(shù)據(jù)時(shí)，廣泛采用的是Hadoop技術(shù)架構(gòu)，是并行機(jī)制，即通過(guò)簡(jiǎn)單的編程來(lái)完成一個(gè)整體核心計(jì)算。在大數(shù)據(jù)時(shí)代，數(shù)據(jù)不斷增長(zhǎng)提出的增量計(jì)算要求，數(shù)據(jù)量巨大造成的近似計(jì)算要求，都讓傳統(tǒng)的應(yīng)用軟件和計(jì)算方法不堪重負(fù)。

增量計(jì)算要求、近似計(jì)算要求和歸納計(jì)算要求共同構(gòu)成了大數(shù)據(jù)計(jì)算的科學(xué)問(wèn)題。學(xué)者應(yīng)該充分理解這些計(jì)算的特性，找到數(shù)據(jù)的關(guān)聯(lián)關(guān)系，以便為大數(shù)據(jù)的分析和預(yù)測(cè)提供方法和手段。

大數(shù)據(jù)的產(chǎn)業(yè)價(jià)值

大數(shù)據(jù)的發(fā)展，既包括科學(xué)問(wèn)題，也存在產(chǎn)業(yè)價(jià)值和經(jīng)濟(jì)價(jià)值問(wèn)題。在大數(shù)據(jù)問(wèn)題上，產(chǎn)業(yè)界與學(xué)術(shù)界的關(guān)注點(diǎn)不盡相同?；ヂ?lián)網(wǎng)公司密切關(guān)注的是如何利用大數(shù)據(jù)形成新的產(chǎn)業(yè)鏈條。目前，百度、谷歌、阿里巴巴等公司正在積極研究如何利用大數(shù)據(jù)推動(dòng)新的商業(yè)模式，產(chǎn)生新的商業(yè)鏈條，包括通過(guò)電子商務(wù)來(lái)建立產(chǎn)品的關(guān)聯(lián)關(guān)系，利用大數(shù)據(jù)進(jìn)行有效的電子商務(wù)分析等。

面對(duì)新技術(shù)應(yīng)用時(shí)，學(xué)術(shù)界和產(chǎn)業(yè)界都會(huì)形成各自的態(tài)度和方案，這一點(diǎn)是正常的。學(xué)術(shù)界會(huì)關(guān)注如何解決科學(xué)計(jì)算的問(wèn)題，產(chǎn)業(yè)界可能更加關(guān)注大數(shù)據(jù)如何創(chuàng)造新的產(chǎn)業(yè)價(jià)值以及經(jīng)濟(jì)價(jià)值。

在探索大數(shù)據(jù)的經(jīng)濟(jì)價(jià)值時(shí)，產(chǎn)業(yè)界的逐利性決定了部分企業(yè)不會(huì)致力于研究大數(shù)據(jù)的技術(shù)應(yīng)用問(wèn)題，也不會(huì)去思考大數(shù)據(jù)的長(zhǎng)遠(yuǎn)發(fā)展問(wèn)題，只是通過(guò)炒作概念，利用大數(shù)據(jù)進(jìn)行投機(jī)。對(duì)這一現(xiàn)象，我們也不必過(guò)度擔(dān)心。

聰明的投資者會(huì)對(duì)大數(shù)據(jù)的核心價(jià)值作出判斷，審慎地分析大數(shù)據(jù)和自己的關(guān)系，市場(chǎng)終將用腳投票。同時(shí)，學(xué)術(shù)界不會(huì)因?yàn)槭袌?chǎng)存在炒作而忽略對(duì)問(wèn)題的理解，改變對(duì)研究問(wèn)題走勢(shì)的判斷。