大數(shù)據(jù)時代DT＋成為大趨勢

大數(shù)據(jù)及其本質(zhì)特征

大數(shù)據(jù)是指以服務于決策為目的，需要新型數(shù)據(jù)處理模式才能對其內(nèi)容進行采集、存儲、管理和分析的海量、高增長率和多樣化的信息資本。

大數(shù)據(jù)具有如下本質(zhì)特征：一是根本目的是服務于決策，大數(shù)據(jù)能夠幫助各類組織和個人大幅度提升決策能力，做出更好的決策和判斷。二是量度大，大數(shù)據(jù)通常是指100T以上的數(shù)據(jù)量，這難以依靠傳統(tǒng)的計算手段有效計算，而必須依靠新的計算手段和數(shù)據(jù)挖掘工具。三是頻率高，大數(shù)據(jù)是用戶參與互動而產(chǎn)生的數(shù)據(jù)，根據(jù)用戶的網(wǎng)絡痕跡來及時地了解用戶的相關數(shù)據(jù)，這種數(shù)據(jù)是按照天甚至小時來計算的高頻數(shù)據(jù)。而傳統(tǒng)的數(shù)據(jù)頻率都很低，很多數(shù)據(jù)是按照月甚至按照年份來計算的。四是速度快，大數(shù)據(jù)是實時性的數(shù)據(jù)，能夠?qū)崟r反應。例如，在百度搜索框輸入一個關鍵詞，能夠瞬間呈現(xiàn)，而傳統(tǒng)的數(shù)據(jù)收集方式則是嚴重滯后的。五是維度豐富多樣，大數(shù)據(jù)是全樣本數(shù)據(jù)、多維度數(shù)據(jù)、非結構化數(shù)據(jù)，既包括普通的結構化數(shù)據(jù)，又包括視頻和音頻等非結構化數(shù)據(jù)。正是因為大數(shù)據(jù)的維度多樣性，其也更為復雜。六是永遠在線。在線是大數(shù)據(jù)的前提條件，從這個角度來說，大數(shù)據(jù)是永遠在線的，能夠隨時被調(diào)用的。大數(shù)據(jù)通過分析各種網(wǎng)絡終端上的用戶痕跡，能夠更好地分析用戶的行為、情感、思想、愛好與需求，來更好地進行決策和分析。七是本質(zhì)是信息資本。大數(shù)據(jù)是能夠為政府和企業(yè)帶來未來經(jīng)濟利益的信息資源，其本質(zhì)是信息資產(chǎn)，而且隨著大數(shù)據(jù)的應用越來越廣，其價值會越來越大。因此，不應該僅僅把大數(shù)據(jù)看成成本，而應把其看成和土地、資本、人才等一樣的新生產(chǎn)要素。

政府數(shù)據(jù)公開是大數(shù)據(jù)發(fā)展的保障

大數(shù)據(jù)的重要組成部分是政府數(shù)據(jù)，因此政府數(shù)據(jù)公開的程度和廣度將在很大程度上決定著大數(shù)據(jù)的發(fā)展水平。目前，美國等西方發(fā)達國家大力推進數(shù)據(jù)開放運動，在數(shù)據(jù)公開程度上居于世界前列。2011年9月20日，美國、巴西、印度尼西亞、墨西哥、挪威、菲律賓、南非、英國等八個國家（G8）聯(lián)合簽署了《開放數(shù)據(jù)聲明》，在紐約發(fā)起“開放政府聯(lián)盟”（OGP），以向本國社會開放更多的信息。2013年6月，八國集團首腦簽署了《開放數(shù)據(jù)憲章》，制定開放數(shù)據(jù)行動方案，并設定了開放數(shù)據(jù)憲章的五大原則：開放數(shù)據(jù)為默認；為激勵創(chuàng)新發(fā)布數(shù)據(jù)；為改善治理發(fā)布數(shù)據(jù)；注重數(shù)量和質(zhì)量；讓所有人可用。尤其需要指出的是，其中最重要的一條就是“開放為默認，不開放為特例”的原則，這就約束政府部門盡最大可能地公開所有數(shù)據(jù)，而反觀我國，由于政府數(shù)據(jù)開放的程度很低，各部門基于自身的利益，基本上采取的是“開放為特例，不開放為默認”的原則，這也導致形成一個個的“信息孤島”。

2007年，國務院通過了《中華人民共和國政府信息公開條例》，國務院辦公廳印發(fā)的《2015年政府信息公開工作要點》更加明確地強調(diào)推進行政權力清單、財政資金、公共服務、國有企業(yè)、環(huán)境保護等九大領域的信息公開工作。2015年8月19日，國務院總理李克強主持召開國務院常務會議，通過《關于促進大數(shù)據(jù)發(fā)展的行動綱要》。目前，我國的政府數(shù)據(jù)開放存在著四大挑戰(zhàn)：一是開放與安全，在實踐中，很多人以數(shù)據(jù)安全為由來反對數(shù)據(jù)開放，這是一種很片面的觀點；二是人才和文化，我國的數(shù)據(jù)人才在量和質(zhì)上都存在重大缺陷，而且也沒有形成“數(shù)據(jù)文化”；三是政策標準不統(tǒng)一；四是政策法規(guī)不健全。

在政府數(shù)據(jù)開放方面，我國存在三大主要問題：一是我國尚未建立起全國統(tǒng)一的大數(shù)據(jù)平臺，導致形成一個個的信息孤島，影響了政府數(shù)據(jù)開放的成效；二是我國的數(shù)據(jù)污染很嚴重，很多原始數(shù)據(jù)存在夸大或瞞報現(xiàn)象；三是一些地方?jīng)]有把大數(shù)據(jù)當成政府公共服務的重要部分，而當成盈利的資源。

大數(shù)據(jù)蘊藏著新哲學思想和優(yōu)勢

首先，大數(shù)據(jù)拓展了新的哲學思想。大數(shù)據(jù)既能處理“因果關系”又能處理“相關關系”，即不僅能夠回答“為什么”又能回答“是什么”。在小數(shù)據(jù)時代，只能通過抽樣調(diào)查的方式來回答“為什么”。而大數(shù)據(jù)則能通過全樣本的方式來回答“是什么”，即發(fā)現(xiàn)相關關系，這能夠幫助我們更好地認識和了解世界。例如，沃爾瑪發(fā)現(xiàn)在尿布旁邊放上啤酒能夠提高啤酒的銷量，就把尿布和啤酒混搭銷售。毫無疑問，尿布和啤酒之間并無因果關系，而二者在一起就形成很好的相關關系。

其次，大數(shù)據(jù)分析具有顯著優(yōu)勢。一是大數(shù)據(jù)能夠?qū)崿F(xiàn)分析的高度智能化，既能實現(xiàn)信息收集和分析的智能化，又能實現(xiàn)數(shù)據(jù)與用戶需求的有效匹配。二是及時、迅速。大數(shù)據(jù)分析改變之前的市場調(diào)研和數(shù)據(jù)分析相對滯后的模式和方式，能夠及時、迅速地進行分析。例如，傳統(tǒng)的市場調(diào)研一般耗時幾個月，而基于互聯(lián)網(wǎng)的大數(shù)據(jù)調(diào)研則只需要幾天就能得到調(diào)研結果。三是成本相對較低。由于可以大量使用技術手段，其成本相應較低。一般來說，傳統(tǒng)的市場調(diào)研方式，每一份問卷都需要近百元，而互聯(lián)網(wǎng)調(diào)研一份問卷只需要4元左右。

大數(shù)據(jù)實施的三大關鍵點

首先，數(shù)據(jù)的可獲得度。目前在國內(nèi)，大數(shù)據(jù)的發(fā)展嚴重受制于政府信息的公開性不夠，很多數(shù)據(jù)難以獲得，導致難以實現(xiàn)真正的大數(shù)據(jù)挖掘和分析，這就要求政府及時開放更多的數(shù)據(jù)，以提高數(shù)據(jù)的可獲得度。

其次，進行科學的模型建構。模型的科學性直接決定著數(shù)據(jù)分析的質(zhì)量，這就要求有高超的建模水平，當然數(shù)據(jù)量越多也有助于模型的合理構建。

第三，利用專家對觀點進行提煉。為決策提供依據(jù)的基于數(shù)據(jù)挖掘的獨到、高質(zhì)量的觀點，高度依賴于高質(zhì)量的數(shù)據(jù)解釋，這就體現(xiàn)了行業(yè)專家的價值。

在大數(shù)據(jù)時代，大數(shù)據(jù)已經(jīng)成為整個社會的底層架構和標配，其上的一切都必須按照大數(shù)據(jù)的要求進行重構，大數(shù)據(jù)在解決大問題方面尤為有效，目前在語音搜索、智慧城市建設、互聯(lián)網(wǎng)金融治理等方面取得了長足的進展，未來更多的領域都必將被大數(shù)據(jù)所革命和重構。