大數(shù)據(jù)分析中某些重大要件或技術(shù)還不成熟

關(guān)于大數(shù)據(jù)分析，現(xiàn)實(shí)的情況是，說得人很多，鼓吹其神奇價(jià)值的喧囂聲浪很高，卻鮮見其實(shí)際運(yùn)用得法的模式和方法。造成這種窘境的原因無外乎有二：一是對(duì)于大數(shù)據(jù)分析的價(jià)值邏輯尚缺乏足夠深刻的洞察；其次便是大數(shù)據(jù)分析中的某些重大要件或技術(shù)還不成熟。 　

比如，提到大數(shù)據(jù)的大，一般人認(rèn)為指的是它數(shù)據(jù)規(guī)模的海量——隨著人類在數(shù)據(jù)記錄、獲取及傳輸方面的技術(shù)革命，造成了數(shù)據(jù)獲得的便捷與低成本，這便使原有的以高成本方式獲得的描述人類態(tài)度或行為的、數(shù)據(jù)有限的小數(shù)據(jù)已然變成了一個(gè)巨大的、海量規(guī)模的數(shù)據(jù)包。這其實(shí)是一種不得要領(lǐng)、似是而非的認(rèn)識(shí)。其實(shí)，前大數(shù)據(jù)時(shí)代也有海量的數(shù)據(jù)集，但由于其維度的單一，以及和人或社會(huì)有機(jī)活動(dòng)狀態(tài)的剝離，而使其分析和認(rèn)識(shí)真相的價(jià)值極為有限。大數(shù)據(jù)的真正價(jià)值不在于它的大，而在于它的全——空間維度上的多角度、多層次信息的交叉復(fù)現(xiàn)；時(shí)間維度上的與人或社會(huì)有機(jī)體的活動(dòng)相關(guān)聯(lián)的信息的持續(xù)呈現(xiàn)。 　　

《大數(shù)據(jù)時(shí)代》一書中所引述的，一個(gè)孕婦的口味及消費(fèi)模式等是有一定規(guī)律的，單一一條信息并不足以判定你的狀態(tài)，但關(guān)于你的不同來源的數(shù)據(jù)集合一旦與孕婦特型(如果我們掌握了這個(gè)分析模型的話)高度相關(guān)，人們便很容易對(duì)你的真實(shí)狀態(tài)進(jìn)行一種準(zhǔn)確的判斷而不管你自己承認(rèn)或者不承認(rèn)。 　　

再舉個(gè)例子，面對(duì)今天社會(huì)輿情態(tài)勢(shì)，常常有人感慨：“造謠的成本很低，辟謠的成本卻很高”，抱怨現(xiàn)在的網(wǎng)絡(luò)給造謠者造謠傳謠帶來的極大便利以及人民群眾過于輕信謠言。如果我們用某個(gè)事件的數(shù)據(jù)、單一的和靜態(tài)截面上的數(shù)據(jù)去觀察和分析這個(gè)問題的時(shí)候，真的可能得出上述這樣一種結(jié)論。但是，如果我們從社會(huì)傳播的總體信息構(gòu)造上去分析的時(shí)候，我們會(huì)發(fā)現(xiàn)，流言或謠言的猖獗不正在于一些掌握了社會(huì)信息傳播主渠道的部門的不作為、甚至蒙蔽真相所造成的嗎？因此，大數(shù)據(jù)分析的價(jià)值和意義就在于，透過多維度多層次的數(shù)據(jù)，以及歷時(shí)態(tài)的關(guān)聯(lián)數(shù)據(jù)，找到問題的癥結(jié)，直抵事實(shí)的真相。 　　

因此，大數(shù)據(jù)分析在方法論上需要解決的課題首先就在于：如何透過多層次、多維度的數(shù)據(jù)集實(shí)現(xiàn)對(duì)于某一個(gè)人、某一件事或某一種社會(huì)狀態(tài)的現(xiàn)實(shí)態(tài)勢(shì)的聚焦，即真相再現(xiàn)；其中的難點(diǎn)就在于，我們需要洞察哪些維度是描述一個(gè)人、一件事以及一種社會(huì)狀態(tài)存在狀態(tài)的最為關(guān)鍵性的維度，并且這些維度之間的關(guān)聯(lián)方式是怎樣的，等等。其次，如何在時(shí)間序列上離散的、貌似各不相關(guān)的數(shù)據(jù)集合中，找到一種或多種與人的活動(dòng)、事件的發(fā)展以及社會(huì)的運(yùn)作有機(jī)聯(lián)系的連續(xù)性數(shù)據(jù)的分析邏輯。其中的難點(diǎn)就在于，我們對(duì)于離散的、貌似各不相關(guān)數(shù)據(jù)如何進(jìn)行屬性標(biāo)簽化的分類。概言之，不同類屬的數(shù)據(jù)集的功能聚合模型(用于特定的分析對(duì)象)以及數(shù)據(jù)的標(biāo)簽化技術(shù)，是大數(shù)據(jù)分析的技術(shù)關(guān)鍵。 　　

除此之外，就現(xiàn)實(shí)而言，有質(zhì)量的大數(shù)據(jù)源常常掌握在少數(shù)權(quán)威機(jī)構(gòu)、信息服務(wù)商手中，如何開放這種大數(shù)據(jù)源的使用，事關(guān)社會(huì)的發(fā)展和人民生活的福祉，筆者認(rèn)為，應(yīng)該從制度和機(jī)制上給予保障。