熟悉的陌生詞：大數(shù)據(jù)

盡管大數(shù)據(jù)被大家一遍遍地說起，但是又有多少人能將大數(shù)據(jù)說清楚呢？其實，在信息高速發(fā)展的今天，大數(shù)據(jù)已經(jīng)充斥了普通人生活的方方面面，正如麥肯錫所說：“數(shù)據(jù)，已經(jīng)滲透到當今每一個行業(yè)和業(yè)務職能領域，成為重要的生產(chǎn)因素。人們對于海量數(shù)據(jù)的挖掘和運用，預示著新一波生產(chǎn)率增長和消費者盈余浪潮的到來。”

“大數(shù)據(jù)”的概念與數(shù)據(jù)爆炸緊密相關。最先經(jīng)歷數(shù)據(jù)爆炸的學科提出了“大數(shù)據(jù)”的說法，如今它幾乎已被應用到了各個領域。然而，“大數(shù)據(jù)”并非是一個確切的概念。常見的定義是那些規(guī)模和復雜度非常大，以至于很難通過目前主流的數(shù)據(jù)存儲、管理和分析工具在合理的時間內(nèi)對它們完成處理的數(shù)據(jù)集合[。在談到“大數(shù)據(jù)”的特征時，常見的說法是3個V：大數(shù)據(jù)量（volume）、快速的產(chǎn)生速度（velocity）和多樣的數(shù)據(jù)類型（variety）。以上定義和解釋強調數(shù)據(jù)規(guī)模和復雜度的改變對相關數(shù)據(jù)技術的挑戰(zhàn)和對技術發(fā)展的推動。相對于以上常見定義和解釋，Viktor對“大數(shù)據(jù)”提出了一種獨到的見解，他認為“大數(shù)據(jù)是人們在大規(guī)模數(shù)據(jù)的基礎上可以做到的事情，而這些事情在小規(guī)模數(shù)據(jù)的基礎上是無法完成的”。對大數(shù)據(jù)的這種定義強調數(shù)據(jù)規(guī)模的改變對于知識發(fā)現(xiàn)、決策等的價值。

最早明確提出大數(shù)據(jù)時代來臨的是在2012年2月11日《紐約時報》上發(fā)表的一篇題為“大數(shù)據(jù)時代”的專欄文章。文章中稱大數(shù)據(jù)正在對每個領域造成影響，大數(shù)據(jù)時代正在到來?？茖W、商業(yè)、政治和其他領域都在朝著數(shù)據(jù)驅動型的知識發(fā)現(xiàn)和決策的方向發(fā)生轉變，這是一種變革。我們確實正在進行這場變革，龐大的新數(shù)據(jù)來源所帶來的從量變到質變的變化，將在學術界、企業(yè)界和政界中迅速蔓延開來，沒有哪個領域不會受到影響。

大數(shù)據(jù)時代始于何時？雖然目前并沒有一個明確的界定，但大數(shù)據(jù)時代的到來已是不可逆轉的事實。而大數(shù)據(jù)之所以成為一個“時代”，不僅是因為數(shù)據(jù)爆炸在眾多領域廣泛發(fā)生，而且是因為數(shù)據(jù)爆炸積累到了一個開始引發(fā)變革的程度。這變革不僅是相關數(shù)據(jù)技術方面的，更是人們進行知識發(fā)現(xiàn)和決策等的思維和行為模式方面的。人們在過去數(shù)據(jù)匱乏的時代形成了依賴抽樣數(shù)據(jù)、局部數(shù)據(jù)和片面數(shù)據(jù)，甚至在無法獲得實證數(shù)據(jù)的時候純粹依靠經(jīng)驗、理論和假設去發(fā)現(xiàn)新知識和進行決策的思維慣例和行為模式。如今人類的數(shù)據(jù)化能力已經(jīng)得到極大的提高，數(shù)據(jù)對事物、現(xiàn)象等的記錄在廣度和深度上都在擴張。越來越多的新科學發(fā)現(xiàn)和商機將依賴于對全面、完整的數(shù)據(jù)的收集和利用。而過去形成的思維慣例和行為模式是獲得這些科學發(fā)現(xiàn)和商機的關鍵阻礙因素，人們進行知識發(fā)現(xiàn)、決策等的思維和行為模式有必要重塑，這將對人類社會產(chǎn)生深遠的影響。