大數(shù)據(jù)時(shí)代 需要一點(diǎn)想象力

今天在業(yè)內(nèi)鼓吹大數(shù)據(jù)時(shí)代即將到來的時(shí)候，得到最多的仍然是同樣兩類反應(yīng)。虛無派說大數(shù)據(jù)云山霧罩，看不出有什么錢途。停滯派說大數(shù)據(jù)有什么新奇，老子的數(shù)據(jù)很大，挖掘技術(shù)很高。我想，今后幾年的產(chǎn)業(yè)發(fā)展又將證明這兩類說法的無知與荒謬。

    一些不肯認(rèn)真讀點(diǎn)想點(diǎn)東西的人，一看到大數(shù)據(jù)這個詞，就望文生義地想到數(shù)據(jù)要大，卻忘記了大數(shù)據(jù)的其他基本特性，需要反復(fù)加以提醒。
   大數(shù)據(jù)的特性之一是數(shù)據(jù)的完整性和綜合性。很多業(yè)內(nèi)朋友一談起大數(shù)據(jù)，就習(xí)慣性地盤點(diǎn)起自己那點(diǎn)存貨，或者那些可以直接從自身服務(wù)中可以獲取的東西?？紤]到目前互聯(lián)網(wǎng)的發(fā)展還在非常初級的階段，現(xiàn)有網(wǎng)絡(luò)服務(wù)都是簡化，扭曲，片面地對現(xiàn)實(shí)世界的濃縮和裁剪，由此產(chǎn)生的數(shù)據(jù)是零亂的，破碎的，局部的，其中所含有的含金量是極其有限的。如果同意這個世界上的萬事萬物可以而且正在被數(shù)據(jù)化和網(wǎng)絡(luò)化，那么由此產(chǎn)生的大數(shù)據(jù)就必然是完整的和綜合的，不僅包括網(wǎng)絡(luò)公司通過自身服務(wù)所獲得的用戶行為數(shù)據(jù)，而且包括社會的，經(jīng)濟(jì)的，政治的，自然的方方面面的數(shù)據(jù)。這些數(shù)據(jù)當(dāng)然分散在不同企業(yè)，機(jī)構(gòu)和政府部門手中，匯聚整合在一起絕非易事，但操作上的困難并不能否定大數(shù)據(jù)本身的完整性和綜合性。今天之所以討論大數(shù)據(jù)時(shí)代的到來，是因?yàn)榛ヂ?lián)網(wǎng)發(fā)展到目前階段使得現(xiàn)實(shí)世界數(shù)據(jù)化發(fā)展到了一定程度，各種信息終端普及到了一定程度，數(shù)據(jù)獲取的成本降到了一定程度，使得完整和綜合的數(shù)據(jù)不僅是一種理想，也正在變?yōu)楝F(xiàn)實(shí)。
   大數(shù)據(jù)的特性之二是數(shù)據(jù)的開放性和公共性。正是因?yàn)橥暾木C合的大數(shù)據(jù)難以由一家公司，機(jī)構(gòu)或政府部門所獲得，所以大數(shù)據(jù)必然產(chǎn)生于一個開放的，公共的網(wǎng)絡(luò)環(huán)境之中。這種開放性和公共性的實(shí)現(xiàn)取決于若干個網(wǎng)絡(luò)開放平臺或云服務(wù)以及一系列受到法律支持或社會公認(rèn)的數(shù)據(jù)標(biāo)準(zhǔn)和規(guī)范。任何封閉的或單向獲取的數(shù)據(jù)都不可能是大數(shù)據(jù)，無論這些數(shù)據(jù)的規(guī)模有多大。
   大數(shù)據(jù)的特性之三是數(shù)據(jù)的動態(tài)性和及時(shí)性。天體物理學(xué)和理論物理學(xué)早就依賴于從宇宙間獲取的大量數(shù)據(jù)，類似的學(xué)科還有環(huán)境生態(tài)學(xué)，醫(yī)藥學(xué)，和自控技術(shù)。但是，這和我們今天討論的大數(shù)據(jù)不是一回事。今天的大數(shù)據(jù)是基于互聯(lián)網(wǎng)的及時(shí)動態(tài)數(shù)據(jù)，不是歷史的或嚴(yán)格控制環(huán)境下產(chǎn)生的東西。
    所以，今天我們談?wù)摰拇髷?shù)據(jù)是完整綜合的，開放公共的，動態(tài)及時(shí)的，這樣的大數(shù)據(jù)是我們過去從未有機(jī)會獲取利用過的全新挑戰(zhàn)，也是我們未來應(yīng)該努力去爭取利用的全新戰(zhàn)略機(jī)會。如果有人以為過去積累的那點(diǎn)數(shù)據(jù)就是大數(shù)據(jù)，或者過去積累的數(shù)據(jù)處理利用能力和經(jīng)驗(yàn)就可以在大數(shù)據(jù)時(shí)代自然領(lǐng)先，那不是無知就是狂妄。
    近來媒體上對大數(shù)據(jù)方向的進(jìn)展報(bào)道頗多，其中一個很能說明我心目中大數(shù)據(jù)的性質(zhì)及其利用的前景。據(jù)8月30日《紐約時(shí)報(bào)》的報(bào)道：一家名為氣候公司（Climate Corporation）的創(chuàng)業(yè)企業(yè)每天都會對美國境內(nèi)超過一百萬個地點(diǎn)，未來兩年的天氣情況進(jìn)行超過1萬次模擬。隨后，該公司將根系結(jié)構(gòu)和土壤孔隙度的相關(guān)數(shù)據(jù)，與模擬結(jié)果相結(jié)合，為成千上萬的農(nóng)民提供農(nóng)作物保險(xiǎn)。
    通過遙感獲取土壤數(shù)據(jù)，這和我們過去所熟悉的通過網(wǎng)絡(luò)服務(wù)獲取用戶網(wǎng)絡(luò)行為數(shù)據(jù)不是一回事，數(shù)據(jù)的概念得以極大的擴(kuò)充。每天對百萬以上地點(diǎn)進(jìn)行成萬次的模擬，其數(shù)據(jù)量龐大，動態(tài)，及時(shí)。要想對每塊田地提供精準(zhǔn)的保險(xiǎn)服務(wù)，肯定還需要與土地?cái)?shù)據(jù)相配套的農(nóng)產(chǎn)品期貨數(shù)據(jù)，氣候預(yù)測數(shù)據(jù)，國際貿(mào)易數(shù)據(jù)，國際政治和軍事安全數(shù)據(jù)，國民經(jīng)濟(jì)各方面的數(shù)據(jù)，產(chǎn)業(yè)競爭數(shù)據(jù)，等等。在如此龐雜的大數(shù)據(jù)基礎(chǔ)上推出的商業(yè)模式，是創(chuàng)新的，同現(xiàn)有農(nóng)作物保險(xiǎn)方式相比是具備極大競爭力的，是可持續(xù)和規(guī)?；摹８畹氖?，這家公司基于大數(shù)據(jù)的運(yùn)營，完全沒有進(jìn)行高額的網(wǎng)絡(luò)設(shè)施投資，只是租用了亞馬遜的公共云服務(wù)，一個月幾萬美元而已。
    如果留心觀察，這樣的案例已經(jīng)很多了，雖然都還比較簡單初級，但足以說明問題。如果展開一下我們的想象力，類似上述案例的創(chuàng)新，在即將到來的大數(shù)據(jù)時(shí)代可以在任何行業(yè)，任何服務(wù)，任何公共管理上出現(xiàn)，由此可能產(chǎn)生的服務(wù)和商業(yè)模式是無窮盡的。同現(xiàn)有或現(xiàn)在還沒有的服務(wù)和商業(yè)模式相比，服務(wù)更加精準(zhǔn)，成本更加低廉，利潤更加豐厚。這不是目前網(wǎng)絡(luò)業(yè)所熟知的對現(xiàn)有用戶數(shù)據(jù)的挖掘，不是對用戶進(jìn)行更精細(xì)的分組，不是現(xiàn)有數(shù)據(jù)技術(shù)的普及應(yīng)用，而是一個全新的世界，一個全新的網(wǎng)絡(luò)地球和數(shù)據(jù)地球。一個理想的前景是，一個以網(wǎng)絡(luò)業(yè)為核心的大數(shù)據(jù)服務(wù)業(yè)會成為今后幾十年世界經(jīng)濟(jì)和社會發(fā)展的主要推動力。當(dāng)然，這事未必一定發(fā)生，尤其是在中國。如果我們網(wǎng)絡(luò)業(yè)的朋友們沒有雄心，沒有想象力，那也可能除了少數(shù)公司成為大數(shù)據(jù)服務(wù)業(yè)的主力外，其他大部分公司仍然固守在陳舊的網(wǎng)絡(luò)業(yè)內(nèi)苦苦掙扎，變成大數(shù)據(jù)時(shí)代的傳統(tǒng)產(chǎn)業(yè)大軍中的一員。