大數(shù)據(jù)：大變革，大競爭，大挑戰(zhàn)_數(shù)據(jù)分析師

“大數(shù)據(jù)現(xiàn)在已經成為天大的事”。11月12日，美國政府公布新版大數(shù)據(jù)研究計劃，白宮科技政策辦公室主任霍爾德倫致辭說，他去年曾預測大數(shù)據(jù)將是件“大事”，現(xiàn)在來看保守了。

時間倒回到6月，斯諾登的41張幻燈片，讓美國大數(shù)據(jù)監(jiān)控項目“棱鏡”浮出水面，令人不寒而栗。

2013年被一些專家稱為“大數(shù)據(jù)元年”。對大數(shù)據(jù)時代的樂觀和憂慮，在這一年充分展示。

大變革

“除了上帝，每個人都必須用數(shù)據(jù)說話?！辈粌H是人，整個世界都越來越數(shù)據(jù)化。信息革命深入發(fā)展，如潮的數(shù)據(jù)澎湃而至，數(shù)量之巨，種類之雜，來勢之快，前所未有。

IDC（國際數(shù)據(jù)公司）估計，全球2012年產生數(shù)據(jù)總量約2.8澤字節(jié)。有人計算，這相當于3000多億部時長2小時的高清電影，連著看7000多萬年也看不完。

而這還只是序曲。更大的浪潮在后頭。

IDC預測，未來幾年，全球數(shù)據(jù)量每隔兩年翻一番，2020年達到40澤字節(jié)。

大數(shù)據(jù)不單單是“數(shù)據(jù)的工業(yè)革命”，而是一場更深刻的科技和產業(yè)大變革的組成部分，是對未來大趨勢、時代新特征的一種描述。大數(shù)據(jù)是推動這場大變革的重要動力，將成為促進經濟社會轉型新的關鍵資源。搜集、分析和運用指數(shù)級增長的龐大數(shù)據(jù)，將催生創(chuàng)新，為各行各業(yè)提供新的發(fā)展機遇，給人們日常生活帶來改變。

星巴克有意推出的“大數(shù)據(jù)咖啡杯”就是個小小的例子。美國媒體報道，這家咖啡連鎖巨頭打算試驗在一些咖啡杯中裝上傳感器，收集?？秃瓤Х人俣鹊葦?shù)據(jù)，從而為喝咖啡較慢顧客提供保溫效果好的杯子，提高其滿意度和忠誠度。

業(yè)內人士認為，大數(shù)據(jù)的本質還不在于“大”，而是以嶄新的思維和技術去分析海量數(shù)據(jù)，揭示其中隱藏的人類行為等模式，由此創(chuàng)造新產品和服務，或是預測未來趨勢。

暢銷書《大數(shù)據(jù)時代》的作者、英國牛津大學數(shù)據(jù)科學家舍恩伯格認為，大數(shù)據(jù)是一種新的價值觀和方法論，人們面對的不再是隨機樣本而是全體數(shù)據(jù)，不是精確性而是混雜性，不是因果關系而是相關關系。

“現(xiàn)有的認知和體系是建立在稀缺數(shù)據(jù)上的成果，人們思維和工作方式必須發(fā)生變革以適應大數(shù)據(jù)時代的到來?！鄙岫鞑裨谄鋾袑懙?。

大競爭

大數(shù)據(jù)被視為創(chuàng)新和生產力提升的下一個前沿，正成為國家競爭力的要素之一，在世界范圍內日益受到重視。多國政府加大了對大數(shù)據(jù)發(fā)展的扶持力度，甚至上升到國家戰(zhàn)略的高度。2013年，圍繞大數(shù)據(jù)的國際競爭繼續(xù)加碼。

咨詢公司益百利集團的研究顯示，全球對大數(shù)據(jù)項目投資總額去年已達45億歐元（約60億美元），預計今明兩年均會保持約40%的增長速度。

在美國，大數(shù)據(jù)已由熱點詞匯變成重點項目。去年3月，美國政府已公布2億美元的《大數(shù)據(jù)研究發(fā)展計劃》，今年11月再度公布涉及各級政府、私企、科研機構的多個大數(shù)據(jù)研究項目。美國國家衛(wèi)生研究院、國家科學基金會等都參與其中，有評論稱之為美國大數(shù)據(jù)戰(zhàn)略2.0版。

在英國，雖然經濟不景氣、財政緊縮，但政府依然為大數(shù)據(jù)一擲千金。2013年初，英國商業(yè)、創(chuàng)新和技能部宣布將注資8億英鎊發(fā)展8類高新技術，其中1.89億英鎊（約3億美元）用于大數(shù)據(jù)項目。

大數(shù)據(jù)在中國也已啟動駛入“快車道”，政府、企業(yè)和科研院所正多方位布局。工信部的物聯(lián)網“十二五”發(fā)展規(guī)劃，將信息處理技術作為四項關鍵創(chuàng)新技術工程之一，其中包括海量數(shù)據(jù)存儲、數(shù)據(jù)挖掘等。隨著4G牌照在2013年末的發(fā)放，更高速的網絡將帶來更大的數(shù)據(jù)流，為政府和企業(yè)帶來戰(zhàn)略性資源。

大挑戰(zhàn)

“棱鏡”今年曝光，讓人看到大數(shù)據(jù)時代維護國家信息安全、保護個人隱私所面臨的嚴峻挑戰(zhàn)。

“棱鏡門”讓各國政府意識到“數(shù)據(jù)主權”的重要性，以及在網絡和電信核心技術上依賴個別國家的惡果。必須加快自主創(chuàng)新以保護“數(shù)據(jù)主權”，已成為一些國家的共識。

英國《自然》雜志3月刊登的研究發(fā)現(xiàn)，只要有4個時間點和位置的數(shù)據(jù)就能確定一個人身份，準確率高達95%。這表明，大數(shù)據(jù)足以將一個人“描畫”清晰，現(xiàn)有法律手段和核心技術對個人隱私的保護正在逐漸失效。

如何在大數(shù)據(jù)來襲中保持清醒和理性、有所創(chuàng)新和創(chuàng)造，對國家和個人來說同樣是考驗。

專家指出，大數(shù)據(jù)可望為中國經濟轉型升級發(fā)揮重要貢獻，巨大的人口基數(shù)、經濟體量和需求，意味著中國發(fā)展大數(shù)據(jù)擁有得天獨厚的優(yōu)勢。但也應該看到，大數(shù)據(jù)具有價值密度低的特性，挖掘、分析等技術要求高。中國不能僅滿足于做“世界數(shù)據(jù)中心”，應防止概念炒作，加強自主創(chuàng)新，進行前瞻性的制度設計等布局，順勢而為，將“中國創(chuàng)造”由機遇化為現(xiàn)實。

還應該警惕“迷信”大數(shù)據(jù)等傾向，認識到大數(shù)據(jù)分析可能存在的缺陷和不足。心理學家認為，大數(shù)據(jù)創(chuàng)造的模型會將人束縛在算法提供的選項中，過度依賴大數(shù)據(jù)分析也可能束縛創(chuàng)新。美國互聯(lián)網活動家帕里澤稱之為“互聯(lián)網濾泡”：互聯(lián)網個性化雖然帶來方便，卻將人們局限在自己過往行為模式的“氣泡”中，無法觸及海量信息帶來的無盡可能。

大數(shù)據(jù)專家喜歡用莎士比亞“凡是過去，皆為序曲”來形容大數(shù)據(jù)分析的必然，但大數(shù)據(jù)提供的也只是參考答案而非最終答案。無論在小數(shù)據(jù)時代還是大數(shù)據(jù)時代，探索和創(chuàng)新精神都不應放棄，正如林肯所言，“預測未來最好的方法就是去創(chuàng)造未來”。