淺談大數(shù)據(jù)時代的IT建設

現(xiàn)在已經進入大數(shù)據(jù)時代，大數(shù)據(jù)既能促進信息消費，又能帶動社會管理創(chuàng)新。當然，大多數(shù)企業(yè)早已認識到大數(shù)據(jù)對產業(yè)的影響，只是面臨著大數(shù)據(jù)落地的難題。在商業(yè)應用層面，維克托·邁爾·舍恩伯格在其所著的《大數(shù)據(jù)時代》一書中通過大量的實例進行闡釋；而在技術層面，互聯(lián)網巨頭有著得天獨厚的優(yōu)勢。比如這次的講解人李彥宏所代表的百度，其搜索技術應用于大數(shù)據(jù)就是順理成章的事情。
    在互聯(lián)網和IT行業(yè)之外的傳統(tǒng)行業(yè)也在關注大數(shù)據(jù)，傳統(tǒng)企業(yè)希望通過大數(shù)據(jù)技術指導企業(yè)戰(zhàn)略，了解產業(yè)發(fā)展、商業(yè)模式、市場競爭中成功的關鍵要素，進而提高企業(yè)核心能力。然而，傳統(tǒng)企業(yè)不具備互聯(lián)網企業(yè)對數(shù)據(jù)信息的敏感度，它們產生海量的數(shù)據(jù)卻不能有效利用數(shù)據(jù)，或者說數(shù)據(jù)產生、收集、存儲都可能是數(shù)據(jù)鏈條的末端，有關數(shù)據(jù)的進程便完全停止。所以，傳統(tǒng)企業(yè)需要在大數(shù)據(jù)背景下實現(xiàn)轉型。在今天，新技術不斷地顛覆傳統(tǒng)產業(yè)，企業(yè)深知“慢一拍”會是什么后果——柯達被數(shù)碼時代拋棄，諾基亞被智能機時代拋棄，蘇寧在電商時代匆忙追趕，電信在互聯(lián)網時代尋求突破各行各業(yè)的企業(yè)都可能在大數(shù)據(jù)時代掉隊，反過來也有機會得以煥發(fā)青春。
    大數(shù)據(jù)時代，所有的企業(yè)都將由數(shù)據(jù)驅動，數(shù)據(jù)將成為企業(yè)和公共組織越來越重要的資產。同時，企業(yè)更需要高效的大數(shù)據(jù)工具，讓數(shù)據(jù)資產產生真正的價值。在這個時候，人們首先會朝著互聯(lián)網企業(yè)看過去。互聯(lián)網產業(yè)是信息產業(yè)，是數(shù)據(jù)產業(yè)，它們生產、交換、再次加工以及最終呈現(xiàn)到用戶面前的“產品”都是數(shù)據(jù)。因此，在大數(shù)據(jù)時代，有學者提出“泛互聯(lián)網化”的思路，以實踐收集數(shù)據(jù)資產、發(fā)揮大數(shù)據(jù)商業(yè)價值。這正是廣義上的物聯(lián)網的概念，數(shù)據(jù)產生、收集、傳輸、存儲、處理都實現(xiàn)互聯(lián)網化，各行各業(yè)都互聯(lián)網化。
    在這個大背景下，企業(yè)實現(xiàn)大數(shù)據(jù)的步驟變得明朗起來。在企業(yè)明確自己的大數(shù)據(jù)項目計劃之后，下一步便是實施滿足大數(shù)據(jù)要求的IT建設。
   面向云計算的企業(yè)IT建設
   大數(shù)據(jù)離不開云計算的支持，云計算是大數(shù)據(jù)誕生的前提和必要條件。
    目前，已經發(fā)展成熟的云計算擁有強大的計算、存儲能力，可以作為大數(shù)據(jù)集中采集和存儲數(shù)據(jù)的基礎。云計算和大數(shù)據(jù)的關系可以理解為：云計算為大數(shù)據(jù)提供了計算能力、存儲空間和訪問通道，而大數(shù)據(jù)則是云計算的終極應用。
   大數(shù)據(jù)時代的第一定律是“樣本即全體”。隨著數(shù)據(jù)獲取、整理、挖掘的成本伴隨著摩爾定律不斷降低，借助于IT公司提供的數(shù)據(jù)分析工具，企業(yè)將有可能獲得產業(yè)鏈上下游的全部數(shù)據(jù)，從而將企業(yè)的市場決策、供應鏈管控、內部管理的效率提高到前所未有的程度。在IT系統(tǒng)的建設過程中，企業(yè)首先面臨的最大困難是在內部解決數(shù)據(jù)的產生、收集以及存儲問題。當然，此時的數(shù)據(jù)也可能不夠大，但面臨的問題沒有本質區(qū)別。很明顯，能夠建設完整大數(shù)據(jù)IT系統(tǒng)的企業(yè)鳳毛麟角，大多數(shù)企業(yè)（特別是傳統(tǒng)企業(yè)）也沒有這個必要，因為大數(shù)據(jù)對于它們來說是輔助而非核心業(yè)務。企業(yè)可以選擇將部分業(yè)務外包出去，再將生成的數(shù)據(jù)傳輸回來，但這時又要面臨數(shù)據(jù)的傳輸問題?？傊?，大數(shù)據(jù)IT建設之前，要考慮哪一部分是本地建設，哪一部分置之云端。
    模式一旦確定，平臺的選擇便成為關鍵，選擇哪一種數(shù)據(jù)分析工具，哪一種數(shù)據(jù)庫，哪一類云服務等等。不同的行業(yè)、不同的企業(yè)建設大數(shù)據(jù)IT系統(tǒng)的方案不盡相同，這里不作展開討論。不過，對大數(shù)據(jù)IT系統(tǒng)在軟硬件方面的一些發(fā)展趨勢，企業(yè)需要重點關注。因為IT技術的發(fā)展日新月異，選擇一個具有競爭力和強大生命力的平臺，企業(yè)才能少走彎路，才能真正從投資中獲益。
   數(shù)據(jù)倉庫特殊性尤為重要
    對于大多數(shù)企業(yè)而言，大數(shù)據(jù)意味著為長年維護且塵封已久的數(shù)據(jù)倉庫配備一道可訪問的大門。
    數(shù)據(jù)倉庫過去一直是、未來也將仍然是企業(yè)級機構所不可或缺的關鍵性組成部分。這類系統(tǒng)的作用是將企業(yè)方方面面產生的數(shù)據(jù)匯聚起來，然后分門別類加以劃分，最終讓這些紛繁復雜的信息成為業(yè)務分析師深入了解企業(yè)運營狀況的寶貴資料。一套針對可擴展性而精心設計出的基礎設施正是大數(shù)據(jù)能否真正發(fā)揮作用的關鍵所在。