揮好大數(shù)據(jù)這把“雙刃劍”

目前，大數(shù)據(jù)技術(shù)的運用仍存在一些困難與挑戰(zhàn)，體現(xiàn)在大數(shù)據(jù)挖掘的四個環(huán)節(jié)中。首先在數(shù)據(jù)收集方面。要對來自網(wǎng)絡(luò)包括物聯(lián)網(wǎng)和機構(gòu)信息系統(tǒng)的數(shù)據(jù)附上時空標志，去偽存真，盡可能收集異源甚至是異構(gòu)的數(shù)據(jù)，必要時還可與歷史數(shù)據(jù)對照，多角度驗證數(shù)據(jù)的全面性和可信性。其次是數(shù)據(jù)存儲。要達到低成本、低能耗、高可靠性目標，通常要用到冗余配置、分布化和云計算技術(shù)，在存儲時要按照一定規(guī)則對數(shù)據(jù)進行分類，通過過濾和去重，減少存儲量，同時加入便于日后檢索的標簽。第三是數(shù)據(jù)處理。有些行業(yè)的數(shù)據(jù)涉及上百個參數(shù)，其復雜性不僅體現(xiàn)在數(shù)據(jù)樣本本身，更體現(xiàn)在多源異構(gòu)、多實體和多空間之間的交互動態(tài)性，難以用傳統(tǒng)的方法描述與度量，處理的復雜度很大，需要將高維圖像等多媒體數(shù)據(jù)降維后度量與處理，利用上下文關(guān)聯(lián)進行語義分析，從大量動態(tài)而且可能是模棱兩可的數(shù)據(jù)中綜合信息，并導出可理解的內(nèi)容。第四是結(jié)果的可視化呈現(xiàn)，使結(jié)果更直觀以便于洞察。目前，盡管計算機智能化有了很大進步，但還只能針對小規(guī)模、有結(jié)構(gòu)或類結(jié)構(gòu)的數(shù)據(jù)進行分析，談不上深層次的數(shù)據(jù)挖掘，現(xiàn)有的數(shù)據(jù)挖掘算法在不同行業(yè)中難以通用。

   大數(shù)據(jù)技術(shù)的運用前景是十分光明的。當前，我國正處在全面建成小康社會征程中，工業(yè)化、信息化、城鎮(zhèn)化、農(nóng)業(yè)現(xiàn)代化任務很重，建設(shè)下一代信息基礎(chǔ)設(shè)施，發(fā)展現(xiàn)代信息技術(shù)產(chǎn)業(yè)體系，健全信息安全保障體系，推進信息網(wǎng)絡(luò)技術(shù)廣泛運用，是實現(xiàn)四化同步發(fā)展的保證。大數(shù)據(jù)分析對我們深刻領(lǐng)會世情和國情，把握規(guī)律，實現(xiàn)科學發(fā)展，做出科學決策具有重要意義，我們必須重新認識數(shù)據(jù)的重要價值。
    為了開發(fā)大數(shù)據(jù)這一金礦，我們要做的工作還很多。首先，大數(shù)據(jù)分析需要有大數(shù)據(jù)的技術(shù)與產(chǎn)品支持。發(fā)達國家一些信息技術(shù)（IT）企業(yè)已提前發(fā)力，通過加大開發(fā)力度和兼并等多種手段，努力向成為大數(shù)據(jù)解決方案提供商轉(zhuǎn)型。國外一些企業(yè)打出免費承接大數(shù)據(jù)分析的招牌，既是為了練兵，也是為了獲取情報。過分依賴國外的大數(shù)據(jù)分析技術(shù)與平臺，難以回避信息泄密風險。有些日常生活信息看似無關(guān)緊要，其實從中也可摸到國家經(jīng)濟和社會脈搏。因此，我們需要有自主可控的大數(shù)據(jù)技術(shù)與產(chǎn)品。美國政府2012年3月發(fā)布《大數(shù)據(jù)研究與發(fā)展倡議》，這是繼1993年宣布“信息高速公路”之后又一重大科技部署，聯(lián)邦政府和一些部委已安排資金用于大數(shù)據(jù)開發(fā)。我們與發(fā)達國家有不少差距，更需要國家政策支持。
    中國人口居世界首位，將會成為產(chǎn)生數(shù)據(jù)量最多的國家，但我們對數(shù)據(jù)保存不夠重視，對存儲數(shù)據(jù)的利用率也不高。此外，我國一些部門和機構(gòu)擁有大量數(shù)據(jù)卻不愿與其他部門共享，導致信息不完整或重復投資。政府應通過體制機制改革打破數(shù)據(jù)割據(jù)與封鎖，應注重公開信息，應重視數(shù)據(jù)挖掘。美國聯(lián)邦政府建立統(tǒng)一數(shù)據(jù)開放門戶網(wǎng)站，為社會提供信息服務并鼓勵挖掘與利用。例如，提供各地天氣與航班延誤的關(guān)系，推動航空公司提升正點率。
   大數(shù)據(jù)的挖掘與利用應當有法可依。去年底全國人大通過的加強網(wǎng)絡(luò)信息保護的決定是一個好的開始，當前要盡快制定“信息公開法”以適應大數(shù)據(jù)時代的到來。現(xiàn)在很多機構(gòu)和企業(yè)擁有大量客戶信息。應當既鼓勵面向群體、服務社會的數(shù)據(jù)挖掘，又要防止侵犯個體隱私；既提倡數(shù)據(jù)共享，又要防止數(shù)據(jù)被濫用。此外，還需要界定數(shù)據(jù)挖掘、利用的權(quán)限和范圍。大數(shù)據(jù)系統(tǒng)本身的安全性也是值得特別關(guān)注的，要注意技術(shù)安全性和管理制度安全性并重，防止信息被損壞、篡改、泄露或被竊，保護公民和國家的信息安全。
   大數(shù)據(jù)時代呼喚創(chuàng)新型人才。某咨詢公司預測大數(shù)據(jù)將為全球帶來440萬個IT新崗位和上千萬個非IT崗位。預測美國到2018年需要深度數(shù)據(jù)分析人才44萬—49萬，缺口14萬—19萬人；需要既熟悉本單位需求又了解大數(shù)據(jù)技術(shù)與應用的管理者150萬，這方面的人才缺口更大。中國是人才大國，但能理解與應用大數(shù)據(jù)的創(chuàng)新人才更是稀缺資源。
   大數(shù)據(jù)是新一代信息技術(shù)的集中反映，是一個應用驅(qū)動性很強的服務領(lǐng)域，是具有無窮潛力的新興產(chǎn)業(yè)領(lǐng)域；目前，其標準和產(chǎn)業(yè)格局尚未形成，這是我國實現(xiàn)跨越式發(fā)展的寶貴機會。我們要從戰(zhàn)略上重視大數(shù)據(jù)的開發(fā)利用，將它作為轉(zhuǎn)變經(jīng)濟增長方式的有效抓手，但要注意科學規(guī)劃，切忌一哄而上。