大數(shù)據(jù) 及若干問題的討論_數(shù)據(jù)分析師考試

1、大數(shù)據(jù)的發(fā)展趨勢。Gartner2014年發(fā)布了技術(shù)成熟度曲線，把一項技術(shù)的發(fā)展分為：創(chuàng)新的萌芽期，膨脹期望的高峰期，幻滅的低谷期，光陰的爬升期，和生產(chǎn)率的穩(wěn)定期五個階段。大數(shù)據(jù)技術(shù)經(jīng)歷了2011年的萌芽期，2012、2013的膨脹期，現(xiàn)在慢慢進(jìn)入幻滅的低谷期，實際上，2014年大數(shù)據(jù)炒作的熱度開始降溫，大數(shù)據(jù)還有5到10年才會達(dá)到穩(wěn)定期，這樣一個判斷。

　　2、大數(shù)據(jù)、大數(shù)據(jù)技術(shù)的認(rèn)識誤區(qū)。數(shù)據(jù)量大是不是就可以成為大數(shù)據(jù)呢?這里面有一些認(rèn)識上的誤區(qū)。寧波的某個區(qū)，花2億元，在全區(qū)裝三千多個高清攝像頭，每天產(chǎn)生5PB數(shù)據(jù)，是不是就是大數(shù)據(jù)?網(wǎng)上也流傳過一些段子，比如說賣包子的開店，通過分析人流量進(jìn)行選址，也叫大數(shù)據(jù)分析。我們在調(diào)研的過程中發(fā)現(xiàn)，有些企業(yè)把歷史的交易數(shù)據(jù)、財務(wù)數(shù)據(jù)等進(jìn)行整合、統(tǒng)計分析，然后得出一些曲線圖，統(tǒng)計圖等。傳統(tǒng)數(shù)據(jù)的統(tǒng)計分析，我們稱為具備數(shù)據(jù)思維。這很好，但還遠(yuǎn)遠(yuǎn)不夠。一般認(rèn)為大數(shù)據(jù)有4個特點，4V，即數(shù)據(jù)量大、數(shù)據(jù)類型繁多、高速處理、價值密度低。但我們認(rèn)為，大數(shù)據(jù)，一定要有不同類型數(shù)據(jù)的融合，比如衛(wèi)生局的數(shù)據(jù)和人口方面、地理數(shù)據(jù)等的融合，可以有新的發(fā)現(xiàn)，產(chǎn)生新的價值。這才是大數(shù)據(jù)真正奇妙的地方所在。寧波某區(qū)區(qū)長直言大數(shù)據(jù)就是燒錢，沒有錢是玩不起的。顯然這種認(rèn)識也是片面的，如果大數(shù)據(jù)技術(shù)只是盲目上設(shè)備、大搞建設(shè)，卻不知價值所在，當(dāng)然會入不敷出。但大數(shù)據(jù)真正的價值除了服務(wù)民生，還要應(yīng)用于產(chǎn)業(yè)，從而產(chǎn)生經(jīng)濟(jì)價值、帶來經(jīng)濟(jì)效益。

　　3、數(shù)據(jù)的開放和共享問題。這里面既包括政府?dāng)?shù)據(jù)，也有企業(yè)數(shù)據(jù)。原來我以為，信息孤島現(xiàn)象主要存在于政府部門，因為大家各自為政，同時受IBM白皮書的影響(將智慧城市分為：智慧交通、智慧醫(yī)療、智慧環(huán)保等7個智慧板塊)，國內(nèi)各級政府一窩蜂的上項目，因為沒有統(tǒng)一的規(guī)劃和協(xié)調(diào)，上一個項目便成為一個信息孤島。但調(diào)研過后我們發(fā)現(xiàn)，其實政府部門的數(shù)據(jù)做到內(nèi)部的互聯(lián)互通、融合、共享還是比較容易的，比如衛(wèi)生局可以來協(xié)調(diào)所有醫(yī)院的數(shù)據(jù)，因為有行政的手段可以干預(yù)和協(xié)調(diào)，比如寧波衛(wèi)生局的大數(shù)據(jù)應(yīng)用就是一個很好的案例。而企業(yè)的數(shù)據(jù)共享就比較難，比如騰訊很難把自己的數(shù)據(jù)共享給阿里，或者中移動。對于一些企業(yè)來說，包括中小企業(yè)，數(shù)據(jù)就是命脈，自己可能還沒有好好利用，一般是不愿意公開給別人的。所以這個互聯(lián)互通是很難的。因此在企業(yè)界，更容易出現(xiàn)信息孤島現(xiàn)象。

　　我們的建議

　　針對以上兩個問題，我們有兩點建議：政府?dāng)?shù)據(jù)共享，目前證明，內(nèi)部開放和共享是可能的，但對企業(yè)和公眾開放還沒有很好的案例。因為也牽扯到涉密的問題。國內(nèi)某市長就曾直言，我把數(shù)據(jù)公開了，如果有人挖掘出國家機(jī)密，算誰的責(zé)任?數(shù)據(jù)開放沒有依據(jù)和標(biāo)準(zhǔn)。所以我們的建議是，將數(shù)據(jù)進(jìn)行分級，包括密級和輕重緩急，哪些數(shù)據(jù)可以馬上開放、哪些可以逐步開放、哪些不能開放。當(dāng)然，開放不等于公開，有些數(shù)據(jù)可以完全公開使用，有些經(jīng)過申請和審批可以使用等等。

　　企業(yè)數(shù)據(jù)共享，我們認(rèn)為，數(shù)據(jù)既然有價值，就可以作為資產(chǎn)，可以設(shè)立數(shù)據(jù)銀行進(jìn)行交易，企業(yè)可以對自己的數(shù)據(jù)進(jìn)行存取，租用等。形成數(shù)據(jù)產(chǎn)業(yè)價值鏈，讓企業(yè)的數(shù)據(jù)可以實現(xiàn)增值和共享，這樣來方便大家把數(shù)據(jù)貢獻(xiàn)出來，進(jìn)行流動，融合以及產(chǎn)生更大的價值，當(dāng)然具體商業(yè)模式可能還需要探索，還要解決數(shù)據(jù)的所有權(quán)問題等。