大數(shù)據(jù)：技術(shù)、產(chǎn)業(yè)與管理研究報告

第一次工業(yè)革命和蒸汽機的發(fā)明相聯(lián)系，始于18世紀晚期英國紡織業(yè)的機械化。第二次工業(yè)革命帶來了大規(guī)模的生產(chǎn)——發(fā)力于19世紀晚期20世紀初期的美國，伴隨著大量的創(chuàng)新發(fā)明，包括電、內(nèi)燃機、化學(xué)工業(yè)和一系列具有歷史意義的發(fā)明，電報、電話、收音機、錄音機和照相機。當(dāng)前的革命，應(yīng)該追溯到二戰(zhàn)結(jié)束，其標志性的發(fā)明——計算機。

在第四次工業(yè)革命的進程中，軟件技術(shù)驅(qū)動的數(shù)字互聯(lián)將會徹底改變整個社會，其影響范圍之廣、變革速度之快。我們認為以下技術(shù)可以引起第四次工業(yè)革命：

一、可能引起第四次工業(yè)革命的技術(shù)

1、可植入技術(shù)

人們越來越依賴電子設(shè)備，而這些設(shè)備與人體的聯(lián)系也愈加緊密。設(shè)備不再僅僅是可穿戴的，還能夠被植入體內(nèi)，發(fā)揮通信、定位、行為監(jiān)控及健康管理等功能。起搏器及人工耳蝸的發(fā)明只是一個開始，越來越多的健康設(shè)備將會涌現(xiàn)出來。這些設(shè)備將能感知疾病參數(shù)，提醒用戶采取措施，發(fā)送數(shù)據(jù)至監(jiān)測中心，甚至有可能自動投放藥物進行治療。智能文身以及其他獨特的芯片將有助于進行身份識別及定位。有了植入式設(shè)備，原本需用口頭表達的想法可以借助“嵌入式”的智能手機來完成，而一些隱含的想法和情緒也有望通過讀取腦電波及其他信號的方式來傳達。

2、數(shù)字化身份

10年前，進入數(shù)字時代還只意味著有一個手機號碼、一個郵箱地址，或許再加上一個Myspace（聚友網(wǎng)）的個人主頁?，F(xiàn)在，人們在數(shù)字世界中的存在則包括進行數(shù)碼互動，以及他們在各種線上平臺和媒體上留下的痕跡。很多人擁有不止一個數(shù)字身份，如facebook、Twitter（推特）、linkedin（領(lǐng)英）、Tumblr（湯博樂）以及instagram等多個賬號，通常還不止這些。 在互聯(lián)程度越來越高的世界中，網(wǎng)絡(luò)上的虛擬生活漸漸變得與現(xiàn)實生活密不可分。在未來，建立并維護好自己的網(wǎng)絡(luò)形象會如同我們在現(xiàn)實生活中通過打扮、言語及行為來展示自己一樣稀松平常。在網(wǎng)絡(luò)世界中，人們能夠依靠他們在網(wǎng)絡(luò)上的虛擬形象，搜索并共享信息，自由發(fā)表言論，與他人邂逅，并能在世界上任何地方發(fā)展并維護與他人的關(guān)系。

3、視覺成為新的交互界面

眼鏡式、頭戴式及眼球追蹤設(shè)備都會變得越來越智能，谷歌眼鏡只是第一個成功嘗試。在未來，人眼與視覺也將成為連接互聯(lián)網(wǎng)及數(shù)字設(shè)備的新媒介。通過視覺與互聯(lián)網(wǎng)中各種應(yīng)用與數(shù)據(jù)直接連接，個人的感官體驗經(jīng)過調(diào)節(jié)后被加強，從而更具身臨其境之感。而隨著眼球追蹤技術(shù)的興起，智能設(shè)備可以向視覺界面輸入信息，并通過眼球與之進行互動，對信息進行反饋。通過提供指令、信息可視化及交互作用，可使視覺成為一個即時、直接的交互界面，改變?nèi)藗兊膶W(xué)習(xí)、導(dǎo)航、指引和反饋方式，從而有助于人們更充分地與世界互動。

4、普適計算

數(shù)字化服務(wù)日漸變得無處不在，人們可以隨時隨地獲得所需服務(wù)，無論是通過能聯(lián)網(wǎng)的電腦，還是具備3G（第三代移動通信技術(shù)）、4G（第四代移動通信技術(shù)）或云服務(wù)的智能手機，均可實現(xiàn)。當(dāng)前全球有43%的人能連接到互聯(lián)網(wǎng)。僅2014年一年，就賣出12億臺智能手機。2015年，平板電腦的銷量預(yù)計將超過個人電腦，而智能手機的總銷量將達到電腦的6倍。81互聯(lián)網(wǎng)的發(fā)展速度已經(jīng)遠超其他所有媒體渠道。據(jù)估測，過不了幾年，全球3/4的人都能經(jīng)常使用互聯(lián)網(wǎng)。 在將來，經(jīng)常使用互聯(lián)網(wǎng)和信息服務(wù)將不再是發(fā)達國家的福利，而會成為像飲用清潔飲用水一樣的基本權(quán)利。由于無線技術(shù)所需的基礎(chǔ)設(shè)施少于其他許多公共服務(wù)（如電力、道路與水），它的普及速度很有可能要遠超過后者。因此，任何國家的任何人都將可以與地球上任一角落的人進行交流與互動。信息的產(chǎn)生和傳播會比以往更加便利。

5、萬物互聯(lián)

由于運算能力不斷上升，硬件價格持續(xù)下降，幾乎將任何東西連接上互聯(lián)網(wǎng)都十分劃算可行。智能傳感器的價格也已相當(dāng)合理。所有物品都會智能化并能聯(lián)網(wǎng)，從而促進更廣泛的交流和數(shù)據(jù)驅(qū)動的新型服務(wù)，而這些都是基于日益增強的分析能力。近期有一項關(guān)于如何利用傳感器監(jiān)測動物健康與行為的研究。它演示了安裝在家畜身上的傳感器之間如何通過移動電話網(wǎng)絡(luò)進行溝通，并可隨時隨地傳輸有關(guān)家畜狀況的實時數(shù)據(jù)。專業(yè)人士認為，未來世界的每一樣（實體）產(chǎn)品都可以與無處不在的通信基礎(chǔ)設(shè)施相連，同時無處不在的傳感器也能使人們充分感知周圍環(huán)境

6、數(shù)字化家庭

在20世紀，家庭使用的能源大部分直接用于個人消耗（如照明）。未來，這種能源需求會被更復(fù)雜設(shè)備的能源需求所超越，這些設(shè)備包括烤箱、洗碗機、電視和空調(diào)等。網(wǎng)絡(luò)流量的消耗方式也與之類似：當(dāng)前家庭的流量消耗主要集中在個人消費上，如通信與娛樂。隨著家庭自動化快速發(fā)展，人們可以通過互聯(lián)網(wǎng)控制照明、百葉窗、通風(fēng)設(shè)備、空調(diào)、音視頻播放設(shè)備、安防系統(tǒng)和家用電器。可提供各種服務(wù)的聯(lián)網(wǎng)機器人也可以幫上忙，如進行真空吸塵等。

7、智慧城市

許多城市會將服務(wù)、公共設(shè)施以及道路接入互聯(lián)網(wǎng)。這些智慧城市將能夠?qū)δ茉?、物料流、物流運輸及交通等領(lǐng)域進行管控。目前率先踐行這一理念的地區(qū)，如新加坡和巴塞羅那，已經(jīng)開始實施許多數(shù)據(jù)驅(qū)動的新服務(wù)，例如智能停車方案、智能垃圾回收以及智能照明等。智慧城市正不斷拓展其傳感技術(shù)網(wǎng)絡(luò)，致力于打造出能夠連接不同技術(shù)項目的核心數(shù)據(jù)庫平臺，在此基礎(chǔ)上依靠數(shù)據(jù)分析和預(yù)測模型拓展出新的服務(wù)。

8、運營大數(shù)據(jù)進行決策

當(dāng)今的公共數(shù)據(jù)資源比以往任何時期都要多，而理解與管理這些數(shù)據(jù)的能力也在不斷提升。政府漸漸意識到，以往采集數(shù)據(jù)的方式已經(jīng)過時，他們可以轉(zhuǎn)而依靠大數(shù)據(jù)技術(shù)實現(xiàn)當(dāng)下項目的自動化，為公民和消費者提供與時俱進的創(chuàng)新型服務(wù)。大數(shù)據(jù)的運用能夠讓諸多行業(yè)及應(yīng)用領(lǐng)域的決策過程變得更快更好。自動化決策為公眾提供了便利，讓政府和企業(yè)能夠提供全方位的實時服務(wù)和支持，從與顧客的互動到稅務(wù)的自動申報與繳納，無所不包。利用大數(shù)據(jù)進行決策也是一把雙刃劍，既帶來了機遇，也潛伏著風(fēng)險。建立起對決策數(shù)據(jù)及算法的信任至關(guān)重要。要解決公眾對隱私問題的擔(dān)憂并在商業(yè)和法律框架內(nèi)建立問責(zé)制度，就必須轉(zhuǎn)變思維方式，設(shè)立明確的條文，以防止“臉譜化”（profiling）解讀，防范意想不到的后果。用大數(shù)據(jù)取代目前的人工手段雖然會淘汰一些職業(yè)，但同時也會創(chuàng)造當(dāng)前市場上所沒有的新型職業(yè)和新機遇。

9、人工智能與決策

人工智能還能從以往的情境中獲取經(jīng)驗，提供建議，自動完成一些復(fù)雜的決策過程，從而能夠基于數(shù)據(jù)資料和以往經(jīng)驗更簡單快捷地制訂出具體方案。人工智能擅長模式匹配及自動化處理，使其可擔(dān)任大型組織中的很多工作?？梢灶A(yù)見，人工智能將在未來取代很多目前需要人工完成的工作。

10、3D打印與制造業(yè)

3d打印，又稱“增材制造”，是一種根據(jù)3d數(shù)字圖紙或模型逐層打印，從而創(chuàng)造出實物的技術(shù)。想象一下一片片地制作出一條面包的情形就更容易理解了。3d打印有望實現(xiàn)用簡易的設(shè)備來制造復(fù)雜的產(chǎn)品。最終，許多材料都將成為3d打印的原料，例如塑料、鋁、不銹鋼、陶瓷，甚至是高性能合金等，而3d打印機也將有能力完成原本需要集全工廠之力才能完成的任務(wù)。3d打印技術(shù)目前已經(jīng)得到廣泛應(yīng)用，不管是在風(fēng)力渦輪機制造還是玩具生產(chǎn)過程中，你都能見到這項技術(shù)的身影。

二、數(shù)據(jù)在第四次工業(yè)革命中的地位

第四次工業(yè)革命以人類所產(chǎn)生的的知識與智慧，通過網(wǎng)絡(luò)計算形成的知識和數(shù)據(jù)來控制、指揮工業(yè)產(chǎn)業(yè)與管理，這是一個融入網(wǎng)絡(luò)知識與智慧的規(guī)?；a(chǎn)、工業(yè)化生產(chǎn)的時代。大數(shù)據(jù)是人類使用現(xiàn)代高科技技術(shù)工業(yè)化的方式處理數(shù)據(jù)、知識，進行產(chǎn)生智慧。使用規(guī)模化的智慧管理世界、控制世界，為人類提供了更大的方便。第四次工業(yè)革命讓人類進入了智慧時代，而智慧就是人類從大量的數(shù)據(jù)中進行篩選、邏輯推理，做出的一種判斷與選擇。數(shù)據(jù)知識與智慧構(gòu)建的人類的一種可以廣泛傳遞的智慧空間，在這個空間里，所有的智慧都是大數(shù)據(jù)。

三、大數(shù)據(jù)對產(chǎn)業(yè)發(fā)展的影響分析

作為一種重要的戰(zhàn)略資產(chǎn),已經(jīng)不同程度地滲透到每個行業(yè)領(lǐng)域和部門,其深度應(yīng)用不僅有助于企業(yè)經(jīng)營活動,還有利于推動國民經(jīng)濟發(fā)展。隨著大數(shù)據(jù)技術(shù)作為生產(chǎn)力在眾多行業(yè)廣泛應(yīng)用,信息產(chǎn)業(yè)在國民經(jīng)濟中的產(chǎn)業(yè)影響力系數(shù)及產(chǎn)業(yè)感應(yīng)度系數(shù)被進一步提升,信息產(chǎn)業(yè)在國民經(jīng)濟中的重要地位愈加突出。

1、推動新一代信息技術(shù)產(chǎn)業(yè)高速發(fā)展

大數(shù)據(jù)因其巨大的商業(yè)價值和市場需求正成為推動信息產(chǎn)業(yè)持續(xù)高速增長的新引擎。隨著行業(yè)用戶對大數(shù)據(jù)價值的認可程度增加,市場需求將出現(xiàn)井噴,面向大數(shù)據(jù)市場的新技術(shù)、新產(chǎn)品、新服務(wù)、新業(yè)態(tài)會不斷涌現(xiàn),大數(shù)據(jù)將為信息產(chǎn)業(yè)打開一個高增長的新市場。在軟件與服務(wù)領(lǐng)域,因為大數(shù)據(jù)中蘊含的巨大價值,將引發(fā)數(shù)據(jù)挖掘、商業(yè)智能市場的空前繁榮。對于對于復(fù)雜數(shù)據(jù)處理的需求,將促進對非結(jié)構(gòu)化數(shù)據(jù)的分析技術(shù)創(chuàng)新;對于大數(shù)據(jù)處理的速度和廣度的需求,將促進大數(shù)據(jù)解決方案廠商加大對數(shù)據(jù)的快速、實時處理分析技術(shù)的研發(fā)創(chuàng)新。大數(shù)據(jù)成為新一代信息技術(shù)融合應(yīng)用新焦點。物聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)的迅速發(fā)展,使數(shù)據(jù)產(chǎn)生速度加快、規(guī)模加大,迫切需要運用大數(shù)據(jù)手段進行分析處理,提煉其中的有效信息。大數(shù)據(jù)應(yīng)用也給云計算帶來落地的途徑,使得基于云計算的業(yè)務(wù)創(chuàng)新和服務(wù)創(chuàng)新成為現(xiàn)實。

2、促進企業(yè)提升核心競爭力

對大數(shù)據(jù)的利用將成為企業(yè)提高核心競爭力、搶占市場先機的關(guān)鍵。企業(yè)的決策正在從“業(yè)務(wù)驅(qū)動”轉(zhuǎn)向“數(shù)據(jù)驅(qū)動”。在未來3-5年,真正理解大數(shù)據(jù)并能利用大數(shù)據(jù)進行價值挖掘的企業(yè)將具備強勁有力的競爭優(yōu)勢,從而成為行業(yè)的領(lǐng)導(dǎo)者。

3、催生發(fā)展智能政務(wù)

大數(shù)據(jù)時代,政府掌握著大量的、關(guān)鍵的數(shù)據(jù),是數(shù)據(jù)時代的財富擁有者,但目前政府掌握的數(shù)據(jù)很多都處于休眠狀態(tài),收集、管理和分析這些數(shù)據(jù),讓看起來不相關(guān)的數(shù)據(jù)真正地關(guān)聯(lián)起來,讓休眠的數(shù)據(jù)活起來,是大數(shù)據(jù)時代政府面臨的關(guān)鍵問題。大數(shù)據(jù)技術(shù)背景下,數(shù)據(jù)在網(wǎng)上可以自動進行整合和跳轉(zhuǎn)。網(wǎng)絡(luò)外部性使得政府?dāng)?shù)據(jù)隨著受眾群體的增加,成本越來越低,倍增效應(yīng)越來越大,當(dāng)政府意識到數(shù)據(jù)開放的收益遠大于其成本時,將會主動推送數(shù)據(jù)。

4、改變社會管理模式

大數(shù)據(jù)技術(shù)作為一種重要的信息技術(shù),對于提高安全保障能力、應(yīng)急能力、優(yōu)化公共事業(yè)服務(wù)、提高社會管理水平的作用正在日益凸顯。增強安全保障能力。在國防、反恐、安全等領(lǐng)域應(yīng)用大數(shù)據(jù)技術(shù),能夠?qū)碜杂诙喾N渠道的信息快速進行自動分類、整理、分析和反饋,有效解決情報、監(jiān)視和偵察系統(tǒng)不足等問題,提高國家安全保障能力。例如,美國計劃實施多尺度異常檢測項目,目的就是對大到國家、中到恐怖組織,小到恐怖分子個人等不同層級的異常行為進行分析監(jiān)測,提高對各類安全威脅的檢測速度和準確性。

三、數(shù)據(jù)技術(shù)對組織結(jié)構(gòu)和管理模式的影響

隨著云計算技術(shù)的快速普及，加之物聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)應(yīng)用的大規(guī)模爆發(fā)，人類進入了大數(shù)據(jù)時代。大數(shù)據(jù)的數(shù)據(jù)集遠遠超出了目前典型數(shù)據(jù)庫管理系統(tǒng)獲取、存儲、管理和分析的能力。IBM將大數(shù)據(jù)定義為4個V即大量化(Volume)、多樣化(Variety)、快速化(Velocity)及產(chǎn)生的價值(Value)。

針對大數(shù)據(jù)的特征挖掘其價值并作出決策，成為企業(yè)在大數(shù)據(jù)環(huán)境下進行決策的重要依據(jù)。大數(shù)據(jù)應(yīng)用領(lǐng)域包括客戶關(guān)系管理、市場營銷、金融投資、人力資源管理、供應(yīng)鏈管理和衛(wèi)生保健、教育、國家安全、食品等各個行業(yè)，已成為一個影響國家、社會和企業(yè)發(fā)展的重要因素。在互聯(lián)網(wǎng)時代，基于數(shù)據(jù)判斷、決策成為國家、企業(yè)和個人的基本技能。大數(shù)據(jù)的出現(xiàn)改變了企業(yè)決策環(huán)境，并將對企業(yè)的傳統(tǒng)決策方式產(chǎn)生巨大影響。

1、大數(shù)據(jù)對組織結(jié)構(gòu)數(shù)據(jù)的影響

大數(shù)據(jù)下決策的技術(shù)含量、知識含量大幅提高，對大數(shù)據(jù)的有效利用成為企業(yè)決策的關(guān)鍵，因此管理大量的數(shù)據(jù)是個挑戰(zhàn)，如果不能找到數(shù)據(jù)，企業(yè)就可能不會收集數(shù)據(jù)，這些數(shù)據(jù)就會被丟失掉。大數(shù)據(jù)時代不僅要求企業(yè)具有搜集分析數(shù)據(jù)的能力，更需要企業(yè)具有處理、利用這些數(shù)據(jù)的能力。

1.1大數(shù)據(jù)下的數(shù)據(jù)管理

大數(shù)據(jù)環(huán)境下，數(shù)據(jù)的特點首先是規(guī)模大、類型多、結(jié)構(gòu)多樣，包含結(jié)構(gòu)化的數(shù)據(jù)表和半結(jié)構(gòu)化、非結(jié)構(gòu)化的文本、圖片、視頻等。數(shù)據(jù)使用之前需對多源數(shù)據(jù)進行清洗、抽取和集成，保證數(shù)據(jù)的質(zhì)量和可靠性，再采用統(tǒng)一結(jié)構(gòu)來存儲這些數(shù)據(jù)。傳統(tǒng)的數(shù)據(jù)庫管理系統(tǒng)和數(shù)據(jù)分析手段已無法適用，Google、Amazon、微軟等企業(yè)都推出了大數(shù)據(jù)解決方案，它要求企業(yè)更新技術(shù)，以適應(yīng)大數(shù)據(jù)處理的需要；其次是數(shù)據(jù)產(chǎn)生速度快，應(yīng)用場景從離線(offline)轉(zhuǎn)向在線(online)，并出現(xiàn)實時處理需求。實時數(shù)據(jù)處理是大數(shù)據(jù)分析的一個核心需求，許多企業(yè)發(fā)現(xiàn)了實時數(shù)據(jù)的作用，開始專注于實時數(shù)據(jù)流，對實時數(shù)據(jù)的及時處理和利用也是企業(yè)面臨的一大挑戰(zhàn)；第三是大數(shù)據(jù)與其它數(shù)據(jù)的關(guān)系。大數(shù)據(jù)的價值來自于數(shù)據(jù)碎片間關(guān)聯(lián)所產(chǎn)生的信息。大數(shù)據(jù)時代最大的轉(zhuǎn)變是用相關(guān)關(guān)系取代因果關(guān)系，即只需知道“是什么”，而不需知道“為什么”。通過探索數(shù)據(jù)之間的關(guān)聯(lián)模式，挖掘大數(shù)據(jù)中的信息，是大數(shù)據(jù)的價值所在。但這些數(shù)據(jù)之間交互廣、價值密度低且呈碎片化，從大數(shù)據(jù)中提取有用信息，為管理決策提供支持，成為企業(yè)的迫切需求。

1.2大數(shù)據(jù)下的知識管理

從知識管理角度來看，數(shù)據(jù)蘊含著知識，知識是影響決策的重要因素。隨著“基于資源的企業(yè)理論”的發(fā)展，人們對企業(yè)內(nèi)部資源中無形知識重要性的認識越來越清晰，“基于知識”的企業(yè)能力理論逐步成為“基于資源”的企業(yè)能力理論的核心。在大數(shù)據(jù)時代，對數(shù)據(jù)進行深度挖掘可以獲得更加豐富的知識，企業(yè)可以從中極大受益。潘羅斯認為，企業(yè)規(guī)模取決于管理者擁有的知識和管理能力。在大數(shù)據(jù)下企業(yè)可以對商務(wù)了解得更徹底，使用知識改進決策和績效。收集分析海量數(shù)據(jù)，并快速獲取影響未來信息的能力，是大數(shù)據(jù)技術(shù)的魅力。在管理決策過程中，數(shù)據(jù)所起的所用是無法取代的，但需要將數(shù)據(jù)的客觀決策和人的主觀決策相結(jié)合。Bolloju指出，決策者在決策時承受著更復(fù)雜任務(wù)帶來的壓力，單純依靠人主觀決策無法應(yīng)對復(fù)雜的環(huán)境，但單純依靠數(shù)據(jù)決策也會偏離實際。美國政府發(fā)布的枟大數(shù)據(jù)研發(fā)倡議枠要求，在新方法下利用大數(shù)據(jù)，并集合決策者的感覺、洞察力和決策支持，將數(shù)據(jù)和人的主觀能動性結(jié)合起來，以避免“唯數(shù)據(jù)論”。

2、大數(shù)據(jù)對管理決策參與者的影響

2.1大數(shù)據(jù)下的決策參與者角色變異

決策參與者在大數(shù)據(jù)時代仍然是最重要的決策因素。大數(shù)據(jù)改變了長期以來依靠經(jīng)驗、理論和思想的管理決策方式，直覺判斷讓位于精準的數(shù)據(jù)分析，大數(shù)據(jù)下決策參與者的角色發(fā)生了改變。首先對于企業(yè)高層管理者，傳統(tǒng)的決策因為數(shù)據(jù)稀缺，重要的決策依賴企業(yè)領(lǐng)導(dǎo)者的經(jīng)驗，而大數(shù)據(jù)可以保證從問題出發(fā)而不用擔(dān)心數(shù)據(jù)缺失或者數(shù)據(jù)獲取困難，決策重心回到問題本身，而領(lǐng)導(dǎo)者的任務(wù)是發(fā)現(xiàn)和提出正確的問題。其次對于企業(yè)一般管理者和員工，可以很方便地獲得決策所需的信息，決策能力大大增強，決策傾向于依靠企業(yè)一線員工。大數(shù)據(jù)時代最大的挑戰(zhàn)之一就是領(lǐng)導(dǎo)者們必須與一線員工并肩工作，提高企業(yè)決策水平。再次，由于媒體不斷宣傳和數(shù)據(jù)獲取便利，普通民眾開始認識并利用大數(shù)據(jù)，每個人都能進入大數(shù)據(jù)世界，成為數(shù)據(jù)分析家，進而參與決策。另一方面終結(jié)了戰(zhàn)略論，社會化媒體和大數(shù)據(jù)動搖了由張建設(shè)提出的傳統(tǒng)戰(zhàn)略論的決策基礎(chǔ)，決策主體正從商業(yè)精英轉(zhuǎn)向社會公眾?；ヂ?lián)網(wǎng)經(jīng)濟時代，科技正促進領(lǐng)域間融合，產(chǎn)業(yè)界限正在模糊，社會化決策正在崛起。因此，多元決策在大數(shù)據(jù)環(huán)境下更加突出，決策者來源更廣泛、關(guān)系更復(fù)雜，全員參與成為大數(shù)據(jù)下企業(yè)決策的重要特點。

2.2大數(shù)據(jù)下的數(shù)據(jù)分析師

在大數(shù)據(jù)下，數(shù)據(jù)分析師在企業(yè)決策參與中起到日益重要的作用。數(shù)據(jù)分析師是運用統(tǒng)計分析、機器學(xué)習(xí)、分布式處理等技術(shù)，從大量數(shù)據(jù)中提取出對業(yè)務(wù)有意義的信息，以易懂的形式傳達給決策者，并創(chuàng)造出新數(shù)據(jù)運用服務(wù)型人才。塔塔咨詢服務(wù)公司(TCS)的調(diào)查顯示，IT行業(yè)人才缺乏，符合條件的大數(shù)據(jù)分析人員很少，是許多企業(yè)在尋求打造與部署大數(shù)據(jù)系統(tǒng)所面臨的五大困難之一。目前大數(shù)據(jù)從業(yè)人員面臨巨大缺口，麥肯錫預(yù)測在未來６年內(nèi)，美國可能缺少14萬——19萬擁有深度分析技術(shù)的人才(deep analytical positions)，缺少150萬懂得使用相應(yīng)工具分析大數(shù)據(jù)作出合理決策的管理和分析人員，而這類人才很難培養(yǎng)，需經(jīng)過多年的培訓(xùn)。

3、大數(shù)據(jù)對管理決策組織的影響

3.1大數(shù)據(jù)下的企業(yè)管理決策組織大數(shù)據(jù)下全員參與使得企業(yè)決策參與者角色發(fā)生了改變，決策權(quán)的重新分配，必然影響企業(yè)決策組織結(jié)構(gòu)和決策文化，企業(yè)決策組織結(jié)構(gòu)重要的兩項因素就是集中決策、分散決策的選擇和決策權(quán)分配問題。從集中決策和分散決策角度看，組織理論認為可預(yù)測的環(huán)境對企業(yè)的組織過程施加的影響較小，有利于形成集中分層的決策結(jié)構(gòu)，而在不可預(yù)知的環(huán)境和企業(yè)面對非常規(guī)的情況下，分散式?jīng)Q策更為有效。在動態(tài)變化環(huán)境下，分散決策結(jié)構(gòu)可能更加重要，而IT技術(shù)通常被作為一種手段來提升企業(yè)在動態(tài)改變環(huán)境中的數(shù)據(jù)處理能力。另外，企業(yè)組織結(jié)構(gòu)還受知識分布、知識轉(zhuǎn)移成本與權(quán)利傳遞成本所影響，如果知識高層領(lǐng)導(dǎo)集中分布，則對應(yīng)采用集中決策結(jié)構(gòu)；如果知識分散分布，則對應(yīng)采用分散決策結(jié)構(gòu)。大數(shù)據(jù)下的決策環(huán)境更復(fù)雜，決策時效性更強，而決策知識分布更廣泛，分散式?jīng)Q策成為大數(shù)據(jù)下決策的主要形式。從決策權(quán)分配來看，企業(yè)決策效率低下的原因之一是沒有將決策權(quán)限分配給合適的角色。員工掌握和控制的信息量越多，理論上決策權(quán)應(yīng)越大，知識與權(quán)力的匹配程度越高則組織的各項指標越好。信息技術(shù)、網(wǎng)絡(luò)技術(shù)的發(fā)展，以“金字塔”型為代表的傳統(tǒng)組織結(jié)構(gòu)被企業(yè)管理網(wǎng)絡(luò)化、權(quán)力分散化和體現(xiàn)人本管理的扁平化組織結(jié)構(gòu)所替代。大數(shù)據(jù)時代，普通員工也擁有了決策權(quán)利，扁平化組織結(jié)構(gòu)的趨勢將更明顯，決策權(quán)分配應(yīng)順應(yīng)這種變化。分析大數(shù)據(jù)環(huán)境對企業(yè)管理決策組織結(jié)構(gòu)的新要求，基于數(shù)據(jù)的有效利用和知識的創(chuàng)造、吸收，研究大數(shù)據(jù)下組織結(jié)構(gòu)建設(shè)措施，是大數(shù)據(jù)下企業(yè)組織創(chuàng)新的重要內(nèi)容。

3.2大數(shù)據(jù)下的企業(yè)管理決策文化

大數(shù)據(jù)對企業(yè)管理決策文化的影響巨大，大數(shù)據(jù)時代不是“我們想的是什么，而是我們知道些什么”。企業(yè)用大數(shù)據(jù)進行決策，首先要轉(zhuǎn)變思維模式，遇到重大決策時，先進行數(shù)據(jù)收集、分析，再進行決策，企業(yè)管理者的思維變化也會提高企業(yè)員工利用大數(shù)據(jù)進行決策的執(zhí)行力。企業(yè)管理者要真正用數(shù)據(jù)來驅(qū)動決策，基于規(guī)模龐大的數(shù)據(jù)量作出合理決策，需要很長的分析過程，企業(yè)員工用來自一線的大數(shù)據(jù)分析結(jié)果，推翻高層管理者的直覺判斷，將是企業(yè)管理決策文化的最大變革。其次是基于決策任務(wù)的決策知識的收集、創(chuàng)造、共享、傳遞和激勵制度，建立學(xué)習(xí)型企業(yè)文化，提高大數(shù)據(jù)下全員參與決策的能力和水平，培養(yǎng)基于數(shù)據(jù)進行決策的企業(yè)文化和制度，是大數(shù)據(jù)下決策的客觀要求。

4、大數(shù)據(jù)對管理決策技術(shù)的影響

4.1基于云計算的數(shù)據(jù)處理和分析技術(shù)

數(shù)據(jù)分析是大數(shù)據(jù)應(yīng)用需要解決的核心問題，傳統(tǒng)的數(shù)據(jù)分析技術(shù)受限于能力，因不能充分利用所有數(shù)據(jù)而無法獲得答案，因此尋求低成本、高度可擴展的分析平臺將是企業(yè)決策過程中的重要任務(wù)。云計算是一個管理和處理大數(shù)據(jù)的有效工具，為數(shù)據(jù)處理、管理和分析等提供支撐，大數(shù)據(jù)應(yīng)用在這個由云計算提供的基礎(chǔ)架構(gòu)平臺上。云計算主要解決兩個大數(shù)據(jù)問題，一是將大量異構(gòu)和本質(zhì)不同數(shù)據(jù)源結(jié)構(gòu)化；二是對這些數(shù)據(jù)進行管理、處理和轉(zhuǎn)換，為商業(yè)智能(BI)和企業(yè)決策服務(wù)。通過云計算加快決策資源的發(fā)現(xiàn)、組織和優(yōu)化協(xié)調(diào)與評價，企業(yè)可利用基于云端的服務(wù)來滿足數(shù)據(jù)分析需求，提升在復(fù)雜大數(shù)據(jù)環(huán)境下的信息服務(wù)質(zhì)量，加快決策問題求解。對于決策來說，數(shù)據(jù)結(jié)果的展示和解釋也非常重要，可以通過引入可視化技術(shù)對結(jié)果進行分析，用形象的方式向用戶展示使其更易理解和接受。

4.2大數(shù)據(jù)下的知識發(fā)現(xiàn)技術(shù)

由于大數(shù)據(jù)類型多樣、價值密度低，且可能是基于全樣本數(shù)據(jù)等特征，找出隱匿于大數(shù)據(jù)中的有用知識對于提升用戶決策質(zhì)量具有重要意義。大數(shù)據(jù)環(huán)境下的管理決策對知識發(fā)現(xiàn)提出了新要求。大數(shù)據(jù)的海量性、多樣性、動態(tài)性和價值稀疏性，使傳統(tǒng)的結(jié)果最優(yōu)化與算法準確率已不適應(yīng)大數(shù)據(jù)下知識發(fā)現(xiàn)方法優(yōu)劣的度量標準，亦不適用于傳統(tǒng)的基于抽樣學(xué)習(xí)的數(shù)據(jù)挖掘方法，基于全數(shù)據(jù)的知識發(fā)現(xiàn)方法已經(jīng)成為大數(shù)據(jù)知識發(fā)現(xiàn)的新途徑；大數(shù)據(jù)通常表現(xiàn)為數(shù)據(jù)流或特征流等形態(tài)，數(shù)據(jù)的價值隨著時間的流逝不斷減少，面向流數(shù)據(jù)的動態(tài)知識發(fā)現(xiàn)方法是大數(shù)據(jù)下知識發(fā)現(xiàn)的重要內(nèi)容；大數(shù)據(jù)的價值來自數(shù)據(jù)碎片間的關(guān)聯(lián)信息，數(shù)據(jù)規(guī)模的擴大形成了復(fù)雜的數(shù)據(jù)或知識的內(nèi)聯(lián)關(guān)系，需要挖掘大數(shù)據(jù)中隱含的復(fù)雜關(guān)聯(lián)信息。建立面向半結(jié)構(gòu)化和非結(jié)構(gòu)化存儲數(shù)據(jù)的知識發(fā)現(xiàn)方法、面向流數(shù)據(jù)的知識發(fā)現(xiàn)方法，以及多源海量信息的知識發(fā)現(xiàn)和知識融合技術(shù)，是大數(shù)據(jù)下知識發(fā)現(xiàn)技術(shù)的新挑戰(zhàn)。

4.3大數(shù)據(jù)下的決策支持系統(tǒng)

大數(shù)據(jù)環(huán)境下的決策問題異常復(fù)雜，決策參與者需要恰當(dāng)?shù)臎Q策支持系統(tǒng)來協(xié)助決策，以靈活應(yīng)對環(huán)境變化帶來的改變。傳統(tǒng)的決策支持系統(tǒng)更強調(diào)應(yīng)用，但它的應(yīng)用和發(fā)展受限于少量的人群使用、不支持集成來自其它渠道的數(shù)據(jù)信息、不能利用分布于別處的系統(tǒng)資源等。大數(shù)據(jù)下人人都是決策者，分布于網(wǎng)絡(luò)中的專家系統(tǒng)、管理系統(tǒng)等都是決策系統(tǒng)的一部分，因此須對傳統(tǒng)的決策支持系統(tǒng)進行變革，建立適應(yīng)大數(shù)據(jù)環(huán)境下全員參與的決策方法，建立開放的大群體決策體系結(jié)構(gòu)和協(xié)同工作模型，建立促進群體成員之間信息溝通、共享和促進群體決策過程交互的平臺，建立基于決策目標的群體分散決策一致性分析和評估機制，設(shè)計合理的決策沖突消解和聚集方法。在此基礎(chǔ)上，結(jié)合現(xiàn)有云計算環(huán)境下的云服務(wù)平臺，構(gòu)建大數(shù)據(jù)下的數(shù)據(jù)資源池、知識資源池、模型資源池、方法資源池；構(gòu)建基于服務(wù)的、集成智能分析、快速決策分析和具備自主決策功能的大數(shù)據(jù)決策支持系統(tǒng)接口，針對不同決策層次的決策服務(wù)推送機制，是建立大數(shù)據(jù)下決策支持系統(tǒng)的要求。

在實踐和操作中可以利用大數(shù)據(jù)對新產(chǎn)業(yè)進行組織形式的更進

通過大數(shù)據(jù)的引入和部署，可以達到如下效果：

1、數(shù)據(jù)整合

1)統(tǒng)一數(shù)據(jù)模型：承載企業(yè)數(shù)據(jù)模型，促進企業(yè)各域數(shù)據(jù)邏輯模型的統(tǒng)一;

2)統(tǒng)一數(shù)據(jù)標準：統(tǒng)一建立標準的數(shù)據(jù)編碼目錄，實現(xiàn)企業(yè)數(shù)據(jù)的標準化與統(tǒng)一存儲;

3)統(tǒng)一數(shù)據(jù)視圖：實現(xiàn)統(tǒng)一數(shù)據(jù)視圖，使企業(yè)在客戶、產(chǎn)品和資源等視角獲取到一致的信息。

2、數(shù)據(jù)質(zhì)量管控

1)數(shù)據(jù)質(zhì)量校驗：根據(jù)規(guī)則對所存儲的數(shù)據(jù)進行一致性、完整性和準確性的校驗，保證數(shù)據(jù)的一致性、完整性和準確性;

2)數(shù)據(jù)質(zhì)量管控：通過建立企業(yè)數(shù)據(jù)的質(zhì)量標準、數(shù)據(jù)管控的組織、數(shù)據(jù)管控的流程，對數(shù)據(jù)質(zhì)量進行統(tǒng)一管控，以達到數(shù)據(jù)質(zhì)量逐步完善。

3、數(shù)據(jù)共享

1)消除網(wǎng)狀接口，建立大數(shù)據(jù)共享中心，為各業(yè)務(wù)系統(tǒng)提供共享數(shù)據(jù)，降低接口復(fù)雜度，提高系統(tǒng)間接口效率與質(zhì)量;

2)以實時或準實時的方式將整合或計算好的數(shù)據(jù)向外系統(tǒng)提供。

4、數(shù)據(jù)應(yīng)用

1)查詢應(yīng)用：平臺實現(xiàn)條件不固定、不可預(yù)見、格式靈活的按需查詢功能;

2)固定報表應(yīng)用：視統(tǒng)計維度和指標固定的分析結(jié)果的展示，可根據(jù)業(yè)務(wù)系統(tǒng)的需求，分析產(chǎn)生各種業(yè)務(wù)報表數(shù)據(jù)等;

3)動態(tài)分析應(yīng)用：按關(guān)心的維度和指標對數(shù)據(jù)進行主題性的分析，動態(tài)分析應(yīng)用中維度和指標不固定。

四、總結(jié)

1、第四次產(chǎn)業(yè)革命的內(nèi)在邏輯

在利用云計算、大數(shù)據(jù)推動商業(yè)模式創(chuàng)新方面，很多政府都帶頭示范，進行了卓有成效的探索嘗試。山東省政府聯(lián)合46家單位信用數(shù)據(jù)，建設(shè)省級公共信用信息系統(tǒng)，目前已采集近1000萬條數(shù)據(jù)，向政府部門、第三方信用服務(wù)機構(gòu)提供開放服務(wù)，并與信用中國進行數(shù)據(jù)對接。

但是像這樣公共數(shù)據(jù)開放的正面事例還不算常態(tài)。在很多情況下，我國發(fā)展大數(shù)據(jù)產(chǎn)業(yè)都要面臨著“信息孤島”的挑戰(zhàn)?？绮块T、跨行業(yè)的數(shù)據(jù)共享仍不順暢，有價值的公共信息資源和商業(yè)數(shù)據(jù)開放程度低，基本處于死鎖狀態(tài)，無法順暢流動。

通過向社會開放數(shù)據(jù)、加強與社會企業(yè)和組織的數(shù)據(jù)合作、向社會購買服務(wù)等方式，推動環(huán)保、醫(yī)療、教育、交通等關(guān)鍵領(lǐng)域的大數(shù)據(jù)整合與集成應(yīng)用，提高政務(wù)和公共服務(wù)效率。

引起“信息孤島”的另一個原因是大數(shù)據(jù)產(chǎn)業(yè)標準的不統(tǒng)一，無形之中增加了企業(yè)使用數(shù)據(jù)的成本。魏凱介紹，可以從三個方面評判一款大數(shù)據(jù)產(chǎn)品。安全性，主要是數(shù)據(jù)加密、權(quán)限管理、數(shù)據(jù)安全保護；易用性，企業(yè)運維的成本非常高，要很簡易地部署；穩(wěn)定性，產(chǎn)品不容易受到攻擊。評價這些性能需要一把尺子，數(shù)據(jù)中心聯(lián)盟就在做這把“尺子”，制定了一些標準。

此外，當(dāng)前不少人對大數(shù)據(jù)產(chǎn)業(yè)發(fā)展規(guī)律認識不足。全社會尚未形成對大數(shù)據(jù)產(chǎn)業(yè)發(fā)展規(guī)律的客觀、科學(xué)的認識，一些地方誤將數(shù)據(jù)中心建設(shè)視為大數(shù)據(jù)產(chǎn)業(yè)發(fā)展重點，盲目追逐硬件設(shè)施投資，輕視了數(shù)據(jù)資源匯聚、積累、處理與應(yīng)用能力建設(shè)，未能主動推進大數(shù)據(jù)產(chǎn)業(yè)發(fā)展與應(yīng)用需求間的對接。

另外，我國技術(shù)創(chuàng)新與支撐能力也不足。大數(shù)據(jù)需要從底層芯片到基礎(chǔ)軟件再到應(yīng)用分析軟件等信息產(chǎn)業(yè)全產(chǎn)業(yè)鏈的支撐，無論是新型計算平臺、分布式計算架構(gòu)，還是大數(shù)據(jù)處理、分析和呈現(xiàn)方面與國外均存在較大差距，難以滿足各行各業(yè)大數(shù)據(jù)應(yīng)用需求。

最后是，信息安全和數(shù)據(jù)管理體系尚未建立。數(shù)據(jù)所有權(quán)、隱私權(quán)等相關(guān)法律法規(guī)和信息安全、開放共享等標準規(guī)范缺乏，技術(shù)安全防范和管理能力不夠，尚未建立起兼顧安全與發(fā)展的數(shù)據(jù)開放、管理和信息安全保障體系，制約了大數(shù)據(jù)發(fā)展。

2、預(yù)測下一次革命

在第四次產(chǎn)業(yè)革命結(jié)束之后，大數(shù)據(jù)產(chǎn)業(yè)鏈模式也相繼雛形，隨之而來的極有可能就是智能革命。