
大數(shù)據(jù)與實體經(jīng)濟(jì)融合的路徑
大數(shù)據(jù)理念已經(jīng)深入人心,“用數(shù)據(jù)說話”的已經(jīng)成為所有人的共識,數(shù)據(jù)成了堪比石油、黃金、鉆石的戰(zhàn)略資源。人們對大數(shù)據(jù)的認(rèn)識也更加具體化,數(shù)據(jù)無所謂大不大,有用最重要;數(shù)據(jù)是基礎(chǔ),但分析挖掘和應(yīng)用才是根本。
不僅對大數(shù)據(jù)的認(rèn)識經(jīng)歷了螺旋上升,而且實踐逐漸落地,國內(nèi)的大數(shù)據(jù)產(chǎn)業(yè)政策日漸完善,技術(shù)、應(yīng)用和產(chǎn)業(yè)都取得了非常明顯的進(jìn)展。
1.政策持續(xù)完善。在頂層設(shè)計上,國務(wù)院《促進(jìn)大數(shù)據(jù)發(fā)展行動綱要》對政務(wù)數(shù)據(jù)共享開放、產(chǎn)業(yè)發(fā)展和安全三方面做了總體部署。數(shù)據(jù)開放共享方面的《政務(wù)信息資源共享管理暫行辦法》、產(chǎn)業(yè)方面的工信部《大數(shù)據(jù)產(chǎn)業(yè)發(fā)展規(guī)劃(2016-2020)》、數(shù)據(jù)安全方面的《中華人民共和國網(wǎng)絡(luò)安全法》等也都已出臺。衛(wèi)計、農(nóng)業(yè)、檢察、稅務(wù)等部門還出臺了領(lǐng)域大數(shù)據(jù)發(fā)展的具體政策。此外,17個省市發(fā)布大數(shù)據(jù)發(fā)展規(guī)劃,十幾個省市設(shè)立了大數(shù)據(jù)管理局,8個國家大數(shù)據(jù)綜合試驗區(qū)、11個國家工程實驗室啟動建設(shè)??梢哉f,適應(yīng)大數(shù)據(jù)發(fā)展的政策環(huán)境已經(jīng)初步形成。
2.技術(shù)穩(wěn)步提升。開源給國內(nèi)產(chǎn)業(yè)界提供了一個跳板,讓我們與國際上大數(shù)據(jù)技術(shù)先進(jìn)水平的差距在不斷縮小。2014-2016年,百度、阿里和騰訊先后拿下國際上知名的Sort
Benchmark大賽冠軍。這個競賽全面比拼分布式系統(tǒng)軟件架構(gòu)能力,包括如海量數(shù)據(jù)分布式存儲、計算任務(wù)切片調(diào)度、節(jié)點通信協(xié)調(diào)同步、數(shù)據(jù)計算監(jiān)控、硬件架構(gòu)等方面的能力。而這一賽事2014年之前的冠軍均被微軟、Yahoo、亞馬遜等包攬。這從一個側(cè)面反映了我國產(chǎn)業(yè)界在大大數(shù)據(jù)處理技術(shù)水平的快速提升。與此同時,還有像一批國產(chǎn)化的商用大數(shù)據(jù)平臺產(chǎn)品崛起,底層技術(shù)越來越扎實。
3.應(yīng)用逐漸落地。比如,在金融領(lǐng)域,2016年商業(yè)銀行全面部署大數(shù)據(jù)基礎(chǔ)設(shè)施,五大國有銀行、股份制、城商行和農(nóng)商行已經(jīng)逐步開始了從傳統(tǒng)數(shù)據(jù)倉庫架構(gòu)向大數(shù)據(jù)平臺架構(gòu)的轉(zhuǎn)型改造過程,基于大數(shù)據(jù)風(fēng)控的“秒貸”業(yè)務(wù)越來越普及,不僅提升了貸款效率,還擴大的普惠金融的覆蓋面。在電信領(lǐng)域,中國電信的大數(shù)據(jù)平臺已經(jīng)擴展到31個省,匯聚了全國的基礎(chǔ)數(shù)據(jù)形成了“天翼大數(shù)據(jù)”服務(wù)能力;中國聯(lián)通也實現(xiàn)了數(shù)據(jù)整合,大數(shù)據(jù)產(chǎn)品體系已經(jīng)推出征信、指數(shù)、營銷等六大產(chǎn)品種類。
4.產(chǎn)業(yè)快速崛起。圍繞數(shù)據(jù)的產(chǎn)生、匯聚、處理、應(yīng)用等環(huán)節(jié)的產(chǎn)業(yè)生態(tài)從無到有,不斷壯大。中國信息通信研究院發(fā)布的《中國大數(shù)據(jù)產(chǎn)業(yè)調(diào)查報告(2017年)》顯示,2016年中國大數(shù)據(jù)核心產(chǎn)業(yè)(軟件、硬件及服務(wù))的市場規(guī)模為168億元,較2015年增速達(dá)45%,預(yù)計到2020年將達(dá)到578億元。2016年獲得融資的企業(yè)數(shù)量達(dá)到400多家,2017年前三個月就有150多家企業(yè)獲得融資,其中半數(shù)為中國公司,資本源源不斷的投向大數(shù)據(jù)領(lǐng)域。
大數(shù)據(jù),代表了一種現(xiàn)象,即:數(shù)據(jù)的指數(shù)增長超過了人們管理、處理和應(yīng)用數(shù)據(jù)的能力的增長,產(chǎn)生了一個“剪刀差”,而且這個“剪刀差”無疑將長期存在。無論是對一個國家還是一個企業(yè),誰能在縮小大數(shù)據(jù)剪刀差上拔得頭籌,把數(shù)據(jù)用好,就能占有競爭優(yōu)勢。
發(fā)展大數(shù)據(jù)前景還很廣闊,還有很多問題(機遇)等著解決(捕獲),比如:
1.打破數(shù)據(jù)孤島。人人都想要別人的數(shù)據(jù),但都不愿意把自己的數(shù)據(jù)給別人,這是人的天性。以前信息系統(tǒng)建設(shè)都從一個個“煙囪”開始,數(shù)據(jù)缺乏互通的技術(shù)基礎(chǔ),這卻是“人禍”。從國家層面到企業(yè)內(nèi)部,情況大同小異。麥肯錫2016年底的一份報告顯示,大數(shù)據(jù)在很多領(lǐng)域沒有達(dá)到預(yù)期效果,很重要的原因就是數(shù)據(jù)割裂。這些年,推動數(shù)據(jù)開放共享的政策舉措在一直在加強,政策已經(jīng)很給力了,但效果與預(yù)期相差甚遠(yuǎn),碰到了瓶頸。開放共享政策再往前“推”,仿佛遇到一堵高高的墻,這時就需要技術(shù)“拉”一把。的確,這些年數(shù)據(jù)共享技術(shù)供應(yīng)有些滯后了。
未來,如果同態(tài)加密(homomorphic encryption)、差分隱私(differential
privacy)、多方安全計算(secure multi-party computation)、零知識證明(zero-knowledge
proof)等技術(shù)能取得突破,數(shù)據(jù)共享就能再前進(jìn)一大步。區(qū)塊鏈的共享賬本、集體維護(hù)、難以篡改特性,也有望能助推數(shù)據(jù)共享。
2.數(shù)據(jù)資產(chǎn)管理。數(shù)據(jù)分析工作,往往有80%的時間和精力都耗費在搜集、清洗和加工數(shù)據(jù)上。數(shù)據(jù)質(zhì)量不過關(guān),也會讓數(shù)據(jù)分析效果大打折扣,甚至讓分析結(jié)果謬以千里。很多單位大數(shù)據(jù)應(yīng)用效果不佳,多半問題出在數(shù)據(jù)管理上。大家都同意把數(shù)據(jù)當(dāng)做資產(chǎn),甚至認(rèn)為有朝一日數(shù)據(jù)會計入資產(chǎn)負(fù)債表。但如果對比桌椅板凳這些實物資產(chǎn),我們對數(shù)據(jù)資產(chǎn)的管理,還處于非常原始的階段。我們往往對自己的數(shù)據(jù)資產(chǎn)有哪些、有多少都不兩眼一抹黑,更別說數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全、資產(chǎn)評估、資產(chǎn)交換交易等精細(xì)管理、價值挖掘和持續(xù)運營了。
然而,數(shù)據(jù)資產(chǎn)管理不像數(shù)據(jù)分析挖掘那么光鮮亮麗,就像城市的“下水道工程”,短期只有投入看不見產(chǎn)出。但長期又不得不做,是戰(zhàn)略層面的事,當(dāng)前不做未來返工的成本巨大。以后每個企業(yè)都將成為數(shù)據(jù)驅(qū)動的企業(yè),打基礎(chǔ)的事情要盡早。
3.深化領(lǐng)域應(yīng)用。雖然大數(shù)據(jù)的應(yīng)用取得了一定進(jìn)展,在互聯(lián)網(wǎng)、金融、電信等領(lǐng)域產(chǎn)生了實實在在的效益,醫(yī)療、工業(yè)領(lǐng)域也正在加速。但總體上只能說剛剛走出了小半步。一類是“平行替代”,如用金融和電信行業(yè)用分布式技術(shù)(如Hadoop)來重構(gòu)原來的昂貴的數(shù)據(jù)倉庫。另一類則是“補課”,如政務(wù)、醫(yī)療、工業(yè)等領(lǐng)域,正在做的工作是在原有業(yè)務(wù)系統(tǒng)之外,新建本來早該建設(shè)的數(shù)據(jù)平臺。
這些大數(shù)據(jù)應(yīng)用,顯然還不夠高大上,是物理反應(yīng),是量變而非質(zhì)變,但的確也是發(fā)展必經(jīng)的階段。隨著這些“替代”型或“補課”型應(yīng)用的深入,未來業(yè)務(wù)與數(shù)據(jù)將加深融合,越來越多數(shù)據(jù)驅(qū)動的新模式、新業(yè)態(tài)值得所有人期待。也只有這樣,數(shù)據(jù)強國戰(zhàn)略才能落到實處。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計的實用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動決策的時代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點,而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗:捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗:數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨特的門控機制,在 ...
2025-07-07統(tǒng)計學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動態(tài)、了解消費者需求的重要途徑,而統(tǒng)計學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03