
中國(guó)大數(shù)據(jù)發(fā)展5大挑戰(zhàn)10大趨勢(shì)
如今是互聯(lián)網(wǎng)時(shí)代,凡事都講求“大數(shù)據(jù)”,強(qiáng)調(diào)“用數(shù)據(jù)說(shuō)話“,觀察相關(guān)數(shù)據(jù)的變化情況并進(jìn)行分析和邏輯推理,能大體判斷出創(chuàng)業(yè)的趨勢(shì)是否已經(jīng)到來(lái)。近日,首席數(shù)據(jù)官聯(lián)盟在京發(fā)布了2016年《中國(guó)大數(shù)據(jù)企業(yè)排行榜》。本次發(fā)布的《中國(guó)大數(shù)據(jù)企業(yè)排行榜》由北京大學(xué)電子政務(wù)研究院、中國(guó)新一代IT產(chǎn)業(yè)推進(jìn)聯(lián)盟共同指導(dǎo),由首席數(shù)據(jù)官聯(lián)盟專家組依據(jù)大數(shù)據(jù)企業(yè)評(píng)價(jià)指標(biāo)體系對(duì)國(guó)內(nèi)大數(shù)據(jù)企業(yè)進(jìn)行綜合評(píng)定。
與此同時(shí)專家組還總結(jié)出了中國(guó)大數(shù)據(jù)發(fā)展的10大趨勢(shì)和5大挑戰(zhàn)。首席數(shù)據(jù)官聯(lián)盟發(fā)起人、中國(guó)新一代IT產(chǎn)業(yè)推進(jìn)聯(lián)盟技術(shù)分委會(huì)秘書長(zhǎng)魯四海做了精彩解讀。魯四海為我們分析了中國(guó)大數(shù)據(jù)發(fā)展的10大趨勢(shì)和5大挑戰(zhàn),以下是現(xiàn)場(chǎng)實(shí)錄:
趨勢(shì)一:首席數(shù)據(jù)官開(kāi)始崛起
隨著企業(yè)努力克服由變化帶來(lái)的沖擊,同時(shí)需要立足于數(shù)字化時(shí)代與競(jìng)爭(zhēng)對(duì)手進(jìn)行對(duì)抗,相信將有更多企業(yè)將關(guān)注重點(diǎn)放在新的高管職位——首席數(shù)據(jù)官(簡(jiǎn)稱CDO)身上,而這類角色也將成為推動(dòng)業(yè)務(wù)發(fā)展戰(zhàn)略的中堅(jiān)力量。國(guó)內(nèi)企業(yè)陸陸續(xù)續(xù)開(kāi)始設(shè)置首席數(shù)據(jù)官,有的企業(yè)已經(jīng)設(shè)置了專職數(shù)據(jù)部門。
趨勢(shì)二:可視化推動(dòng)大數(shù)據(jù)平民化
無(wú)代碼編寫要求的應(yīng)用已經(jīng)成為企業(yè)需要重視的一種可行方案,旨在簡(jiǎn)化業(yè)務(wù)用戶獲取所需信息的流程。越來(lái)越強(qiáng)大的可視化工具將成為業(yè)務(wù)人員能夠參與到大數(shù)據(jù)分析發(fā)揮其主觀能動(dòng)性的橋梁,可視化的發(fā)展為IT能力較弱的企業(yè)提供了應(yīng)用大數(shù)據(jù)的一個(gè)有效途徑。舉個(gè)例子來(lái)說(shuō),給大家一張全國(guó)各省網(wǎng)民占比的表格,讓大家在5秒內(nèi)找出前三和倒數(shù)第三,估計(jì)是很難的,但是如果是給大家一個(gè)柱形圖,估計(jì)一眼就看出來(lái)了。
趨勢(shì)三:智能化嵌入
主要體現(xiàn)在兩個(gè)方向,一是各類企業(yè)應(yīng)用程序越來(lái)越多地直接嵌入分析能力,而且功能在不斷地完善品。二是各種智能設(shè)備中“云 端”的大數(shù)據(jù)分析處理能力嵌入。比如現(xiàn)在每個(gè)手機(jī)上都會(huì)有個(gè)語(yǔ)音助手,它背后是大數(shù)據(jù)的平臺(tái)的支撐。目前已經(jīng)出爐的相當(dāng)方案包括機(jī)器人、自動(dòng)駕駛車輛、虛擬個(gè)人助手以及智能顧問(wèn)等等,未來(lái)的我們所接觸到的設(shè)備都會(huì)遷入大數(shù)據(jù)的分析處理能力。
趨勢(shì)四:機(jī)器學(xué)習(xí)迎來(lái)上揚(yáng)態(tài)勢(shì)
未來(lái),機(jī)器學(xué)習(xí)將成為“數(shù)據(jù)準(zhǔn)備與預(yù)測(cè)分析工作的必要前提”。許多企業(yè)已將先進(jìn)機(jī)器學(xué)習(xí)技術(shù)視為最重要的未來(lái)戰(zhàn)略趨勢(shì)。原因是大數(shù)據(jù)未來(lái)的發(fā)展一定是解決更多的實(shí)際問(wèn)題,解決實(shí)際問(wèn)題需要依靠更完善的算法模型,而這些正是機(jī)器學(xué)習(xí)的用武之地。
趨勢(shì)五:開(kāi)源應(yīng)用加速
Hadoop生態(tài)的熱度依舊不減,Spark正快速崛起?;陂_(kāi)源技術(shù)的解決方案也越來(lái)越完善,應(yīng)用也越來(lái)越普及。基于開(kāi)源的人才隊(duì)伍也在迅速壯大。開(kāi)源讓更多的企業(yè)、組織能夠快速的、低成本的邁進(jìn)大數(shù)據(jù)這個(gè)門檻兒,快速的去嘗試做些實(shí)驗(yàn),進(jìn)入到這個(gè)領(lǐng)域。
趨勢(shì)六:數(shù)據(jù)服務(wù)逐漸形成規(guī)模
我認(rèn)為有三個(gè)原因:一是我們不可能都做數(shù)據(jù)的礦工,沒(méi)必要做重復(fù)勞動(dòng)。二是數(shù)據(jù)未來(lái)一定是多維度的整合,這樣才會(huì)產(chǎn)生最大的價(jià)值。但是多維度的整合就會(huì)有數(shù)據(jù)交易,交易的實(shí)質(zhì)是服務(wù),數(shù)據(jù)服務(wù)能比較好地解決安全、速度、時(shí)效等問(wèn)題,而且是直接面向業(yè)務(wù)問(wèn)題的,更能帶動(dòng)大數(shù)據(jù)的快速發(fā)展。三是越來(lái)越多的企業(yè)利用自己擁有的數(shù)據(jù)進(jìn)行上層應(yīng)用開(kāi)發(fā),提供增值的數(shù)據(jù)服務(wù),如用戶賬號(hào)安全檢測(cè)、用戶可疑行為識(shí)別等。
趨勢(shì)七:算法市場(chǎng)的興起
我們知道數(shù)據(jù)本身沒(méi)有意義、不會(huì)有價(jià)值。它的價(jià)值在于把一些數(shù)據(jù)通過(guò)一定的算法模型進(jìn)行分析之后能夠解決某一個(gè)或者某一類的問(wèn)題。但是法的開(kāi)發(fā)難度非常大,隨著時(shí)間推移企業(yè)將意識(shí)到很多算法與其自行開(kāi)發(fā),不如通過(guò)市場(chǎng)購(gòu)買,而后直接向其中添加數(shù)據(jù)即可。
趨勢(shì)八:互聯(lián)網(wǎng)、金融、健康保持熱度,智慧城市、企業(yè)數(shù)據(jù)化、產(chǎn)業(yè)互聯(lián)網(wǎng)將成為新的增長(zhǎng)點(diǎn)
互聯(lián)網(wǎng)、金融、健康領(lǐng)域依然是大數(shù)據(jù)應(yīng)用的前沿領(lǐng)域。同時(shí)智慧城市大數(shù)據(jù)應(yīng)用越來(lái)越多,智慧城市已經(jīng)進(jìn)入高速成長(zhǎng)期,大數(shù)據(jù)是智慧城市建設(shè)的核心內(nèi)容之一,比如智慧城市的運(yùn)營(yíng)中心它的一個(gè)落腳點(diǎn)也是在大數(shù)據(jù)的融合和利用上面。隨著企業(yè)數(shù)據(jù)化發(fā)展,產(chǎn)業(yè)互聯(lián)網(wǎng)雛形已現(xiàn),基于產(chǎn)業(yè)互聯(lián)網(wǎng)的大數(shù)據(jù)應(yīng)用正快速發(fā)展,產(chǎn)業(yè)互聯(lián)網(wǎng)在很多地方已經(jīng)開(kāi)始試點(diǎn),把一個(gè)產(chǎn)業(yè)鏈上的企業(yè)數(shù)據(jù)整合在一起去優(yōu)化這個(gè)產(chǎn)業(yè)的發(fā)展。自建大數(shù)據(jù)平臺(tái)或采購(gòu)?fù)獠繑?shù)據(jù)服務(wù)提升自身競(jìng)爭(zhēng)力已成為共識(shí),越來(lái)越多的企業(yè)進(jìn)行實(shí)施階段。
趨勢(shì)九:大數(shù)據(jù)創(chuàng)業(yè)呈現(xiàn)海歸潮
很多大數(shù)據(jù)企業(yè)創(chuàng)始團(tuán)隊(duì)成員都有海外背景,隨著國(guó)內(nèi)大數(shù)據(jù)產(chǎn)業(yè)的迅速發(fā)展,選擇回國(guó)創(chuàng)業(yè)的高端人才越來(lái)越多。將國(guó)外先進(jìn)的技術(shù)與國(guó)內(nèi)龐大的市場(chǎng)相結(jié)合,被普遍看好。比如PTmind(北京鉑金智慧網(wǎng)絡(luò)科技有限公司)是由海歸鄭遠(yuǎn)博士與薛理偉博士共同創(chuàng)建的市場(chǎng)營(yíng)銷大數(shù)據(jù)智能檢測(cè)平臺(tái)公司,公司目前服務(wù)于全球5萬(wàn)多家企業(yè);GausscodeTechnology(北京高科數(shù)聚技術(shù)有限公司)由海歸程杰博士在美國(guó)創(chuàng)立的一家提供大數(shù)據(jù)應(yīng)用,智能可視化和決策平臺(tái)的企業(yè);TasteAnalytics(北京斯圖飛騰科技有限公司)由海歸汪曉宇博創(chuàng)在美國(guó)創(chuàng)立的實(shí)時(shí)動(dòng)態(tài)、圖像可視化兼具非結(jié)構(gòu)化數(shù)據(jù)分析能力的綜合智能數(shù)據(jù)分析企業(yè)……
趨勢(shì)十:產(chǎn)業(yè)生態(tài)逐漸完善,產(chǎn)業(yè)鏈協(xié)作持續(xù)升溫,“瀚沙現(xiàn)象”出現(xiàn)
《促進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)綱要》驅(qū)動(dòng)產(chǎn)業(yè)生態(tài)快速發(fā)展,產(chǎn)業(yè)分工也越來(lái)越細(xì),技術(shù)、產(chǎn)品、服務(wù)的整合越來(lái)越重要。通過(guò)聯(lián)盟形式進(jìn)行技術(shù)融合、服務(wù)整合是大數(shù)據(jù)產(chǎn)業(yè)鏈協(xié)作的重要方式,包括首席數(shù)據(jù)官聯(lián)盟在內(nèi)的聯(lián)盟得到快速地發(fā)展。同時(shí),我們也注意到大數(shù)據(jù)產(chǎn)業(yè)鏈的協(xié)作已經(jīng)出現(xiàn)了更深度整合的模式——超級(jí)合資公司模式,代表性的就是今年成立的瀚沙科技,由大數(shù)據(jù)產(chǎn)業(yè)鏈不同環(huán)節(jié)的8家知名企業(yè)共同投資成立,旨在實(shí)現(xiàn)技術(shù)、產(chǎn)品和服務(wù)的深度整合,打造一站式的大數(shù)據(jù)解決方案,業(yè)界稱為“瀚沙現(xiàn)象”出現(xiàn)。
挑戰(zhàn)一:大數(shù)據(jù)行業(yè)發(fā)展良莠不濟(jì)
我國(guó)大數(shù)據(jù)仍處于起步發(fā)展階段,在“萬(wàn)眾創(chuàng)新,大眾創(chuàng)業(yè)”的大環(huán)境下,大量的大數(shù)據(jù)企業(yè)不斷涌現(xiàn),但企業(yè)發(fā)展良莠不濟(jì)。
挑戰(zhàn)二:大數(shù)據(jù)創(chuàng)新、創(chuàng)業(yè)盲目
企業(yè)在創(chuàng)新、創(chuàng)業(yè)過(guò)程,由于缺乏對(duì)大數(shù)據(jù)產(chǎn)業(yè)鏈的認(rèn)識(shí),出現(xiàn)許多跟風(fēng)扎堆的情況,沒(méi)有有效發(fā)揮自身優(yōu)勢(shì),造成巨大的資源浪費(fèi)。創(chuàng)新的時(shí)候,我們往往會(huì)看到一些標(biāo)桿出來(lái)。通俗來(lái)講,看到人家風(fēng)光,沒(méi)有看到人家背后受罪的時(shí)候。往往一窩蜂跟去的時(shí)候就會(huì)發(fā)現(xiàn)全是坑,而且“此去華山一條道”,滿滿的全是競(jìng)爭(zhēng)對(duì)手。因此我們做這個(gè)排行的初衷就是為大家梳理一下,哪些行業(yè)、哪些板塊、哪些領(lǐng)域是什么樣的狀況,精確的找到自己的優(yōu)勢(shì)方向,去做創(chuàng)新和努力。
挑戰(zhàn)三:投資盲目
霍華德.馬克思說(shuō)過(guò)“投資者們明確達(dá)成的廣泛共識(shí)差不多都是錯(cuò)的”。究其原因是資本在選擇大數(shù)據(jù)項(xiàng)目、企業(yè)的時(shí)候,由于沒(méi)有客觀的評(píng)價(jià)標(biāo)準(zhǔn),同時(shí)也缺乏對(duì)產(chǎn)業(yè)鏈的整體認(rèn)知,導(dǎo)致投資市場(chǎng)追逐熱點(diǎn),存在一定的盲目性,大大降低了資本對(duì)大數(shù)據(jù)行業(yè)發(fā)展的正向推動(dòng)力。
挑戰(zhàn)四:監(jiān)管的盲目性
目前,監(jiān)管層很難對(duì)大數(shù)據(jù)企業(yè)和機(jī)構(gòu)進(jìn)行有效的監(jiān)管以及正確引導(dǎo),要為大數(shù)據(jù)發(fā)展打造一個(gè)良性的生態(tài)環(huán)境就比較困難。其核心原因是對(duì)大數(shù)據(jù)企業(yè)的識(shí)別評(píng)價(jià)缺乏標(biāo)準(zhǔn)和規(guī)范。
挑戰(zhàn)五:大數(shù)據(jù)項(xiàng)目建設(shè)盲目
由于人才缺乏、大數(shù)據(jù)咨詢服務(wù)還沒(méi)有發(fā)展起來(lái)等原因,用戶很難對(duì)大數(shù)據(jù)項(xiàng)目有全面的認(rèn)識(shí),容易受到廠商的左右,導(dǎo)致建設(shè)內(nèi)容的盲目;由于缺乏對(duì)產(chǎn)業(yè)的整體認(rèn)識(shí)和大數(shù)據(jù)企業(yè)評(píng)價(jià)標(biāo)準(zhǔn)、方法,所以在大數(shù)據(jù)服務(wù)商選擇上也存在一定的盲目性
數(shù)據(jù)分析咨詢請(qǐng)掃描二維碼
若不方便掃碼,搜微信號(hào):CDAshujufenxi
SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實(shí)戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無(wú)論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢效率:打破 “拆分必慢” 的認(rèn)知誤區(qū) 在 MySQL 數(shù)據(jù)庫(kù)管理中,“大表” 始終是性能優(yōu)化繞不開(kāi)的話題。 ...
2025-09-18CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫(kù)表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動(dòng)態(tài)隨機(jī)一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開(kāi)始提取前,需先判斷 TIF 文件的類型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價(jià)值的專業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲(chǔ)的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫(kù)表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實(shí)戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫(kù))處理 Excel 數(shù)據(jù)時(shí),“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗(yàn)與 t 檢驗(yàn):差異、適用場(chǎng)景與實(shí)踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計(jì)學(xué)領(lǐng)域,假設(shè)檢驗(yàn)是驗(yàn)證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專業(yè)操盤手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲(chǔ)的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計(jì)劃中 rows 數(shù)量的準(zhǔn)確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計(jì)劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對(duì)象的 text 與 content:區(qū)別、場(chǎng)景與實(shí)踐指南 在 Python 進(jìn)行 HTTP 網(wǎng)絡(luò)請(qǐng)求開(kāi)發(fā)時(shí)(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價(jià)值的核心操盤手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫(kù)表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請(qǐng)求工具對(duì)比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請(qǐng)求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長(zhǎng)浮點(diǎn)數(shù)據(jù)的科學(xué)計(jì)數(shù)法問(wèn)題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長(zhǎng)浮點(diǎn)數(shù)據(jù)時(shí)的科學(xué)計(jì)數(shù)法問(wèn)題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價(jià)值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運(yùn)營(yíng)問(wèn)題、提升執(zhí)行效率的核心手段,其價(jià)值 ...
2025-09-12用 SQL 驗(yàn)證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實(shí)戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過(guò)程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計(jì)” 與 “用戶體驗(yàn) ...
2025-09-11塔吉特百貨孕婦營(yíng)銷案例:數(shù)據(jù)驅(qū)動(dòng)下的精準(zhǔn)零售革命與啟示 在零售行業(yè) “流量紅利見(jiàn)頂” 的當(dāng)下,精準(zhǔn)營(yíng)銷成為企業(yè)突圍的核心方 ...
2025-09-11CDA 數(shù)據(jù)分析師與戰(zhàn)略 / 業(yè)務(wù)數(shù)據(jù)分析:概念辨析與協(xié)同價(jià)值 在數(shù)據(jù)驅(qū)動(dòng)決策的體系中,“戰(zhàn)略數(shù)據(jù)分析”“業(yè)務(wù)數(shù)據(jù)分析” 是企業(yè) ...
2025-09-11Excel 數(shù)據(jù)聚類分析:從操作實(shí)踐到業(yè)務(wù)價(jià)值挖掘 在數(shù)據(jù)分析場(chǎng)景中,聚類分析作為 “無(wú)監(jiān)督分組” 的核心工具,能從雜亂數(shù)據(jù)中挖 ...
2025-09-10統(tǒng)計(jì)模型的核心目的:從數(shù)據(jù)解讀到?jīng)Q策支撐的價(jià)值導(dǎo)向 統(tǒng)計(jì)模型作為數(shù)據(jù)分析的核心工具,并非簡(jiǎn)單的 “公式堆砌”,而是圍繞特定 ...
2025-09-10