
啟明星辰副總裁潘柱廷:2016大數(shù)據(jù)技術(shù)發(fā)展趨勢解讀
這是大數(shù)據(jù)專家委編纂的第三年的版本,前兩年都是一個比較全面的大數(shù)據(jù)介紹和論述,今年沒有做這樣全面的介紹和論述。圍繞國務(wù)院發(fā)布的綱要,對綱要進(jìn)行解讀,就其中的熱點問題做了比較深入全面的闡述。今年白皮書中主要集中在兩個方面,一個是關(guān)于大數(shù)據(jù)開放共享的多方位解讀——數(shù)據(jù)交換、交易、交流、流通等問題。從內(nèi)外現(xiàn)狀、風(fēng)險與對策,和一些探索做了一些陳述。第二個對工業(yè)大數(shù)據(jù)做了比較全面的分析,關(guān)于工業(yè)大數(shù)據(jù)的,對工業(yè)的變革,中國制造2025,工業(yè)大數(shù)據(jù)發(fā)展歷程等等一些相關(guān)的產(chǎn)業(yè)和技術(shù)問題。這是今年大數(shù)據(jù)白皮書的兩個主要的論點,圍繞這兩個方面。當(dāng)然這個白皮書還包括即將發(fā)布的大數(shù)據(jù)的趨勢和相關(guān)的一些大數(shù)據(jù)企業(yè)背景資料,這個白皮書今天已經(jīng)算是發(fā)布,在征求大家意見之后過幾個月出版,先介紹一下大數(shù)據(jù)白皮書的情況。
對2016年大數(shù)據(jù)發(fā)展展望
這個展望大數(shù)據(jù)專家委這是做的第四次,從之前2012年底做的2013年的展望,即會做下一年的預(yù)測,這個預(yù)測是調(diào)研方式就是大數(shù)據(jù)專家委一百多位委員內(nèi)部進(jìn)行這樣的一個觀點征集、匯總,最后進(jìn)行投票和去年一樣,同時邀請中國大數(shù)據(jù)產(chǎn)業(yè)聯(lián)盟的會員參與到最后的投票環(huán)節(jié),今年總共投票的專家是116位,從這116位專家投票中形成了下述的結(jié)果。
根據(jù)今年大數(shù)據(jù)專家委列出的2016大數(shù)據(jù)產(chǎn)業(yè)技術(shù)發(fā)展的十大趨勢,從這里面我們簡單解讀為他出現(xiàn)了這樣四個重點的關(guān)鍵字,一個是民生相關(guān)的應(yīng)用,因為應(yīng)用很多,應(yīng)用驅(qū)動大數(shù)據(jù),因此民生相關(guān)的大數(shù)據(jù)可能會得到更快的發(fā)展,第二就是多樣性和融合性,不管是技術(shù)、產(chǎn)業(yè)等等各方面會出現(xiàn)多樣融合的狀況,另外第三個就是政策拉動,第四總是呼吁各個層面出現(xiàn)多樣的生態(tài),簡單對這十各方面稍微做一個解釋。
第一,可視化技術(shù)。作為匯總整理的時候這也是給了工作組一個很大的意外,做了這樣一個解讀,我們認(rèn)為可視化作為技術(shù)形態(tài)能夠排到第一,其實背后隱藏著大數(shù)據(jù)的貧民化。普通老百姓和常規(guī)的決策者能夠更好的理解大數(shù)據(jù)的效果和價值,所以能夠擺在這么重的位置,不僅僅可視化的形態(tài),也包括可視化的分析,這是排在第一的趨勢。
第二,多學(xué)科融合。大家對學(xué)科的發(fā)展非常關(guān)注,預(yù)測排在第二位是多學(xué)科融合,大家認(rèn)為數(shù)據(jù)科學(xué)的雛形已經(jīng)出現(xiàn)了,從表現(xiàn)形式來看,很多相關(guān)的數(shù)據(jù),科學(xué)的研究院,專門的實驗室,也可以看到這樣的學(xué)科逐漸的完備,可能會逐漸的出現(xiàn),當(dāng)然本身確實也是交叉性的學(xué)科,是多學(xué)科融合的產(chǎn)物,所以從事大數(shù)據(jù)研究不僅僅是計算機(jī)領(lǐng)域的科學(xué)家,也包括數(shù)學(xué)等等方面的科學(xué)家參與到整個大數(shù)據(jù)前沿的研究中。
第三,大數(shù)據(jù)的安全和隱私持續(xù)受到關(guān)注。從現(xiàn)在大數(shù)據(jù)的發(fā)展情況來說,應(yīng)該說針對大數(shù)據(jù)的威脅和大數(shù)據(jù)所產(chǎn)生的副作用,以及大數(shù)據(jù)發(fā)展中的障礙會逐漸成為大數(shù)據(jù)領(lǐng)域所要關(guān)注的點。針對大數(shù)據(jù)的攻擊現(xiàn)在沒有大規(guī)模的報道,但是隱憂已經(jīng)令大家擔(dān)憂。隱私大數(shù)據(jù)所帶來的副作用,原來的隱私我們接受的程度,有了大數(shù)據(jù)之后隱私接受程度發(fā)生了很大的變化。由于大家對大數(shù)據(jù)的安全等等相關(guān)的問題的擔(dān)憂阻礙我們在大數(shù)據(jù)的發(fā)展上的投入,這也是阻礙大數(shù)據(jù)發(fā)展的問題。
第四,從技術(shù)的角度來說,很多新的熱點持續(xù)入大數(shù)據(jù)的整個模式中,形成一個更加平衡的路徑。這樣的趨勢大數(shù)據(jù)專家委認(rèn)為還會持續(xù)下去,從本屆大會安排的很多技術(shù)論壇的分布大家可以看到這樣多樣化的趨勢。
第五,大數(shù)據(jù)提升社會治理和民生領(lǐng)域的應(yīng)用。基于大數(shù)據(jù)的社會治理成為社會的熱點,而且和民生相關(guān),比如說智慧城市、應(yīng)急、反恐等等,作為國計民生來說,其實國計和民生不是互斥的關(guān)系,如果相關(guān)的國計和民生有關(guān)系,專家認(rèn)為這樣的領(lǐng)域可能會得到爆發(fā)性的發(fā)展,比如反恐方面,又是和國計和老百姓相關(guān)的東西,醫(yī)療健康等等這些都是跟老百姓密切相關(guān),同時也是國家大計。
第六,《促進(jìn)大數(shù)據(jù)發(fā)展行動綱要》驅(qū)動產(chǎn)業(yè)生態(tài)。對各個地方政府可以出臺類似配套的這樣一些政策會有很大的推動作用,不可否認(rèn)對大數(shù)據(jù)的推動。除了學(xué)術(shù)、技術(shù)商業(yè)的推動以外,政策的扶持也會產(chǎn)生很大的作用,所以我們認(rèn)為大數(shù)據(jù)相關(guān)的基礎(chǔ)設(shè)施建設(shè)和大數(shù)據(jù)創(chuàng)業(yè)公司在雙創(chuàng)政策的推動下,大數(shù)據(jù)兩個驅(qū)動力會快速帶動大數(shù)據(jù)的發(fā)展。
第七,學(xué)術(shù)技術(shù)這方面,深度分析推動大數(shù)據(jù)智能應(yīng)用。這里面談到智能尤其強調(diào)是涉及到人的相關(guān)延伸,比如說決策預(yù)測、精準(zhǔn)推薦都是被專家委關(guān)注的技術(shù)和學(xué)術(shù)的應(yīng)用點,這里面涉及到人思維的延展,人的能力的延展,這些都會成為大數(shù)據(jù)分析機(jī)器學(xué)習(xí),這方面學(xué)術(shù)技術(shù)拉動的方向。
第八,數(shù)據(jù)權(quán)屬與數(shù)據(jù)主權(quán)備受關(guān)注。所有的權(quán)屬和主權(quán)的利益沖突和爭奪都是來自數(shù)據(jù)資源化、數(shù)據(jù)價值化。
第九,大數(shù)據(jù)整個的應(yīng)用領(lǐng)域的變化,其實這個變化簡單認(rèn)為是老三樣和新三樣。老的是互聯(lián)網(wǎng)、金融、健康,新的是城市、企業(yè)和工業(yè)的數(shù)據(jù),新三樣會拉動大數(shù)據(jù)發(fā)展的新的增長點。
第十,開源、測評、大賽催生良性人才與技術(shù)生態(tài)。
其實經(jīng)過幾年的對比,2014年到2015年出現(xiàn)了幾個明顯的變化點就是跨接融合,一個是基礎(chǔ)互換,和基礎(chǔ)突破的亟待解決的問題,而在2015年到2016年我們看到重要的變化就是民生多樣、政策和生態(tài),這三個在整個趨勢中一個明顯的現(xiàn)象。大數(shù)據(jù)專家委也有十項的單項調(diào)研,這是大家都會知道的大數(shù)據(jù)是靠應(yīng)用驅(qū)動的,這四年以來受到關(guān)注的應(yīng)用領(lǐng)域互聯(lián)網(wǎng)、電子商務(wù)、金融和健康醫(yī)療,新的是城市化、智慧城市、輿情分析、社會安全等等這些是被關(guān)注的新的領(lǐng)域,大數(shù)據(jù)專家委做了數(shù)據(jù)關(guān)注的預(yù)測,2016年的預(yù)測是城市相關(guān)的數(shù)據(jù),技術(shù)保持的是互聯(lián)網(wǎng)交易相關(guān)的數(shù)據(jù),還有企業(yè)相關(guān)的數(shù)據(jù),這三個數(shù)據(jù)成為大家關(guān)注的,可能會取得突破的數(shù)據(jù)類型,也成為大家參會嘉賓們可以考慮,未來一年你們研究和資本投入的可行性,是不是和這個趨勢有所印證。這是從應(yīng)用領(lǐng)域和數(shù)據(jù)類型可以看到整個大數(shù)據(jù)發(fā)展在應(yīng)用和技術(shù)發(fā)展上的某種側(cè)重,前面認(rèn)為的老三樣和新三樣也是從這樣的調(diào)研中做出的總結(jié)。
在今年大數(shù)據(jù)白皮書中重點談的是大數(shù)據(jù)開放共享,在這里面整個調(diào)研中也專門設(shè)立了這樣一項,一百多位專家明年和他的機(jī)構(gòu)對數(shù)據(jù)的態(tài)度是什么,對數(shù)據(jù)流轉(zhuǎn)的態(tài)度是什么,這是所有的選項,我們會看到確實大家都想自己收集數(shù)據(jù),希望能夠利用收集的數(shù)據(jù)進(jìn)行數(shù)據(jù)服務(wù),希望能夠買到數(shù)據(jù)機(jī),專家和他們的機(jī)構(gòu)會準(zhǔn)備賣數(shù)據(jù)機(jī)的機(jī)構(gòu)非常少。我們看到整個數(shù)據(jù)流轉(zhuǎn)上是需求大于供給的狀態(tài),數(shù)據(jù)確實是一個奇貨可居的情況,尤其是數(shù)據(jù)國際交換和賣數(shù)據(jù),這是專家的選擇百分比都是小的個位數(shù),這方面的人非常少,這是看到整個數(shù)據(jù)流轉(zhuǎn)的形態(tài),我們也希望通過政府開放共享拉動數(shù)據(jù)交流和交換。政策性是大數(shù)據(jù)發(fā)展的重要的指標(biāo),而且不可否認(rèn)大數(shù)據(jù)本身具有概念性,我們不否認(rèn)大數(shù)據(jù)有它的泡沫,但是不能因為啤酒上面有泡沫放棄底下香濃的啤酒, 專家委針對這樣的概念進(jìn)行調(diào)研,也是一個單選項,在下面所謂的現(xiàn)在流行的概念中專家們認(rèn)為和大數(shù)據(jù)最相匹配的概念是互聯(lián)網(wǎng)+、云計算和智慧城市,這是大數(shù)據(jù)專家委的看法,這三個選項和下面的選項具有數(shù)量級大的跳躍。從大數(shù)據(jù)發(fā)展的驅(qū)動力我們從去年和今年的對比看到創(chuàng)業(yè)企業(yè)對大數(shù)據(jù)的推動力被大大的看好,因為這個選項接近十個,下面兩個空是其他的選項跟這三個差距多大,大型互聯(lián)網(wǎng)和政府機(jī)構(gòu)繼續(xù)是大數(shù)據(jù)的推動,專門們非常期待創(chuàng)業(yè)公司能夠在這個里面起到更多的推動作用,這和大眾創(chuàng)業(yè)萬眾創(chuàng)新雙創(chuàng)政策有關(guān)的推動。
這是一個非常有意思的發(fā)展階段的判斷,設(shè)置了六個階段,請大數(shù)據(jù)專家委的專家對當(dāng)前中國大數(shù)據(jù)所處的階段進(jìn)行選擇,和去年的選擇相比,我們看到其實,很明顯看到專家們樂觀的態(tài)度,達(dá)到峰值上升乏力和進(jìn)行變換的選項的選擇專家在下降,大家還是看好大數(shù)據(jù)的發(fā)展前景,而且可以看到認(rèn)為大數(shù)據(jù)還處在非常初級的階段和即將快速擴(kuò)張,現(xiàn)在還沒有快速擴(kuò)張,這兩方面的專家加起來超過70%,我們對大數(shù)據(jù)所能夠看到的峰頂,其實我們還沒有看到,這是大數(shù)據(jù)專家委比較多時的共識,勢在發(fā)展,有多高,我們還不知道,這是非常樂觀的看法,在這樣的樂觀看法上,還有政策的推動下希望給大數(shù)據(jù)相關(guān)產(chǎn)業(yè)帶來更多更美好的前景,上面是我向大家發(fā)布的大數(shù)據(jù)白皮書和2016年的發(fā)展趨勢。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
訓(xùn)練與驗證損失驟升:機(jī)器學(xué)習(xí)訓(xùn)練中的異常診斷與解決方案 在機(jī)器學(xué)習(xí)模型訓(xùn)練過程中,“損失曲線” 是反映模型學(xué)習(xí)狀態(tài)的核心指 ...
2025-09-19解析 DataHub 與 Kafka:數(shù)據(jù)生態(tài)中兩類核心工具的差異與協(xié)同 在數(shù)字化轉(zhuǎn)型加速的今天,企業(yè)對數(shù)據(jù)的需求已從 “存儲” 轉(zhuǎn)向 “ ...
2025-09-19CDA 數(shù)據(jù)分析師:讓統(tǒng)計基本概念成為業(yè)務(wù)決策的底層邏輯 統(tǒng)計基本概念是商業(yè)數(shù)據(jù)分析的 “基礎(chǔ)語言”—— 從描述數(shù)據(jù)分布的 “均 ...
2025-09-19CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-19SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢效率:打破 “拆分必慢” 的認(rèn)知誤區(qū) 在 MySQL 數(shù)據(jù)庫管理中,“大表” 始終是性能優(yōu)化繞不開的話題。 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動態(tài)隨機(jī)一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開始提取前,需先判斷 TIF 文件的類型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價值的專業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫)處理 Excel 數(shù)據(jù)時,“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗與 t 檢驗:差異、適用場景與實踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計學(xué)領(lǐng)域,假設(shè)檢驗是驗證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專業(yè)操盤手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計劃中 rows 數(shù)量的準(zhǔn)確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對象的 text 與 content:區(qū)別、場景與實踐指南 在 Python 進(jìn)行 HTTP 網(wǎng)絡(luò)請求開發(fā)時(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價值的核心操盤手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請求工具對比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長浮點數(shù)據(jù)的科學(xué)計數(shù)法問題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長浮點數(shù)據(jù)時的科學(xué)計數(shù)法問題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運營問題、提升執(zhí)行效率的核心手段,其價值 ...
2025-09-12用 SQL 驗證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計” 與 “用戶體驗 ...
2025-09-11塔吉特百貨孕婦營銷案例:數(shù)據(jù)驅(qū)動下的精準(zhǔn)零售革命與啟示 在零售行業(yè) “流量紅利見頂” 的當(dāng)下,精準(zhǔn)營銷成為企業(yè)突圍的核心方 ...
2025-09-11