
大數(shù)據(jù)的進(jìn)擊:從“DT時(shí)代”到“數(shù)據(jù)產(chǎn)業(yè)”
阿里巴巴集團(tuán)董事局主席馬云最早提出“DT時(shí)代”這一概念,是在2014年3月在北京舉行的一場大數(shù)據(jù)產(chǎn)業(yè)推介會(huì)上。在之后的多個(gè)場合,馬云對“DT時(shí)代”做出了系統(tǒng)解讀。他認(rèn)為,人類已經(jīng)由IT時(shí)代進(jìn)入了DT時(shí)代,數(shù)據(jù)正成為最核心的資源,甚至在未來,數(shù)據(jù)可能會(huì)成為像水、電、石油一樣的公共資源。
如果說馬云的“DT時(shí)代”宣布了IT時(shí)代的式微,并給我們描述了大數(shù)據(jù)洪流洶涌而來的壯觀宏大的話,那么近日游族網(wǎng)絡(luò)董事長、首席執(zhí)行官林奇提出“數(shù)據(jù)產(chǎn)業(yè)”理念,認(rèn)為未來只有一個(gè)產(chǎn)業(yè)就是數(shù)據(jù)產(chǎn)業(yè),經(jīng)濟(jì)形態(tài)和商業(yè)邏輯將為之重塑,則是從馬云的“DT時(shí)代”的概念升級,結(jié)合當(dāng)前新的產(chǎn)業(yè)市場形勢作出的重要判斷。
DT時(shí)代:洶涌澎湃的大數(shù)據(jù)浪潮
根據(jù)普遍的理解,數(shù)據(jù)技術(shù)時(shí)代(Datatechnology),商業(yè)社會(huì)將以數(shù)據(jù)為核心和內(nèi)在驅(qū)動(dòng)力,推動(dòng)社會(huì)發(fā)展的不再是對自然資源的利用(如石油、天然氣等),而是以云計(jì)算、大數(shù)據(jù)為導(dǎo)向的技術(shù)革新,數(shù)據(jù)資源將會(huì)是眾多利益集團(tuán)必爭的戰(zhàn)略性資源之一,其將影響著農(nóng)業(yè)、工業(yè)、第三產(chǎn)業(yè)的高層級變革。
馬云提出DT時(shí)代的時(shí)候,當(dāng)時(shí)的大數(shù)據(jù)產(chǎn)業(yè)和應(yīng)用狀況是什么樣的呢?
2013年,中國產(chǎn)生的數(shù)據(jù)總量超過0.8ZB(相當(dāng)于8億TB),2倍于2012年,相當(dāng)于2009年全球的數(shù)據(jù)總量。從互聯(lián)網(wǎng)行業(yè)看,百度每天響應(yīng)來自138個(gè)國家和地區(qū)的數(shù)十億次請求,百度每日新增數(shù)據(jù)10TB,要處理超過100PB的數(shù)據(jù),從浩如煙海的信息中精確抓取約10億網(wǎng)頁,同時(shí)索引庫還擁有千億級在線索引能力,以幫助用戶完成搜索過程;阿里巴巴掌握的總體數(shù)據(jù)量為30PB,加上對新浪微博、高德等的投資并購行為,保存的數(shù)據(jù)量應(yīng)該在近百PB;騰訊QQ當(dāng)時(shí)擁有8億用戶,4億移動(dòng)用戶,在數(shù)據(jù)倉庫存儲(chǔ)的數(shù)據(jù)量單機(jī)群數(shù)量已達(dá)到4400臺(tái),總存儲(chǔ)數(shù)據(jù)量經(jīng)壓縮處理以后在100PB左右,并且這一數(shù)據(jù)還在以日新增200TB到300TB,月增加10%的數(shù)據(jù)量不斷增長。其他像360和一些地圖、社交、影視娛樂類互聯(lián)網(wǎng)公司,也擁有PB量級數(shù)據(jù)儲(chǔ)備。在更廣闊的電信、金融、保險(xiǎn)、電力、石化系統(tǒng),公共安全、醫(yī)療、交通領(lǐng)域,氣象、教育、地理、政務(wù)等部門,以及商業(yè)銷售、制造業(yè)、農(nóng)業(yè)、物流和流通等領(lǐng)域,更是蘊(yùn)藏著海量的數(shù)據(jù)。
從IT時(shí)代到DT時(shí)代,不僅僅是一個(gè)技術(shù)的革命,更是一種經(jīng)濟(jì)形態(tài)和商業(yè)生態(tài)的革命。馬云說:“人類的第一次技術(shù)革命誕生的商業(yè)形態(tài)是工廠,第二次技術(shù)革命誕生的商業(yè)形態(tài)是公司,第一次技術(shù)革命是體能的釋放,是讓人的力量更大,第二次技術(shù)革命是對能源的利用,使得人可以走得更遙遠(yuǎn),而這一次技術(shù)革命是IT時(shí)代走向DT時(shí)代,是真正的大大的釋放?!?
林奇也認(rèn)為,如今我們面臨的數(shù)據(jù)革命,是真正意義上一次偉大的革命。數(shù)據(jù)正像石油、鋼鐵一樣成為重要原材料,以數(shù)據(jù)為重要驅(qū)動(dòng)力的數(shù)據(jù)革命正在到來。誰能搶占數(shù)據(jù)革命的先機(jī),誰就有望占據(jù)新一輪科技和產(chǎn)業(yè)革命的制高點(diǎn)。
數(shù)據(jù)產(chǎn)業(yè):DT時(shí)代的產(chǎn)業(yè)載體
未來存在于現(xiàn)在,只是不均勻的分布。
從馬云提出DT時(shí)代到今天,很多看似瘋狂的預(yù)測已經(jīng)逐漸實(shí)現(xiàn)。有專業(yè)分析機(jī)構(gòu)指出,2016年將是令人振奮的一年:智能算法將接替現(xiàn)在由人類來完成的許多業(yè)務(wù);我們將看到數(shù)據(jù)湖服務(wù)作為一種服務(wù)解決方案出現(xiàn),幫助企業(yè)以最少的工作更多的使用數(shù)據(jù);越來越多的行業(yè)將開始試用數(shù)據(jù)區(qū)塊鏈技術(shù)以改變他們的行業(yè)。
2016年大數(shù)據(jù)發(fā)展趨勢
一定程度上,云計(jì)算是大數(shù)據(jù)分析技術(shù)應(yīng)用的基礎(chǔ),海量的數(shù)據(jù)需要更多的計(jì)算資源支持,也就是說DT時(shí)代的實(shí)現(xiàn),要建立在高度發(fā)達(dá)的云計(jì)算等技術(shù)的基礎(chǔ)之上,這也是林奇所說的數(shù)據(jù)產(chǎn)業(yè)的基礎(chǔ)。在林奇看來,目前中國的商業(yè)較量和競爭仍處于較低層的資本競爭惡循環(huán),缺乏技術(shù)的創(chuàng)新和理念作為指引。我們身邊每天都會(huì)產(chǎn)生大量數(shù)據(jù),如何將這些數(shù)據(jù)有效的收集起來,并加以“凈化”和有效利用,是DT時(shí)代需要解決的首要問題。這一技術(shù)的實(shí)現(xiàn)需要以強(qiáng)大的IT基建作為支撐,高效、完善的IT構(gòu)建,也就是數(shù)據(jù)產(chǎn)業(yè)。
林奇認(rèn)為,掌握了數(shù)據(jù),掌握了數(shù)據(jù)算法,掌握了數(shù)據(jù)跟商業(yè)模式之間關(guān)系的這些企業(yè),就能夠決定一切經(jīng)濟(jì)形態(tài)。林奇對此指出,資產(chǎn)、知識(shí)的重要性都將讓位于數(shù)據(jù),誰能決定資產(chǎn)如何配置,決定知識(shí)如何在商業(yè)領(lǐng)域發(fā)揮作用,是更重要的。未來,所有企業(yè)都面臨短期戰(zhàn)略和決策能力失效的挑戰(zhàn),新的組織形態(tài)和商業(yè)邏輯是未來一系列問題的解決之道。
數(shù)據(jù)產(chǎn)業(yè):打造DT時(shí)代商業(yè)生態(tài)
林奇提出,我們即將面臨一場變革,新興大數(shù)據(jù)將成為企業(yè)發(fā)展的當(dāng)務(wù)之急,而常規(guī)技術(shù)已經(jīng)難以應(yīng)對拍字節(jié)級的大規(guī)模數(shù)據(jù)量。這一變化所帶來的挑戰(zhàn),是成功的企業(yè)在未來發(fā)展過程中必須要面對的。只有那些能夠運(yùn)用這些新數(shù)據(jù)形態(tài)的企業(yè),方能打造可持續(xù)的重要競爭優(yōu)勢。針對DT時(shí)代的商業(yè)生態(tài)將如何被數(shù)據(jù)產(chǎn)業(yè)重塑,林奇提出了三個(gè)方向,一個(gè)是全樣本數(shù)據(jù)算法,一個(gè)是實(shí)時(shí)數(shù)據(jù)分析,還有就是數(shù)據(jù)即服務(wù)的模式。
林奇提出,在不同的商業(yè)形態(tài)和商業(yè)邏輯驅(qū)動(dòng)的商業(yè)模式里面,全樣本數(shù)據(jù)算法或數(shù)據(jù)實(shí)時(shí)變化的商業(yè)形態(tài)將會(huì)遍布經(jīng)濟(jì)的各個(gè)領(lǐng)域。
統(tǒng)計(jì)學(xué)里最基本的一個(gè)概念就是,全部樣本才能找出規(guī)律。為什么能夠找出行為規(guī)律?一個(gè)更深層的概念是人和人是一樣的,如果是一個(gè)人特例出來,可能很有個(gè)性,但當(dāng)人口樣本數(shù)量足夠大時(shí),就會(huì)發(fā)現(xiàn)其實(shí)每個(gè)人都是一模一樣的。在大數(shù)據(jù)時(shí)代,無論是商家還是信息的搜集者,會(huì)比我們自己更知道你可能會(huì)想干什么?,F(xiàn)在的數(shù)據(jù)還沒有被真正挖掘,如果真正挖掘的話,通過信用卡消費(fèi)的記錄,可以成功預(yù)測未來5年內(nèi)的情況。
林奇認(rèn)為,商業(yè)智能的價(jià)值從后知后覺轉(zhuǎn)向?qū)崟r(shí)分析是一大重要趨勢,從慢數(shù)據(jù)向?qū)崟r(shí)的快數(shù)據(jù)的轉(zhuǎn)型是機(jī)器分析引發(fā)的商業(yè)智能變革?,F(xiàn)在,實(shí)時(shí)大數(shù)據(jù)技術(shù)已成為改變商業(yè)規(guī)則的技術(shù)了,并將在2016年產(chǎn)生深遠(yuǎn)的影響,并也討論了如不接納這些新技術(shù)帶來的不良后果,企業(yè)是時(shí)候采用此技術(shù)以保持領(lǐng)先的地位了。通過實(shí)施日志數(shù)據(jù)分析,企業(yè)能更快地了解運(yùn)營和顧客數(shù)據(jù),從而實(shí)現(xiàn)24/7的持續(xù)創(chuàng)新和競爭力提升。林奇就指出,現(xiàn)在很多公司還在談一年的戰(zhàn)略或者三年的戰(zhàn)略,再過兩三年,可能根本不會(huì)有一年的戰(zhàn)略,因?yàn)橐荒晏昧耍瑧?zhàn)略或者一個(gè)具體的業(yè)務(wù)布局都是按照“月”來變化的。在這樣劇烈的變化當(dāng)中,一定要有一個(gè)非常強(qiáng)大的數(shù)據(jù)支撐系統(tǒng)和商業(yè)邏輯來不斷進(jìn)行分析和調(diào)整。
IBM公司剛剛收購了Weather公司,而獲取后者數(shù)據(jù)、數(shù)據(jù)流以及預(yù)測分析方案的實(shí)質(zhì)在于著眼于未來。各企業(yè)需要將數(shù)據(jù)流即服務(wù)打包成為新的業(yè)務(wù)模式。林奇表示,未來三到五年,游族將首先把數(shù)據(jù)驅(qū)動(dòng)集中到的體育產(chǎn)業(yè)里面去,其次將把數(shù)據(jù)能力變成一種公共服務(wù)能力,服務(wù)公眾領(lǐng)域或者服務(wù)其他的行業(yè)?,F(xiàn)在的企業(yè)家都面臨這樣一些問題:用戶覆蓋和用戶之間的轉(zhuǎn)化關(guān)系?用戶對企業(yè)的認(rèn)可程度和消費(fèi)能力由什么決定?具體的消費(fèi)場景在哪里?背后的商業(yè)邏輯是什么?這些問題都需要有數(shù)據(jù)來支撐,游族將圍繞三塊具體的業(yè)務(wù),以智能數(shù)據(jù)構(gòu)成業(yè)務(wù)的底層支撐,形成可以對全球、全產(chǎn)業(yè)鏈輸出的公共服務(wù)能力。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號(hào):CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報(bào)考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計(jì)的實(shí)用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實(shí)施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價(jià)值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時(shí)代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價(jià)值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價(jià)值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點(diǎn),而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報(bào)考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗(yàn):捕捉數(shù)據(jù)背后的時(shí)間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗(yàn)如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時(shí)間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時(shí)間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實(shí)戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗(yàn):數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢變化以及識(shí)別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨(dú)特的門控機(jī)制,在 ...
2025-07-07統(tǒng)計(jì)學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動(dòng)態(tài)、了解消費(fèi)者需求的重要途徑,而統(tǒng)計(jì)學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動(dòng)力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動(dòng)力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價(jià)值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03