
如何重構(gòu)未來,挖掘數(shù)據(jù)價值?
面對這樣近乎于取之不盡、用之不竭的數(shù)據(jù)“寶藏”,應(yīng)該如何對其進行采集、存儲、管理、分析、挖掘,成為了各行各業(yè)近年來最為關(guān)注的重要話題。
那些重視IT科技的鄰國
剛剛看完抗日戰(zhàn)爭勝利70周年的大閱兵,此時聊聊日本似乎非常應(yīng)時應(yīng)景。
日本雖然在二戰(zhàn)中被盟軍打得滿地找牙,但是戰(zhàn)爭結(jié)束后立即制定了“科技立國”的復(fù)興政策?;趯逃托畔a(chǎn)業(yè)的重視,以及來自各國的大批訂單,日本又一次迅速崛起并成為世界第二經(jīng)濟大國。即使是在房地產(chǎn)泡沫破滅和廣場協(xié)議之后,日本經(jīng)歷了長達二十年的經(jīng)濟停滯,在GDP總量上被中國趕超,但日本民眾仍然維持著極高的個人素質(zhì)和生活水準,企業(yè)創(chuàng)新能力依舊世界領(lǐng)先,看不出絲毫衰敗跡象。
再來看看另一個鄰國印度。我知道有很多同胞都看不起這個還存在奇葩種姓制度的國家,不過印度的軟件行業(yè)卻僅次于美國、雄踞全球第二。而印度人談起IT時也常常會將其解讀為“India's Tomorrow”,語氣中透著十足的驕傲。中國軟件行業(yè)近年來雖然一直在努力學(xué)習(xí)和參考印度,但是兩者之間仍然隔著一條巨大的數(shù)字鴻溝。
不難發(fā)現(xiàn),日本和印度的共性,就是對IT信息科技的高度重視,以及善于抓住信息時代的發(fā)展機遇。那么在風(fēng)起云涌的云計算大數(shù)據(jù)時代,中國是否能夠把握機會后來居上?
那些被浪費的數(shù)據(jù)價值
據(jù)統(tǒng)計,目前全世界的數(shù)據(jù)正在以每三年翻一番的速度急劇膨脹。而這些海量數(shù)據(jù)當(dāng)中,有95%以上都屬于圖片、音頻等非結(jié)構(gòu)化數(shù)據(jù),并且這一比例還在不斷提升。
面對這樣近乎于取之不盡、用之不竭的數(shù)據(jù)“寶藏”,應(yīng)該如何對其進行采集、存儲、管理、分析、挖掘,也就成為了各行各業(yè)近年來最為關(guān)注的重要話題。
除了沒有經(jīng)歷二次分析浩如煙海的圖片、音視頻等非結(jié)構(gòu)化數(shù)據(jù)之外,日志數(shù)據(jù)等用戶行為記錄也是一座遠未被人們充分挖掘和利用的“金礦”。一方面,由于存儲空間有限,絕大部分企業(yè)都會定期刪除尚未分析的日志數(shù)據(jù);另一方面,包括一些互聯(lián)網(wǎng)企業(yè)在內(nèi),其對日志數(shù)據(jù)進行處理和分析的能力也極為有限,這也導(dǎo)致數(shù)據(jù)中蘊含的巨大價值遠未被真正挖掘。
數(shù)據(jù)如何重構(gòu)未來
尚未挖掘的數(shù)據(jù)價值被大量浪費的現(xiàn)象,也引發(fā)了業(yè)界有識之士的高度關(guān)注和深刻思考。
作為國內(nèi)知名的云存儲數(shù)據(jù)服務(wù)提供商,創(chuàng)建于2011年的七牛僅僅用了四年時間就發(fā)展到了28萬企業(yè)用戶,每日數(shù)據(jù)處理量達到12億次。憑借在該領(lǐng)域積累的豐富經(jīng)驗,七牛對數(shù)據(jù)在企業(yè)構(gòu)建未來商業(yè)中的重要性、企業(yè)在數(shù)據(jù)存儲和處理上面臨的諸多問題,都有著極為深切的體驗和感悟。
為了更好地挖掘和利用數(shù)據(jù)價值,七牛舉辦了一場以“數(shù)據(jù)重構(gòu)未來”為主題的D-Future大會,聯(lián)合來自政商企界的近百名CEO、高管和技術(shù)大咖,通過十場行業(yè)演講、六大巔峰對話、近二十場技術(shù)話題分享,從產(chǎn)業(yè)和技術(shù)的角度對數(shù)據(jù)從何而來、數(shù)據(jù)如何應(yīng)用、數(shù)據(jù)如何重構(gòu)未來等三大問題進行了探討。
國務(wù)院發(fā)展研究中心基礎(chǔ)經(jīng)濟研究部副部長田杰棠指出,中國有望成為世界上第一數(shù)據(jù)大國和“世界數(shù)據(jù)中心”。數(shù)據(jù)的流動需要更加開放和規(guī)范,數(shù)據(jù)產(chǎn)權(quán)的界定也要更加清晰,國家對此將做出相應(yīng)的政策導(dǎo)向。數(shù)據(jù)只有流動起來,各行業(yè)效率才會得到提升。
《大數(shù)據(jù)時代》一書的作者維克托·邁爾·舍恩伯格也親臨現(xiàn)場,并通過Jawbone手環(huán)、Uber、Airbnb等熱門大數(shù)據(jù)應(yīng)用,形象地指出了先收集數(shù)據(jù)、再聚焦問題、發(fā)現(xiàn)創(chuàng)新性問題的重要性。
考慮到互聯(lián)網(wǎng)時代不同行業(yè)面臨的環(huán)境和情況也各不相同,大會還邀請了來自金融、社交、O2O、娛樂等各行各業(yè)的領(lǐng)頭企業(yè)創(chuàng)始人、高管,針對不同行業(yè)領(lǐng)域中如何精益運營用戶內(nèi)容、如何用數(shù)據(jù)輔助用戶畫像、如何通過數(shù)據(jù)挖掘用戶價值等多個話題進行了討論。其中像通過云存儲與人臉識別來解救走失兒童、用數(shù)據(jù)技術(shù)改善中國養(yǎng)老現(xiàn)狀、如何部署移動時代的安防監(jiān)控等民生問題,均引發(fā)了上千名與會嘉賓的極大興趣。而正是通過各行各業(yè)對大數(shù)據(jù)的挖掘和應(yīng)用,數(shù)據(jù)正在重構(gòu)這個世界的未來。
重新定義云計算和大數(shù)據(jù)
在本次大會上,七牛發(fā)布了DORA數(shù)據(jù)處理平臺,以及針對在線教育、旅游、娛樂、硬件、廣電、O2O、安防等七大行業(yè)的數(shù)據(jù)服務(wù)解決方案。這些解決方案顛覆了傳統(tǒng)方案中“產(chǎn)品+項目”的模式,以“組件服務(wù)+場景”的模式為用戶提供服務(wù),使得用戶的產(chǎn)品可以更加快速地構(gòu)建,同時也更加穩(wěn)定。
七牛CEO許式偉指出,作為全球第一家用存儲、加速、數(shù)據(jù)處理三個詞來描述云存儲服務(wù)的企業(yè),七牛的定位是成為最開放、最完備的數(shù)據(jù)服務(wù)提供商。本次大會上發(fā)布的DORA數(shù)據(jù)處理平臺、七大行業(yè)數(shù)據(jù)服務(wù)解決方案,將與七牛原有的KODO對象存儲服務(wù)、FUSION融合CDN管理平臺,以及即將發(fā)布的PILI直播云服務(wù),一起重新定義云存儲。在不遠的2016年,七牛還將通過更具顛覆性的技術(shù)和產(chǎn)品,重新定義云計算和大數(shù)據(jù)。
被忽視的數(shù)據(jù)服務(wù)商價值
在這次參加D-Future大會的過程中,還發(fā)生了一個小插曲。我的一位前同事離開媒體后,幾年打拼下來,現(xiàn)已成為某投資集團高管(你看干過記者就是一切皆有可能)。大家不難想象,當(dāng)在這樣一個數(shù)據(jù)行業(yè)的盛會上撞見這位光投資一個項目就是幾百萬甚至幾千萬的土豪時,我的感覺有多么詫異。
這位金融精英向我解釋說,作為投資方在考察項目時要想避免被坑,常常需要找多個同類項目進行比對,并且還會通過產(chǎn)業(yè)鏈上下游的合作伙伴了解其業(yè)務(wù)情況及健康程度。而擁有28萬家企業(yè)用戶的七牛,在服務(wù)客戶的過程中不僅對各行各業(yè)都有著深刻了解并積累了豐富經(jīng)驗,而且對企業(yè)的數(shù)據(jù)流向、業(yè)務(wù)流程、盈利情況等也了如指掌,因此其給出的意見和建議對于投資方來說有著極高的參考價值。未來他們集團還計劃與七牛在更多領(lǐng)域開展合作。
在這個“數(shù)據(jù)為王”的全新時代,看來不僅僅是大數(shù)據(jù),像七牛這樣的數(shù)據(jù)服務(wù)商,本身其實就有巨大的價值可挖。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
訓(xùn)練與驗證損失驟升:機器學(xué)習(xí)訓(xùn)練中的異常診斷與解決方案 在機器學(xué)習(xí)模型訓(xùn)練過程中,“損失曲線” 是反映模型學(xué)習(xí)狀態(tài)的核心指 ...
2025-09-19解析 DataHub 與 Kafka:數(shù)據(jù)生態(tài)中兩類核心工具的差異與協(xié)同 在數(shù)字化轉(zhuǎn)型加速的今天,企業(yè)對數(shù)據(jù)的需求已從 “存儲” 轉(zhuǎn)向 “ ...
2025-09-19CDA 數(shù)據(jù)分析師:讓統(tǒng)計基本概念成為業(yè)務(wù)決策的底層邏輯 統(tǒng)計基本概念是商業(yè)數(shù)據(jù)分析的 “基礎(chǔ)語言”—— 從描述數(shù)據(jù)分布的 “均 ...
2025-09-19CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-19SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢效率:打破 “拆分必慢” 的認知誤區(qū) 在 MySQL 數(shù)據(jù)庫管理中,“大表” 始終是性能優(yōu)化繞不開的話題。 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動態(tài)隨機一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開始提取前,需先判斷 TIF 文件的類型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價值的專業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫)處理 Excel 數(shù)據(jù)時,“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗與 t 檢驗:差異、適用場景與實踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計學(xué)領(lǐng)域,假設(shè)檢驗是驗證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專業(yè)操盤手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計劃中 rows 數(shù)量的準確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對象的 text 與 content:區(qū)別、場景與實踐指南 在 Python 進行 HTTP 網(wǎng)絡(luò)請求開發(fā)時(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價值的核心操盤手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請求工具對比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長浮點數(shù)據(jù)的科學(xué)計數(shù)法問題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長浮點數(shù)據(jù)時的科學(xué)計數(shù)法問題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運營問題、提升執(zhí)行效率的核心手段,其價值 ...
2025-09-12用 SQL 驗證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計” 與 “用戶體驗 ...
2025-09-11塔吉特百貨孕婦營銷案例:數(shù)據(jù)驅(qū)動下的精準零售革命與啟示 在零售行業(yè) “流量紅利見頂” 的當(dāng)下,精準營銷成為企業(yè)突圍的核心方 ...
2025-09-11