
大數(shù)據(jù)有大商機(jī)
深秋,信息通信領(lǐng)域一群知名專家學(xué)者聚首懷柔,一個(gè)比北京的秋景更加熱烈絢爛的話題擺在他們面前——大數(shù)據(jù)。
這是一個(gè)創(chuàng)新研究和成果層出不窮的行業(yè),繼云計(jì)算、物聯(lián)網(wǎng)、智慧地球之后,“大數(shù)據(jù)”再度來(lái)襲。
ICT最新風(fēng)向標(biāo)
大數(shù)據(jù)被用來(lái)描述信息爆炸所產(chǎn)生的海量數(shù)據(jù)。Jim Gray的新摩爾定理認(rèn)為,每18個(gè)月全球新增的信息量是計(jì)算機(jī)有史以來(lái)全部信息量的總和。截至2010年,人類擁有的信息總量大約是1.2ZB(1ZB等于1萬(wàn)億GB)。IDC預(yù)計(jì),到2020年,世界上的數(shù)據(jù)存儲(chǔ)總量將達(dá)35ZB。
數(shù)據(jù)之所以增長(zhǎng)如此之快,源于各類傳感器、智能終端的劇增。而高清晰圖像和視頻,更使得數(shù)據(jù)呈指數(shù)級(jí)增長(zhǎng)。如何收集、管理和分析數(shù)據(jù)日益成為信息通信技術(shù)創(chuàng)新的重中之重。
著名未來(lái)學(xué)家阿爾溫·托夫勒在《第三次浪潮》中預(yù)言說(shuō):“如果說(shuō)IBM的主機(jī)拉開了信息化革命的大幕,那么‘大數(shù)據(jù)’才是第3次浪潮的華彩樂章?!苯衲?月,美國(guó)政府宣布正式啟動(dòng)“大數(shù)據(jù)計(jì)劃”,并將其與歷史上對(duì)超級(jí)計(jì)算和互聯(lián)網(wǎng)的投資相提并論。這標(biāo)志著大數(shù)據(jù)已經(jīng)上升至美國(guó)國(guó)家戰(zhàn)略。
工業(yè)和信息化部電信經(jīng)濟(jì)專家委員會(huì)(ECTE)的委員們?cè)谌涨芭e辦的秋季沙龍上研討普遍認(rèn)為,從全球ICT發(fā)展整體趨勢(shì)看,大數(shù)據(jù)時(shí)代已經(jīng)來(lái)臨。
大數(shù)據(jù)可以干什么
多大數(shù)據(jù)算大,業(yè)界沒有統(tǒng)一定論,一般認(rèn)為,起步應(yīng)當(dāng)是100PB,而且在動(dòng)態(tài)擴(kuò)展,沒有上限。
北京拓爾思總經(jīng)理、中國(guó)非結(jié)構(gòu)化數(shù)據(jù)管理系統(tǒng)標(biāo)準(zhǔn)工作組副組長(zhǎng)施水才教授認(rèn)為,比“大”更重要的是用途,就是從數(shù)據(jù)中發(fā)現(xiàn)規(guī)律,預(yù)測(cè)未來(lái)。據(jù)介紹,拓爾思為厄瓜多爾明年總統(tǒng)大選研發(fā)了預(yù)測(cè)分析系統(tǒng),聚合了千家西班牙語(yǔ)新聞網(wǎng)站,包括博客、論壇、社會(huì)化媒體的信息,實(shí)時(shí)提取輿論熱點(diǎn)及傾向性預(yù)測(cè)大選結(jié)果,用戶則使用網(wǎng)絡(luò)賬號(hào)獲取服務(wù)。
大數(shù)據(jù)最典型的應(yīng)用應(yīng)屬美國(guó)聯(lián)邦政府的統(tǒng)一數(shù)據(jù)開放門戶網(wǎng)站——Data.Gov,旨在向全美開放政府擁有的公共數(shù)據(jù),鼓勵(lì)新的創(chuàng)意,提供更透明、更豐富的公共服務(wù)。截至2011年12月,Data.Gov共開放原始數(shù)據(jù)3721項(xiàng)、地理數(shù)據(jù)386429項(xiàng)。更重要的是,該網(wǎng)站還匯集了1570個(gè)數(shù)據(jù)可視化應(yīng)用。從空氣質(zhì)量與工廠數(shù)量的關(guān)系,到胖子數(shù)量與快餐店的多寡,給人無(wú)限的啟示和便利。
Data.Gov應(yīng)用不僅服務(wù)于大眾,刺激經(jīng)濟(jì),還調(diào)動(dòng)了大量的創(chuàng)新。其中一項(xiàng)免費(fèi)的航班延誤分析應(yīng)用,通過分析對(duì)比航班歷史準(zhǔn)點(diǎn)率數(shù)據(jù),幫助消費(fèi)者找到表現(xiàn)最佳,或者最符合需要的航班。伴隨著Data.Gov的數(shù)據(jù)開放,美國(guó)航班延誤率由2008年的27%下降到2010年的20.23%。
工信部信息化推進(jìn)司副司長(zhǎng)董寶青告訴《人民郵電》報(bào)記者,要積極看待大數(shù)據(jù)熱潮。大數(shù)據(jù)的興起,不完全源于信息技術(shù)變革到了一個(gè)多么了不起的高度,而源于一國(guó)政府、企業(yè)、國(guó)民的信息化應(yīng)用和創(chuàng)新思維到了一個(gè)嶄新的高度。大數(shù)據(jù)的本質(zhì)是對(duì)信息資源、知識(shí)資源、智慧資源開發(fā)利用的高度重視與創(chuàng)新。而我國(guó)在2004年的中辦、國(guó)辦34號(hào)文件里已經(jīng)深刻闡述過這一理念,現(xiàn)在需要更加積極地去推動(dòng)。
大挑戰(zhàn)蘊(yùn)含大機(jī)遇
“科技界應(yīng)高度關(guān)注大數(shù)據(jù)研究這一新的發(fā)展方向,推動(dòng)以大數(shù)據(jù)為基礎(chǔ)的新興技術(shù)和學(xué)科發(fā)展?!敝袊?guó)工程院院士李國(guó)杰日前表示。今年9~10月間,中國(guó)計(jì)算機(jī)學(xué)會(huì)、中國(guó)通信學(xué)會(huì)等紛紛成立了相應(yīng)的大數(shù)據(jù)專家委員會(huì)。
工信部電信經(jīng)濟(jì)專家委員會(huì)(ECTE)在秋季學(xué)術(shù)沙龍上提出,對(duì)海量數(shù)據(jù)的掌控和解釋運(yùn)用將成為未來(lái)競(jìng)爭(zhēng)與增長(zhǎng)的基礎(chǔ),“大數(shù)據(jù)”引領(lǐng)的智慧科技時(shí)代給信息通信業(yè)帶來(lái)新的機(jī)遇和挑戰(zhàn)。
在發(fā)達(dá)國(guó)家,制造業(yè)、銀行業(yè)、消費(fèi)營(yíng)銷行業(yè)等較早進(jìn)入大數(shù)據(jù)時(shí)代,各類顧客點(diǎn)擊、瀏覽、反饋和交易記錄,都構(gòu)成了大數(shù)據(jù)的基礎(chǔ)。百度目前數(shù)據(jù)總量接近1000PB,存儲(chǔ)的網(wǎng)頁(yè)數(shù)量接近10000億,每天還會(huì)對(duì)這些數(shù)據(jù)進(jìn)行更新,響應(yīng)用戶的請(qǐng)求也是幾十億次。通用電氣正投資15億美元建設(shè)全球軟件和分析中心,擬雇傭400名數(shù)據(jù)科學(xué)家,協(xié)調(diào)全球1萬(wàn)名軟件工程師通過共同的平臺(tái)工作。IBM商業(yè)價(jià)值研究院和牛津大學(xué)商學(xué)院對(duì)全球數(shù)千名企業(yè)高管的調(diào)查顯示,有63%的企業(yè)管理者希望大數(shù)據(jù)技術(shù)能與企業(yè)運(yùn)營(yíng)管理實(shí)踐相結(jié)合,形成企業(yè)新的核心優(yōu)勢(shì)。28%的受訪者所在企業(yè)已經(jīng)開始試點(diǎn)部署大數(shù)據(jù)。
中國(guó)聯(lián)通研究院副院長(zhǎng)童曉渝認(rèn)為,無(wú)論從獲取、存儲(chǔ)、處理和服務(wù)哪個(gè)環(huán)節(jié)看,大數(shù)據(jù)產(chǎn)業(yè)都正在快速形成。要推動(dòng)其發(fā)展,應(yīng)從戰(zhàn)略的高度去做好頂層設(shè)計(jì)和行業(yè)的發(fā)展規(guī)劃,標(biāo)準(zhǔn)規(guī)范,示范工程,還要前瞻性地完善制度建設(shè),用法律法規(guī)來(lái)保證大數(shù)據(jù)的公共性、真實(shí)性、安全性和隱私保護(hù)等。
電信運(yùn)營(yíng)商機(jī)會(huì)何在
與國(guó)外大數(shù)據(jù)的熱火朝天相比,國(guó)內(nèi)IT企業(yè)參與這一領(lǐng)域的并不多。但嗅覺靈敏的互聯(lián)網(wǎng)公司已經(jīng)走在了前頭。騰訊啟動(dòng)門戶、微博、視頻、無(wú)線的跨平臺(tái)深度整合戰(zhàn)略,天貓推出“聚石塔”平臺(tái)。但目前而言,互聯(lián)網(wǎng)業(yè)的大數(shù)據(jù),主要是對(duì)自身用戶數(shù)據(jù)的挖掘和應(yīng)用深化。
運(yùn)營(yíng)商掌握著信息通信網(wǎng)絡(luò)上很多關(guān)鍵數(shù)據(jù),包括網(wǎng)絡(luò)信息、用戶信息、位置信息等,經(jīng)過相應(yīng)的加工處理可以為政府、行業(yè)、企業(yè)、個(gè)人等用戶提供更加精準(zhǔn)的服務(wù)。IBM認(rèn)為,數(shù)據(jù)就是運(yùn)營(yíng)商的生產(chǎn)力。但運(yùn)營(yíng)商對(duì)數(shù)據(jù)商業(yè)價(jià)值的發(fā)現(xiàn)和篩選是一個(gè)“盲點(diǎn)”。此外,很多專家不約而同地指出,隨著產(chǎn)生、存儲(chǔ)、分析的數(shù)據(jù)量越來(lái)越大,用戶個(gè)人的隱私受到前所未有的挑戰(zhàn)。電信運(yùn)營(yíng)商的規(guī)模、實(shí)力與國(guó)企身份,在數(shù)據(jù)安全保護(hù)方面有比普通IT或互聯(lián)網(wǎng)企業(yè)更強(qiáng)的公信力。
近年來(lái),電信運(yùn)營(yíng)商在傳統(tǒng)業(yè)務(wù)增長(zhǎng)乏力的情況下紛紛實(shí)行戰(zhàn)略轉(zhuǎn)型,大力發(fā)展數(shù)據(jù)業(yè)務(wù)。中國(guó)移動(dòng)通信集團(tuán)設(shè)計(jì)院有限公司黨委書記周建明表示,大數(shù)據(jù)將成為電信運(yùn)營(yíng)商發(fā)展的核心引擎。但同時(shí),大數(shù)據(jù)給固網(wǎng)和無(wú)線寬帶都帶來(lái)巨大挑戰(zhàn)。過快的流量增長(zhǎng)可能會(huì)帶來(lái)網(wǎng)絡(luò)質(zhì)量下降,將降低中國(guó)信息網(wǎng)絡(luò)的競(jìng)爭(zhēng)力,也間接降低了中國(guó)經(jīng)濟(jì)競(jìng)爭(zhēng)力。所以,運(yùn)營(yíng)商要高度重視大數(shù)據(jù)時(shí)代的網(wǎng)絡(luò)建設(shè),還要對(duì)寬帶網(wǎng)絡(luò)進(jìn)行智慧管理。
工信部電信經(jīng)濟(jì)專家委員會(huì)秘書長(zhǎng)陳金橋用“一半是火焰,一半是海水”形象地比喻了大數(shù)據(jù)對(duì)通信業(yè)的機(jī)遇和挑戰(zhàn)。盡管電信運(yùn)營(yíng)商擁有數(shù)據(jù),但在快速興起的互聯(lián)網(wǎng)尤其是移動(dòng)互聯(lián)網(wǎng)業(yè)務(wù)面前,電信運(yùn)營(yíng)商數(shù)據(jù)業(yè)務(wù)并不強(qiáng)大,層次還很低。
數(shù)據(jù)分析咨詢請(qǐng)掃描二維碼
若不方便掃碼,搜微信號(hào):CDAshujufenxi
SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實(shí)戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無(wú)論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢效率:打破 “拆分必慢” 的認(rèn)知誤區(qū) 在 MySQL 數(shù)據(jù)庫(kù)管理中,“大表” 始終是性能優(yōu)化繞不開的話題。 ...
2025-09-18CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫(kù)表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動(dòng)態(tài)隨機(jī)一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開始提取前,需先判斷 TIF 文件的類型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價(jià)值的專業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲(chǔ)的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫(kù)表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實(shí)戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫(kù))處理 Excel 數(shù)據(jù)時(shí),“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗(yàn)與 t 檢驗(yàn):差異、適用場(chǎng)景與實(shí)踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計(jì)學(xué)領(lǐng)域,假設(shè)檢驗(yàn)是驗(yàn)證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專業(yè)操盤手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲(chǔ)的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計(jì)劃中 rows 數(shù)量的準(zhǔn)確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計(jì)劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對(duì)象的 text 與 content:區(qū)別、場(chǎng)景與實(shí)踐指南 在 Python 進(jìn)行 HTTP 網(wǎng)絡(luò)請(qǐng)求開發(fā)時(shí)(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價(jià)值的核心操盤手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫(kù)表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請(qǐng)求工具對(duì)比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請(qǐng)求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長(zhǎng)浮點(diǎn)數(shù)據(jù)的科學(xué)計(jì)數(shù)法問題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長(zhǎng)浮點(diǎn)數(shù)據(jù)時(shí)的科學(xué)計(jì)數(shù)法問題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價(jià)值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運(yùn)營(yíng)問題、提升執(zhí)行效率的核心手段,其價(jià)值 ...
2025-09-12用 SQL 驗(yàn)證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實(shí)戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計(jì)” 與 “用戶體驗(yàn) ...
2025-09-11塔吉特百貨孕婦營(yíng)銷案例:數(shù)據(jù)驅(qū)動(dòng)下的精準(zhǔn)零售革命與啟示 在零售行業(yè) “流量紅利見頂” 的當(dāng)下,精準(zhǔn)營(yíng)銷成為企業(yè)突圍的核心方 ...
2025-09-11CDA 數(shù)據(jù)分析師與戰(zhàn)略 / 業(yè)務(wù)數(shù)據(jù)分析:概念辨析與協(xié)同價(jià)值 在數(shù)據(jù)驅(qū)動(dòng)決策的體系中,“戰(zhàn)略數(shù)據(jù)分析”“業(yè)務(wù)數(shù)據(jù)分析” 是企業(yè) ...
2025-09-11Excel 數(shù)據(jù)聚類分析:從操作實(shí)踐到業(yè)務(wù)價(jià)值挖掘 在數(shù)據(jù)分析場(chǎng)景中,聚類分析作為 “無(wú)監(jiān)督分組” 的核心工具,能從雜亂數(shù)據(jù)中挖 ...
2025-09-10統(tǒng)計(jì)模型的核心目的:從數(shù)據(jù)解讀到?jīng)Q策支撐的價(jià)值導(dǎo)向 統(tǒng)計(jì)模型作為數(shù)據(jù)分析的核心工具,并非簡(jiǎn)單的 “公式堆砌”,而是圍繞特定 ...
2025-09-10