
大數(shù)據(jù):后web2.0時代的新戰(zhàn)略資源_數(shù)據(jù)分析師
后web2.0時代是網(wǎng)絡(luò)發(fā)展中一個重要的階段,它連接著下一代互聯(lián)網(wǎng)Web3.0。在這個時代背景下,互聯(lián)網(wǎng)、物聯(lián)網(wǎng)每天都在產(chǎn)生大量的數(shù)據(jù),這些龐大的數(shù)據(jù)資源,使得“大數(shù)據(jù)”得以問世。大數(shù)據(jù)的出現(xiàn),直接導(dǎo)致“資源”的含義發(fā)生極大的變化,它不再僅僅是指煤、石油、礦產(chǎn)等一些看得見、摸得著的實體,“大數(shù)據(jù)”也正在演變成與自然資源、人力資源一樣重要的戰(zhàn)略資源。大數(shù)據(jù)的出現(xiàn)究竟帶來了什么?它對于國家發(fā)展有何戰(zhàn)略性意義?理解把握總體國家安全觀,必須對這些問題進(jìn)行深入的思考。
10月22日,以“科學(xué)大數(shù)據(jù)的前沿問題”為主題的第507次香山科學(xué)會議在北京舉行,相關(guān)領(lǐng)域的專家、學(xué)者參與了討論, “大數(shù)據(jù)”再一次被作為一種重要的戰(zhàn)略資源提上議程。
大數(shù)據(jù),對很多人來說并不陌生,因為它已經(jīng)上過《紐約時報》《華爾街日報》的封面,現(xiàn)身在國內(nèi)一些互聯(lián)網(wǎng)主題的講座沙龍中,甚至被嗅覺靈敏的國金證券、國泰君安、銀河證券等寫進(jìn)了投資推薦報告,尤其近兩年,大數(shù)據(jù)一詞越來越多地被提及。
大數(shù)據(jù)的發(fā)展已遠(yuǎn)超出人們的想象
什么是大數(shù)據(jù)?
美國首屈一指的咨詢公司麥肯錫給大數(shù)據(jù)的定義是:大小超出常規(guī)的數(shù)據(jù)庫工具獲取、存儲、管理和分析能力的數(shù)據(jù)集。全球最大的電子商務(wù)公司亞馬遜的大數(shù)據(jù)科學(xué)家給出了一個更簡單的定義:任何超過了一臺計算機(jī)處理能力的數(shù)據(jù)量。而維基百科中只有短短一句話:“巨量資料,指的是所涉及的資料量規(guī)模巨大到無法通過目前主流軟件工具,在合理時間內(nèi)達(dá)到擷取、管理、處理并整理成為幫助企業(yè)經(jīng)營決策更積極目的的資訊。”
上面幾個定義,無一例外都突出了“大”字。那么,大數(shù)據(jù)究竟有多大?
中科院計算機(jī)所研究員王偉平告訴記者,大數(shù)據(jù)的“大”,理所當(dāng)然,首先指的是數(shù)據(jù)量空前巨大,遠(yuǎn)遠(yuǎn)超出傳統(tǒng)計算機(jī)處理數(shù)據(jù)量的級別。
數(shù)據(jù)量真的有那么大嗎?相關(guān)數(shù)據(jù)顯示,一天之中,互聯(lián)網(wǎng)產(chǎn)生的全部內(nèi)容可以刻滿1.68億張DVD;發(fā)出的郵件有2940億封之多;發(fā)出的社區(qū)帖子達(dá)200萬個;賣出的手機(jī)為37.8萬臺……
更有數(shù)據(jù)顯示,過去5年里,人類行為產(chǎn)生的數(shù)據(jù)量增長了10倍,而在接下來10年中,這一增長將達(dá)到29倍。這使得近兩年所產(chǎn)生的數(shù)據(jù)量等同于2010年以前整個人類文明產(chǎn)生的數(shù)據(jù)量總和。
對此,中國工程院院士高文說:“不管你是否認(rèn)同,大數(shù)據(jù)時代已經(jīng)來臨,并將深刻改變我們的工作和生活。”
大數(shù)據(jù)正成為新的戰(zhàn)略資源爭奪點(diǎn)
“數(shù)據(jù)是新的石油?!鼻皝嗰R遜首席科學(xué)家、斯坦福大學(xué)講師維根教授簡單直白的闡述,開啟了大數(shù)據(jù)成為新的戰(zhàn)略資源的新觀點(diǎn)。
對此,IBM執(zhí)行總裁羅睿蘭認(rèn)為,“數(shù)據(jù)將成為一切行業(yè)當(dāng)中決定勝負(fù)的根本因素,最終數(shù)據(jù)將成為人類至關(guān)重要的自然資源?!绷_睿蘭說,上一個10年,他們拋棄了PC,成功轉(zhuǎn)向了軟件和服務(wù),而這次將遠(yuǎn)離服務(wù)與咨詢,更多地專注于因大數(shù)據(jù)分析軟件而帶來的全新業(yè)務(wù)增長點(diǎn)。
然而,大數(shù)據(jù)不只在學(xué)術(shù)界和互聯(lián)網(wǎng)領(lǐng)域成為了焦點(diǎn)。2012年3月,美國奧巴馬政府宣布推出“大數(shù)據(jù)的研究和發(fā)展計劃”,并宣布先期投資超過2億美元的資金,用于研發(fā)大數(shù)據(jù)關(guān)鍵技術(shù),以搶占數(shù)據(jù)資源開發(fā)利用的制高點(diǎn)。由此,美國政府宣布投資大數(shù)據(jù)領(lǐng)域。這也成為了大數(shù)據(jù)從商業(yè)行為上升到國家戰(zhàn)略的分水嶺,表明大數(shù)據(jù)正式提升到了國家戰(zhàn)略層面。
兩個月后,聯(lián)合國“全球脈動”計劃發(fā)布了《大數(shù)據(jù)開發(fā):機(jī)遇與挑戰(zhàn)》報告,得到了英國、德國、法國、日本、加拿大等發(fā)達(dá)國家積極響應(yīng)。對于這一新的戰(zhàn)略資源,許多國家認(rèn)識到其蘊(yùn)含的重要戰(zhàn)略意義,開始在國家層面進(jìn)行戰(zhàn)略部署:
2012年,英國政府計劃兩年內(nèi)對大數(shù)據(jù)和節(jié)能計算研究投資1.89億英鎊,以帶動企業(yè)在該領(lǐng)域的投資;法國政府宣布將在2013年投入1150萬歐元,用于7個大數(shù)據(jù)市場研發(fā)項目;2011年,澳大利亞政府公布《國家數(shù)字經(jīng)濟(jì)戰(zhàn)略》報告,旨在確保2020年前基本完成國家寬帶網(wǎng)絡(luò)的物理建設(shè)……
種種跡象表明,世界各國,特別是發(fā)達(dá)國家,都把大數(shù)據(jù)的發(fā)展擺到國家戰(zhàn)略層面加以推動,使大數(shù)據(jù)正在成為世界戰(zhàn)略資源爭奪的新焦點(diǎn)。
大數(shù)據(jù)或?qū)⒅匦露x國家安全概念
英國《金融時報》近日刊文稱,“大數(shù)據(jù)時代剛拉開序幕,它有很多讓人驚嘆的地方,但要‘愛’上它,還需要時日,因為它呈現(xiàn)給人類未來的是一幅既美麗又可怕的圖景?!?/span>
事實上,這幅“既美麗又可怕的圖景”已經(jīng)顯露頭角。一位青年學(xué)者告訴記者,日本曾利用鐵人王進(jìn)喜的照片分析出當(dāng)時中國社會的發(fā)展現(xiàn)狀和油田位置,并企圖將這些信息為己所用。
“隨著大數(shù)據(jù)運(yùn)用的進(jìn)一步廣泛,這種例子也許會比比皆是,大型公司和國家恐怕會成為侵犯敏感信息的主體。”國家創(chuàng)新與發(fā)展戰(zhàn)略研究會網(wǎng)絡(luò)空間戰(zhàn)略研究中心主任秦安說。
那么,大數(shù)據(jù)時代如何兼顧安全與自由、國家利益與個人隱私?
對于這個問題,不少專家表示,大數(shù)據(jù)時代背景下,國家信息安全尤為重要。記者為此采訪了國防科技大學(xué)的相關(guān)學(xué)者,他們告訴記者:“在大數(shù)據(jù)時代,國家安全的環(huán)境和內(nèi)涵發(fā)生了極大的變化,對大數(shù)據(jù)的安全保存、防丟失和防破壞等問題,成為我們必須要面對的安全難題。大數(shù)據(jù)安全,已經(jīng)上升成為國家安全的重要組成部分?!?/span>
還有學(xué)者表示,各種國家信息基礎(chǔ)設(shè)施和重要機(jī)構(gòu)所承載著的龐大數(shù)據(jù)信息,由信息網(wǎng)絡(luò)系統(tǒng)所控制的石油和天然氣管道、水、電力和軍事等,都有可能成為被攻擊的目標(biāo)。此外,大數(shù)據(jù)也為網(wǎng)絡(luò)恐怖分子提供了新的資源支持,使他們通過攻擊、破壞民用或軍事基礎(chǔ)設(shè)施等手段,制造心理恐慌和財產(chǎn)損失,從而威脅國家安全和社會安全。
我國大數(shù)據(jù)將迎來巨大發(fā)展機(jī)遇
國務(wù)院物聯(lián)網(wǎng)領(lǐng)導(dǎo)小組組長、中國工程院鄔賀銓院士曾多次在演講中提到,“大數(shù)據(jù)已經(jīng)來到中國,政府領(lǐng)域的大數(shù)據(jù)應(yīng)用規(guī)模已然形成。”
正如鄔賀銓所說,政府部門已經(jīng)充分意識到大數(shù)據(jù)的重要性。2012年10月,中國通信學(xué)會大數(shù)據(jù)專家委員會正式成立。隨后,《關(guān)于數(shù)據(jù)中心建設(shè)布局的指導(dǎo)意見》發(fā)布,鼓勵企業(yè)利用云計算等先進(jìn)技術(shù)進(jìn)行整合、改造和升級。
“雖然從時間上看似乎并不落后于美國,但大數(shù)據(jù)應(yīng)用涉及整個以互聯(lián)網(wǎng)為核心的產(chǎn)業(yè)鏈,同發(fā)達(dá)國家還有差距?!鼻匕舱f。
很多專家表示認(rèn)同,認(rèn)為有必要從國家層面制定大數(shù)據(jù)發(fā)展規(guī)劃,將大數(shù)據(jù)上升為國家戰(zhàn)略?!巴ㄟ^國家層面的戰(zhàn)略規(guī)劃明確大數(shù)據(jù)產(chǎn)業(yè)的發(fā)展重點(diǎn)、空間布局和保障措施,提高應(yīng)急處置能力和安全防范能力?!?/span>
從目前我國的情況來看,2012年12月,廣東省提出了“大數(shù)據(jù)戰(zhàn)略”。2013年2月,科技部公布了國家重點(diǎn)基礎(chǔ)研究發(fā)展計劃2014年度重要支持方向,其中,信息科學(xué)領(lǐng)域的重要支持方向之一即為大數(shù)據(jù)計算的基礎(chǔ)研究。
記者還獲悉,國家發(fā)改委與中科院正在進(jìn)行“基礎(chǔ)研究大數(shù)據(jù)服務(wù)平臺應(yīng)用示范項目”。權(quán)威人士透露,有關(guān)部門正在積極研究,在有關(guān)部門協(xié)商的基礎(chǔ)上,經(jīng)國務(wù)院同意,將來或推出一個國家科技和產(chǎn)業(yè)專項來引導(dǎo)和支持大數(shù)據(jù)的研究和產(chǎn)業(yè)發(fā)展。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
訓(xùn)練與驗證損失驟升:機(jī)器學(xué)習(xí)訓(xùn)練中的異常診斷與解決方案 在機(jī)器學(xué)習(xí)模型訓(xùn)練過程中,“損失曲線” 是反映模型學(xué)習(xí)狀態(tài)的核心指 ...
2025-09-19解析 DataHub 與 Kafka:數(shù)據(jù)生態(tài)中兩類核心工具的差異與協(xié)同 在數(shù)字化轉(zhuǎn)型加速的今天,企業(yè)對數(shù)據(jù)的需求已從 “存儲” 轉(zhuǎn)向 “ ...
2025-09-19CDA 數(shù)據(jù)分析師:讓統(tǒng)計基本概念成為業(yè)務(wù)決策的底層邏輯 統(tǒng)計基本概念是商業(yè)數(shù)據(jù)分析的 “基礎(chǔ)語言”—— 從描述數(shù)據(jù)分布的 “均 ...
2025-09-19CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-19SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢效率:打破 “拆分必慢” 的認(rèn)知誤區(qū) 在 MySQL 數(shù)據(jù)庫管理中,“大表” 始終是性能優(yōu)化繞不開的話題。 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動態(tài)隨機(jī)一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開始提取前,需先判斷 TIF 文件的類型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價值的專業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫)處理 Excel 數(shù)據(jù)時,“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗與 t 檢驗:差異、適用場景與實踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計學(xué)領(lǐng)域,假設(shè)檢驗是驗證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專業(yè)操盤手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計劃中 rows 數(shù)量的準(zhǔn)確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對象的 text 與 content:區(qū)別、場景與實踐指南 在 Python 進(jìn)行 HTTP 網(wǎng)絡(luò)請求開發(fā)時(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價值的核心操盤手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請求工具對比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長浮點(diǎn)數(shù)據(jù)的科學(xué)計數(shù)法問題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長浮點(diǎn)數(shù)據(jù)時的科學(xué)計數(shù)法問題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運(yùn)營問題、提升執(zhí)行效率的核心手段,其價值 ...
2025-09-12用 SQL 驗證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計” 與 “用戶體驗 ...
2025-09-11塔吉特百貨孕婦營銷案例:數(shù)據(jù)驅(qū)動下的精準(zhǔn)零售革命與啟示 在零售行業(yè) “流量紅利見頂” 的當(dāng)下,精準(zhǔn)營銷成為企業(yè)突圍的核心方 ...
2025-09-11