
揭開政府大數(shù)據(jù)應(yīng)用的面紗
“大數(shù)據(jù)將從一個(gè)時(shí)髦的概念走進(jìn)我們生活中的方方面面。幫助我們更好地認(rèn)識世界,認(rèn)識自己,構(gòu)建全新的社會關(guān)系?!鼻迦A大學(xué)數(shù)據(jù)科學(xué)研究院執(zhí)行副院長韓亦舜說。
“《關(guān)于促進(jìn)大數(shù)據(jù)發(fā)展的行動綱要》(以下簡稱《行動綱要》)標(biāo)志著大數(shù)據(jù)在我國的發(fā)展與應(yīng)用已經(jīng)上升到國家戰(zhàn)略層面?!辟惖项檰柗治鰩煴R敏說,“《行動綱要》明確指出推動政府大數(shù)據(jù)開放、共享和安全的重要性。而要使《行動綱要》中的內(nèi)容盡快成為促進(jìn)大數(shù)據(jù)發(fā)展和推進(jìn)大數(shù)據(jù)應(yīng)用的實(shí)際行動,還有很多問題要解決。”
數(shù)據(jù)潛在利用價(jià)值高
《行動綱要》涉及三個(gè)關(guān)鍵詞:共享、開放、安全。盧敏指出,三個(gè)關(guān)鍵詞背后指向三個(gè)問題:“共享”指向?yàn)槭裁匆涌煺髷?shù)據(jù)公開的進(jìn)程,“開放”指向企業(yè)創(chuàng)新的動力源在哪里,“安全”指向如何保護(hù)個(gè)人隱私和信息安全。
“政府大數(shù)據(jù)公開的目的是改善民生,企業(yè)創(chuàng)新的目的是促進(jìn)結(jié)構(gòu)轉(zhuǎn)型,信息安全建設(shè)的目的是完善法律。三個(gè)關(guān)鍵詞分別指向社會、經(jīng)濟(jì)、法律等不同領(lǐng)域。由此看來,大數(shù)據(jù)產(chǎn)業(yè)牽一發(fā)而動全身?!北R敏說。
共享、開放、安全的出發(fā)點(diǎn)和落腳點(diǎn)都指向政府大數(shù)據(jù)的開放共享、研究與應(yīng)用、示范影響效應(yīng)等。我們不禁要問,政府大數(shù)據(jù)的價(jià)值究竟何在?
就數(shù)量而言,BAT(百度、阿里、騰訊)擁有數(shù)以億計(jì)的用戶量,但這與政府大數(shù)據(jù)規(guī)模相比,可謂小巫見大巫。盧敏介紹說:“粗略估算,全國政府大數(shù)據(jù)加起來至少也有數(shù)百甚至上千個(gè)阿里巴巴的體量。”
至于政府大數(shù)據(jù)的質(zhì)量,則可以通過和BAT企業(yè)對比來說明。據(jù)介紹,百度擁有龐大的用戶搜索記錄,每個(gè)網(wǎng)民都會留下眾多記錄,但這些數(shù)據(jù)較為單一,不進(jìn)行關(guān)聯(lián)應(yīng)用就無法顯示價(jià)值;騰訊的優(yōu)勢在于擁有數(shù)以億計(jì)的QQ和微信用戶量以及更龐大的社交數(shù)據(jù),但這些數(shù)據(jù)目前僅局限于營銷應(yīng)用;阿里的交易數(shù)據(jù)似乎價(jià)值更高,但也只是局限在電商領(lǐng)域以及外延應(yīng)用?!癇AT的共同短板在于數(shù)據(jù)種類的單一化程度較高?!北R敏說。
政府大數(shù)據(jù)涉及工商、稅務(wù)、司法、交通、醫(yī)療、教育、通信等等領(lǐng)域,數(shù)據(jù)的種類繁多,關(guān)聯(lián)性強(qiáng)、統(tǒng)計(jì)規(guī)格較為統(tǒng)一,便于應(yīng)用處理。九次方大數(shù)據(jù)創(chuàng)始人王叁壽曾表示“政府的數(shù)據(jù)事關(guān)百姓生活的方方面面,數(shù)據(jù)的利用價(jià)值也最高”。
開放標(biāo)準(zhǔn)待建立
真正的大數(shù)據(jù)除了量大,另一個(gè)特點(diǎn)是變化多,如圖片、視頻、大段文字這些不能用數(shù)字化處理的數(shù)據(jù),屬于非結(jié)構(gòu)化數(shù)據(jù)。只有非結(jié)構(gòu)化的數(shù)據(jù)才更具有開發(fā)價(jià)值。
政府的很多數(shù)據(jù),例如人口、戶籍等,屬于結(jié)構(gòu)化數(shù)據(jù),離非結(jié)構(gòu)化的大數(shù)據(jù)概念還有一定距離。但就目前階段來看,政府推動大數(shù)據(jù)產(chǎn)業(yè)發(fā)展仍有現(xiàn)實(shí)意義。
通過與大數(shù)據(jù)緊密相連的互聯(lián)網(wǎng),在市民服務(wù)設(shè)施眾包、提高政府監(jiān)督職能等方面,百姓能夠參與進(jìn)來?!罢畔⒌拈_放共享,有助于提高政府的公信力。”韓亦舜說。
政府?dāng)?shù)據(jù)的開放,不但能幫助政府提高自身透明度并提升治理能力和效率,也是促進(jìn)經(jīng)濟(jì)發(fā)展和社會創(chuàng)新的重要推力。然而,在政府?dāng)?shù)據(jù)資源共享開放工程當(dāng)中,數(shù)據(jù)的開放程度與開放內(nèi)容的標(biāo)準(zhǔn),目前似乎并沒有定論。
復(fù)旦大學(xué)國際關(guān)系與公共事務(wù)學(xué)院副教授鄭磊在《中國開放政府?dāng)?shù)據(jù)平臺研究:框架、現(xiàn)狀與建議》一文中提出,經(jīng)過樣本的數(shù)據(jù)采集分析,截至2015年5月,各地開放政府?dāng)?shù)據(jù)實(shí)踐共計(jì)公開了1963個(gè)數(shù)據(jù)集。其中公開數(shù)據(jù)最多的是武漢(635個(gè)),最少的則是貴州(17個(gè))。
努力打造大數(shù)據(jù)產(chǎn)業(yè)新高地的貴州,在政府?dāng)?shù)據(jù)開放方面面臨著新的挑戰(zhàn)。
鄭磊指出,中國開放政府?dāng)?shù)據(jù)實(shí)踐存在的問題主要有目前開放的數(shù)據(jù)量少、價(jià)值低、可機(jī)讀比例低,開放的多為靜態(tài)數(shù)據(jù),數(shù)據(jù)授權(quán)協(xié)議條款含糊,缺乏便捷的數(shù)據(jù)獲取渠道,缺乏高質(zhì)量的數(shù)據(jù)應(yīng)用,缺乏便捷、及時(shí)、有效、公開的互動交流等。
“《行動綱要》為信息開放共享指明了出路,但是政府大數(shù)據(jù)如何應(yīng)用,還要看接下來的行動和規(guī)則制定?!北R敏說。
針對問題,鄭磊建議加強(qiáng)管理架構(gòu)建設(shè),制定相關(guān)政策與工作機(jī)會,提高領(lǐng)導(dǎo)支持能力,基于社會需求開放高價(jià)值數(shù)據(jù)、展現(xiàn)數(shù)據(jù)應(yīng)用,提升數(shù)據(jù)開放性與可機(jī)讀比例,規(guī)范數(shù)據(jù)更新周期,落實(shí)數(shù)據(jù)更新工作,完善數(shù)據(jù)授權(quán)協(xié)議,降低數(shù)據(jù)獲取與互動門檻,推動有效公開的溝通。
數(shù)據(jù)利用如何破冰
目前,一些發(fā)達(dá)國家政府在數(shù)據(jù)開放方面走在了前面,甚至把數(shù)據(jù)開放當(dāng)做執(zhí)政自信的標(biāo)志,公開一些政府日常消費(fèi)方面的支出供市民監(jiān)督。
我國政府?dāng)?shù)據(jù)利用方面特別是數(shù)據(jù)共享方面確實(shí)存在一些誤區(qū)。一方面說到開放就好像完全沒有隱私,另一方面安全問題又成為了數(shù)據(jù)開放的最大障礙。
韓亦舜認(rèn)為,政府?dāng)?shù)據(jù)開放要在實(shí)踐中摸索前進(jìn)。先把政府部門內(nèi)部及部門之間數(shù)據(jù)共享的工作做起來。對社會的數(shù)據(jù)開放共享,先從方便百姓生活又不是很敏感的數(shù)據(jù)開始。特別是涉及公共安全、公共利益的數(shù)據(jù),提供公共服務(wù)的機(jī)構(gòu)或企業(yè)有義務(wù)在一定前提條件下開放,“這樣一些可以預(yù)警、預(yù)防的群體性事件就能夠避免”。
韓亦舜指出,按照流行的大數(shù)據(jù)的幾個(gè)“V”(大量、高速、多樣、價(jià)值)或者多源異構(gòu)的定義來衡量,政府的部分?jǐn)?shù)據(jù),還屬于結(jié)構(gòu)化數(shù)據(jù),離大數(shù)據(jù)概念還有差異。但沒有必要拘泥于大數(shù)據(jù)的定義,只要政府充分運(yùn)用數(shù)據(jù)的挖掘利用,提高政府治理能力,提高科學(xué)決策能力,受益的將是全社會。
在政府開放數(shù)據(jù)方面,韓亦舜建議,各級政府都以數(shù)據(jù)應(yīng)用為導(dǎo)向,需要什么數(shù)據(jù)就共享什么數(shù)據(jù)。雖然,與大數(shù)據(jù)的開發(fā)共享還有距離,但確實(shí)是數(shù)據(jù)應(yīng)用的可行路徑。
韓亦舜說,相信越多的人從數(shù)據(jù)開放中獲益,就會有更多的人愿意開放數(shù)據(jù)。
背景資料
《關(guān)于促進(jìn)大數(shù)據(jù)發(fā)展的行動綱要》
主要內(nèi)容及對產(chǎn)業(yè)的部署
《行動綱要》的內(nèi)容可以概括為“三位一體”,即圍繞全面推動我國大數(shù)據(jù)發(fā)展和應(yīng)用,加快建設(shè)數(shù)據(jù)強(qiáng)國這一總體目標(biāo),確定三大重點(diǎn)任務(wù):一是加快政府?dāng)?shù)據(jù)開放共享,推動資源整合,提升治理能力;二是推動產(chǎn)業(yè)創(chuàng)新發(fā)展,培育新業(yè)態(tài),助力經(jīng)濟(jì)轉(zhuǎn)型;三是健全大數(shù)據(jù)安全保障體系,強(qiáng)化安全支撐,提高管理水平,促進(jìn)健康發(fā)展。圍繞這“三位一體”,具體明確了五大目標(biāo)、七項(xiàng)措施、十大工程。并且據(jù)此細(xì)化分解出76項(xiàng)具體任務(wù),確定了每項(xiàng)任務(wù)的具體責(zé)任部門和進(jìn)度安排,確?!缎袆泳V要》的落地和實(shí)施。
五個(gè)目標(biāo):一是打造精準(zhǔn)治理、多方協(xié)作的社會治理新模式;二是建立運(yùn)行平穩(wěn)、安全高效的經(jīng)濟(jì)運(yùn)行新機(jī)制;三是構(gòu)建以人為本、惠及全民的民生服務(wù)新體系;四是開啟大眾創(chuàng)業(yè)、萬眾創(chuàng)新的創(chuàng)新驅(qū)動新格局;五是培育高端智能、新興繁榮的產(chǎn)業(yè)發(fā)展新生態(tài)。
七項(xiàng)措施:完善組織實(shí)施機(jī)制、加快法規(guī)制度建設(shè)、健全市場發(fā)展機(jī)制、建立標(biāo)準(zhǔn)規(guī)范體系、加大財(cái)政金融支持、加快專業(yè)人才培養(yǎng)、促進(jìn)國際交流合作。
十項(xiàng)工程:政府?dāng)?shù)據(jù)資源共享開放工程、國家大數(shù)據(jù)資源統(tǒng)籌發(fā)展工程、政府治理大數(shù)據(jù)工程、公共服務(wù)大數(shù)據(jù)工程、工業(yè)和新興產(chǎn)業(yè)大數(shù)據(jù)工程、現(xiàn)代農(nóng)業(yè)大數(shù)據(jù)工程、萬眾創(chuàng)新大數(shù)據(jù)工程、大數(shù)據(jù)關(guān)鍵技術(shù)及產(chǎn)品研發(fā)與產(chǎn)業(yè)化工程、大數(shù)據(jù)產(chǎn)業(yè)支撐能力提升工程、網(wǎng)絡(luò)和大數(shù)據(jù)安全保障工程。
按照國務(wù)院的部署,工業(yè)和信息化部主要負(fù)責(zé)推動大數(shù)據(jù)產(chǎn)業(yè)發(fā)展,培育新興業(yè)態(tài),助力經(jīng)濟(jì)轉(zhuǎn)型,包括推進(jìn)大數(shù)據(jù)核心技術(shù)攻關(guān)、健全產(chǎn)品體系、完善產(chǎn)業(yè)鏈和發(fā)展環(huán)境、推進(jìn)工業(yè)及新興產(chǎn)業(yè)大數(shù)據(jù)應(yīng)用,同時(shí)做好信息安全和規(guī)范管理等的相關(guān)工作。重點(diǎn)組織實(shí)施十大工程中的“大數(shù)據(jù)關(guān)鍵技術(shù)及產(chǎn)品研發(fā)與產(chǎn)業(yè)化工程”“大數(shù)據(jù)產(chǎn)業(yè)支撐能力提升工程”“工業(yè)和新興產(chǎn)業(yè)大數(shù)據(jù)工程”三項(xiàng)工程。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
訓(xùn)練與驗(yàn)證損失驟升:機(jī)器學(xué)習(xí)訓(xùn)練中的異常診斷與解決方案 在機(jī)器學(xué)習(xí)模型訓(xùn)練過程中,“損失曲線” 是反映模型學(xué)習(xí)狀態(tài)的核心指 ...
2025-09-19解析 DataHub 與 Kafka:數(shù)據(jù)生態(tài)中兩類核心工具的差異與協(xié)同 在數(shù)字化轉(zhuǎn)型加速的今天,企業(yè)對數(shù)據(jù)的需求已從 “存儲” 轉(zhuǎn)向 “ ...
2025-09-19CDA 數(shù)據(jù)分析師:讓統(tǒng)計(jì)基本概念成為業(yè)務(wù)決策的底層邏輯 統(tǒng)計(jì)基本概念是商業(yè)數(shù)據(jù)分析的 “基礎(chǔ)語言”—— 從描述數(shù)據(jù)分布的 “均 ...
2025-09-19CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-19SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實(shí)戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢效率:打破 “拆分必慢” 的認(rèn)知誤區(qū) 在 MySQL 數(shù)據(jù)庫管理中,“大表” 始終是性能優(yōu)化繞不開的話題。 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動態(tài)隨機(jī)一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開始提取前,需先判斷 TIF 文件的類型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價(jià)值的專業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實(shí)戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫)處理 Excel 數(shù)據(jù)時(shí),“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗(yàn)與 t 檢驗(yàn):差異、適用場景與實(shí)踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計(jì)學(xué)領(lǐng)域,假設(shè)檢驗(yàn)是驗(yàn)證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專業(yè)操盤手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計(jì)劃中 rows 數(shù)量的準(zhǔn)確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計(jì)劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對象的 text 與 content:區(qū)別、場景與實(shí)踐指南 在 Python 進(jìn)行 HTTP 網(wǎng)絡(luò)請求開發(fā)時(shí)(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價(jià)值的核心操盤手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請求工具對比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長浮點(diǎn)數(shù)據(jù)的科學(xué)計(jì)數(shù)法問題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長浮點(diǎn)數(shù)據(jù)時(shí)的科學(xué)計(jì)數(shù)法問題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價(jià)值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運(yùn)營問題、提升執(zhí)行效率的核心手段,其價(jià)值 ...
2025-09-12用 SQL 驗(yàn)證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實(shí)戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計(jì)” 與 “用戶體驗(yàn) ...
2025-09-11塔吉特百貨孕婦營銷案例:數(shù)據(jù)驅(qū)動下的精準(zhǔn)零售革命與啟示 在零售行業(yè) “流量紅利見頂” 的當(dāng)下,精準(zhǔn)營銷成為企業(yè)突圍的核心方 ...
2025-09-11