
大數(shù)據(jù)與上海轉(zhuǎn)型發(fā)展2_數(shù)據(jù)分析師
從國內(nèi)來看,上海IT產(chǎn)業(yè)在人才、技術(shù)研發(fā)、與國際接軌的信息通信基礎(chǔ)設(shè)施等方面已經(jīng)形成了一定的優(yōu)勢。電子信息產(chǎn)品制造業(yè)總產(chǎn)值和就業(yè)人數(shù)居上海六大支柱產(chǎn)業(yè)之首;信息服務(wù)業(yè)的產(chǎn)值在服務(wù)業(yè)中排名達到第五。但在這貌似光鮮的高科技產(chǎn)業(yè)背后,仍然存在產(chǎn)業(yè)鏈層次偏低的問題。IT業(yè)內(nèi)程序員、維修、銷售服務(wù)等工作被譏稱為“IT民工”,其體力勞動量遠大于腦力勞動量,處于這一產(chǎn)業(yè)鏈的低端。
抓住大數(shù)據(jù)發(fā)展的機遇,上海要充分挖掘被企業(yè)和政府部門“養(yǎng)在深閨”、大量的本土消費和市場行為數(shù)據(jù),獲得本土或行業(yè)的比較優(yōu)勢。大數(shù)據(jù)擁有單位如果能加以重視,與國內(nèi)IT企業(yè)協(xié)作開發(fā),激活這個沉睡的巨大金礦,就可能成就上海自己的、在不同細分行業(yè)的IBM、谷歌和亞馬遜,引領(lǐng)整個中國IT服務(wù)業(yè)走向高端。推動大數(shù)據(jù)的發(fā)展,不僅可以作為上海IT產(chǎn)業(yè)自身升級的一條重要路徑,更可以帶動其他產(chǎn)業(yè)和城市管理的升級,真正打造上海城市建設(shè)和長三角經(jīng)濟發(fā)展的升級版。
制約大數(shù)據(jù)發(fā)展的四個瓶頸
從大數(shù)據(jù)的啟用到最終價值的創(chuàng)造,是一連串的事件,需要觀念的轉(zhuǎn)變、大數(shù)據(jù)知識的傳播、基礎(chǔ)設(shè)施、人才、法律等基礎(chǔ)條件。目前,這些構(gòu)成了制約上海發(fā)展大數(shù)據(jù)產(chǎn)業(yè)的四大瓶頸。
觀念瓶頸:根據(jù)Gartner的IT生命周期理論,目前正處于對于大數(shù)據(jù)認識的泡沫化階段,需要有一個價值理性回歸過程。作為決策層,既不要盲目跟風(fēng),更不要輕易否定其價值。這時候,尤其需要冷靜下來思考:大數(shù)據(jù)的出現(xiàn)對于經(jīng)濟社會有何種影響,如何影響本行業(yè),對此我們準備好了嗎?當(dāng)前制度與之適應(yīng)性如何,需要進行何種變革和創(chuàng)新,甚至提交到立法層面來解決?在如何利用大數(shù)據(jù)方面,站在城市層面,是否可能形成一個戰(zhàn)略規(guī)劃,明確基礎(chǔ)數(shù)據(jù)的良好治理機制,以保障數(shù)據(jù)的“流動性”和“可獲取性”?政府可以為市場提供哪些服務(wù)和支撐,等等。從目前“小數(shù)據(jù)”的開發(fā)利用來看,上海仍存在較嚴重的數(shù)據(jù)“孤島”現(xiàn)象,共享的觀念還遠沒有普及,數(shù)據(jù)管理的制度仍需健全。面對大數(shù)據(jù)時代的新浪潮,形勢不容樂觀。
能力瓶頸:上海企業(yè)信息化水平參差不齊,很多大型企業(yè)如寶鋼、電氣集團等信息化應(yīng)用相當(dāng)成熟,管理水平在逐漸向國外一流公司看齊。但仍有相當(dāng)比例企業(yè),尤其是中小型企業(yè)信息化水平欠佳。據(jù)市經(jīng)信委的調(diào)查,約70%的中小企業(yè)沒有專職IT人員,管理仍停留在經(jīng)驗層面,拍腦袋決策的事情不在少數(shù)。這將很難培育出大數(shù)據(jù)的能力。雖然中國的技術(shù)方面也落于人后,但最大的障礙在于技術(shù)的應(yīng)用和管理能力。上海必須重視提升企業(yè)信息化管理能力,夯實好基礎(chǔ)。
法律瓶頸:在互聯(lián)網(wǎng)環(huán)境下,哪些數(shù)據(jù)開發(fā)行為屬于合理開發(fā),仍缺乏一個相應(yīng)的法律規(guī)定,對個人信息保護也無法可依。加之人為造成的信息不對稱成為一些部門利益的重要來源,導(dǎo)致立法進程遲遲不能啟動。相關(guān)法規(guī)缺位一個直接結(jié)果就是,信息服務(wù)產(chǎn)業(yè)發(fā)展出現(xiàn)了逆向激勵:對于個人信息合理的開發(fā)受制種種約束,而信息濫用者借助于種種暗箱操作,反而逃避了監(jiān)督。這種環(huán)境下,推動大數(shù)據(jù)這個金礦的開發(fā),存在非常大的法律風(fēng)險。
文化瓶頸:各類組織,包括企業(yè)、公共服務(wù)機構(gòu)對大數(shù)據(jù)知識的了解和技術(shù)掌握,有個學(xué)習(xí)過程。從長遠看,根本性障礙還在于對基于數(shù)據(jù)的決策抱懷疑態(tài)度的決策文化。這既與數(shù)據(jù)本身質(zhì)量不高有關(guān),也與人們認識世界的方式分不開。反映到?jīng)Q策上,往往更加相信直覺,而不重視數(shù)字。盡管上海具有相對開明睿智的城市文化,但決策的科學(xué)性和透明性方面仍有改善的空間。
推進措施和建議
上海是中國經(jīng)濟、貿(mào)易、金融、航運等領(lǐng)域海量數(shù)據(jù)的集散地,具備得天獨厚的大數(shù)據(jù)優(yōu)勢。在推動大數(shù)據(jù)發(fā)展問題上,上??梢源笥凶鳛椋@體現(xiàn)在路徑選擇、環(huán)境營造、基本保障等三個維度。
從路徑選擇看,可以將從上而下和從下而上兩種方式結(jié)合。
從上而下,強調(diào)數(shù)據(jù)共享和整合,解決現(xiàn)有數(shù)據(jù)孤島問題。近年來,上海斥資建成了各種平臺,包括互聯(lián)網(wǎng)數(shù)據(jù)中心(IDC)、大型企業(yè)數(shù)據(jù)平臺、云計算平臺、高精度位置服務(wù)平臺、各行業(yè)信息服務(wù)平臺以及各類社交媒體平臺等,為大數(shù)據(jù)發(fā)展奠定了良好的基礎(chǔ)。大數(shù)據(jù)發(fā)展的要求是接入和共享,這需要關(guān)注于底層數(shù)據(jù)的連通。但數(shù)據(jù)共享與其說是技術(shù)問題,不如說是制度和利益協(xié)調(diào)問題,需要高層的承諾,各方認真協(xié)商解決。這一工作的難度并非上海所獨有,美國白宮的數(shù)據(jù)共享問題也僅僅是奧巴馬上臺之后強勢推動下才初見成效。只有在共享問題得以解決后,大數(shù)據(jù)這座金礦才能充分得以開發(fā),實現(xiàn)跨越式發(fā)展。
從下而上,強調(diào)以小型應(yīng)用和微創(chuàng)新為突破口,撬動大數(shù)據(jù)的發(fā)展。上海可以從應(yīng)用端出發(fā),以小型應(yīng)用和微創(chuàng)新為突破口,引爆行業(yè)的大數(shù)據(jù)發(fā)展。如可以鼓勵醫(yī)院、教育等公共服務(wù)部門、現(xiàn)有金融保險、航運企業(yè)、大型制造企業(yè)、零售等數(shù)據(jù)量豐富的行業(yè)龍頭企業(yè),以大數(shù)據(jù)為紐帶,各自開展微創(chuàng)新,激活整個產(chǎn)業(yè)鏈的創(chuàng)新能力。微創(chuàng)新的作用在于不斷嘗試和改進,找到一個更好的服務(wù)模式,進一步激發(fā)大的創(chuàng)新。如能基于高質(zhì)量的大數(shù)據(jù)分析,創(chuàng)新效果會更好,成本會更低。同時隨著應(yīng)用的深入,自然而然對其他部門數(shù)據(jù)提出共享需求,最終有助于不同部門之間數(shù)據(jù)的共享。
從環(huán)境營造上,上??梢詮膬?nèi)外部兩方面著力,推進大數(shù)據(jù)的發(fā)展。
從內(nèi)部看,上海應(yīng)著重激發(fā)基于大數(shù)據(jù)的創(chuàng)業(yè)創(chuàng)新精神。大數(shù)據(jù)產(chǎn)業(yè)鏈主要是一些國際大數(shù)據(jù)公司所主導(dǎo),目前上海沒有可以與之相匹敵的企業(yè),只能依賴于細分市場和特定環(huán)節(jié)的突破,激發(fā)出中小型創(chuàng)業(yè)型企業(yè)的創(chuàng)新精神,培育一批基于數(shù)據(jù)的決策的創(chuàng)新型企業(yè)及中小型創(chuàng)業(yè)型企業(yè),通過市場競爭拼出一條血路。
從外部看,主要還是通過筑巢引鳳構(gòu)建大數(shù)據(jù)產(chǎn)業(yè)鏈高地。上海享有地域、技術(shù)、人才、市場、行政效率和透明度高等多種優(yōu)勢,IT產(chǎn)業(yè)集群優(yōu)勢也非常明顯,借此可廣泛吸引國內(nèi)外企業(yè)將大數(shù)據(jù)行業(yè)分析中心設(shè)在上海,就地應(yīng)用和試點,作為上海戰(zhàn)略性新興產(chǎn)業(yè)和現(xiàn)代服務(wù)業(yè)發(fā)展的重點支持對象。
保障機制方面,主要涉及立法突破、人才培育和決策文化等三方面。
其中,在大數(shù)據(jù)立法上有所突破,是關(guān)鍵一環(huán)。大數(shù)據(jù)立法并不是孤立的,而是應(yīng)放在計算機和互聯(lián)網(wǎng)信息安全和保護這一大的框架下,在地方層面,靈活借鑒各先進國家和城市經(jīng)驗,規(guī)定對信息利用的合理邊界,保護個人信息不被濫用。另外,根據(jù)邁爾-舍恩伯格的建議,大數(shù)據(jù)年代記憶已經(jīng)成為一種常態(tài),為了對公民隱私進行保護,應(yīng)該有一種遺忘機制。而這一機制類似于檔案的銷毀,也應(yīng)有法有依,否則后果會很嚴重。
同時,人才是技術(shù)研發(fā)和市場應(yīng)用的基礎(chǔ)。據(jù)麥肯錫的估計,僅在美國,大數(shù)據(jù)技術(shù)人才缺口達14萬-19萬,管理人才150萬。上海應(yīng)開始重視對大數(shù)據(jù)專業(yè)人才的培育,還要意識到國際性人才爭奪戰(zhàn)的激烈性,既要培育出人才,更要留得住人才。最直接相關(guān)的專業(yè)有兩大類:第一類是大數(shù)據(jù)技術(shù)研發(fā)人才,主要為計算機科學(xué)和技術(shù)專業(yè);第二類是數(shù)據(jù)分析和管理人才,主要包括信息系統(tǒng)和信息管理專業(yè)、數(shù)理統(tǒng)計專業(yè)等。
最后,還要倡導(dǎo)基于大數(shù)據(jù)的決策文化。近年來,上海在努力建設(shè)智慧城市中已經(jīng)應(yīng)用了大數(shù)據(jù)的理念,但仍存在一些憑經(jīng)驗和直覺決策的區(qū)域。大數(shù)據(jù)的決策本質(zhì)特征是公開透明和科學(xué)理性,這可以改進政府與民眾的互信,倡導(dǎo)這一決策文化可以有效改變公信力不足的不利局面,深化上海服務(wù)型政府建設(shè)。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
訓(xùn)練與驗證損失驟升:機器學(xué)習(xí)訓(xùn)練中的異常診斷與解決方案 在機器學(xué)習(xí)模型訓(xùn)練過程中,“損失曲線” 是反映模型學(xué)習(xí)狀態(tài)的核心指 ...
2025-09-19解析 DataHub 與 Kafka:數(shù)據(jù)生態(tài)中兩類核心工具的差異與協(xié)同 在數(shù)字化轉(zhuǎn)型加速的今天,企業(yè)對數(shù)據(jù)的需求已從 “存儲” 轉(zhuǎn)向 “ ...
2025-09-19CDA 數(shù)據(jù)分析師:讓統(tǒng)計基本概念成為業(yè)務(wù)決策的底層邏輯 統(tǒng)計基本概念是商業(yè)數(shù)據(jù)分析的 “基礎(chǔ)語言”—— 從描述數(shù)據(jù)分布的 “均 ...
2025-09-19CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-19SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢效率:打破 “拆分必慢” 的認知誤區(qū) 在 MySQL 數(shù)據(jù)庫管理中,“大表” 始終是性能優(yōu)化繞不開的話題。 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動態(tài)隨機一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開始提取前,需先判斷 TIF 文件的類型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價值的專業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫)處理 Excel 數(shù)據(jù)時,“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗與 t 檢驗:差異、適用場景與實踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計學(xué)領(lǐng)域,假設(shè)檢驗是驗證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專業(yè)操盤手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計劃中 rows 數(shù)量的準確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對象的 text 與 content:區(qū)別、場景與實踐指南 在 Python 進行 HTTP 網(wǎng)絡(luò)請求開發(fā)時(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價值的核心操盤手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請求工具對比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長浮點數(shù)據(jù)的科學(xué)計數(shù)法問題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長浮點數(shù)據(jù)時的科學(xué)計數(shù)法問題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運營問題、提升執(zhí)行效率的核心手段,其價值 ...
2025-09-12用 SQL 驗證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計” 與 “用戶體驗 ...
2025-09-11塔吉特百貨孕婦營銷案例:數(shù)據(jù)驅(qū)動下的精準零售革命與啟示 在零售行業(yè) “流量紅利見頂” 的當(dāng)下,精準營銷成為企業(yè)突圍的核心方 ...
2025-09-11