
且慢說“大數(shù)據(jù)”的無所不能
“大數(shù)據(jù)”是個(gè)好東西,是科學(xué)的前沿,值得我們認(rèn)真積極關(guān)注、推介和參與,但它絕不是哈利波特,不會(huì)“一抓就靈”,不能包打天下和無所不能。
回頭看看這些年的所謂產(chǎn)業(yè)“浪潮”新理念、新理論和新技術(shù),一旦引入我國后,常是泡沫翻騰,真經(jīng)并不多。去年是“云計(jì)算”,今年是“大數(shù)據(jù)”,官員、學(xué)者或媒體人嘴上不常換點(diǎn)國際流行的新詞,都不好意思開口。
其實(shí),“大數(shù)據(jù)”很簡單,不神秘,以前無法處理的海量數(shù)據(jù)或沒當(dāng)做數(shù)據(jù)的東西(如你在超市逛逛或?qū)δ莻€(gè)營業(yè)員笑一笑),因計(jì)算機(jī)計(jì)算能力如“云計(jì)算”的進(jìn)步,都可以分析出個(gè)子丑寅卯了,如很多人逛超市的路徑與購物之間有數(shù)據(jù)關(guān)系,據(jù)此調(diào)整布局有利于銷售,美國有超市把影碟與尿布放在一起,就是通過“大數(shù)據(jù)”分析發(fā)現(xiàn),來為孩子買尿布的父母喜歡為自己帶盤碟子。
但把“大數(shù)據(jù)”用做解決世界上最難處理的問題的全能辦法,從管理城市到消除貧困,從制止恐怖襲擊、疾病流行到拯救地球環(huán)境等,以為有了“大數(shù)據(jù)”,就沒有解決不了的問題,這也是一種誤解。人類的思想、個(gè)人的文化和行為模式、不同國家及社會(huì)的存在發(fā)展都非常復(fù)雜、曲折和獨(dú)特,顯然不能全部由計(jì)算機(jī)來“數(shù)字自己說話”。比如,近來歐美有人提倡用“大數(shù)據(jù)”分析人的日常行為模式和習(xí)慣,判斷誰將要犯罪,以此幫助預(yù)防未來的犯罪,就引起了很大的爭議和質(zhì)疑,公眾擔(dān)心因司法程序缺失而受到莫名威脅。
其實(shí),企圖用一行行的代碼和龐大數(shù)據(jù)庫的“大數(shù)據(jù)”來解釋和指導(dǎo)世間萬物萬象,很像此前企圖用基因等生物密碼來解釋和調(diào)控人類的行為模式,看起來是客觀中立的,但說到底,“大數(shù)據(jù)”再“大”,也不會(huì)“自己說話”,還是設(shè)計(jì)者、分析者和使用者在說了算。所以,“大數(shù)據(jù)”并不能使人們完全擺脫曲解、隔閡和錯(cuò)誤的成見。
而且,數(shù)據(jù)的采集也會(huì)使“大數(shù)據(jù)”不中立和不全面,以至于不公正,如目前社交媒體等即時(shí)通訊是“大數(shù)據(jù)”分析的一個(gè)普遍信息源,那里無疑有許多信息可以挖掘,國外神話“大數(shù)據(jù)”的范例幾乎都來源于此。但至少在我國現(xiàn)在和未來一段時(shí)間里,以此途徑反映民情的某些“大數(shù)據(jù)”可能會(huì)忽視了“沉默的大多數(shù)”而失準(zhǔn)。過分依賴和迷信“大數(shù)據(jù)”,難以避免對某一群體的“數(shù)據(jù)歧視”,可能會(huì)依據(jù)錯(cuò)誤的成見作出重大的公共政策和商業(yè)決定。
更需指出的是,“大數(shù)據(jù)”的潛在負(fù)面效應(yīng)不可忽視。無處不在的“大數(shù)據(jù)”使個(gè)人隱私無處藏身,甚至?xí)l(fā)更多問題。例如,最近,“大數(shù)據(jù)”被用來預(yù)測臉譜網(wǎng)用戶極其敏感的個(gè)人信息,如性取向、種族、宗教和政治觀點(diǎn)、性格特征、智力水平、快樂與否、成癮藥物使用、父母婚姻狀況、年齡及性別等。這些高度敏感信息很可能會(huì)被雇主、房東、政府部門、教育機(jī)構(gòu)及私營組織用來對個(gè)人實(shí)施歧視。
“大數(shù)據(jù)時(shí)代”的作者維克托說,大數(shù)據(jù)帶來的信息風(fēng)暴正在變革我們的生活、工作和思維,大數(shù)據(jù)開啟了一次重大的時(shí)代轉(zhuǎn)型。這話很有道理。但他認(rèn)為,大數(shù)據(jù)時(shí)代最大的轉(zhuǎn)變就是,放棄對因果關(guān)系的渴求,而取而代之關(guān)注相關(guān)關(guān)系。也就是說只要知道“是什么”,而不需要知道“為什么”。歌頌者說,這是維克托顛覆了千百年來人類的思維慣例,對人類的認(rèn)知和與世界交流的方式提出了全新的挑戰(zhàn)??晌覀冇幸桑翰粏柣虿恢盀槭裁础?,我們還是人嗎?
其實(shí),維克托又新寫了一本叫“刪除”的書,講述了大數(shù)據(jù)時(shí)代的信息取舍,說遺忘是一種美德。說白了,就是該記的記,該忘的忘。這就更加說明,無論到何時(shí),其實(shí)都還是人在思考和“說話”,即使在“大數(shù)據(jù)時(shí)代”可以通過數(shù)據(jù)形式來部分表達(dá)。所以,把“大數(shù)據(jù)”提高到不恰當(dāng)?shù)母叨?,甚至魔幻化或泡沫化,對推廣“大數(shù)據(jù)”技術(shù)及應(yīng)用不僅無益,還會(huì)弄成一些新的神話,或許還有笑話。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號(hào):CDAshujufenxi
SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實(shí)戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢效率:打破 “拆分必慢” 的認(rèn)知誤區(qū) 在 MySQL 數(shù)據(jù)庫管理中,“大表” 始終是性能優(yōu)化繞不開的話題。 ...
2025-09-18CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動(dòng)態(tài)隨機(jī)一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開始提取前,需先判斷 TIF 文件的類型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價(jià)值的專業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲(chǔ)的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實(shí)戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫)處理 Excel 數(shù)據(jù)時(shí),“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗(yàn)與 t 檢驗(yàn):差異、適用場景與實(shí)踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計(jì)學(xué)領(lǐng)域,假設(shè)檢驗(yàn)是驗(yàn)證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專業(yè)操盤手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲(chǔ)的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計(jì)劃中 rows 數(shù)量的準(zhǔn)確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計(jì)劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對象的 text 與 content:區(qū)別、場景與實(shí)踐指南 在 Python 進(jìn)行 HTTP 網(wǎng)絡(luò)請求開發(fā)時(shí)(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價(jià)值的核心操盤手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請求工具對比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長浮點(diǎn)數(shù)據(jù)的科學(xué)計(jì)數(shù)法問題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長浮點(diǎn)數(shù)據(jù)時(shí)的科學(xué)計(jì)數(shù)法問題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價(jià)值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運(yùn)營問題、提升執(zhí)行效率的核心手段,其價(jià)值 ...
2025-09-12用 SQL 驗(yàn)證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實(shí)戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計(jì)” 與 “用戶體驗(yàn) ...
2025-09-11塔吉特百貨孕婦營銷案例:數(shù)據(jù)驅(qū)動(dòng)下的精準(zhǔn)零售革命與啟示 在零售行業(yè) “流量紅利見頂” 的當(dāng)下,精準(zhǔn)營銷成為企業(yè)突圍的核心方 ...
2025-09-11CDA 數(shù)據(jù)分析師與戰(zhàn)略 / 業(yè)務(wù)數(shù)據(jù)分析:概念辨析與協(xié)同價(jià)值 在數(shù)據(jù)驅(qū)動(dòng)決策的體系中,“戰(zhàn)略數(shù)據(jù)分析”“業(yè)務(wù)數(shù)據(jù)分析” 是企業(yè) ...
2025-09-11Excel 數(shù)據(jù)聚類分析:從操作實(shí)踐到業(yè)務(wù)價(jià)值挖掘 在數(shù)據(jù)分析場景中,聚類分析作為 “無監(jiān)督分組” 的核心工具,能從雜亂數(shù)據(jù)中挖 ...
2025-09-10統(tǒng)計(jì)模型的核心目的:從數(shù)據(jù)解讀到?jīng)Q策支撐的價(jià)值導(dǎo)向 統(tǒng)計(jì)模型作為數(shù)據(jù)分析的核心工具,并非簡單的 “公式堆砌”,而是圍繞特定 ...
2025-09-10