
大數(shù)據(jù)會改變?nèi)藗兊乃季S
一講到大數(shù)據(jù),通常都會提到4個V:量大(Volume),積累速度高(Velocity),數(shù)據(jù)的產(chǎn)生多源化(Variety),數(shù)據(jù)籠統(tǒng)噪音大(Voracity)。然而,這些只是對大數(shù)據(jù)在互聯(lián)網(wǎng)時代超高速增長現(xiàn)象的描述。大數(shù)據(jù)真正的意義和價值是它改變了我們的思維方式。這就是大數(shù)據(jù)思維。
大數(shù)據(jù)思維能使我們在決策過程中超越原有思維框架的局限。每個人都是依據(jù)自己對現(xiàn)實的認識和判斷而不是現(xiàn)實本身作出行動決策的。以數(shù)據(jù)為基礎的智能決策有兩個步驟。第一是對事物的理解和判斷,第二是作出行動決策(不行動也是一種決策)。行動決策會受到?jīng)Q策者價值取向的影響。比如,二次大戰(zhàn)末美國打到日本沿岸并調(diào)集了比攻打德國時諾曼地登陸更多的軍艦云集太平洋準備對日本本土發(fā)起攻擊。根據(jù)對攻占幾個日本島嶼所造成傷亡數(shù)據(jù)的分析,美軍預測攻占日本本土將要付出50萬美軍傷亡的代價。在這個判斷的基礎上,美國總統(tǒng)杜魯門做出了向日本投原子彈的決定。結(jié)果是減少了美軍的傷亡但造成了幾十萬日本平民的死亡和持續(xù)至今的輻射危害,其價值取向是很清楚的。
人們對事物的理解和判斷會受制于自身思維框架的局限。一個物理學家在分析一件事物時,會很自然地應用物理定律來思考、理解和判斷。所用的概念和語言也會有物理特征(時間、速度、場、重量、質(zhì)量、作用力、反作用力等等)。一個社會科學家在分析一件事物時,腦子里出現(xiàn)的框架是人際關系、社會地位、歷史背景、社會效益等等。所用的概念和語言帶有社會人文特征。搞理論工作的和搞實際工作的思維框架也很不同,前者重視邏輯性、系統(tǒng)性,而后者更重視時間性和可行性。即使是同行業(yè)的人也會因年齡、經(jīng)歷、環(huán)境、學歷不同而產(chǎn)生不同的思維框架。當同一現(xiàn)象和信息進入不同人的腦子里時,它會被不同的思維網(wǎng)路過濾、不同的思維方式處理,最后的結(jié)果是對同一現(xiàn)實產(chǎn)生不同解讀。沒有一個思維框架,我們無法理解和判斷一件事物。但思維框架本身又對我們的認知產(chǎn)生了一個很難逾越的局限。
大數(shù)據(jù)思維不是從某個人的思維框架出發(fā),而是讓海量數(shù)據(jù)碰撞,尋找相關性,先看到結(jié)果再分析原因。這就沖破了原有思維框架的局限。比如,美國一家零售商在對海量的銷售數(shù)據(jù)處理中發(fā)現(xiàn)每到星期五下午,啤酒和嬰兒尿布的銷量同時上升。通過觀察發(fā)現(xiàn)星期五下班后很多青年男子要買啤酒度周末而這時妻子又常打電話提醒丈夫在回家路上為孩子買尿布。發(fā)現(xiàn)這個相關性后,這家零售商就把啤酒和尿布擺在一起,方便年輕的爸爸購物,大大提高了銷售額。
大數(shù)據(jù)思維可以引發(fā)城市管理的新方法。自從美國大使館每天公布PM2.5指數(shù)以后,城市空氣污染的問題得到了中國各個城市政府和市民的重視。每天PM2.5檢測數(shù)據(jù)的采集成為環(huán)境保護和管理的一個重要任務。如果一個統(tǒng)計學家按照原有思維框架來設計檢測數(shù)據(jù)采集,他會從統(tǒng)計學原理出發(fā)在市區(qū)有代表性的不同地點定時采集和上報數(shù)據(jù)。其結(jié)果是數(shù)據(jù)量有限,費用高,檢測覆蓋率和準確率低。應用大數(shù)據(jù)思維,某市環(huán)保部門考慮將上萬個手持檢測儀發(fā)放給散居各處的市民檢測并通過手機上傳數(shù)據(jù)。通過手機定位,環(huán)保部門可以確定每個數(shù)據(jù)的測量地點和時間,大大提高數(shù)據(jù)采集的覆蓋面和精確度。
大數(shù)據(jù)思維可以對歷史數(shù)據(jù)的分析提供新思路。中國人講究作學問要“讀萬卷書,行萬里路”。用大數(shù)據(jù)思維,讀萬卷書在今天并非難事。美國的國會圖書館正在將藏書全部數(shù)碼化。以后通過電腦“看書”搜索關鍵詞,分析相關字條和數(shù)據(jù)將會非常容易,讀萬卷書可能只是幾小時的“小任務”。美國匹茲堡大學公共衛(wèi)生學院將記錄在報紙、報告、微縮膠片上美國各地自1888年以來有關傳染病發(fā)生和死亡的多元、碎片、海量的數(shù)據(jù)收集、整理并數(shù)碼化。通過數(shù)據(jù)建模和分析,把一百多年的歷史“死”數(shù)據(jù)變活,建立了1888至2010年美國50多種傳染病電子數(shù)據(jù)檔案庫。用歷史數(shù)據(jù)證明了免疫苗的發(fā)明和使用避免了一億以上的美國人死于傳染病。(見下圖)
大數(shù)據(jù)思維能幫助開創(chuàng)新的商業(yè)模式。在美國出現(xiàn)的Uber打車服務和后來中國興起的滴滴出行(原滴滴打車)是大數(shù)據(jù)思維產(chǎn)生的經(jīng)典020(網(wǎng)上網(wǎng)下完美結(jié)合)新型商業(yè)模式。智能手機在移動互聯(lián)網(wǎng)時代的普及使實時定位的數(shù)據(jù)傳遞和信息溝通成為可能。它為乘客和司機之間的商業(yè)交換提供了一個嶄新的平臺,改變了傳統(tǒng)的電話叫車或路邊招車,降低了溝通成本和空駛率,極大地節(jié)省了司機乘客雙方的資源和時間。源源不斷的乘車交易和時間地點的電子數(shù)據(jù)在高速地積累和儲存。數(shù)據(jù)科學家們可以通過對海量數(shù)據(jù)的分析尋找規(guī)律以提高和改進乘客打車出行的體驗,找到新的商機和推出新的服務。
大數(shù)據(jù)思維的核心是要意識到我們已經(jīng)生活在一個互聯(lián)網(wǎng)幾乎無處不在的世界?;ヂ?lián)網(wǎng)將各種信息儀器(手機、電腦、傳感器、相機、攝像頭、等等)聯(lián)為一體(物聯(lián)網(wǎng)),數(shù)碼化的數(shù)據(jù)和信息在這個龐大的網(wǎng)上時時刻刻地傳遞、儲存和積累。數(shù)碼化數(shù)據(jù)可以被高速處理,而且已經(jīng)成為新型的、甚至是最有價值的生產(chǎn)資料。礦物可以冶煉成金屬、原油可以提煉出汽油,如何將數(shù)據(jù)加工成信息、產(chǎn)生智能、解決過去無法解決的老問題和開創(chuàng)新的管理和商業(yè)模式以產(chǎn)生新價值是對我們的挑戰(zhàn)。而迎接這一挑戰(zhàn)的第一步就是要懂得和理解大數(shù)據(jù)思維。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA 數(shù)據(jù)分析師報考條件詳解與準備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-18剛?cè)肼殘龌蚴窃诼殘稣媾R崗位替代、技能更新、人機協(xié)作等焦慮的打工人,想要找到一條破解職場焦慮和升職瓶頸的系統(tǒng)化學習提升 ...
2025-07-182025被稱為“AI元年”,而AI,與數(shù)據(jù)密不可分。網(wǎng)易公司創(chuàng)始人丁磊在《AI思維:從數(shù)據(jù)中創(chuàng)造價值的煉金術 ...
2025-07-18CDA 數(shù)據(jù)分析師:數(shù)據(jù)時代的價值挖掘者 在大數(shù)據(jù)席卷全球的今天,數(shù)據(jù)已成為企業(yè)核心競爭力的重要組成部分。從海量數(shù)據(jù)中提取有 ...
2025-07-18SPSS 賦值后數(shù)據(jù)不顯示?原因排查與解決指南? 在 SPSS( Statistical Package for the Social Sciences)數(shù)據(jù)分析過程中,變量 ...
2025-07-18在 DBeaver 中利用 MySQL 實現(xiàn)表數(shù)據(jù)同步操作指南? ? 在數(shù)據(jù)庫管理工作中,將一張表的數(shù)據(jù)同步到另一張表是常見需求,這有助于 ...
2025-07-18數(shù)據(jù)分析師的技能圖譜:從數(shù)據(jù)到價值的橋梁? 在數(shù)據(jù)驅(qū)動決策的時代,數(shù)據(jù)分析師如同 “數(shù)據(jù)翻譯官”,將冰冷的數(shù)字轉(zhuǎn)化為清晰的 ...
2025-07-17Pandas 寫入指定行數(shù)據(jù):數(shù)據(jù)精細化管理的核心技能? 在數(shù)據(jù)處理的日常工作中,我們常常需要面對這樣的場景:在龐大的數(shù)據(jù)集里精 ...
2025-07-17解碼 CDA:數(shù)據(jù)時代的通行證? 在數(shù)字化浪潮席卷全球的今天,當企業(yè)決策者盯著屏幕上跳動的數(shù)據(jù)曲線尋找增長密碼,當科研人員在 ...
2025-07-17CDA 精益業(yè)務數(shù)據(jù)分析:數(shù)據(jù)驅(qū)動業(yè)務增長的實戰(zhàn)方法論 在企業(yè)數(shù)字化轉(zhuǎn)型的浪潮中,“數(shù)據(jù)分析” 已從 “加分項” 成為 “必修課 ...
2025-07-16MySQL 中 ADD KEY 與 ADD INDEX 詳解:用法、差異與優(yōu)化實踐 在 MySQL 數(shù)據(jù)庫表結(jié)構設計中,索引是提升查詢性能的核心手段。無論 ...
2025-07-16解析 MySQL Update 語句中 “query end” 狀態(tài):含義、成因與優(yōu)化指南? 在 MySQL 數(shù)據(jù)庫的日常運維與開發(fā)中,開發(fā)者和 DBA 常會 ...
2025-07-16如何考取數(shù)據(jù)分析師證書:以 CDA 為例? ? 在數(shù)字化浪潮席卷各行各業(yè)的當下,數(shù)據(jù)分析師已然成為企業(yè)挖掘數(shù)據(jù)價值、驅(qū)動決策的 ...
2025-07-15CDA 精益業(yè)務數(shù)據(jù)分析:驅(qū)動企業(yè)高效決策的核心引擎? 在數(shù)字經(jīng)濟時代,企業(yè)面臨著前所未有的數(shù)據(jù)洪流,如何從海量數(shù)據(jù)中提取有 ...
2025-07-15MySQL 無外鍵關聯(lián)表的 JOIN 實戰(zhàn):數(shù)據(jù)整合的靈活之道? 在 MySQL 數(shù)據(jù)庫的日常操作中,我們經(jīng)常會遇到需要整合多張表數(shù)據(jù)的場景 ...
2025-07-15Python Pandas:數(shù)據(jù)科學的瑞士軍刀? ? 在數(shù)據(jù)驅(qū)動的時代,面對海量、復雜的數(shù)據(jù),如何高效地進行處理、分析和挖掘成為關鍵。 ...
2025-07-15用 SQL 生成逆向回滾 SQL:數(shù)據(jù)操作的 “后悔藥” 指南? 在數(shù)據(jù)庫操作中,誤刪數(shù)據(jù)、錯改字段或誤執(zhí)行批量更新等問題時有發(fā)生。 ...
2025-07-14t檢驗與Wilcoxon檢驗的選擇:何時用t.test,何時用wilcox.test? t 檢驗與 Wilcoxon 檢驗的選擇:何時用 t.test,何時用 wilcox. ...
2025-07-14AI 浪潮下的生存與進階: CDA數(shù)據(jù)分析師—開啟新時代職業(yè)生涯的鑰匙(深度研究報告、發(fā)展指導白皮書) 發(fā)布機構:CDA數(shù)據(jù)科 ...
2025-07-13LSTM 模型輸入長度選擇技巧:提升序列建模效能的關鍵? 在循環(huán)神經(jīng)網(wǎng)絡(RNN)家族中,長短期記憶網(wǎng)絡(LSTM)憑借其解決長序列 ...
2025-07-11