
廣義大數(shù)據論與狹義大數(shù)據論_數(shù)據分析師
一份名為《中國大數(shù)據技術與產業(yè)發(fā)展白皮書》(下簡稱白皮書)的報告于去年12月發(fā)布。一時間引起了業(yè)內人士的廣泛關注。這份由20多家單位和60多名專家共同完成的報告,在一定程度上反映了中國大數(shù)據領域的共識。在這份報告中,對于2015年大數(shù)據發(fā)展的趨勢做出了預測。據我總結,這份預測可以用這幾個詞來概括:探索、突破、跨界、融合。
對于大數(shù)據,不光是中國,歐美國家也還處于一個探索的階段。這個探索的階段,在廣度上,將隨著大數(shù)據收集及分析技術的進步快速擴張;而在深度上,卻將隨著大數(shù)據收集能力的爆炸式增長而明顯放緩。大數(shù)據技術尚處于一個極其初級的階段。目前的一切探索,也不過是處于大數(shù)據基礎層面上的探索。當基礎層面的探索讓我們對于大數(shù)據的了解更進一步時,突破將會產生。
白皮書中講到的 2015年中國將會面臨的大數(shù)據突破,實際上,只是單方面的、狹義的突破。我們能夠在短時期內迎來的任何方向上的突破,都只是在技術層面上的突破。互聯(lián)網的出現(xiàn),伴隨著技術幾何倍地發(fā)展。這種技術上的突破給我們社會帶來的沖擊,遠遠沒有近年來對互聯(lián)網的認識的提高所帶來的突破顯著?;ヂ?lián)網從出現(xiàn)一直到近兩年,始終停留在一個技術的發(fā)展期。真正對于互聯(lián)網能夠做什么,我們的認識也才剛開始從基礎層面上升到初級認知水平。而這看似細微的提升,導致了無數(shù)新型的產業(yè)的發(fā)展,也導致了互聯(lián)網金融的出現(xiàn)。所以我敢預言,隨著人類對于互聯(lián)網的認識進一步的加深,互聯(lián)網金融將會取得比現(xiàn)階段高出十倍乃至百倍的成就。而大數(shù)據將在互聯(lián)網金融的浪潮中扮演一個至關重要的角色。
那么隨著我們對于大數(shù)據認識的加深,技術的突破將不足以支持人類的發(fā)展。一個全方位、全領域的突破將是不可避免的。我們對于大數(shù)據能力的認識將會有一個質的飛躍。到那個時候,無數(shù)由大數(shù)據而催生的行業(yè)將迅速崛起,傳統(tǒng)的商業(yè)模式將逐漸被取代。甚至人類現(xiàn)階段的一切科學,將突破桎梏,取得難以想象的成就。
在這個對于大數(shù)據認識的初級階段,一個明顯的趨勢已經能夠清楚地被發(fā)現(xiàn)。各行各業(yè),由于大數(shù)據的出現(xiàn),開始打破原本存在的行業(yè)之間的壁壘。越來越多的公司開始進行所謂的跨界。從一直瘋傳的蘋果收購特斯拉,到百度開始做餐飲。這一個個看似奇葩的跨界,實際上在大數(shù)據的支持下,是絕對能夠碰撞出驚人火花的。任意一個公司,如果能夠擁有尖端的大數(shù)據技術,就能夠輕易地進入任何一個行業(yè),并取得成功。
大數(shù)據的魅力就是如此地讓人著迷。
白皮書中提到2015年大數(shù)據行業(yè)將會沿著一個融合的趨勢前進。我認為,大數(shù)據的推廣將使得商業(yè)運作與科學技術融合,使得企業(yè)部門間相互融合,使得學科與學科相互融合。德溫特資本市場的成功,恰恰是利用了大數(shù)據將商業(yè)運作與印第安納大學博倫教授的科學研究成果相融合,從而預測了大盤的走勢。這種商業(yè)與科技的融合將會越來越緊密。同時,大數(shù)據也使得企業(yè)內部的運作趨于融合。大數(shù)據技術能夠被應用于企業(yè)內部的所有部門,無論是營銷還是人力,無論是財務還是風控,各部門在大數(shù)據的統(tǒng)一調度下,將如一部精密的機器,不斷地創(chuàng)造利潤。
現(xiàn)在,大家在談到大數(shù)據的時候,普遍都在談云計算、算法、關系數(shù)據庫、非關系數(shù)據庫,大家也都在談 Hadoop、NoSQL。而我認為,我們一定不要忽視智慧的作用。所以我一直在談掌控大數(shù)據、談用大數(shù)據探求規(guī)律。白皮書里面多次提到了云計算、 Hadoop。這些技術當然是先進的,也將會是未來幾年發(fā)展的主流。但是,如果我們退一步來想,每個人都在從自己的角度、自己的行業(yè)出發(fā)來思考大數(shù)據、來探索大數(shù)據,那么到底對于大數(shù)據本體的認知,能否得到本質上的提升?
經歷了互聯(lián)網的出現(xiàn)和發(fā)展的我們,應該能夠清楚的認識到,對于互聯(lián)網本體的認知,將決定企業(yè)是否能夠把握先機。假設有人能提前5年認識到互聯(lián)網的未來中將會出現(xiàn)互聯(lián)網金融。那么這個人必將引領這互聯(lián)網金融的浪潮。
我對于大數(shù)據的認識,可以用“兩個論”來概括。狹義大數(shù)據論和廣義大數(shù)據論。在從今起的文章中,我將仔細地分析這兩個論。我對于大數(shù)據的所有認知,全部可以歸結到這兩個論中。而世界上所有已有的和將有的關于大數(shù)據的理論和應用,也都可以用這兩個論進行歸類。
何為狹義大數(shù)據論?何為廣義大數(shù)據論?
要弄清楚這兩個東西,我們先要明白,這里講的狹義與廣義,并不代表認知程度的寬窄,也不代表其本身的思維深度。我講的狹義與廣義,只是用來將大數(shù)據理論做以區(qū)分。從本質上來講,這兩種論的本源是一樣的。而我們如果能夠掌握這其中任何一論,都能成為這個地球上數(shù)一數(shù)二的大數(shù)據、乃至于商業(yè)社會、甚至人類精神的領袖。
狹義大數(shù)據,指的是我們當今社會的一切科學、一切領域所能夠運用到的所有大數(shù)據。這一類大數(shù)據,無論被探索應用的多么深、多么廣泛,都被歸為狹義大數(shù)據。換句話說,人類科學能夠探索應用的一切大數(shù)據,都算是狹義大數(shù)據。狹義大數(shù)據論是指,狹義大數(shù)據將引領人類社會飛速發(fā)展,各行各業(yè)也都將在這個狹義大數(shù)據劇變的浪潮中被顛覆,同時得到質的飛躍。
而要弄清楚廣義大數(shù)據論,我們就先要明白一個基本的定律。那就是這個世界上存在的山川河流、日月星辰、花鳥魚蟲、飛禽走獸,乃至人類思維念頭、外太空的細微震動,我們生活的這個維度、乃至于所有維度的一切事物,都是大數(shù)據。上到宇宙的運動,下到質子活動,全都能夠被細化成為一組組的數(shù)據。而這浩瀚的數(shù)據量,絕對超過了人類科學的探知能力與探知范圍。廣義大數(shù)據論是指,通過對廣義大數(shù)據的探索,人類最終能夠探明宇宙、人生的真相。廣義大數(shù)據論能夠指導人類利用大數(shù)據對宇宙的奧秘,對人類自身奧秘進行探知。
駕馭廣義大數(shù)據,就能掌握自然規(guī)律、社會規(guī)律,就能擁有宇宙、人生無上的智慧。
廣義大數(shù)據論,是突破了人類所定義的科學與宗教范圍的一種存在。而這種存在必將顛覆我們人類對于這個世界的一切認知。
數(shù)據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
用 SQL 生成逆向回滾 SQL:數(shù)據操作的 “后悔藥” 指南? 在數(shù)據庫操作中,誤刪數(shù)據、錯改字段或誤執(zhí)行批量更新等問題時有發(fā)生。 ...
2025-07-14如何考取數(shù)據分析師證書:以 CDA 為例? ? 在數(shù)字化浪潮席卷各行各業(yè)的當下,數(shù)據分析師已然成為企業(yè)挖掘數(shù)據價值、驅動決策的 ...
2025-07-14t檢驗與Wilcoxon檢驗的選擇:何時用t.test,何時用wilcox.test? t 檢驗與 Wilcoxon 檢驗的選擇:何時用 t.test,何時用 wilcox. ...
2025-07-14AI 浪潮下的生存與進階: CDA數(shù)據分析師—開啟新時代職業(yè)生涯的鑰匙(深度研究報告、發(fā)展指導白皮書) 發(fā)布機構:CDA數(shù)據科 ...
2025-07-13LSTM 模型輸入長度選擇技巧:提升序列建模效能的關鍵? 在循環(huán)神經網絡(RNN)家族中,長短期記憶網絡(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據分析師報考條件詳解與準備指南? ? 在數(shù)據驅動決策的時代浪潮下,CDA 數(shù)據分析師認證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據透視表中兩列相乘合計的實用指南? 在數(shù)據分析的日常工作中,數(shù)據透視表憑借其強大的數(shù)據匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實施重大更新。 此次更新旨在確保認 ...
2025-07-10BI 大數(shù)據分析師:連接數(shù)據與業(yè)務的價值轉化者? ? 在大數(shù)據與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預測分析中的應用:從數(shù)據查詢到趨勢預判? ? 在數(shù)據驅動決策的時代,預測分析作為挖掘數(shù)據潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據查詢結束后:分析師的收尾工作與價值深化? ? 在數(shù)據分析的全流程中,“query end”(查詢結束)并非工作的終點,而是將數(shù) ...
2025-07-10CDA 數(shù)據分析師考試:從報考到取證的全攻略? 在數(shù)字經濟蓬勃發(fā)展的今天,數(shù)據分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗:捕捉數(shù)據背后的時間軌跡? 在數(shù)據分析的版圖中,單樣本趨勢性檢驗如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據類型:時間維度的精準切片? ? 在數(shù)據的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據類型就像一把精準 ...
2025-07-09CDA 備考干貨:Python 在數(shù)據分析中的核心應用與實戰(zhàn)技巧? ? 在 CDA 數(shù)據分析師認證考試中,Python 作為數(shù)據處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗:數(shù)據趨勢與突變分析的有力工具? ? ? 在數(shù)據分析的廣袤領域中,準確捕捉數(shù)據的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據分析師認證作為國內權威的數(shù)據分析能力認證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應對策略? 長短期記憶網絡(LSTM)作為循環(huán)神經網絡(RNN)的一種變體,憑借獨特的門控機制,在 ...
2025-07-07統(tǒng)計學方法在市場調研數(shù)據中的深度應用? 市場調研是企業(yè)洞察市場動態(tài)、了解消費者需求的重要途徑,而統(tǒng)計學方法則是市場調研數(shù) ...
2025-07-07CDA數(shù)據分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當下,數(shù)據已成為企業(yè)決策、行業(yè)發(fā)展的核心驅動力,數(shù)據分析師也因此成為 ...
2025-07-07