
人類知識的唯一來源,是對過去經(jīng)驗(yàn)的記錄和整理,而數(shù)據(jù),正是這種記錄的載體,因此數(shù)據(jù)的價值首先在于它是知識的來源。如果說傳統(tǒng)的數(shù)據(jù)是人類部分知識的來源,那隨著人類記錄范圍的不斷擴(kuò)大,現(xiàn)代意義上的大數(shù)據(jù)將逐漸成為人類全部知識的來源。
數(shù)據(jù)是對客觀世界的測量和記錄,這種記錄也是對歷史和現(xiàn)實(shí)的記錄。1869 年,當(dāng)美國總統(tǒng)加菲爾德在對美國的人口普查體系進(jìn)行現(xiàn)代化改造之時,他就發(fā)現(xiàn),數(shù)據(jù)當(dāng)中不僅蘊(yùn)藏著社會發(fā)展的規(guī)律,它還提供了一種全新的歷史書寫方式:
直到現(xiàn)在,歷史學(xué)家還是以一種總體的形式來研究一個國家,他們只能給我們講述帝王將相以及戰(zhàn)爭的歷史,但關(guān)于人民本身我們龐大社會中每個生命的成長、各種力量、細(xì)節(jié)及其規(guī)律,歷史學(xué)家說不出太多的東西而普查把我們的觀察放大到民房、家庭、工廠、煤礦、田野、監(jiān)獄、醫(yī)院等集中展示人性之強(qiáng)大及脆弱的所有地方,這讓新的歷史記錄成為可能。
今天回頭看,此話非常具有前瞻性。隨著人類躍進(jìn)到大數(shù)據(jù)時代,數(shù)據(jù)不僅是新知識的來源,還是記錄歷史最重要、最可靠、最好的方式。從今以后,人類所有的歷史記錄,無論是數(shù)字、文檔、圖片,還是音頻和視頻,都將以數(shù)據(jù)的形式存在,數(shù)據(jù)就是靜態(tài)的歷史,歷史就是動態(tài)的數(shù)據(jù)。歷史的碎片,就是游離的數(shù)據(jù);歷史的迷霧,就是模糊的數(shù)據(jù);歷史的盲點(diǎn),就是缺失的數(shù)據(jù)。用數(shù)據(jù)構(gòu)建的歷史,因?yàn)榫_的細(xì)節(jié)而永遠(yuǎn)鮮活,數(shù)據(jù)越豐富,后世的歷史學(xué)家也就越能經(jīng)由數(shù)據(jù)更好地再現(xiàn)當(dāng)時的社會。
除了發(fā)現(xiàn)知識、記錄歷史,本書認(rèn)為,人類使用數(shù)據(jù)的巔峰形式,是通過數(shù)據(jù)訓(xùn)練機(jī)器,讓機(jī)器獲得智能,在不遠(yuǎn)的將來,無處不在的計算設(shè)備和網(wǎng)絡(luò)將像有智商的人一樣,為人類工作和服務(wù)。這意味著我們在向智能型社會邁進(jìn),在這個新的社會形態(tài),由于精準(zhǔn)的計算和預(yù)測,整個社會的各個部分可以像無數(shù)個大大小小的軸承和齒輪一樣,環(huán)環(huán)相扣,齒齒吻合,日常管理將通過數(shù)據(jù)得到優(yōu)化,各種任務(wù)、合作可以無縫對接,社會運(yùn)行的成本可大幅降低,更重要的是,越來越多的工作將被計算機(jī)或者機(jī)器人代替。這既是進(jìn)步,又是挑戰(zhàn)?;赝r(nóng)業(yè)時代和工業(yè)時代,人類不斷地開發(fā)我們賴以生存的自然環(huán)境,從地表到地下,物理性的資源終有耗盡的一天,而大數(shù)據(jù)將成為人類取之不盡、用之不竭的新資源,在這片資源之上,再通過軟件和算法,人類將建設(shè)一個智能型世界。
數(shù)據(jù),正在成為這個世界最重要的土壤和基礎(chǔ)。
在這個社會轉(zhuǎn)型的緊要關(guān)頭,中國,作為正在趕超發(fā)達(dá)國家的發(fā)展中國家,歷史將賦予我們前所未有的機(jī)遇。例如,當(dāng)年的美國用了幾十年的努力,才建立了全民信用制度,今天,因?yàn)檎莆樟丝蛻舻慕灰琢魉當(dāng)?shù)據(jù),阿里巴巴在短短幾分鐘之內(nèi)就可以決定是否發(fā)放一筆貸款。利用無處不在的充沛數(shù)據(jù),中國的全民信用體系可能在較短的時間內(nèi)、以較小的成本就可以建立起來。又如,隨著網(wǎng)絡(luò)的普及,信用卡將數(shù)據(jù)化、虛擬化,實(shí)體信用卡將大幅減少甚至消失,這意味著我們的銀行不用再像美國銀行那樣建設(shè)那么多的物理網(wǎng)點(diǎn)和自動存取款機(jī)了。再如,因?yàn)橹悄茉诰€教育平臺的出現(xiàn),未來的教育資源完全不會局限于鋼筋水泥的學(xué)校,中國教育資源緊缺的問題可能得到快速的、大幅的緩解。此外,可穿戴式電腦設(shè)備、智能軟件診斷系統(tǒng)、遠(yuǎn)程醫(yī)療等技術(shù)的出現(xiàn),將緩解醫(yī)療資源、專業(yè)人才的緊缺。
種種機(jī)遇,可以概括為后發(fā)優(yōu)勢。
以銀行的自動存取款機(jī)為例。從下表可以看出,近年來,中國擁有的自動存取款機(jī)在迅速增加。 2012 年,中國平均每 10 萬成年人擁有的自動提款機(jī)數(shù)量為37.51 臺,但和英、美、日、加等發(fā)達(dá)國家相比,我們的差距還很大:加拿大平均每 10 萬成年人擁有的自動存取款機(jī)為 205 臺、美國為 173 臺、日本為 127 臺。如果要在數(shù)據(jù)上縮小、拉平這個差距,中國肯定還需要很多年的努力。但由于大數(shù)據(jù)、互聯(lián)網(wǎng)金融的出現(xiàn)和普及,大部分金融交易都可以通過虛擬賬戶來完成。可以預(yù)見,未來的社會一定不需要那么多實(shí)體存取款機(jī)了,如果我們現(xiàn)在就能立足長遠(yuǎn)、科學(xué)規(guī)劃,就可以跨越建設(shè)這些存取款機(jī)的環(huán)節(jié)、省去相應(yīng)的費(fèi)用,這就是后發(fā)優(yōu)勢。
數(shù)據(jù)來源:世界銀行,Automated teller machines (ATMs) (per 100 000 adults),表示沒有獲得當(dāng)年的年度數(shù)據(jù)。
2001 年前后,華裔經(jīng)濟(jì)學(xué)家楊小凱先生曾經(jīng)提出,如果中國僅僅重視技術(shù)模仿,而忽視制度建設(shè),后發(fā)優(yōu)勢就可能轉(zhuǎn)化為后發(fā)劣勢,但我認(rèn)為,我們當(dāng)下?lián)碛械暮蟀l(fā)優(yōu)勢并不屬于這個范疇?,F(xiàn)在出現(xiàn)的后發(fā)優(yōu)勢,是因?yàn)槿祟愓趶墓I(yè)文明大步邁進(jìn)信息文明,因?yàn)榇髷?shù)據(jù)的沖擊、智能社會的到來,人類的地平線上出現(xiàn)了一些新方法來解決一些老問題,這些方法用的不是鋼筋和水泥,而是軟件和數(shù)據(jù)!
但要在全球競爭中把握住這種后發(fā)優(yōu)勢,并不容易。國與國之間的競爭,表面上是科技競爭、經(jīng)濟(jì)競爭,但歸根結(jié)底,還是國民素質(zhì)和文化的競爭。沒有一個健康、理性、與時俱進(jìn)的文化,一個國家就難以變得強(qiáng)大,本書的努力,就是試圖在中國,把數(shù)據(jù)這個科技符號變成一個文化符號,將大數(shù)據(jù)這個高端精英的話題變成一個大眾話題,使數(shù)據(jù)文化進(jìn)入中國人的視野、融入中國人的意識和血液。
面對一輪又一輪的技術(shù)浪潮,世界各國的政府(包括歐美發(fā)達(dá)國家)的反應(yīng)其實(shí)都很遲鈍。信息技術(shù)發(fā)展到今天,它已經(jīng)不是在推動社會的進(jìn)步,而是在拉動社會的進(jìn)步。如前文所述,如今社會的各種配套設(shè)施、管制規(guī)定已經(jīng)滯后于信息技術(shù)的發(fā)展,技術(shù)的能量要全部釋放,社會就必須重建自己的基礎(chǔ)設(shè)施和管制體系?;仡^再看美國的鍍金時代和進(jìn)步時代,正是在從農(nóng)業(yè)社會到工業(yè)社會的轉(zhuǎn)型中,美國適時地抓住了機(jī)會,不僅成功化解了當(dāng)時的社會危機(jī),還實(shí)現(xiàn)了大國崛起。如今一個新的社會形態(tài)又在向我們靠近,在這個轉(zhuǎn)折點(diǎn)上,對任何一個國家而言,戰(zhàn)略選擇都特別重要,其中最大的責(zé)任和挑戰(zhàn),莫過于政府。
但任何一個國家的建設(shè)和進(jìn)步,又不能全盤系于政府。不調(diào)動全社會的力量、沒有真正的公民,國家的進(jìn)步就會缺乏長期的動力,其進(jìn)步就只能依靠外部的刺激和外力的拖動,結(jié)果就是:跟在發(fā)達(dá)國家背后亦步亦趨。在中國社會幾千年的封建王朝更替中,不乏這樣的例子和教訓(xùn)。公民,無數(shù)的公民,才是推動一個社會不斷進(jìn)步的源源動力。對于中國社會的決策者而言,關(guān)鍵是要意識到,新技術(shù)的能量將打破權(quán)力的平衡,在傳統(tǒng)的界限之外,已經(jīng)出現(xiàn)了一些新的、可調(diào)用的資源,必須要有新思路、新手段去整合、調(diào)用這些資源。
改變,并不一定代表進(jìn)步,但進(jìn)步,一定需要改變。我們期待中國更多的進(jìn)步和改變。這系于政府,系于中國大眾,更系于中國的文化革新。
(選摘自涂子沛先生新作《數(shù)據(jù)之巔》結(jié)語)
數(shù)據(jù),自古就有,人口普查、農(nóng)業(yè)統(tǒng)計、軍事戰(zhàn)爭、政治計算數(shù)據(jù)雖小,卻有助于治國安邦。美國之所以繁榮鼎盛,數(shù)據(jù)文化根基牢不可破概是主因之一。
信息爆炸、互聯(lián)互通、智慧城市時代,大數(shù)據(jù),更以排山倒海之勢席卷全球,政府施政、企業(yè)掘金,大眾要公平與正義,大數(shù)據(jù)被賦予了新的歷史使命。
在《數(shù)據(jù)之巔》這本書中,從小數(shù)據(jù)時代到大數(shù)據(jù)的崛起,作者以宏大的歷史觀、文化觀、大數(shù)據(jù)觀,給我們描繪了一幅數(shù)據(jù)科學(xué)、智慧文化的全景圖。全書從美國建國之基講起,通過闡述初數(shù)時代、內(nèi)戰(zhàn)時代、鍍金時代、進(jìn)步時代、抽樣時代、大數(shù)據(jù)時代的特征,系統(tǒng)梳理了美國數(shù)據(jù)文化的形成,闡述了其數(shù)據(jù)治國之道,論述了中國數(shù)據(jù)文化的薄弱之處,展望了未來數(shù)據(jù)世界的遠(yuǎn)景。
尊重事實(shí),用數(shù)據(jù)說話,推崇知識和理性,用數(shù)據(jù)創(chuàng)新,作者不僅意在傳承黃仁宇數(shù)目字管理的薪火,還試圖把數(shù)據(jù)這個科技符號在中國轉(zhuǎn)變?yōu)槲幕?,形成一種文化話語體系。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計的實(shí)用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實(shí)施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動決策的時代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點(diǎn),而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗(yàn):捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗(yàn)如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實(shí)戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗(yàn):數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨(dú)特的門控機(jī)制,在 ...
2025-07-07統(tǒng)計學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動態(tài)、了解消費(fèi)者需求的重要途徑,而統(tǒng)計學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03