
文 | KEVIN SAFFORD譯 | 王鵬宇來源 | 數(shù)據(jù)工匠
寫文章揭密數(shù)據(jù)科學家,這事幾乎已經(jīng)發(fā)展成了一種產(chǎn)業(yè)。
關(guān)于數(shù)據(jù)科學家的困惑很大部分歸咎于:數(shù)據(jù)科學不是一個具體的職務(wù),而是一種在機構(gòu)中解決問題的方法。因此,數(shù)據(jù)科學可以包含多種教育背景、技能、工具、實踐。實際工作中的數(shù)據(jù)科學家們,背景和技能的跨度很大,很難被一概而論。
相對而言,描述數(shù)據(jù)科學的實踐是什么樣的可能更容易。
簡單地說,數(shù)據(jù)科學是用數(shù)據(jù)主導的答案解決實際問題的實踐。實現(xiàn)這個目標的技術(shù)可能多種多樣。你會常常聽到數(shù)據(jù)科學家使用傳統(tǒng)統(tǒng)計學、貝葉斯方法、機器學習、計算工具、行業(yè)領(lǐng)域知識來回答問題。
有時數(shù)據(jù)的規(guī)模會非常巨大,需要使用復(fù)雜的工具和方法來穿過迷霧,得到隱藏在數(shù)據(jù)中的清晰結(jié)論。但是沒有哪個方法、工作、算式能回答所有問題,所以也很難為數(shù)據(jù)科學家下定義。
展示可能比陳述更有說服力。就讓我們來走入數(shù)據(jù)科學家平凡又不平凡的一天。
早晨
早晨的第一件事可能是這一天日程中為數(shù)不多的慣例。
我們的團隊在早上進行例會,分享前一天的進展和問題。這和軟件開發(fā)的“站立”會議可能有點不同。對我們來說,“進展”既可以是建設(shè)了一部分軟件,也可以是閱讀了一篇可以讓我們對手頭問題有更深理解的論文。
數(shù)據(jù)科學可能在許多方面與大學里的學術(shù)行為不同,但它依然是對科學方法的合理運用。
通常,我們的挑戰(zhàn)是如何把“未知”變成“已知”。不僅如此,還要讓它“可執(zhí)行”。
這意味著通過分析數(shù)據(jù)檢驗?zāi)硞€假設(shè),建立測量效果的方法,對這個過程進行迭代,直到最終的研究結(jié)果被修正到足夠有用的水平。晨會是一個交流各個試驗進展的機會。
上午
現(xiàn)在我們有了各自的任務(wù)。是時候做一點實際工作了。這是一天中最有趣的部分。這是我坐下來專注于一個實際問題的時候。
這可能意味著研究處理偶圖的方法,或者寫一些代碼計算高斯超幾何函數(shù)。但每個星期面對的問題很少相同。擁有數(shù)學、統(tǒng)計、編程的背景對解決這些問題來說很重要,但仍然不夠。成為每種方法的專家是不可能的。下一個問題將需要什么知識也是無法預(yù)知的。
這就是為什么數(shù)據(jù)科學家需要不斷學習和無窮的好奇心。
多數(shù)情況下,每個新問題需要一種新方法。這些方法不僅對你來說是新的,對整個世界來說也是新的。這是數(shù)據(jù)科學的挑戰(zhàn)之處和刺激來源。
不確定性不僅是一種統(tǒng)計學的屬性,也是一種生活方式。
午間
數(shù)據(jù)科學的實踐不止于應(yīng)用某些算法的技術(shù)細節(jié),或是在白板上寫出高深的算式。
歸根結(jié)底,我們要解決現(xiàn)實生活中的問題。這意味著理解其他人面對的問題。午間是跟客戶、商業(yè)拓展部門、服務(wù)部門以及任何對我們客戶和合伙人每天面對的問題有全面了解的人士碰面的好時候。
大數(shù)據(jù)分析和機器學習的力量如果不能為他人創(chuàng)造便利就沒太大意義。這是數(shù)據(jù)科學中一個重要的,但是常被忽略的步驟。它決定一個項目最終的成敗。這也是區(qū)分數(shù)據(jù)科學與傳統(tǒng)學術(shù)的一點。
把一個業(yè)務(wù)問題翻譯成一個縝密的研究項目,再把研究結(jié)果翻譯成一個實際的解決方案,這需要對業(yè)務(wù)的深入理解,以及大量的創(chuàng)造力。
閉門造車,沒完沒了做算法調(diào)優(yōu)的數(shù)據(jù)科學團隊永遠不會成功。的確,有時為了讓一個項目最終交付需要這么做。但如果這些都不能投入實際應(yīng)用還有什么意義?
數(shù)據(jù)能告訴我們的關(guān)于世界的知識與數(shù)據(jù)本身中間存在一道鴻溝。與一線工作人員保持良好的交流關(guān)系,是彌補這一鴻溝的唯一方式。
下午
我們已經(jīng)卷起袖子,從技術(shù)和實際的層面鉆研了問題。是時候退一步,思考一下全局了。
我們常常在下午花些時間詳細討論某個項目的目標,或者探討把一個研究項目變成可交付的形式所需的剩余步驟。
與產(chǎn)品團隊的密切交流可以確保我們的工作與機構(gòu)的總體愿景/目標保持一致。確保專注于關(guān)鍵問題是很重要的。由于我們的工作是解決問題,所以必須確保解決方案行得通。我的意思是,在實際工作中行得通。根據(jù)特定業(yè)務(wù)提供解決方案只是個開始。
我們需要建立可靠的、可重復(fù)使用的工具。
這既包括把一個試驗推廣到更多的實用案例,也包括構(gòu)造一個能夠深入產(chǎn)品的解決方案。
這個環(huán)節(jié)是我們最像軟件開發(fā)者的部分,考慮并編寫一些測試來確保表現(xiàn)、穩(wěn)定性、擴展性。我們在Umbel的軟件工程團隊負責建立宏大的系統(tǒng),我們不能扔給他們額外的工作,讓他們?yōu)槲覀兪帐盃€攤子。
把這些試驗變成軟件的一個功能,唯一的辦法是在項目全程時刻想著這個目標。這也就是為何研究階段不應(yīng)只包含數(shù)學。
我們需要知道我們不僅能解決某個問題,還能現(xiàn)實的限制中構(gòu)造軟件來解決這個問題。
結(jié)束這一天經(jīng)歷了所有這些之后,有必要深吸一口氣,看看自己究竟走了多遠。有些日子會比其他日子走的更遠。大多數(shù)試驗則以失敗告終。
多數(shù)解決方案在最終展示之前需要調(diào)整打磨。通常很少有什么能保證你選擇的路線是對的。開天辟地的過程始終伴隨著不確定性。但這個過程中的每天,你都會學到新東西。這一天的結(jié)尾,我們反思我們學到了什么,并把這有關(guān)世界的新知識帶到明天的晨會。
經(jīng)過足夠的努力,我們最終獲得針對特定問題的直接可行的答案。
我們可以對這個答案充滿自信,因為它由數(shù)據(jù)嚴謹?shù)刂?。這個時候,我們還是沒有結(jié)束代碼的編寫。正如我之前所說,數(shù)據(jù)科學項目的一個關(guān)鍵環(huán)節(jié)是把最終結(jié)果翻譯成有意義、實用的東西。
我們需要把我們學到的東西有效地傳達給不同背景的受眾。最終,我們需要利用數(shù)據(jù)講一個故事。跟其他環(huán)節(jié)一樣,這個環(huán)節(jié)沒有什么唯一的正確方法。這個環(huán)節(jié)中我們尋找用圖表把結(jié)果可視化的方法,或者在一個平面展示從問題到解答的各個環(huán)節(jié),或者僅僅是宣布“好的,我們需要做的事是這樣的。”
這里的關(guān)鍵在于,在結(jié)束時,每個人都能理解要做什么以及為什么這么做。
結(jié)語
你可能見過網(wǎng)上流傳的那些展示數(shù)據(jù)科學家需要多少種交叉技能的圖片。
他們會告訴你數(shù)據(jù)科學家是一個天生就是數(shù)學家的軟件工程師,或者一名喜歡在周末把自己消耗的咖啡數(shù)量做成的精美可視化項目的MBA。
希望這個有關(guān)數(shù)據(jù)科學家日常的探討能讓你明白這些圖片是怎么來的。但數(shù)據(jù)科學不是對某種工作的描述,它是一個過程。的確,你需要上面提到的技能,甚至更多技能來成功實現(xiàn)一個數(shù)據(jù)科學項目。
不過,不要認為你需要什么事都一個人完成。數(shù)據(jù)科學,如同任何其他復(fù)雜的努力一樣,是團隊協(xié)作。這也就是為什么你很少看見兩個履歷相同的數(shù)據(jù)科學家。一個優(yōu)秀的數(shù)據(jù)科學團隊應(yīng)囊括所有這些技能,擁有專家和通才,每個成員都有強烈的好奇心。
如果有某件事情是數(shù)據(jù)科學家必須擅長的,那就是學習。
end
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
用 SQL 生成逆向回滾 SQL:數(shù)據(jù)操作的 “后悔藥” 指南? 在數(shù)據(jù)庫操作中,誤刪數(shù)據(jù)、錯改字段或誤執(zhí)行批量更新等問題時有發(fā)生。 ...
2025-07-14如何考取數(shù)據(jù)分析師證書:以 CDA 為例? ? 在數(shù)字化浪潮席卷各行各業(yè)的當下,數(shù)據(jù)分析師已然成為企業(yè)挖掘數(shù)據(jù)價值、驅(qū)動決策的 ...
2025-07-14t檢驗與Wilcoxon檢驗的選擇:何時用t.test,何時用wilcox.test? t 檢驗與 Wilcoxon 檢驗的選擇:何時用 t.test,何時用 wilcox. ...
2025-07-14AI 浪潮下的生存與進階: CDA數(shù)據(jù)分析師—開啟新時代職業(yè)生涯的鑰匙(深度研究報告、發(fā)展指導白皮書) 發(fā)布機構(gòu):CDA數(shù)據(jù)科 ...
2025-07-13LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報考條件詳解與準備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計的實用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實施重大更新。 此次更新旨在確保認 ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動決策的時代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點,而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報考到取證的全攻略? 在數(shù)字經(jīng)濟蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗:捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準 ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗:數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨特的門控機制,在 ...
2025-07-07統(tǒng)計學方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動態(tài)、了解消費者需求的重要途徑,而統(tǒng)計學方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07