
我所處的位置決定我看世界的角度。從這里望去,2016 年的分析領(lǐng)域令人振奮。有史以來,分析領(lǐng)域從未如此重要、如此有趣。------數(shù)據(jù)分析師培訓(xùn)
1. 機(jī)器學(xué)習(xí)在企業(yè)生根發(fā)芽
機(jī)器學(xué)習(xí)(Machine learning)的歷史可以追溯到 1950 年,但直到最近,它都只是精英人才的領(lǐng)域并長期被人忽視。我預(yù)言機(jī)器學(xué)習(xí)會就此穩(wěn)步發(fā)展,因?yàn)樵S多大型企業(yè)正在接納機(jī)器學(xué)習(xí)。如今除了研究者和數(shù)字時代原住民,企業(yè)也在探索如何把機(jī)器學(xué)習(xí)變?yōu)樯a(chǎn)力。在一些已經(jīng)規(guī)范化的行業(yè),模型解釋性較差,曾導(dǎo)致模型難以應(yīng)用。如今這些行業(yè)的從業(yè)者使用機(jī)器學(xué)習(xí),尋找更多創(chuàng)造性的方法,從模型中選擇變量,而這些變量之后能由常用工具進(jìn)一步構(gòu)建。機(jī)器學(xué)習(xí)從多個學(xué)科中獲取營養(yǎng),所以未來預(yù)計(jì)會產(chǎn)生更多跨學(xué)科的興趣?;叵肴ツ?INFORMS 年會的主題,Dimitris Bertsimas 講“現(xiàn)代優(yōu)化視野下的統(tǒng)計(jì)與機(jī)器學(xué)習(xí)”( Statistics and Machine Learning via a Modern Optimization Lens )。我的同事 Patrick Hall 也對于“為什么是機(jī)器學(xué)習(xí)?為什么是現(xiàn)在?”(Why Machine Learning? Why Now?)這一話題給出了他的看法。
2. 物聯(lián)網(wǎng)大潮降溫,面對現(xiàn)實(shí)
根據(jù) Gartner 公司的新科技周期理論(Hype Cycle)來看,物聯(lián)網(wǎng)(Internet of Things, IoT)正處在科技周期的頂峰。但在 2016 年我預(yù)計(jì)物聯(lián)網(wǎng)這個概念將有所降溫,開始面對現(xiàn)實(shí)。如何采集是一個很實(shí)際的障礙——信息太多了。我的一個同事正在把我們新大樓的HVAC 暖通系統(tǒng),作為一個物聯(lián)網(wǎng)測試項(xiàng)目進(jìn)行分析。這棟樓里到處都是傳感器,但獲取數(shù)據(jù)卻并不容易。設(shè)施部門告訴他這是IT部門的職權(quán),IT部門把他又踢到了制造商那里,因?yàn)?HVAC 收集數(shù)據(jù)之后發(fā)送給了制造商。“數(shù)據(jù)所有權(quán)”是一個在逐漸浮現(xiàn)的議題:你生產(chǎn)了數(shù)據(jù),卻無法獲取它。如何證實(shí)自己的價值是物聯(lián)網(wǎng)面對的更大挑戰(zhàn)。物聯(lián)網(wǎng)在企業(yè)級的整體生產(chǎn)應(yīng)用依然有限。物聯(lián)網(wǎng)給出的承諾無與倫比,所以在 2016 年讓我們期待早期使用者們能解決問題,給出答案。
3. 大數(shù)據(jù)走出喧囂,讓模型變得豐富
大數(shù)據(jù)已經(jīng)走出了喧囂,產(chǎn)生了實(shí)際的價值。如今的建模者可以獲取的數(shù)據(jù)種類前所未有地豐富(例如,非結(jié)構(gòu)數(shù)據(jù),地理空間數(shù)據(jù),圖像,聲音),而這些數(shù)據(jù)使得模型可以變得更加豐富。大數(shù)據(jù)的另一新進(jìn)展來自各類競賽,這些競賽超越了之前游戲化的形式,通過眾包和數(shù)據(jù)分享產(chǎn)生了實(shí)際價值。拿前列腺癌 DREAM 挑戰(zhàn)為例,參賽隊(duì)伍使用四種臨床診斷的匿名數(shù)據(jù)挑戰(zhàn)開放的臨床研究問題。這些數(shù)據(jù)來源眾多,大部分是第一次公之于眾。參賽隊(duì)伍的數(shù)目史無前例,最終的獲勝者戰(zhàn)勝了之前此領(lǐng)域尖端研究者開發(fā)的模型。
4. 通過分析提高信息安全
隨著物聯(lián)網(wǎng)發(fā)展,傳感器的廣泛使用肯定讓數(shù)碼空間的犯罪分子感到興奮。他們使用這些設(shè)備,用一種緩慢而低調(diào)的木馬手段進(jìn)行劫持。許多傳統(tǒng)的偵查手段對此無效,因?yàn)閭刹椴辉偈菍ふ乙粋€稀有事件的過程,而需要對情境中事件的累積進(jìn)行理解。跟物聯(lián)網(wǎng)一樣,信息安全面對的一個挑戰(zhàn)和數(shù)據(jù)有關(guān)。我預(yù)計(jì)先進(jìn)的分析作為追蹤數(shù)據(jù)的手段,能為偵查和預(yù)防做出新的貢獻(xiàn)。很可惜,本文無法談?wù)摯髷?shù)據(jù)的合作中正在發(fā)展出的方法,因?yàn)槲覀儾幌胱寜牡爸牢覀兪窃趺窗l(fā)現(xiàn)它們的。這方面的許多優(yōu)秀工作都是在高度安全的隔離環(huán)境中完成的。不過,2016 年 SAS 和其他各方仍會高度關(guān)注信息安全。
5. 分析驅(qū)動著企業(yè)與學(xué)界加強(qiáng)互動
北卡羅來納州立大學(xué)的高級分析研究所(The Institute for Advanced Analytics, IAA)關(guān)注分析領(lǐng)域的碩士項(xiàng)目數(shù)量增長。新的碩士項(xiàng)目與日俱增。企業(yè)的招聘需求促進(jìn)了增長,但同時我也看到了它們對于研究的興趣。越來越多的企業(yè)在設(shè)立學(xué)術(shù)擴(kuò)展部門,并表現(xiàn)出對于研究合作的濃厚興趣。有時這種興趣超越合作伙伴關(guān)系,轉(zhuǎn)而直接雇傭?qū)W界名人。這些學(xué)界名人可能是休假期間來工作,或者在學(xué)界和企業(yè)往返。例如,機(jī)器學(xué)習(xí)頂尖研究者 Yann LeCun 曾在貝爾實(shí)驗(yàn)室工作,也曾是紐約大學(xué)的教授,曾是建立紐約大學(xué)數(shù)據(jù)科學(xué)中心的主管,現(xiàn)在在 Facebook 帶領(lǐng)人工智能研究團(tuán)隊(duì)。INFORMS(運(yùn)籌學(xué)與管理科學(xué)研究協(xié)會),通過為學(xué)界提供與分析有關(guān)的教學(xué)材料的方式,支持這種產(chǎn)學(xué)互動。2016 年 INFORMS 會為業(yè)界提供一個可查詢的、分析領(lǐng)域(碩士)項(xiàng)目的數(shù)據(jù)庫以促進(jìn)雙方往來,并提供新的 Associate Certified Analytics Professional 證書來幫助選拔畢業(yè)生。(數(shù)據(jù)分析師)
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
2025被稱為“AI元年”,而AI,與數(shù)據(jù)密不可分。網(wǎng)易公司創(chuàng)始人丁磊在《AI思維:從數(shù)據(jù)中創(chuàng)造價值的煉金術(shù)》一書中指出:AI思維, ...
2025-07-17數(shù)據(jù)分析師的技能圖譜:從數(shù)據(jù)到價值的橋梁? 在數(shù)據(jù)驅(qū)動決策的時代,數(shù)據(jù)分析師如同 “數(shù)據(jù)翻譯官”,將冰冷的數(shù)字轉(zhuǎn)化為清晰的 ...
2025-07-17Pandas 寫入指定行數(shù)據(jù):數(shù)據(jù)精細(xì)化管理的核心技能? 在數(shù)據(jù)處理的日常工作中,我們常常需要面對這樣的場景:在龐大的數(shù)據(jù)集里精 ...
2025-07-17解碼 CDA:數(shù)據(jù)時代的通行證? 在數(shù)字化浪潮席卷全球的今天,當(dāng)企業(yè)決策者盯著屏幕上跳動的數(shù)據(jù)曲線尋找增長密碼,當(dāng)科研人員在 ...
2025-07-17CDA 精益業(yè)務(wù)數(shù)據(jù)分析:數(shù)據(jù)驅(qū)動業(yè)務(wù)增長的實(shí)戰(zhàn)方法論 在企業(yè)數(shù)字化轉(zhuǎn)型的浪潮中,“數(shù)據(jù)分析” 已從 “加分項(xiàng)” 成為 “必修課 ...
2025-07-16MySQL 中 ADD KEY 與 ADD INDEX 詳解:用法、差異與優(yōu)化實(shí)踐 在 MySQL 數(shù)據(jù)庫表結(jié)構(gòu)設(shè)計(jì)中,索引是提升查詢性能的核心手段。無論 ...
2025-07-16解析 MySQL Update 語句中 “query end” 狀態(tài):含義、成因與優(yōu)化指南? 在 MySQL 數(shù)據(jù)庫的日常運(yùn)維與開發(fā)中,開發(fā)者和 DBA 常會 ...
2025-07-16如何考取數(shù)據(jù)分析師證書:以 CDA 為例? ? 在數(shù)字化浪潮席卷各行各業(yè)的當(dāng)下,數(shù)據(jù)分析師已然成為企業(yè)挖掘數(shù)據(jù)價值、驅(qū)動決策的 ...
2025-07-15CDA 精益業(yè)務(wù)數(shù)據(jù)分析:驅(qū)動企業(yè)高效決策的核心引擎? 在數(shù)字經(jīng)濟(jì)時代,企業(yè)面臨著前所未有的數(shù)據(jù)洪流,如何從海量數(shù)據(jù)中提取有 ...
2025-07-15MySQL 無外鍵關(guān)聯(lián)表的 JOIN 實(shí)戰(zhàn):數(shù)據(jù)整合的靈活之道? 在 MySQL 數(shù)據(jù)庫的日常操作中,我們經(jīng)常會遇到需要整合多張表數(shù)據(jù)的場景 ...
2025-07-15Python Pandas:數(shù)據(jù)科學(xué)的瑞士軍刀? ? 在數(shù)據(jù)驅(qū)動的時代,面對海量、復(fù)雜的數(shù)據(jù),如何高效地進(jìn)行處理、分析和挖掘成為關(guān)鍵。 ...
2025-07-15用 SQL 生成逆向回滾 SQL:數(shù)據(jù)操作的 “后悔藥” 指南? 在數(shù)據(jù)庫操作中,誤刪數(shù)據(jù)、錯改字段或誤執(zhí)行批量更新等問題時有發(fā)生。 ...
2025-07-14t檢驗(yàn)與Wilcoxon檢驗(yàn)的選擇:何時用t.test,何時用wilcox.test? t 檢驗(yàn)與 Wilcoxon 檢驗(yàn)的選擇:何時用 t.test,何時用 wilcox. ...
2025-07-14AI 浪潮下的生存與進(jìn)階: CDA數(shù)據(jù)分析師—開啟新時代職業(yè)生涯的鑰匙(深度研究報(bào)告、發(fā)展指導(dǎo)白皮書) 發(fā)布機(jī)構(gòu):CDA數(shù)據(jù)科 ...
2025-07-13LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報(bào)考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計(jì)的實(shí)用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實(shí)施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動決策的時代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10