
大數(shù)據(jù)時(shí)代來臨,社會對數(shù)據(jù)人才的理解和評價(jià)存在泡沫,是時(shí)候需要回歸到理性。從智聯(lián)網(wǎng)的招聘信息看到,很多公司招聘高級數(shù)據(jù)分析,都特別提出類 似的要求:熟練使用SAS、SPSS、R等工具。這些軟件都是統(tǒng)計(jì)軟件,里面的算法都是上個(gè)世紀(jì)不懂公司業(yè)務(wù)的人弄出來的。既然是統(tǒng)計(jì)領(lǐng)域的知識,為什么 特別強(qiáng)調(diào)這部分知識呢?其他知識重要性都較輕嗎?
很多公司招高級數(shù)據(jù)分析如此,阿里巴巴數(shù)據(jù)分析專家盧輝寫的書也有類似的問題。很多人都有光環(huán)效應(yīng)(他們認(rèn)為由于阿里的數(shù)據(jù)厲害,所以阿里的數(shù) 據(jù)分析專家寫的都是對的,其實(shí)阿里發(fā)展好,是整個(gè)團(tuán)隊(duì)多年努力出來的)。目前開始有些相對聰明的人慢慢從這個(gè)泡沫中從模糊中感覺到不妥,而我本身就是讀統(tǒng) 計(jì)的,由于敢于說真話讓我先后被兩個(gè)中國新聞人物器重和教導(dǎo)。經(jīng)驗(yàn)不是一篇文章就能說清楚,我這里只說說我對阿里巴巴數(shù)據(jù)分析專家盧輝著的書《數(shù)據(jù)挖掘與 數(shù)據(jù)化運(yùn)營實(shí)戰(zhàn)》。
先舉個(gè)例子,大家都知道同樣頭暈,病根可能是不同的,所以學(xué)醫(yī)的學(xué)生全部科目都要學(xué),實(shí)習(xí)要全部科室都走一趟。如果醫(yī)生知識面不夠廣的話,就容易誤診。如果你同意上面例子的話,那么統(tǒng)計(jì)方面,知識面不夠廣就會有問題,這結(jié)論大家就能理解了。
例如盧書第17頁提到“數(shù)據(jù)挖掘很多時(shí)候并不需要特別專業(yè)的統(tǒng)計(jì)背景作為必要條件,不過需要強(qiáng)調(diào)的是基本的統(tǒng)計(jì)知識和技能是必需的”。什么才算 基本?懂法律才算最基本吧?統(tǒng)計(jì)法規(guī)定統(tǒng)計(jì)的職權(quán)是調(diào)查、報(bào)告、監(jiān)督看出,國家強(qiáng)調(diào)的是調(diào)查,不是統(tǒng)計(jì)分析。而第2章提到統(tǒng)計(jì)分析與數(shù)據(jù)挖掘的差異以及書 后面介紹的內(nèi)容,看出盧書作者對統(tǒng)計(jì)的認(rèn)識只停留是統(tǒng)計(jì)分析上。這樣有什么問題呢?
第6章數(shù)據(jù)挖掘項(xiàng)目完整應(yīng)用案例演示,提到某公司存在用戶流失的情況,大家都很自然想到調(diào)查原因,有些原因可以通過分析日志記錄的用戶行為數(shù)據(jù) 就能知道大概的問題,也可能公司并沒有相關(guān)的數(shù)據(jù),需要做調(diào)查,包含市場調(diào)查或業(yè)務(wù)調(diào)查。不論是否有相關(guān)的用戶行為數(shù)據(jù),都屬于統(tǒng)計(jì)這個(gè)大范圍內(nèi)。
但是盧書在第6章提到的方法,浪費(fèi)大量人力物力,卻沒得到大家真正關(guān)心的答案。書中介紹的做法是:“本案例主要集中是3個(gè)方面:1、模型投入應(yīng) 用后提前鎖定有高流失風(fēng)險(xiǎn)的高活躍用戶群體;2、可以將建模過程中發(fā)現(xiàn)的有價(jià)值的,最可能影響流失的重要字段和指標(biāo)選擇性地提供給運(yùn)營方;3、針對影響流 失的核心指標(biāo)和字段,可以提供給業(yè)務(wù)方,作為參考線索。”也就是花了很多的時(shí)間和人力成本卻沒直接回答流失原因,對于沒有相關(guān)的數(shù)據(jù),不懂調(diào)查也不想做調(diào) 查的人就說這不是他們的工作范圍。
另外,盧書封面寫“以業(yè)務(wù)為核心,以思路為重點(diǎn),以挖掘技術(shù)為輔佐”,這點(diǎn)筆者同意,但是書中內(nèi)容多處違背這個(gè)道理。例如按照“以業(yè)務(wù)為核心, 以思路為重點(diǎn)”的說法,業(yè)務(wù)分析和報(bào)告應(yīng)該是具有邏輯性,可讀性。但是盧書中第17頁提到“神經(jīng)網(wǎng)絡(luò)挖掘技術(shù),它里面的隱蔽層就是一個(gè)黑箱,沒有人能在所 有的情況下讀懂” “在實(shí)踐應(yīng)用中,這種情況常會讓習(xí)慣統(tǒng)計(jì)分析公式的分析師或者業(yè)務(wù)人員感到困惑”“只要模型能正確預(yù)測客戶行為”“業(yè)務(wù)部門、運(yùn)營部門不了解技術(shù)細(xì)節(jié),又 有何不可呢?”按照“以業(yè)務(wù)為核心,以思路為重點(diǎn)”的說法,計(jì)算不符合業(yè)務(wù)邏輯的情況是應(yīng)該選擇其他方法去實(shí)現(xiàn),但盧書采用了“以挖掘技術(shù)為主,思路為 輔”的做法,以只要能正確預(yù)測用戶行為試圖讓大家覺得這樣做可行。試想如果黑箱算法預(yù)測的結(jié)果出了問題,容易查問題和解決嗎?
面對著業(yè)務(wù)人員對他們使用的計(jì)算不理解時(shí),盧書第59頁提到的做法是“業(yè)務(wù)團(tuán)隊(duì)”“應(yīng)該具備”“能理解數(shù)據(jù)分析師的分析報(bào)告”。這再一次為上一 個(gè)說不清的問題找了個(gè)借口。真正以“以業(yè)務(wù)為核心,以思路為重點(diǎn)”的做法,是要求數(shù)據(jù)分析師的報(bào)告要讓業(yè)務(wù)團(tuán)隊(duì)的人看得懂。統(tǒng)計(jì)法規(guī)定統(tǒng)計(jì)的職權(quán)是調(diào)查、 報(bào)告、監(jiān)督。報(bào)告最起碼就是要讓別人看得懂,有可讀性。盧書把這個(gè)邏輯顛倒了。強(qiáng)調(diào)使用SAS、SPSS、R等工具進(jìn)行分析的數(shù)據(jù)分析師、數(shù)據(jù)挖掘,他們 做的報(bào)告也偏向于盧書提到的情況,甚至干脆不寫報(bào)告。
數(shù)據(jù)分析、數(shù)據(jù)挖掘是這幾年才新興的職位,他們使用的只是統(tǒng)計(jì)知識中很少一部分的內(nèi)容加上互聯(lián)網(wǎng)需要的知識,但是統(tǒng)計(jì)的其他知識都沒用嗎?社會 對數(shù)據(jù)人員的評價(jià)高還是對統(tǒng)計(jì)的評價(jià)高?統(tǒng)計(jì)局做人口調(diào)查應(yīng)該是家喻戶曉的常識,為什么很多數(shù)據(jù)人員不愿意提,甚至希望與調(diào)查劃清界線。面試過很多公司的 數(shù)據(jù)分析,他們都說自己很喜歡統(tǒng)計(jì),當(dāng)深入問的時(shí)候,原來他們只喜歡數(shù)據(jù)分析那部分工作,這反映社會現(xiàn)狀和教育問題了。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報(bào)考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計(jì)的實(shí)用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實(shí)施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價(jià)值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時(shí)代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價(jià)值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價(jià)值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點(diǎn),而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報(bào)考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗(yàn):捕捉數(shù)據(jù)背后的時(shí)間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗(yàn)如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時(shí)間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時(shí)間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實(shí)戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗(yàn):數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨(dú)特的門控機(jī)制,在 ...
2025-07-07統(tǒng)計(jì)學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動(dòng)態(tài)、了解消費(fèi)者需求的重要途徑,而統(tǒng)計(jì)學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動(dòng)力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動(dòng)力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價(jià)值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03