
數(shù)據(jù)造假的三種常見(jiàn)形態(tài)_數(shù)據(jù)分析師考試
一、圖表欺騙
圖表通常用來(lái)增強(qiáng)需要文字和數(shù)據(jù)的說(shuō)服力,通過(guò)可視化的圖表更容易讓受眾接受信息。但圖表有時(shí)候會(huì)表現(xiàn)的不是數(shù)據(jù)的本質(zhì):
1.圖表拉伸
如果沒(méi)有特殊用途,通常圖表的長(zhǎng)(橫軸)與高(縱軸)的比例為1:1到1:2之間,如果在這個(gè)范圍之外,數(shù)據(jù)現(xiàn)實(shí)的結(jié)果會(huì)過(guò)于異常。比如:
2.坐標(biāo)軸特殊處理
在很多場(chǎng)合下,如果兩列數(shù)據(jù)的取值范圍差異性過(guò)大,通常在顯示時(shí)會(huì)取對(duì)數(shù),這時(shí)原來(lái)柱狀圖間的巨大差異會(huì)被故意縮小。通常,嚴(yán)謹(jǐn)?shù)姆治鰩熢谥v解之前會(huì)進(jìn)行告知。比如:
數(shù)據(jù)標(biāo)準(zhǔn)化也是一個(gè)讓數(shù)據(jù)落在相同區(qū)間內(nèi)常用的方法,常用Z標(biāo)準(zhǔn)化或0-1標(biāo)準(zhǔn)化,如果不提前告知,可能會(huì)誤以為兩列數(shù)據(jù)取值異常接近,不符合實(shí)際業(yè)務(wù)場(chǎng)景,比如:
隱秘層次:★★☆☆☆
破解方法:詢問(wèn)分析師的圖表各個(gè)含義,了解基本圖表查看常識(shí)。
二、數(shù)據(jù)處理欺騙
數(shù)據(jù)處理中的欺騙方法通常包括抽樣方法欺騙、樣本量不同、異常值處理欺騙等。
1.抽樣方法欺騙
整體樣本的維度,粒度和取數(shù)邏輯相同的情況下,不用的樣本抽樣規(guī)則會(huì)使數(shù)據(jù)看來(lái)更符合或不符合“預(yù)期”。比如在做用戶挽回中,假如做的兩次活動(dòng)的抽樣樣本分別是最近6個(gè)月未購(gòu)物和最近6個(gè)月未購(gòu)物但有登陸行為的用戶,不用做什么測(cè)試,基本上可以確定后者的挽回效果更佳。要識(shí)破這個(gè)“騙局”只需要詢問(wèn)數(shù)據(jù)取樣方法即可,需要細(xì)到具體的SQL邏輯。
2.樣本量不同
嚴(yán)格來(lái)說(shuō)樣本量不同并不一定是故意欺騙,實(shí)踐中確實(shí)存在這種情況。(遇到這種情況可以用欠抽樣和過(guò)抽樣進(jìn)行樣本平衡)樣本量不同分為兩種情況:
樣本量數(shù)量不同。比如要做效果差異對(duì)比,第一步是做效果比對(duì),假如兩個(gè)數(shù)據(jù)樣本量分別是幾千和幾萬(wàn)的級(jí)別,可比性就很小。尤其是對(duì)于樣本分布不均的情況下,數(shù)據(jù)結(jié)果可信度低。
樣本主體不同。這是非常嚴(yán)重的數(shù)據(jù)引導(dǎo)錯(cuò)誤,通常存在于為了達(dá)到某種結(jié)果而故意選擇對(duì)結(jié)果有利的樣本。比如做品類推廣,一部分用戶推廣渠道為廣告,另一部分是CPS可以遇見(jiàn)相同費(fèi)用下后者的效果必然更好。
相同樣本不同的客觀環(huán)境。比如做站內(nèi)用戶體驗(yàn)分析,除了用隨機(jī)A/B測(cè)試以外,其他所有測(cè)試方法都沒(méi)有完全相同的客觀環(huán)境,因此即使選的是相同樣本,不同時(shí)間由于用戶,網(wǎng)站本身等影響,可信度較低。
3.異常值處理欺騙
通常面對(duì)樣本時(shí)需要做整體數(shù)據(jù)觀察,以確認(rèn)樣本數(shù)量、均值、極值、方差、標(biāo)準(zhǔn)差以及數(shù)據(jù)范圍等。其中的極值很可能是異常值,此時(shí)如何處理異常值會(huì)直接影響數(shù)據(jù)結(jié)果。比如某天的銷售數(shù)據(jù)中,可能存在異常下單或行單,導(dǎo)致品類銷售額和轉(zhuǎn)化率異常高。如果忽視該情況,結(jié)論就是利好的,但實(shí)際并非如此。通常我們會(huì)把異常值拿出來(lái),單獨(dú)做文字說(shuō)明,甚至?xí)f(shuō)明沒(méi)有異常值下的真實(shí)情況。
隱秘層次:★★★☆☆
破解方法:在跟數(shù)據(jù)分析師溝通中,多詢問(wèn)他們?cè)跀?shù)據(jù)選取規(guī)則,處理方法上的方法,如果他們吞吞吐吐或答不上來(lái),那很有可能是故意為之。同時(shí),業(yè)務(wù)人員也要增強(qiáng)基本數(shù)據(jù)意識(shí),不能被這種不可見(jiàn)的底層錯(cuò)誤欺騙。
三、 意識(shí)上的欺騙
這種欺騙是等級(jí)最高也是最嚴(yán)重的欺騙和錯(cuò)誤,通常存在于數(shù)據(jù)分析師在做數(shù)據(jù)之前就已經(jīng)下結(jié)論,分析過(guò)程中只選取有利于證明其論斷的方法和材料,因此會(huì)在從數(shù)據(jù)選擇,處理,數(shù)據(jù)表現(xiàn)等各個(gè)方面進(jìn)行事實(shí)上的扭曲,是嚴(yán)重的誤導(dǎo)行為!數(shù)據(jù)分析師需要有中立的立場(chǎng),客觀的態(tài)度,任何有立場(chǎng)的分析師的結(jié)論都會(huì)失之偏頗。
隱秘層次:★★★★★
破解方法:在跟該分析師溝通中,查看其是否有明顯立場(chǎng)或態(tài)度,如果有,那么該警惕;然后通過(guò)上面的方法逐一驗(yàn)證。
綜上,當(dāng)你遇到以下數(shù)據(jù)情形,就需要警惕數(shù)據(jù)的真實(shí)性了:
數(shù)據(jù)報(bào)告從來(lái)不注明數(shù)據(jù)出處,數(shù)據(jù)時(shí)間,數(shù)據(jù)取樣規(guī)則,數(shù)據(jù)取得方法等。現(xiàn)在市場(chǎng)上很多報(bào)告都屬于這一類。
數(shù)據(jù)報(bào)告在做市場(chǎng)調(diào)研中說(shuō)明全樣本共1000,其中北京可能只有100,基于這100個(gè)樣本出來(lái)的結(jié)論顯然不可信。事實(shí)上很多市場(chǎng)研究報(bào)告就是這樣出來(lái)的。
數(shù)據(jù)報(bào)告中存在明顯的觀點(diǎn),對(duì)于事物的分析只講其優(yōu)勢(shì)或劣勢(shì),不全面也不客觀?,F(xiàn)在很多互聯(lián)網(wǎng)分析師就是屬于這類,大家注意辨別。
數(shù)據(jù)分析咨詢請(qǐng)掃描二維碼
若不方便掃碼,搜微信號(hào):CDAshujufenxi
LSTM 模型輸入長(zhǎng)度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長(zhǎng)短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長(zhǎng)序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報(bào)考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計(jì)的實(shí)用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠(chéng)摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實(shí)施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價(jià)值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡(jiǎn)稱 BI)深度融合的時(shí)代,BI ...
2025-07-10SQL 在預(yù)測(cè)分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢(shì)預(yù)判? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代,預(yù)測(cè)分析作為挖掘數(shù)據(jù)潛在價(jià)值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價(jià)值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點(diǎn),而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報(bào)考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭(zhēng)搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢(shì)性檢驗(yàn):捕捉數(shù)據(jù)背后的時(shí)間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢(shì)性檢驗(yàn)如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時(shí)間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時(shí)間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實(shí)戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗(yàn):數(shù)據(jù)趨勢(shì)與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢(shì)變化以及識(shí)別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國(guó)內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對(duì)策略? 長(zhǎng)短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨(dú)特的門(mén)控機(jī)制,在 ...
2025-07-07統(tǒng)計(jì)學(xué)方法在市場(chǎng)調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場(chǎng)調(diào)研是企業(yè)洞察市場(chǎng)動(dòng)態(tài)、了解消費(fèi)者需求的重要途徑,而統(tǒng)計(jì)學(xué)方法則是市場(chǎng)調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書(shū)考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動(dòng)力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動(dòng)力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開(kāi)啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價(jià)值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03