
R語言-組間差異的非參數(shù)檢驗
7.5 組間差異的非參數(shù)檢驗
如果數(shù)據(jù)無法滿足t檢驗或ANOVA的參數(shù)假設(shè),可以轉(zhuǎn)而使用非參數(shù)方法。舉例來說,若結(jié)果變量在本質(zhì)上就嚴(yán)重偏倚或呈現(xiàn)有序關(guān)系,那么你可能會希望使用本節(jié)中的方法。
7.5.1 兩組的比較
若兩組數(shù)據(jù)獨立,可以使用Wilcoxon秩和檢驗(更廣為人知的名字是Mann–Whitney U檢驗)來評估觀測是否是從相同的概率分布中抽得的(即,在一個總體中獲得更高得分的概率是否比另一個總體要大)。調(diào)用格式為:
其中的y是數(shù)值型變量,而x是一個二分變量。調(diào)用格式或為:
其中的y1和y2為各組的結(jié)果變量。
可選參數(shù)data的取值為一個包含了這些變量的矩陣或數(shù)據(jù)框。
默認(rèn)進行一個雙側(cè)檢驗。你可以添加參數(shù)exact來進行精確檢驗,指定alternative="less"或alternative="greater"進行有方向的檢驗。
如果你使用Mann–Whitney U檢驗回答上一節(jié)中關(guān)于監(jiān)禁率的問題,將得到這些結(jié)果:
你可以再次拒絕南方各州和非南方各州監(jiān)禁率相同的假設(shè)(p < 0.001)。Wilcoxon符號秩檢驗是非獨立樣本t檢驗的一種非參數(shù)替代方法。它適用于兩組成對數(shù)據(jù)和無法保證正態(tài)性假設(shè)的情境。調(diào)用格式與Mann–Whitney U檢驗完全相同,不過還可以添加參數(shù)paired=TRUE。讓我們用它解答上一節(jié)中的失業(yè)率問題:
你再次得到了與配對t檢驗相同的結(jié)論。在本例中,含參的t檢驗和與其作用相同的非參數(shù)檢驗得到了相同的結(jié)論。當(dāng)t檢驗的假設(shè)合理時,參數(shù)檢驗的功效更強(更容易發(fā)現(xiàn)存在的差異)。而非參數(shù)檢驗在假設(shè)非常不合理時(如對于等級有序數(shù)據(jù))更適用。
7.5.2 多于兩組的比較
在要比較的組數(shù)多于兩個時,必須轉(zhuǎn)而尋求其他方法。考慮7.4節(jié)中的state.x77數(shù)據(jù)集。它包含了美國各州的人口、收入、文盲率、預(yù)期壽命、謀殺率和高中畢業(yè)率數(shù)據(jù)。如果你想比較美國四個地區(qū)(東北部、南部、中北部和西部)的文盲率,應(yīng)該怎么做呢?這稱為單向設(shè)計(one-way design),我們可以使用參數(shù)或非參數(shù)的方法來解決這個問題。如果無法滿足ANOVA設(shè)計的假設(shè),那么可以使用非參數(shù)方法來評估組間的差異。如果各組獨立,則Kruskal—Wallis檢驗將是一種實用的方法。如果各組不獨立(如重復(fù)測量設(shè)計或隨機區(qū)組設(shè)計),那么Friedman檢驗會更合適。
Kruskal–Wallis檢驗的調(diào)用格式為:
其中的y是一個數(shù)值型結(jié)果變量, A是一個擁有兩個或更多水平的分組變量(grouping variable)。(若有兩個水平,則它與Mann–Whitney U檢驗等價。)而Friedman檢驗的調(diào)用格式為:
其中的y是數(shù)值型結(jié)果變量, A是一個分組變量, 而B是一個用以認(rèn)定匹配觀測的區(qū)組變量 (blocking variable) 。在以上兩例中, data皆為可選參數(shù),它指定了包含這些變量的矩陣或數(shù)據(jù)框。
讓我們利用Kruskal–Wallis檢驗回答文盲率的問題。首先,你必須將地區(qū)的名稱添加到數(shù)據(jù)集中。這些信息包含在隨R基礎(chǔ)安裝分發(fā)的state.region數(shù)據(jù)集中。
現(xiàn)在就可以進行檢驗了:
顯著性檢驗的結(jié)果意味著美國四個地區(qū)的文盲率各不相同(p
<0.001)。雖然你可以拒絕不存在差異的原假設(shè),但這個檢驗并沒有告訴你哪些地區(qū)顯著地與其他地區(qū)不同。要回答這個問題,你可以使用Mann–Whitney
U檢驗每次比較兩組數(shù)據(jù)。一種更為優(yōu)雅的方法是在控制犯第一類錯誤的概率(發(fā)現(xiàn)一個事實上并不存在的差異的概率)的前提下,執(zhí)行可以同步進行的多組比較,這樣可以直接完成所有組之間的成對比較。
npmc包提供了所需要的非參數(shù)多組比較程序。
說實話,我將本章標(biāo)題中基本的定義拓展了不止一點點,但由于在這里講非常合適,所以希望你能夠容忍我的做法。第一步,請先安裝npmc包。此包中的npmc()函數(shù)接受的輸入為一個兩列的數(shù)據(jù)框,其中一列名為var(因變量),另一列名為class(分組變量)。代碼清單7-20中包含了可以用來完成計算的代碼。
調(diào)用了npmc的語句生成了六對統(tǒng)計比較結(jié)果(東北部對南部、東北部對中北部、東北部對西部、南部對中北部、南部對西部,以及中北部對西部) ??梢詮碾p側(cè)的p值(p.value.2s)看出南部與其他三個地區(qū)顯著不同,而其他三個地區(qū)之間并沒有什么不同。在 處可以看到南部的文盲率中間值更高。注意, npmc在計算積分時使用了隨機數(shù),所以每次計算的結(jié)果會有輕微的不同。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計的實用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動決策的時代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點,而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報考到取證的全攻略? 在數(shù)字經(jīng)濟蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗:捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗:數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨特的門控機制,在 ...
2025-07-07統(tǒng)計學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動態(tài)、了解消費者需求的重要途徑,而統(tǒng)計學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03