99999久久久久久亚洲,欧美人与禽猛交狂配,高清日韩av在线影院,一个人在线高清免费观看,啦啦啦在线视频免费观看www

熱線電話:13121318867

登錄
首頁精彩閱讀數(shù)據(jù)分析方法:非參數(shù)檢驗
數(shù)據(jù)分析方法:非參數(shù)檢驗
2016-10-15
收藏

數(shù)據(jù)分析方法:非參數(shù)檢驗

前面介紹了T檢驗和方差分析,它們解決的是正態(tài)分布的高測度數(shù)據(jù)的均值差異性問題。對于非正態(tài)分布的高測度數(shù)據(jù),T檢驗或方差分析的方法就不再適用了。

均值差異性的檢驗方法:Z檢驗和T檢驗綜述;

均值差異性檢驗:方差分析綜述;

對于分布形態(tài)未知的數(shù)據(jù),常用處理方法如下:

判斷數(shù)據(jù)序列的分布形態(tài)

以標準的正態(tài)分布形態(tài)為基準,檢驗數(shù)據(jù)序列與正態(tài)序列是否存在分布差異性,這里可以用單樣本的K-S檢驗,如果沒有顯著性差異,就認為該序列滿足正態(tài)分布。對于已經(jīng)滿足正態(tài)分布的序列,可以直接使用基于正態(tài)分布數(shù)據(jù)分析技術,比如T檢驗和方差分析。

轉化為正態(tài)分布序列

明確不是正態(tài)分布的序列,可以通過技術手段將序列轉化為接近正態(tài)分布的形態(tài)。在數(shù)據(jù)分析過程中,人們常常借助于秩分把非正態(tài)分布的數(shù)據(jù)轉化為接近正態(tài)分布的形態(tài);或者借助于Z分數(shù)和正態(tài)得分對數(shù)據(jù)序列進行預處理,然后借助正態(tài)分布差異性分析結束實現(xiàn)差異顯著性檢驗。

非參數(shù)檢驗方法

除了轉化為正態(tài)分布序列,還可直接使用非參數(shù)檢驗方法檢驗其分布差異性。實際上,所謂的非參數(shù)檢驗,其實質(zhì)就是借助于秩分或符號等技術對原始序列進行轉化,然后借用類似參數(shù)檢驗的手段開展數(shù)據(jù)分析。

非參數(shù)檢驗

前面說到,對于不符合正態(tài)分布的數(shù)據(jù),可以采用非參數(shù)檢驗的方法進行數(shù)據(jù)分析。在這里,不符合正態(tài)分布的數(shù)據(jù)可以分為兩種:1、不符合正態(tài)分布的高測度數(shù)據(jù)(定距數(shù)據(jù)和高測度的定序數(shù)據(jù));2、低測度數(shù)據(jù)(定類數(shù)據(jù)和低測度的定序數(shù)據(jù))。根據(jù)上面兩種數(shù)據(jù)類型,非參數(shù)檢驗主要包括下面三個方面的內(nèi)容:

檢驗樣本的分布形態(tài)

檢驗高測度數(shù)據(jù)序列的分布形態(tài),這是針對單變量的檢驗,其方法是檢驗數(shù)據(jù)序列的分布與標準分布形態(tài)的差異性。如果當前數(shù)據(jù)序列與標準分布形態(tài)沒有顯著性差異,則被認為當前序列滿足該分布形態(tài)。常見的針對單樣本數(shù)據(jù)判斷其分布形態(tài)的檢驗技術主要有:單樣本K-S檢驗、單樣本游程檢驗、二項分布檢驗、卡方檢驗。

分布形態(tài)差異顯著性檢驗

對于不符合正態(tài)分布的高測度數(shù)據(jù)序列,常見的差異顯著性檢驗方法有:1、兩獨立樣本的差異顯著性檢驗;2、多獨立樣本的差異顯著性檢驗;3、兩關聯(lián)樣本的差異顯著性檢驗;4、多關聯(lián)樣本的差異顯著性檢驗。

低測度數(shù)據(jù)的差異顯著性檢驗

對于不符合正態(tài)分布的定類數(shù)據(jù)或低測度定序數(shù)據(jù),其檢驗方法是利用交叉表技術分行分列計算交叉點的頻數(shù),利用卡方距離實施卡方檢驗,基于頻數(shù)和數(shù)據(jù)分布形態(tài)分析不同類別的數(shù)據(jù)是否存在顯著性差異。對于定類數(shù)據(jù)的對比檢驗,也叫獨立性檢驗。
分布形態(tài)差異顯著性檢驗

分布形態(tài)檢驗前面已經(jīng)介紹過,低測度數(shù)據(jù)的卡方檢驗將在下一篇文章中介紹。下面重點介紹對于非正態(tài)分布的高測度數(shù)據(jù)的分布形態(tài)差異顯著性檢驗方法。

兩關聯(lián)樣本的非參數(shù)檢驗

對不滿足正態(tài)分布的兩關聯(lián)樣本,如果分析其是否存在顯著性差異,不可以通過均值比較其差異性,通常是通過對比其分布形態(tài)比較其差異性。

數(shù)據(jù)序列的三個要求:1、樣本數(shù)據(jù)來源于同一總體的不同視角,或者是對相同樣本的多次測量;2、幾組樣本數(shù)據(jù)之間存在一一對應的關聯(lián)性;3、數(shù)據(jù)不滿足正態(tài)分布,或樣本的測量區(qū)分度不高。

兩關聯(lián)樣本非參數(shù)檢驗的方法

符號秩檢驗(Wilcoxon);基于符號檢驗其秩分分布的辦法,本質(zhì)上是一種檢驗平均秩的檢驗。即把樣本的兩次觀測值相減,記錄差值的符號和絕對值,并基于絕對值升序求秩分,比較兩組數(shù)據(jù)的正值秩分或負值秩分,從而確定其差異性。

符號檢驗(Sign);純粹通過符號實施數(shù)據(jù)檢驗的一種方法,即對樣本的兩次測量值直接相減求取符號,然后根據(jù)符號情況確定其差異性。由于符號檢驗僅僅通過正負號進行檢驗,適合于測度較低的非定距數(shù)據(jù),其檢驗準確度不夠高。

變化顯著性檢驗(McNemar);變化顯著性檢驗,是基于兩次測量差值情況的檢驗方法。即把樣本的兩次測量值相減,記錄差值,然后通過校驗公式處理后,求取卡方值。然后基于卡方檢驗決定其差異性。變化顯著性檢驗,僅適用于兩個變量均為二分數(shù)據(jù)的情況。

邊緣一致性檢驗(MarginalHomo);邊緣一致性檢驗,也是基于兩次測量差值情況的檢驗方法,主要通過把先后測量的兩組樣本值進行卡方檢驗?;诳ǚ綑z驗的方法判斷序列之間差異性。邊緣一致性檢驗,對變量的要求并不局限于二分數(shù)據(jù),還可以面向多值的分類變量。

多關聯(lián)樣本的非參數(shù)檢驗

當關聯(lián)樣本多于兩個時,需要用多關聯(lián)樣本的非參數(shù)檢驗。多關聯(lián)樣本的非參數(shù)檢驗方法主要有:

雙向等級方差分析(FriedMan);雙向等級方差分析是基于K個變量降序秩分的差異顯著性檢驗。這是基于秩分的一種方差分析方法,其基本思路是先對樣本的K個檢驗量進行降序求秩分,然后按照秩分做方差分析。雙向等級方差分析,比較適合于針對定距變量和高測度定序變量的數(shù)據(jù)分析。

肯德爾和諧系數(shù)檢驗(Kendall);肯德爾和諧系數(shù)檢驗,是基于肯德爾系數(shù)的差異顯著性檢驗技術,是基于秩分的平均等級分析。其基本思路是:先計算K個觀測量卡方值和肯德爾和諧系數(shù)W,然后判斷其觀測值的分布是否一致。在肯德爾和諧系數(shù)檢驗中,以肯德爾和諧系數(shù)W表示被檢驗變量的秩分之間的差異程度。協(xié)同系數(shù)W的取值在0~1,W越接近于1,表示變量的組件差異越大,反之,協(xié)同系數(shù)W越接近于0,表示變量的組間差異越小??系聽柡椭C系數(shù)檢驗,比較適合于定距變量與定序變量的處理。

二分變量檢驗(Cochran檢驗);二分變量檢驗,通過檢驗多個樣本量的CochranQ系數(shù),以便分析K各關聯(lián)樣本是否來自同一總體或者具有相同的分布。二分變量檢驗,主要面向二分變量的分析。

兩獨立樣本的非參數(shù)檢驗

對不滿足正態(tài)分布的兩獨立樣本,如需要分析其是否存在顯著性差異,同樣不可以通過均值比較其差異性,通常是通過分布形態(tài)或秩分比較其差異性。對于兩獨立樣本的非參數(shù)檢驗,對數(shù)據(jù)序列主要有以下要求:1、樣本數(shù)據(jù)來源于同一總體;2、樣本數(shù)據(jù)不滿足正態(tài)分布,或樣本的測量區(qū)分度不高;3、樣本數(shù)據(jù)可被另外的分組變量劃分為兩組;

兩獨立樣本非參數(shù)檢驗的方法

Wilcxon W等級和檢驗(Mann-Whitney U);Wilcxon W(威爾克科遜)等級與檢驗,也叫曼-惠特尼U檢驗,其基本思路是:把全部樣本混在一起求秩,然后根據(jù)兩組樣本的秩分情況判斷是否存在差異。曼-惠特尼U檢驗本質(zhì)上是一種通過比較兩個樣本秩分情況而獲得差異顯著性檢驗結論的一種檢驗技術。本算法適應于定距數(shù)據(jù)和定序數(shù)據(jù)。

摩西極端反映的差異檢驗(MosesExtreme reaction);摩西極端反映檢驗,即摩西極端反映的差異顯著性檢驗,即對全體樣本混合求秩分,根據(jù)兩端的極端秩分值確定其差異性。摩西極端反映檢驗是通過檢驗極端秩分值來反映的差異情況,來判斷兩組數(shù)據(jù)的分布是否存在差異。

兩獨立樣本的K-S檢驗(Kolmogorov-Smirnov Z);兩獨立樣本的K-S檢驗,是基于秩分累積頻數(shù)的檢驗方式。即對全體樣本混合求取秩分,然后針對秩分的累積頻數(shù)或累積頻率進行差異顯著性檢驗。本算法適應于定距數(shù)據(jù)和定序數(shù)據(jù)。如果預先把其中一組數(shù)據(jù)設置為標準分布形態(tài)的數(shù)據(jù),那么通過K-S分析待檢驗序列與標準分布的差異性水平,就能實現(xiàn)針對單樣本數(shù)據(jù)的分布形態(tài)的判定。

沃爾德-沃爾福威茨游程檢驗(Wald-Wolfwitz runs);沃爾德-沃爾夫威茨游程檢驗,是基于秩分排列的游程檢驗。即對全體樣本混合求取秩分,并基于兩組樣本在秩分序列中的位置構造游程。通過分析游程的大小和數(shù)量實現(xiàn)游程檢驗,從而判斷兩組樣本在混合序列中的排列是否為隨機的。若兩組樣本在混合序列中的排列是隨機的,則兩組樣本之間沒有顯著性差異。

多獨立樣本的非參數(shù)檢驗

多獨立樣本的差異顯著性檢驗既可以是針對同一總體的不同隨機抽樣,也可以源于不同總體,其目的是判斷多個樣本序列的差異是否顯著。在多獨立樣本的差異顯著性檢驗中,對符合正態(tài)分布的高測度數(shù)據(jù),通常使用方差分析的方法,而對不符合正態(tài)分布的數(shù)據(jù),或者方差非齊性時,則常常使用非參數(shù)檢驗的方法。


多獨立樣本非參數(shù)檢驗的方法

K-W平均秩檢驗(Kruskal-Wailis H);K-W平均秩檢驗是一種基于平均秩的差異顯著性檢驗。其基本思路是:先把待分析的觀測變量序列排序后求取秩分(或者把多個獨立樣本的數(shù)據(jù)混合后排序并求取秩分),然后基于各組秩分,進行類似方差分析的計算,分析秩分的均值差異是否顯著。K-W平均秩檢驗是基于秩分的一種方差分析技術,適合于觀測變量為定距數(shù)據(jù)或定序數(shù)據(jù)的場合。

中位數(shù)檢驗(Median);中位數(shù)檢驗是基于數(shù)據(jù)序列的中位數(shù)而設計的一種差異性的檢驗。其基本思路:先求取混合后數(shù)據(jù)的中位數(shù),然后利用卡方分布統(tǒng)計量來計算每個樣本組內(nèi)中位數(shù)兩側個案數(shù)的差異性。中位數(shù)檢驗適合于測度不高的定序變量。

分組分布檢驗(Jonckheere);分組分布檢驗是通過檢驗多個樣本組是否具有相同分布來判斷差異性的方法。樣本的分組根據(jù)分組變量定義。分組分布檢驗既可以檢驗定距變量,也可以檢驗定序變量。對于定序變量,本方法比K-W檢驗更為有效。

數(shù)據(jù)分析咨詢請掃描二維碼

若不方便掃碼,搜微信號:CDAshujufenxi

數(shù)據(jù)分析師資訊
更多

OK
客服在線
立即咨詢
客服在線
立即咨詢
') } function initGt() { var handler = function (captchaObj) { captchaObj.appendTo('#captcha'); captchaObj.onReady(function () { $("#wait").hide(); }).onSuccess(function(){ $('.getcheckcode').removeClass('dis'); $('.getcheckcode').trigger('click'); }); window.captchaObj = captchaObj; }; $('#captcha').show(); $.ajax({ url: "/login/gtstart?t=" + (new Date()).getTime(), // 加隨機數(shù)防止緩存 type: "get", dataType: "json", success: function (data) { $('#text').hide(); $('#wait').show(); // 調(diào)用 initGeetest 進行初始化 // 參數(shù)1:配置參數(shù) // 參數(shù)2:回調(diào),回調(diào)的第一個參數(shù)驗證碼對象,之后可以使用它調(diào)用相應的接口 initGeetest({ // 以下 4 個配置參數(shù)為必須,不能缺少 gt: data.gt, challenge: data.challenge, offline: !data.success, // 表示用戶后臺檢測極驗服務器是否宕機 new_captcha: data.new_captcha, // 用于宕機時表示是新驗證碼的宕機 product: "float", // 產(chǎn)品形式,包括:float,popup width: "280px", https: true // 更多配置參數(shù)說明請參見:http://docs.geetest.com/install/client/web-front/ }, handler); } }); } function codeCutdown() { if(_wait == 0){ //倒計時完成 $(".getcheckcode").removeClass('dis').html("重新獲取"); }else{ $(".getcheckcode").addClass('dis').html("重新獲取("+_wait+"s)"); _wait--; setTimeout(function () { codeCutdown(); },1000); } } function inputValidate(ele,telInput) { var oInput = ele; var inputVal = oInput.val(); var oType = ele.attr('data-type'); var oEtag = $('#etag').val(); var oErr = oInput.closest('.form_box').next('.err_txt'); var empTxt = '請輸入'+oInput.attr('placeholder')+'!'; var errTxt = '請輸入正確的'+oInput.attr('placeholder')+'!'; var pattern; if(inputVal==""){ if(!telInput){ errFun(oErr,empTxt); } return false; }else { switch (oType){ case 'login_mobile': pattern = /^1[3456789]\d{9}$/; if(inputVal.length==11) { $.ajax({ url: '/login/checkmobile', type: "post", dataType: "json", data: { mobile: inputVal, etag: oEtag, page_ur: window.location.href, page_referer: document.referrer }, success: function (data) { } }); } break; case 'login_yzm': pattern = /^\d{6}$/; break; } if(oType=='login_mobile'){ } if(!!validateFun(pattern,inputVal)){ errFun(oErr,'') if(telInput){ $('.getcheckcode').removeClass('dis'); } }else { if(!telInput) { errFun(oErr, errTxt); }else { $('.getcheckcode').addClass('dis'); } return false; } } return true; } function errFun(obj,msg) { obj.html(msg); if(msg==''){ $('.login_submit').removeClass('dis'); }else { $('.login_submit').addClass('dis'); } } function validateFun(pat,val) { return pat.test(val); }