2018-11-23
閱讀量:
897
評估模型的常用指標
基尼系數(shù)
基尼系數(shù)有時用于分類問題。基尼系數(shù)可以從AUC ROC數(shù)得出?;嵯禂?shù)只是ROC曲線與診斷線之間的面積與上述三角形的面積之比。以下是使用的公式:
基尼= 2 * AUC - 1
基尼系數(shù)高于60%是一個很好的模型。對于手頭的情況,我們得到基尼系數(shù)為92.7%。
協(xié)調(diào) - 不和諧比率
對于任何分類預(yù)測問題,這也是最重要的指標之一。要理解這一點,我們假設(shè)我們有3名學生今年有可能通過。以下是我們的預(yù)測:
A - 0.9
B - 0.5
C - 0.3
現(xiàn)在想象一下。如果我們要從這三個學生那里取兩對,我們會有多少對?我們將有3對:AB,BC,CA?,F(xiàn)在,在年底結(jié)束后,我們看到A和C在今年通過而B失敗了。不,我們選擇所有配對,我們將找到一個響應(yīng)者和其他非響應(yīng)者。我們有多少這樣的配對?
我們有兩對AB和BC?,F(xiàn)在對于2對中的每一對,一致對是響應(yīng)者的概率高于無應(yīng)答者的概率。而不和諧的對是反之亦然的。如果兩個概率相等,我們說它是平局。讓我們看看在我們的案例中會發(fā)生什么:
AB - 一致
BC - 不和諧
因此,在此示例中,我們有50%的一致情況。超過60%的一致比率被認為是一個很好的模型。在決定要定位的客戶數(shù)量時,通常不使用此度量標準。它主要用于訪問模型的預(yù)測能力。對于像KS / Lift圖表再次采用多少目標的決定。






評論(0)


暫無數(shù)據(jù)
推薦帖子
0條評論
0條評論
0條評論