混淆矩陣是ROC曲線繪制的基礎(chǔ)，同時(shí)它也是衡量分類型模型準(zhǔn)確度中最基本，最直觀，計(jì)算最簡(jiǎn)單的方法?；煜仃囀窃u(píng)判模型結(jié)果的指標(biāo)，屬于模型評(píng)估的一部分。此外，混淆矩陣多用于判斷分類器（Classifier）的優(yōu)劣，適用于分類型的數(shù)據(jù)模型，如分類樹(shù)（Classification Tree）、邏輯回歸（Logistic Regression）、線性判別分析（Linear Discriminant Analysis）等方法。

在分類型模型評(píng)判的指標(biāo)中，常見(jiàn)的方法有如下三種：

1、混淆矩陣（也稱誤差矩陣，Confusion Matrix）

2、ROC曲線

3、AUC面積

混淆矩陣的定義

混淆矩陣（Confusion Matrix），它的本質(zhì)遠(yuǎn)沒(méi)有它的名字聽(tīng)上去那么拉風(fēng)。矩陣，可以理解為就是一張表格，混淆矩陣其實(shí)就是一張表格而已。

以分類模型中最簡(jiǎn)單的二分類為例，對(duì)于這種問(wèn)題，我們的模型最終需要判斷樣本的結(jié)果是0還是1，或者說(shuō)是positive還是negative。

我們通過(guò)樣本的采集，能夠直接知道真實(shí)情況下，哪些數(shù)據(jù)結(jié)果是positive，哪些結(jié)果是negative。同時(shí)，我們通過(guò)用樣本數(shù)據(jù)跑出分類型模型的結(jié)果，也可以知道模型認(rèn)為這些數(shù)據(jù)哪些是positive，哪些是negative。

因此，我們就能得到這樣四個(gè)基礎(chǔ)指標(biāo)，我稱他們是一級(jí)指標(biāo)（最底層的）：

真實(shí)值是positive，模型認(rèn)為是positive的數(shù)量（True Positive=TP）

真實(shí)值是positive，模型認(rèn)為是negative的數(shù)量（False Negative=FN）：這就是統(tǒng)計(jì)學(xué)上的第二類錯(cuò)誤（Type II Error）

真實(shí)值是negative，模型認(rèn)為是positive的數(shù)量（False Positive=FP）：這就是統(tǒng)計(jì)學(xué)上的第一類錯(cuò)誤（Type I Error）

真實(shí)值是negative，模型認(rèn)為是negative的數(shù)量（True Negative=TN）