SPSS數(shù)據(jù)準(zhǔn)備：數(shù)據(jù)驗證

一、數(shù)據(jù)準(zhǔn)備：

   隨著計算系統(tǒng)能力的提高，對信息的需要成比例增長，導(dǎo)致收集的數(shù)據(jù)越來越多—出現(xiàn)更多的個案、更多的變量以及更多的數(shù)據(jù)輸入錯誤。這些錯誤會損害作為數(shù)據(jù)倉儲最終目標(biāo)的預(yù)測模型的預(yù)測，因此您需要使數(shù)據(jù)保持“干凈”。不過，數(shù)據(jù)倉儲中的數(shù)據(jù)量的增長已經(jīng)大大超出了手動驗證個案的能力，而這對于實現(xiàn)自動化的數(shù)據(jù)驗證過程來說十分關(guān)鍵。

“數(shù)據(jù)準(zhǔn)備”附加模塊允許您標(biāo)識活動數(shù)據(jù)集中的異常個案和無效個案、變量和數(shù)據(jù)值，并準(zhǔn)備建模數(shù)據(jù)。

1、元數(shù)據(jù)準(zhǔn)備。復(fù)查數(shù)據(jù)文件中的變量并確定其有效值、標(biāo)簽和測量級別。標(biāo)識不太可能但經(jīng)常存在編碼錯誤的變量值的組合。根據(jù)這些信息定義驗證規(guī)則。這是一項極為耗時的任務(wù)，不過，如果您需要定期驗證具有類似屬性的數(shù)據(jù)文件，則完成這項任務(wù)是十分值得的。

2、數(shù)據(jù)驗證。運(yùn)行基本檢查并針對定義的驗證規(guī)則進(jìn)行檢查，標(biāo)識無效個案、變量和數(shù)據(jù)值。找到無效數(shù)據(jù)時，調(diào)查并更正原因。這可能需要另一個通過元數(shù)據(jù)準(zhǔn)備的步驟。

3、模型準(zhǔn)備。使用自動數(shù)據(jù)準(zhǔn)備獲得將改進(jìn)模型構(gòu)建的原始字段的轉(zhuǎn)換。標(biāo)識可能導(dǎo)致許多預(yù)測模型出現(xiàn)問題的潛在統(tǒng)計離群值。有些離群值是尚未標(biāo)識的無效變量值導(dǎo)致的結(jié)果。這可能需要另一個通過元數(shù)據(jù)準(zhǔn)備的步驟。

二、驗證規(guī)則

1、規(guī)則用于確定個案是否有效。有兩種類型的驗證規(guī)則：

1.1、單變量規(guī)則。單變量規(guī)則包含一組應(yīng)用于單個變量的固定檢查，例如范圍外值的檢查。對于單變量規(guī)則，有效值可以表示為一個值范圍，也可以表示為一個可接受值列表。

1.2、交叉變量規(guī)則。交叉變量規(guī)則是用戶定義的規(guī)則，可以應(yīng)用于單個變量，也可以應(yīng)用于變量組合。交叉變量規(guī)則由標(biāo)記無效值的邏輯表達(dá)式定義。

2、載入預(yù)定義驗證規(guī)則（數(shù)據(jù)-驗證-加載預(yù)定義驗證規(guī)則）

通過從安裝中所包含的外部數(shù)據(jù)文件載入預(yù)定義規(guī)則可以快速獲取一組可供使用的驗

證規(guī)則。

   3、定義驗證規(guī)則（數(shù)據(jù)-驗證-定義規(guī)則）

“定義驗證規(guī)則”對話框允許您創(chuàng)建和查看單變量和交叉變量驗證規(guī)則。

三、驗證數(shù)據(jù)（數(shù)據(jù)-驗證-驗證數(shù)據(jù)）

“驗證數(shù)據(jù)”對話框允許您標(biāo)識活動數(shù)據(jù)集中可疑的和無效的個案、變量和數(shù)據(jù)值。

1、示例。數(shù)據(jù)分析人員每個月必須向客戶提供客戶滿意度報告。她每個月接收到的數(shù)據(jù)需要進(jìn)行質(zhì)量檢查，看是否存在不完整的客戶標(biāo)識、超出范圍的變量值以及經(jīng)常錯誤輸入的變量值組合?！膀炞C數(shù)據(jù)”對話框允許分析人員指定唯一標(biāo)識客戶的變量，為有效變量范圍定義單變量規(guī)則，并定義交叉變量規(guī)則以找出不可能的組合。該過程返回問題個案和變量的報告。此外，每個月的這些數(shù)據(jù)都具有相同的數(shù)據(jù)元素，因此分析人員可以將規(guī)則應(yīng)用于下個月的新數(shù)據(jù)文件。

2、統(tǒng)計量。該過程生成多項檢查失敗的變量、個案和數(shù)據(jù)值的列表，違反單變量和交叉變量規(guī)則的次數(shù)計數(shù)，以及分析變量的簡單描述摘要。

3、權(quán)重。該過程忽略權(quán)重變量規(guī)范，而是像對待任何其他分析變量一樣對待權(quán)重變量。

4、分析變量。如果在“變量”選項卡上選擇了任何分析變量，則可選擇以下任意有效性檢查。復(fù)選框允許您打開或關(guān)閉檢查。

4.1、缺失值的最大百分比。報告缺失值百分比大于指定值的分析變量。指定的值必須是一個小于等于100的正數(shù)。

4.2、單個類別中個案所占的最大百分比。如果任何分析變量是分類變量，則此選項報告表示單個非缺失類別的個案的百分比大于指定值的分類分析變量。指定的值必須是一個小于等于100的正數(shù)。百分比基于具有非缺失變量值的個案。

4.3、計數(shù)為1的類別的最大百分比。如果任何分析變量是分類變量，則此選項報告僅包含一個個案的變量類別的百分比大于指定值的分類分析變量。指定的值必須是一個小于等于100的正數(shù)。

4.4、最小變異系數(shù)。如果任何分析變量是刻度變量，則此選項報告變異系數(shù)的絕對值小于指定值的刻度分析變量。此選項僅適用于均值非零的變量。指定的值必須是一個非負(fù)數(shù)。指定0會關(guān)閉變異系數(shù)檢查。

4.5、最小標(biāo)準(zhǔn)差。如果任何分析變量是刻度變量，則此選項報告標(biāo)準(zhǔn)差小于指定值的刻度分析變量。指定的值必須是一個非負(fù)數(shù)。指定0會關(guān)閉標(biāo)準(zhǔn)差檢查。

5、摘要變量。這些是可以保存的單個變量。選中一個框可保存該變量。為這些變量提供了默認(rèn)名稱；您可以進(jìn)行編輯。

5.1、空個案指示器?？諅€案會分配值1。所有其他個案都具有代碼0。變量的值反映在“基本檢查”選項卡上指定的范圍。

5.2、雙ID組。具有相同個案標(biāo)識的個案（具有不完整標(biāo)識的個案除外）會分配有相同的組號。具有唯一標(biāo)識或不完整標(biāo)識的個案都具有代碼0。

5.3、ID指示器不完整。具有空的或不完整的個案標(biāo)識的個案將分配值1。所有其他個案的代碼都為0。