創(chuàng)建大數(shù)據(jù)項(xiàng)目的五大步驟

企業(yè)需要積極的提升他們的數(shù)據(jù)管理能力。這并非意味著他們應(yīng)該制定繁瑣的流程和監(jiān)督機(jī)制。明智的企業(yè)會(huì)配合他們的數(shù)據(jù)活動(dòng)的生命周期制定靈活的流程和功能：根據(jù)業(yè)務(wù)需求啟動(dòng)更輕更嚴(yán)格、更強(qiáng)大的功能，并根據(jù)需求的增加來(lái)提升質(zhì)量或精度。
    一些企業(yè)正在利用新興技術(shù)來(lái)應(yīng)對(duì)新的數(shù)據(jù)源，但大多數(shù)企業(yè)仍然面臨著需要努力管理好他們已經(jīng)掌握或者應(yīng)當(dāng)掌握的數(shù)據(jù)信息的困境，而當(dāng)他們?cè)噲D部署大數(shù)據(jù)功能時(shí)，發(fā)現(xiàn)自己還需要面對(duì)和處理新的以及當(dāng)下實(shí)時(shí)的數(shù)據(jù)。

    為了能夠?qū)崿F(xiàn)持久成功的大數(shù)據(jù)項(xiàng)目，企業(yè)需要把重點(diǎn)放在如下五個(gè)主要領(lǐng)域。
    1、確立明確的角色分工和職責(zé)范圍。
    對(duì)于您企業(yè)環(huán)境中的所有的數(shù)據(jù)信息，您需要對(duì)于這些數(shù)據(jù)信息所涉及的關(guān)鍵利益相關(guān)者、決策者有一個(gè)清晰的了解和把控。當(dāng)數(shù)據(jù)信息在企業(yè)的系統(tǒng)傳輸過(guò)程中及其整個(gè)生命周期中，角色分工將發(fā)生變化，而企業(yè)需要對(duì)這些變化有一個(gè)很好的理解。當(dāng)企業(yè)開始部署大數(shù)據(jù)項(xiàng)目之后，務(wù)必要明確識(shí)別相關(guān)數(shù)據(jù)的關(guān)鍵利益相關(guān)者，并做好這些數(shù)據(jù)信息的完善和迭代工作。
    2、加強(qiáng)企業(yè)的數(shù)據(jù)治理和數(shù)據(jù)管理功能。
    確保您企業(yè)的進(jìn)程足夠強(qiáng)大，能夠滿足和支持大數(shù)據(jù)用戶和大數(shù)據(jù)技術(shù)的需求。進(jìn)程可以是靈活的，并應(yīng)充分考慮到業(yè)務(wù)部門和事務(wù)部門的需求，這些部門均伴有不同程度的嚴(yán)謹(jǐn)性和監(jiān)督要求。
    確保您企業(yè)的參考信息架構(gòu)已經(jīng)更新到包括大數(shù)據(jù)。這樣做會(huì)給未來(lái)的項(xiàng)目打好最好的使用大數(shù)據(jù)技術(shù)和適當(dāng)?shù)男畔⒐芾砟芰Φ幕A(chǔ)。
    確保您企業(yè)的元數(shù)據(jù)管理功能足夠強(qiáng)大，能夠包括并關(guān)聯(lián)所有的基本元數(shù)據(jù)組件。隨著時(shí)間的推移，進(jìn)行有序的分類，滿足業(yè)務(wù)規(guī)范。
    一旦您開始在您企業(yè)的生產(chǎn)部門推廣您的解決方案時(shí)，您會(huì)希望他們長(zhǎng)期持續(xù)的使用該解決方案，所以對(duì)架構(gòu)功能的定義并監(jiān)督其發(fā)揮的作用是至關(guān)重要的。確保您企業(yè)的治理流程包括IT控制的角色，以幫助企業(yè)的利益相關(guān)者們進(jìn)行引導(dǎo)項(xiàng)目，以最佳地利用這些數(shù)據(jù)信息。其還應(yīng)該包括您企業(yè)的安全和法務(wù)團(tuán)隊(duì)。根據(jù)我們的經(jīng)驗(yàn)，使用現(xiàn)有的監(jiān)督機(jī)制能夠達(dá)到最佳的工作狀態(tài)，只要企業(yè)實(shí)施了大數(shù)據(jù)應(yīng)用，并專注于快速在進(jìn)程中處理應(yīng)用程序，而不是阻礙進(jìn)程的通過(guò)。
    3、了解環(huán)境中的數(shù)據(jù)的目的和要求的精度水平，并相應(yīng)地調(diào)整您企業(yè)的期望值和流程。
    無(wú)論其是一個(gè)POC，或一個(gè)已經(jīng)進(jìn)入主流業(yè)務(wù)流程的項(xiàng)目，請(qǐng)務(wù)必確保您對(duì)于期望利用這些數(shù)據(jù)來(lái)執(zhí)行什么任務(wù)，及其質(zhì)量和精度處于何種級(jí)別有一個(gè)非常清晰的了解。這種方法將使得企業(yè)的項(xiàng)目能夠?qū)ふ业秸_的數(shù)據(jù)來(lái)源和利益相關(guān)者，以更好地評(píng)估這些數(shù)據(jù)信息的價(jià)值和影響，進(jìn)而讓您決定如何最好地管理這些數(shù)據(jù)信息。更高的質(zhì)量和精度則要求更強(qiáng)大的數(shù)據(jù)管理和監(jiān)督能力。
    隨著您企業(yè)大數(shù)據(jù)項(xiàng)目的日趨成熟，考慮建立一套按照數(shù)據(jù)質(zhì)量或精確度分類的辦法，這將使得數(shù)據(jù)用戶得以更好的了解他們所使用的是什么，并相應(yīng)地調(diào)整自己的期望值。例如，您可以使用白色、藍(lán)色或金色來(lái)分別代表原始數(shù)據(jù)、清理過(guò)的數(shù)據(jù)，經(jīng)過(guò)驗(yàn)證可以有針對(duì)性的支持分析和使用的數(shù)據(jù)。有些企業(yè)甚至進(jìn)一步完善了這一分類方法：將數(shù)據(jù)從1到5進(jìn)行分類，其中1是原始數(shù)據(jù)，而5是便于理解，經(jīng)過(guò)整理的、有組織的數(shù)據(jù)。
    4、將對(duì)非結(jié)構(gòu)化的內(nèi)容的管理納入到您企業(yè)的數(shù)據(jù)管理能力。
    非結(jié)構(gòu)化數(shù)據(jù)一直是企業(yè)業(yè)務(wù)運(yùn)營(yíng)的一部分，但既然現(xiàn)在我們已經(jīng)有了更好的技術(shù)來(lái)探索，分析和這些非結(jié)構(gòu)化的內(nèi)容，進(jìn)而幫助改善業(yè)務(wù)流程和工業(yè)務(wù)洞察，所以我們最終將其正式納入我們的數(shù)據(jù)管理是非常重要的。大多數(shù)企業(yè)目前都被困在了這一步驟。
    數(shù)據(jù)庫(kù)中基本的、非結(jié)構(gòu)化的數(shù)據(jù)是以評(píng)論的形式或者自由的形式存在的，其至少是數(shù)據(jù)庫(kù)的一部分，應(yīng)該被納入到數(shù)據(jù)管理。但挖掘這些數(shù)據(jù)信息則是非常難的。
    數(shù)字?jǐn)?shù)據(jù)存儲(chǔ)在傳統(tǒng)的結(jié)構(gòu)化數(shù)據(jù)庫(kù)和業(yè)務(wù)流程外，很少有許多的治理范圍分組和數(shù)據(jù)管理的實(shí)現(xiàn)，除了當(dāng)其被看作是一個(gè)技術(shù)問(wèn)題時(shí)。一般來(lái)說(shuō)，除了嚴(yán)格遵守相關(guān)的安全政策，今天的企業(yè)尚未對(duì)其進(jìn)行真正有效的管理。當(dāng)您的企業(yè)開始大跨步實(shí)現(xiàn)了大數(shù)據(jù)項(xiàng)目之后，您會(huì)發(fā)現(xiàn)這一類型的數(shù)據(jù)信息迅速進(jìn)入了您需要管理的范疇，其輸出會(huì)影響您企業(yè)的商業(yè)智能解決方案或者甚至是您企業(yè)的業(yè)務(wù)活動(dòng)。積極的考慮將這些數(shù)據(jù)納入到您企業(yè)的數(shù)據(jù)管理功能的范圍，并明確企業(yè)的所有權(quán)，并記錄好這些數(shù)據(jù)信息的諸如如何使用、信息來(lái)源等等資料。
    不要采取“容易的輕松路線”，單純依靠大數(shù)據(jù)技術(shù)是您企業(yè)唯一正式的非結(jié)構(gòu)化數(shù)據(jù)管理的過(guò)程。隨著時(shí)間的推移，企業(yè)將收集越來(lái)越多的非結(jié)構(gòu)化數(shù)據(jù)，請(qǐng)務(wù)必搞清楚哪些數(shù)據(jù)是好的，哪些是壞的，他們分別來(lái)自何處，以及其使用是否一致，將變得越來(lái)越重要，甚至在其生命周期使用這個(gè)數(shù)據(jù)都是至關(guān)重要的。
    要保持這種清晰，您可以使用大數(shù)據(jù)和其他工具，以了解您企業(yè)所收集的數(shù)據(jù)信息，確定其有怎樣的價(jià)值，需要怎樣的管理，這是至關(guān)重要的。大多數(shù)進(jìn)入您企業(yè)的大數(shù)據(jù)系統(tǒng)的非結(jié)構(gòu)化數(shù)據(jù)都已經(jīng)經(jīng)過(guò)一些監(jiān)控了，但通常是作為一個(gè)BLOB（binarylargeobject）二進(jìn)制大對(duì)象和非結(jié)構(gòu)化的形式進(jìn)行的。隨著您的企業(yè)不斷的在您的業(yè)務(wù)流程中“發(fā)掘”出這一類型的數(shù)據(jù)，其變得更加精確和有價(jià)值。其可能還具有額外的特點(diǎn)，符合安全，隱私或法律和法規(guī)的元素要求。最終，這些數(shù)據(jù)塊可以成為新的數(shù)據(jù)元素或添加到現(xiàn)有的數(shù)據(jù)，但您必須有元數(shù)據(jù)對(duì)其進(jìn)行描述和管理，以便盡可能最有效地利用這些數(shù)據(jù)。
    5、正式在生產(chǎn)環(huán)境運(yùn)行之前進(jìn)行測(cè)試。
    如果您的企業(yè)做的是一次性的分析或完整的一次性的試點(diǎn)，這可能并不適用于您的企業(yè)，但對(duì)大多數(shù)企業(yè)來(lái)說(shuō)，他們最初的大數(shù)據(jù)工作將迅速發(fā)展，他們找到一個(gè)可持續(xù)利用他們已經(jīng)挖掘出的極具價(jià)值的信息的需求。這意味著需要在您的沙箱環(huán)境中進(jìn)行測(cè)試，然后才正式的在您的生產(chǎn)環(huán)境運(yùn)。