大數(shù)據(jù)：千秋萬載 一統(tǒng)江湖

“大數(shù)據(jù)”嚴然已經(jīng)成為當(dāng)下最為火熱的IT行業(yè)的詞匯之一，它伴隨著“云時代”的到來而顯得更加重要。

從定義上講，大數(shù)據(jù)（bigdata），或稱巨量資料，指的是所涉及的資料數(shù)據(jù)規(guī)模巨大到無法透過目前主流軟件工具，在合理時間內(nèi)達到擷取、管理、處理、并整理成為幫助企業(yè)經(jīng)營決策更積極目的的資訊。大數(shù)據(jù)（Bigdata）通常用來形容一個公司創(chuàng)造的大量非結(jié)構(gòu)化或半結(jié)構(gòu)化數(shù)據(jù)，這些數(shù)據(jù)在下載到關(guān)系型數(shù)據(jù)庫用于分析時會花費過多時間和金錢。大數(shù)據(jù)分析常常和云計算聯(lián)系到一起，因為實時的大型數(shù)據(jù)集分析需要像MapReduce一樣的框架來向數(shù)十、數(shù)百或甚至數(shù)千的電腦分配工作。大數(shù)據(jù)分析相比于傳統(tǒng)的數(shù)據(jù)倉庫應(yīng)用，具有數(shù)據(jù)量大、查詢分析復(fù)雜等特點。因此，大數(shù)據(jù)處理需要特殊的技術(shù)，以有效地處理大量的容忍經(jīng)過時間內(nèi)的數(shù)據(jù)。

我們已經(jīng)跟隨“云時代”來到了“大數(shù)據(jù)時代”。在大數(shù)據(jù)時代，時間同步技術(shù)必定將是整個大數(shù)據(jù)處理系統(tǒng)的重要支撐和保障。時間同步技術(shù)使數(shù)據(jù)產(chǎn)生與處理系統(tǒng)的所有節(jié)點具有全局的、統(tǒng)一的標準時間，從而使系統(tǒng)中的所有各種消息、事件、節(jié)點、數(shù)據(jù)等具備正確的邏輯性、協(xié)調(diào)性以及可追溯性。

大數(shù)據(jù)產(chǎn)生與處理系統(tǒng)是各種計算設(shè)備集群的，計算設(shè)備將統(tǒng)一、同步的標準時間用于記錄各種事件發(fā)生時序，如E-MAIL信息、文件創(chuàng)建和訪問時間、數(shù)據(jù)庫處理時間等。大數(shù)據(jù)系統(tǒng)內(nèi)不同計算設(shè)備之間控制、計算、處理、應(yīng)用等數(shù)據(jù)或操作都具有時序性，若計算機時間不同步，這些應(yīng)用或操作將無法正常進行。大數(shù)據(jù)系統(tǒng)是對時間敏感的計算處理系統(tǒng)，時間同步是大數(shù)據(jù)能夠得到正確處理的基礎(chǔ)保障，是大數(shù)據(jù)得以發(fā)揮作用的技術(shù)支撐。大數(shù)據(jù)時代，整個處理計算系統(tǒng)內(nèi)的大數(shù)據(jù)通信都是通過網(wǎng)絡(luò)進行。時間同步也是如此，利用大數(shù)據(jù)的互聯(lián)網(wǎng)絡(luò)傳送標準時間信息，實現(xiàn)大數(shù)據(jù)系統(tǒng)內(nèi)時間同步。網(wǎng)絡(luò)時間同步協(xié)議（NTP）是時間同步的技術(shù)基礎(chǔ)。網(wǎng)絡(luò)時間協(xié)議由一系列注釋請求文件定義，當(dāng)前使用的有三種：日期協(xié)議（RFC-867）、時刻協(xié)議（RFC-868）和網(wǎng)絡(luò)時間協(xié)議（RFC-1305）。網(wǎng)絡(luò)時間協(xié)議NTP（NetworkTimeProtocol）是當(dāng)前最復(fù)雜最優(yōu)良的網(wǎng)絡(luò)時間協(xié)議。大型計算機和工作站的操作系統(tǒng)中常包含NTP軟件，客戶軟件可作為后臺任務(wù)連續(xù)運行，從時間服務(wù)器得到時間信息，它也可以設(shè)置去查詢多個服務(wù)器，獲得多個時間結(jié)果，然后進行平均，提高同步精度。