物聯(lián)網(wǎng)中的大數(shù)據(jù)_數(shù)據(jù)分析師培訓(xùn)

中國(guó)互聯(lián)網(wǎng)絡(luò)信息中心袁博

    近年來，隨著互聯(lián)網(wǎng)的發(fā)展，大數(shù)據(jù)逐漸成為產(chǎn)業(yè)界和學(xué)術(shù)界一致關(guān)注的熱點(diǎn)技術(shù)。從大數(shù)據(jù)的定義來看，指的是所涉及的數(shù)據(jù)量規(guī)模巨大到無法通過目前的主流軟件工具在合理的時(shí)間內(nèi)達(dá)到擷取、管理、處理并基于此提供有用信息的目的。大數(shù)據(jù)具有4V特點(diǎn)：Volume（大量）、Velocity（高速）、Variety（多樣）、Veracity（真實(shí)性）。

    相比傳統(tǒng)的互聯(lián)網(wǎng)，在物聯(lián)網(wǎng)中，對(duì)大數(shù)據(jù)技術(shù)具有更高的要求，主要體現(xiàn)在以下幾方面：

    （1）物聯(lián)網(wǎng)中的數(shù)據(jù)量更大：物聯(lián)網(wǎng)的最主要特征之一是節(jié)點(diǎn)的海量性，除了人和服務(wù)器之外，物品、設(shè)備、傳感網(wǎng)等都是物聯(lián)網(wǎng)的組成節(jié)點(diǎn)，其數(shù)量規(guī)模遠(yuǎn)大于互聯(lián)網(wǎng)；同時(shí)，物聯(lián)網(wǎng)節(jié)點(diǎn)的數(shù)據(jù)生成頻率遠(yuǎn)高于互聯(lián)網(wǎng)，如傳感節(jié)點(diǎn)多數(shù)處于全時(shí)工作狀態(tài)，數(shù)據(jù)流源源不斷。

    （2）物聯(lián)網(wǎng)中的數(shù)據(jù)速率更高：一方面，物聯(lián)網(wǎng)中數(shù)據(jù)海量性必然要求骨干網(wǎng)匯聚更多的數(shù)據(jù)，數(shù)據(jù)的傳輸速率要求更高；另一方面，由于物聯(lián)網(wǎng)與真實(shí)物理世界直接關(guān)聯(lián)，很多情況下需要實(shí)時(shí)訪問、控制相應(yīng)的節(jié)點(diǎn)和設(shè)備，因此需要高數(shù)據(jù)傳輸速率來支持相應(yīng)的實(shí)時(shí)性。

    （3）物聯(lián)網(wǎng)中的數(shù)據(jù)更加多樣化：物聯(lián)網(wǎng)涉及的應(yīng)用范圍廣泛，從智慧城市、智慧交通、智慧物流、商品溯源，到智能家居、智慧醫(yī)療、安防監(jiān)控等，無一不是物聯(lián)網(wǎng)應(yīng)用范疇；在不同領(lǐng)域、不同行業(yè)，需要面對(duì)不同類型、不同格式的應(yīng)用數(shù)據(jù)，因此物聯(lián)網(wǎng)中數(shù)據(jù)多樣性更為突出。

    （4）物聯(lián)網(wǎng)對(duì)數(shù)據(jù)真實(shí)性的要求更高：物聯(lián)網(wǎng)是真實(shí)物理世界與虛擬信息世界的結(jié)合，其對(duì)數(shù)據(jù)的處理以及基于此進(jìn)行的決策將直接影響物理世界，物聯(lián)網(wǎng)中數(shù)據(jù)的真實(shí)性顯得尤為重要。

    綜合以上分析可以看出，大數(shù)據(jù)是物聯(lián)網(wǎng)中必須的關(guān)鍵技術(shù)，二者的結(jié)合能夠?yàn)槲锫?lián)網(wǎng)系統(tǒng)和應(yīng)用的發(fā)展帶來更好的技術(shù)基礎(chǔ)。以智能安防應(yīng)用為例，智能安防行業(yè)是典型的大數(shù)據(jù)與物聯(lián)網(wǎng)相結(jié)合的應(yīng)用場(chǎng)景，物聯(lián)網(wǎng)技術(shù)的普及應(yīng)用使安防從過去簡(jiǎn)單的安全防護(hù)系統(tǒng)向城市綜合化體系演變，涵蓋眾多的領(lǐng)域，特別是針對(duì)重要場(chǎng)所，如機(jī)場(chǎng)、銀行、地鐵、車站、水電氣廠、道路橋梁等場(chǎng)所，引入物聯(lián)網(wǎng)技術(shù)后可以通過無線移動(dòng)、跟蹤定位等手段建立全方位的立體防護(hù)。智能安防行業(yè)需求已從大面積監(jiān)控布點(diǎn)轉(zhuǎn)變?yōu)樽⒅匾曨l智能預(yù)警、分析和實(shí)戰(zhàn)，迫切需要利用大數(shù)據(jù)技術(shù)從海量的視頻數(shù)據(jù)中進(jìn)行規(guī)律預(yù)測(cè)、情境分析、串并偵查、時(shí)空分析等。

    由此可見，智能化安防技術(shù)的主要內(nèi)涵是其相關(guān)內(nèi)容和服務(wù)的信息化，圖像、視頻的傳輸和存儲(chǔ)，數(shù)據(jù)的存儲(chǔ)和處理等等。在智能安防領(lǐng)域，數(shù)據(jù)的產(chǎn)生、存儲(chǔ)和處理是智能安防解決方案的基礎(chǔ)，只有采集足夠有價(jià)值的安防信息，通過大數(shù)據(jù)分析以及綜合研判模型，才能制定智能安防決策。同時(shí)，大數(shù)據(jù)處理能夠更好地指出智能安防解決方案中存在的問題，從而有針對(duì)性地提升智能安防產(chǎn)品服務(wù)質(zhì)量。

    如何更好地將大數(shù)據(jù)技術(shù)應(yīng)用于物聯(lián)網(wǎng)應(yīng)用中，筆者認(rèn)為主要需要從以下幾方面開展深入探索：

    （1）解決大數(shù)據(jù)的獲取和管理問題：基于物聯(lián)網(wǎng)標(biāo)識(shí)技術(shù)，對(duì)設(shè)備和數(shù)據(jù)進(jìn)行統(tǒng)一標(biāo)識(shí)和管理（智能安防領(lǐng)域如監(jiān)控信號(hào)、圖像、視頻等），從設(shè)備層面解決數(shù)據(jù)稀疏性問題，從而為大數(shù)據(jù)的分析和處理奠定底層基礎(chǔ)。

    （2）解決大數(shù)據(jù)的處理方法問題：采用分類處理技術(shù)，基于處理需求對(duì)數(shù)據(jù)進(jìn)行分類，對(duì)實(shí)時(shí)數(shù)據(jù)進(jìn)行流處理，對(duì)離線數(shù)據(jù)進(jìn)行批處理，從而在保證處理效率的同時(shí)提高數(shù)據(jù)分析的有效性。

    （3）解決大數(shù)據(jù)的應(yīng)用模式問題：針對(duì)物聯(lián)網(wǎng)應(yīng)用在不同行業(yè)的特點(diǎn)，對(duì)大數(shù)據(jù)背景下不同行業(yè)之物聯(lián)網(wǎng)業(yè)務(wù)的新需求進(jìn)行探索，從而使大數(shù)據(jù)技術(shù)能夠?qū)χ悄馨卜赖葢?yīng)用產(chǎn)生實(shí)際的價(jià)值。

    綜上所述，物聯(lián)網(wǎng)與大數(shù)據(jù)都是當(dāng)前業(yè)界關(guān)注的熱門技術(shù)，{CDA數(shù)據(jù)分析師培訓(xùn)}如何使二者有機(jī)融合在一起，為應(yīng)用提供網(wǎng)絡(luò)、數(shù)據(jù)兩方面的基礎(chǔ)服務(wù)，是物聯(lián)網(wǎng)和大數(shù)據(jù)相關(guān)應(yīng)用發(fā)展的關(guān)鍵所在。