大數(shù)據(jù)時(shí)代，你的網(wǎng)絡(luò)能夠“勝任”嗎

大數(shù)據(jù)可以帶來很大的優(yōu)勢(shì)，但是你的網(wǎng)絡(luò)能夠“勝任”嗎?下面讓我們來看看網(wǎng)絡(luò)面臨的一些挑戰(zhàn)和注意事項(xiàng)。

想象這樣一個(gè)情況，在第一集播出之前，廣播網(wǎng)絡(luò)就能夠準(zhǔn)確地預(yù)測(cè)電視連續(xù)劇的播出情況。我們可以通過工具來分析家電中的傳感器的數(shù)據(jù)，來幫助居民降低功耗，或者利用工具通過實(shí)時(shí)追蹤數(shù)據(jù)包來優(yōu)化傳播路線和流量消耗。

聽起來太超前?其實(shí)，我們已經(jīng)差不多實(shí)現(xiàn)了。

移動(dòng)應(yīng)用程序、全I(xiàn)P無線網(wǎng)絡(luò)、在線商務(wù)、銷售點(diǎn)系統(tǒng)、社交媒體以及傳感器的崛起產(chǎn)生了大量數(shù)據(jù)，如果我們能夠正確地分析這些數(shù)據(jù)，我們將能夠挖掘出關(guān)鍵情報(bào)來促使業(yè)務(wù)決策。大部分這些數(shù)據(jù)是在“空中”收集的，如果迅速采取行動(dòng)，這可以為企業(yè)提供獨(dú)特的競(jìng)爭(zhēng)優(yōu)勢(shì)，以及解決問題。

但這些數(shù)據(jù)量非常巨大，并且速度正在不斷提升，這也對(duì)網(wǎng)絡(luò)提出了更高的要求。網(wǎng)絡(luò)需要負(fù)責(zé)處理數(shù)據(jù)，在大數(shù)據(jù)勉強(qiáng)，網(wǎng)絡(luò)管理員和首席信息官面臨著全新的挑戰(zhàn)。

改變數(shù)據(jù)流

大數(shù)據(jù)正在不斷變化，數(shù)據(jù)量已經(jīng)超越了TB級(jí)到PB級(jí)，數(shù)據(jù)關(guān)系已經(jīng)從簡(jiǎn)單和已知的發(fā)展為復(fù)雜和未知的;數(shù)據(jù)模型已經(jīng)從固定模式類型轉(zhuǎn)變?yōu)椴还潭Ｊ?數(shù)據(jù)來源已經(jīng)從簡(jiǎn)單的數(shù)據(jù)錄入轉(zhuǎn)變?yōu)楦鞣N來源，包括手持式設(shè)備和機(jī)器傳感器。大數(shù)據(jù)包含各種各樣的形式，例如，通話錄音與信用卡交易信息有所不同。與傳統(tǒng)應(yīng)用程序中的結(jié)構(gòu)化數(shù)據(jù)不同的是，大數(shù)據(jù)包含半結(jié)構(gòu)化或非結(jié)構(gòu)化數(shù)據(jù)，例如文本、音頻、視頻、點(diǎn)擊流、日志文件，以及測(cè)量和傳輸?shù)乩砑碍h(huán)境信息的傳感器的輸出數(shù)據(jù)。

大數(shù)據(jù)：網(wǎng)絡(luò)面臨的大挑戰(zhàn)

大數(shù)據(jù)環(huán)境改變了數(shù)據(jù)在網(wǎng)絡(luò)中流動(dòng)的方式，大數(shù)據(jù)產(chǎn)生了更多的東-西或者服務(wù)器到服務(wù)器流量，而不是南-北或服務(wù)器到客戶端流量，對(duì)于每個(gè)客戶端互動(dòng)，可能會(huì)有數(shù)百或者數(shù)千服務(wù)器和數(shù)據(jù)節(jié)點(diǎn)交互。應(yīng)用程序架構(gòu)已經(jīng)從集中式模式轉(zhuǎn)變?yōu)榉植际侥Ｊ?。這與過去20年構(gòu)建的傳統(tǒng)的客戶端/服務(wù)器網(wǎng)絡(luò)架構(gòu)相反。

大數(shù)據(jù)對(duì)網(wǎng)絡(luò)的影響

從各種來源收集數(shù)據(jù)，大數(shù)據(jù)系統(tǒng)在服務(wù)器集群中運(yùn)行，這些服務(wù)器集群分布在多個(gè)網(wǎng)絡(luò)節(jié)點(diǎn)。這些集群以平行向外的模式運(yùn)行任務(wù)。流量模式的運(yùn)行范圍從1到1(電話)、1到多(電視節(jié)目)、多到1(音樂會(huì)觀眾)、以及多到多(對(duì)講機(jī))，這結(jié)合了并行運(yùn)行的多個(gè)節(jié)點(diǎn)之間的單播和組播流量。網(wǎng)絡(luò)管理員需要應(yīng)對(duì)這種綜合的流量模式，其中一些流量創(chuàng)建了單獨(dú)的流，其中一些則創(chuàng)建了多個(gè)流。

此外，當(dāng)數(shù)據(jù)提供到計(jì)算節(jié)點(diǎn)時(shí)，會(huì)產(chǎn)生大量網(wǎng)絡(luò)流量。分布式節(jié)點(diǎn)之間的數(shù)據(jù)整理操作需要快速和可預(yù)測(cè)的數(shù)據(jù)傳輸。分析系統(tǒng)使用直接附加存儲(chǔ)來處理，中間存儲(chǔ)來清理數(shù)據(jù)。

數(shù)據(jù)需要在網(wǎng)絡(luò)中四處移動(dòng)，并在分析過程中有效地操作。隨著新數(shù)據(jù)集的增加，以及來源的增加，工作負(fù)載也在增加，這意味著迅速增加容量的需求也在提升。因此，關(guān)鍵是優(yōu)化網(wǎng)絡(luò)架構(gòu)中的本地性、高性能、橫向擴(kuò)展和直接服務(wù)節(jié)點(diǎn)到服務(wù)節(jié)點(diǎn)的連接。

需要新的網(wǎng)絡(luò)模型

其中一個(gè)設(shè)計(jì)模型涉及構(gòu)建低端商品硬件，以及讓分析軟件對(duì)網(wǎng)絡(luò)問題作出反應(yīng)，例如重新啟動(dòng)因?yàn)閾砣瑫r(shí)的任務(wù)。這種模式被用于非實(shí)時(shí)處理，其中完成時(shí)間并不是關(guān)鍵，同時(shí)，數(shù)據(jù)主要來自一個(gè)來源。

另一種模式則涉及建立基于硬件的系統(tǒng)，該系統(tǒng)能夠提供確定性的性能來確保持續(xù)的處理。這種模型被用于對(duì)來自多個(gè)來源的數(shù)據(jù)的近實(shí)時(shí)分析。

網(wǎng)絡(luò)節(jié)點(diǎn)在任意到任意的模型中相互連接，它們之間具有單跳，為處理多個(gè)大量數(shù)據(jù)流提供專用處理系統(tǒng)，具有低損耗和確定性性能，這能夠有利于實(shí)時(shí)大數(shù)據(jù)系統(tǒng)，

交換機(jī)架構(gòu)提供了整個(gè)系統(tǒng)帶寬和性能的優(yōu)勢(shì)，尤其是減少延遲性。位置獨(dú)立性允許集群和數(shù)據(jù)從架構(gòu)中的任何位置實(shí)現(xiàn)最佳性能。這種架構(gòu)還能實(shí)現(xiàn)新數(shù)據(jù)來源到集群的無縫融合，而不需要重新布線，并顯著地簡(jiǎn)化了系統(tǒng)的擴(kuò)展。這種架構(gòu)提供的融合，讓服務(wù)器集群以及存儲(chǔ)區(qū)域網(wǎng)絡(luò)跨網(wǎng)絡(luò)通信。所有資源作為一個(gè)實(shí)體來管理，政策也可以很容易地部署到整個(gè)交換基礎(chǔ)設(shè)施。

部署大數(shù)據(jù)解決方案

大數(shù)據(jù)給企業(yè)捕捉和分析數(shù)據(jù)帶來了巨大的機(jī)會(huì)。隨著IT企業(yè)開始測(cè)試和構(gòu)建自己的解決方案，網(wǎng)絡(luò)管理員必須考慮這些技術(shù)對(duì)其服務(wù)器、存儲(chǔ)、網(wǎng)絡(luò)和運(yùn)營(yíng)基礎(chǔ)設(shè)施的影響。企業(yè)如何能夠最好地開發(fā)新的基礎(chǔ)設(shè)施來利用和分析不斷增加的大數(shù)據(jù)流量呢?在開發(fā)網(wǎng)絡(luò)拓?fù)鋾r(shí)，請(qǐng)務(wù)必考慮以下問題：

• ?對(duì)數(shù)據(jù)流的分析是在實(shí)時(shí)進(jìn)行嗎?
• ?是否有多個(gè)數(shù)據(jù)源，它們是靜態(tài)或動(dòng)態(tài)?
• ?如果試點(diǎn)成功，集群有多大需要?
• ?增加更多容量是否容易且快捷?
• ?大數(shù)據(jù)應(yīng)用程序是否需要與其他應(yīng)用程序集成?

回答這些問題可以幫助你構(gòu)建更適合大數(shù)據(jù)的網(wǎng)絡(luò)，它們將會(huì)指示你的基礎(chǔ)設(shè)施將如何影響數(shù)據(jù)中心架構(gòu)以及互連要求。

大數(shù)據(jù)需要企業(yè)制定新的戰(zhàn)略，來提供實(shí)時(shí)業(yè)務(wù)分析和新的業(yè)務(wù)洞察力。隨著數(shù)據(jù)的快速變化，企業(yè)有必要考慮這些關(guān)鍵技術(shù)來滿足明天的業(yè)務(wù)需求，滿足最高水平的投資保護(hù)、業(yè)務(wù)敏捷性，并縮短進(jìn)入市場(chǎng)的時(shí)間。