
大數(shù)據(jù)催生數(shù)據(jù)中心設計新思維_數(shù)據(jù)分析師
預計到2020年,互聯(lián)設備的數(shù)量將達到500億。而眾多的設備在2017年可能就會產(chǎn)生高達7.7 ZB的互聯(lián)網(wǎng)數(shù)據(jù)。隨著運營商放棄了客戶端—服務器以及局域網(wǎng)架構,轉而青睞側重在服務器、存儲與網(wǎng)絡中采用虛擬化的設計,如此大量的數(shù)據(jù)處理需求給數(shù)據(jù)中心生態(tài)系統(tǒng)帶來巨大挑戰(zhàn)。為此,越來越多的公司開始選擇基于移動計算、云服務、大數(shù)據(jù)和社交網(wǎng)絡等領先技術的更加靈活且開放的平臺。
亞馬遜、谷歌與Facebook等創(chuàng)新領袖正在積極構建超大規(guī)模的數(shù)據(jù)中心,以處理海量的帶寬需求與工作負載。最近,F(xiàn)acebook在開放計算項目主辦的開放計算峰會分享了一個關于其數(shù)據(jù)中心開發(fā)的經(jīng)典案例。開放計算項目由Facebook創(chuàng)立,旨在通過分享服務器、存儲與網(wǎng)絡的設計,開發(fā)高性能、低成本且節(jié)能的數(shù)據(jù)中心。據(jù)Facebook透露,開放平臺已經(jīng)幫助其節(jié)省了12億美元的成本。
最近,許多企業(yè)正投入云計算的懷抱,他們一般從第三方購買計算容量,節(jié)約運營自身數(shù)據(jù)中心所需的資本與運營費用。因此,云服務提供商已成為對開放平臺超大規(guī)模數(shù)據(jù)中心投資力度最大的投資者之一。以溢價提供高級服務的傳統(tǒng)服務器提供商可能將面臨來自開放平臺提供商的激烈競爭,后者的成本更低且基礎架構更靈活、可擴展。
使用開放平臺的方法意味著須整體看待數(shù)據(jù)中心開發(fā)項目。雖然服務器是核心技術,但需要考慮包括服務器、存儲、網(wǎng)絡以及軟件在內(nèi)的整體系統(tǒng),并以全新方法將這些組件更好地整合在一起,讓數(shù)據(jù)中心實現(xiàn)真正的突破性變革。
雖然開放平臺觸及的不僅僅是服務器,但在滿足下一代數(shù)據(jù)中心的傳輸容量、處理速度與節(jié)能高效的需求方面,服務器仍發(fā)揮著關鍵作用。在構建服務器時,必須通過一臺物理服務器容納多臺虛擬服務器,以便在虛擬化成為業(yè)界標準的情況下提高服務器利用率。服務器需要使用既快速又節(jié)能的多核處理器,且必須與日益虛擬化的存儲及網(wǎng)絡系統(tǒng)無縫互動。
許多半導體公司與服務器制造商現(xiàn)在都在開發(fā)運行于ARM處理器、而非行業(yè)標準x86架構的服務器。ARM處理器普遍用于智能手機、平板電腦及其他便攜式設備以及隨物聯(lián)網(wǎng)(IoT)趨勢而出現(xiàn)的新興設備、聯(lián)網(wǎng)家電、汽車和各種網(wǎng)絡傳感器。ARM有助于各公司開發(fā)擁有創(chuàng)新型多核CPU的處理器,實現(xiàn)真正的服務器級性能,并面向網(wǎng)絡、通信、大數(shù)據(jù)、存儲及安全應用提供業(yè)界最佳的虛擬化加速器。
現(xiàn)代數(shù)據(jù)中心還需要更快速的網(wǎng)絡連通性,千兆以太網(wǎng)將被10GbE、40GbE并最終被100GbE規(guī)模的管網(wǎng)所替代。10GbE結構網(wǎng)絡(網(wǎng)絡中的流量可流向各個方向)將有利于節(jié)能、易管理性以及通過網(wǎng)絡虛擬化靈活使用計算資源。
同時,為了提高數(shù)據(jù)中心內(nèi)架頂式(ToR)交換機與服務器網(wǎng)卡(NIC)之間的速度,降低兩者間以太網(wǎng)連通性成本,最近成立的行業(yè)組織25Gb以太網(wǎng)聯(lián)盟制定了新的以太網(wǎng)規(guī)范說明,以允許數(shù)據(jù)中心網(wǎng)絡應用25Gbps或50Gbps以太網(wǎng)鏈路協(xié)議。
為云計算而構建的現(xiàn)代數(shù)據(jù)中心還通過所謂的存儲解聚開創(chuàng)了存儲技術新天地。近些年來,存儲因服務器計算而聚合在一起,因此數(shù)據(jù)可以更快速地從存儲中檢索出來。但是,隨著固態(tài)硬盤成為新的存儲媒介,上述服務器的存儲成本開始升高?,F(xiàn)在,計算與存儲之間的連接速度得到了提升,存儲可以與計算再次分開或者解聚及共享。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA 數(shù)據(jù)分析師報考條件詳解與準備指南? ? 在數(shù)據(jù)驅動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-18剛入職場或是在職場正面臨崗位替代、技能更新、人機協(xié)作等焦慮的打工人,想要找到一條破解職場焦慮和升職瓶頸的系統(tǒng)化學習提升 ...
2025-07-182025被稱為“AI元年”,而AI,與數(shù)據(jù)密不可分。網(wǎng)易公司創(chuàng)始人丁磊在《AI思維:從數(shù)據(jù)中創(chuàng)造價值的煉金術 ...
2025-07-18CDA 數(shù)據(jù)分析師:數(shù)據(jù)時代的價值挖掘者 在大數(shù)據(jù)席卷全球的今天,數(shù)據(jù)已成為企業(yè)核心競爭力的重要組成部分。從海量數(shù)據(jù)中提取有 ...
2025-07-18SPSS 賦值后數(shù)據(jù)不顯示?原因排查與解決指南? 在 SPSS( Statistical Package for the Social Sciences)數(shù)據(jù)分析過程中,變量 ...
2025-07-18在 DBeaver 中利用 MySQL 實現(xiàn)表數(shù)據(jù)同步操作指南? ? 在數(shù)據(jù)庫管理工作中,將一張表的數(shù)據(jù)同步到另一張表是常見需求,這有助于 ...
2025-07-18數(shù)據(jù)分析師的技能圖譜:從數(shù)據(jù)到價值的橋梁? 在數(shù)據(jù)驅動決策的時代,數(shù)據(jù)分析師如同 “數(shù)據(jù)翻譯官”,將冰冷的數(shù)字轉化為清晰的 ...
2025-07-17Pandas 寫入指定行數(shù)據(jù):數(shù)據(jù)精細化管理的核心技能? 在數(shù)據(jù)處理的日常工作中,我們常常需要面對這樣的場景:在龐大的數(shù)據(jù)集里精 ...
2025-07-17解碼 CDA:數(shù)據(jù)時代的通行證? 在數(shù)字化浪潮席卷全球的今天,當企業(yè)決策者盯著屏幕上跳動的數(shù)據(jù)曲線尋找增長密碼,當科研人員在 ...
2025-07-17CDA 精益業(yè)務數(shù)據(jù)分析:數(shù)據(jù)驅動業(yè)務增長的實戰(zhàn)方法論 在企業(yè)數(shù)字化轉型的浪潮中,“數(shù)據(jù)分析” 已從 “加分項” 成為 “必修課 ...
2025-07-16MySQL 中 ADD KEY 與 ADD INDEX 詳解:用法、差異與優(yōu)化實踐 在 MySQL 數(shù)據(jù)庫表結構設計中,索引是提升查詢性能的核心手段。無論 ...
2025-07-16解析 MySQL Update 語句中 “query end” 狀態(tài):含義、成因與優(yōu)化指南? 在 MySQL 數(shù)據(jù)庫的日常運維與開發(fā)中,開發(fā)者和 DBA 常會 ...
2025-07-16如何考取數(shù)據(jù)分析師證書:以 CDA 為例? ? 在數(shù)字化浪潮席卷各行各業(yè)的當下,數(shù)據(jù)分析師已然成為企業(yè)挖掘數(shù)據(jù)價值、驅動決策的 ...
2025-07-15CDA 精益業(yè)務數(shù)據(jù)分析:驅動企業(yè)高效決策的核心引擎? 在數(shù)字經(jīng)濟時代,企業(yè)面臨著前所未有的數(shù)據(jù)洪流,如何從海量數(shù)據(jù)中提取有 ...
2025-07-15MySQL 無外鍵關聯(lián)表的 JOIN 實戰(zhàn):數(shù)據(jù)整合的靈活之道? 在 MySQL 數(shù)據(jù)庫的日常操作中,我們經(jīng)常會遇到需要整合多張表數(shù)據(jù)的場景 ...
2025-07-15Python Pandas:數(shù)據(jù)科學的瑞士軍刀? ? 在數(shù)據(jù)驅動的時代,面對海量、復雜的數(shù)據(jù),如何高效地進行處理、分析和挖掘成為關鍵。 ...
2025-07-15用 SQL 生成逆向回滾 SQL:數(shù)據(jù)操作的 “后悔藥” 指南? 在數(shù)據(jù)庫操作中,誤刪數(shù)據(jù)、錯改字段或誤執(zhí)行批量更新等問題時有發(fā)生。 ...
2025-07-14t檢驗與Wilcoxon檢驗的選擇:何時用t.test,何時用wilcox.test? t 檢驗與 Wilcoxon 檢驗的選擇:何時用 t.test,何時用 wilcox. ...
2025-07-14AI 浪潮下的生存與進階: CDA數(shù)據(jù)分析師—開啟新時代職業(yè)生涯的鑰匙(深度研究報告、發(fā)展指導白皮書) 發(fā)布機構:CDA數(shù)據(jù)科 ...
2025-07-13LSTM 模型輸入長度選擇技巧:提升序列建模效能的關鍵? 在循環(huán)神經(jīng)網(wǎng)絡(RNN)家族中,長短期記憶網(wǎng)絡(LSTM)憑借其解決長序列 ...
2025-07-11