
大數(shù)據(jù)系統(tǒng)與關(guān)系型數(shù)據(jù)的共存
大數(shù)據(jù)在2011年嶄露頭角,2012年一飛沖天,它可能會以一種戲劇性的方式改變數(shù)據(jù)管理的很多方面。大數(shù)據(jù)系統(tǒng)給管理和操縱計算機數(shù)據(jù)、連續(xù)提取、轉(zhuǎn)換和加載功能、運作商業(yè)智能、動態(tài)大數(shù)據(jù)以及基于云的數(shù)據(jù)倉庫等等都帶來了變化。
不過,隨著大數(shù)據(jù)進入2013年,已經(jīng)沒有什么系統(tǒng)技術(shù)能比NoSQL數(shù)據(jù)庫和Hadoop框架更活躍了,看起來這兩款產(chǎn)品還有更大的發(fā)展空間。根據(jù)MarketAnalysis.com 2012年的一份報告看,單單是Hadoop-MapReduce市場,預(yù)計復(fù)合年增長率將達到58%,在2018年將達到22億美元。
NoSQL和Hadoop的出現(xiàn)主要是為應(yīng)對非結(jié)構(gòu)化數(shù)據(jù)的,比如文本數(shù)據(jù)或者web日志。就像Apache Hadoop一樣,這些技術(shù)通常是從開源起步,逐漸成為新的商業(yè)產(chǎn)品。
Judith Hurwitz是Hurwitz and Associates公司的總裁兼CEO,該公司位于美國馬薩諸塞州,她認(rèn)為大數(shù)據(jù)架構(gòu)和大規(guī)模并行處理大大改變了數(shù)據(jù)景象。她說:在此之前,即便數(shù)據(jù)真的對公司很重要,人們也沒有能力獲取巨大數(shù)據(jù)量并進行實時分析。
她認(rèn)為:現(xiàn)在,不現(xiàn)實的東西正變得實用。這種情況已經(jīng)把數(shù)據(jù)帶出了舒適區(qū)。
SQL受創(chuàng),即將回擊
我們可以在網(wǎng)站上看到,2012年伊始,對主流關(guān)系型數(shù)據(jù)庫陷入困境的預(yù)測就出現(xiàn)了。部分預(yù)言已成為現(xiàn)實。SQL關(guān)系型數(shù)據(jù)庫在與未來幾年可能成為其替代品的產(chǎn)品經(jīng)過一系列斗爭之后,現(xiàn)在(或者很快)似乎面臨著關(guān)于處理整個企業(yè)大數(shù)據(jù)量過濾的最為劇烈的競爭。
這一趨勢背后的推動力是企業(yè)對以更快的速率獲取更多非結(jié)構(gòu)化數(shù)據(jù)的渴望,這樣企業(yè)才能更加依靠數(shù)據(jù)驅(qū)動做出決策。慣用的處理方式正在改變,以適應(yīng)最好的新技術(shù)。
這些來自2012年特定數(shù)據(jù)管理供應(yīng)商的舉動展現(xiàn)出大數(shù)據(jù)和Hadoop對關(guān)系型數(shù)據(jù)沖擊的現(xiàn)狀:
IBM公司還在繼續(xù)創(chuàng)立小型數(shù)據(jù)和分析公司,盡管比2011年少了些。藍色巨人的努力方向從小的改進(比如,針對DB2 10的NoSQL圖形庫和InfoSphere Warehouse 10)到非常巨大的PureData系統(tǒng)裝置,目的都是為了給企業(yè)搞定大數(shù)據(jù)。
甲骨文公司在年初推出了大數(shù)據(jù)設(shè)備。這一發(fā)布是緊跟著Oracle NoSQL數(shù)據(jù)庫2.0之后發(fā)布的,Oracle NoSQL數(shù)據(jù)庫2.0已經(jīng)自動實現(xiàn)重新平衡,新的應(yīng)用編程接口可以處理大型對象,與Oracle數(shù)據(jù)庫有更緊密的集成,支持直接用SQL查詢Oracle NoSQL數(shù)據(jù)庫記錄。
微軟公司展示了Hadoop對Windows Azure和Windows Server支持的預(yù)覽;Teradata公司發(fā)布了其Aster大數(shù)據(jù)分析產(chǎn)品;而Informatica公司發(fā)布了PowerCenter套件的大數(shù)據(jù)版,據(jù)說消除了Hadoop手工編碼的需求,并把編程任務(wù)帶入了Informatica開發(fā)環(huán)境。
SQL在2012年可能只有一兩次回擊,但是它積極應(yīng)對市場挑戰(zhàn)的舉動有重要意義。在非主流NoSQL和Hadoop方面比較專業(yè)的公司更新了他們?nèi)ツ甑?a href='/map/sql/' style='color:#000;font-size:inherit;'>SQL認(rèn)證。一個典型的例子是Hadoop創(chuàng)立了Cloudera公司,該公司期望增強SQL與Impala的協(xié)作程度(Impala是一款Hadoop軟件產(chǎn)品,支持標(biāo)準(zhǔn)SQL做交互式查詢)。
大數(shù)據(jù)的變動
這樣的舉動可能代表了一定的勢頭人們看到SQL和NoSQL一起被提及的機會更多了。在某種程度上,SQL在早期大數(shù)據(jù)喧鬧的討論中有點被淡化了。
Ronnie Beggs是美國舊金山SQLstream公司的副總裁,該公司是一家流媒體數(shù)據(jù)庫制造商。他說:在過去的幾年里,由于大數(shù)據(jù)運動,SQL已經(jīng)不再掛在每個人的嘴邊了。同時,他還說:大數(shù)據(jù)和NoSQL雙劍合璧,已經(jīng)沖擊到了主流。
他還表示,在2013年,我們應(yīng)該會看到明顯的變化,并提到近幾年在使NoSQL數(shù)據(jù)庫更好地適應(yīng)SQL風(fēng)格的開發(fā)方面所作出的各種努力。
Beggs說:它是不斷變化的。我們接下來這一年會看到SQL的回歸,它將成為所有大數(shù)據(jù)平臺的接口。
這種發(fā)展走向了Hadoop框架、NoSQL和SQL方法的共存,這標(biāo)志著在大數(shù)據(jù)的成熟度方面邁出了新的一步。2013年,大數(shù)據(jù)有可能從一個熱門話題變?yōu)榍袑嵉膶嵺`。
Colin White是美國俄勒岡州Ashland BI研究機構(gòu)的總裁和創(chuàng)始人,他說:我認(rèn)為人們正努力通過大數(shù)據(jù)的炒作,來真正理解業(yè)務(wù)價值。在2013年,我認(rèn)為我們將看到人們從大數(shù)據(jù)中獲得業(yè)務(wù)價值的優(yōu)秀案例。問題不在于大數(shù)據(jù)本身,而在于你的運用。
雖然企業(yè)對新技術(shù)有著廣泛的興趣,但不是所有公司都會以同樣的程度全面部署大數(shù)據(jù)系統(tǒng)。關(guān)于這一點,在最近TechTarget舉辦的一次重點銀行會議上,一位集成服務(wù)經(jīng)理也有所提及。
他認(rèn)為銀行業(yè)只有部分涉足了基本的大數(shù)據(jù),而不是全部。銀行和其它領(lǐng)域只看到了大數(shù)據(jù)的數(shù)量,而沒有留意到它的非結(jié)構(gòu)性。至少目前還是這樣。
他談到:大數(shù)據(jù)的含義有兩部分。第一部分是它們的量很大,第二部分是數(shù)據(jù)為非結(jié)構(gòu)化。銀行明顯屬于第一部分。但是我們不會去收集tweets,至少目前還沒有。我們還在觀望,等待金融數(shù)據(jù)服務(wù)市場的應(yīng)對。(文章來自:CDA數(shù)據(jù)分析師)
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計的實用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動決策的時代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點,而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報考到取證的全攻略? 在數(shù)字經(jīng)濟蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗:捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗:數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨特的門控機制,在 ...
2025-07-07統(tǒng)計學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動態(tài)、了解消費者需求的重要途徑,而統(tǒng)計學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03