
解析大數(shù)據(jù)市場(chǎng)格局
隨著時(shí)間的推移,大數(shù)據(jù)的能量將逐步引起更多的關(guān)注,企業(yè)需要相關(guān)的分析能力以取得競(jìng)爭(zhēng)優(yōu)勢(shì)進(jìn)而改善運(yùn)營(yíng)效率,而相關(guān)的技術(shù)以及服務(wù)會(huì)相繼部署,大數(shù)據(jù)市場(chǎng)規(guī)模將大幅壯大,從現(xiàn)在到2017年其年復(fù)合增長(zhǎng)率將達(dá)到58%。
Wikibon認(rèn)為,大數(shù)據(jù)市場(chǎng)涵蓋如下的技術(shù)、工具以及服務(wù):
·Hadoop分發(fā)、軟件、子項(xiàng)目以及相關(guān)硬件;
·下一代數(shù)據(jù)倉(cāng)庫(kù)以及相關(guān)硬件;
·大數(shù)據(jù)分析平臺(tái)以及應(yīng)用;
·適用于大數(shù)據(jù)的商業(yè)智能、數(shù)據(jù)挖掘和數(shù)據(jù)虛擬化平臺(tái)以及應(yīng)用;
·適用于大數(shù)據(jù)的數(shù)據(jù)集成平臺(tái)以及工具;
·大數(shù)據(jù)支持、培訓(xùn)以及專業(yè)服務(wù)。
如上只是一個(gè)比較寬泛的界定,多數(shù)的核心大數(shù)據(jù)技術(shù)或者工具會(huì)集成其中的幾部分要素。它們利用通用硬件來(lái)實(shí)現(xiàn)橫向擴(kuò)展以及并行處理;采用無(wú)關(guān)聯(lián)數(shù)據(jù)模型來(lái)處理非結(jié)構(gòu)化數(shù)據(jù)或半結(jié)構(gòu)化數(shù)據(jù);利用縱列式數(shù)據(jù)存儲(chǔ)或者數(shù)據(jù)壓縮能力來(lái)改善查詢效率;通過(guò)和商業(yè)分析以及數(shù)據(jù)虛擬化技術(shù)互操作來(lái)向最終用戶傳遞洞察力。
大數(shù)據(jù)對(duì)于所有行業(yè)而言,都絕對(duì)是一個(gè)關(guān)鍵的競(jìng)爭(zhēng)優(yōu)勢(shì)之源。那些很好地理解并且擅長(zhǎng)利用大數(shù)據(jù)的組織,將有可能實(shí)現(xiàn)持續(xù)性的創(chuàng)新、保持敏捷性并且持久改善盈利狀況。
對(duì)于當(dāng)前的市場(chǎng)而言,大數(shù)據(jù)專營(yíng)廠商整體的收入為3.11億美元。盡管它們?cè)谡w市場(chǎng)收入中所占的比例尚小(大約5%),這些廠商—例如Vertica、Splunk以及Cloudera—將會(huì)是未來(lái)創(chuàng)新的主力,并且會(huì)為數(shù)據(jù)管理以及分析帶來(lái)更加好的方法,而這一切將會(huì)使得大數(shù)據(jù)成為IT領(lǐng)域最為熱門的部分。
Wikibon所定義的大數(shù)據(jù)專營(yíng)廠商,指的是大數(shù)據(jù)業(yè)務(wù)相關(guān)的收入能夠在該廠商總體收入中的占比超過(guò)50%的獨(dú)立硬件、軟件或者是服務(wù)提供商。目前,這一集團(tuán)涵蓋了3個(gè)下一代數(shù)據(jù)倉(cāng)庫(kù)廠商—HP Vertica、Teradata Aster以EMC Greenplum,這些廠商目前依舊擁有獨(dú)立運(yùn)營(yíng)的權(quán)利或者其DNA還沒(méi)有收到并購(gòu)者的太大影響。
從收入規(guī)模上來(lái)說(shuō),當(dāng)前大數(shù)據(jù)市場(chǎng)的領(lǐng)導(dǎo)者是IBM、Intel以及HP,這些巨鱷將會(huì)面臨著越發(fā)激烈的競(jìng)爭(zhēng)。
當(dāng)前,IBM和Intel從收入規(guī)模上而言是引領(lǐng)大數(shù)據(jù)市場(chǎng)的,這主要得益于他們?cè)谒峁┑漠a(chǎn)品或者解決方案覆蓋的范圍比較廣,而且已經(jīng)通過(guò)許多企業(yè)的數(shù)據(jù)中心占據(jù)先機(jī)。對(duì)于Intel而言,其商用x/86服務(wù)器在大數(shù)據(jù)項(xiàng)目中備受青睞;至于IBM,其對(duì)業(yè)務(wù)分析的重視以及其強(qiáng)大的服務(wù)組合驅(qū)動(dòng)了其大數(shù)據(jù)業(yè)務(wù)收入。另外,由于市場(chǎng)還不成熟,規(guī)模尚小的大數(shù)據(jù)專營(yíng)公司才剛剛發(fā)力。
然而,就大數(shù)據(jù)市場(chǎng)而言,最具有沖擊力的創(chuàng)新會(huì)來(lái)自于眾多的專營(yíng)公司,雖然他們目前所占的份額并不大。
Wikibon預(yù)測(cè),隨著產(chǎn)品、服務(wù)支持以及銷售渠道的逐步成熟,在未來(lái)5年內(nèi)這些大數(shù)據(jù)專營(yíng)公司將會(huì)迎來(lái)快速增長(zhǎng)期。當(dāng)然,這也意味著,任何一個(gè)專營(yíng)公司都可能成為IBM、Oracle、HP、EMC或者其他公司的收購(gòu)對(duì)象。正如在2007到2008年間在商業(yè)智能市場(chǎng)曾經(jīng)發(fā)生的一切,未來(lái)3到5年,大數(shù)據(jù)市場(chǎng)將迎來(lái)一個(gè)重要的并購(gòu)時(shí)期。
我們來(lái)看一下在大數(shù)據(jù)專營(yíng)廠商推動(dòng)下的創(chuàng)新成果:
Hadoop分發(fā)
在ApacheHadoop項(xiàng)目中,Cloudera和 Hortonworks做出了多數(shù)貢獻(xiàn),顯著提高了開源大數(shù)據(jù)架構(gòu)的性能。
比如,Cloudera對(duì)于Apache Hbase就做出了卓越的貢獻(xiàn)。Apache Hbase是基于Hadoop的非關(guān)系數(shù)據(jù)庫(kù),允許低延遲以及快速搜索。另外,在Cloudera工程師的努力下,通過(guò)HFile v2改進(jìn)了Hbase存儲(chǔ)效率。
Hortonworks的工程師正致力于下一代MapReduce架構(gòu)的研究,該架構(gòu)能夠提升Hadoop群集大小,突破了當(dāng)前實(shí)踐中4000個(gè)節(jié)點(diǎn)的限制,并且增加了實(shí)時(shí)數(shù)據(jù)流分析能力。
下一代數(shù)據(jù)倉(cāng)庫(kù)
截至目前,排名前三的下一代數(shù)據(jù)倉(cāng)庫(kù)獨(dú)立廠商—Vertica、Greenplum和 Aster Data正在通過(guò)大量的并行式、縱列式分析數(shù)據(jù)庫(kù)顛覆傳統(tǒng)的企業(yè)數(shù)據(jù)倉(cāng)庫(kù)市場(chǎng),新的模式能夠加快數(shù)據(jù)加載速度,帶來(lái)近乎實(shí)時(shí)的查詢能力。
比如,Vertica Analytic Platform的最新版本Vertica 5.0,包含了新的彈性,能夠很容易地延伸或者收縮部署,并且擁有一系列的數(shù)據(jù)庫(kù)內(nèi)的分析功能。
Aster Data率先推出了創(chuàng)新的SQL-MapReduce構(gòu)架,將SQL和MapReduce兩者在數(shù)據(jù)處理方面的優(yōu)勢(shì)捆綁在了一起,而Greenplum獨(dú)特的協(xié)作分析平臺(tái)Chorus則為數(shù)據(jù)科學(xué)家提供了一個(gè)實(shí)驗(yàn)大數(shù)據(jù)的社交環(huán)境。
在過(guò)去的兩到三年間,如上所提3家廠商都取得了收入的大幅增長(zhǎng)。2011年,Vertica的年收入為8400萬(wàn)美元位列第一,Aster Data和Greenplum分別以5200萬(wàn)美元和4000萬(wàn)美元排在二、三位。
大數(shù)據(jù)分析平臺(tái)和應(yīng)用
少數(shù)積極進(jìn)取的廠商正在研發(fā)基于Hadoop架構(gòu)的應(yīng)用和平臺(tái)來(lái)為數(shù)據(jù)科學(xué)家以及常規(guī)商務(wù)用戶提供簡(jiǎn)單易用的工具來(lái)嘗試大數(shù)據(jù)。
Datameer憑借其基于Hadoop的商務(wù)智能平臺(tái)獲得了市場(chǎng)垂青,該平臺(tái)采用了大家比較熟知的類似于電子表格的界面,允許用戶使用或者分析基于Hadoop的數(shù)據(jù)。Digital Reasoning的Synthesis平臺(tái)架構(gòu)在Hadoop之上,能夠分析基于文本的通信,如今已經(jīng)在政府部門取得了穩(wěn)固的地位,正在計(jì)劃向傳統(tǒng)企業(yè)級(jí)市場(chǎng)進(jìn)軍。Karmasphere開發(fā)了一個(gè)分析開發(fā)平臺(tái),允許數(shù)據(jù)科學(xué)家通過(guò)SQL界面進(jìn)行即席查詢。
大數(shù)據(jù)即服務(wù)
在Tresata、1010data以及ClickFox等廠商的推動(dòng)下,“大數(shù)據(jù)即服務(wù)”的部署如火如荼?;谠频拇髷?shù)據(jù)應(yīng)用以及服務(wù)使得缺乏內(nèi)部大數(shù)據(jù)專業(yè)技術(shù)中小型企業(yè)有機(jī)會(huì)利用大數(shù)據(jù)處理以及分析能力,而無(wú)需來(lái)部署或者管理硬件或者軟件。
比如,Tresata的云平臺(tái),采用了Hadoop來(lái)處理以及分析其客戶的大量財(cái)物數(shù)據(jù),并且借用第三方的數(shù)據(jù)—例如股票市場(chǎng)數(shù)據(jù)—來(lái)豐富它,另外,還通過(guò)按需虛擬化為銀行、金融數(shù)據(jù)公司以及其他的金融服務(wù)單位反饋結(jié)果。
1010data提供了一個(gè)基于云的應(yīng)用,允許商務(wù)用戶以及分析師以一種他們所熟悉的電子表格的形式來(lái)操控大數(shù)據(jù)。ClickFox平臺(tái)挖掘了大量的用戶接觸點(diǎn)(touch-point)數(shù)據(jù)以來(lái)描繪總體的客戶體驗(yàn)。
非Hadoop大數(shù)據(jù)平臺(tái)
也有許多非Hadoop廠商對(duì)于大數(shù)據(jù)市場(chǎng)的創(chuàng)新做出了卓越貢獻(xiàn),他們包括:
·Splunk,專注于處理以及分析日志文件數(shù)據(jù),允許管理員監(jiān)控IT基礎(chǔ)構(gòu)架的運(yùn)行情況,并且辨別出服務(wù)的瓶頸或者其它問(wèn)題。
·HPCC Systems,剝離自LexisNexis,提供具有競(jìng)爭(zhēng)力的大數(shù)據(jù)構(gòu)架,是其工程師在過(guò)去的10年間在內(nèi)部建立的,能夠幫助公司為其在金融、公共事業(yè)部門以及政府領(lǐng)域的客戶進(jìn)行的大數(shù)據(jù)處理以及分析。
·DataStax,提供開源Apache Cassandra NoSQL數(shù)據(jù)庫(kù)的商業(yè)版本,另外還包括與Hadoop綁定的相關(guān)支持服務(wù)。
行動(dòng)起來(lái)
企業(yè)需要密切關(guān)注這些以及其他的大數(shù)據(jù)專營(yíng)廠商,因?yàn)樗麄儗?lái)創(chuàng)新的、實(shí)用的大數(shù)據(jù)平臺(tái)、應(yīng)用以及服務(wù)。
大數(shù)據(jù)市場(chǎng)正在爆炸性增長(zhǎng),這不僅表現(xiàn)在市場(chǎng)輿論層面,更是體現(xiàn)在真實(shí)的收入上。而且,有一點(diǎn)已經(jīng)非常明了,那邊是大數(shù)據(jù)市場(chǎng)規(guī)模龐大,并且增長(zhǎng)迅猛。對(duì)于IT業(yè)者,這意味著要去投資一種方法,通過(guò)這種方法能夠在你的企業(yè)或者組織內(nèi)部將數(shù)據(jù)源貨幣化;同時(shí)意味著掌握必要的技術(shù)來(lái)達(dá)到貨幣化的目標(biāo)。對(duì)于大數(shù)據(jù)廠商而言,這意味著你需要有一個(gè)關(guān)于大數(shù)據(jù)的一個(gè)好的故事,要可靠可信,并且有非常清晰的提供商業(yè)價(jià)值的路線圖,它還需要具備足夠的靈活性以應(yīng)對(duì)快速變化的市場(chǎng)。
數(shù)據(jù)分析咨詢請(qǐng)掃描二維碼
若不方便掃碼,搜微信號(hào):CDAshujufenxi
LSTM 模型輸入長(zhǎng)度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長(zhǎng)短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長(zhǎng)序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報(bào)考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計(jì)的實(shí)用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠(chéng)摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實(shí)施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價(jià)值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡(jiǎn)稱 BI)深度融合的時(shí)代,BI ...
2025-07-10SQL 在預(yù)測(cè)分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢(shì)預(yù)判? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代,預(yù)測(cè)分析作為挖掘數(shù)據(jù)潛在價(jià)值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價(jià)值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點(diǎn),而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報(bào)考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭(zhēng)搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢(shì)性檢驗(yàn):捕捉數(shù)據(jù)背后的時(shí)間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢(shì)性檢驗(yàn)如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時(shí)間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時(shí)間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實(shí)戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗(yàn):數(shù)據(jù)趨勢(shì)與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢(shì)變化以及識(shí)別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國(guó)內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對(duì)策略? 長(zhǎng)短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨(dú)特的門控機(jī)制,在 ...
2025-07-07統(tǒng)計(jì)學(xué)方法在市場(chǎng)調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場(chǎng)調(diào)研是企業(yè)洞察市場(chǎng)動(dòng)態(tài)、了解消費(fèi)者需求的重要途徑,而統(tǒng)計(jì)學(xué)方法則是市場(chǎng)調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動(dòng)力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動(dòng)力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價(jià)值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03