解析大數(shù)據(jù)市場格局

隨著時(shí)間的推移，大數(shù)據(jù)的能量將逐步引起更多的關(guān)注，企業(yè)需要相關(guān)的分析能力以取得競爭優(yōu)勢進(jìn)而改善運(yùn)營效率，而相關(guān)的技術(shù)以及服務(wù)會(huì)相繼部署，大數(shù)據(jù)市場規(guī)模將大幅壯大，從現(xiàn)在到2017年其年復(fù)合增長率將達(dá)到58%。
    Wikibon認(rèn)為，大數(shù)據(jù)市場涵蓋如下的技術(shù)、工具以及服務(wù)：
    ·Hadoop分發(fā)、軟件、子項(xiàng)目以及相關(guān)硬件；
    ·下一代數(shù)據(jù)倉庫以及相關(guān)硬件；
    ·大數(shù)據(jù)分析平臺(tái)以及應(yīng)用；
    ·適用于大數(shù)據(jù)的商業(yè)智能、數(shù)據(jù)挖掘和數(shù)據(jù)虛擬化平臺(tái)以及應(yīng)用；
    ·適用于大數(shù)據(jù)的數(shù)據(jù)集成平臺(tái)以及工具；
    ·大數(shù)據(jù)支持、培訓(xùn)以及專業(yè)服務(wù)。
    如上只是一個(gè)比較寬泛的界定，多數(shù)的核心大數(shù)據(jù)技術(shù)或者工具會(huì)集成其中的幾部分要素。它們利用通用硬件來實(shí)現(xiàn)橫向擴(kuò)展以及并行處理；采用無關(guān)聯(lián)數(shù)據(jù)模型來處理非結(jié)構(gòu)化數(shù)據(jù)或半結(jié)構(gòu)化數(shù)據(jù)；利用縱列式數(shù)據(jù)存儲(chǔ)或者數(shù)據(jù)壓縮能力來改善查詢效率；通過和商業(yè)分析以及數(shù)據(jù)虛擬化技術(shù)互操作來向最終用戶傳遞洞察力。
   大數(shù)據(jù)對(duì)于所有行業(yè)而言，都絕對(duì)是一個(gè)關(guān)鍵的競爭優(yōu)勢之源。那些很好地理解并且擅長利用大數(shù)據(jù)的組織，將有可能實(shí)現(xiàn)持續(xù)性的創(chuàng)新、保持敏捷性并且持久改善盈利狀況。
    對(duì)于當(dāng)前的市場而言，大數(shù)據(jù)專營廠商整體的收入為3.11億美元。盡管它們?cè)谡w市場收入中所占的比例尚小（大約5%），這些廠商—例如Vertica、Splunk以及Cloudera—將會(huì)是未來創(chuàng)新的主力，并且會(huì)為數(shù)據(jù)管理以及分析帶來更加好的方法，而這一切將會(huì)使得大數(shù)據(jù)成為IT領(lǐng)域最為熱門的部分。
    Wikibon所定義的大數(shù)據(jù)專營廠商，指的是大數(shù)據(jù)業(yè)務(wù)相關(guān)的收入能夠在該廠商總體收入中的占比超過50%的獨(dú)立硬件、軟件或者是服務(wù)提供商。目前，這一集團(tuán)涵蓋了3個(gè)下一代數(shù)據(jù)倉庫廠商—HP Vertica、Teradata Aster以EMC Greenplum，這些廠商目前依舊擁有獨(dú)立運(yùn)營的權(quán)利或者其DNA還沒有收到并購者的太大影響。
    從收入規(guī)模上來說，當(dāng)前大數(shù)據(jù)市場的領(lǐng)導(dǎo)者是IBM、Intel以及HP，這些巨鱷將會(huì)面臨著越發(fā)激烈的競爭。
    當(dāng)前，IBM和Intel從收入規(guī)模上而言是引領(lǐng)大數(shù)據(jù)市場的，這主要得益于他們?cè)谒峁┑漠a(chǎn)品或者解決方案覆蓋的范圍比較廣，而且已經(jīng)通過許多企業(yè)的數(shù)據(jù)中心占據(jù)先機(jī)。對(duì)于Intel而言，其商用x/86服務(wù)器在大數(shù)據(jù)項(xiàng)目中備受青睞；至于IBM，其對(duì)業(yè)務(wù)分析的重視以及其強(qiáng)大的服務(wù)組合驅(qū)動(dòng)了其大數(shù)據(jù)業(yè)務(wù)收入。另外，由于市場還不成熟，規(guī)模尚小的大數(shù)據(jù)專營公司才剛剛發(fā)力。
    然而，就大數(shù)據(jù)市場而言，最具有沖擊力的創(chuàng)新會(huì)來自于眾多的專營公司，雖然他們目前所占的份額并不大。
    Wikibon預(yù)測，隨著產(chǎn)品、服務(wù)支持以及銷售渠道的逐步成熟，在未來5年內(nèi)這些大數(shù)據(jù)專營公司將會(huì)迎來快速增長期。當(dāng)然，這也意味著，任何一個(gè)專營公司都可能成為IBM、Oracle、HP、EMC或者其他公司的收購對(duì)象。正如在2007到2008年間在商業(yè)智能市場曾經(jīng)發(fā)生的一切，未來3到5年，大數(shù)據(jù)市場將迎來一個(gè)重要的并購時(shí)期。
    我們來看一下在大數(shù)據(jù)專營廠商推動(dòng)下的創(chuàng)新成果：
   Hadoop分發(fā)
    在ApacheHadoop項(xiàng)目中，Cloudera和 Hortonworks做出了多數(shù)貢獻(xiàn)，顯著提高了開源大數(shù)據(jù)架構(gòu)的性能。
    比如，Cloudera對(duì)于Apache Hbase就做出了卓越的貢獻(xiàn)。Apache Hbase是基于Hadoop的非關(guān)系數(shù)據(jù)庫，允許低延遲以及快速搜索。另外，在Cloudera工程師的努力下，通過HFile v2改進(jìn)了Hbase存儲(chǔ)效率。
    Hortonworks的工程師正致力于下一代MapReduce架構(gòu)的研究，該架構(gòu)能夠提升Hadoop群集大小，突破了當(dāng)前實(shí)踐中4000個(gè)節(jié)點(diǎn)的限制，并且增加了實(shí)時(shí)數(shù)據(jù)流分析能力。
   下一代數(shù)據(jù)倉庫
    截至目前，排名前三的下一代數(shù)據(jù)倉庫獨(dú)立廠商—Vertica、Greenplum和 Aster Data正在通過大量的并行式、縱列式分析數(shù)據(jù)庫顛覆傳統(tǒng)的企業(yè)數(shù)據(jù)倉庫市場，新的模式能夠加快數(shù)據(jù)加載速度，帶來近乎實(shí)時(shí)的查詢能力。
    比如，Vertica Analytic Platform的最新版本Vertica 5.0，包含了新的彈性，能夠很容易地延伸或者收縮部署，并且擁有一系列的數(shù)據(jù)庫內(nèi)的分析功能。
    Aster Data率先推出了創(chuàng)新的SQL-MapReduce構(gòu)架，將SQL和MapReduce兩者在數(shù)據(jù)處理方面的優(yōu)勢捆綁在了一起，而Greenplum獨(dú)特的協(xié)作分析平臺(tái)Chorus則為數(shù)據(jù)科學(xué)家提供了一個(gè)實(shí)驗(yàn)大數(shù)據(jù)的社交環(huán)境。
    在過去的兩到三年間，如上所提3家廠商都取得了收入的大幅增長。2011年，Vertica的年收入為8400萬美元位列第一，Aster Data和Greenplum分別以5200萬美元和4000萬美元排在二、三位。
   大數(shù)據(jù)分析平臺(tái)和應(yīng)用
    少數(shù)積極進(jìn)取的廠商正在研發(fā)基于Hadoop架構(gòu)的應(yīng)用和平臺(tái)來為數(shù)據(jù)科學(xué)家以及常規(guī)商務(wù)用戶提供簡單易用的工具來嘗試大數(shù)據(jù)。
    Datameer憑借其基于Hadoop的商務(wù)智能平臺(tái)獲得了市場垂青，該平臺(tái)采用了大家比較熟知的類似于電子表格的界面，允許用戶使用或者分析基于Hadoop的數(shù)據(jù)。Digital Reasoning的Synthesis平臺(tái)架構(gòu)在Hadoop之上，能夠分析基于文本的通信，如今已經(jīng)在政府部門取得了穩(wěn)固的地位，正在計(jì)劃向傳統(tǒng)企業(yè)級(jí)市場進(jìn)軍。Karmasphere開發(fā)了一個(gè)分析開發(fā)平臺(tái)，允許數(shù)據(jù)科學(xué)家通過SQL界面進(jìn)行即席查詢。
   大數(shù)據(jù)即服務(wù)
    在Tresata、1010data以及ClickFox等廠商的推動(dòng)下，“大數(shù)據(jù)即服務(wù)”的部署如火如荼?；谠频拇髷?shù)據(jù)應(yīng)用以及服務(wù)使得缺乏內(nèi)部大數(shù)據(jù)專業(yè)技術(shù)中小型企業(yè)有機(jī)會(huì)利用大數(shù)據(jù)處理以及分析能力，而無需來部署或者管理硬件或者軟件。
    比如，Tresata的云平臺(tái)，采用了Hadoop來處理以及分析其客戶的大量財(cái)物數(shù)據(jù)，并且借用第三方的數(shù)據(jù)—例如股票市場數(shù)據(jù)—來豐富它，另外，還通過按需虛擬化為銀行、金融數(shù)據(jù)公司以及其他的金融服務(wù)單位反饋結(jié)果。
    1010data提供了一個(gè)基于云的應(yīng)用，允許商務(wù)用戶以及分析師以一種他們所熟悉的電子表格的形式來操控大數(shù)據(jù)。ClickFox平臺(tái)挖掘了大量的用戶接觸點(diǎn)（touch-point）數(shù)據(jù)以來描繪總體的客戶體驗(yàn)。
   非Hadoop大數(shù)據(jù)平臺(tái)
    也有許多非Hadoop廠商對(duì)于大數(shù)據(jù)市場的創(chuàng)新做出了卓越貢獻(xiàn)，他們包括：
    ·Splunk，專注于處理以及分析日志文件數(shù)據(jù)，允許管理員監(jiān)控IT基礎(chǔ)構(gòu)架的運(yùn)行情況，并且辨別出服務(wù)的瓶頸或者其它問題。
    ·HPCC Systems，剝離自LexisNexis，提供具有競爭力的大數(shù)據(jù)構(gòu)架，是其工程師在過去的10年間在內(nèi)部建立的，能夠幫助公司為其在金融、公共事業(yè)部門以及政府領(lǐng)域的客戶進(jìn)行的大數(shù)據(jù)處理以及分析。
    ·DataStax，提供開源Apache Cassandra NoSQL數(shù)據(jù)庫的商業(yè)版本，另外還包括與Hadoop綁定的相關(guān)支持服務(wù)。

行動(dòng)起來
    企業(yè)需要密切關(guān)注這些以及其他的大數(shù)據(jù)專營廠商，因?yàn)樗麄儗韯?chuàng)新的、實(shí)用的大數(shù)據(jù)平臺(tái)、應(yīng)用以及服務(wù)。
   大數(shù)據(jù)市場正在爆炸性增長，這不僅表現(xiàn)在市場輿論層面，更是體現(xiàn)在真實(shí)的收入上。而且，有一點(diǎn)已經(jīng)非常明了，那邊是大數(shù)據(jù)市場規(guī)模龐大，并且增長迅猛。對(duì)于IT業(yè)者，這意味著要去投資一種方法，通過這種方法能夠在你的企業(yè)或者組織內(nèi)部將數(shù)據(jù)源貨幣化；同時(shí)意味著掌握必要的技術(shù)來達(dá)到貨幣化的目標(biāo)。對(duì)于大數(shù)據(jù)廠商而言，這意味著你需要有一個(gè)關(guān)于大數(shù)據(jù)的一個(gè)好的故事，要可靠可信，并且有非常清晰的提供商業(yè)價(jià)值的路線圖，它還需要具備足夠的靈活性以應(yīng)對(duì)快速變化的市場。