2015年大數(shù)據(jù)行業(yè)九大關(guān)鍵詞一覽

2015年，大數(shù)據(jù)市場(chǎng)的發(fā)展迅猛，放眼國(guó)際，總體市場(chǎng)規(guī)模持續(xù)增加，隨著人工智能、物聯(lián)網(wǎng)的發(fā)展，幾乎所有人將目光瞄準(zhǔn)了“數(shù)據(jù)”產(chǎn)生的價(jià)值。行業(yè)廠商Cloudera、DataStax以及DataGravity等大數(shù)據(jù)公司已經(jīng)投入大量資金研發(fā)相關(guān)技術(shù)，Hadoop供應(yīng)商Hortonworks與數(shù)據(jù)分析公司NewRelic甚至已經(jīng)上市。而國(guó)內(nèi)，國(guó)家也將大數(shù)據(jù)納入國(guó)策。

我們?cè)谀甑妆P點(diǎn)了2015年大數(shù)據(jù)行業(yè)九大關(guān)鍵詞，管窺這一年行業(yè)內(nèi)的發(fā)展。

BI——挑戰(zhàn)

2015年對(duì)于商業(yè)智能（BI）分析市場(chǎng)來說，正由傳統(tǒng)的商業(yè)智能分析快速進(jìn)入到敏捷型商業(yè)智能時(shí)代。以QlikView,Tableau和SpotView為代表的敏捷商業(yè)智能產(chǎn)品正在挑戰(zhàn)傳統(tǒng)的IBMCognos、SAPBusinessObjects等以IT為中心的BI分析平臺(tái)。敏捷商業(yè)智能產(chǎn)品也正在進(jìn)一步細(xì)化功能以達(dá)到更敏捷、更方便、適用范圍更廣的目的。

國(guó)家政策——戰(zhàn)略

今年中國(guó)政府對(duì)于大數(shù)據(jù)發(fā)展不斷發(fā)文并推進(jìn)，這標(biāo)志著大數(shù)據(jù)已被國(guó)家政府納入創(chuàng)新戰(zhàn)略層面，成為國(guó)家戰(zhàn)略計(jì)劃的核心任務(wù)之一：2015年9月，國(guó)務(wù)院發(fā)布《促進(jìn)大數(shù)據(jù)發(fā)展行動(dòng)綱要》，大力促進(jìn)中國(guó)數(shù)據(jù)技術(shù)的發(fā)展，數(shù)據(jù)將被作為戰(zhàn)略性資源加以重視；2015年10月26日，在國(guó)家“十三五”規(guī)劃中具體提到實(shí)施國(guó)家大數(shù)據(jù)戰(zhàn)略。

深度學(xué)習(xí)/機(jī)器學(xué)習(xí)——崛起

人工智能如今已變得異?；馃?，作為機(jī)器學(xué)習(xí)中最接近AI（人工智能）的一個(gè)領(lǐng)域，深度學(xué)習(xí)在2015年不再高高在上，很多創(chuàng)新企業(yè)已經(jīng)將其實(shí)用化：Facebook開源深度學(xué)習(xí)工具“Torch”、PayPal使用深度學(xué)習(xí)監(jiān)測(cè)并對(duì)抗詐騙、亞馬遜啟動(dòng)機(jī)器學(xué)習(xí)平臺(tái)、蘋果收購(gòu)機(jī)器學(xué)習(xí)公司Perceptio……同時(shí)在國(guó)內(nèi)，百度、阿里，科大訊飛也在迅速布局和發(fā)展深度學(xué)習(xí)領(lǐng)域的技術(shù)。

Sortbenchmark阿里云——最快

阿里云在SortBenchmark（全球科技公司“計(jì)算奧運(yùn)會(huì)”之稱）的2015年排序競(jìng)賽中用不到7分鐘（377秒）就完成了100TB的數(shù)據(jù)排序，打破了ApacheSpark的紀(jì)錄23.4分鐘。

Spark——共存

Spark近幾年來越來越受人關(guān)注，2015年6月15日，IBM宣布投入超過3500名研究和開發(fā)人員在全球十余個(gè)實(shí)驗(yàn)室開展與Spark相關(guān)的項(xiàng)目。

與Hadoop相比，Spark具有速度方面的優(yōu)勢(shì)，但是它本身沒有一個(gè)分布式存儲(chǔ)系統(tǒng)，因此越來越多的企業(yè)選擇Hadoop做大數(shù)據(jù)平臺(tái)，而Spark是運(yùn)行于Hadoop頂層的內(nèi)存處理方案。Hadoop最大的用戶（包括eBay和雅虎）都在Hadoop集群中運(yùn)行著Spark。Cloudera和Hortonworks將Spark列為他們Hadoop發(fā)行的一部分。Spark對(duì)于Hadoop來說不是挑戰(zhàn)和取代相反，Hadoop是Spark成長(zhǎng)發(fā)展的基礎(chǔ)。

Pivotal——開源

2015年2月，Pivotal宣布其大數(shù)據(jù)套件的三個(gè)核心組件開源：基于內(nèi)存的分布式NoSQL數(shù)據(jù)庫(kù)GemFire、基于Hadoop架構(gòu)的大規(guī)模并行SQL分析處理引擎HAWQ、大規(guī)模并行處理分析數(shù)據(jù)庫(kù)Greenplum。

Pivotal開放其大數(shù)據(jù)套件核心組件的源代碼，最主要原因是CloudFoundry開源戰(zhàn)略成功驅(qū)動(dòng)，部署大數(shù)據(jù)戰(zhàn)場(chǎng)。

Palantir——神秘&多金

2015年7月起Palantir開始發(fā)起新一輪融資，達(dá)到8.8億美元，截止目前已經(jīng)共計(jì)融資23.2億美元，公司估值200億美元，排名世界第四，僅次于Uber。

Palantir是一家位于加州的大數(shù)據(jù)科技公司。該公司的技術(shù)是在海量信息之間建立聯(lián)系、尋求有價(jià)值的線索，為情報(bào)機(jī)構(gòu)提供結(jié)論：在摩根大通內(nèi)部用于定位網(wǎng)絡(luò)欺詐，在橋水聯(lián)合基金，Palantir被用來管理1570億美元的投資基金。該公司曾經(jīng)幫助美國(guó)政府追蹤基地組織頭目奧薩馬·本·拉登。由于其主要客戶是政府機(jī)構(gòu)，外界對(duì)它的內(nèi)部狀況了解不多。

DBaaS——火爆

隨著Oracle12cR2的推出，甲骨文以全新的多租戶架構(gòu)開啟了DBaaS（Database-as-a-Service，數(shù)據(jù)庫(kù)即服務(wù)）新時(shí)代，新的數(shù)據(jù)庫(kù)讓企業(yè)可以在單一實(shí)體機(jī)器中部署多個(gè)數(shù)據(jù)庫(kù)。在2015年，除了趨勢(shì)火爆，12c多租戶也在運(yùn)營(yíng)商、電信等行業(yè)投入生產(chǎn)應(yīng)用。

據(jù)分析機(jī)構(gòu)Gartner預(yù)測(cè)，2012年至2016年公有數(shù)據(jù)庫(kù)云的年復(fù)合增長(zhǎng)率將高達(dá)86%，而到2019年數(shù)據(jù)庫(kù)云市場(chǎng)規(guī)模將達(dá)到140億美元。與傳統(tǒng)數(shù)據(jù)庫(kù)相比，DBaaS能提供低成本、高敏捷性和高可擴(kuò)展性等云計(jì)算特有的優(yōu)點(diǎn)。

數(shù)據(jù)科學(xué)家——性感

隨著行業(yè)的發(fā)展，人才顯得尤為重要，各公司都期待數(shù)據(jù)科學(xué)專業(yè)人才能夠挖掘數(shù)據(jù)信息，來幫助公司開源節(jié)流。美國(guó)招聘網(wǎng)站Glassdoor的報(bào)告稱，數(shù)據(jù)科學(xué)家的平均年薪為118709美元（約合人民幣737550元），而程序員的平均年薪為64537美元（約合人民幣400974元）。

數(shù)據(jù)科學(xué)家能夠通過統(tǒng)計(jì)變成涉及、開發(fā)和調(diào)用算法而支持業(yè)務(wù)決策；管理海量數(shù)據(jù)；可視化數(shù)據(jù)以輔助理解。其需要具備三項(xiàng)基本技能：數(shù)學(xué)/統(tǒng)計(jì)、計(jì)算機(jī)能力、在特定業(yè)務(wù)領(lǐng)域的知識(shí)，被《哈佛商業(yè)評(píng)論》評(píng)委二十一世紀(jì)最性感的職業(yè)。