大數(shù)據(jù)圈盤點(diǎn)：你不知道的15個(gè)新技術(shù)

對(duì)于大數(shù)據(jù)來說，業(yè)界這幾周算是比較忙碌的。因?yàn)楹芏喑鮿?chuàng)公司和一些老牌的公司都推出了數(shù)據(jù)分析和數(shù)據(jù)管理產(chǎn)品，以及更新了現(xiàn)有產(chǎn)品，提供更豐富的功能與性能。

雖然這些技術(shù)都還只是藍(lán)圖規(guī)劃，但是一些常見的主題還是對(duì)其貫穿始終：為用戶提供簡(jiǎn)單的獲得數(shù)據(jù)的訪問方式，更好的管理大規(guī)模數(shù)據(jù)以及預(yù)先分析的功能，例如Spark、HAWQ 和 Geode等新興的大數(shù)據(jù)技術(shù)來實(shí)現(xiàn)更多的功能。

下面一起來看看吸引眼球的十五項(xiàng)大數(shù)據(jù)公告。雖然羅列了很多，但還不是全部?jī)?nèi)容，只是最近在加利福尼亞州圣何塞市Strata + Hadoop World大會(huì)上亮相的部分技術(shù)。

Altiscale Insight Cloud

Altiscale作為大數(shù)據(jù)服務(wù)的提供者，最近推出了Altiscale Insight Cloud產(chǎn)品，是一個(gè)自主服務(wù)型的數(shù)據(jù)分析服務(wù)產(chǎn)品，能夠幫助業(yè)務(wù)分析人員使用BI工具等類似于Tableau和Excel的產(chǎn)品，實(shí)現(xiàn)快速的數(shù)據(jù)湖查詢，而不需要IT部門投入過多的精力參與。

Altiscal Insight Cloud可以驅(qū)動(dòng)SQL查詢、動(dòng)態(tài)可視化、實(shí)時(shí)儀表板和其他報(bào)告及分析能力。它不再因?yàn)榫酆蠑?shù)據(jù)而需要一個(gè)單獨(dú)的關(guān)系數(shù)據(jù)存儲(chǔ)，繞過了價(jià)格昂貴的、專屬的數(shù)據(jù)庫(kù)系統(tǒng)。

Altiscale還與Tableau建立了一個(gè)戰(zhàn)略聯(lián)盟，能夠讓Altiscale客戶通過使用Tableau的數(shù)據(jù)可視化軟件與Altiscale服務(wù)結(jié)合的產(chǎn)品，而實(shí)現(xiàn)數(shù)據(jù)發(fā)現(xiàn)的應(yīng)用服務(wù)。

AtScale Intelligence Platform 4.0

AtScale軟件提供了一種使用流行的商業(yè)智能工具的方法，包括Tableau和Qlik，可以訪問存儲(chǔ)在Hadoop集群中的數(shù)據(jù)。該軟件創(chuàng)建了Hadoop和第三方工具之間的語(yǔ)義層級(jí)，從本上來說，通過聯(lián)機(jī)分析處理服務(wù)器而實(shí)現(xiàn)多維分析的方法。

4.0版本提供了多達(dá)100項(xiàng)的新功能和系統(tǒng)改進(jìn)，其中許多都與企業(yè)的安全和性能有關(guān)。

新AtScale Hybrid Query Service（AtScale混合查詢服務(wù)），是可以在本地實(shí)現(xiàn)支持SQL和MDX查詢語(yǔ)言的商業(yè)智能工具。由于許多企業(yè)和組織在其整個(gè)組織中使用多種BI工具，所以說AtScale對(duì)于SQL和MDX的支持也就意味著這些企業(yè)不需要在其用戶的電腦中下載新的客戶端軟件或者自定義驅(qū)動(dòng)了。

BlueData EPIC Spring Release

BlueData EPIC是一個(gè)大數(shù)據(jù)即服務(wù)平臺(tái)，旨在減少實(shí)施大數(shù)據(jù)技術(shù)的復(fù)雜性，例如Hadoop 和Spark。

EPIC發(fā)布的春季版本中提供了幾十種的新性能和功能改進(jìn)，包括在多租戶部署中提高服務(wù)的安全性和服務(wù)質(zhì)量。該清單包括更多的顆粒資源管理控制、基于QoS的分配、性能優(yōu)化和用于多租戶部署的配額執(zhí)行功能。

新版本還支持更大范圍的大數(shù)據(jù)的應(yīng)用程序和工具，包括用于數(shù)據(jù)管理和安全管理的Cloudera Navigator以及Ranger，用于大規(guī)模并行處理分析的HAWQ，以及Geode、Cassandra和用于實(shí)時(shí)分析的Kafka。

Domo商務(wù)云

Domo 商務(wù)云是一個(gè)對(duì)于商務(wù)管理應(yīng)用的生態(tài)系統(tǒng)，包括免費(fèi)和付費(fèi)的預(yù)包裝，為企業(yè)決策者提供數(shù)據(jù)、見解和訪問的支持，以及所有可以幫助找到商務(wù)問題的答案，甚至是特定行業(yè)和特定角色中。該公司提供云計(jì)算的免費(fèi)版本，如果用戶需要存儲(chǔ)更多的數(shù)據(jù)或者獲取更先進(jìn)的企業(yè)功能，例如行政管制得話需要另行付費(fèi)。

Domo最近還推出了應(yīng)用商店，帶有1000多個(gè)商務(wù)管理應(yīng)用以擴(kuò)張商務(wù)云系統(tǒng)，并開始了Domo應(yīng)用發(fā)布合作伙伴計(jì)劃，為第三方獨(dú)立軟件開發(fā)商開發(fā)商務(wù)云軟件。

Domo 同時(shí)還推出了Buzz，是與商務(wù)云一起工作的社交協(xié)作平臺(tái)，以及允許商務(wù)云訪問任何移動(dòng)設(shè)備的Domo Mobile產(chǎn)品。

Kyvos Insights With Azure HDInsight

Kyvos Insights的旗艦產(chǎn)品運(yùn)行在Hadoop系統(tǒng)上，并允許企業(yè)用戶通過可視化，探索和分析的存儲(chǔ)在Hadoop中大數(shù)據(jù)的可大規(guī)模擴(kuò)展的聯(lián)機(jī)分析處理（OLAP）系統(tǒng)。

該Kyvos軟件現(xiàn)在與Azure的HDInsight協(xié)同工作，微軟基于云計(jì)算的Hadoop的平臺(tái)，可以幫助Azure HDInsight用戶通過部署Kyvos從而實(shí)現(xiàn)分析任務(wù)。

IBM云數(shù)據(jù)服務(wù)的Looker Blocks

Looker為基于Web的商業(yè)智能平臺(tái)提供了訪問駐留在數(shù)據(jù)庫(kù)中或者云中的數(shù)據(jù)。去年，該公司推出了被稱為L(zhǎng)ooker Blocks的可復(fù)用、可定制的業(yè)務(wù)邏輯組件，可以創(chuàng)建完整的業(yè)務(wù)分析查詢功能。

Looker與IBM合作開發(fā)了一套Looker Blocks組件，通過利用IBM的云數(shù)據(jù)服務(wù)實(shí)現(xiàn)更加簡(jiǎn)化和可定制的數(shù)據(jù)分析服務(wù)。根據(jù)這兩家公司所稱，該組合將允許客戶在數(shù)天內(nèi)部署一個(gè)完整的數(shù)據(jù)平臺(tái)。

MapD Technologies GPU-Powered Database

MapD Technologies推出了新的數(shù)據(jù)庫(kù)和可視化分析軟件,利用圖形處理單元芯片幫助數(shù)據(jù)分析師交互式地探索大型數(shù)據(jù)集。

通過利用GPU的強(qiáng)大動(dòng)力，數(shù)據(jù)庫(kù)可以在每臺(tái)服務(wù)器將近4000個(gè)核上并行查詢，比領(lǐng)先的內(nèi)存數(shù)據(jù)庫(kù)提供更快的性能。使用帶有MapD Immerse分析前端工具的數(shù)據(jù)庫(kù)可以更快的處理復(fù)雜數(shù)據(jù)庫(kù)的可視性問題。（例如政治捐款，在此地圖上就可以看到數(shù)據(jù)）。

MemSQL 5

MemSQL開發(fā)了其同名的數(shù)據(jù)庫(kù)，用于事務(wù)處理和實(shí)時(shí)分析。在該公司公布的最新版本MemSQL 5中，提供了一系列的新技術(shù)和增強(qiáng)的功能，以提高軟件的數(shù)據(jù)庫(kù)、數(shù)據(jù)倉(cāng)庫(kù)和流媒體的工作負(fù)載性能。

在新版本中，通過混合的事務(wù)處理或者分析處理將事務(wù)和分析合并成一個(gè)單一的數(shù)據(jù)庫(kù)，以支持OLTP和OLAP查詢。用戶可以在大量的寫入負(fù)載中實(shí)現(xiàn)實(shí)時(shí)查詢。借助于可插拔的認(rèn)證模塊以及類似于Kerberos的工具提高了安全性。用戶可以通過使用MemSQL Streamliner來部署Apache Spark，創(chuàng)建了用戶可視化界面的實(shí)時(shí)數(shù)據(jù)管道，同時(shí)消除了批量的ETL任務(wù)。

Paxata Spring ’16 Release

Paxata的自適應(yīng)數(shù)據(jù)準(zhǔn)備平臺(tái),建立在Apache Spark之上，運(yùn)行在最優(yōu)化的Hadoop環(huán)境中,提供了數(shù)據(jù)集成、數(shù)據(jù)質(zhì)量、語(yǔ)義豐富、協(xié)作和管理能力。

新版本提高了軟件的能力，通過先進(jìn)filtergrams綜合數(shù)據(jù)分析，跨越列寬數(shù)據(jù)集的細(xì)粒度搜索，對(duì)于數(shù)據(jù)發(fā)現(xiàn)與統(tǒng)計(jì)選項(xiàng)的新的選擇，以及在Hadoop壓縮文件下集成復(fù)雜的嵌套JSON/XML數(shù)據(jù)，為用戶提供了連接信息的能力。

該版本還包括新的IT控制，以提高系統(tǒng)的管理、安全性和規(guī)模。

Platfora Big Data Discovery 5.2

Platfora是一個(gè)很大的數(shù)據(jù)發(fā)現(xiàn)平臺(tái),建立本地的Apache Hadoop 和Spark。最新的版本”democratizes（民主化）”大數(shù)據(jù)，使其更容易使用現(xiàn)有的商業(yè)智能工具來訪問Hadoop數(shù)據(jù)。

新版本提供了本地Tableau直接出口，用以準(zhǔn)備和豐富數(shù)據(jù)集成的Tableau (畫面數(shù)據(jù)提取)數(shù)據(jù)到Tableau桌面和Tableau服務(wù)器中。其他前端BI工具可以通過lens-accelerated SQL訪問Platfora數(shù)據(jù),通過SparkSQL和ODBC處理查詢。

Platfora5.2也直接運(yùn)行在Hadoop集群上，除了傳統(tǒng)的專用配置外，可以助其更容易地利用現(xiàn)有的硬件，并重新調(diào)整計(jì)算資源。用于數(shù)據(jù)可視化的Platfora Vizboard已經(jīng)得到增強(qiáng)，能夠”更加智能化”的默認(rèn)可視化效果。

Ryft One Cluster

Ryft系統(tǒng)開發(fā)的硬件/軟件設(shè)備,使用FPGA的并行處理能力處理器加速了tb和pb級(jí)別的數(shù)據(jù)分析能力。

新版的Ryft One Cluster使用帶有開放API接口的混合FPGA / x86計(jì)算架構(gòu),該公司表示，這可以實(shí)現(xiàn)以100倍的速度加速大數(shù)據(jù)生態(tài)系統(tǒng)的發(fā)展，同時(shí)降低70%的成本。

新系統(tǒng)擴(kuò)展了數(shù)據(jù)分析性能和存儲(chǔ)線性，處理分析速度達(dá)到每秒200GB以上。它可以作為一個(gè)獨(dú)立的群集或作為現(xiàn)有的Apache Spark系統(tǒng)或其他大數(shù)據(jù)生態(tài)系統(tǒng)的一部分工作。

Tableau 9.3

Tableau公布了Tableau 9.3全面上市，在最新的版本中，其最受歡迎的數(shù)據(jù)可視化軟件可以永久地連接桌面功能和Snowflake Elastic Data數(shù)據(jù)倉(cāng)庫(kù)。

Tableau Desktop 的”一直連接”功能可以更容易的與他人分享結(jié)果，同時(shí)留存在流動(dòng)的分析過程中。該軟件的全球地圖覆蓋功能獲得了顯著地提升，新數(shù)據(jù)添加到了地址解析數(shù)據(jù)庫(kù)和Tableau Map Service中。

在9.3版本中，本地連接到本機(jī)連接到Snowflake Computing的云數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)更易于Tableau用戶執(zhí)行簡(jiǎn)單和復(fù)雜數(shù)據(jù)探索和分析。這兩家公司還將繼續(xù)合作，幫助客戶將他們的業(yè)務(wù)分析過程轉(zhuǎn)移到云端。

Talena ActiveRx

Telena的軟件是用于在測(cè)試和開發(fā)、備份和恢復(fù)、歸檔和法規(guī)遵從和災(zāi)難恢復(fù)系統(tǒng)中優(yōu)化數(shù)據(jù)。

Talena最近推出了ActiveRx，是一款新的預(yù)測(cè)分析軟件，它采用機(jī)器學(xué)習(xí)算法和數(shù)據(jù)可視化，以更好地管理大數(shù)據(jù)的管理工作負(fù)載，和更準(zhǔn)確地預(yù)測(cè)數(shù)據(jù)的可用性。

ActiveX軟件還提供了”驅(qū)動(dòng)副本分析”功能，企業(yè)可以用它來把閑置的備份數(shù)據(jù)轉(zhuǎn)換成有用的資產(chǎn)。

Tamr Apache Spark Compatibility

Tamr的數(shù)據(jù)統(tǒng)一平臺(tái)擁有豐富的企業(yè)的數(shù)據(jù) ，匯聚了從企業(yè)內(nèi)部和外部的數(shù)百甚至數(shù)千數(shù)據(jù)源進(jìn)行分析。

Tamr宣布其軟件可與Apache Spark兼容，其內(nèi)存處理引擎可用于擴(kuò)展機(jī)器學(xué)習(xí)，Tamr表示，其補(bǔ)充了機(jī)器驅(qū)動(dòng)方式以備企業(yè)數(shù)據(jù)之需。

Tamr也在開發(fā)開放的接口和核心組件來支持由Spark驅(qū)動(dòng)的數(shù)據(jù)監(jiān)護(hù)系統(tǒng)。

Trifacta Photon

Trifacta開發(fā)了”數(shù)據(jù)爭(zhēng)論”軟件,揭開了光子計(jì)算框架,新技術(shù)的核心用戶界面,在大規(guī)模的內(nèi)存數(shù)據(jù)集時(shí)為用戶提供了豐富的交互式數(shù)據(jù)探索和轉(zhuǎn)型的經(jīng)驗(yàn)。

數(shù)據(jù)爭(zhēng)論是原始數(shù)據(jù)的轉(zhuǎn)化過程，將復(fù)雜的數(shù)據(jù)轉(zhuǎn)換成清潔的，結(jié)構(gòu)化的數(shù)據(jù)轉(zhuǎn)化成可分析的，這是數(shù)據(jù)分析過程中最具有挑戰(zhàn)性的一個(gè)部分。

Photon產(chǎn)品符合Apache Arrow內(nèi)存數(shù)據(jù)架構(gòu)的說明要求，在與數(shù)據(jù)內(nèi)容交互的時(shí)候?yàn)橛脩籼峁┝思磿r(shí)的反饋。Photon 引擎在更高水平的計(jì)算中實(shí)現(xiàn)更多的數(shù)據(jù)探索。