如何為企業(yè)選擇合適的數據集成工具？

企業(yè)產生和收集的數據量日漸增長，隨之而來的是對這些數據進行集成需求的增長，可以幫助IT團隊簡化并管理這一流程的數據集成軟件應運而生。但是產品類型如此豐富，對你的企業(yè)來說哪些數據集成工具才是最佳之選呢?選擇這類產品并非要挑那些擁有豐富功能的，而是要選擇與你的集成需求和企業(yè)特質最為適配的產品。

在對數據集成平臺評估之前，要在企業(yè)內部進行調查來協(xié)助產品選擇過程。你的調查應該涵蓋下列主題：

源系統(tǒng)。企業(yè)擁有多少源系統(tǒng)?是否擁有重疊系統(tǒng)，例如多重CRM或是銷售處理應用程序?除了傳統(tǒng)結構化數據，是否存在非結構化或半結構化數據?除了內部數據源，是否存在外部數據源?數據量和更新頻率又如何呢?

集成用例。企業(yè)需要為分析而進行數據集成么——主要通過數據倉庫?應用程序集成又是怎樣呢?你所在的企業(yè)需要為主數據管理(MDM)獲取和處理數據么?在本地系統(tǒng)和云應用程序或物聯網設備間同步數據又是如何呢?亦或是在本企業(yè)以及其他企業(yè)的內部業(yè)務流程和應用程序間交換數據?需要為復雜事件處理和流處理應用程序捕獲并交付數據么?在不遷移至中央數據存儲的情況下，是否需要將來自幾乎完全不同系統(tǒng)的數據進行集成呢?

企業(yè)規(guī)模。你所在企業(yè)的年收入怎樣，擁有多少員工，對于數據集成的IT預算有多少?

資源和技術。企業(yè)是否擁有專門的IT資源來執(zhí)行數據集成工作?對于使用數據集成工具以往的經驗水平如何?

在你回答了這些問題之后，就可以瀏覽以下十大數據集成產品來探尋哪一款與你的需求和特點最為匹配了。

針對大型企業(yè)的數據集成產品

大型企業(yè)通常具有以下特點：

不同的源系統(tǒng)集總是與高數據量相伴而生的。結構化數據居于主導地位，但是像社交媒體，網頁服務器日志和平面文件，還有如XML和面向消息數據的半結構化數據源同樣需要進行集成。

多種集成用例。

足夠的IT預算來購買任何可用數據集成工具和必要的支持基礎設施。

專門的IT團隊，這些團隊擁有數據集成專家或是有預算雇用那些在使用給定數據集成工具上有豐富經驗的員工和顧問。

符合上述特征的大型企業(yè)應該考慮用Informatica PowerCenter和IBM InfoSphere Information Server來進行數據集成，因為這些產品對集成用例進行了全方位的解決。這兩款產品還提供可擴展性以處理大型企業(yè)對數據復雜性，數據量和速度的要求，而且還能跨多個項目使用，并用于任意規(guī)模的團隊。IBM和Informatica都提供MDM和數據清理功能。IBM的產品解決了信息分析和管理的需求，而Informatica則專注于信息集成。但是這些強大的工具價格不菲。除了它們通常要比競爭對手的產品貴出許多之外，它們還要求使用者有更為豐富的技能和經驗。此外，比起競爭對手，它們通常還要求有更大量的基礎設施和更復雜的實現。

多年來，很多IBM和Informatica的競爭對手顯著地提高了它們產品的功能和特性，這為大型企業(yè)提供了更多的選擇，對于那些在數據集成上有更少要求的企業(yè)尤為如此。來自SAP，Oracle和SAS的數據集成工具解決了大量數據源和數據集成的用例。這些公司同樣提供企業(yè)級應用程序，如尤其是在大型企業(yè)使用廣泛的企業(yè)資源計劃，CRM和分析應用等，而且它們也將自己的數據集成工具用在這些應用程序上。如果一家企業(yè)在上述任意公司的應用程序上有巨大投入，那么將該廠商的數據集成工具納入考慮范疇也是理所應當的。

SAP Data Services和SAS Data Management Platform都對大型企業(yè)的數據集成功能提供廣泛的支持。雖然SAP Data Services僅限于和SAP的業(yè)務應用程序協(xié)同工作，但是它正變得與該公司軟件組合集成的更加緊密。這就意味著已經是SAP客戶的企業(yè)就需要考慮使用這一集成產品了。同樣，正在使用SAS統(tǒng)計和分析產品的客戶則應該將SAS Data Management Platform納入考量。

針對有深入集成需求的中型企業(yè)的工具

中型企業(yè)通常具有以下特點：

各種源系統(tǒng)用于處理重疊數據對象，而這些數據對象可能是在本地也可能是在云端。數據量會因行業(yè)或是所提供的產品和服務的不同而不同。結構化數據源仍占主導地位，而且任何需要進行集成的非結構化數據通常有范圍限制。

如果將來數據倉儲得以解決，雖然應用程序集成可能甚囂塵上，但是提取，轉換和加載(ETL)以及數據倉庫還是主要的集成用例。

IT預算有限。

小規(guī)模的IT團隊來執(zhí)行數據集成工作和商業(yè)智能開發(fā)。針對特定工具招聘專家在財政上可能不具備可行性。

雖然有以上特點的中型企業(yè)有著顯著的集成需求，但是他們在人力、財力和時間上的可操作資源是有限的。這些公司應該考慮來自Microsoft，Oracle，Information Builders，Talend和Pentaho的數據集成產品。對于在這些企業(yè)中常見的數據多樣性，集成范圍和資源限制等問題，這些工具都提供了解決方案。

對于擁有資深SQL經驗開發(fā)人員且正在使用Microsoft SQL Server的企業(yè)來說，應該考慮Microsoft數據相關的產品，如SQL Server Integration Services(SSIS)。這些工具共享了一個公共開發(fā)方法，這可以讓IT人員更加有效的與多種Microsoft工具協(xié)同工作。Microsoft一直在對SSIS的功能進行擴展以處理更為復雜的集成用例，例如緩慢改變維度和模糊查詢，以及平面數據和關系型數據庫之外的各種數據源。雖然Microsoft的源和目標不僅限于其自己的平臺，但是部署仍然限制為Windows。Microsoft的工具歷來都是在本地的，但是該公司已經在將相關功能遷移至云端方面取得了顯著進步。而不利的一面是SSIS缺乏其競爭對手所擁有的強大的集成轉換，工作流和流程管理，例如使用存儲庫和基于團隊的開發(fā)管理功能來進行追蹤和管理流程的能力。

與Microsoft類似，那些當前正在使用Oracle數據庫的企業(yè)可能會希望考慮Oracle Data Integrator。ODI是一款強大的數據和應用程序集成工具，它能夠處理各種數據源和集成用例，包括BI，MDM和應用程序集成;它還支持數據量和速度方面的可擴展性。雖然該產品有大量可供使用的功能，但是它總是用來自動執(zhí)行SQL腳本。ODI確實需要足夠的培訓才能應對其略顯復雜的實施。雖然該產品對接各種各樣Oracle產品進行工作的能力擴展了其功能，但是它也增加了其部署的復雜性，這讓其很難用于資源有限的IT人員。

Information Builders的iWay Integration Suite能夠處理諸如MDM,數據清理和數據治理之類復雜的集成用例。當一家企業(yè)正在使用Information Builders的其他信息產品時，應該將iWay納入考慮范疇，因為它提供了與那些產品緊密的集成。這些工具因其可擴展性和在操作系統(tǒng)上可實時工作的能力而聞名。但它也有一個缺點：該產品相關的專業(yè)知識和經驗較為有限。

Talend和Pentaho的同名數據集成工具同樣能夠處理各種集成用例。兩款產品都有開源版本，這可以讓IT團隊避免任何預先許可的成本。它們的開源版本提供固定數據集成功能，對于那些沒有主動要求集成需求的企業(yè)和預算緊縮的IT團隊來說，這再適合不過了。而它們公司產品的企業(yè)版本則提供很明顯更加強大的功能。

小企業(yè)要進行集成需要哪些考量

小企業(yè)通常具有以下特點：

以結構化數據源為主的各種源系統(tǒng)。

集成用例為ETL和數據倉庫。

IT預算非常有限。

在諸如數據集成，BI和操作系統(tǒng)等領域IT人手捉襟見肘。

這些企業(yè)可能需要考慮那些基于他們已有數據庫的數據集成工具——也就是Oracle或Microsoft——或是來自Talend和Pentaho的產品。這些工具是物有所值的，因為SSIS捆綁了SQL Server，而Talend和Pentaho的開源版本則提供比很多企業(yè)所需更多的數據集成功能。注意，小型企業(yè)應該確保他們的IT部門擁有足夠的專業(yè)知識來有效利用這些工具。

針對具有有限集成需求的小企業(yè)的工具

這些企業(yè)主要是直接從他們的源系統(tǒng)做業(yè)務報告而且不會創(chuàng)建數據倉庫來對那些源系統(tǒng)進行集成。在這種情況下，這些企業(yè)通常是不會對大數據集成工具和IT技術進行投資的。相反，IT會依賴現有應用程序捆綁的東西或是自定義SQL代碼。如果業(yè)務用戶需要來自多個應用程序的數據做報告，他們會依賴構建在操作應用程序中的報告并使用電子表格來填補空白。

隨著數據量的持續(xù)增長，對于數據集成和將這些數據轉換成相關信息來生成可行見解的需求也水漲船高。希望該系列文章所提供的信息能夠幫助你在購買數據集成工具的時候做出更為明智的選擇。