大數(shù)據(jù)如何“智”領(lǐng)革新_數(shù)據(jù)分析師培訓(xùn)

每天，上百萬兆字節(jié)數(shù)據(jù)通過全世界各個角落的傳感器、移動設(shè)備和社交網(wǎng)絡(luò)噴涌而出；每個月，10 億條 Twitter 信息和300 億條 Facebook 信息催生網(wǎng)絡(luò)擁堵_——在如今這個“大數(shù)據(jù)”時代，一顆“數(shù)據(jù)炸彈”已經(jīng)引爆！

IBM在 2011 年度信息隨需應(yīng)變論壇（Information on Demand Forum，簡稱IOD論壇）上宣布推出全新的面向不同工作場景的大數(shù)據(jù)管理和分析軟件及解決方案，可覆蓋從移動設(shè)備、數(shù)據(jù)中心，到IBM SmartCloud 云計算平臺等多個平臺；憑借其處理不同種類大數(shù)據(jù)和進(jìn)行商業(yè)分析的技術(shù)能力，這些軟件和解決方案能夠幫助廣大客戶從容應(yīng)對大數(shù)據(jù)時代的挑戰(zhàn)。值得一提的是，IBM還同期在蘋果iTunes Store上推出免費應(yīng)用軟件（App）下載，幫助廣大金融服務(wù)、衛(wèi)生、政府、傳媒、營銷傳播、零售以及旅游運輸?shù)戎匾袠I(yè)的專業(yè)人士隨時隨地進(jìn)行商業(yè)分析，并從中獲取價值。

IBM全球高級副總裁兼軟件集團(tuán)及系統(tǒng)與科技部總經(jīng)理Steve Mills 先生表示：“在‘大數(shù)據(jù)’時代，企業(yè)和機(jī)構(gòu)面臨諸多挑戰(zhàn)：如何高效集成軟件、硬件、解決方案等各種現(xiàn)有資源，更為有效地處理迅速激增數(shù)據(jù)？如何利用分析預(yù)測商業(yè)趨勢、獲取深刻洞察，從而把握激烈競爭中的主動權(quán)？如何簡化流程、降低成本，通過最為便捷快速的方式創(chuàng)造最大價值？在這個瞬息萬變的時代，新技術(shù)的出現(xiàn)不斷帶來新的可能性——我們相信，IBM此次推出的全新大數(shù)據(jù)管理和分析軟件及解決方案就是為客戶帶來全新可能性、制勝‘大數(shù)據(jù)’時代的前沿技術(shù)?！?/span>

IBM：積極推進(jìn)“大數(shù)據(jù)”時代革新

這是一個不折不扣的“大數(shù)據(jù)”時代：每天，遍布世界各個角落的傳感器、移動設(shè)備、在線交易和社交網(wǎng)絡(luò)生成上百萬兆字節(jié)的數(shù)據(jù)；每個月，人類發(fā)布 10 億條 Twitter 信息和300 億條 Facebook 信息；據(jù)統(tǒng)計，全球 90% 的數(shù)據(jù)都是在過去兩年中生成的；而全世界在用的移動設(shè)備共計共有一萬億臺，預(yù)計到 2016 年，全球的移動商務(wù)市值將達(dá)到310 億美元。在信息爆炸時代，不同規(guī)模的企業(yè)和機(jī)構(gòu)都在奮力追趕“大數(shù)據(jù)”發(fā)展的速率和步伐，期待通過對大數(shù)據(jù)的有效運用，改善自身的產(chǎn)品和服務(wù)，從而提升客戶和受眾的體驗。

2011 年的《IBM - 麻省理工斯隆管理學(xué)院評論》（IBM/MIT Sloan Management Review）顯示：在對全球 100 個國家及地區(qū)從事 30 個行業(yè)的 3000 名高管進(jìn)行的調(diào)查中，有60% 的受訪者表示無法有效利用所有數(shù)據(jù)。而近期 IBM 對 64 個國家及地區(qū)從事 19 個行業(yè)的 1700 名首席營銷官開展的最新調(diào)查更是進(jìn)一步體現(xiàn)了出這個問題的嚴(yán)峻性：調(diào)查結(jié)果顯示，71% 的首席營銷官表示他們的企業(yè)沒有做好充分準(zhǔn)備來應(yīng)對數(shù)據(jù)的大爆炸。

為了幫助企業(yè)應(yīng)對這些挑戰(zhàn)，IBM 推出了全新的信息管理、業(yè)務(wù)分析產(chǎn)品以及技術(shù)資源，方便用戶輕松探索和利用大數(shù)據(jù)：

? 全新的云端 Hadoop 分析軟件InfoSphere BigInsights可以在 30 分鐘內(nèi)安裝完畢、投入運行。新軟件能幫助員工挖掘大量來自社交網(wǎng)絡(luò)、移動設(shè)備和傳感器等不同來源的非結(jié)構(gòu)化數(shù)據(jù)；

? 針對 iPad 用戶推出的全新移動分析應(yīng)用軟件Cognos Mobile可以隨時發(fā)現(xiàn)和搜索到任何類型的數(shù)據(jù)，并具備定位分析功能；

? 擁有映射功能的全新預(yù)測分析軟件SPSS Statistics 20.0可應(yīng)用于眾多行業(yè)，特別是對市場營銷活動、零售店分配、犯罪預(yù)防和學(xué)術(shù)評估進(jìn)行分析預(yù)測；

? 全新InfoSphere Information Server 8.7可在后臺篩選所有類型數(shù)據(jù)，并按照數(shù)據(jù)質(zhì)量級別進(jìn)行排列，有效維護(hù)數(shù)據(jù)安全，為商業(yè)決策提供可靠依據(jù)；

云端大數(shù)據(jù)分析：InfoSphere BigInsights

在 IBM SmartCloud Enterprise 企業(yè)云計算平臺上運行的 IBM InfoSphere BigInsights 使客戶機(jī)構(gòu)內(nèi)部的任何用戶均可訪問大數(shù)據(jù)分析功能。與本地版本一樣，云端版 BigInsights 既可以分析數(shù)據(jù)庫中的傳統(tǒng)結(jié)構(gòu)化數(shù)據(jù)，也可以分析例如文本、視頻、音頻、圖像、社交媒體、點擊流、日志文件、天氣數(shù)據(jù)等非結(jié)構(gòu)化數(shù)據(jù)，幫助決策者根據(jù)數(shù)據(jù)迅速采取行動。將大數(shù)據(jù)分析帶上云端，就意味著客戶即便沒有任何 Hadoop 技能，不用安裝、運行或維護(hù)硬件和軟件，也可以捕捉和分析任何數(shù)據(jù)。

云端版 BigInsights 提供基礎(chǔ)版和企業(yè)版，并且可以選擇公共、私有和混合云進(jìn)行部署。其中，BigInsight的基礎(chǔ)版是一款免費的入門級產(chǎn)品，可幫助用戶了解如何進(jìn)行大數(shù)據(jù)分析，包括使用 BigSheets 組件進(jìn)行“假設(shè)”（What If）的情景分析。做好準(zhǔn)備后，客戶可以無縫遷移至企業(yè)版，在半個小時內(nèi)內(nèi)設(shè)置 Hadoop 群集，并開始分析數(shù)據(jù)。這兩個版本都包括開發(fā)人員測試環(huán)境，客戶可使用該測試環(huán)境開發(fā)出新一代商業(yè)分析應(yīng)用程序以及相關(guān)工具和測試開發(fā)環(huán)境。

如今，銀行、保險、零售、傳播和數(shù)字化娛樂業(yè)的市場領(lǐng)先企業(yè)都在使用基于云的BigInsights對大量非結(jié)構(gòu)化數(shù)據(jù)進(jìn)行分析。這些行業(yè)用戶通過分析來自社交網(wǎng)絡(luò)、傳感器、移動設(shè)備、日志文件以及聲音和視頻系統(tǒng)的數(shù)據(jù)，了解消費者的意見，同時確保運算網(wǎng)絡(luò)和智能網(wǎng)格的安全性，開發(fā)出全新的客戶體驗程序。

希望拓展 Hadoop 技能的 IT 專業(yè)人士和學(xué)生還可以利用 IBM 推出的新網(wǎng)站 BigDataUniversity.com，了解 Hadoop、流式計算、開源軟件開發(fā)的基礎(chǔ)知識，同時學(xué)習(xí)到數(shù)據(jù)庫管理技巧，從而為其儲備更多成為數(shù)據(jù)科學(xué)家的知識和經(jīng)驗。網(wǎng)站上有數(shù)百個簡單易用的教程、視頻和編碼練習(xí)，適于培養(yǎng) Hadoop、BigInsights、DB2 和 WebSphere 的相關(guān)技能，大多數(shù)課程為免費提供。目前，已經(jīng)有來自巴西、俄羅斯、中國、印度、韓國、南非和美國等全球各地的國家的 8000 余名學(xué)生在網(wǎng)站注冊。

隨時隨地進(jìn)行分析：Cognos Mobile

IBM 憑借iPad版 IBM Cognos Mobile 拓展了對移動設(shè)備的支持，繼續(xù)為新時代的專業(yè)人是提供更為先進(jìn)的業(yè)務(wù)分析技術(shù)。用戶目前可以在蘋果iTunes Store（http://bit.ly/r68A04）免費獲取。該應(yīng)用可支持移動工作者隨時離線或在線進(jìn)行商業(yè)分析，無需因為地域的變化而中斷工作。iPad 用戶可以因此享受豐富的商業(yè)情報可視化體驗，分析報表、儀表盤和記分卡上銷售、用戶和財務(wù)數(shù)據(jù)在內(nèi)的各類業(yè)務(wù)數(shù)據(jù)。

這種全新移動應(yīng)用能夠幫助金融服務(wù)、衛(wèi)生、政府、傳媒、營銷傳播、零售以及旅游運輸?shù)戎匾袠I(yè)的專業(yè)人士隨時隨地進(jìn)行商業(yè)分析，并從中受益。例如，醫(yī)療工作者可利用其分析電子病歷，向患者展示個性化治療計劃并根據(jù)分析結(jié)果制定醫(yī)療步驟；社會工作者可以查看全市寄養(yǎng)家庭兒童的健康和生活質(zhì)量，并實時向監(jiān)督員、警察和法院提供有關(guān)其狀況的更新信息；銀行人員和保險代理人則可以將軟件用于分析貸款或政策數(shù)據(jù)，以便為客戶創(chuàng)建定制化的產(chǎn)品或服務(wù)。

辛辛那提動物園是全美歷史最悠久的動物園之一，每年接待游客達(dá)120多萬。利用 iPad 版 Cognos，辛辛那提動物園實現(xiàn)了管理平臺即時訪問功能，并通過游客和商務(wù)信息單一視圖開辟新財源、增加會員游覽次數(shù)。移動商務(wù)分析的靈活性使管理人員得以將游客數(shù)據(jù)和園內(nèi)銷售數(shù)據(jù)集中到 iPad 上，在園區(qū)內(nèi)任意地點進(jìn)行訪問，以便跟蹤游客購買數(shù)據(jù)并據(jù)此調(diào)整營銷模式和資金投入。通過使用 Cognos 軟件，辛辛那提動物園在今年成功將游客的園內(nèi)消費提升了25%。

將預(yù)測性分析融入地圖：SPSS Statistics 20.0

在今年IOD論壇上，IBM 還宣布推出一款用于支持企業(yè)及組織獲取地理數(shù)據(jù)的情報預(yù)測新軟件SPSS Statistics 20.0。通過該軟件，企業(yè)及組織能夠更加有效地解讀數(shù)據(jù)、分析趨勢、進(jìn)行預(yù)測和規(guī)劃、驗證假設(shè)，從而獲得準(zhǔn)確的結(jié)論。

SPSS Statistics 20.0 統(tǒng)計軟件包括新的映射功能，使用戶能夠添加地理維度，進(jìn)行分析和報告，并且允許用戶按照地理區(qū)域進(jìn)行定向、預(yù)測和規(guī)劃。該映射功能可在眾多行業(yè)中用于分析數(shù)據(jù)和創(chuàng)建統(tǒng)計數(shù)據(jù)，以提升營銷活動的成效、確定零售店選址、探查犯罪熱點，還可供學(xué)生進(jìn)行測驗成績評估。軟件自帶美國以及其他各國、各大洲的視圖和預(yù)制地圖模板，用戶可迅速向地圖中添加數(shù)據(jù)，包括來自 ESRI 文件的地理空間信息。

利用該款新軟件，衛(wèi)生組織可以更加直觀地監(jiān)測事故或疾病高發(fā)區(qū)域，也可識別一個州或整個國家范圍內(nèi)多個地區(qū)的護(hù)理情況差異。政府職員可以按照城區(qū)或人口密集度分類來分析過去和現(xiàn)在的人口普查數(shù)據(jù)；找出犯罪高發(fā)區(qū)域以加強(qiáng)執(zhí)法；或更新稅費和進(jìn)行分區(qū)變更。直銷商可以定位其最具價值的客戶群和商店位置，以分配廣告資源，而學(xué)術(shù)界則可利用該軟件從地域角度確定招生和組織校友方面的工作重點。

加快大數(shù)據(jù)治理：InfoSphere Information Server 8.7

對于大數(shù)據(jù)的分析能力是企業(yè)構(gòu)成競爭優(yōu)勢的關(guān)鍵。眾所周知，分析結(jié)果的質(zhì)量取決于原始數(shù)據(jù)，同時必須確保數(shù)據(jù)管理人員能夠及時訪問數(shù)據(jù)。作為目前唯一一家針對大數(shù)據(jù)提供市場領(lǐng)先的信息集成和治理平臺的廠商，IBM 提供的平臺可確保企業(yè)內(nèi)的商業(yè)用戶和各應(yīng)用端獲得可靠的信息。

全新 IBM InfoSphere Information Server 8.7 軟件支持將大數(shù)據(jù)作為來源和目標(biāo)進(jìn)行整合。Information Server 憑借其成熟可靠的性能和并行引擎，可提供大數(shù)據(jù)所需的強(qiáng)大可擴(kuò)展性。同時，IBM 還宣布推出旨在實現(xiàn)均衡優(yōu)化和卓越性能的新一代 Netezza 連接器，該連接器專門與 Netezza 配套使用，其操作控制臺可查看所有集成任務(wù)系統(tǒng)使用情況，從而提升集成項目的生產(chǎn)率。

全新 IBM InfoSphere Master Data Management 10 軟件將 IBM 市場領(lǐng)先的 MDM 功能合并到單一產(chǎn)品中，可滿足任何 MDM 要求。新特性包括與 Business Process Management 商業(yè)過程軟件集成，可用于 MDM 導(dǎo)向的商業(yè)流程；通過自適應(yīng)性服務(wù)界面提升了與消費應(yīng)用程序的連接性；以及一個維持唯一事實版本的共享匹配引擎。MDM 技術(shù)使用戶更深入地理解顧客、產(chǎn)品、供應(yīng)商、員工和客戶，方便進(jìn)一步分析，因此改善了大數(shù)據(jù)分析的成果。

IBM 大數(shù)據(jù)管理及分析技術(shù)助力全球客戶

目前已有數(shù)千家新客戶正在轉(zhuǎn)到 IBM的數(shù)據(jù)解決方案，以便從最廣泛的大數(shù)據(jù)中獲取可執(zhí)行的洞見。無論是收集數(shù)據(jù)以管理風(fēng)力發(fā)電場的布局，還是在社交媒體網(wǎng)站上評估客戶的意見抑或預(yù)測醫(yī)院的潛在致命感染，IBM 都可以幫助各行各業(yè)的客戶將其數(shù)據(jù)價值不斷延伸：

? 丹麥能源公司 Vestas Wind Systems 通過使用 IBM 大數(shù)據(jù)軟件分析拍字節(jié)級別的天氣數(shù)據(jù)，改善風(fēng)力渦輪機(jī)的放置位置，從而獲得最佳能量輸出效果——以前需要數(shù)周方可完成的分析現(xiàn)在僅需不到一個小時；

? XO Communications 公司使用 IBM SPSS 預(yù)測性分析軟件后，將客戶流失率降低了將近 50%。該公司得以預(yù)測客戶行為、發(fā)現(xiàn)趨勢，并識別可能轉(zhuǎn)移到其他運營商的客戶，從而采取相應(yīng)措施，穩(wěn)定客戶群；

? [x+1] 是一家端到端數(shù)字化營銷平臺提供商，該公司正在使用IBM Netezza 數(shù)據(jù)倉庫實時分析海量的廣告數(shù)據(jù)，幫助其客戶實現(xiàn)了 20% 的數(shù)字化銷售增長；

? 全球最大的廣告公司之一奧美正使用 iPad 版 IBM 分析軟件幫助員工分配資源、跟蹤使用率，并隨時發(fā)現(xiàn)新的財源；

此外，赫茲公司、培根學(xué)院、瑞典皇家理工學(xué)院、愛爾蘭海洋學(xué)會、Technovated 公司、TerraEchos 公司、安大略理工大學(xué)和瑞典烏普薩拉大學(xué)等眾多客戶均在通過 IBM 業(yè)務(wù)分析解決方案應(yīng)對不斷增加、高速流通且種類繁多的大數(shù)據(jù)，并將之用于制定可以改變其所在行業(yè)的決策。