大數(shù)據(jù)：大炒作還是大希望_數(shù)據(jù)分析師

Gartner作為全球最具權(quán)威的IT研究與顧問咨詢公司，近日在該公司發(fā)布的一篇大數(shù)據(jù)報(bào)告中，我們看到雖然目前仍落后于美國本土、但亞太地區(qū)的大數(shù)據(jù)項(xiàng)目實(shí)施曲線已經(jīng)迎來增長——有37%的亞太企業(yè)認(rèn)為自身會在未來兩年內(nèi)看齊美國同行的大數(shù)據(jù)技術(shù)實(shí)施水平。報(bào)告同時指出，從全球角度看，媒體、通信以及銀行機(jī)構(gòu)在大數(shù)據(jù)投資額度方面名列前茅，這一傾向同樣在澳大利亞有所體現(xiàn)。

澳大利亞的知名企業(yè)澳大利亞聯(lián)邦銀行（簡稱CBA）以及高斯與沃爾沃斯等零售巨頭在大數(shù)據(jù)普及運(yùn)動中扮演著先驅(qū)角色。根據(jù)Gartner公司的調(diào)查結(jié)果，目前全球64%的企業(yè)已經(jīng)開始向大數(shù)據(jù)項(xiàng)目注資，或者打算在2015年6月之前將計(jì)劃付諸實(shí)踐。相比之下，2012年調(diào)查報(bào)告中的同一數(shù)字僅為可憐的6%。

美國繼續(xù)引領(lǐng)風(fēng)潮

超過三分之一的美國企業(yè)（37.8%）已經(jīng)開始向大數(shù)據(jù)技術(shù)注資，這一比例領(lǐng)先于歐洲、中東以及非洲地區(qū)（即EMEA區(qū)劃）的26.8%；接下來是亞太地區(qū)，比例為25.6%；位列第四的是南美洲地區(qū)，比例僅占17.8%。

不過亞洲企業(yè)已經(jīng)在大數(shù)據(jù)領(lǐng)域展現(xiàn)出改天換地的勃勃雄心，有44.7%的受訪企業(yè)有意在未來兩年內(nèi)著手進(jìn)行大數(shù)據(jù)注資——這一比例使亞太地區(qū)與美國看齊、且遠(yuǎn)遠(yuǎn)高出EMEA地區(qū)。

下面來看在投資道路上走得最遠(yuǎn)的行業(yè)——位列第一的是媒體與通信行業(yè)（35%的企業(yè)已經(jīng)著手投資）、其次為銀行業(yè)（34%）以及服務(wù)行業(yè)（32%），排名最低的是政府機(jī)構(gòu)（16%）與公共事務(wù)部門（17%）。

這一統(tǒng)計(jì)數(shù)字與澳大利亞各大組織的公開活動相互印證。單就銀行業(yè)來看，澳大利亞聯(lián)邦銀行、UBank以及后者的母公司澳大利亞國民銀行（簡稱NAB）紛紛在大數(shù)據(jù)投資當(dāng)中表現(xiàn)活躍。其中聯(lián)邦銀行通過多種特殊方式讓我們看到大數(shù)據(jù)那多種多樣的使用途徑。首先，該銀行希望能在客戶與自身接洽時為其提供更具個性化及實(shí)時優(yōu)化特性的服務(wù)。這種通過分析提升客戶體驗(yàn)的需求已經(jīng)成為主流趨勢，而且在Gartner公司的調(diào)查報(bào)告中，大部分受訪者將此作為大數(shù)據(jù)項(xiàng)目的首要關(guān)注方向（55%）。

將數(shù)據(jù)擺上商店櫥窗

澳大利亞聯(lián)邦銀行還打算將大數(shù)據(jù)應(yīng)用在與客戶關(guān)系更為明顯的區(qū)域——即作為產(chǎn)品及服務(wù)的組成部分。該銀行目前正通過廣告宣傳將大數(shù)據(jù)處理能力作為自身業(yè)務(wù)差異化的核心競爭力。他們提醒客戶稱，“40%的交易處理流程都將涉及我們的這套系統(tǒng)”。此外，銀行方面還著力強(qiáng)調(diào)其“將原始數(shù)據(jù)轉(zhuǎn)化為觀察結(jié)論及創(chuàng)新思維”的數(shù)據(jù)模式能為用戶帶來顯著的附加價值。

涉及大數(shù)據(jù)技術(shù)的交易比例如此之高，使得聯(lián)邦銀行擁有了對抗競爭對手的有力武器。該銀行將數(shù)據(jù)轉(zhuǎn)化為專有客戶觀察力以及相關(guān)個性化產(chǎn)品的能力大大提高了新生競爭者進(jìn)入這一市場的門檻。在澳大利亞這類市場規(guī)模相對較小的國家，很多行業(yè)存在著優(yōu)勢明顯的市場領(lǐng)導(dǎo)者。在數(shù)據(jù)處理能力方面的壟斷能幫助這些廠商繼續(xù)鞏固現(xiàn)狀，使得規(guī)模較小的競爭對手難于擴(kuò)展自身業(yè)務(wù)。

大數(shù)據(jù)帶來的優(yōu)勢不僅體現(xiàn)在銀行領(lǐng)域，澳大利亞的零售產(chǎn)業(yè)也深得其惠。作為在澳大利亞食品市場上占據(jù)八成以上份額的巨頭級企業(yè)（根據(jù)富理誠有限公司于2011年5月發(fā)布的調(diào)查結(jié)果，數(shù)據(jù)來自西農(nóng)集團(tuán)及沃爾沃斯公司2010年年度報(bào)告），高斯與沃爾沃斯兩家公司同樣享受到了大數(shù)據(jù)的推動。

澳大利亞聯(lián)邦銀行在消費(fèi)產(chǎn)品營銷領(lǐng)域同樣引入了大數(shù)據(jù)分析機(jī)制。其交互式Signal服務(wù)能夠生成各類統(tǒng)計(jì)數(shù)據(jù)，包括每月平均存款額、存儲額，并匯總來自抵押貸款額、信用卡、個人貸款等金融服務(wù)的數(shù)據(jù)信息。此外，分析對象還包括用戶年齡、性別以及郵政編碼等，方案可通過個性化信息圖表顯示個別用戶與其同類用戶之間的差別。統(tǒng)計(jì)結(jié)果可通過社交平臺分享或者單獨(dú)下載，還能夠與“同我們談?wù)劇狈?wù)的結(jié)果一同顯示。作為競爭對手，UBank提供一套類似的服務(wù)，其分析基礎(chǔ)為超過十億條交易記錄。記錄的來源包括政府人口普查數(shù)據(jù)以及由數(shù)據(jù)分析企業(yè)Quantium提供的客戶趨勢調(diào)查。

Quantium公司在澳大利亞的經(jīng)濟(jì)體系中占據(jù)著舉足輕重的戰(zhàn)略地位。它收集、整理并分析備類尚未明確辨識的業(yè)務(wù)交易信息，并為那些需要對客戶活動進(jìn)行透徹解析的客戶提供數(shù)據(jù)及咨詢服務(wù)。Quantium公司的客戶包括澳大利亞本土的眾多巨頭級消費(fèi)企業(yè)，例如澳洲航空、澳洲電信、IAG（即國際大地測量協(xié)會）、eBay、Suncorp、NAB、David Jones以及沃爾沃斯等。今年五月，食品連鎖企業(yè)沃爾沃斯買下了Quantium的半數(shù)股份；此舉是為了回應(yīng)英國零售業(yè)巨頭Tesco于2011年對分析企業(yè)Dunnhumby全部股份的一次性購入。此次總值2000萬澳元的收購交易顯示了沃爾沃斯在大數(shù)據(jù)領(lǐng)域的投資決心。

來自零售業(yè)的細(xì)節(jié)信息

在收購Quantium股份的消息剛剛公布時，沃爾沃斯方面稱自身有意利用Quantium的數(shù)據(jù)及服務(wù)技術(shù)拓展現(xiàn)有客戶分析能力——這種分析能力在與競爭對手高斯公司爭奪客戶方面起著至關(guān)重要的作用。雙方這種密切的合作關(guān)系使Quantium有能力訪問來自沃爾沃斯客戶交易的未識別數(shù)據(jù)，其中包括客戶借記卡、信用卡以及會員卡提供的日常獎勵計(jì)劃。交易之后，Quantium的現(xiàn)有數(shù)據(jù)源將得到極大擴(kuò)展，同樣也有助于為其它客戶帶來更為豐富的產(chǎn)品方案。

沃爾沃斯的主要競爭對手高斯公司同樣在大數(shù)據(jù)領(lǐng)域投入重金。來自母公司西農(nóng)集團(tuán)的高斯首席財(cái)務(wù)官Terry Bowen在最近一篇由《澳大利亞》雜志刊發(fā)的報(bào)告中稱，整個集團(tuán)正努力將數(shù)據(jù)分析機(jī)制推廣到全局供應(yīng)鏈當(dāng)中，從而為西農(nóng)及相關(guān)供應(yīng)商帶來便利。來自高斯公司Flybuys客戶積分計(jì)劃以及信用卡消費(fèi)記錄的數(shù)據(jù)作為基本客戶信息之外的補(bǔ)充、大大豐富了公司的分析素材來源。

政府部門利用大數(shù)據(jù)查錯補(bǔ)漏

Gartner公司在研究中發(fā)現(xiàn)，政府部門在大數(shù)據(jù)投資方面的表現(xiàn)位于全球各類機(jī)構(gòu)末尾（只有16%已經(jīng)開始進(jìn)行投資），不過澳大利亞政府表現(xiàn)積極，于今年八月發(fā)布了《澳大利亞公共服務(wù)大數(shù)據(jù)戰(zhàn)略》。澳大利亞政府CIO Glenn Archer在一份聲明中指出，這項(xiàng)戰(zhàn)略方案“提供了一整套將政府事務(wù)與大數(shù)據(jù)相結(jié)合的思路，旨在提升服務(wù)、開發(fā)新型服務(wù)、提供更好的政策建議并結(jié)合隱私保護(hù)與現(xiàn)有ICT投資利用等領(lǐng)域的最佳實(shí)踐?！?/span>

除了改善服務(wù)效果，該戰(zhàn)略還重點(diǎn)關(guān)注大數(shù)據(jù)的其它潛力，例如支持成本削減。詳情可參照麥肯錫全球研究院發(fā)布的報(bào)告《大數(shù)據(jù)：創(chuàng)新、競爭與生產(chǎn)力的下一個前沿》。根據(jù)該報(bào)告的估算，歐洲公共事業(yè)部門的總體管理成本擁有高達(dá)兩成的縮減空間，相當(dāng)于三億歐元。

《公共服務(wù)大數(shù)據(jù)戰(zhàn)略》與新近啟動且涵蓋各政府部門的《數(shù)據(jù)分析卓越中心（簡稱DACoE）》方案聯(lián)系緊密。DACoE方案由澳大利亞稅務(wù)局牽頭，意在滿足部分機(jī)構(gòu)對于深入分析能力的強(qiáng)烈需求——這條消息很可能受到那些實(shí)際經(jīng)濟(jì)所得與納稅申報(bào)不相符的群體的廣泛關(guān)注。根據(jù)這份戰(zhàn)略文件的說明，“DACoE將通過創(chuàng)造通用型功能框架幫助各政府部門獲得分析能力，從而實(shí)現(xiàn)技術(shù)知識、技能以及工具的順暢共享；此外，各部門還將與多家大專院校建立合作關(guān)系，意在培養(yǎng)分析技術(shù)專家。DACoE將遵循<大數(shù)據(jù)戰(zhàn)略>報(bào)告以及‘大數(shù)據(jù)委員會’的指導(dǎo)意見。”

接下來的步驟在于推動于今年二月組建的“大數(shù)據(jù)委員會”逐步實(shí)施六大行動戰(zhàn)略中的各既定項(xiàng)目，其中包括針對大數(shù)據(jù)最佳實(shí)踐指南、認(rèn)知大數(shù)據(jù)技術(shù)壁壘、提高大數(shù)據(jù)技能、為可靠的數(shù)據(jù)分析流程與信息資產(chǎn)登記提供指導(dǎo)意見、始終緊跟大數(shù)據(jù)技術(shù)的發(fā)展步伐。

重返校園

作為眾多既定戰(zhàn)略要點(diǎn)中的組成部分，“提高大數(shù)據(jù)分析領(lǐng)域的技能與經(jīng)驗(yàn)”不單對政府來說屬于巨大挑戰(zhàn)，整個澳大利亞包括全世界也同時面臨著這個難題。Gartner公司在研究報(bào)告中強(qiáng)調(diào)稱，分析技能的匱乏正是大數(shù)據(jù)三大挑戰(zhàn)之一——另外兩項(xiàng)分別為從大數(shù)據(jù)中獲取價值以及定義大數(shù)據(jù)戰(zhàn)略。

麥肯錫預(yù)計(jì)截至2018年，單在美國本土就將出現(xiàn)十四萬到十九萬個分析職位空缺，需要對分析事務(wù)具備基本了解的經(jīng)理崗位更將多達(dá)150萬個。

悉尼科技大學(xué)正是目前積極嘗試補(bǔ)救分析技能匱乏狀況的院校之一，其旗下的高級分析研究所（簡稱AAI）將對數(shù)據(jù)及分析科學(xué)展開全面研究，旨在幫助畢業(yè)生深入掌握分析技能。目前該研究所已經(jīng)與多家企業(yè)、組織以及政府部門建立了合作關(guān)系，其中包括微軟研究院、諾基亞、AMP、SAS、IBM、Westpac、ATO以及民政部等等。如果澳大利亞能夠被納入亞太地區(qū)大數(shù)據(jù)技術(shù)的發(fā)展路線圖，那么它將為平均水平的提升做出巨大貢獻(xiàn)。

摸著石頭過河

澳大利亞各企業(yè)及組織在普及數(shù)據(jù)分析方面的實(shí)際表現(xiàn)還取決于其它幾大關(guān)鍵性挑戰(zhàn)。而根據(jù)Gartner公司的研究報(bào)告，搞定大數(shù)據(jù)領(lǐng)域的前兩位挑戰(zhàn)——即如何從大數(shù)據(jù)中獲取價值以及如何定義大數(shù)據(jù)戰(zhàn)略——將成為其中的決定性因素。

對于剛剛在大數(shù)據(jù)發(fā)展道路上起步的組織而言，這兩種挑戰(zhàn)可謂不可逾越的鴻溝。正如Gartner公司的報(bào)告所陳述，大家需要從知識儲備入手，逐步完成戰(zhàn)略設(shè)置工作。

“資金投入的數(shù)額并不大，事實(shí)上所需的主要資源在于時間，”報(bào)告指出。

各企業(yè)正努力驗(yàn)證大數(shù)據(jù)概念，并在成功試水之后開始部署并使用數(shù)據(jù)分析工具，到這個時候投資額度開始快速上升。在Gartner的調(diào)查報(bào)告中，約有七成組織“已經(jīng)完成了知識儲備的積累與戰(zhàn)略形成階段，開始邁向試點(diǎn)（44%）與部署（25%）等新層面?！?/span>

不過對于采用大數(shù)據(jù)的組織來說，學(xué)習(xí)曲線正變得越來越短——這完全得益于越來越多可以借鑒的成功先例。舉例來說，谷歌、Amazon、雅虎以及Facebook等全球在線企業(yè)作為大數(shù)據(jù)領(lǐng)域的先驅(qū)者，紛紛擁有各自的實(shí)驗(yàn)性經(jīng)驗(yàn)以及試點(diǎn)流程。這些企業(yè)作為開路先鋒，必須完全憑借自身力量進(jìn)行探索，甚至在必要時創(chuàng)造出相關(guān)工具——這些工具目前已經(jīng)被視為大數(shù)據(jù)技術(shù)的實(shí)施基礎(chǔ)，其中最知名的當(dāng)數(shù)MapReduce與Hadoop。而從他們的開拓經(jīng)歷以及各國家與行業(yè)大數(shù)據(jù)領(lǐng)導(dǎo)者們的實(shí)踐嘗試中，眾多后來者獲得了寶貴的經(jīng)驗(yàn)與積累。

在澳大利亞，像聯(lián)邦銀行、沃爾沃斯以及西農(nóng)/高斯這樣的例子已經(jīng)成為其它企業(yè)效法的對象。對于這些大數(shù)據(jù)先驅(qū)者來說，他們在未來的價值鏈當(dāng)中更可能占得優(yōu)勢地位、獲取豐厚回報(bào)——這是因?yàn)樗麄兡軌蚵氏劝l(fā)掘出數(shù)據(jù)中蘊(yùn)藏的力量，從而達(dá)到先人一步、高人一等的效果，這也正是西農(nóng)/高斯公司的預(yù)期目標(biāo)。一旦拿出切實(shí)可行的成熟方案，后繼參與組織將不得不在獲取收益的同時承擔(dān)義務(wù)，即遵循數(shù)據(jù)的所有權(quán)、管理以及隱私規(guī)范，并在原則上認(rèn)同利用專業(yè)知識評估大數(shù)據(jù)價值的方式。

而其它方面的發(fā)展又會幫助企業(yè)轉(zhuǎn)而為大數(shù)據(jù)技術(shù)的更新迭代帶來回饋。舉例來說，來自政府機(jī)關(guān)的數(shù)據(jù)集中往往包含大量有價值信息且通常不收取費(fèi)用，其中最典型的例子就是澳大利亞統(tǒng)計(jì)局公布的人口普查數(shù)據(jù)列表。根據(jù)凱捷公司發(fā)布的開放數(shù)據(jù)經(jīng)濟(jì)體系調(diào)查報(bào)告，澳大利亞已經(jīng)與美國、英國、加拿大和法國一道成為開放數(shù)據(jù)“潮流先鋒”之列。

澳大利亞經(jīng)濟(jì)環(huán)境中的數(shù)據(jù)集正持續(xù)膨脹，這一趨勢有助于提高大數(shù)據(jù)信息的采用機(jī)率——特別是越來越多的企業(yè)及政府機(jī)構(gòu)開始向非競爭者分享自己的數(shù)據(jù)集，從而填補(bǔ)現(xiàn)有數(shù)據(jù)集空白——并最終改進(jìn)整體數(shù)據(jù)價值。以Quantium及鄧百氏等公司為代表的數(shù)據(jù)服務(wù)企業(yè)同樣有機(jī)會發(fā)揮自己的作用。通過與深層數(shù)據(jù)分析運(yùn)用相結(jié)合，這些企業(yè)將為大數(shù)據(jù)在澳大利亞本土經(jīng)濟(jì)中的作用做出貢獻(xiàn)——至少對大型組織而言是如此。目前我們還不清楚小型企業(yè)（在澳大利亞全部組織中占據(jù)九成以上比例）是否有能力構(gòu)建屬于自己的大數(shù)據(jù)工具套件及知識儲備，但某些分析即服務(wù)產(chǎn)品的出現(xiàn)確實(shí)有可能幫助這些靈活的市場參與者在行業(yè)巨頭的鯨口中找到自己的生存空間。最近一段時間，惠普、EMC以及IBM紛紛推出分析即服務(wù)模式，希望借此為自己爭得新的業(yè)務(wù)增長點(diǎn)。

正如Gartner在報(bào)告中所指出，“對于大數(shù)據(jù)來說，2013年將成為實(shí)驗(yàn)與早期部署的發(fā)展元年?！蔽覀兛梢灶A(yù)期在未來一年中看到更多澳大利亞企業(yè)采用更加成熟的大數(shù)據(jù)方案，也將有不少企業(yè)循著先驅(qū)者的足跡做出屬于自己的嘗試。目前大數(shù)據(jù)的實(shí)施曲線與十八或者二十四個月之前的云計(jì)算曲線類似——主要處于學(xué)習(xí)階段、少部分著手早期實(shí)驗(yàn)，但部署比例還比較低。目前云計(jì)算已經(jīng)發(fā)展成為日趨主流的業(yè)務(wù)能力，我們希望大數(shù)據(jù)也能遵循類似的發(fā)展軌跡。