注意 這樣理解敏捷數(shù)據(jù)分析才對(duì)

1. 數(shù)據(jù)時(shí)代催生敏捷需求

最早提出“大數(shù)據(jù)”時(shí)代到來的是全球知名管理咨詢公司-麥肯錫，麥肯錫季刊曾發(fā)表：“數(shù)據(jù)，已經(jīng)滲透到當(dāng)今每一個(gè)行業(yè)和業(yè)務(wù)職能領(lǐng)域，成為重要的生產(chǎn)因素“。人們對(duì)于海量數(shù)據(jù)的挖掘和運(yùn)用，預(yù)示著新一波生產(chǎn)率增長和消費(fèi)者盈余浪潮的到來?！按髷?shù)據(jù)”在物理學(xué)、生物學(xué)、環(huán)境生態(tài)學(xué)等領(lǐng)域以及軍事、金融、通訊等行業(yè)存在已有時(shí)日，卻因?yàn)榻陙砘ヂ?lián)網(wǎng)和信息行業(yè)的發(fā)展而引起人們關(guān)注。

從以上數(shù)據(jù)對(duì)比(暫且忽略數(shù)據(jù)完整性)，我們可以看到“大數(shù)據(jù)”已經(jīng)超過二孩、人工智能，與企業(yè)管理、A股、新能源車等關(guān)注點(diǎn)同處于50萬-100萬的程度，更是高于商業(yè)智能(Business Intelligence)十倍有余。

無論任何新的概念或者技術(shù)，如果它沒有應(yīng)用價(jià)值，就肯定不會(huì)被推廣，但如果它具有個(gè)人都能理解的“應(yīng)用價(jià)值”，就會(huì)在今天被移動(dòng)互聯(lián)網(wǎng)快速傳播、無限放大。無疑“大數(shù)據(jù)”就是這樣發(fā)展起來的，同時(shí)人們也從其應(yīng)用價(jià)值中接受了“數(shù)據(jù)化管理、數(shù)據(jù)化運(yùn)營、數(shù)據(jù)化決策“等管理理念。這也是大數(shù)據(jù)能夠成為驅(qū)動(dòng)經(jīng)濟(jì)、社會(huì)進(jìn)步與發(fā)展的原因。

與此同時(shí)，企業(yè)的經(jīng)營面臨越來越激烈的競爭，政府的轉(zhuǎn)型也面臨數(shù)據(jù)服務(wù)的壓力，如果部署數(shù)據(jù)分析平臺(tái)還像10年前經(jīng)歷漫長實(shí)施過程的話，那么數(shù)據(jù)化運(yùn)營將成為空談。于是滿足市場期望的“敏捷商業(yè)智能“出現(xiàn)了，無論用戶還是廠商，都希望能夠在數(shù)據(jù)平臺(tái)上構(gòu)建分析系統(tǒng)的過程變得更加迅速、簡單和高效!

2. 敏捷商業(yè)智能的誤區(qū)

我們產(chǎn)品的名稱由2部分組成，SMART+BI，前者就是聰明的、敏捷的，后者就是商業(yè)智能。這也說明自產(chǎn)品誕生起，我們一直以“簡潔實(shí)用”的BI作為努力的目標(biāo)!通過看到市場上琳瑯滿目的宣傳廣告，以及Smartbi自身的服務(wù)和研發(fā)，我們終于“不惑”!

首先，敏捷BI并不是指某個(gè)前端工具軟件，而是貫穿在數(shù)據(jù)分析平臺(tái)構(gòu)建和運(yùn)行過程中的快速實(shí)現(xiàn)能力。

摘自：www.wikipedia.com

Agile Business Intelligence (BI) refers to the use of the agile software development methodology for BI projects[1] to reduce the time-to-value of traditional BI and helps in quickly adapting to changing business needs.[2] Agile BI enables the BI team and managers to make better business decisions.

簡單來說，評(píng)價(jià)是否是敏捷BI應(yīng)該從以下角度：

■ IT可以快速提供可選的分析數(shù)據(jù);

■ 非常簡單的給現(xiàn)有報(bào)表增加字段;

■ 能夠快速完成新儀表盤的制作;

其次，具有敏捷BI屬性的前端分析軟件，不是”傳統(tǒng)BI”的替代品!

二十幾年前與BI、數(shù)據(jù)倉庫同時(shí)誕生的OLAP(Online Analysis Process)，正是由于為業(yè)務(wù)人員提供了靈活的分析、計(jì)算、鉆取能力而風(fēng)靡全球。但過去的十年，OLAP的產(chǎn)品卻不再風(fēng)光，出現(xiàn)這個(gè)問題的不是其需求發(fā)生了改變，而是其技術(shù)不夠簡單，或者說違背敏捷BI的潮流。但是，隨著Apache Kylin項(xiàng)目的成功推廣，OLAP即將在大數(shù)據(jù)時(shí)代重新煥發(fā)青春。

再舉個(gè)例子，Business Objects曾經(jīng)因“語義層”和“內(nèi)存Cube”的專利技術(shù)，在十年前得到了廣泛的認(rèn)可，也最終以78億美金出售給了SAP。當(dāng)時(shí)BO的用戶，就是能夠在敏捷BI的方式下進(jìn)行自助分析。無論是當(dāng)時(shí)，還是現(xiàn)在，業(yè)務(wù)人員的需求沒有變化，他們一直需要能夠快速、便捷的分析數(shù)據(jù)，以及做出一些漂亮的圖形去做匯報(bào)!

因此從軟件本身，從來沒有兩個(gè)派別，只有不斷的技術(shù)創(chuàng)新和發(fā)展。

最后，敏捷BI無法替你解決需求分析、數(shù)據(jù)準(zhǔn)備、平臺(tái)管理等難題!

無論Smartbi還是別的前端分析軟件，都只是將數(shù)據(jù)平臺(tái)(數(shù)據(jù)庫、數(shù)據(jù)倉庫、大數(shù)據(jù)平臺(tái))的數(shù)據(jù)統(tǒng)計(jì)展現(xiàn)出來，都是將大數(shù)據(jù)變成可讀懂的小數(shù)據(jù)的過程。

■ 如果使用者不能確定數(shù)據(jù)能否覆蓋潛在需要，同樣不可能得到有用的分析結(jié)論;

■ 如果數(shù)據(jù)平臺(tái)的數(shù)據(jù)是臟數(shù)據(jù)，統(tǒng)計(jì)展現(xiàn)的結(jié)果一定也是不準(zhǔn)確的(”Garbage in,gargage out”這句話依然有效!);

■ 如果快速制作的報(bào)表，不能在安全的前提下發(fā)布給報(bào)表消費(fèi)者(一般是領(lǐng)導(dǎo))，對(duì)于大型的用戶，同樣都是重大風(fēng)險(xiǎn);

■ 如果數(shù)據(jù)源變更了內(nèi)容，但不能確定受到影響的有哪些應(yīng)用，誰敢輕易變更;

總之，敏捷BI是客觀存在的市場需求，Smartbi和其它軟件都在構(gòu)成敏捷BI的前端分析工具環(huán)節(jié)不斷實(shí)踐和思考。比如，我們認(rèn)為未來改進(jìn)的方向應(yīng)包括以下3個(gè)角度：

從邏輯上說，這三條是構(gòu)成敏捷BI的“必要條件”，而不是“充分條件”。元數(shù)據(jù)與高性能都是緣于技術(shù)架構(gòu)的，在各個(gè)軟件之間差異很大，但在簡易操作方面，各個(gè)廠商都有自己的設(shè)計(jì)，也才能滿足不同類的用戶操作需求。

3. 敏捷商業(yè)智能的本質(zhì)

前文從大數(shù)據(jù)等時(shí)代背景，分析了敏捷BI需求存在的合理性，也通過解讀敏捷BI的誤區(qū)提出了敏捷BI軟件的“金三角”，但敏捷BI有沒有一個(gè)最能讓我們記住的核心價(jià)值呢?答案是肯定的，那就是“快而有效”!

從漢語詞典中可以查到，敏捷一詞的基本釋義就是“反應(yīng)迅速快捷”，詞性為“褒義”!那么在數(shù)據(jù)分析(BI)行業(yè)，敏捷具體體現(xiàn)在以下四個(gè)方面：

3.1. 快而有效的交付

交付是一個(gè)動(dòng)詞，那么從其主語(操作者)和賓語(需求方)來剖析，有這么四種情況：

其中情況2、3都是小概率事件，我們不予探討。而從情況1、4來做系統(tǒng)性的分析，我們可以看到共同的賓語(交付對(duì)象)都是業(yè)務(wù)需求方。那么在任何規(guī)模以上企業(yè)、政府中，業(yè)務(wù)需求方對(duì)BI一般會(huì)有哪些需求呢?

■ 需求一：獲取數(shù)據(jù)

其實(shí)這個(gè)需求最普遍，也最不用解釋，任何軟件(包括BI)都要提供Excel導(dǎo)出功能。這背后的原因可能是業(yè)務(wù)需求方自己有一些數(shù)據(jù)，他需要從平臺(tái)補(bǔ)充做分析;也可能是用戶習(xí)慣于使用Excel做報(bào)表、做計(jì)算。

■ 需求二：制作報(bào)表

這個(gè)是用戶的核心需求，大多數(shù)的業(yè)務(wù)需求方使用BI平臺(tái)軟件，都覺得制作一份簡單的統(tǒng)計(jì)報(bào)表比較方便、快捷，往往通過拖拽就可以完成了。尤其在管理需求瞬息萬變的情況下，企業(yè)有大量的制作報(bào)表需求，而且往往要得快、要得急。

■ 需求三：探索分析

制作報(bào)表是目標(biāo)非常明確的需求，但很多情況下，需求方往往只給出了模糊范圍或者方向，需要操作者通過一定的思考過程來完成報(bào)表。這時(shí)就是前文所提到的OLAP匹配的場景，操作者通過拖拽、鉆取等操作，首先要了解都有什么數(shù)據(jù)，然后再理解其中數(shù)據(jù)的相關(guān)性，最后完成一份圖表的設(shè)計(jì)。

■ 需求四：編制報(bào)告

無論是需求清晰的報(bào)表需求，還是從探索分析而確定的分析圖表，30%的操作者會(huì)選擇用儀表盤進(jìn)行綜合的展現(xiàn)，也會(huì)有20%將其用到企業(yè)月度、年度的分析報(bào)告(Word/PPT)當(dāng)中。其中分析報(bào)告的制作過程都是操作者最為苦惱的經(jīng)歷(沒有例外)。

■ 需求五：發(fā)布

最后，無論你做的圖表、儀表盤還是分析報(bào)告，50%會(huì)用于發(fā)布給需求方，比如通過PC瀏覽器、大屏幕或者APP。尤其越有價(jià)值的數(shù)據(jù)分析結(jié)果，越會(huì)被發(fā)布出來。

因此，快而有效的交付，就是無論誰操作軟件，都能非常簡單順利的實(shí)現(xiàn)如上5個(gè)需求，就是對(duì)敏捷BI最重要的實(shí)現(xiàn)。

3.2. 快而有效的部署

規(guī)模以上企業(yè)、政府往往都已經(jīng)構(gòu)建了基于標(biāo)準(zhǔn)技術(shù)的數(shù)據(jù)平臺(tái)，比如MPP數(shù)據(jù)倉庫或者Hadoop/Spark等環(huán)境，為大數(shù)據(jù)的存儲(chǔ)和計(jì)算提供了基礎(chǔ)保障。敏捷BI應(yīng)當(dāng)能夠復(fù)用這些資源，畢竟分析數(shù)據(jù)不是每個(gè)人都需要操作的，不用考慮“大并發(fā)”的應(yīng)用場景(一般不會(huì)超過100人)。

與此同時(shí)，以各種形式做中間單點(diǎn)存儲(chǔ)的架構(gòu)(比如一些MOLAP產(chǎn)品)將不再必要，刨除微軟相關(guān)產(chǎn)品，敏捷BI都應(yīng)該是2臺(tái)應(yīng)用服務(wù)器集群就能夠滿足要求，并可以與用戶自身的系統(tǒng)進(jìn)行完美的集成。

3.3. 快而有效的變更

一次性的部署或者交付即便再復(fù)雜，如果沒有后期的變更，那么大家也都不會(huì)關(guān)注。但事實(shí)是敏捷BI就是一個(gè)不斷迭代、優(yōu)化、變更的過程，因此以下幾類變更都需要被考慮：

■ 展現(xiàn)結(jié)果的變更(組合形式或圖形的變化，代價(jià)最小的變更)

■ 需要更多的數(shù)據(jù)(能夠快速找到以前的數(shù)據(jù)從哪里來)

■ 源于數(shù)據(jù)源的被動(dòng)變更(上游變更傳遞過來后，需要評(píng)估其影響范圍)

3.4. 快而有效的查詢

性能，尤其是在大數(shù)據(jù)下的查詢性能，是所有用戶最為關(guān)心的維度。用戶操作的結(jié)果能否快速返回，決定了其分析思維能否連貫的進(jìn)行下去，更決定了試誤操作的成本代價(jià)。

但其實(shí)性能解決方案，應(yīng)當(dāng)是整體技術(shù)架構(gòu)的考慮，而不應(yīng)該被認(rèn)為是前端分析軟件自身的責(zé)任。這好比買車上路，能開多少速度，一方面是車的性能，但更重要的是路況及限速要求!

敏捷BI不應(yīng)依賴自身構(gòu)建數(shù)據(jù)計(jì)算能力，比如內(nèi)存計(jì)算或者定制Hadoop，如果這樣做，首先違背了第二條本質(zhì)(快而有效的部署)，同時(shí)也給自己適應(yīng)大數(shù)據(jù)分析埋下了地雷，因?yàn)椴豢赡茉谙鄬?duì)合理的成本下把大數(shù)據(jù)全部復(fù)制到內(nèi)存或者文件系統(tǒng)當(dāng)中。這點(diǎn)已經(jīng)可以從國外知名產(chǎn)品得到證實(shí)。

4. 敏捷商業(yè)智能的意義

通過部署“自助取數(shù)與分析平臺(tái)”，客戶獲得的真正價(jià)值包括：

■ 數(shù)據(jù)產(chǎn)生于業(yè)務(wù)部門，現(xiàn)在也可以回歸于業(yè)務(wù)部門進(jìn)行分析利用，從而實(shí)現(xiàn)信息化的真正閉環(huán)，推動(dòng)數(shù)據(jù)質(zhì)量、數(shù)據(jù)完整性的建設(shè);

■ IT部門更加專注于技術(shù)的創(chuàng)新與應(yīng)用，比如引進(jìn)Kylin等大數(shù)據(jù)分析平臺(tái)，也可以更加投入在元數(shù)據(jù)的維護(hù)與管理上，提升分析平臺(tái)的服務(wù)效率;

■ 對(duì)于個(gè)人來說，業(yè)務(wù)部門的分析人員學(xué)習(xí)到了更多的工具，而技術(shù)人員也因?yàn)檎莆諗?shù)據(jù)知識(shí)而轉(zhuǎn)型為業(yè)務(wù)分析師的機(jī)會(huì)。這樣的人員內(nèi)部流動(dòng)對(duì)企業(yè)來說更是釋放了潛在的內(nèi)部生產(chǎn)力;

■ 對(duì)企業(yè)來說，數(shù)據(jù)不再是擱置在硬盤上的1-0，而是能夠驅(qū)動(dòng)全面決策的數(shù)據(jù)資產(chǎn)，從這樣的結(jié)果來說，IT部門因此能夠得到更充足的資金預(yù)算;

■ 對(duì)實(shí)施來說，漫長的交付周期能夠縮短50%，主要精力放在數(shù)據(jù)模型、安全體系、元數(shù)據(jù)服務(wù)等基礎(chǔ)工作上就可以了;

5. 敏捷商業(yè)智能的延伸

從前文可以看出，敏捷BI以“快而有效”的交付、查詢、部署、變更解決了業(yè)務(wù)與技術(shù)長期的矛盾，為數(shù)據(jù)市場帶來了新的活力，未來我們也會(huì)不斷增強(qiáng)自助分析的功能。但我們也要冷靜思考：

■ 你所在的企業(yè)業(yè)務(wù)人員是否有時(shí)間精力和足夠能力去學(xué)習(xí)新工具的使用?

■ 你所在的企業(yè)技術(shù)人員是否有能力提供有效的平臺(tái)運(yùn)營和支持服務(wù)?

■ 敏捷BI和過去二十五年一樣，無法替代Excel，這是為什么?

■ 敏捷BI和過去二十五年一樣，只能通過Ctrl+C/V才能進(jìn)入Word/PPT當(dāng)中，而這“交付的最后一步”卻是每個(gè)領(lǐng)導(dǎo)真正才會(huì)看到的數(shù)據(jù)分析!

■ 敏捷BI似乎沒有改變數(shù)據(jù)(無論圖表)的堆砌，用戶很難為其增加輔助性的說明文字，加入自己的觀點(diǎn)!

這些問題Smartbi一直在思考，也在努力探索，無論這些新概念如何炒作，客戶對(duì)于數(shù)據(jù)分析的需求到底是什么?什么樣的工具才能獲得永恒?

如果你也有類似的困惑，請(qǐng)給我們的另一產(chǎn)品(Smartbi電子表格版)提供反饋，它讓你可以直接在親切的Excel、Word、PPT里面完成取數(shù)、制表(做圖)、分析、報(bào)告和發(fā)布，通過2014年以來的推廣和應(yīng)用，我們覺得“辦公化BI”也能適合白領(lǐng)大眾!