
大家好,2017年我有幸成為CDA持證人,就此開啟了自己數(shù)據(jù)人轉(zhuǎn)型之路,一路學(xué)思維、學(xué)技術(shù),并成為了我們公司數(shù)字化轉(zhuǎn)型的推行負(fù)責(zé)人,以下是這幾年工作中的一些思考。供同行參考,指正!
思考一:企業(yè)為什么要數(shù)字化轉(zhuǎn)型
先說結(jié)論:企業(yè)數(shù)字化轉(zhuǎn)型是一個(gè)運(yùn)用技術(shù)和數(shù)據(jù)對(duì)企業(yè)業(yè)務(wù)持續(xù)優(yōu)化的過程,這是所有企業(yè)提升效率的必由之路。
然而很多企業(yè)并未搞懂?dāng)?shù)字化轉(zhuǎn)型是干什么,就大張旗鼓的搞起數(shù)字化,以下誤區(qū)對(duì)比您的公司看看有沒有:
云、大數(shù)據(jù)、人工智能等。而往往許多公司就是被這些高大上概念嚇退的。
簡(jiǎn)單點(diǎn)說,
舉個(gè)例子:
每個(gè)企業(yè)都在做的各種滿意度調(diào)查,傳統(tǒng)的做法是,列問題,發(fā)問卷,抽樣統(tǒng)計(jì),出結(jié)論。至多就是通過問卷星等等從網(wǎng)絡(luò)進(jìn)行填報(bào),本質(zhì)是一樣的。得出的結(jié)論往往是片面的,比如問您對(duì)食堂的飯菜滿意嗎?對(duì)您的領(lǐng)導(dǎo)打幾分?您計(jì)劃在本公司工作多少年?放心,我預(yù)測(cè)基本都是滿意,滿分,終身。但這是實(shí)際答案么。尤其是受訪者身份會(huì)暴露的情況下,通過問卷調(diào)查的方式是不可能得到正確答案的。
那么數(shù)字化是怎么做的呢:
公司有員工每天的用餐刷卡記錄,也有每天的人員出勤記錄,將吃飯人數(shù)除以出勤人數(shù)得到一個(gè)比值,這個(gè)比值越高就說明食堂的滿意度越高。這是一個(gè)極其簡(jiǎn)化的例子,但已經(jīng)包含了數(shù)字化轉(zhuǎn)型的大部分內(nèi)容。
這個(gè)例子中,食堂吃飯記錄,考勤記錄各自都是一個(gè)數(shù)據(jù)孤島,當(dāng)他們可以在一定范圍內(nèi)整合,那就是云的概念了,云其實(shí)就是打破了物理界限的存儲(chǔ)。單獨(dú)一條用餐記錄,出勤記錄是沒有任何意義的,但大量的數(shù)據(jù)是必有規(guī)可循的,這就是大數(shù)據(jù)。通過數(shù)據(jù)計(jì)算出指標(biāo),就是人工智能,就是算法。解決簡(jiǎn)單的問題需要簡(jiǎn)單的算法,比如上例中的除法運(yùn)算。解決復(fù)雜的問題需要復(fù)雜的算法,也就是人工智能,比如AlphaGo用到的神經(jīng)網(wǎng)絡(luò)算法。
所以我說,數(shù)字化是一種思維,而并非技術(shù)。轉(zhuǎn)型的成敗在于企業(yè)中的大多數(shù)人是否具有這種思維。
數(shù)字化是幫助業(yè)務(wù)部門用技術(shù)手段構(gòu)建新型的作戰(zhàn)平臺(tái),是發(fā)自各業(yè)務(wù)內(nèi)心的,打通各業(yè)務(wù)板塊,解決各業(yè)務(wù)問題的。
我經(jīng)常用上帝視角來形容數(shù)字化轉(zhuǎn)型,站在云端,伸手可及的數(shù)據(jù),加工成需要的業(yè)務(wù)指標(biāo)。
我有一個(gè)朋友需要總體掌握工廠的廢品情況,而不單單是廢品率。其實(shí)就是希望能自動(dòng)化生成一張圖表并進(jìn)行預(yù)警。這張表需要的數(shù)據(jù)來源于公司各個(gè)部門,生產(chǎn)數(shù)據(jù),出入庫(kù)數(shù)據(jù),發(fā)貨數(shù)據(jù),定額數(shù)據(jù),廢品數(shù)據(jù),采購(gòu)數(shù)據(jù),財(cái)務(wù)數(shù)據(jù)等等。公司規(guī)定廢品單件的損失需要質(zhì)保領(lǐng)導(dǎo),財(cái)務(wù)領(lǐng)導(dǎo)簽字審批后,才能將數(shù)據(jù)給業(yè)務(wù)人員。最終的結(jié)果就是,及時(shí)的預(yù)警變成了月報(bào)表材料???,部門的壁壘加上看似合理的制度成了推行數(shù)字化轉(zhuǎn)型的壁壘。
所以我說,數(shù)字化轉(zhuǎn)型還真是非企業(yè)一把手推行不了的。
有一句話叫“任何偉大的產(chǎn)品都來自一個(gè)偉大的問題”。現(xiàn)在企業(yè)在談數(shù)字化的時(shí)候,往往忽略了要解決的問題,談的都是別人家的概念。
我見過一個(gè)企業(yè)的老板,說要對(duì)自己的小公司進(jìn)行數(shù)字化改造,買了ERP對(duì)資源進(jìn)行管理,買了大屏給員工展示項(xiàng)目進(jìn)度。一年后,系統(tǒng)荒廢,因?yàn)檎麄€(gè)采購(gòu)過程是老板娘一手主辦,除了入庫(kù)沒有什么需要協(xié)作的工作。大屏成了播放企業(yè)宣傳片的工具,還得配一個(gè)人專門去維護(hù)項(xiàng)目進(jìn)度耗時(shí)耗力。試問,公司數(shù)據(jù)化轉(zhuǎn)型到底是為了解決什么問題?
數(shù)字化轉(zhuǎn)型,不是簡(jiǎn)單的引進(jìn)新技術(shù),新設(shè)備就能完成的。目標(biāo)多少年數(shù)字化轉(zhuǎn)型成功的,絕對(duì)傻子,保證多少年數(shù)字化轉(zhuǎn)型成功的,無(wú)疑是騙子。
我的觀點(diǎn),數(shù)字化的終極目標(biāo)就是解決固定的問題。
數(shù)字化帶來的效率提升,可以讓效率真正成為企業(yè)競(jìng)爭(zhēng)力的核心,將成為企業(yè)的護(hù)城河。
所以企業(yè)為什么要進(jìn)行數(shù)字化轉(zhuǎn)型?因?yàn)檫@是提升效率的必由之路,成敗的關(guān)鍵在于業(yè)務(wù)問題和人,最終目的是使公司的產(chǎn)品、流程更簡(jiǎn)單、更愉悅、更快捷、體驗(yàn)更好。
“路非自行不知遠(yuǎn),事非親歷不知難”
企業(yè)數(shù)字化轉(zhuǎn)型,必須是因人而異,每個(gè)企業(yè)的轉(zhuǎn)型過程是不一樣的,轉(zhuǎn)型的結(jié)果必然也不一樣。
思考二:數(shù)字化轉(zhuǎn)型的目標(biāo),基礎(chǔ),過程
下面來談?wù)剶?shù)字化轉(zhuǎn)型的目標(biāo),或者說數(shù)字化轉(zhuǎn)型后組織會(huì)成為一個(gè)什么樣的狀態(tài)?
在復(fù)仇者聯(lián)盟中有這樣一段場(chǎng)景,蟻人縮小后通過縫隙進(jìn)入鋼鐵俠戰(zhàn)甲,戰(zhàn)甲檢測(cè)到異物侵入,進(jìn)入預(yù)警狀態(tài),當(dāng)蟻人徒手撕扯一根電線時(shí),系統(tǒng)自動(dòng)判定蟻人具體位置,并自動(dòng)啟動(dòng)沖洗裝置,將蟻人從戰(zhàn)甲中沖洗了出去。
其實(shí),在我認(rèn)為,數(shù)字化轉(zhuǎn)型成功的企業(yè)和鋼鐵俠的戰(zhàn)甲一樣,是一個(gè)數(shù)字化的“智能體”。
組成這個(gè)智能體的每一個(gè)細(xì)胞都有相關(guān)聯(lián)的數(shù)據(jù)鏈接,能即時(shí)感知并調(diào)用,也就是全量全要素的連接和實(shí)時(shí)反饋。
最終進(jìn)化成這樣一個(gè)“智能體”,可以說是每一家企業(yè)數(shù)字化轉(zhuǎn)型的終極目標(biāo)。要完成這個(gè)終極目標(biāo),道路極其曲折和漫長(zhǎng),但做所有事情的基礎(chǔ)就是—全量全要素的連接和實(shí)時(shí)反饋。
怎樣進(jìn)行全量全要素的連結(jié)呢,接下來我要給你介紹一個(gè)所有企業(yè)都適用的模型,不管你是制造型企業(yè),還是服務(wù)型企業(yè),都可以參照這個(gè)模型來做全量全要素的連接。
就拿造車舉例:
如果需要你來設(shè)計(jì)采集的數(shù)據(jù),你會(huì)選擇哪些維度呢?
一般都是以下數(shù)據(jù),排量、功率、扭矩、馬力、軸距等等,這些數(shù)據(jù)僅僅只是一個(gè)環(huán)節(jié)的局部數(shù)據(jù)。
我認(rèn)為,這些數(shù)據(jù)遠(yuǎn)遠(yuǎn)不夠,你必須要從這個(gè)產(chǎn)品的設(shè)計(jì)、制造、銷售、后期服務(wù)一整個(gè)流程上去完成全量全要素的采集和連接。
比如汽車的、顏色、輪轂尺寸、理論速度、理論油耗、內(nèi)飾顏色等性能參數(shù),這些都是在設(shè)計(jì)環(huán)節(jié)的數(shù)據(jù)。
汽車是在哪個(gè)廠,哪條產(chǎn)線上生產(chǎn)的,核心零部件是哪里生產(chǎn)的,流程的操作員是誰(shuí),檢查員是誰(shuí),組裝時(shí)具體用了哪些物料,這些物料的屬性有哪些,這是制造過程產(chǎn)生的數(shù)據(jù)。
車被誰(shuí)買了,買家的年齡,性別,職業(yè),首次買車or換車,貸款or全款等等,銷售員數(shù)據(jù),銷售員銷售過程怎樣,這是銷售過程數(shù)據(jù)。
買家維修記錄,故障數(shù)據(jù),對(duì)車的內(nèi)外飾改裝記錄,甚至開車習(xí)慣記錄,這是汽車后期服務(wù)記錄。
關(guān)于業(yè)務(wù)對(duì)象的采集和連接,有一個(gè)概念叫“數(shù)字孿生”,我以前稱為“數(shù)字鏡像”,這不是個(gè)新概念,喜歡編程的同學(xué)都知道“面向?qū)ο缶幊獭保褪菍?shí)際的業(yè)務(wù)對(duì)象抽象成系統(tǒng)中的一個(gè)虛擬對(duì)象,也就是在數(shù)字世界里建一個(gè)一模一樣的模型。有了這個(gè)虛擬體,現(xiàn)實(shí)世界里很難做的事,你就切換到數(shù)字世界里去看它的虛擬體。所以所謂的全連接全采集的過程,就是根據(jù)采集現(xiàn)實(shí)世界的數(shù)據(jù),生成一個(gè)數(shù)字平行世界,通過數(shù)字平行世界得到的經(jīng)驗(yàn)來指導(dǎo)真實(shí)世界,再次收集真實(shí)世界的真實(shí)情況,再次優(yōu)化數(shù)字平行世界,如此循環(huán)。筆者在傳統(tǒng)制造業(yè)供職多年,制造業(yè)的持續(xù)改進(jìn)理念和這個(gè)非常類似。所以說,數(shù)字化轉(zhuǎn)型并不是什么高大上的東西,只是使用的工具不同而已。
舉個(gè)例子,數(shù)字化時(shí)代可能出現(xiàn)這樣的場(chǎng)景,比如一汽造車,可以一輛樣車都不生產(chǎn)就直接生產(chǎn)商用汽車,因?yàn)橛袛?shù)字化的手段去完成所有的測(cè)試、仿真,碰撞試驗(yàn)等,把復(fù)雜度極高的汽車直接還原出來。
這就是對(duì)業(yè)務(wù)對(duì)象進(jìn)行數(shù)據(jù)采集的標(biāo)準(zhǔn):把全量全要素的數(shù)據(jù)都采集和連接好了之后,要看這些數(shù)據(jù)是不是能夠還原業(yè)務(wù)對(duì)象的全貌,是不是真的擁有了一個(gè)數(shù)字孿生兄弟。
當(dāng)然,完全還原對(duì)象全貌是理論上的,現(xiàn)實(shí)中只會(huì)越來越接近,不會(huì)等于。但好在,現(xiàn)在信息的存儲(chǔ)成本是極低的(此處主要指可用于分析的結(jié)構(gòu)化數(shù)據(jù)),一個(gè)excel表都能存100多萬(wàn)行呢,不用為了取舍是否該保存某項(xiàng)信息而焦慮,垃圾信息里可能隱藏著誘人的寶藏,就好比一個(gè)人說紅旗車好,你可以忽略,認(rèn)為這就是情懷驅(qū)使,但一群人說紅旗車好,那你就應(yīng)該考慮這車是不是真有點(diǎn)意思了。
接下來,當(dāng)數(shù)據(jù)全量全要素的連接后,怎么樣確保系統(tǒng)做到了實(shí)時(shí)反饋?
答案也很簡(jiǎn)單,你可以看這套系統(tǒng)是否具備了7項(xiàng)職能:預(yù)測(cè)、預(yù)警、監(jiān)控、協(xié)同、調(diào)度、決策和指揮。
還拿生產(chǎn)汽車來說,通過連接渠道、用戶、廣告投放量等這些維度的數(shù)據(jù),就可以綜合預(yù)測(cè)出新車第一批的產(chǎn)量,這是預(yù)測(cè)職能。
數(shù)量定了,就進(jìn)入排產(chǎn)制造環(huán)節(jié),現(xiàn)在因?yàn)楣S里所有的產(chǎn)線都是智能化生產(chǎn)線,不太需要人工干預(yù),但是也會(huì)監(jiān)控,比如監(jiān)控產(chǎn)線的投料情況、運(yùn)行情況等等,這是監(jiān)控職能。
這些數(shù)據(jù)收集過來之后就可以用于風(fēng)險(xiǎn)預(yù)警,比如掃描物毛坯碼,發(fā)現(xiàn)型號(hào)錯(cuò)了,產(chǎn)線會(huì)自行判斷裝配關(guān)系不成立,給生產(chǎn)人員發(fā)預(yù)警信息,提醒需要人工干預(yù),這是預(yù)警職能。
接下來,產(chǎn)品的制造信息也會(huì)和供應(yīng)、物流協(xié)同起來。在成品數(shù)量滿足一定量時(shí)自動(dòng)調(diào)配物流車,生產(chǎn)完就直接裝車運(yùn)輸,節(jié)省了存儲(chǔ)環(huán)節(jié)。在這個(gè)過程里,協(xié)同、調(diào)度、決策、指揮幾個(gè)維度的職能都有體現(xiàn)。
將汽車生產(chǎn)的原料方、供應(yīng)商、總裝廠,銷售等等全量全要素連進(jìn)來了,也建起實(shí)時(shí)反饋系統(tǒng)了,最終會(huì)實(shí)現(xiàn)什么樣的效果?
假設(shè)汽車在使用過程中發(fā)現(xiàn)任何一個(gè)元器件有問題,此元器件在連續(xù)工作20小時(shí)以上會(huì)有較大自燃風(fēng)險(xiǎn),我們就可以及時(shí)查詢到同批次的原件都安裝到哪些車?yán)?,現(xiàn)在車在哪些環(huán)節(jié)里,有多少已經(jīng)銷售給用戶,調(diào)取用戶的使用數(shù)據(jù),針對(duì)不同用戶對(duì)車的使用習(xí)慣給定特定的處置方案,例如:對(duì)頻繁使用的車輛可以采取專人上門服務(wù),對(duì)不頻繁使用的車輛可以用優(yōu)惠券的形式引導(dǎo)顧客提前來4S店保養(yǎng)時(shí)維修等。從而將損失降到最低。甚至可以反向追溯元器件的問題,出問題的元器件是哪個(gè)供應(yīng)商,原材料是什么,同樣的原材料是否影響到其他的元件。
這是一些優(yōu)秀的汽車企業(yè)正在做的一些事。
可想而知,大多數(shù)企業(yè)離“智能體”還差的很遠(yuǎn),但值得強(qiáng)調(diào)一點(diǎn),任何想做或者要做數(shù)字化轉(zhuǎn)型的企業(yè),都要把“智能體”當(dāng)做自己的終極目標(biāo)。如果沒有這個(gè)愿景,那么企業(yè)就很容易成為坐在數(shù)據(jù)的金山上喊窮的富人。其實(shí)很多企業(yè)都擁有大量豐富的數(shù)據(jù),或有意識(shí)也有財(cái)力去采集大量數(shù)據(jù),但恰恰缺少通過有效的數(shù)據(jù)治理來形成數(shù)字化“智能體”的能力,采集數(shù)據(jù)絕大部分是技術(shù)活,可以通過花錢請(qǐng)人搞定的,但數(shù)據(jù)治理能力很難外委,因?yàn)橥瑫r(shí)具備業(yè)務(wù)能力和IT思維的人不多。絕大多數(shù)公司都將數(shù)字化轉(zhuǎn)型當(dāng)成了項(xiàng)目,最終做成了一個(gè)能顯示幾個(gè)主要指標(biāo)的大屏幕,做成了面子工程。
下面舉再舉個(gè)例子,說明這個(gè)“智能體”是一步一步進(jìn)化而來的。
案例:
社區(qū)中的孤寡老人的管理
level 1,社區(qū)人員定期拜訪,但人手不足,成本高,真發(fā)生意外發(fā)現(xiàn)時(shí)間過晚
level 2,客廳里安裝監(jiān)控,社區(qū)人員抽查監(jiān)控,但涉及老人隱私問題,推行較難
level 3,為住戶安裝智能水表,當(dāng)每日的用水量小于一定值時(shí),自動(dòng)發(fā)出報(bào)警,提醒社區(qū)人員干預(yù)檢查。效率大大提高,但當(dāng)老人外出后,用水量小,電話沒人接,社區(qū)服務(wù)人員無(wú)法判斷,撬門還是不撬門
level 4,連接電梯的視頻數(shù)據(jù)判斷老人是否外出
level 5,持續(xù)改進(jìn)
你看,所謂的全量全要素的連接也只是一種理想狀態(tài),現(xiàn)實(shí)中無(wú)法在設(shè)計(jì)時(shí)就考慮到所有的要素?cái)?shù)據(jù)連接,而是在實(shí)際場(chǎng)景中,一步一步卷入了更多的設(shè)備和人,持續(xù)改進(jìn)。
所謂數(shù)字化轉(zhuǎn)型只有起點(diǎn),沒有終點(diǎn),正是這個(gè)意思。
思考三:數(shù)字化與信息化的關(guān)系
了解了數(shù)字化轉(zhuǎn)型的目標(biāo)后,我們來探討下轉(zhuǎn)型的過程,其實(shí)也很簡(jiǎn)單,就是瞄準(zhǔn)業(yè)務(wù)行動(dòng)。
說起數(shù)字化轉(zhuǎn)型,必須得提信息化,這也是很多人問我的問題,那么信息化和數(shù)字化有什么區(qū)別呢,我試著解釋下!
在信息化以前,信息的載體主要是紙張,決策者要想全面了解信息,又沒有全量處理信息的能力,所以只好通過科層制組織架構(gòu),層層匯總數(shù)據(jù)、層層上報(bào)信息,這樣信息極易衰減、失真、甚至篡改。
信息化,通過網(wǎng)絡(luò)傳輸數(shù)據(jù)、數(shù)據(jù)庫(kù)存儲(chǔ)和處理數(shù)據(jù),決策者就能全面快捷掌握業(yè)務(wù)信息,有利于快速采取對(duì)策,所以信息化的指向是決策。但是,這樣的信息化實(shí)質(zhì)是把原來紙質(zhì)載體上的內(nèi)容信息,變成網(wǎng)絡(luò)能跑的數(shù)據(jù)、文字、圖片、影像等數(shù)字形式信息,業(yè)務(wù)流程本質(zhì)并沒有根本性變化。
數(shù)字化,是“萬(wàn)物數(shù)化、萬(wàn)物互聯(lián)”,是卷入流程鏈條上所有人、物、事,極大提升效率、優(yōu)化體驗(yàn)。數(shù)字化的終點(diǎn)是直接行動(dòng)。
以下這個(gè)簡(jiǎn)單的標(biāo)準(zhǔn)來判定您公司處于哪個(gè)階段,您可以對(duì)號(hào)入座:
如果數(shù)據(jù)的采集大量來源于手工的謄抄,然后匯總到專人處理,這個(gè)專人的Excel功力深厚,公司的匯報(bào)形式以PPT為主,實(shí)行層層上報(bào)制,定時(shí)匯報(bào)制,這屬于前信息化。
如果數(shù)據(jù)的采集大部分來源于自動(dòng)采集或底層人員的業(yè)務(wù)流水,通過平臺(tái)系統(tǒng)數(shù)據(jù)清洗,建模,以業(yè)務(wù)駕駛艙模式指導(dǎo)決策,能即時(shí)發(fā)現(xiàn)并處理問題,屬于信息化。
如果數(shù)據(jù)的采集大部分來源于自動(dòng)采集或底層人員的業(yè)務(wù)流水,打通各環(huán)節(jié)數(shù)據(jù),依據(jù)算法,達(dá)到提醒、預(yù)警、建議、自動(dòng)行動(dòng),是數(shù)字化。
因此,我們要對(duì)數(shù)字化轉(zhuǎn)型建立的第一個(gè)新的認(rèn)知是:
“數(shù)字化不是信息化,數(shù)字化是直接行動(dòng)。”
你可以想象這樣一個(gè)場(chǎng)景,交通管理中心的大屏幕,上面有N多的屏幕攝像頭循環(huán)監(jiān)控著各個(gè)交通路口,屏幕前方是幾十至上百人的辦公卡位,當(dāng)某個(gè)路口車流增大,辦公人員就會(huì)電話通知交警前往指揮交通,這是信息化的解決方案。
那么數(shù)字化是怎樣的呢?當(dāng)攝像頭檢測(cè)到東西向車流變大時(shí),便自動(dòng)調(diào)整路口紅綠燈時(shí)長(zhǎng),讓東西方向綠燈長(zhǎng)一些,然后再將路況信息上傳至交管中心云服務(wù)器,并被導(dǎo)航地圖軟件調(diào)用,反饋至每一個(gè)用戶APP,提示繞行。同時(shí)設(shè)置當(dāng)擁堵達(dá)到一定程度時(shí)報(bào)警提醒交警是否實(shí)地介入,這就是數(shù)字化的方案。
所以,信息化不是數(shù)字化,數(shù)字化是直接行動(dòng)。
再舉個(gè)一般公司都會(huì)遇到的場(chǎng)景,每個(gè)公司都有大量的采購(gòu)業(yè)務(wù),一般ERP的對(duì)應(yīng)流程是人提采購(gòu)申請(qǐng),人審批,人下訂單,人維護(hù)入庫(kù),人維護(hù)出庫(kù),全程留痕,這是信息化的解決方案。數(shù)字化的方案呢,從客戶訂單開始,整合產(chǎn)品庫(kù)存、在制品量、現(xiàn)生產(chǎn)量、產(chǎn)品定額、物料庫(kù)存、物料訂單、到貨期、物料入庫(kù)、物料出庫(kù)數(shù)據(jù),自動(dòng)給合作供應(yīng)商發(fā)送一條信息,“請(qǐng)貴公司于2021年6月22日將液體樹脂膠HQ300(物料編碼HT25487)送達(dá)XX公司,結(jié)算價(jià)格按照上次價(jià)格XX元結(jié)算?!?
所以,信息化提供的是一大堆的信息,指向決策,而數(shù)字化指導(dǎo)行動(dòng),甚至直接行動(dòng)。
我們需要建立的第二個(gè)新的認(rèn)知是:
“數(shù)字化的過程將卷入所有的業(yè)務(wù)流程,只要開始就不會(huì)結(jié)束”
什么是業(yè)務(wù)流程,是為達(dá)到特定的價(jià)值目標(biāo)而由不同的人分別共同完成的一系列活動(dòng)。簡(jiǎn)單說就是“人用工具干事”。
因此,卷入流程實(shí)際就是卷入更多的人及更多的物。
卷入更多的人。
數(shù)字化的本質(zhì)是從信息采集到智能化的行動(dòng),數(shù)字化系統(tǒng)不只是決策者能用,而是產(chǎn)業(yè)鏈上的所有人都能用。
再回到我們前面提到的城市交通管理的案例。
那塊布滿整面墻的大屏,只是為少數(shù)決策者服務(wù)的,也就是交管中心警察的決策工具。
數(shù)字化轉(zhuǎn)型后,我們開發(fā)出了新的地圖導(dǎo)航系統(tǒng),這個(gè)系統(tǒng)可以讓每一個(gè)使用城市道路的人用,無(wú)論是司機(jī)還是上班的普通市民,每個(gè)人都可以利用地圖App進(jìn)行導(dǎo)航。
再舉個(gè)簡(jiǎn)單的例子:
我公司過去產(chǎn)品出廠后基本失控,甚至連數(shù)都統(tǒng)計(jì)不準(zhǔn)。后來自研了一套簡(jiǎn)單的物流系統(tǒng),出廠后以整箱二維碼為唯一標(biāo)識(shí),每一個(gè)業(yè)務(wù)環(huán)節(jié)都是掃碼確認(rèn),對(duì)出廠后的物流各個(gè)環(huán)節(jié)的數(shù)量算是統(tǒng)計(jì)準(zhǔn)確了。
后來因客戶發(fā)現(xiàn)質(zhì)量問題,需要增加一個(gè)功能,就是當(dāng)客戶處發(fā)現(xiàn)某一件產(chǎn)品有問題時(shí),可以對(duì)產(chǎn)品實(shí)施精準(zhǔn)追溯,外服人員可以對(duì)同屬性的產(chǎn)品(比如同一時(shí)間段,同一模具號(hào)等)進(jìn)行一鍵封存,封存的物資沒有辦法流入下一環(huán)節(jié)。因此增加了產(chǎn)品激光打碼功能,裝箱時(shí)自動(dòng)記錄箱碼和產(chǎn)品碼匹配記錄。
再后來,由于質(zhì)量部門并不負(fù)責(zé)組織發(fā)貨,發(fā)生質(zhì)量問題導(dǎo)致倉(cāng)儲(chǔ)部門臨時(shí)組織配貨,抱怨嚴(yán)重。因此需要根據(jù)客戶的收貨情況,外部質(zhì)量情況來修正發(fā)貨計(jì)劃。這樣,系統(tǒng)中又加入了發(fā)貨計(jì)劃提醒功能。
再后來,發(fā)貨計(jì)劃的修改,又導(dǎo)致了生產(chǎn)計(jì)劃的變動(dòng),便加入了生產(chǎn)計(jì)劃提醒功能。
接著,由于生產(chǎn)計(jì)劃的變動(dòng),導(dǎo)致了采購(gòu)部門的抱怨,一環(huán)一環(huán),最后對(duì)接了公司內(nèi)部物料采購(gòu)系統(tǒng)。直接修改了物料的采購(gòu)申請(qǐng)計(jì)劃。
看看,原本只是為了掌握出廠后的產(chǎn)品數(shù)量而設(shè)計(jì)的流程系統(tǒng),但卻逐步卷入了客戶,外服,質(zhì)保,倉(cāng)儲(chǔ),生產(chǎn),采購(gòu)等各個(gè)環(huán)節(jié),無(wú)一幸免。
數(shù)字化轉(zhuǎn)型對(duì)企業(yè)就是這樣,它并不只是讓一家公司的CEO用,或者只讓一個(gè)生產(chǎn)車間的負(fù)責(zé)人來用,或者是讓一些專業(yè)人士來用的,而是企業(yè)內(nèi)部生產(chǎn)線上的每一個(gè)人,上下游供應(yīng)鏈上的每一個(gè)人,都可以利用這個(gè)系統(tǒng),來給自己的業(yè)務(wù)提供決策參考。也就是說,產(chǎn)業(yè)鏈上的所有人都被卷進(jìn)了數(shù)字化系統(tǒng)里了。
卷入更多的設(shè)備
數(shù)字化在應(yīng)用層不僅卷入越來越多的人,還要把越來越多的設(shè)備也卷入進(jìn)來。也就是萬(wàn)物互聯(lián)。
我們還是回到一開始說的城市交通管理的例子,一開始只是警察通過監(jiān)控信息大屏來監(jiān)控交通擁堵,再往下一步就是手機(jī)導(dǎo)航應(yīng)用,每一個(gè)人都成為了決策和應(yīng)用的主體。但這些就是數(shù)字化的最終結(jié)果了么?當(dāng)然不是,如果把城市交通的全價(jià)值鏈打通,未來就應(yīng)該和路上跑的每一臺(tái)汽車聯(lián)通,不用導(dǎo)航,汽車直接就能把我送到我想去的目的地,這也就是自動(dòng)駕駛。這是最終結(jié)果了么?當(dāng)然不是,必然自動(dòng)駕駛會(huì)卷入了你的智能穿戴設(shè)備,智能家居設(shè)備,而給你更好更優(yōu)的體驗(yàn)。
所以,數(shù)字化是一個(gè)軟硬件設(shè)備不斷被卷入的過程。在智慧交通的場(chǎng)景里,數(shù)字化先是卷入了基礎(chǔ)的道路交通系統(tǒng),然后再變成手機(jī)上的應(yīng)用,再往前一層就要卷入汽車和硬件廠家,數(shù)字化也在這個(gè)過程中得到深化,并且一步一步將所有設(shè)備卷入其中。
思考四:數(shù)字化轉(zhuǎn)型必須一把手親自干
其實(shí)我認(rèn)為最難最難的,數(shù)字化轉(zhuǎn)型成敗的關(guān)鍵,那就是一把手的作用。
《華為數(shù)據(jù)之道》一書中總結(jié)數(shù)字化轉(zhuǎn)型過程中,有三張圖只存在一把手的腦袋里,別人沒法替代。大家可以在網(wǎng)上搜一搜。
簡(jiǎn)述一下文中的內(nèi)容:
文章闡述為什么數(shù)字化必須由一把手推進(jìn),因?yàn)橛行〇|西只能跳出來,站在中立的角度來看待,才能知道什么是對(duì)組織真正帶來價(jià)值的內(nèi)容。這個(gè)角色,誰(shuí)都不行,只能是一把手。
文中提到三張圖:
第一,用戶價(jià)值圖,這是對(duì)外,要理解你的用戶;不同的部門,對(duì)用戶價(jià)值的理解角度不一樣,生產(chǎn)部門覺得是低價(jià),質(zhì)保部門部覺得是服務(wù),但是怎么可以兼顧價(jià)格和價(jià)值,需要一把手來衡量做取舍。
第二,業(yè)務(wù)演進(jìn)圖,這是對(duì)內(nèi),要理解你的業(yè)務(wù)方向;人都是利己的,誰(shuí)都想要為自己和自己的部門爭(zhēng)取更多的資源和權(quán)限,資源和權(quán)限的爭(zhēng)奪就是零和游戲。怎么平衡,并且推進(jìn)業(yè)務(wù)展,需要一把手來拍板。
第三,架構(gòu)生長(zhǎng)圖,這是對(duì)未來,要理解企業(yè)終將變成什么樣?這其實(shí)跟企業(yè)的愿景相關(guān),很多短期目標(biāo)和長(zhǎng)期目標(biāo)是不匹配的,但是短期目標(biāo)達(dá)不到就關(guān)乎生死又怎么辦?誰(shuí)能有這個(gè)魄力說一定要這樣干,哪怕做出很大的犧牲。
文章其實(shí)是在說人性,用戶價(jià)值,業(yè)務(wù)方向,架構(gòu)生長(zhǎng),這并不是多么玄乎的事,但是因?yàn)槿擞辛瞬煌慕M織身份就有了不同的訴求。怎么跳出人性的自私和惰性,怎么延遲滿足,怎么從一而終,對(duì)任何一個(gè)人,真的都是一個(gè)挑戰(zhàn)。
這篇文章真的很精煉,那我只是補(bǔ)充下我的一點(diǎn)拙見。
拙見一、完全認(rèn)同數(shù)字化轉(zhuǎn)型“一把手必須親自干”
扎克伯格說“80%的企業(yè)文化由創(chuàng)始人決定”,文化是一把手塑造的,而且是需要長(zhǎng)期經(jīng)營(yíng)的。這里有兩個(gè)關(guān)鍵詞,一把手塑造,長(zhǎng)期經(jīng)營(yíng)。
數(shù)字化轉(zhuǎn)型成敗,首要轉(zhuǎn)文化。因?yàn)橹挥蟹窒砗蜆酚诜瞰I(xiàn)的企業(yè)氛圍才是數(shù)字化生長(zhǎng)的優(yōu)良土壤。
我們已經(jīng)知道,轉(zhuǎn)型的基礎(chǔ)就是數(shù)據(jù)的打通,而傳統(tǒng)企業(yè)大多數(shù)的組織機(jī)構(gòu)都是職能部樹狀結(jié)構(gòu),猶如一根根高聳的煙囪一樣,屁股決定腦袋,這是人性。拋開技術(shù)能力不說,每個(gè)部門也基本都是各自為戰(zhàn)的,每個(gè)團(tuán)隊(duì)都只關(guān)注自己領(lǐng)域的事,能力無(wú)法沉淀及互通。
企業(yè)與企業(yè)之間的壁壘更是如此,如果數(shù)據(jù)沒有充分地共享,那業(yè)務(wù)流上就有一個(gè)個(gè)斷點(diǎn)。那么及時(shí)響應(yīng),快速迭代啊,都因?yàn)檫@些斷點(diǎn)沒法實(shí)現(xiàn)。數(shù)據(jù)不能有效地流動(dòng)和共享,就不能發(fā)揮數(shù)字化的價(jià)值。
數(shù)字化轉(zhuǎn)型必須轉(zhuǎn)文化,轉(zhuǎn)的就是這種各自為戰(zhàn)、不開放共享的文化。
但人性本就是自私的,共享這個(gè)事是反人性的,因此我們的所有手段都應(yīng)該瞄準(zhǔn)人性,促使員工自發(fā)的去分享。提升的是企業(yè)知識(shí)管理的能力。
拙見二、企業(yè)的知識(shí)管理是一個(gè)大事
其實(shí)很多公司現(xiàn)在也有了知識(shí)管理的平臺(tái),但大多都存儲(chǔ)各種標(biāo)準(zhǔn),總結(jié),紀(jì)要,文檔等等,留存的都是高度濃縮的結(jié)論,這個(gè)應(yīng)該叫應(yīng)知應(yīng)會(huì)比較合適。而關(guān)于知識(shí),知識(shí)本身只是知識(shí)的一半,還有一半,是它當(dāng)時(shí)解決的那個(gè)問題。知識(shí)的管理一定要瞄準(zhǔn),什么時(shí)間發(fā)生了什么事,為什么這么做,也就是重現(xiàn)員工的思考過程,這個(gè)以論壇帖的形式應(yīng)該是不錯(cuò)的選擇。
有一個(gè)經(jīng)典的案例:
電腦鍵盤,天天都用,但是你想過沒有,鍵盤上的那些字母,為什么是QWERTY,亂排一氣,而不是ABCDEF?而且所有的鍵盤都是這樣排列的。
答案是,1.科學(xué)家經(jīng)過研究設(shè)計(jì)的符合“人體工程學(xué)”的排布;2:錯(cuò)亂的排序可以降低打字速度,從而適應(yīng)早期電腦較差的性能。你會(huì)認(rèn)為哪個(gè)呢?
其實(shí)兩個(gè)都不對(duì),真實(shí)的情況是,老式打字機(jī)的主體部分是一個(gè)鍵盤(上圖),然后每個(gè)字母鍵的下面連一個(gè)桿兒。一按這個(gè)鍵,就驅(qū)動(dòng)一根小棍上彈,打到前面的紙上。發(fā)明鍵盤的是一個(gè)美國(guó)人,叫肖爾斯。他一開始設(shè)計(jì)的鍵盤就是按ABCDE排的,但很快發(fā)現(xiàn)一個(gè)問題,就是如果相鄰兩個(gè)鍵幾乎同時(shí)按下去,會(huì)有相鄰兩個(gè)棍彈出去,它們很容易卡在一起,這就麻煩了。所以肖爾斯就把英語(yǔ)中經(jīng)常用到的那些字母,在鍵盤上分開了,分成了我們現(xiàn)在用的QWERTY布局。就這么簡(jiǎn)單。
后來技術(shù)改進(jìn)了,不存在卡一起的問題了,但是鍵盤本身的排列卻定下來了。
你看解決方案留下來了,但是它解決的那個(gè)問題卻被遺忘了。
那么華為是如何將知識(shí)原汁原味的傳承下來的呢?
10年前的華為,大都也是單兵、精兵,能力在個(gè)人身上,沒法沉淀。留下的也大多都是標(biāo)準(zhǔn)操作等等。
華為通過近10年時(shí)間建立起來了類似微博論壇的全球知識(shí)分享平臺(tái)。平臺(tái)上的方案,成果,經(jīng)驗(yàn)以及遇到的坑都有對(duì)應(yīng)的版權(quán),有人評(píng)論、有人點(diǎn)贊,就會(huì)得到相應(yīng)的分?jǐn)?shù),分?jǐn)?shù)高的公司會(huì)給予你榮譽(yù)和獎(jiǎng)勵(lì)。這套評(píng)價(jià)體系里有一個(gè)挺巧妙的心思在里面,衡量開放共享的方式,用的是別人調(diào)用了你多少次,而不是你分享了多少東西。細(xì)品!反正阿里巴巴也效仿了這種做法。這樣經(jīng)驗(yàn)豐富的專家通過數(shù)字化的方式,把個(gè)人能力沉淀并分享出來,成為公司整體的能力。也幫公司形成了共享的氛圍,原先誰(shuí)有一個(gè)好東西都得藏著掖著,現(xiàn)在有一個(gè)好東西,恨不得立刻分享出來,昭告全球。
其實(shí)這還只是傳統(tǒng)知識(shí)管理升級(jí)版,因?yàn)橛泻芏嚯[性知識(shí)不能用文字準(zhǔn)確表述和轉(zhuǎn)載,任正非說過“公司最大的浪費(fèi)就是經(jīng)驗(yàn)的浪費(fèi)”,華為怎么做的,華為還為員工共享了一份精準(zhǔn)的“知識(shí)地圖”。沿著這份地圖,每個(gè)人都能找到對(duì)的人,同樣可以很好地學(xué)習(xí)、解決問題。
最后,知識(shí)在華為,要么沉淀在了平臺(tái)上,要么沉淀在了一群華為人中。
嗚呼哀哉
筆者供職國(guó)有企業(yè),對(duì)國(guó)企數(shù)字化轉(zhuǎn)型還是有挺大的疑慮或遺憾。國(guó)有企業(yè)任何重點(diǎn)工作都是一把手掛帥,雖是一把手掛帥,但是否真的是“一把手親自干”呢?這是一個(gè)未知的問題。我看到的無(wú)外乎成立領(lǐng)導(dǎo)小組,工作小組,但真在干的時(shí)候是沒見過領(lǐng)導(dǎo)的面的。因此也無(wú)從知曉一把手心中是否有文章中提到的“三張圖”。畢竟,作為國(guó)有企業(yè)的一把手,也只是在企業(yè)中打一份“高級(jí)工”而已,任期績(jī)效就像達(dá)摩利斯劍一樣懸于頭頂,短期目標(biāo)無(wú)法達(dá)成就可能面臨換人的風(fēng)險(xiǎn),又談何犧牲自己達(dá)到長(zhǎng)期目標(biāo)的實(shí)現(xiàn)。因此,可能在大多數(shù)的國(guó)企,即使一把手心中真有這三張圖,但與現(xiàn)實(shí)的沖突也是必然的,因?yàn)檫@三張圖都是針對(duì)公司未來的長(zhǎng)期發(fā)展。更何況,絕大多數(shù)的一把手根本不具備這樣的素質(zhì)。因此也只有對(duì)企業(yè)長(zhǎng)期目標(biāo)抱有堅(jiān)定不移的信念,并無(wú)畏投入的一把手才能帶領(lǐng)企業(yè)走向生存。
按照這個(gè)思路,民營(yíng)企業(yè)且創(chuàng)始人思想融入企業(yè)愿景中的企業(yè)才有可能成功,而國(guó)有企業(yè)幾乎是無(wú)法成功的??梢哉f99%的企業(yè)都不會(huì)成功。而數(shù)字化轉(zhuǎn)型是企業(yè)發(fā)展的必由之路,由于馬太效應(yīng),未來極有可能在各行各業(yè)只有頭部的幾家龍頭公司能夠生存。
悲兮痛兮
以上便是我對(duì)數(shù)字化轉(zhuǎn)型的一些思考。盡管最后得出的結(jié)論是數(shù)字化轉(zhuǎn)型幾乎99%的企業(yè)是無(wú)法成功的,但企業(yè)員工具備數(shù)字化的思維和一些相關(guān)的技能,對(duì)企業(yè)的效率提升還是十分巨大的。
那么接下來我們來談一些實(shí)戰(zhàn)行動(dòng)及技術(shù)方面的問題。
優(yōu)化組織機(jī)構(gòu):
1.成立業(yè)務(wù)技術(shù)一體化的組織。就是把技術(shù)能力建在業(yè)務(wù)上,為業(yè)務(wù)部門配備技術(shù)人員,使其成為具體業(yè)務(wù)部門的一部分,形成一種長(zhǎng)期固定的組織形式。因?yàn)槿嗽谀膬海芰驮谀膬?。職能部組織和項(xiàng)目型組織之所以沒辦法在數(shù)字化轉(zhuǎn)型中發(fā)揮作用,就是因?yàn)楹雎粤诉@一點(diǎn):能力是長(zhǎng)在人身上的。而業(yè)務(wù)技術(shù)一體化的組織是目前華為探索10多年后,形成的最好的一種組織方式。這種組織模式下,能力不是封閉固化的,而是在不斷生長(zhǎng)的。
職能部組織和項(xiàng)目型組織的缺點(diǎn)可以自行度娘。
2.成立公司級(jí)的數(shù)據(jù)管理部門。由各個(gè)領(lǐng)域的專家組成,發(fā)布企業(yè)數(shù)據(jù)管理總綱,編制數(shù)據(jù)質(zhì)量管理政策和數(shù)據(jù)源管理政策,定期專門對(duì)數(shù)據(jù)架構(gòu)進(jìn)行評(píng)審,確定數(shù)據(jù)所有權(quán),確定數(shù)據(jù)互通的規(guī)范等。
數(shù)據(jù)是資產(chǎn),數(shù)據(jù)是資產(chǎn),如果沒有這樣一個(gè)組織,那資產(chǎn)連個(gè)管理部門都沒有,好意思說數(shù)據(jù)是資產(chǎn)嗎?
這個(gè)組織承擔(dān)的最大的職責(zé)就是建立架構(gòu),組織數(shù)據(jù)高效互通,沒想明白前絕不能貿(mào)然上各種系統(tǒng),寧愿慢一點(diǎn),否則就是需要花好幾倍的精力去清理數(shù)據(jù)。
1.元數(shù)據(jù)管理:元數(shù)據(jù)就是用來描述數(shù)據(jù)的數(shù)據(jù),這個(gè)十分重要,比如生產(chǎn)班次數(shù)據(jù),定義為B、C、A,分別代表白班、夜班、三班,這才使得BCA有了意義,而一旦定義好后,存儲(chǔ)C就代表夜班,不能再隨便更改,不能是C班,也不能是二班。這必須由對(duì)應(yīng)的業(yè)務(wù)部門承擔(dān)管理責(zé)任,而大多數(shù)企業(yè)都不重視這個(gè)。重申,這個(gè)非常非常重要!
2.“一數(shù)一源,用而不存”:標(biāo)準(zhǔn)化數(shù)據(jù)是不同業(yè)務(wù)流程間相互交流的業(yè)務(wù)語(yǔ)言,對(duì)一個(gè)數(shù)據(jù)定義完成后,其他系統(tǒng)的調(diào)用只能從這個(gè)數(shù)據(jù)的源頭調(diào)用。這個(gè)非常非常重要。實(shí)際上在絕大多數(shù)公司,明面上是數(shù)據(jù)源由單一部門管理,而存儲(chǔ)時(shí)轉(zhuǎn)手部門過多,實(shí)際調(diào)用時(shí)數(shù)據(jù)的真實(shí)性和準(zhǔn)確性根本無(wú)法保證。舉個(gè)例子,本公司產(chǎn)品二維碼編碼規(guī)則末尾兩位代表產(chǎn)品模具號(hào)(元數(shù)據(jù)概念),有一張對(duì)照表存于開發(fā)部門數(shù)據(jù)庫(kù)中,其中45代表B產(chǎn)品12號(hào)模具。生產(chǎn)部門調(diào)用時(shí)將45這個(gè)數(shù)解讀成B產(chǎn)品12號(hào)模具,存儲(chǔ)在生產(chǎn)數(shù)據(jù)庫(kù)中。這樣,45就可能誤解成12。中間經(jīng)過轉(zhuǎn)儲(chǔ)的過程越多,數(shù)據(jù)的丟失和改變也就越多,最終使得不同業(yè)務(wù)部門之間對(duì)同一對(duì)象的描述不一致。
3.數(shù)據(jù)類型:主要就是文本、數(shù)字、日期等類型,按照業(yè)務(wù)類型設(shè)置,該是什么類型就選擇什么類型,很多企業(yè)不重視數(shù)據(jù)類型的管理,基本都是文本類型,舉個(gè)例子,將日期存儲(chǔ)為文本類型,導(dǎo)致數(shù)據(jù)庫(kù)里存儲(chǔ)了大量的不是日期的日期(比如2021-01-35),后期在數(shù)據(jù)聚合分析時(shí),經(jīng)常報(bào)錯(cuò)。
4.ER模型:也叫雪花模型,實(shí)體關(guān)系模型,提供了表示實(shí)體、屬性和聯(lián)系的方法,是描述現(xiàn)實(shí)世界概念結(jié)構(gòu)模型的方法。實(shí)體對(duì)象之間的聯(lián)系方式通常為一對(duì)一,一對(duì)多,多對(duì)多等。這些概念十分重要且基礎(chǔ),嚴(yán)格按照這種方法設(shè)計(jì)信息系統(tǒng),會(huì)避免大量冗余。且ER模型是數(shù)據(jù)建模分析的基礎(chǔ),在數(shù)據(jù)分析的各個(gè)環(huán)節(jié)都是必不可少的理論基礎(chǔ)。
5.主數(shù)據(jù)編碼:公司的核心實(shí)體對(duì)象一定要編碼,編碼規(guī)則可以由公司自行設(shè)計(jì),只有編碼后的對(duì)象,才能成為數(shù)字世界里面現(xiàn)實(shí)對(duì)象的孿生對(duì)象。這個(gè)不難理解,人的身份證號(hào)就是人的實(shí)體對(duì)象編碼,在數(shù)字世界里身份證號(hào)代表人的唯一實(shí)體,并參與到數(shù)字世界的業(yè)務(wù)運(yùn)行中,而不是人的姓名。
很多公司辛辛苦苦開發(fā)系統(tǒng),創(chuàng)業(yè)未半而中道崩殂,大體就是以上對(duì)象管理不到位引起的。這也是我在工作中經(jīng)常遇到,耗費(fèi)大量時(shí)間去處理的事情,其實(shí)都是些臟活累活體力活,系統(tǒng)設(shè)計(jì)時(shí)若考慮足了以上問題,將為后期不斷拓展卷入更多流程提供方便。
數(shù)據(jù)治理能力并不是什么高大上的概念,只要企業(yè)具有良好的數(shù)據(jù)素質(zhì),不斷打磨適合企業(yè)的數(shù)據(jù)標(biāo)準(zhǔn)。就可以開發(fā)出適合自身的數(shù)字化系統(tǒng)。也就是說數(shù)據(jù)治理是個(gè)標(biāo)準(zhǔn)的管理問題。
學(xué)習(xí)數(shù)據(jù)工具:
以下內(nèi)容主要針對(duì)企業(yè)業(yè)務(wù)提效,掌握的人越多對(duì)企業(yè)越有利。
數(shù)據(jù)采集
互聯(lián)網(wǎng)是當(dāng)今世界最大的數(shù)據(jù)庫(kù),如果學(xué)會(huì)爬蟲技術(shù)就可以在網(wǎng)絡(luò)里采集你需要的數(shù)據(jù),并及時(shí)將數(shù)據(jù)保存至本地,參與到您公司的業(yè)務(wù)流程中。
常見的非編程爬蟲軟件有:八爪魚采集器、簡(jiǎn)數(shù)采集器、后羿采集器等,基本都是拖拖拽拽就可以形成采數(shù)規(guī)則,非常友好,可以滿足80%的使用場(chǎng)景,進(jìn)階需要學(xué)習(xí)一些HTML標(biāo)簽,及Xpath定位技術(shù)。再升級(jí)就是用編程語(yǔ)言寫爬蟲了,推薦Python。
Regular Expression,簡(jiǎn)寫RE,是對(duì)字符串操作的一種邏輯公式,就是先定義好一些特定字符的組合,然后用這種組合代表的規(guī)則對(duì)字符串進(jìn)行過濾的邏輯。主要用于對(duì)文本輸入的合規(guī)性檢測(cè),在數(shù)據(jù)入庫(kù)前進(jìn)行把關(guān),從而使得入庫(kù)數(shù)據(jù)干凈整潔,滿足要求。比如“^d{n}$”用來限制只能輸入n位的數(shù)字。
這里主要需要學(xué)習(xí)的就是SQL語(yǔ)言了,99%的語(yǔ)法在各數(shù)據(jù)庫(kù)是通用的。如果業(yè)務(wù)人員掌握了簡(jiǎn)單的SQL,那在后面提到自助分析時(shí)將如魚得水。
為了得到一份可供分析系統(tǒng)使用的質(zhì)量良好的源數(shù)據(jù),必須進(jìn)行數(shù)據(jù)清洗(ETCL,
Extract-Transform-Clean-Load),此過程是將業(yè)務(wù)系統(tǒng)的數(shù)據(jù)經(jīng)過抽取、轉(zhuǎn)換、清洗之后加載到數(shù)據(jù)倉(cāng)庫(kù)的過程。ETCL是數(shù)據(jù)集成的第一步,也是構(gòu)建數(shù)據(jù)倉(cāng)庫(kù)最重要的步驟,目的是將企業(yè)中的分散、零亂、標(biāo)準(zhǔn)不統(tǒng)一的數(shù)據(jù)整合到一起,為下一步建模分析做好準(zhǔn)備。
大多ETCL工具都集成在分析工具中,我理解ETCL其實(shí)是一種使不規(guī)則數(shù)據(jù)變?yōu)橐?guī)則數(shù)據(jù)的方法,并非單指清洗工具。
比如數(shù)據(jù)庫(kù)里的視圖功能,你可以將表中數(shù)據(jù)通過各種函數(shù)加工成可供分析的數(shù)據(jù)形式。
在清洗過程中,如果能懂一些統(tǒng)計(jì)學(xué)基礎(chǔ)知識(shí)是極好的,比如平均值,標(biāo)準(zhǔn)差,中位數(shù)等等(CDAlevel1的主要內(nèi)容哦),這些函數(shù)是個(gè)工具都自帶。有一次成都政府調(diào)查我們公司員工收入時(shí)就要求分類填寫中位數(shù),可難壞了我們HR。
ETCL工具,個(gè)人使用推薦Excel的powerquery,在2016版本后直接集成在了Excel中,無(wú)需單獨(dú)安裝,重要性不言而喻。它可以從各種數(shù)據(jù)庫(kù),文件中抽取數(shù)據(jù),可視化的操作過程讓數(shù)據(jù)清洗變得十分簡(jiǎn)單。
報(bào)表系統(tǒng)
個(gè)人使用,推薦Excel power pivot,2013以后版本的Excel直接集成了此插件,用DAX表達(dá)式(和Excel函數(shù)幾乎一模一樣)進(jìn)行簡(jiǎn)單的數(shù)據(jù)清洗,拖拖拽拽就完成了數(shù)據(jù)建模,最終以數(shù)據(jù)透視表的形式進(jìn)行OLAP多維分析。Excel基礎(chǔ)還可以的同學(xué)學(xué)習(xí)這個(gè)毫無(wú)壓力。(CDAlevel1換證考試的最后兩個(gè)大題就是寫DAX表達(dá)式)
團(tuán)隊(duì)使用,推薦Finereport,低代碼編程,完全可以定制設(shè)計(jì)一整套企業(yè)解決方案。設(shè)計(jì)界面類似Excel(函數(shù)基本和Excel函數(shù)一樣),如果你的Excel功力還可以,SQL功力十分強(qiáng)悍的話,學(xué)這個(gè)也毫無(wú)壓力。
自助分析系統(tǒng)(BI)
又稱敏捷商業(yè)智能系統(tǒng),讓業(yè)務(wù)人員可以自由在數(shù)據(jù)中探索的系統(tǒng)。
舉個(gè)例子,當(dāng)業(yè)務(wù)人員需要分析廢品率與哪些因素有關(guān)系時(shí),傳統(tǒng)的做法是先依據(jù)經(jīng)驗(yàn)或?qū)I(yè)理論,猜想可能原因,比如溫度濕度,然后采集一段時(shí)間的數(shù)據(jù),最后做成散點(diǎn)圖,求相關(guān)系數(shù)。而BI是怎么做的呢?你可以打開BI軟件,用SQL調(diào)取溫濕度數(shù)據(jù),再調(diào)取廢品率數(shù)據(jù),做成散點(diǎn)圖,自動(dòng)求相關(guān)系數(shù),聽起來差不多一樣,但如果你好奇心強(qiáng),你可以將企業(yè)運(yùn)行所有數(shù)據(jù)拿來和廢品率求相關(guān)性,比如拿材料的化學(xué)成分,機(jī)械性能數(shù)據(jù),甚至是員工出勤率,食堂用餐人數(shù),拖拖拽拽看和廢品率的相關(guān)關(guān)系。從而找到可能突破點(diǎn)。耗時(shí)幾分鐘而已,這在傳統(tǒng)的分析里是無(wú)法想象的。有些朋友可能已經(jīng)聽出來了,我說的就是探索式分析。我認(rèn)為BI就是為業(yè)務(wù)人員探索式分析而生的。
BI 常用工具
BI,是未來的趨勢(shì),我相信會(huì)越來越受到管理層的重視。
萬(wàn)能工具Excel
在上述工具中已經(jīng)多次提到了Excel,這是學(xué)習(xí)以上工具的基礎(chǔ),因?yàn)椋?
數(shù)據(jù)分析咨詢請(qǐng)掃描二維碼
若不方便掃碼,搜微信號(hào):CDAshujufenxi
LSTM 模型輸入長(zhǎng)度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長(zhǎng)短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長(zhǎng)序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報(bào)考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計(jì)的實(shí)用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠(chéng)摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實(shí)施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價(jià)值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡(jiǎn)稱 BI)深度融合的時(shí)代,BI ...
2025-07-10SQL 在預(yù)測(cè)分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢(shì)預(yù)判? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代,預(yù)測(cè)分析作為挖掘數(shù)據(jù)潛在價(jià)值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價(jià)值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點(diǎn),而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報(bào)考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭(zhēng)搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢(shì)性檢驗(yàn):捕捉數(shù)據(jù)背后的時(shí)間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢(shì)性檢驗(yàn)如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時(shí)間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時(shí)間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實(shí)戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗(yàn):數(shù)據(jù)趨勢(shì)與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢(shì)變化以及識(shí)別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國(guó)內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對(duì)策略? 長(zhǎng)短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨(dú)特的門控機(jī)制,在 ...
2025-07-07統(tǒng)計(jì)學(xué)方法在市場(chǎng)調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場(chǎng)調(diào)研是企業(yè)洞察市場(chǎng)動(dòng)態(tài)、了解消費(fèi)者需求的重要途徑,而統(tǒng)計(jì)學(xué)方法則是市場(chǎng)調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動(dòng)力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動(dòng)力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價(jià)值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03