
大數(shù)據(jù)時代與精準(zhǔn)運(yùn)維
隨著科技的進(jìn)步,我們正步入一個新的時代,新常態(tài)下,由重視數(shù)量到更注重質(zhì)量,以創(chuàng)新做為推動力,互聯(lián)網(wǎng)+、工業(yè)4.0、中國制造2025、以及大數(shù)據(jù)、云計算科技迸發(fā)出全新活力。
以人為本的智能時代就要到來:智能連接、智能服務(wù)、智能制造,“連接一切,充分感知”是這個時代的特征。
因此,利用這個時代的特定服務(wù),企業(yè)家們精準(zhǔn)掌舵,站在風(fēng)口上的人,注定將是大時代的弄潮人。
一、什么是大數(shù)據(jù)
大數(shù)據(jù),就是隨著信息化技術(shù)的發(fā)展,特別是互聯(lián)網(wǎng)技術(shù)的發(fā)展,積累下的大量的信息數(shù)據(jù)資產(chǎn),這些資產(chǎn)具有四個特點(diǎn):
第一,數(shù)據(jù)體量巨大。從TB級別,躍升到PB級別
第二數(shù)據(jù)類型繁多。前文提到的網(wǎng)絡(luò)日志、視頻、圖片、地理位置信息等等
第三,處理速度快,1秒定律,可從各種類型的數(shù)據(jù)中快速獲得高價值的信息,這一點(diǎn)是和傳統(tǒng)的數(shù)據(jù)挖掘技術(shù)有著本質(zhì)的不同
第四,只要合理利用數(shù)據(jù)并對其進(jìn)行準(zhǔn)確的分析,我們將會獲得高價值回報
業(yè)界將這四個特點(diǎn)歸納為4個“V”, 亦即:
Volume(數(shù)據(jù)體量大)
Variety(數(shù)據(jù)類型繁多)
Velocity(處理速度快)
Value(價值密度低)
大數(shù)據(jù)分析最早來源于運(yùn)維人的日志分析,但之后人們發(fā)現(xiàn)這些數(shù)據(jù)蘊(yùn)涵著非常大的價值,并逐步發(fā)展到對各種業(yè)務(wù)數(shù)據(jù)的分析,
當(dāng)前,大數(shù)據(jù)的處理分析正逐漸成為新一代信息技術(shù)融合應(yīng)用的結(jié)點(diǎn),大數(shù)據(jù)成為信息產(chǎn)業(yè)持續(xù)高速增長的新引擎,對它的有效利用亦將成為提高企業(yè)核心競爭力的關(guān)鍵因素。
另一方面,大數(shù)據(jù)時代科學(xué)研究的方法也將發(fā)生重大改變。
在大數(shù)據(jù)時代,可通過實(shí)時監(jiān)測、跟蹤研究對象在互聯(lián)網(wǎng)上產(chǎn)生的海量行為數(shù)據(jù), 進(jìn)行挖掘分析,揭示出其中蘊(yùn)藏的規(guī)律、提出研究結(jié)論和對策。
二、精準(zhǔn)運(yùn)維及其與大數(shù)據(jù)的關(guān)系
什么是運(yùn)維?
所謂運(yùn)維,既可理解為信息系統(tǒng)的運(yùn)行維護(hù),又可理解為IT業(yè)務(wù)的運(yùn)營及維護(hù)工作,兩種理解都正確,只是適用的企業(yè)類型不一樣:
前者是傳統(tǒng)的理解,主要適用于一些大型傳統(tǒng)企業(yè)和IT業(yè)界傳統(tǒng)作業(yè)部分
后者的理解更活躍在一批IT服務(wù)的創(chuàng)新企業(yè)里,他們更需要企業(yè)的經(jīng)營與用戶的需求同步
什么是精準(zhǔn)運(yùn)維?
精準(zhǔn)運(yùn)維是一種IT服務(wù)方法,它是要讓IT運(yùn)維服務(wù)圍繞被服務(wù)對象的業(yè)務(wù)來展開,進(jìn)行同步心跳式的服務(wù),而不是僅圍繞信息系統(tǒng)本身(軟硬件)來服務(wù),這在書籍《IT運(yùn)維之道》有闡述。
作為運(yùn)行維護(hù),精準(zhǔn)運(yùn)維是通過一系列方法掌握服務(wù)對象的信息系統(tǒng)特征以及該信息系統(tǒng)所服務(wù)的企業(yè)業(yè)務(wù)特征,找準(zhǔn)目標(biāo),把握企業(yè)運(yùn)行脈搏,從而精準(zhǔn)地規(guī)劃服務(wù),同步應(yīng)變,實(shí)現(xiàn)服務(wù)與業(yè)務(wù)的匹配。
作為運(yùn)營維護(hù),精準(zhǔn)運(yùn)維就是從業(yè)者以客戶為導(dǎo)向,讓業(yè)務(wù)與用戶的要求心跳同步,并確保支撐業(yè)務(wù)的信息系統(tǒng),隨需應(yīng)變。
兩種理解作為精準(zhǔn)運(yùn)維沒有本質(zhì)的差異,就是第一人稱還是第三人稱而已。
精準(zhǔn)運(yùn)維本質(zhì)是要保持用戶的需求與業(yè)務(wù)心跳同步,以人為本,要達(dá)到的效果與四個因素有關(guān),即人、軟件、硬件與環(huán)境,具體關(guān)聯(lián)如下圖所示:
應(yīng)用軟件是指對業(yè)務(wù)的邏輯編程
支撐軟件包括操作系統(tǒng)、中間件、開發(fā)工具、數(shù)據(jù)庫等
硬件包括:客戶端設(shè)備、服務(wù)器、網(wǎng)路設(shè)施
環(huán)境包括機(jī)房設(shè)施等
人員主要指開發(fā)和運(yùn)營維護(hù)的企業(yè)員工。
從圖上我們可以看到,前面的因素對后面的因素提出要求,而后面對前面產(chǎn)生影響。
用戶或客戶對系統(tǒng)的要求是通過對業(yè)務(wù)的要求來實(shí)現(xiàn)的,而用戶對業(yè)務(wù)的要求又是動態(tài)的,還各有特色,如果后臺準(zhǔn)備不足,就可能導(dǎo)致滿意度下降,甚至流失客戶。
這個特性在互聯(lián)網(wǎng)行業(yè)尤為突出:互聯(lián)網(wǎng)企業(yè)更重視用戶體驗(yàn),信息系統(tǒng)本身的易用性差或穩(wěn)定性低往往直接影響用戶體驗(yàn),進(jìn)而對企業(yè)的用戶群體規(guī)模產(chǎn)生致命的影響。
值得一提的是,互聯(lián)網(wǎng)企業(yè)一般客戶與用戶是一致的,傳統(tǒng)企業(yè)則不一定。
因此互聯(lián)網(wǎng)企業(yè)對大數(shù)據(jù)的應(yīng)用,是要建立在充分感知被服務(wù)對象的業(yè)務(wù)情況,并能預(yù)測業(yè)務(wù)情況的基礎(chǔ)上的。
要掌握用戶的對業(yè)務(wù)的動態(tài)要求,甚至預(yù)測和引導(dǎo)用戶的行為,就需要大數(shù)據(jù)來幫忙,找出關(guān)聯(lián)性,發(fā)現(xiàn)趨勢并引領(lǐng)趨勢,即大數(shù)據(jù)可以輔助實(shí)現(xiàn)精準(zhǔn)運(yùn)維,使其更加精、更加準(zhǔn)。
三、為什么企業(yè)需要精準(zhǔn)運(yùn)維
在以人為本的時代,雖然客戶是上帝,但“上帝”除了盡量滿足還需要合理引導(dǎo)。我們說決定客戶滿意度的因素一般有三:
是客戶或用戶的欲望和要求,
是競爭對手的情況與態(tài)勢,
是自身的水平與實(shí)力。
1和2均為外部因素,只有3是內(nèi)部因素。
根據(jù)實(shí)踐經(jīng)驗(yàn)我們發(fā)現(xiàn):滿足、引導(dǎo)和控制外部并提升內(nèi)部是提高滿意度的最佳之法。
當(dāng)然。內(nèi)外密切相關(guān),提升內(nèi)部必須是圍繞外部的,而只有對外部的情況準(zhǔn)確掌握,才能做到對外部的滿足、引導(dǎo)與控制。
所以,目前一切的智能活動都是基于“明白”這個概念出發(fā)的,明白客戶(用戶),明白對手,這樣才能做到貼心服務(wù)。
這是一個以人為本的社會,如何明白人們的心思,那就是所謂的“察言觀色”。
怎樣察言觀色呢?
道理很簡單,因?yàn)槿藗冊诩彝ズ蜕鐣顒又辛粝略S多痕跡,這些痕跡數(shù)據(jù),就是企業(yè)來判斷客戶或者用戶行為的依據(jù),這些大數(shù)據(jù)加上合適的分析,能幫助我們隨需應(yīng)變。
現(xiàn)在互聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)、物聯(lián)網(wǎng)正在逐步成熟,一些巨型的傳統(tǒng)企業(yè)或IT服務(wù)企業(yè),如:騰訊、阿里、百度、京東、google、amazon、中國電網(wǎng)、銀行等,具備了這樣的分析條件。
正如我在《IT運(yùn)維之道》中提到的:大部分IT系統(tǒng)在設(shè)計和開發(fā)階段,受開發(fā)周期、運(yùn)行效率和成本等因素的影響,都不可能做到無限柔性;要做到隨需應(yīng)變,就需要運(yùn)維工作來幫忙。當(dāng)然,這對運(yùn)維工作本身也提出了較高的要求:
首先,運(yùn)維不僅僅是運(yùn)行維護(hù)而是運(yùn)營維護(hù), 需要全面、準(zhǔn)確把握業(yè)務(wù)需求;
其次,運(yùn)維工作需要精準(zhǔn),將業(yè)務(wù)需求和信息系統(tǒng)性能、功能等進(jìn)行匹配度分析,為系統(tǒng)升級改造、優(yōu)化完善提供依據(jù)和解決方案;
再次,要對運(yùn)營過程中的大數(shù)據(jù)從業(yè)務(wù)角度進(jìn)行精準(zhǔn)分析,從而找到新的業(yè)務(wù)增長點(diǎn)或改進(jìn)方向。
精準(zhǔn)運(yùn)維有助于我們的企業(yè)服務(wù)精準(zhǔn)化、個性化、甚至引領(lǐng)潮流化,使企業(yè)強(qiáng)者恒強(qiáng)。
當(dāng)前,互聯(lián)網(wǎng)企業(yè)正處于爭奪“入口”戰(zhàn)的白熱化階段:
是互聯(lián)網(wǎng)正在顛覆傳統(tǒng)信息獲取、生活消費(fèi)以及商務(wù)方式的入口渠道
是面臨眾多互聯(lián)網(wǎng)企業(yè)搶奪的現(xiàn)實(shí),而且互聯(lián)網(wǎng)企業(yè)扁平化程度越來越高
如何成為第一、穩(wěn)住第一,都是CEO思考的課題。
質(zhì)量、速度、成本是互聯(lián)網(wǎng)企業(yè)產(chǎn)品的主要考量。
互聯(lián)網(wǎng)企業(yè)的產(chǎn)品從策劃、設(shè)計、研發(fā)、上線、運(yùn)營都要考慮這三個問題。這里的質(zhì)量是廣義的質(zhì)量,包含了用戶的熱度。
所以作為運(yùn)營維護(hù)人一開始就要參加到整個周期中,并把控全局,才能真正與用戶的需求心跳同步,精準(zhǔn)運(yùn)維。
經(jīng)典案例分析:
2015年微信發(fā)紅包,除夕搖一搖總次數(shù)110億次,峰值1400萬次/秒,8.1億次每分鐘,微信紅包收發(fā)達(dá)10.1億次!
驚人數(shù)字再次讓人們好奇,2015年微信紅包方式與去年用戶與用戶之間互發(fā)紅包相比,搖紅包的方式對業(yè)務(wù)量來說是一個極大的爆發(fā),光是除夕10:30送出的一波紅包就達(dá)到了1.2億個,已經(jīng)是2014年除夕夜峰值的4800倍之巨 (2014年峰值每分鐘被拆開紅包數(shù)量僅2.5W個) !
大量用戶在同一時間搖紅包,瞬間產(chǎn)生每秒千萬級的請求,這個量級的請求如果不加以疏導(dǎo)處理直接到達(dá)后臺,必定會導(dǎo)致后端服務(wù)過載甚至崩潰。
微信后臺運(yùn)維團(tuán)隊(duì)主要通過三大應(yīng)對策略應(yīng)對:有損服務(wù),柔性可用,大系統(tǒng)小做。
我們在驚嘆騰訊再次創(chuàng)造奇跡的同時,仔細(xì)想想,哪些可損、哪些可柔、哪些可小做?
微信搖紅包是個業(yè)務(wù),實(shí)現(xiàn)這個業(yè)務(wù)的是它的信息系統(tǒng),就是說配什么樣的員工、用什么樣的硬件、怎樣的應(yīng)用更合理,需要什么樣的環(huán)境,這些決策都需要基于預(yù)測用戶的群體意識,決定保哪部分業(yè)務(wù),對應(yīng)的資源怎么調(diào)整,都與大數(shù)據(jù)有關(guān)。
四、企業(yè)怎樣做好精準(zhǔn)運(yùn)維
1. 傳統(tǒng)企業(yè)
傳統(tǒng)企業(yè)運(yùn)維的關(guān)注重點(diǎn)是在安全、權(quán)限管理等方面,以及舊IT資產(chǎn)利用率,如何利用好現(xiàn)有的IT資產(chǎn)是他們目前迫切需要解決的問題。
傳統(tǒng)企業(yè)的內(nèi)網(wǎng),使用大量的小型機(jī)(IBM Power小型機(jī)、HP小型機(jī)、Sun小型機(jī)等)、高端網(wǎng)絡(luò)和存儲設(shè)備(Cisco、EMC、日立等),使用大量的商業(yè)數(shù)據(jù)庫、ERP和中間件技術(shù)(IBM DB2、Oracle、SAP等)。
企業(yè)的核心業(yè)務(wù)運(yùn)行于這些設(shè)備和軟件之上,業(yè)務(wù)年限長、歷史遺留問題多,數(shù)據(jù)安全、業(yè)務(wù)連續(xù)性等是這些企業(yè)的生命線。
在運(yùn)維方面,傳統(tǒng)企業(yè)往往通過購買廠商和集成商(即第三方)的服務(wù)來保證其IT業(yè)務(wù)的穩(wěn)定性。
那么,傳統(tǒng)企業(yè)如何做好精準(zhǔn)運(yùn)維呢?主要有三個關(guān)鍵點(diǎn),具體如下:
企業(yè)高層要有戰(zhàn)略高度,能夠意識到業(yè)務(wù)的發(fā)展與信息系統(tǒng)的運(yùn)行休戚相關(guān),并重視精準(zhǔn)運(yùn)維在促進(jìn)業(yè)務(wù)發(fā)展中的重要作用;
引入一個專業(yè)的運(yùn)維團(tuán)隊(duì)(這個團(tuán)隊(duì)往往是第三方專業(yè)運(yùn)維服務(wù)商),能夠協(xié)助本企業(yè)搜集業(yè)務(wù)需求以及與信息系統(tǒng)密切相關(guān)的人、軟件、硬件、環(huán)境等信息,并進(jìn)行信息系統(tǒng)與業(yè)務(wù)的匹配度分析,進(jìn)而提出對信息系統(tǒng)的優(yōu)化建議;
企業(yè)根據(jù)上述優(yōu)化建議進(jìn)行綜合評估,從成本效益角度選擇部分或全部予以實(shí)施,并由專業(yè)運(yùn)維團(tuán)隊(duì)來跟蹤實(shí)施效果。
2.互聯(lián)網(wǎng)企業(yè)
對于互聯(lián)網(wǎng)企業(yè)的運(yùn)維,如何快速有效地部署、如何保證可利用率、如何處理大并發(fā)訪問等是他們的頭等要事。
現(xiàn)代的互聯(lián)網(wǎng)企業(yè),大量使用PC服務(wù)器、普通硬盤盤陣和集群、先進(jìn)的SSD技術(shù)、大量使用Linux、MySQL等開源軟件。業(yè)務(wù)模式單一,軟件技術(shù)、硬件設(shè)備更替迅速。
性能優(yōu)化、部署靈活、提升IT硬件利用率是他們的工作重點(diǎn),業(yè)務(wù)領(lǐng)先的互聯(lián)網(wǎng)企業(yè)背后都有一個強(qiáng)大的IT運(yùn)維技術(shù)團(tuán)隊(duì),而這個運(yùn)維技術(shù)團(tuán)隊(duì)往往是互聯(lián)網(wǎng)企業(yè)內(nèi)部的一個信息部門或運(yùn)維部門。
對于互聯(lián)網(wǎng)企業(yè)來說,要做好精準(zhǔn)運(yùn)維,主要關(guān)注以下幾個方面:
企業(yè)高層要把握大生態(tài)環(huán)境,要時刻關(guān)注用戶體驗(yàn)和發(fā)展趨勢,并將其作為業(yè)務(wù)發(fā)展的一個重要任務(wù)來抓。
企業(yè)內(nèi)部的專業(yè)技術(shù)團(tuán)隊(duì)要開展大數(shù)據(jù)分析,要掌握用戶對業(yè)務(wù)的動態(tài)要求,并預(yù)測和引導(dǎo)用戶的行為,通過大數(shù)據(jù)來輔助開展精確預(yù)測。同時,將預(yù)測結(jié)果轉(zhuǎn)化為對信息系統(tǒng)的需求,包括人員、軟件、硬件、環(huán)境需求等,從而提出性能提升和服務(wù)創(chuàng)新的優(yōu)化建議。
根據(jù)內(nèi)部專業(yè)技術(shù)團(tuán)隊(duì)的優(yōu)化建議,進(jìn)行系統(tǒng)性能的優(yōu)化或新服務(wù)產(chǎn)品的設(shè)計,以精確匹配用戶需求。
展望未來,“連接一切”將是一個時尚的詞句,物物相連,人人相連,人物相連。
在這個巨大且復(fù)雜的網(wǎng)絡(luò)中,以大數(shù)據(jù)、云計算為基礎(chǔ)的智能感知世界,就在未來十年誕生,讓我們張開雙臂,擁抱未來,以大數(shù)據(jù)為基礎(chǔ),精準(zhǔn)感知、精準(zhǔn)運(yùn)維。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計的實(shí)用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實(shí)施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動決策的時代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點(diǎn),而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗(yàn):捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗(yàn)如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實(shí)戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗(yàn):數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨(dú)特的門控機(jī)制,在 ...
2025-07-07統(tǒng)計學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動態(tài)、了解消費(fèi)者需求的重要途徑,而統(tǒng)計學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03