
大數(shù)據(jù)改變智慧產(chǎn)生方式 企業(yè)IT架構(gòu)需先行應(yīng)變
大數(shù)據(jù)成為業(yè)界最熱門的話題之一,事實上,幾千年來我們一直在利用數(shù)據(jù),數(shù)據(jù)并不是新概念。但大數(shù)據(jù)的價值最近幾年才被公眾關(guān)注到,這有著時代背景的原因。比如說石油,石油在幾千年前就被發(fā)現(xiàn)了,但一直被用作日常生活或戰(zhàn)爭中的燃料,并不是特別重要的戰(zhàn)略物資。在內(nèi)燃機發(fā)明以后,石油成為最重要的動力能源,并在最近的100年中成為戰(zhàn)略物資。
如今,大數(shù)據(jù)也迎來了黃金時代,隨著云存儲、云計算技術(shù)的成熟,大數(shù)據(jù)的存儲與處理能力有了技術(shù)條件。企業(yè)可以利用生產(chǎn)系統(tǒng)以及管理系統(tǒng)中產(chǎn)生的大量數(shù)據(jù),一方面對自己的生產(chǎn)活動進行更為準確的預(yù)測與指導(dǎo),從而提高生產(chǎn)活動的準確性;另一方面通過對大數(shù)據(jù)價值的挖掘,開發(fā)新的業(yè)務(wù)和服務(wù)。比如谷歌,僅僅通過搜索關(guān)鍵字的歷史數(shù)據(jù),就相當準確地預(yù)測了流感的傳播路徑。在這樣的環(huán)境下,大數(shù)據(jù)才像石油一樣,成為重要的戰(zhàn)略資源。
當然,各企業(yè)也都規(guī)劃了自己的大數(shù)據(jù)策略,在2014第四屆大數(shù)據(jù)世界論壇期間,C114采訪了中興通訊中心研究院副院長陳堅以及中心研究院總工王德政,分享了中興通訊對大數(shù)據(jù)發(fā)展趨勢的看法。
最大的變化是智慧產(chǎn)生方式
就像每個人心中都有一個哈姆雷特一樣,每個人對大數(shù)據(jù)的定義也各有不同。在陳堅看來,大數(shù)據(jù)的價值就在于透過表象,究其本質(zhì),提升人類活動的準確性,減少傳統(tǒng)方式下的“試錯”成本,從而提升效率。
舉個例子,在發(fā)生重大案件時,可以通過卡口的攝像資料,實時生成嫌疑車輛的運動軌跡與活動范圍,提高案件偵破的效率。這些,歸根結(jié)底,都是通過提高人類活動的準確性來提高整個社會的生產(chǎn)效率。
王德政表示,中興作為一家擁有幾萬名員工的企業(yè),本身也是大數(shù)據(jù)的擁有者,大數(shù)據(jù)應(yīng)用的案例也是隨處可見。比如,通過員工打卡記錄與網(wǎng)絡(luò)登錄記錄的關(guān)聯(lián)挖掘,發(fā)現(xiàn)工作中的違例現(xiàn)象;通過對公司內(nèi)部論壇的挖掘分析,加強對未來技術(shù)的敏感度,防止技術(shù)決策失誤等等。
同時,中興在項目研發(fā)的過程中,產(chǎn)生了大量的項目研發(fā)過程數(shù)據(jù)。在以往傳統(tǒng)的項目管理中,衡量一個項目執(zhí)行進度是否正常,基本上是依賴項目成員的主動報告。但項目成員的主動報告,有時會掩蓋項目中實際的進度延誤,以及項目執(zhí)行情況的惡化。近期,中興在考慮針對項目研發(fā)過程數(shù)據(jù)進行建模,通過大數(shù)據(jù)的挖掘分析,對正在執(zhí)行項目的健康度進行評估,與項目組的主動報告對照印證,盡早發(fā)現(xiàn)項目執(zhí)行過程中的風(fēng)險。
陳堅認為,未來大數(shù)據(jù)挖掘帶來的最大變化是智慧產(chǎn)生方式的變化。在傳統(tǒng)的智慧生成模式中主要依賴人類專家。例如,你我是各自領(lǐng)域的專家,我們通過長時間的經(jīng)驗積累,可以在合理的時間內(nèi)針對自己領(lǐng)域內(nèi)的問題給出判斷,這就是一個典型的智慧生成過程。而大數(shù)據(jù)挖掘帶來的變化就是,大數(shù)據(jù)系統(tǒng)通過數(shù)據(jù)分析挖掘,累積經(jīng)驗庫,并生成智慧,以減少對人類專家的依賴,至少是在數(shù)量上減少對人類專家的需求量。這樣的情景,將會蔓延到各行各業(yè),延伸到人類社會的各個角落,像文字的普及一樣,將永久性地改變?nèi)祟愃伎紗栴}的方式甚至生活方式,這需要人類提前準備、適應(yīng)這種變化。
大數(shù)據(jù)是運營商的必然選擇
但并不是所有的數(shù)據(jù)都具有價值,陳堅認為,一個高價值的數(shù)據(jù)集應(yīng)該滿足這樣幾個特征:首先,這個數(shù)據(jù)集應(yīng)該與物理世界有較為廣泛的對應(yīng)關(guān)系,而不是純粹的虛擬數(shù)據(jù);其二,這個數(shù)據(jù)集不是純粹的靜態(tài)數(shù)據(jù),而應(yīng)該是可以實時更新的數(shù)據(jù);其三,如果這個數(shù)據(jù)集具備物理位置等信息,將具備更大的價值。
現(xiàn)在運營商對電信數(shù)據(jù)價值的認識和價值探索,也越來越深刻。比如,用戶對服務(wù)質(zhì)量不滿意時,往往只有少數(shù)人會打客服電話進行投訴。不滿意的客戶,很可能在自己的親友圈中散發(fā)大量的負面情緒。按照傳統(tǒng)的通過客服主動大面積撒網(wǎng)去消除這種負面影響,就需要付出非常高的成本。如果利用收集到的電信系統(tǒng)中的過程信令數(shù)據(jù),并加以分析,有效評估出客戶體驗最差的群體,再對這些特定客戶群進行主動關(guān)懷,提高關(guān)懷行為的準確性,就能夠以較小的代價,主動消除這些不滿意客戶所產(chǎn)生的負面影響。
現(xiàn)在,大數(shù)據(jù)在電信業(yè)的應(yīng)用,一方面用來改進網(wǎng)絡(luò)本身,降低維護成本;另一方面通過分析挖掘開發(fā)新的業(yè)務(wù),增加收入,這些都將成為電信運營商的必然選擇。
適應(yīng)需求的IT系統(tǒng)架構(gòu)特點
應(yīng)用的需求,也對企業(yè)的IT系統(tǒng)架構(gòu)提出了新的要求,比如要滿足海量應(yīng)用、在線計算。
陳堅表示,中興近期推出的DAP平臺在系統(tǒng)架構(gòu)的設(shè)計中,采用清晰而標準的系統(tǒng)分層架構(gòu),可以根據(jù)不同行業(yè)的特點,方便快捷地引入第三方的軟硬件模塊,保證客戶利益的最大化。DAP平臺利用云存儲與云計算的技術(shù),對海量的數(shù)據(jù)進行存儲、挖掘分析,幫助企業(yè)充分開發(fā)數(shù)據(jù)的價值。
王德政補充說,與其他的系統(tǒng)相比,DAP平臺有三個最重要的方面:
首先,DAP采用貨架式架構(gòu),采用企業(yè)總線ESB的技術(shù),可以靈活地對各個組件模塊進行裁剪與拼裝。滿足“集成”與“被集成”的兩種角色要求。當前各個行業(yè)已有大量的生產(chǎn)系統(tǒng)在線運行,完全重構(gòu)這些系統(tǒng)無論從經(jīng)濟成本上,還是時間成本,都無法承受。所以,未來的大數(shù)據(jù)系統(tǒng)必然要同時承擔(dān)兩種角色:既可以作為原有生產(chǎn)系統(tǒng)的一個子系統(tǒng)被集成,也可以作為主系統(tǒng)去集成原有的生產(chǎn)系統(tǒng)。
中興的DAP貨架式架構(gòu)就可以靈活適應(yīng)各類“集成”與“被集成”的場景,在不影響生產(chǎn)系統(tǒng)穩(wěn)定性的前提下,與原有生產(chǎn)系統(tǒng)無縫集成,引入大數(shù)據(jù)系統(tǒng)。
其次,DAP在數(shù)據(jù)分析挖掘?qū)用娴闹腔凵傻?a href='/map/tezheng/' style='color:#000;font-size:inherit;'>特征,可以提高企業(yè)活動的準確性。未來的大數(shù)據(jù)系統(tǒng)能否生成智慧,替代人類專家,是區(qū)分大數(shù)據(jù)系統(tǒng)與傳統(tǒng)IT系統(tǒng)的關(guān)鍵特征。一個無法生成智慧的系統(tǒng),無論數(shù)據(jù)量有多大,充其量也就是一個大型的傳統(tǒng)系統(tǒng),而不是大數(shù)據(jù)系統(tǒng)。DAP通過針對性的挖掘算法改進,可以做出超越人類專家經(jīng)驗與直覺的智慧建議,提升人類活動準確性,提高社會生產(chǎn)能力。
第三點,DAP具備平臺特性。DAP聚焦在數(shù)據(jù)的存儲、處理時效、以及挖掘算法,為上層應(yīng)用解決大數(shù)據(jù)應(yīng)用的技術(shù)難點與障礙。上層應(yīng)用可以根據(jù)自身的需求,快速地進行定制開發(fā),以很短的時間周期與研發(fā)成本推出新的大數(shù)據(jù)應(yīng)用。未來,DAP還可以對第三方開放,支撐第三方的大數(shù)據(jù)業(yè)務(wù)開發(fā)。
根據(jù)他的介紹,目前中興的DAP大數(shù)據(jù)平臺已經(jīng)承載了電信、金融、政府相關(guān)領(lǐng)域的多個行業(yè)的大數(shù)據(jù)方案。
封閉研發(fā)很難成功
從技術(shù)的角度來看,陳堅認為,大數(shù)據(jù)平臺在各個行業(yè)中是相似的,可以采用相近的技術(shù)框架與方案,然后針對不同的應(yīng)用特點做針對性優(yōu)化。大數(shù)據(jù)應(yīng)用對于各個行業(yè)的差異性則是比較大的,需要適應(yīng)行業(yè)應(yīng)用的不同解決方案。
大數(shù)據(jù)作為一個產(chǎn)業(yè)鏈,任何封閉研發(fā)的嘗試都是很難成功的。陳堅說,首先,大數(shù)據(jù)業(yè)務(wù)的實現(xiàn)天生具備定制化強的特點。所以,無論是電信、金融、還是其他領(lǐng)域,中興通訊作為大數(shù)據(jù)技術(shù)的提供者,都必須與合作伙伴做緊密的配合,才有可能獲得項目的成功。
其次,在大數(shù)據(jù)領(lǐng)域,中興也在參與開源社區(qū)的工作,在為開源社區(qū)做貢獻的同時,同時利用開源社區(qū)的智慧與資源。
而且,中興通訊通過與北郵等高校的技術(shù)合作,開始做針對性的技術(shù)預(yù)研,論證未來技術(shù)實現(xiàn)的可行性。
對于一個大數(shù)據(jù)的系統(tǒng),可以將其分成數(shù)據(jù)收集獲取、存儲計算、建模應(yīng)用這三個層面。
在數(shù)據(jù)的收集獲取方面,業(yè)主本身就是這些數(shù)據(jù)的擁有者,需要考慮的是大量的對接、測試、談判等工作,這就需要業(yè)主自身具備較好的數(shù)據(jù)收集、談判能力。作為技術(shù)提供者,中興通訊具備數(shù)據(jù)的接入、清洗等相關(guān)技術(shù),可以協(xié)助業(yè)主做大量的實際測試與對接工作。
在數(shù)據(jù)的存儲計算方面,這往往是技術(shù)提供者最擅長的工作。對于中興通訊來說,為了適應(yīng)各個行業(yè)對大數(shù)據(jù)解決方案的需求,構(gòu)建了公司級的DAP大數(shù)據(jù)平臺,其所涉及的范疇正是數(shù)據(jù)的存儲計算相關(guān)的領(lǐng)域。
在數(shù)據(jù)的建模應(yīng)用方面,往往需要業(yè)主與技術(shù)提供者協(xié)作工作,才能取得較好的效果。業(yè)主擁有自己領(lǐng)域的專家,可以整理出本領(lǐng)域的需求,中興的技術(shù)專家就可以根據(jù)這些需求,與業(yè)主進行協(xié)作,構(gòu)建數(shù)據(jù)模型,完成新業(yè)務(wù)的開發(fā)。
綜合而言,在構(gòu)建大數(shù)據(jù)系統(tǒng)方案時,業(yè)主與技術(shù)提供者是天生且必須的合作關(guān)系。業(yè)主更擅長于數(shù)據(jù)采集獲取、數(shù)據(jù)建模應(yīng)用相關(guān)的工作,技術(shù)提供者更擅長于數(shù)據(jù)存儲處理、數(shù)據(jù)建模應(yīng)用相關(guān)的工作。
今天,大家都意識到大數(shù)據(jù)是和自然資源一樣重要的戰(zhàn)略資產(chǎn),隨著應(yīng)用不斷深入社會各個角落,大數(shù)據(jù)挖掘有可能會超越人類專家經(jīng)驗與直覺的智慧,勢必會催生社會發(fā)展變革。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報考條件詳解與準備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計的實用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實施重大更新。 此次更新旨在確保認 ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動決策的時代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點,而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報考到取證的全攻略? 在數(shù)字經(jīng)濟蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗:捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準 ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗:數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨特的門控機制,在 ...
2025-07-07統(tǒng)計學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動態(tài)、了解消費者需求的重要途徑,而統(tǒng)計學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03