
大數(shù)據(jù)要經(jīng)得起三問:從哪來怎么用誰買單
當我們面對一項大數(shù)據(jù)應用時,只要簡單問一問3個問題——數(shù)據(jù)哪里來、數(shù)據(jù)怎么用、成果誰買單——就能揭開許多“偽裝”。日前由中國管理科學學會大數(shù)據(jù)管理專委會、國務院發(fā)展研究中心產(chǎn)業(yè)互聯(lián)網(wǎng)課題組發(fā)布的《大數(shù)據(jù)應用藍皮書:中國大數(shù)據(jù)應用發(fā)展報告No.1(2017)》指出,如許多應用并沒有可靠的數(shù)據(jù)來源,或者數(shù)據(jù)來源不具備可持續(xù)性;還有些應用并沒有技術或市場支撐,只是借助大數(shù)據(jù)風口套取政府部門或一些投資者的“傻錢”罷了。當然,如果經(jīng)得起上述“大數(shù)據(jù)三問”,也并不一定算得上優(yōu)秀,但也離優(yōu)秀的大數(shù)據(jù)應用不遠了。
數(shù)據(jù)從哪里來?
關于數(shù)據(jù)來源,普遍認為互聯(lián)網(wǎng)及物聯(lián)網(wǎng)是產(chǎn)生并承載大數(shù)據(jù)的基地?;ヂ?lián)網(wǎng)公司是天生的大數(shù)據(jù)公司,在搜索、社交、媒體、交易等各自核心業(yè)務領域,積累并持續(xù)產(chǎn)生海量數(shù)據(jù)。物聯(lián)網(wǎng)設備每時每刻都在采集數(shù)據(jù),設備數(shù)量和數(shù)據(jù)量都與日俱增。這兩類數(shù)據(jù)資源作為大數(shù)據(jù)金礦,正在不斷產(chǎn)生各類應用。國外關于大數(shù)據(jù)的成功經(jīng)驗介紹,大多是這類數(shù)據(jù)。
資源應用的經(jīng)典案例。還有一些企業(yè),在業(yè)務中也積累了許多數(shù)據(jù),如房地產(chǎn)交易、大宗商品價格、特定群體消費信息,等等。從嚴格意義上說,這些數(shù)據(jù)資源還算不上大數(shù)據(jù),但對商業(yè)應用而言,卻是最易獲得和比較容易加工處理的數(shù)據(jù)資源,也是當前在國內(nèi)比較常見的應用資源。
在國內(nèi)還有一類是政府部門掌握的數(shù)據(jù)資源,普遍認為質(zhì)量好、價值高,但開放程度差。許多官方統(tǒng)計數(shù)據(jù)通過灰色渠道流通出來,經(jīng)過加工成為各種數(shù)據(jù)產(chǎn)品。2015年,國務院印發(fā)的《促進大數(shù)據(jù)行動綱要》把公共數(shù)據(jù)互聯(lián)開放共享作為努力方向,認為大數(shù)據(jù)技術可以實現(xiàn)這個目標。實際上,長期以來政府部門間信息數(shù)據(jù)相互封閉割裂是治理問題而不是技術問題。面向社會的公共數(shù)據(jù)開放愿望雖十分美好,但恐怕一段時間內(nèi)可望而不可即。在數(shù)據(jù)資源方面,國內(nèi)“小數(shù)據(jù)”、“中數(shù)據(jù)”應用并不充分,試圖一步跨入大數(shù)據(jù)時代,借機一并解決前期信息化過程中沒能解決的問題,前景并不樂觀。另外,由于中國互聯(lián)網(wǎng)公司業(yè)務主要在國內(nèi),其大數(shù)據(jù)資源也不是全球性的。
藍皮書分析指出,“數(shù)據(jù)從哪里來”是我們評價大數(shù)據(jù)應用的第一個關注點。一是要看這個應用是否真有數(shù)據(jù)支撐,數(shù)據(jù)資源是否可持續(xù),來源渠道是否可控,數(shù)據(jù)安全和隱私保護方面是否有隱患。二是要看這個應用的數(shù)據(jù)資源質(zhì)量如何,是“富礦”還是“貧礦”,能否保障這個應用的實效。
數(shù)據(jù)怎么用?
“數(shù)據(jù)怎么用”是我們評價大數(shù)據(jù)應用的第二個關注點。大數(shù)據(jù)綱要規(guī)劃了許多大數(shù)據(jù)應用領域和方向,包括公共部門和產(chǎn)業(yè)領域,實際上是提出了許多需要大數(shù)據(jù)解決的問題或期待大數(shù)據(jù)完成的任務。如何解決這些問題,如何把數(shù)據(jù)資源轉化為解決方案,實現(xiàn)產(chǎn)品化,這是我們特別關注的問題。大數(shù)據(jù)只是一種手段,并不能無所不包、無所不用。我們關注大數(shù)據(jù)能做什么、不能做什么,現(xiàn)在看來,大數(shù)據(jù)主要有以下幾種較為常用的功能。
追蹤?;ヂ?lián)網(wǎng)和物聯(lián)網(wǎng)無時無刻不在記錄,大數(shù)據(jù)可以追蹤、追溯任何一個記錄,形成真實的歷史軌跡。追蹤是許多大數(shù)據(jù)應用的起點,包括消費者購買行為、購買偏好、支付手段、搜索和瀏覽歷史、位置信息,等等。
識別。在對各種因素全面追蹤的基礎上,通過定位、比對、篩選,可以實現(xiàn)精準識別,尤其是對語音、圖像、視頻進行識別,使可分析內(nèi)容大大豐富,得到的結果更為精準。
畫像。通過對同一主體不同數(shù)據(jù)源的追蹤、識別、匹配,形成更立體的刻畫和更全面的認識。對消費者畫像,可以精準推送廣告和產(chǎn)品;對企業(yè)畫像,可以準確判斷其信用及面臨的風險。
提示。在歷史軌跡、識別和畫像基礎上,對未來趨勢及重復出現(xiàn)的可能性進行預測,當某些指標出現(xiàn)預期變化或超預期變化時給予提示、預警。以前也有基于統(tǒng)計的預測,大數(shù)據(jù)大大豐富了預測手段,對建立風險控制模型有深刻意義。
匹配。在海量信息中精準追蹤和識別,利用相關性、接近性等進行篩選比對,更有效率地實現(xiàn)產(chǎn)品搭售和供需匹配。大數(shù)據(jù)匹配功能是互聯(lián)網(wǎng)約車、租房、金融等共享經(jīng)濟新商業(yè)模式的基礎。
優(yōu)化。按距離最短、成本最低等給定的原則,通過各種算法對路徑、資源等進行優(yōu)化配置。對企業(yè)而言,提高服務水平、提升內(nèi)部效率;對公共部門而言,節(jié)約公共資源、提升公共服務能力。
上述概括并不一定完備,大數(shù)據(jù)肯定還有其他更好的功能。當前許多貌似復雜的應用,大都可以細分成以上幾種類型。例如,貴州推行的“大數(shù)據(jù)精準扶貧項目”,從大數(shù)據(jù)應用角度,通過識別、畫像,可以對貧困戶實現(xiàn)精準篩選和界定,找對扶貧對象;通過追蹤、提示,可以對扶貧資金、扶貧行為和扶貧效果進行監(jiān)控和評估;通過配對、優(yōu)化,可以更好發(fā)揮扶貧資源的作用。這些功能也并不都是大數(shù)據(jù)所特有的,只是大數(shù)據(jù)遠遠超出以前的技術,可以做得更精準、更快、更好。當然,技術無法左右利益,貴州扶貧目標的完成,并不是有了大數(shù)據(jù)就萬事大吉了。
成果誰買單?
“成果誰買單”是評價大數(shù)據(jù)應用的第三個也是最后一個關注點。道理很簡單,不創(chuàng)造價值的應用不是好應用。能不能創(chuàng)造價值,關鍵看誰買單。我們不需要那些靡費公帑的“樣板”工程、“面子”工程,也不需要那些炫耀神技、制造概念的創(chuàng)富故事。我們關注大數(shù)據(jù)的應用是否實實在在提升能力、改善績效。如果大數(shù)據(jù)用于自身的產(chǎn)品設計、營銷推廣、資源配置,那就看企業(yè)競爭力是不是提升了,看企業(yè)最終是不是比以前更賺錢了。如果大數(shù)據(jù)用于為第三方提供服務,那就看是不是有人愿意付費、愿意持續(xù)付費。但如果是用于公共領域,還要看政府或公共部門的付費值不值,不僅僅是從出資方的視角看值不值,還要從老百姓的視角看值不值。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關鍵? 在循環(huán)神經(jīng)網(wǎng)絡(RNN)家族中,長短期記憶網(wǎng)絡(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報考條件詳解與準備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計的實用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實施重大更新。 此次更新旨在確保認 ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務的價值轉化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預測分析中的應用:從數(shù)據(jù)查詢到趨勢預判? ? 在數(shù)據(jù)驅(qū)動決策的時代,預測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結束)并非工作的終點,而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報考到取證的全攻略? 在數(shù)字經(jīng)濟蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗:捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準 ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應用與實戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗:數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領域中,準確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認證作為國內(nèi)權威的數(shù)據(jù)分析能力認證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應對策略? 長短期記憶網(wǎng)絡(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(RNN)的一種變體,憑借獨特的門控機制,在 ...
2025-07-07統(tǒng)計學方法在市場調(diào)研數(shù)據(jù)中的深度應用? 市場調(diào)研是企業(yè)洞察市場動態(tài)、了解消費者需求的重要途徑,而統(tǒng)計學方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉日期:解鎖數(shù)據(jù)處理的關鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準確性的基礎 ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03