
大數(shù)據(jù)產(chǎn)品到底應(yīng)該是什么形態(tài)
大數(shù)據(jù)很時髦,但企業(yè)如何操作,如何落地,才是真正要面對的,好在現(xiàn)在我們看到很多朋友開始思考這樣的實操性問題,本文將從大數(shù)據(jù)產(chǎn)品形態(tài)角度幫助我們理清一些概念。
嗨,朋友,看到這個標題請先別主觀排斥,跟你一樣,我也反感動輒亂談大數(shù)據(jù),為了后續(xù)的溝通愉快,先做下這里的“大數(shù)據(jù)“指向,特指符合4V特點的大數(shù)據(jù),即:
1,數(shù)據(jù)體量巨大;
2,數(shù)據(jù)類型繁多;
3,價值密度低;
4,處理速度快。
所以,本文的“大數(shù)據(jù)”既不是有些人口中的海量數(shù)據(jù),也不是非結(jié)構(gòu)化數(shù)據(jù),更不是什么相關(guān)與因果,這里不談什么是大數(shù)據(jù),只談?wù)劥髷?shù)據(jù)的產(chǎn)品形態(tài)與商業(yè)邏輯,拋磚引玉,期待交流。
一、大數(shù)據(jù)的產(chǎn)品特性
顧名思義,“大數(shù)據(jù)產(chǎn)品”應(yīng)該是基于大數(shù)據(jù)而設(shè)計出的產(chǎn)品,那么理應(yīng)符合大數(shù)據(jù)的特點,畢竟基因在那,那么回顧下大數(shù)據(jù)與(傳統(tǒng))數(shù)據(jù)有哪些具體區(qū)別。
(傳統(tǒng))數(shù)據(jù)是通過問卷調(diào)查收集數(shù)據(jù),或者是已存儲的歷史經(jīng)營數(shù)據(jù),比如財務(wù)數(shù)據(jù)、銷售數(shù)據(jù)這些,至于數(shù)據(jù)量級,可能就是一臺server的存儲級別。
而大數(shù)據(jù)是海量,這個海量并不是某個時間斷點的量級總結(jié),而是持續(xù)有更新,持續(xù)有增量,那么就決定了可以”制造”出大數(shù)據(jù)產(chǎn)品的應(yīng)該不是傳統(tǒng)企業(yè),而是類似電信、銀行、微博這樣的平臺級機構(gòu),或者依附于平臺級企業(yè)的第三方機構(gòu),亦或者是更宏觀層面的政府管理機構(gòu)。
這些機構(gòu)擁有大量用戶,可以源源不斷的產(chǎn)生UGC數(shù)據(jù),因此存儲和計算成本必然會隨之上漲,也就決定了大數(shù)據(jù)產(chǎn)品的甲乙方級別,屌絲可能會被無情的淘汰出局。這些數(shù)據(jù)不僅僅是數(shù)值型的結(jié)構(gòu)化數(shù)據(jù),還包括文本內(nèi)容、圖片、音視頻等非結(jié)構(gòu)化數(shù)據(jù)。
在處理速度上,(傳統(tǒng))數(shù)據(jù)使用excel或者spss,前期有嚴謹?shù)姆椒ㄕ摚笃谟型晟频姆治鎏幚磉^程,從數(shù)據(jù)的收集到最后報表/報告的產(chǎn)出,這個周期可能在至少一周以上,而大數(shù)據(jù)因為有了hadoop/storm等IT技術(shù)的支持,在處理速度上可以保證在小時級延遲,甚至更快。
這里需要補充一點的是,大數(shù)據(jù)產(chǎn)品是否要快速計算?個人覺得應(yīng)該是,這里的快速是相對快,不一定非要實時,畢竟在收集、存儲、計算上花了更多的成本,策略如果不及時發(fā)現(xiàn),也對不起那些集群啊。
那么是否說大數(shù)據(jù)就一定比(傳統(tǒng))數(shù)據(jù)好了?不一定,引用祝建華老師《文科教授眼中的大數(shù)據(jù)》里的一段話,“理論上講大數(shù)據(jù)指的應(yīng)該就是總體數(shù)據(jù)。但實際上,由于技術(shù)、商業(yè)、保密和其它原因,除了少數(shù)大數(shù)據(jù)的原始擁有者,對于絕大多數(shù)的第三方來講,現(xiàn)在大家講的大數(shù)據(jù),基本上都不是總體數(shù)據(jù)而是局部數(shù)據(jù)。注意,這種局部數(shù)據(jù),哪怕占了總體的很大一個百分比(70%、80%),既不是總體數(shù)據(jù)、也不是抽樣數(shù)據(jù)。因為哪怕是缺了10%、20%的個案,局部數(shù)據(jù)跟總體也許就有很大的差別。”
所以在總體代表性上,(傳統(tǒng))數(shù)據(jù)可以較好的代表整體,而大數(shù)據(jù)可能會出現(xiàn)偏差。但是,這個偏差并不影響大數(shù)據(jù)產(chǎn)品的商業(yè)應(yīng)用,舉個例子,微博上每天都有各種口碑和輿情,如果涉及某個企業(yè)的負面輿情突然趨勢走高,即使在不能代表總體的情況下,你能認為這個態(tài)勢不值得警惕么?當(dāng)然是不能。并且,大數(shù)據(jù)產(chǎn)品對使用者的要求更高了,不光關(guān)注活躍的數(shù)據(jù),還得關(guān)注沉默的數(shù)據(jù)。
由此,大數(shù)據(jù)產(chǎn)品所具備的特性應(yīng)當(dāng)是:
1、數(shù)據(jù)量級更多;
2、數(shù)據(jù)處理速度更快;
3、數(shù)據(jù)類型多樣;
4、使用者要求更高。
那么,大數(shù)據(jù)產(chǎn)品究竟長啥樣?
二、大數(shù)據(jù)的產(chǎn)品形態(tài)
先說一個親身經(jīng)歷,在家收看好聲音導(dǎo)師考核的汪峰場,之前一直很期待這場,畢竟汪峰的風(fēng)格理念偏重社會觀察,偏重人文洞察,但看到快一半的時候,卻發(fā)現(xiàn)很乏味,想換臺,沒有那英那場更黏我,如果說看上一場臉部肌肉是松弛的話,那這一場則是緊繃的,”上蒼、思念、回憶、故人、淚水….”當(dāng)這些碎片詞語不斷的充斥在我的耳邊時,真的不覺得這是一個娛樂節(jié)目,一個比一個悲涼,我的訴求很簡單,像看周星馳無厘頭電影一樣,開心一下足矣,哪怕沒有任何的教育意義。
隨后我發(fā)了一條微博吐糟,引來眾多附議。我想這應(yīng)該是不少受眾當(dāng)時的心態(tài),但不代表對汪峰場的整體評價。那么,試想一下,如果你是好聲音的競爭對手,在此刻很實時的洞察到了用戶的心情反饋,再通過合適的路徑傳遞出營銷信息,受眾是否會換臺?答案是未知的,但想象空間是巨大的。
這個場景很恰如其分的給我們描繪出了大數(shù)據(jù)的產(chǎn)品形態(tài)。首先他需要在平臺級機構(gòu)(微博)上監(jiān)控海量數(shù)據(jù)(微博內(nèi)容),這些數(shù)據(jù)是非結(jié)構(gòu)化的,通過實時計算獲得洞察(擁有不滿情緒的是少量群體還是大量群體,是真實聲音還是噪音污染),并快速應(yīng)用(推送營銷信息)。
這樣的例子還有很多,特別是在營銷環(huán)境里,受眾的情緒不是線性穩(wěn)定的,可能十分鐘前還是心情愉悅的,而十分鐘后,則是心情緊張的,不利于接受你的品牌信息并形成記憶,這些情緒的變化是隨機動態(tài)的,因環(huán)境的變化而隨之變化。還有哪些屬于大數(shù)據(jù)產(chǎn)品呢,僅以我所了解的互聯(lián)網(wǎng)領(lǐng)域為例,DSP、RTB、推薦系統(tǒng),另外就是宏觀的情報系統(tǒng)了,比如聯(lián)合國的全球脈動項目。
三、總結(jié)
綜上所述,大數(shù)據(jù)的產(chǎn)品形態(tài)應(yīng)該是,運行在平臺級機構(gòu)之上,通過對持續(xù)性海量增加的多結(jié)構(gòu)類型數(shù)據(jù),進行快速計算產(chǎn)生策略,結(jié)合使用者的經(jīng)驗認知及時應(yīng)用,進而產(chǎn)生價值形成商業(yè)閉環(huán),一切不以此為特性的大數(shù)據(jù)產(chǎn)品都是耍流氓!
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
訓(xùn)練與驗證損失驟升:機器學(xué)習(xí)訓(xùn)練中的異常診斷與解決方案 在機器學(xué)習(xí)模型訓(xùn)練過程中,“損失曲線” 是反映模型學(xué)習(xí)狀態(tài)的核心指 ...
2025-09-19解析 DataHub 與 Kafka:數(shù)據(jù)生態(tài)中兩類核心工具的差異與協(xié)同 在數(shù)字化轉(zhuǎn)型加速的今天,企業(yè)對數(shù)據(jù)的需求已從 “存儲” 轉(zhuǎn)向 “ ...
2025-09-19CDA 數(shù)據(jù)分析師:讓統(tǒng)計基本概念成為業(yè)務(wù)決策的底層邏輯 統(tǒng)計基本概念是商業(yè)數(shù)據(jù)分析的 “基礎(chǔ)語言”—— 從描述數(shù)據(jù)分布的 “均 ...
2025-09-19CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-19SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢效率:打破 “拆分必慢” 的認知誤區(qū) 在 MySQL 數(shù)據(jù)庫管理中,“大表” 始終是性能優(yōu)化繞不開的話題。 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動態(tài)隨機一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開始提取前,需先判斷 TIF 文件的類型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價值的專業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫)處理 Excel 數(shù)據(jù)時,“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗與 t 檢驗:差異、適用場景與實踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計學(xué)領(lǐng)域,假設(shè)檢驗是驗證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專業(yè)操盤手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計劃中 rows 數(shù)量的準確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對象的 text 與 content:區(qū)別、場景與實踐指南 在 Python 進行 HTTP 網(wǎng)絡(luò)請求開發(fā)時(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價值的核心操盤手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請求工具對比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長浮點數(shù)據(jù)的科學(xué)計數(shù)法問題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長浮點數(shù)據(jù)時的科學(xué)計數(shù)法問題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運營問題、提升執(zhí)行效率的核心手段,其價值 ...
2025-09-12用 SQL 驗證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計” 與 “用戶體驗 ...
2025-09-11塔吉特百貨孕婦營銷案例:數(shù)據(jù)驅(qū)動下的精準零售革命與啟示 在零售行業(yè) “流量紅利見頂” 的當(dāng)下,精準營銷成為企業(yè)突圍的核心方 ...
2025-09-11