
大數(shù)據(jù)無疑是現(xiàn)在最引人矚目的詞匯。但是,誰堅持認(rèn)為可以從這項技術(shù)中獲利——而且如何獲利?
過去10年中,在經(jīng)歷了通信業(yè)和投資銀行業(yè)的幾個早期大數(shù)據(jù)項目后,我總結(jié)這個新興技術(shù)最適合用在像股票市場和供應(yīng)鏈這樣的復(fù)雜系統(tǒng)中,獲得更精準(zhǔn)的解析。尤其是投資銀行,這是最先采用大數(shù)據(jù)分析的行業(yè)之一。畢竟,那些專職賺錢的高管們熱衷于省錢和創(chuàng)造財富。
在投資銀行,為了更準(zhǔn)確的推薦投資或買入股票,需要處理的文檔(比如新聞、資產(chǎn)負(fù)債表等)數(shù)量太大而不能全人工處理。因此,合伙人傾向于簡化分析過程,使用電子表格文檔去完成大多數(shù)工作。而采用大數(shù)據(jù)技術(shù)處理大量信息可以有效性的降低風(fēng)險,和以前相比,公司可以更好的進(jìn)行分析和預(yù)測。
公司如何運(yùn)用大數(shù)據(jù)賺錢呢?
通過大數(shù)據(jù)平臺,股票市場的交易員和投資組合證券d經(jīng)理可以處理大量的非結(jié)構(gòu)化數(shù)據(jù),來識別最值得投資的公司。
非結(jié)構(gòu)化的公眾信息,包括公司新聞、產(chǎn)品評論、供應(yīng)商數(shù)據(jù)和價格表變更,可以以大數(shù)據(jù)的形式進(jìn)行整合并建立數(shù)學(xué)模型,幫助交易員決定買入或賣出哪支股票。
一些按照上述方式運(yùn)用大數(shù)據(jù)進(jìn)行投資預(yù)測的企業(yè),為了減少項目的前期投入使用云服務(wù),比如Amazon的網(wǎng)絡(luò)服務(wù)(AWS),從少量的服務(wù)器開始,獲利后再擴(kuò)大規(guī)模。我認(rèn)識一個從大型投資銀行辭職的定量分析師,他可以在6個月內(nèi)、用有限的資金創(chuàng)建一個可盈利的大數(shù)據(jù)交易系統(tǒng)。
甚至在制造業(yè),使用大數(shù)據(jù)可以提升預(yù)測能力。一個我曾經(jīng)擔(dān)當(dāng)顧問的歐洲主要汽車制造商,建立了一個內(nèi)部系統(tǒng)進(jìn)行鋼鐵價格的可行性分析,確定在最合適的時間、以更優(yōu)惠的價格購買原材料。該系統(tǒng)采用開源Java框架Hadoop,整合多個供應(yīng)商的數(shù)據(jù)庫、總量達(dá)到15Tb的信息,兩年節(jié)省了1.6億美元。
該項目成功的兩個原因是:首先,該公司有足夠的信息對所有供應(yīng)商進(jìn)行建模;其次,該項目節(jié)省的原材料成本大大超過了建立系統(tǒng)的費(fèi)用。
公司如何運(yùn)用大數(shù)據(jù)賠錢呢?
但是,不是每個大數(shù)據(jù)項目運(yùn)用這種方法都會成功。有時,公司運(yùn)用大數(shù)據(jù),賠錢和賺錢的概率相差無幾。大數(shù)據(jù)失敗的早期情況并不相同,但最普遍原因如:
開始時步子邁得太大:大數(shù)據(jù)不需要大預(yù)算。如果懷著投資多等于回報大的想法開始一個項目,往往會失敗。在項目開始前,明智的做法是,分析在該技術(shù)上以有限的投入、在小范圍內(nèi)是否可以帶來預(yù)期的收益。如果是,該項目隨時可以擴(kuò)大規(guī)模,保證規(guī)模越大利潤越高。
低估人力需求:開始實施系統(tǒng)前,問自己一個簡單的問題:沒有恒定的人力支持,該大數(shù)據(jù)項目能夠運(yùn)作嗎?如果答案是“不”,那么馬上停止。建立一個不能以盈利模式進(jìn)行維護(hù)的系統(tǒng),意味著數(shù)百萬的損失。
嘗試推進(jìn)自然語言處理:大數(shù)據(jù)的一個潛在承諾是,通過自然語言處理(NLP),將各領(lǐng)域的數(shù)據(jù)變得可讀可寫。這種想法是令人興奮的——但在實際應(yīng)用中沒有進(jìn)展。目前的自然語言處理有嚴(yán)格的限制,因為人工智能還不夠先進(jìn)——再過10年也可能不行。
現(xiàn)代大數(shù)據(jù)意味著可以節(jié)省費(fèi)用,和過去的數(shù)據(jù)處理器相比簡直是魔法。但在最初建立大數(shù)據(jù)項目時判斷是否真的可以盈利,將不會浪費(fèi)你的時間和資源。只有傻瓜才會冒進(jìn)。
數(shù)據(jù)科學(xué)家Marco Visibelli從IBM辭職后創(chuàng)立了Kuldat公司,該公司運(yùn)用大數(shù)據(jù),對銷售和市場前景進(jìn)行可行性分析并呈現(xiàn)可能的結(jié)果。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
訓(xùn)練與驗證損失驟升:機(jī)器學(xué)習(xí)訓(xùn)練中的異常診斷與解決方案 在機(jī)器學(xué)習(xí)模型訓(xùn)練過程中,“損失曲線” 是反映模型學(xué)習(xí)狀態(tài)的核心指 ...
2025-09-19解析 DataHub 與 Kafka:數(shù)據(jù)生態(tài)中兩類核心工具的差異與協(xié)同 在數(shù)字化轉(zhuǎn)型加速的今天,企業(yè)對數(shù)據(jù)的需求已從 “存儲” 轉(zhuǎn)向 “ ...
2025-09-19CDA 數(shù)據(jù)分析師:讓統(tǒng)計基本概念成為業(yè)務(wù)決策的底層邏輯 統(tǒng)計基本概念是商業(yè)數(shù)據(jù)分析的 “基礎(chǔ)語言”—— 從描述數(shù)據(jù)分布的 “均 ...
2025-09-19CDA 數(shù)據(jù)分析師:表結(jié)構(gòu)數(shù)據(jù) “獲取 - 加工 - 使用” 全流程的賦能者 表結(jié)構(gòu)數(shù)據(jù)(如數(shù)據(jù)庫表、Excel 表、CSV 文件)是企業(yè)數(shù)字 ...
2025-09-19SQL Server 中 CONVERT 函數(shù)的日期轉(zhuǎn)換:從基礎(chǔ)用法到實戰(zhàn)優(yōu)化 在 SQL Server 的數(shù)據(jù)處理中,日期格式轉(zhuǎn)換是高頻需求 —— 無論 ...
2025-09-18MySQL 大表拆分與關(guān)聯(lián)查詢效率:打破 “拆分必慢” 的認(rèn)知誤區(qū) 在 MySQL 數(shù)據(jù)庫管理中,“大表” 始終是性能優(yōu)化繞不開的話題。 ...
2025-09-18DSGE 模型中的 Et:理性預(yù)期算子的內(nèi)涵、作用與應(yīng)用解析 動態(tài)隨機(jī)一般均衡(Dynamic Stochastic General Equilibrium, DSGE)模 ...
2025-09-17Python 提取 TIF 中地名的完整指南 一、先明確:TIF 中的地名有哪兩種存在形式? 在開始提取前,需先判斷 TIF 文件的類型 —— ...
2025-09-17CDA 數(shù)據(jù)分析師:解鎖表結(jié)構(gòu)數(shù)據(jù)特征價值的專業(yè)核心 表結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 規(guī)范存儲的結(jié)構(gòu)化數(shù)據(jù),如數(shù)據(jù)庫表、Excel 表、 ...
2025-09-17Excel 導(dǎo)入數(shù)據(jù)含缺失值?詳解 dropna 函數(shù)的功能與實戰(zhàn)應(yīng)用 在用 Python(如 pandas 庫)處理 Excel 數(shù)據(jù)時,“缺失值” 是高頻 ...
2025-09-16深入解析卡方檢驗與 t 檢驗:差異、適用場景與實踐應(yīng)用 在數(shù)據(jù)分析與統(tǒng)計學(xué)領(lǐng)域,假設(shè)檢驗是驗證研究假設(shè)、判斷數(shù)據(jù)差異是否 “ ...
2025-09-16CDA 數(shù)據(jù)分析師:掌控表格結(jié)構(gòu)數(shù)據(jù)全功能周期的專業(yè)操盤手 表格結(jié)構(gòu)數(shù)據(jù)(以 “行 - 列” 存儲的結(jié)構(gòu)化數(shù)據(jù),如 Excel 表、數(shù)據(jù) ...
2025-09-16MySQL 執(zhí)行計劃中 rows 數(shù)量的準(zhǔn)確性解析:原理、影響因素與優(yōu)化 在 MySQL SQL 調(diào)優(yōu)中,EXPLAIN執(zhí)行計劃是核心工具,而其中的row ...
2025-09-15解析 Python 中 Response 對象的 text 與 content:區(qū)別、場景與實踐指南 在 Python 進(jìn)行 HTTP 網(wǎng)絡(luò)請求開發(fā)時(如使用requests ...
2025-09-15CDA 數(shù)據(jù)分析師:激活表格結(jié)構(gòu)數(shù)據(jù)價值的核心操盤手 表格結(jié)構(gòu)數(shù)據(jù)(如 Excel 表格、數(shù)據(jù)庫表)是企業(yè)最基礎(chǔ)、最核心的數(shù)據(jù)形態(tài) ...
2025-09-15Python HTTP 請求工具對比:urllib.request 與 requests 的核心差異與選擇指南 在 Python 處理 HTTP 請求(如接口調(diào)用、數(shù)據(jù)爬取 ...
2025-09-12解決 pd.read_csv 讀取長浮點(diǎn)數(shù)據(jù)的科學(xué)計數(shù)法問題 為幫助 Python 數(shù)據(jù)從業(yè)者解決pd.read_csv讀取長浮點(diǎn)數(shù)據(jù)時的科學(xué)計數(shù)法問題 ...
2025-09-12CDA 數(shù)據(jù)分析師:業(yè)務(wù)數(shù)據(jù)分析步驟的落地者與價值優(yōu)化者 業(yè)務(wù)數(shù)據(jù)分析是企業(yè)解決日常運(yùn)營問題、提升執(zhí)行效率的核心手段,其價值 ...
2025-09-12用 SQL 驗證業(yè)務(wù)邏輯:從規(guī)則拆解到數(shù)據(jù)把關(guān)的實戰(zhàn)指南 在業(yè)務(wù)系統(tǒng)落地過程中,“業(yè)務(wù)邏輯” 是連接 “需求設(shè)計” 與 “用戶體驗 ...
2025-09-11塔吉特百貨孕婦營銷案例:數(shù)據(jù)驅(qū)動下的精準(zhǔn)零售革命與啟示 在零售行業(yè) “流量紅利見頂” 的當(dāng)下,精準(zhǔn)營銷成為企業(yè)突圍的核心方 ...
2025-09-11