
限制大數(shù)據(jù)采集 解決大數(shù)據(jù)商用時的隱私問題
盡管大數(shù)據(jù)技術(shù)層面的應(yīng)用可以無限廣闊,但是由于受到數(shù)據(jù)采集的限制,能夠用于商業(yè)應(yīng)用、服務(wù)于人們的數(shù)據(jù)要遠(yuǎn)遠(yuǎn)小于理論上大數(shù)據(jù)能夠采集和處理的數(shù)據(jù)。用于商業(yè)行為大數(shù)據(jù)到底有哪些限制呢?
大數(shù)據(jù)按照信息處理環(huán)節(jié)可以分為數(shù)據(jù)采集、數(shù)據(jù)清理、數(shù)據(jù)存儲及管理、數(shù)據(jù)分析、數(shù)據(jù)顯化、以及產(chǎn)業(yè)應(yīng)用等六個環(huán)節(jié)。在各個環(huán)節(jié)中,已經(jīng)有不同的公司開始在這里占位。 而真正會制約大數(shù)據(jù)發(fā)展和應(yīng)用的有三個環(huán)節(jié):其一是數(shù)據(jù)收集和提取的合法性、數(shù)據(jù)隱私的保護(hù)和數(shù)據(jù)隱私應(yīng)用之間的權(quán)衡。
任何企業(yè)或機(jī)構(gòu)從人群中提取私人數(shù)據(jù),用戶都有知情權(quán),將用戶的隱私數(shù)據(jù)用于商業(yè)行為時,都需要得到用戶的認(rèn)可。
未來很多大數(shù)據(jù)業(yè)務(wù)在最初發(fā)展階段將會游走在灰色地帶,當(dāng)商業(yè)運作初具規(guī)模并開始對大批消費者和公司都產(chǎn)生影響之后,相關(guān)的法律法規(guī)以及市場規(guī)范才會被迫加速制定出來。
可以預(yù)計的是,盡管大數(shù)據(jù)技術(shù)層面的應(yīng)用可以無限廣闊,但是由于受到數(shù)據(jù)采集的限制,能夠用于商業(yè)應(yīng)用、服務(wù)于人們的數(shù)據(jù)要遠(yuǎn)遠(yuǎn)小于理論上大數(shù)據(jù)能夠采集和處理的數(shù)據(jù)。數(shù)據(jù)源頭的采集受限將大大限制大數(shù)據(jù)的商業(yè)應(yīng)用。
再次,大數(shù)據(jù)發(fā)揮協(xié)同效應(yīng)需要產(chǎn)業(yè)鏈各個環(huán)節(jié)的企業(yè)達(dá)成競爭與合作的平衡。大數(shù)據(jù)對基于其生態(tài)圈中的企業(yè)提出了更多的合作要求。如果沒有對整體產(chǎn)業(yè)鏈的宏觀把握,單個企業(yè)僅僅基于自己掌握的獨立數(shù)據(jù)是無法了解產(chǎn)業(yè)鏈各個環(huán)節(jié)數(shù)據(jù)之間的關(guān)系,因此對消費者做出的判斷和影響十分有限。
在一些信息不對稱比較明顯的行業(yè),例如銀行業(yè)以及保險業(yè),企業(yè)之間數(shù)據(jù)共享的需求更為迫切。例如,銀行業(yè)和保險業(yè)通常都需要建立一個行業(yè)共享的數(shù)據(jù)庫,讓其成員能夠了解到單個用戶的信用記錄,消除擔(dān)保方和消費者之間的信息不對稱,讓交易進(jìn)行得更為順利。
然而,在很多情況下,這些需要共享信息的企業(yè)之間競爭和合作的關(guān)系同時存在,企業(yè)在共享數(shù)據(jù)之前,需要權(quán)衡利弊,避免在共享數(shù)據(jù)的同時喪失了其競爭優(yōu)勢。此外,當(dāng)很多商家合作起來,很容易形成賣家同盟而導(dǎo)致消費者利益受到損害,影響到競爭的公平性。
大數(shù)據(jù)最具有想象力的發(fā)展方向是將不同的行業(yè)的數(shù)據(jù)整合起來,提供全方位立體的數(shù)據(jù)繪圖,力圖從系統(tǒng)的角度了解并重塑用戶需求。然而,交叉行業(yè)數(shù)據(jù)共享需要平衡太多企業(yè)的利益關(guān)系,如果沒有中立的第三方機(jī)構(gòu)出面,協(xié)調(diào)所有參與企業(yè)之間的關(guān)系、制定數(shù)據(jù)共享及應(yīng)用的規(guī)則,將大大限制大數(shù)據(jù)的用武之地。權(quán)威第三方中立機(jī)構(gòu)的缺乏將制約大數(shù)據(jù)發(fā)揮出其最大的潛力。
最后,大數(shù)據(jù)可以從數(shù)據(jù)分析的層面上揭示各個變量之間可能的關(guān)聯(lián),但是數(shù)據(jù)層面上的關(guān)聯(lián)如何具象到行業(yè)實踐中?如何制定可執(zhí)行方案應(yīng)用大數(shù)據(jù)的結(jié)論?這些問題要求執(zhí)行者不但能夠解讀大數(shù)據(jù),同時還需深諳行業(yè)發(fā)展各個要素之間的關(guān)聯(lián)。這一環(huán)節(jié)基于大數(shù)據(jù)技術(shù)的發(fā)展但又涉及到管理和執(zhí)行等各方面因素。
在這一環(huán)節(jié)中,人的因素成為制勝關(guān)鍵。從技術(shù)角度,執(zhí)行人需要理解大數(shù)據(jù)技術(shù),能夠解讀大數(shù)據(jù)分析的結(jié)論;從行業(yè)角度,執(zhí)行人要非常了解行業(yè)各個生產(chǎn)環(huán)節(jié)的流程的關(guān)系、各要素之間的可能關(guān)聯(lián),并且將大數(shù)據(jù)得到的結(jié)論和行業(yè)的具體執(zhí)行環(huán)節(jié)一一對應(yīng)起來;從管理的角度,執(zhí)行人需要制定出可執(zhí)行的解決問題的方案,并且確保這一方案和管理流程沒有沖突,在解決問題的同時,沒有制造出新的問題。
這些條件,不但要求執(zhí)行人深諳技術(shù),同時應(yīng)當(dāng)是一個卓越的管理者,有系統(tǒng)論的思維,能夠從復(fù)雜系統(tǒng)的角度關(guān)聯(lián)地看待大數(shù)據(jù)與行業(yè)的關(guān)系。此類人才的稀缺性將制約大數(shù)據(jù)的發(fā)展。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA 數(shù)據(jù)分析師報考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-18剛?cè)肼殘龌蚴窃诼殘稣媾R崗位替代、技能更新、人機(jī)協(xié)作等焦慮的打工人,想要找到一條破解職場焦慮和升職瓶頸的系統(tǒng)化學(xué)習(xí)提升 ...
2025-07-182025被稱為“AI元年”,而AI,與數(shù)據(jù)密不可分。網(wǎng)易公司創(chuàng)始人丁磊在《AI思維:從數(shù)據(jù)中創(chuàng)造價值的煉金術(shù) ...
2025-07-18CDA 數(shù)據(jù)分析師:數(shù)據(jù)時代的價值挖掘者 在大數(shù)據(jù)席卷全球的今天,數(shù)據(jù)已成為企業(yè)核心競爭力的重要組成部分。從海量數(shù)據(jù)中提取有 ...
2025-07-18SPSS 賦值后數(shù)據(jù)不顯示?原因排查與解決指南? 在 SPSS( Statistical Package for the Social Sciences)數(shù)據(jù)分析過程中,變量 ...
2025-07-18在 DBeaver 中利用 MySQL 實現(xiàn)表數(shù)據(jù)同步操作指南? ? 在數(shù)據(jù)庫管理工作中,將一張表的數(shù)據(jù)同步到另一張表是常見需求,這有助于 ...
2025-07-18數(shù)據(jù)分析師的技能圖譜:從數(shù)據(jù)到價值的橋梁? 在數(shù)據(jù)驅(qū)動決策的時代,數(shù)據(jù)分析師如同 “數(shù)據(jù)翻譯官”,將冰冷的數(shù)字轉(zhuǎn)化為清晰的 ...
2025-07-17Pandas 寫入指定行數(shù)據(jù):數(shù)據(jù)精細(xì)化管理的核心技能? 在數(shù)據(jù)處理的日常工作中,我們常常需要面對這樣的場景:在龐大的數(shù)據(jù)集里精 ...
2025-07-17解碼 CDA:數(shù)據(jù)時代的通行證? 在數(shù)字化浪潮席卷全球的今天,當(dāng)企業(yè)決策者盯著屏幕上跳動的數(shù)據(jù)曲線尋找增長密碼,當(dāng)科研人員在 ...
2025-07-17CDA 精益業(yè)務(wù)數(shù)據(jù)分析:數(shù)據(jù)驅(qū)動業(yè)務(wù)增長的實戰(zhàn)方法論 在企業(yè)數(shù)字化轉(zhuǎn)型的浪潮中,“數(shù)據(jù)分析” 已從 “加分項” 成為 “必修課 ...
2025-07-16MySQL 中 ADD KEY 與 ADD INDEX 詳解:用法、差異與優(yōu)化實踐 在 MySQL 數(shù)據(jù)庫表結(jié)構(gòu)設(shè)計中,索引是提升查詢性能的核心手段。無論 ...
2025-07-16解析 MySQL Update 語句中 “query end” 狀態(tài):含義、成因與優(yōu)化指南? 在 MySQL 數(shù)據(jù)庫的日常運維與開發(fā)中,開發(fā)者和 DBA 常會 ...
2025-07-16如何考取數(shù)據(jù)分析師證書:以 CDA 為例? ? 在數(shù)字化浪潮席卷各行各業(yè)的當(dāng)下,數(shù)據(jù)分析師已然成為企業(yè)挖掘數(shù)據(jù)價值、驅(qū)動決策的 ...
2025-07-15CDA 精益業(yè)務(wù)數(shù)據(jù)分析:驅(qū)動企業(yè)高效決策的核心引擎? 在數(shù)字經(jīng)濟(jì)時代,企業(yè)面臨著前所未有的數(shù)據(jù)洪流,如何從海量數(shù)據(jù)中提取有 ...
2025-07-15MySQL 無外鍵關(guān)聯(lián)表的 JOIN 實戰(zhàn):數(shù)據(jù)整合的靈活之道? 在 MySQL 數(shù)據(jù)庫的日常操作中,我們經(jīng)常會遇到需要整合多張表數(shù)據(jù)的場景 ...
2025-07-15Python Pandas:數(shù)據(jù)科學(xué)的瑞士軍刀? ? 在數(shù)據(jù)驅(qū)動的時代,面對海量、復(fù)雜的數(shù)據(jù),如何高效地進(jìn)行處理、分析和挖掘成為關(guān)鍵。 ...
2025-07-15用 SQL 生成逆向回滾 SQL:數(shù)據(jù)操作的 “后悔藥” 指南? 在數(shù)據(jù)庫操作中,誤刪數(shù)據(jù)、錯改字段或誤執(zhí)行批量更新等問題時有發(fā)生。 ...
2025-07-14t檢驗與Wilcoxon檢驗的選擇:何時用t.test,何時用wilcox.test? t 檢驗與 Wilcoxon 檢驗的選擇:何時用 t.test,何時用 wilcox. ...
2025-07-14AI 浪潮下的生存與進(jìn)階: CDA數(shù)據(jù)分析師—開啟新時代職業(yè)生涯的鑰匙(深度研究報告、發(fā)展指導(dǎo)白皮書) 發(fā)布機(jī)構(gòu):CDA數(shù)據(jù)科 ...
2025-07-13LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11