
讓大數(shù)據(jù)成為一種基本的使用和操作能力
大數(shù)據(jù)重構(gòu)消費(fèi)者主權(quán)
“大數(shù)據(jù)”之“大”,不僅僅源于其體量的龐大,更表現(xiàn)在它的無處不在。數(shù)據(jù)充斥在我們生產(chǎn)生活的方方面面,從大數(shù)據(jù)分析中獲得競爭優(yōu)勢,已不再是所謂的高精尖企業(yè)或是高大上的科研項(xiàng)目的專利。它與勞動(dòng)力、資本一樣,開始為企業(yè)提供重要的生產(chǎn)因素。
我們會(huì)有一套技術(shù)和方法,比如我們熟悉的Hadoop,這里面包括數(shù)據(jù)采集存儲,如何分析挖掘,如何產(chǎn)生一些有意義的信息或者支持等等。我們通過數(shù)據(jù)化的手段構(gòu)建成數(shù)據(jù)世界,這個(gè)數(shù)據(jù)世界很好的反映或者模擬了現(xiàn)實(shí)世界。在這個(gè)數(shù)據(jù)世界之上,我們再構(gòu)建自己的業(yè)務(wù)系統(tǒng),這些業(yè)務(wù)系統(tǒng)通過數(shù)據(jù)世界能了解到現(xiàn)實(shí)是怎么樣,從而變的更加智能化,
在這場數(shù)字革命的背景下,消費(fèi)者的數(shù)據(jù)就是一切。對于企業(yè)來說,如何通過消費(fèi)者數(shù)據(jù)化完成“以產(chǎn)品為中心”到“以客戶為中心來”的轉(zhuǎn)變,進(jìn)而驅(qū)動(dòng)核心產(chǎn)品的運(yùn)營是最核心的事情。
作為概念,這很容易理解。然而在信息高度碎片化、信息渠道高度碎片化、和信息消費(fèi)者對外部事物興趣高度碎片化的數(shù)字世界中找到對的人,并不那么容易。
信息化的五大趨勢:云大物移社
在整個(gè)信息化的方向上,百分點(diǎn)技術(shù)副總裁劉譯璟提到五個(gè)大的趨勢:云計(jì)算、大數(shù)據(jù)、物聯(lián)網(wǎng)、社會(huì)化跟移動(dòng)化。
云是信息化未來的一大趨勢。未來所有的信息系統(tǒng)都在云上,因?yàn)槲覀兏雨P(guān)注運(yùn)用而不關(guān)注這些底層的資源,和這些基礎(chǔ)的服務(wù)從哪里來。放到云上去。
物聯(lián)網(wǎng)技術(shù)是在數(shù)據(jù)世界跟現(xiàn)實(shí)之間的邊界。物聯(lián)網(wǎng)中的Sensor等設(shè)備將現(xiàn)實(shí)世界轉(zhuǎn)化到數(shù)據(jù)世界,把現(xiàn)實(shí)世界中各種基本的實(shí)體、行為轉(zhuǎn)化成數(shù)據(jù)來形成數(shù)據(jù)世界。
大數(shù)據(jù)是這個(gè)數(shù)據(jù)世界中的大腦。這顆大腦將大量數(shù)據(jù)進(jìn)行收集加工,轉(zhuǎn)化成信息,甚至轉(zhuǎn)化成知識,最后再通過物聯(lián)網(wǎng)的技術(shù)反饋到現(xiàn)實(shí)世界中。這個(gè)過程是周而復(fù)始持續(xù)不斷的,使得大數(shù)據(jù)這顆大腦越來越了解現(xiàn)實(shí)世界,越來越智能。
整個(gè)現(xiàn)實(shí)世界和數(shù)據(jù)世界不斷的通過這幾種技術(shù)交互,大數(shù)據(jù)在里面是處于一個(gè)核心的加工地位,他把數(shù)據(jù)轉(zhuǎn)化成中心和知識,不斷的產(chǎn)生更多的價(jià)值。
移動(dòng)化是一種資源分配的策略,特別是零散的、碎片化資源的分配。移動(dòng)化沒有帶來革命性的技術(shù),但帶來了革命性的應(yīng)用。移動(dòng)時(shí)代到來后,人們更深入的與數(shù)據(jù)世界對接,拓寬了個(gè)人的邊界,也使得不同的能更加深度連接在一起。比如用滴滴打車,出租車司機(jī)能在接單或者開車的過程中決定接下來要干什么,把自己的零碎的時(shí)間更好地利用起來,甚至實(shí)現(xiàn)劃零為整。相反的,我們也可以看到并不是所有的應(yīng)用都適合移動(dòng)化,例如程序開發(fā)或者財(cái)務(wù)審計(jì),這些工作需要大塊專注的時(shí)間和精力,無法利用零碎的資源完成。
社會(huì)化意味者廣泛的連接。但另一方面,人以群分物以類聚,社會(huì)化也決定了信息技術(shù)必須深入到垂直的行業(yè)應(yīng)用才能充分發(fā)揮價(jià)值。因此,我們可以預(yù)見未來一定會(huì)形成多個(gè)垂直領(lǐng)域的“云大物移”,每個(gè)云內(nèi)部將深度共享數(shù)據(jù)和信息,而云間則只進(jìn)行適度的數(shù)據(jù)和信息交互。
簡單總結(jié)來講,在未來的信息社會(huì)中,云計(jì)算是骨骼,物聯(lián)網(wǎng)是整個(gè)信息里的感官,大數(shù)據(jù)是大腦,移動(dòng)化是策略,社會(huì)化是最終的靈魂。
企業(yè)應(yīng)用大數(shù)據(jù)的必備條件
一個(gè)企業(yè)或者一個(gè)組織如果想真的應(yīng)用大數(shù)據(jù)的話,必須具備哪些條件呢?劉譯璟將其歸納為以下幾個(gè)方面:
相關(guān)的時(shí)代必須要到來
在高喊DT時(shí)代已經(jīng)到來的同時(shí),我們看到的事實(shí)是很多企業(yè)連信息化的門檻都沒邁過。譬如很多的企業(yè)沒有CRM系統(tǒng),所有的會(huì)員管理還是依靠一些小本本,根本談不上數(shù)據(jù)化。或者很多企業(yè)只有本地化的一些系統(tǒng),還沒有進(jìn)入到互聯(lián)網(wǎng)的時(shí)代,數(shù)據(jù)化程度很低,在這種前提下,談大數(shù)據(jù)是沒有什么意義的。
明確大數(shù)據(jù)的價(jià)值理念
今天,很多企業(yè)主在講數(shù)據(jù)是核心資產(chǎn),大數(shù)據(jù)很重要。但他們之所以這么說,原因是他認(rèn)為數(shù)據(jù)只有花錢才能得來,而不是看到自己的經(jīng)營過程有很多數(shù)據(jù),可以做出數(shù)據(jù)化運(yùn)營。這樣的情況下,說到底他并不清楚數(shù)據(jù)能對他的業(yè)務(wù)產(chǎn)生核心的變化。
什么叫做理念?就是不要用大數(shù)據(jù)做形象工程,而是相信數(shù)據(jù)能夠給業(yè)務(wù)創(chuàng)造價(jià)值,一定會(huì)用到業(yè)務(wù)里。當(dāng)消費(fèi)者跑到你的陣地上,一方面,你要盡可能把陣地上消費(fèi)者最滿意的信息給到他,另一方面也要找到對你的產(chǎn)品感興趣的人,然后再基于數(shù)據(jù)分析整個(gè)過程。
哪怕一開始確實(shí)效果非常不好,甚至比以前可能下降,但是企業(yè)相信通過不斷的優(yōu)化不斷的反饋提高效率。大數(shù)據(jù)就是一顆大腦,這個(gè)大腦一開始是一片白紙什么,都不知道,我們只有通過一輪一輪的循環(huán)才能讓他真正變得更加智能。
大數(shù)據(jù)要驅(qū)動(dòng)智能化的業(yè)務(wù)系統(tǒng),因此其中最核心的是人工智能相關(guān)的技術(shù)和應(yīng)用知識是緊密相關(guān)的,包括自然語言理解、知識表示、自動(dòng)求解和決策、機(jī)器學(xué)習(xí),以及與此密切相關(guān)的圖象語音識別、智能Agent等技術(shù)。為了支持這些技術(shù)和應(yīng)用,我們對數(shù)據(jù)存儲和計(jì)算的要求超出了以往任何時(shí)候,這就必須要有類似Hadoop的分布式存儲和計(jì)算技術(shù)。Hadoop的誕生,原因就搜索引擎的驅(qū)動(dòng);Spark的誕生,也是來自于機(jī)器學(xué)習(xí)算法的要求。
將業(yè)務(wù)轉(zhuǎn)化成數(shù)據(jù)的能力
從數(shù)據(jù)技術(shù)到大數(shù)據(jù)平臺,大數(shù)據(jù)技術(shù)的發(fā)展一定是跟著業(yè)務(wù)或者跟著智能化的技術(shù)發(fā)展的。其實(shí),從企業(yè)的現(xiàn)實(shí)業(yè)務(wù)到真正構(gòu)建數(shù)據(jù)模型,中間有非常大的鴻溝。這個(gè)鴻溝包括數(shù)據(jù)如何采集、如何建模、以及如何把一個(gè)業(yè)務(wù)問題轉(zhuǎn)化成真正的數(shù)據(jù)的問題。這其實(shí)是需要有具備深厚的理論和經(jīng)驗(yàn)的人來才能完成的,是大數(shù)據(jù)落地中最具有挑戰(zhàn)性的一環(huán)。如果不能將一個(gè)實(shí)際問題轉(zhuǎn)化為數(shù)據(jù)和數(shù)學(xué)模型,那就沒有任何技術(shù)手段來實(shí)現(xiàn)它,更無法落地實(shí)踐。
大數(shù)據(jù)應(yīng)該成為一種基本的使用和操作能力
大數(shù)據(jù)為商業(yè)企業(yè)全面、深刻認(rèn)識消費(fèi)者行為和市場需求提供了新的方式和視角。運(yùn)用大數(shù)據(jù)分析消費(fèi)者行為,并基于分析結(jié)果,采取合適的商業(yè)模式,是未來商業(yè)發(fā)展的一種趨勢,也是大數(shù)據(jù)在商業(yè)領(lǐng)域的重要應(yīng)用。
百分點(diǎn)高級研發(fā)總劉國棟描述到,他們對大數(shù)據(jù)有一個(gè)理想,就是希望未來每一個(gè)普通的人都具備大數(shù)據(jù)的使用能力和操作能力,每一個(gè)人都能夠隨時(shí)隨地利用大數(shù)據(jù)的能力解決自己的問題。于是,他們在過去六七年的時(shí)間里都致力于研發(fā)一款可以填平大數(shù)據(jù)技術(shù)與企業(yè)應(yīng)用之間鴻溝的產(chǎn)品——大數(shù)據(jù)操作系統(tǒng)(BD-OS)。
作為計(jì)算機(jī)的操作系統(tǒng),Windows系統(tǒng)讓人和機(jī)器更容易更快更便捷的交互,并把機(jī)器的高性能和處理復(fù)雜問題的能力賦予人類。大數(shù)據(jù)整個(gè)發(fā)展過程也是這樣的。BD-OS致力于解決人和大數(shù)據(jù)交互的問題,幫助人更輕松的挖掘和管理數(shù)據(jù)。在大數(shù)據(jù)操作系統(tǒng)這個(gè)層面,百分點(diǎn)做的第一件事就是將底層技術(shù)標(biāo)準(zhǔn)化,基于標(biāo)準(zhǔn)化提取出了一系列的解決方案和接口,基于解決方案和接口建立起了一個(gè)完整的、可持續(xù)的中間交互層,這個(gè)中間交互層的具體落地,可以通過交互層,通過不同的維度使用管理和深入探索挖掘大數(shù)據(jù),用戶不用關(guān)心底下具體的某種技術(shù)和某種問題,基本上用戶感覺不到是在跟Hadoop交互,或者跟Spark交互。對于用戶來講,在這個(gè)環(huán)境里工作根本感覺不到自己在使用特別復(fù)雜特別龐大的數(shù)據(jù),或者特別復(fù)雜的技術(shù)。
圖:BD-OS內(nèi)置標(biāo)準(zhǔn)化處理模板
劉國棟這樣比喻,如果將Hadoop、Spark視作一粒一粒的珍珠,那么BD-OS就是一條線,將那些最亮最圓的東西串起來,而不會(huì)隨便挑一個(gè)技術(shù)放到整個(gè)BD-OS里面去。
更好的方法和答案還在不久的未來
就像舍恩伯格在《大數(shù)據(jù)時(shí)代》的結(jié)語中所道:“大數(shù)據(jù)并不是一個(gè)充斥著算法和機(jī)器的冰冷世界,人類的作用依然無法被完全替代。大數(shù)據(jù)為我們提供的不是最終答案,只是參考答案,幫助是暫時(shí)的,而更好的方法和答案還在不久的未來。”
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關(guān)鍵? 在循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)家族中,長短期記憶網(wǎng)絡(luò)(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報(bào)考條件詳解與準(zhǔn)備指南? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代浪潮下,CDA 數(shù)據(jù)分析師認(rèn)證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計(jì)的實(shí)用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強(qiáng)大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實(shí)施重大更新。 此次更新旨在確保認(rèn) ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務(wù)的價(jià)值轉(zhuǎn)化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時(shí)代,BI ...
2025-07-10SQL 在預(yù)測分析中的應(yīng)用:從數(shù)據(jù)查詢到趨勢預(yù)判? ? 在數(shù)據(jù)驅(qū)動(dòng)決策的時(shí)代,預(yù)測分析作為挖掘數(shù)據(jù)潛在價(jià)值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結(jié)束后:分析師的收尾工作與價(jià)值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結(jié)束)并非工作的終點(diǎn),而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報(bào)考到取證的全攻略? 在數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗(yàn):捕捉數(shù)據(jù)背后的時(shí)間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗(yàn)如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時(shí)間維度的精準(zhǔn)切片? ? 在數(shù)據(jù)的世界里,時(shí)間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準(zhǔn) ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應(yīng)用與實(shí)戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認(rèn)證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗(yàn):數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領(lǐng)域中,準(zhǔn)確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認(rèn)證作為國內(nèi)權(quán)威的數(shù)據(jù)分析能力認(rèn)證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應(yīng)對策略? 長短期記憶網(wǎng)絡(luò)(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)的一種變體,憑借獨(dú)特的門控機(jī)制,在 ...
2025-07-07統(tǒng)計(jì)學(xué)方法在市場調(diào)研數(shù)據(jù)中的深度應(yīng)用? 市場調(diào)研是企業(yè)洞察市場動(dòng)態(tài)、了解消費(fèi)者需求的重要途徑,而統(tǒng)計(jì)學(xué)方法則是市場調(diào)研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當(dāng)下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅(qū)動(dòng)力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉(zhuǎn)日期:解鎖數(shù)據(jù)處理的關(guān)鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準(zhǔn)確性的基礎(chǔ) ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅(qū)動(dòng)力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價(jià)值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03