
認清大數(shù)據(jù),充分發(fā)揮應用價值
大數(shù)據(jù)正成為繼云計算、物聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)之后又一個被熱議、熱捧的概念。在將大數(shù)據(jù)作為信息技術未來發(fā)展方向和經(jīng)濟社會諸行業(yè)領域應用方向予以關注的同時,也必須對大數(shù)據(jù)有全面、清醒的認識,才能充分發(fā)揮大數(shù)據(jù)的應用價值。
一是要全面認識大數(shù)據(jù)的內涵,避免陷入單純的計算能力和存儲能力建設
雖然“大數(shù)據(jù)”本指“規(guī)模很大的數(shù)據(jù)(集合)”,但總體上應是數(shù)據(jù)、技術與應用三者的統(tǒng)一。從對象角度看,大數(shù)據(jù)是大小超出典型數(shù)據(jù)庫軟件采集、儲存、管理和分析等能力的數(shù)據(jù)集合,這是大數(shù)據(jù)分析的對象,不以之為基礎,大數(shù)據(jù)分析與利用就無從談起。同時,大數(shù)據(jù)并非大量數(shù)據(jù)簡單、無意義的存儲與堆積,數(shù)據(jù)間是否具有關聯(lián)性,是“大數(shù)據(jù)”與“大規(guī)模數(shù)據(jù)”的重要差別,也是大數(shù)據(jù)能夠得以應用的基礎。從技術角度看,大數(shù)據(jù)技術是從各種各樣類型的大數(shù)據(jù)中,快速獲得有價值信息的技術及其集成,這種對數(shù)據(jù)對象的動態(tài)處理行為是“大數(shù)據(jù)”與“大規(guī)模數(shù)據(jù)”、“海量數(shù)據(jù)”等類似概念間的最大區(qū)別。這其中,大數(shù)據(jù)技術是使大數(shù)據(jù)中所蘊含的價值得以發(fā)掘和展現(xiàn)的重要工具。從應用角度看,大數(shù)據(jù)是對特定的大數(shù)據(jù)集合,集成應用大數(shù)據(jù)技術,獲得有價值信息的行為。大數(shù)據(jù)所以成為熱點,就在于各個行業(yè)領域具有了對大數(shù)據(jù)分析和利用的巨大現(xiàn)實需求和具體應用需求。如果不與具體應用相聯(lián)系,大數(shù)據(jù)的作用和價值就無從談起。同時,不同領域、不同企業(yè)、不同業(yè)務的數(shù)據(jù)集合和分析挖掘目標存在差異,所運用的大數(shù)據(jù)技術和大數(shù)據(jù)分析處理系統(tǒng)也可能存在相當大不同。正由于與具體應用緊密聯(lián)系,甚至是一對一的聯(lián)系,才使“應用”成為大數(shù)據(jù)不可或缺的內涵之一??梢?,只有全面認識并堅持“數(shù)據(jù)、技術、應用”三位一體共同發(fā)展,所發(fā)展的才是真正的大數(shù)據(jù)。若只是加強基礎設施建設,只是將很多數(shù)據(jù)存儲起來,可能連大數(shù)據(jù)的皮毛都難以摸到。
二是要清醒認識大數(shù)據(jù)發(fā)展的成熟度,避免過度建設下的目標落空
在多方的擂鼓助威下,投身大數(shù)據(jù)研發(fā)與應用已成為新的熱潮,其廣泛應用和巨大收益似乎觸手可及。但大數(shù)據(jù)畢竟是由商業(yè)機構率先提出并加以推進的概念,為了在軟硬件產(chǎn)品和信息服務方面獲得更多收益,跨國信息技術企業(yè)在推廣大數(shù)據(jù)概念的過程中也難免包含炒作的成分。若不加分辨,盲目跟隨,很可能會起大早、趕晚集,甚至趕錯集。
全球大數(shù)據(jù)的發(fā)展還處于起始階段,理論展望尚多于實踐探索。特別要注意到的是,與藉成熟技術積累推動應用模式創(chuàng)新的云計算、物聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)等領域不同,大數(shù)據(jù)領域的技術尚未完全成熟,在多源異構信息融合、大規(guī)模數(shù)據(jù)智能清洗、大規(guī)模異構數(shù)據(jù)并行挖掘、大規(guī)模異構數(shù)據(jù)在線分析處理、大規(guī)模數(shù)據(jù)可視化等技術領域還需要做大量研究創(chuàng)新工作,尤其是決定大數(shù)據(jù)應用能力高低的人工智能技術尚未取得革命性突破,將在一定時間內限制大數(shù)據(jù)的深度應用。這種背景下,對大數(shù)據(jù)的發(fā)展必須從基礎做起,注重核心關鍵技術創(chuàng)新與應用模式創(chuàng)新的協(xié)同并進;對大數(shù)據(jù)的應用必須考慮技術實現(xiàn)能力,避免目標過于理想,難以落地。
三是要客觀分析用戶自身的應用基礎和應用目標,避免多做無用功
大數(shù)據(jù)應用可以分為多個層次,例如,對大規(guī)模數(shù)據(jù)的初步加工整理、運用已有知識規(guī)則對大數(shù)據(jù)信息的分析發(fā)掘,運用人工智能工具自動發(fā)現(xiàn)新的知識規(guī)則并挖掘新的關聯(lián)信息等。從廣義上看,這些都可以歸屬于大數(shù)據(jù)層次;從實際看,不同的企業(yè)、相同企業(yè)在不同應用階段,在大數(shù)據(jù)應用方面也確實有著不同的應用要求。因此,在運用大數(shù)據(jù)時,必須與用戶自身實際情況相結合。同時,在系統(tǒng)頂層設計時,采用開放可擴展的體系結構,以便在未來功能需求增多增強時實現(xiàn)快速、靈活的升級。
數(shù)據(jù)分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關鍵? 在循環(huán)神經(jīng)網(wǎng)絡(RNN)家族中,長短期記憶網(wǎng)絡(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數(shù)據(jù)分析師報考條件詳解與準備指南? ? 在數(shù)據(jù)驅動決策的時代浪潮下,CDA 數(shù)據(jù)分析師認證愈發(fā)受到矚目,成為眾多有志投身數(shù) ...
2025-07-11數(shù)據(jù)透視表中兩列相乘合計的實用指南? 在數(shù)據(jù)分析的日常工作中,數(shù)據(jù)透視表憑借其強大的數(shù)據(jù)匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實施重大更新。 此次更新旨在確保認 ...
2025-07-10BI 大數(shù)據(jù)分析師:連接數(shù)據(jù)與業(yè)務的價值轉化者? ? 在大數(shù)據(jù)與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預測分析中的應用:從數(shù)據(jù)查詢到趨勢預判? ? 在數(shù)據(jù)驅動決策的時代,預測分析作為挖掘數(shù)據(jù)潛在價值的核心手段,正被廣泛 ...
2025-07-10數(shù)據(jù)查詢結束后:分析師的收尾工作與價值深化? ? 在數(shù)據(jù)分析的全流程中,“query end”(查詢結束)并非工作的終點,而是將數(shù) ...
2025-07-10CDA 數(shù)據(jù)分析師考試:從報考到取證的全攻略? 在數(shù)字經(jīng)濟蓬勃發(fā)展的今天,數(shù)據(jù)分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗:捕捉數(shù)據(jù)背后的時間軌跡? 在數(shù)據(jù)分析的版圖中,單樣本趨勢性檢驗如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數(shù)據(jù)類型:時間維度的精準切片? ? 在數(shù)據(jù)的世界里,時間是最不可或缺的維度之一,而year_month數(shù)據(jù)類型就像一把精準 ...
2025-07-09CDA 備考干貨:Python 在數(shù)據(jù)分析中的核心應用與實戰(zhàn)技巧? ? 在 CDA 數(shù)據(jù)分析師認證考試中,Python 作為數(shù)據(jù)處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗:數(shù)據(jù)趨勢與突變分析的有力工具? ? ? 在數(shù)據(jù)分析的廣袤領域中,準確捕捉數(shù)據(jù)的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數(shù)據(jù)分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數(shù)據(jù)分析師認證作為國內權威的數(shù)據(jù)分析能力認證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應對策略? 長短期記憶網(wǎng)絡(LSTM)作為循環(huán)神經(jīng)網(wǎng)絡(RNN)的一種變體,憑借獨特的門控機制,在 ...
2025-07-07統(tǒng)計學方法在市場調研數(shù)據(jù)中的深度應用? 市場調研是企業(yè)洞察市場動態(tài)、了解消費者需求的重要途徑,而統(tǒng)計學方法則是市場調研數(shù) ...
2025-07-07CDA數(shù)據(jù)分析師證書考試全攻略? 在數(shù)字化浪潮席卷全球的當下,數(shù)據(jù)已成為企業(yè)決策、行業(yè)發(fā)展的核心驅動力,數(shù)據(jù)分析師也因此成為 ...
2025-07-07剖析 CDA 數(shù)據(jù)分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數(shù)據(jù)分析師考試作為衡量數(shù)據(jù)專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉日期:解鎖數(shù)據(jù)處理的關鍵技能? 在數(shù)據(jù)處理與分析工作中,數(shù)據(jù)格式的規(guī)范性是保證后續(xù)分析準確性的基礎 ...
2025-07-04CDA 數(shù)據(jù)分析師視角:從數(shù)據(jù)迷霧中探尋商業(yè)真相? 在數(shù)字化浪潮席卷全球的今天,數(shù)據(jù)已成為企業(yè)決策的核心驅動力,CDA(Certifie ...
2025-07-04CDA 數(shù)據(jù)分析師:開啟數(shù)據(jù)職業(yè)發(fā)展新征程? ? 在數(shù)據(jù)成為核心生產(chǎn)要素的今天,數(shù)據(jù)分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03