99999久久久久久亚洲,欧美人与禽猛交狂配,高清日韩av在线影院,一个人在线高清免费观看,啦啦啦在线视频免费观看www

熱線電話:13121318867

登錄
首頁職業(yè)發(fā)展解析大數(shù)據(jù)應(yīng)用中數(shù)據(jù)、業(yè)務(wù)與技術(shù)的關(guān)系
解析大數(shù)據(jù)應(yīng)用中數(shù)據(jù)、業(yè)務(wù)與技術(shù)的關(guān)系
2015-12-02
收藏

解析大數(shù)據(jù)應(yīng)用中數(shù)據(jù)、業(yè)務(wù)與技術(shù)的關(guān)系


大數(shù)據(jù)應(yīng)用(BDA)是企業(yè)級應(yīng)用的新方向,大數(shù)據(jù)應(yīng)用架構(gòu)也成為新一代企業(yè)級應(yīng)用架構(gòu)的核心。傳統(tǒng)企業(yè)級架構(gòu)是由業(yè)務(wù)架構(gòu)、數(shù)據(jù)架構(gòu)和技術(shù)架構(gòu)組成,大數(shù)據(jù)應(yīng)用架構(gòu)與傳統(tǒng)企業(yè)架構(gòu)的不同也正是體現(xiàn)在數(shù)據(jù)、業(yè)務(wù)和技術(shù)架構(gòu)的獨特性。

大數(shù)據(jù)應(yīng)用:數(shù)據(jù)、業(yè)務(wù)與技術(shù)
數(shù)據(jù)是大數(shù)據(jù)應(yīng)用的基礎(chǔ)。大數(shù)據(jù)應(yīng)用處理和分析的數(shù)據(jù)是“大”數(shù)據(jù),具有4V的特點,首先是大,TB級甚至PB級的數(shù)據(jù),可能是單個大文件,也可能是海量的小文件群;其次是復(fù)雜,不再是結(jié)構(gòu)化的數(shù)據(jù)庫,更多的是半結(jié)構(gòu)化的,甚至非結(jié)構(gòu)化的數(shù)據(jù),讀取這些數(shù)據(jù),費時費力;再有這些數(shù)據(jù)的處理,后臺可能是實時的,近實時的,或者離線的,但對用戶而言,讀取寫入要無延時。這些數(shù)據(jù)不再只是業(yè)務(wù)系統(tǒng)中的數(shù)據(jù),它們可能來自互聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)、社區(qū)網(wǎng)絡(luò)、物聯(lián)網(wǎng)上的各個角落,采集這些數(shù)據(jù)本身就是一件復(fù)雜的事情,更何況還要對它們進(jìn)行處理和分析。數(shù)據(jù)與業(yè)務(wù)、技術(shù)的關(guān)系是,大數(shù)據(jù)處理的業(yè)務(wù)目的是發(fā)現(xiàn)大數(shù)據(jù)中的“信息”和“知識”,大數(shù)據(jù)對技術(shù)的要求是能夠高效地處理這么復(fù)雜的數(shù)據(jù)。
業(yè)務(wù)是大數(shù)據(jù)應(yīng)用的目的。大數(shù)據(jù)處理的業(yè)務(wù)流程是采集數(shù)據(jù)、聚合數(shù)據(jù)、分析數(shù)據(jù)和展現(xiàn)數(shù)據(jù)。通過這樣的業(yè)務(wù)流程,要發(fā)現(xiàn)大數(shù)據(jù)中蘊含的信息價值,發(fā)現(xiàn)洞察力。這種洞察力是業(yè)務(wù)系統(tǒng)中的傳統(tǒng)數(shù)據(jù)分析和挖掘所不能發(fā)現(xiàn)的,大數(shù)據(jù)的全集數(shù)據(jù)的分析和挖掘,給了一個很令人期待的承諾:發(fā)現(xiàn)相關(guān)性!也許這種相關(guān)性,并不能建立傳統(tǒng)的因果邏輯,但卻能發(fā)現(xiàn)數(shù)據(jù)之間的更多隱藏的秘密。這種相關(guān)性的商業(yè)應(yīng)用,帶來了巨大的商業(yè)價值,這是傳統(tǒng)邏輯思維所不能想象的。于是,發(fā)現(xiàn)相關(guān)性的算法就成為了業(yè)務(wù)架構(gòu)的關(guān)鍵,客戶細(xì)分、聚類、相關(guān)性分析、預(yù)測分析等相關(guān)的機(jī)器學(xué)習(xí)算法,應(yīng)用在大數(shù)據(jù)上,成為業(yè)務(wù)分析的主流。
技術(shù)是大數(shù)據(jù)應(yīng)用的手段。在大數(shù)據(jù)上發(fā)現(xiàn)規(guī)律,這不是現(xiàn)有的數(shù)據(jù)庫、數(shù)據(jù)倉庫所能勝任的。數(shù)據(jù)大,怎么辦?分解它!在分布式文件系統(tǒng)(HDFS)上用分布式計算程序(MapReduce)去計算,讓程序把作業(yè)進(jìn)行分解,Map計算,再Reduce匯總。集中式系統(tǒng)所不能解決的問題,在分布式計算系統(tǒng)上就迎刃而解。有了分布式的計算,就需要與之匹配的分布式數(shù)據(jù)庫、分布式的數(shù)據(jù)倉庫。于是,適用于分布式計算的列式數(shù)據(jù)庫、架構(gòu)在Hadoop之上的Hive被用來解決數(shù)據(jù)庫和數(shù)據(jù)查詢分析的問題。并不是所有的大數(shù)據(jù)都是大塊的數(shù)據(jù),有的數(shù)據(jù)很小,但需要頻繁讀寫,而且要求低延時獲得分析結(jié)果,在這種情況下,Hadoop也不能勝任。于是,輕量級的內(nèi)存計算工具Spark,適用于實時處理的流計算工具Storm等框架被開發(fā)出來,解決處理大數(shù)據(jù)所需要、Hadoop卻不擅長的工作。所有這些技術(shù),都是服務(wù)于兩件事:一是處理大數(shù)據(jù),二是為業(yè)務(wù)需要從大數(shù)據(jù)中提取出洞察力。所以,只要能解決好這兩件事,技術(shù)人員可以用最擅長的工具來進(jìn)行組合應(yīng)用。這就讓大數(shù)據(jù)的技術(shù)工具層出不窮,但處理大數(shù)據(jù)難度越來越低,業(yè)務(wù)價值的實現(xiàn)越來越容易。
業(yè)務(wù)、數(shù)據(jù)和技術(shù),大數(shù)據(jù)應(yīng)用的核心要素,也是大數(shù)據(jù)產(chǎn)業(yè)發(fā)展的關(guān)鍵。實現(xiàn)業(yè)務(wù)大價值,需要擁有大數(shù)據(jù),也需要掌握大數(shù)據(jù)技術(shù)工具,三者缺一不可!

數(shù)據(jù)分析咨詢請掃描二維碼

若不方便掃碼,搜微信號:CDAshujufenxi

數(shù)據(jù)分析師資訊
更多

OK
客服在線
立即咨詢
客服在線
立即咨詢
') } function initGt() { var handler = function (captchaObj) { captchaObj.appendTo('#captcha'); captchaObj.onReady(function () { $("#wait").hide(); }).onSuccess(function(){ $('.getcheckcode').removeClass('dis'); $('.getcheckcode').trigger('click'); }); window.captchaObj = captchaObj; }; $('#captcha').show(); $.ajax({ url: "/login/gtstart?t=" + (new Date()).getTime(), // 加隨機(jī)數(shù)防止緩存 type: "get", dataType: "json", success: function (data) { $('#text').hide(); $('#wait').show(); // 調(diào)用 initGeetest 進(jìn)行初始化 // 參數(shù)1:配置參數(shù) // 參數(shù)2:回調(diào),回調(diào)的第一個參數(shù)驗證碼對象,之后可以使用它調(diào)用相應(yīng)的接口 initGeetest({ // 以下 4 個配置參數(shù)為必須,不能缺少 gt: data.gt, challenge: data.challenge, offline: !data.success, // 表示用戶后臺檢測極驗服務(wù)器是否宕機(jī) new_captcha: data.new_captcha, // 用于宕機(jī)時表示是新驗證碼的宕機(jī) product: "float", // 產(chǎn)品形式,包括:float,popup width: "280px", https: true // 更多配置參數(shù)說明請參見:http://docs.geetest.com/install/client/web-front/ }, handler); } }); } function codeCutdown() { if(_wait == 0){ //倒計時完成 $(".getcheckcode").removeClass('dis').html("重新獲取"); }else{ $(".getcheckcode").addClass('dis').html("重新獲取("+_wait+"s)"); _wait--; setTimeout(function () { codeCutdown(); },1000); } } function inputValidate(ele,telInput) { var oInput = ele; var inputVal = oInput.val(); var oType = ele.attr('data-type'); var oEtag = $('#etag').val(); var oErr = oInput.closest('.form_box').next('.err_txt'); var empTxt = '請輸入'+oInput.attr('placeholder')+'!'; var errTxt = '請輸入正確的'+oInput.attr('placeholder')+'!'; var pattern; if(inputVal==""){ if(!telInput){ errFun(oErr,empTxt); } return false; }else { switch (oType){ case 'login_mobile': pattern = /^1[3456789]\d{9}$/; if(inputVal.length==11) { $.ajax({ url: '/login/checkmobile', type: "post", dataType: "json", data: { mobile: inputVal, etag: oEtag, page_ur: window.location.href, page_referer: document.referrer }, success: function (data) { } }); } break; case 'login_yzm': pattern = /^\d{6}$/; break; } if(oType=='login_mobile'){ } if(!!validateFun(pattern,inputVal)){ errFun(oErr,'') if(telInput){ $('.getcheckcode').removeClass('dis'); } }else { if(!telInput) { errFun(oErr, errTxt); }else { $('.getcheckcode').addClass('dis'); } return false; } } return true; } function errFun(obj,msg) { obj.html(msg); if(msg==''){ $('.login_submit').removeClass('dis'); }else { $('.login_submit').addClass('dis'); } } function validateFun(pat,val) { return pat.test(val); }