99999久久久久久亚洲,欧美人与禽猛交狂配,高清日韩av在线影院,一个人在线高清免费观看,啦啦啦在线视频免费观看www

熱線電話：13121318867

登錄
首頁(yè)大數(shù)據(jù)時(shí)代提升工作效率：我常用的R語(yǔ)言自動(dòng)化
提升工作效率：我常用的R語(yǔ)言自動(dòng)化
2021-08-05
收藏

DA：您是如何入行的？

高云：因?yàn)槲也⒉皇菍W(xué)統(tǒng)計(jì)學(xué)和計(jì)算機(jī)專(zhuān)業(yè)的，畢業(yè)后是在電信運(yùn)營(yíng)商做網(wǎng)絡(luò)維護(hù)和網(wǎng)絡(luò)優(yōu)化相關(guān)的工作，這一干就是6年的時(shí)間。大家都知道從2009年3G時(shí)代以后，隨著移動(dòng)互聯(lián)網(wǎng)的爆發(fā)，運(yùn)營(yíng)商的移動(dòng)數(shù)據(jù)流量也是與日俱增，我剛好負(fù)責(zé)的就是數(shù)據(jù)業(yè)務(wù)的流量監(jiān)控工作，搭建了一套全網(wǎng)數(shù)據(jù)流量的監(jiān)控平臺(tái)，研究全網(wǎng)大大小小接口流量的起起落落，也算是大數(shù)據(jù)的初體驗(yàn)吧。

近幾年，運(yùn)營(yíng)商對(duì)于數(shù)據(jù)價(jià)值的探索需求也逐漸旺盛，我們成立了專(zhuān)門(mén)的大數(shù)據(jù)中心，時(shí)任的主管也是特別看好我的潛力，希望我能加入到這樣一個(gè)專(zhuān)門(mén)做數(shù)據(jù)分析和數(shù)據(jù)挖掘的團(tuán)隊(duì)中來(lái)。也正是在他不斷引領(lǐng)下，我從一個(gè)大數(shù)據(jù)的門(mén)外漢，一路走到了今天，所以，說(shuō)到入行，真的是非常感謝他。

DA：您的工作經(jīng)歷，目前的工作職責(zé)是什么？工作中曾做過(guò)的數(shù)據(jù)分析實(shí)例，以及您的職業(yè)規(guī)劃？

高云：在運(yùn)營(yíng)商做大數(shù)據(jù)分析工作的這段時(shí)間里，做過(guò)很多基于空間地理的用戶遷徙、商圈人流、用戶的社交網(wǎng)絡(luò)以及用戶特征標(biāo)簽的建模和分析項(xiàng)目。在2015年我加入了一家專(zhuān)注于零售行業(yè)的O2O大數(shù)據(jù)服務(wù)的創(chuàng)業(yè)公司，擔(dān)任數(shù)據(jù)分析總監(jiān)的職務(wù)，全面負(fù)責(zé)公司對(duì)外的數(shù)據(jù)分析服務(wù)、用戶標(biāo)簽體系建設(shè)和產(chǎn)品優(yōu)化相關(guān)的工作。

在我未來(lái)的職業(yè)規(guī)劃中，數(shù)據(jù)分析一定是一條主線，做一名專(zhuān)業(yè)領(lǐng)域的數(shù)據(jù)科學(xué)家是我最終的目標(biāo)。所以，在繁忙的工作中，我會(huì)要求自己不能停下學(xué)習(xí)的腳步，無(wú)論的數(shù)據(jù)分析的技術(shù)，還是專(zhuān)業(yè)領(lǐng)域的行業(yè)知識(shí)，都有太多需要去探索的東西。

DA：能否給我們講講您在工作中遇到的印象深刻的困難及其背景成因？

高云：其實(shí)，任何一個(gè)數(shù)據(jù)分析或者數(shù)據(jù)挖掘項(xiàng)目的困難，都只是一個(gè)暫時(shí)的需要跨越的障礙而已，這樣的困難往往是我們不斷學(xué)習(xí)進(jìn)步的機(jī)會(huì)，并不是數(shù)據(jù)分析師最大的敵人。在我看來(lái)，數(shù)據(jù)分析師工作最大的制約是效率問(wèn)題。我們往往在常規(guī)的數(shù)據(jù)采集、ETL、數(shù)據(jù)清洗和規(guī)范的報(bào)表制作中耗費(fèi)了大量的時(shí)間和精力，而這部分基礎(chǔ)而重要的工作，產(chǎn)生的顯性?xún)r(jià)值又很低。占用了大量數(shù)據(jù)分析師時(shí)間和精力的同時(shí)，制約了大家進(jìn)一步探索數(shù)據(jù)、挖掘數(shù)據(jù)隱含價(jià)值以及追求卓越的數(shù)據(jù)可視化的思考空間。這樣經(jīng)典的二八現(xiàn)象在數(shù)據(jù)分析行業(yè)內(nèi)是屢見(jiàn)不鮮的。

DA：如何解決這個(gè)問(wèn)題呢？能否請(qǐng)您向廣大同行分享下思路？

高云：解決這個(gè)問(wèn)題的關(guān)鍵在于自動(dòng)化，這也是目前越來(lái)越多先進(jìn)的數(shù)據(jù)分析和挖掘工具能夠大行其道的原因所在，無(wú)論是SPSS、SAS還是R、Python，甚至是EXCEL，都有足夠的能力將常規(guī)的“規(guī)定動(dòng)作”時(shí)間壓縮到很小的范圍，讓大家有足夠的時(shí)間去完成那些機(jī)器無(wú)法完成的“人的工作”，而這部分“人的工作”才是數(shù)據(jù)分析師這個(gè)職業(yè)存在的最大價(jià)值。

具體來(lái)說(shuō)，我們會(huì)把數(shù)據(jù)格式轉(zhuǎn)換、異常值識(shí)別、數(shù)據(jù)清洗和基本的數(shù)據(jù)統(tǒng)計(jì)分析工作利用R語(yǔ)言作為工具，編寫(xiě)自動(dòng)化的R腳本文件實(shí)現(xiàn)，甚至直接生成可視化報(bào)表的PPT文件。把以前需要好幾天完成的工作，在幾秒內(nèi)實(shí)現(xiàn)，這種感覺(jué)還是很COOL的。

分享一些我們?cè)?a href='/map/r/' style='color:#000;font-size:inherit;'>R語(yǔ)言自動(dòng)化實(shí)現(xiàn)過(guò)程中用到的擴(kuò)展包和函數(shù)：

plyr

dplyr

reshape2（數(shù)據(jù)整理）

boxplot.stats函數(shù)（異常值檢測(cè)）

ggplot2（可視化）

knitr（生成報(bào)告）

因此，磨刀不誤砍柴工，希望廣大同行都能通過(guò)各種手段把自己從80%的繁瑣、重復(fù)勞動(dòng)中解放出來(lái)，釋放更多的價(jià)值。

DA：您可否推薦一些平時(shí)充電學(xué)習(xí)專(zhuān)業(yè)知識(shí)的平臺(tái)或途徑？

高云：首選當(dāng)然是經(jīng)管之家了，我的大量的視頻、電子書(shū)資源都是從論壇中獲得的，這里還想感謝一下廣大的壇友呢。

其它的途徑我主要是看書(shū)，畢竟電腦看了一天了，晚上一般喜歡翻一翻紙質(zhì)的書(shū)籍，像O`Rilly出版社發(fā)行的很多國(guó)外的數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)類(lèi)的書(shū)籍質(zhì)量都是非常高的。另外還有一個(gè)比較快速獲得知識(shí)和幫助的平臺(tái)就是QQ群了，那真是一個(gè)高手云集的地方。

DA：您對(duì)希望從事數(shù)據(jù)分析行業(yè)的人有哪些建議？

高云：要對(duì)數(shù)據(jù)有熱愛(ài)。從事數(shù)據(jù)分析這個(gè)行業(yè)有時(shí)候的工作時(shí)很艱苦的，對(duì)著各類(lèi)數(shù)據(jù)報(bào)表一看就是一天，如果沒(méi)有足夠的熱愛(ài)，很難有這樣的耐心和毅力去堅(jiān)持。無(wú)論是學(xué)習(xí)和工作，都要用一種專(zhuān)注甚至是苛刻的態(tài)度去做，只有這樣，才能讓我們的分析結(jié)論有足夠的說(shuō)服力，自己才能獲得足夠的信心。

另外，很多剛?cè)腴T(mén)的分析師往往不知道需要學(xué)習(xí)什么樣的工具，或者是什么工具都想學(xué)，但是什么都學(xué)的一知半解又無(wú)法深入。其實(shí)，初期的時(shí)候能熟練使用1-2個(gè)工具就足夠了，把一個(gè)工具用深用精很重要，很多的工具都是觸類(lèi)旁通的。

最后一點(diǎn)建議是，數(shù)據(jù)可視化很重要，重要到可以說(shuō)三遍。在數(shù)據(jù)規(guī)模和信息量爆炸的今天，可視化作為一個(gè)最接近用戶的表達(dá)手段，有著“最后一公里”的重要價(jià)值。一個(gè)有趣的數(shù)據(jù)分析結(jié)果，如果沒(méi)有一個(gè)有吸引力的可視化表達(dá)方式，往往就會(huì)石沉大海了。而一個(gè)獨(dú)到的可視化設(shè)計(jì)，會(huì)對(duì)一個(gè)數(shù)據(jù)分析的結(jié)論有難以估計(jì)的加分作用。

DA：您如何看待數(shù)據(jù)分析師行業(yè)的就業(yè)前景及未來(lái)發(fā)展？

高云：粗略的算一下，大家可能感覺(jué)周?chē)臄?shù)據(jù)分析師很多，學(xué)校里相關(guān)的專(zhuān)業(yè)也是越來(lái)越熱門(mén)。但落實(shí)到每個(gè)專(zhuān)業(yè)領(lǐng)域中來(lái)，優(yōu)秀的數(shù)據(jù)分析人才還是非常稀缺的，而數(shù)據(jù)分析師在不同領(lǐng)域的工作中又有一定的通用性，所以就業(yè)和轉(zhuǎn)行的機(jī)會(huì)也更多，前景還是非常好的。

DA：平時(shí)工作之余都做些什么，有什么特長(zhǎng)愛(ài)好呢？

高云：因?yàn)楝F(xiàn)在的工作確實(shí)比較忙，工作之余其實(shí)就是更多的陪伴家人和孩子吧，畢竟她們對(duì)我的支持是最大的，也是我最需要感恩的人。愛(ài)好的話是足球和三國(guó)殺啦，體育鍛煉和腦力鍛煉兼顧吧。說(shuō)真的，有時(shí)候數(shù)據(jù)分析師的大腦還是需要放松一下的，一直緊繃著的話就會(huì)失去很多靈感和創(chuàng)意了。

高云留下了自己的聯(lián)系方式，QQ：32323597 郵箱：32323597@qq.com。有問(wèn)題想要溝通的同學(xué)可以在后臺(tái)留言哦~

后記：這是“每天一個(gè)數(shù)據(jù)分析師”的第10期采訪，非常感謝受訪的各位老師以及訂閱讀者向我們提出的各種建議，我們期待更多的聲音！我們計(jì)劃每天采訪一個(gè)數(shù)據(jù)分析師（覆蓋各行各業(yè)），聽(tīng)TA在從業(yè)路上的故事，講TA在工作中遇到的種種困難以及采取的解決方案。歡迎大家踴躍推薦或者自薦。聯(lián)系我們請(qǐng)直接在微信留言或發(fā)郵件到：adaaday@pinggu.org。


數(shù)據(jù)分析咨詢(xún)請(qǐng)掃描二維碼

若不方便掃碼，搜微信號(hào)：CDAshujufenxi

數(shù)據(jù)分析師資訊
更多

OK
客服在線
立即咨詢(xún)
客服在線
立即咨詢(xún)
') } function initGt() { var handler = function (captchaObj) { captchaObj.appendTo('#captcha'); captchaObj.onReady(function () { $("#wait").hide(); }).onSuccess(function(){ $('.getcheckcode').removeClass('dis'); $('.getcheckcode').trigger('click'); }); window.captchaObj = captchaObj; }; $('#captcha').show(); $.ajax({ url: "/login/gtstart?t=" + (new Date()).getTime(), // 加隨機(jī)數(shù)防止緩存 type: "get", dataType: "json", success: function (data) { $('#text').hide(); $('#wait').show(); // 調(diào)用 initGeetest 進(jìn)行初始化 // 參數(shù)1：配置參數(shù) // 參數(shù)2：回調(diào)，回調(diào)的第一個(gè)參數(shù)驗(yàn)證碼對(duì)象，之后可以使用它調(diào)用相應(yīng)的接口 initGeetest({ // 以下 4 個(gè)配置參數(shù)為必須，不能缺少 gt: data.gt, challenge: data.challenge, offline: !data.success, // 表示用戶后臺(tái)檢測(cè)極驗(yàn)服務(wù)器是否宕機(jī) new_captcha: data.new_captcha, // 用于宕機(jī)時(shí)表示是新驗(yàn)證碼的宕機(jī) product: "float", // 產(chǎn)品形式，包括：float，popup width: "280px", https: true // 更多配置參數(shù)說(shuō)明請(qǐng)參見(jiàn)：http://docs.geetest.com/install/client/web-front/ }, handler); } }); } function codeCutdown() { if(_wait == 0){ //倒計(jì)時(shí)完成 $(".getcheckcode").removeClass('dis').html("重新獲取"); }else{ $(".getcheckcode").addClass('dis').html("重新獲取("+_wait+"s)"); _wait--; setTimeout(function () { codeCutdown(); },1000); } } function inputValidate(ele,telInput) { var oInput = ele; var inputVal = oInput.val(); var oType = ele.attr('data-type'); var oEtag = $('#etag').val(); var oErr = oInput.closest('.form_box').next('.err_txt'); var empTxt = '請(qǐng)輸入'+oInput.attr('placeholder')+'！'; var errTxt = '請(qǐng)輸入正確的'+oInput.attr('placeholder')+'！'; var pattern; if(inputVal==""){ if(!telInput){ errFun(oErr,empTxt); } return false; }else { switch (oType){ case 'login_mobile': pattern = /^1[3456789]\d{9}$/; if(inputVal.length==11) { $.ajax({ url: '/login/checkmobile', type: "post", dataType: "json", data: { mobile: inputVal, etag: oEtag, page_ur: window.location.href, page_referer: document.referrer }, success: function (data) { } }); } break; case 'login_yzm': pattern = /^\d{6}$/; break; } if(oType=='login_mobile'){ } if(!!validateFun(pattern,inputVal)){ errFun(oErr,'') if(telInput){ $('.getcheckcode').removeClass('dis'); } }else { if(!telInput) { errFun(oErr, errTxt); }else { $('.getcheckcode').addClass('dis'); } return false; } } return true; } function errFun(obj,msg) { obj.html(msg); if(msg==''){ $('.login_submit').removeClass('dis'); }else { $('.login_submit').addClass('dis'); } } function validateFun(pat,val) { return pat.test(val); }