誰是大數(shù)據(jù)領(lǐng)域的“圈內(nèi)人”_數(shù)據(jù)分析師考試

現(xiàn)今的數(shù)據(jù)類會(huì)議，70%是偏技術(shù)的，在場(chǎng)的都是國內(nèi)各個(gè)數(shù)據(jù)相關(guān)項(xiàng)目經(jīng)理和技術(shù)帶頭人，大家討論的話題都是在升級(jí)CDH版本的時(shí)候有什么問題，在處理Hive作業(yè)的時(shí)候哪種方式更好，在Storm、Kafka匹配時(shí)如何效率更高，在Spark應(yīng)用時(shí)內(nèi)存如何釋放這些問題。參會(huì)者都一個(gè)態(tài)度：不懂大數(shù)據(jù)技術(shù)的人沒資格評(píng)論大數(shù)據(jù)，您要不懂Hadoop 2.0中的資源配置，不懂Spark在內(nèi)存的駐留時(shí)間調(diào)優(yōu)，不懂Kafka采集就別參加這個(gè)會(huì)！對(duì)了，最近Google完全拋棄MR只用Dataflow了，您懂嗎？不懂滾粗！

大數(shù)據(jù)越來越吃香，數(shù)據(jù)分析軟件也深入人們生活，Excel、BI工具現(xiàn)在最新的可視化數(shù)據(jù)分析工具大數(shù)據(jù)魔鏡，都是數(shù)據(jù)分析的不同層次的選擇軟件。數(shù)據(jù)分析軟件進(jìn)步越來越快，免費(fèi)的大數(shù)據(jù)魔鏡已經(jīng)可以達(dá)到500多種可視化效果和實(shí)現(xiàn)數(shù)據(jù)共享。同時(shí)，高級(jí)的數(shù)據(jù)分析軟件也使數(shù)據(jù)分析越來越易懂。很多人擠破頭想要鉆進(jìn)大數(shù)據(jù)的圈內(nèi)，覺得只有專業(yè)搞大數(shù)據(jù)技術(shù)的才是圈內(nèi)人，難道真的是這樣嗎？

技術(shù)的進(jìn)步都是由業(yè)務(wù)驅(qū)動(dòng)的，某寶去了IOE才能叫大數(shù)據(jù)嗎，作為一個(gè)聾啞人按摩師用結(jié)繩記事完成了對(duì)于不同體型的人，用什么按摩手法進(jìn)行全流程治療，就不叫大數(shù)據(jù)分析了嗎？技術(shù)發(fā)展到什么程度，只有一小部分是由科學(xué)家追求極致的精神驅(qū)動(dòng)，大部分原因是因?yàn)闃I(yè)務(wù)發(fā)展到一定程度，要求技術(shù)必須做出進(jìn)步才能達(dá)成目標(biāo)的。

所以，真正的大數(shù)據(jù)“圈內(nèi)人”至少要包含以下幾種人：

一、業(yè)務(wù)運(yùn)營人員。比如互聯(lián)網(wǎng)的產(chǎn)品經(jīng)理要求技術(shù)人員，必須在用戶到達(dá)網(wǎng)站的時(shí)候就算出他今天的心情指數(shù)，而且要實(shí)現(xiàn)動(dòng)態(tài)監(jiān)測(cè)，這時(shí)候只能用Storm或者Spark來處理了；比如電信運(yùn)營商要求做到實(shí)時(shí)營銷，用戶進(jìn)入營業(yè)廳的時(shí)候，必須馬上推送短信給用戶，提示他本營業(yè)廳有一個(gè)特別適合他的相親對(duì)象（呈現(xiàn)身高、三圍、體重等指標(biāo)），但是見面前要先購買4G手機(jī)；再比如病人來到銀行開戶，銀行了解到用戶最近1周曾經(jīng)去醫(yī)院門診過兩次，出國旅游過3次，帶孩子游泳兩次，馬上客戶經(jīng)理就給客戶推薦相關(guān)的銀行保險(xiǎn)+理財(cái)產(chǎn)品。這些業(yè)務(wù)人員，往往是驅(qū)動(dòng)技術(shù)進(jìn)步的核心原因。

二、架構(gòu)師。當(dāng)一個(gè)業(yè)務(wù)人員和一個(gè)工程師，一個(gè)說著業(yè)務(wù)語言，一個(gè)說著技術(shù)術(shù)語在那里討論問題的時(shí)候，工程師往往想著用什么樣的代碼能馬上讓他閉嘴，而架構(gòu)師往往會(huì)跳出來說“不，不能那樣，你這樣寫只能解決一個(gè)問題并且會(huì)制造后續(xù)的若干問題，按照我這個(gè)方案來，可以解決后續(xù)的若干問題！”一個(gè)非技術(shù)企業(yè)的IT系統(tǒng)水平，往往有70%以上的標(biāo)準(zhǔn)掌握在架構(gòu)設(shè)計(jì)人員手里，盡快很多優(yōu)秀的架構(gòu)師都是從工程師慢慢發(fā)展學(xué)習(xí)而來的，IT架構(gòu)的重要性，很多企業(yè)都意識(shí)到了，這就是很多企業(yè)有CTO和CIO兩個(gè)職位，同樣重要！

三、投資人。老板，不用說了，老板給你吃穿，你給老板賣命，天生的基礎(chǔ)資料提供者，老板說要有山便有了山，老板說要做實(shí)時(shí)數(shù)據(jù)處理分析，便有了Storm,老板說要做開源，便有了Hadoop,老板還說要做迭代挖掘，便有了Spark……

四、科學(xué)家。他們是別人眼中的Geek,他們是別人眼中的高大上，他們是類似于霍金一樣的神秘的早出晚歸晝伏夜出的眼睛男女，他們是驅(qū)動(dòng)世界技術(shù)進(jìn)步的核心力量。除了世界頂級(jí)的IT公司（往往世界技術(shù)方向掌握在他們手中），其他公司一般需要1-2個(gè)科學(xué)家足以，他們是真正投身于科學(xué)的人，不要讓他們?nèi)タ紤]業(yè)務(wù)場(chǎng)景，不要讓他們?nèi)タ紤]業(yè)務(wù)流程，不要讓他們?nèi)ビ?jì)算成本，不要讓他們?nèi)タ紤]項(xiàng)目進(jìn)度，他們唯一需要考慮的就是如何在某個(gè)指標(biāo)上擊敗對(duì)手，在某個(gè)指標(biāo)上提高0.1%已經(jīng)讓他們可以連續(xù)奮戰(zhàn)，不眠不休，讓我們都為這些科學(xué)家喝彩和歡呼吧