多里安·馬丁，GetGoodgrade

你想涉足數(shù)據(jù)工程嗎？

好主意.

很多公司都在尋找數(shù)據(jù)工程師--如果你在LinkedIn上搜索“數(shù)據(jù)工程師”，僅在美國(guó)就會(huì)得到88，000多個(gè)好的職位。每個(gè)人都可以使用遠(yuǎn)程工作選項(xiàng)，您可以在任何公司找到工作。但是，首先，你需要有必要的技能來(lái)成為一個(gè)好的應(yīng)聘者，并被邀請(qǐng)參加面試。

在這篇文章中：

• 成為數(shù)據(jù)工程師的九項(xiàng)必備技能
• 獲得九大技能的技巧+職業(yè)建議。

1.SQL

數(shù)據(jù)工程師四處移動(dòng)大量數(shù)據(jù)，因此他們每天都要使用數(shù)據(jù)庫(kù)。用于數(shù)據(jù)庫(kù)的數(shù)據(jù)庫(kù)技術(shù)有兩種主要類型：SQL和NoSQL（下一節(jié)將詳細(xì)介紹NoSQL）。

強(qiáng)大的SQL技能允許使用數(shù)據(jù)庫(kù)構(gòu)建數(shù)據(jù)倉(cāng)庫(kù)，將它們與其他工具集成，并為業(yè)務(wù)目的分析數(shù)據(jù)。有幾種SQL類型可能是數(shù)據(jù)工程師在某個(gè)時(shí)候?qū)ｉT關(guān)注的（高級(jí)建模、大數(shù)據(jù)等），但要達(dá)到這些類型需要學(xué)習(xí)這種技術(shù)的基礎(chǔ)知識(shí)。

這就是為什么所有的公司，從蘋果這樣的巨頭到小企業(yè)，都需要他們的數(shù)據(jù)工程師是使用SQL的專家。

2.NoSQL

這是一種變得越來(lái)越流行的分布式數(shù)據(jù)存儲(chǔ)的不同類型。簡(jiǎn)單地解釋，“NoSQL”這個(gè)名稱意味著基于不同于SQL的技術(shù)。

NoSQL的例子包括Apache River、BaseX、Ignite、Hazelcast、Coherence等。在你的數(shù)據(jù)工程師求職過(guò)程中，你肯定會(huì)遇到它們，所以知道如何使用它們將是一個(gè)巨大的優(yōu)勢(shì)。

3.Python

Python是需求仍然很高的核心編程語(yǔ)言（事實(shí)上，它是程序員第三喜歡的語(yǔ)言）。數(shù)據(jù)工程師應(yīng)該精通Python以便能夠編寫可維護(hù)、可重用和復(fù)雜的函數(shù)。這種語(yǔ)言高效、通用，非常適合文本分析，并為大數(shù)據(jù)支持提供了合法的基礎(chǔ)。

學(xué)習(xí)Python很容易，這要?dú)w功于各種技能級(jí)別的可用資源。對(duì)于初學(xué)者，請(qǐng)隨意查看以下內(nèi)容：

• 7成為數(shù)據(jù)工程師的資源。一系列有用的在線課程，包括對(duì)初學(xué)者友好的Python介紹
• 面向初學(xué)者的10個(gè)Python技巧。從事數(shù)據(jù)科學(xué)和工程的程序員的基本Python技能列表
• 探索Python基礎(chǔ)知識(shí)。[內(nèi)容由Python軟件基金會(huì)現(xiàn)任主席Naomi Ceder親自挑選]。這是一本免費(fèi)的電子書，它描述了Python編程的基礎(chǔ)知識(shí)、特性和語(yǔ)法，以及使用Python進(jìn)行數(shù)據(jù)建模和生成準(zhǔn)確的預(yù)測(cè)。

4.亞馬遜網(wǎng)絡(luò)服務(wù)(AWS)

AWS是一個(gè)流行的云平臺(tái)，大多數(shù)程序員使用它來(lái)變得更加敏捷、創(chuàng)新和可伸縮性。數(shù)據(jù)工程團(tuán)隊(duì)在AWS上回復(fù)設(shè)計(jì)自動(dòng)化數(shù)據(jù)流，因此您需要了解使用該工具設(shè)計(jì)和部署基于云的數(shù)據(jù)基礎(chǔ)設(shè)施。

如果你對(duì)學(xué)習(xí)AWS感興趣，你可能想試試在線課程或亞馬遜自己的教程（就像這篇關(guān)于AWS和大數(shù)據(jù)的教程）。然后，你可以嘗試一下你的知識(shí)，從亞馬遜獲得官方證書--這是脫穎而出成為專業(yè)人士的好方法。

5.卡夫卡

Kafka是一個(gè)用于處理實(shí)時(shí)數(shù)據(jù)提要的開(kāi)源處理軟件平臺(tái)。這意味著你可以用它來(lái)構(gòu)建實(shí)時(shí)流媒體應(yīng)用程序，這是企業(yè)所需要的?？ǚ蚩?qū)動(dòng)的應(yīng)用程序可以幫助發(fā)現(xiàn)和應(yīng)用趨勢(shì)，并幾乎實(shí)時(shí)地對(duì)客戶需求做出反應(yīng)。

這就是為什么60%的財(cái)富100強(qiáng)公司在他們的應(yīng)用程序中使用卡夫卡。其中包括LinkedIn、Microsoft、Netflix、愛(ài)彼迎和Target。例如，《紐約時(shí)報(bào)》使用卡夫卡來(lái)存儲(chǔ)和分發(fā)已發(fā)布的內(nèi)容到應(yīng)用程序中，以使讀者能夠獲得這些內(nèi)容。

6.Hadoop

Apache Hadoop是數(shù)據(jù)工程師用來(lái)存儲(chǔ)和分析大量信息的開(kāi)源框架。Hadoop不是一個(gè)單一的平臺(tái)，而是許多支持數(shù)據(jù)集成的工具。這就是為什么它對(duì)大數(shù)據(jù)分析很有用。

如果您成為一名數(shù)據(jù)工程師，那么您將有機(jī)會(huì)使用Kafka和Hadoop進(jìn)行實(shí)時(shí)數(shù)據(jù)處理、監(jiān)控和報(bào)告。

7.文字清晰簡(jiǎn)潔

寫作是這份清單上的第一項(xiàng)軟技能。這是許多有抱負(fù)的數(shù)據(jù)工程師往往忽視的東西，結(jié)果剝奪了他們自己更好的職業(yè)機(jī)會(huì)。以下是寫作對(duì)數(shù)據(jù)工程師最重要的好處：

• 鞏固你的知識(shí)。蘋果公司的數(shù)據(jù)工程師伊恩·古德費(fèi)洛在接受吳恩達(dá)采訪時(shí)說(shuō)，寫博客有助于鞏固和鞏固對(duì)復(fù)雜專業(yè)概念的理解
• 向他人解釋復(fù)雜的數(shù)據(jù)。您可能會(huì)參與向經(jīng)理、團(tuán)隊(duì)成員和相關(guān)方報(bào)告數(shù)據(jù)和結(jié)果，這需要有清晰簡(jiǎn)潔的書寫能力。

從使用免費(fèi)工具如Grammarly檢查你的寫作開(kāi)始。它會(huì)發(fā)現(xiàn)復(fù)雜的句子，不必要的單詞，并產(chǎn)生建議，使寫作更加連貫和清晰。

8.人際交往

數(shù)據(jù)工程師是一個(gè)經(jīng)常與不同利益相關(guān)者交流的人，包括數(shù)據(jù)分析師、首席技術(shù)提供商、開(kāi)發(fā)人員、設(shè)計(jì)師、客戶、機(jī)器學(xué)習(xí)工程師和其他人。

LinkedIn的研究發(fā)現(xiàn)，溝通--包括人際溝通--是雇主最想要的軟技能。無(wú)論你是一個(gè)內(nèi)向的人還是沒(méi)有足夠的人際溝通技巧，你都必須學(xué)習(xí)它們。

考慮從這些領(lǐng)域入手：

• 反饋--要求并向他人提供反饋（包括書面和口頭）
• 主動(dòng)傾聽(tīng)--用主動(dòng)傾聽(tīng)來(lái)理解他人的觀點(diǎn)，更多地參與對(duì)話
• 肢體語(yǔ)言--學(xué)習(xí)姿勢(shì)、面部表情和手勢(shì)如何讓別人在與你交流時(shí)更舒服。

9.時(shí)間管理

一個(gè)擁有優(yōu)秀時(shí)間管理技能的數(shù)據(jù)工程師可以改進(jìn)他們工作的每一個(gè)方面。在這個(gè)職業(yè)中，有很多事情會(huì)讓你晚上睡不著，所以有能力規(guī)劃工作日并堅(jiān)持時(shí)間表是一個(gè)驚人的優(yōu)勢(shì)。

讓數(shù)據(jù)工程師更快樂(lè)的時(shí)間管理的好處：

• 壓力和焦慮較少
• 更好地平衡工作與生活
• 項(xiàng)目按時(shí)交付
• 有更多時(shí)間進(jìn)行個(gè)人項(xiàng)目或娛樂(lè)活動(dòng)
• 減少拖延。

好的是你可以學(xué)會(huì)時(shí)間管理。有一些有用的應(yīng)用程序，如Forest和HabitMinder（它們非常有助于學(xué)習(xí)規(guī)劃和遵守時(shí)間表），以及許多你可以使用的書籍。