
數據科學入門丨選Python還是R
對于想入門數據科學的新手來說,選擇學Python還是R語言是一個難題,本文對兩種語言進行了比較,希望能幫助你做出選擇。
我是德勤的數據科學家主管,多年來我一直在使用Python和R語言,并且與Python社區(qū)密切合作了15年。本文是我對這兩種語言的一些個人看法。
第三種選擇
針對這個問題,Studio的首席數據科學家Htley Wickham認為,比起在二者中選其一,更好的選擇是讓兩種語言合作。因此,這也是我提到的第三種選擇,我在文本最后部分會探討。
如何比較R和Python
對于這兩種語言,有以下幾點值得進行比較:
· 歷史:
R和Python的發(fā)展歷史明顯不同,同時有交錯的部分。
· 用戶群體:
包含許多復雜的社會學人類學因素。
· 性能:
詳細比較以及為何難以比較。
· 第三方支持:
模塊、代碼庫、可視化、存儲庫、組織和開發(fā)環(huán)境。
· 用例:
根據具體任務和工作類型有不同的選擇。
· 是否能同時使用:
在Python中使用R,在R中使用Python。
· 預測:
內部測試。
· 企業(yè)和個人偏好:
揭曉最終答案。
歷史
簡史:
ABC語言 - > Python 問世(1989年由Guido van Rossum創(chuàng)立) - > Python 2(2000年) - > Python 3(2008年)
Fortan語言 - > S語言(貝爾實驗室) - > R語言問世(1991年由Ross Ihaka和Robert Gentleman創(chuàng)立) - > R 1.0.0(2000年) - > R 3.0.2(2013年)
用戶群體
在比較Python與R的使用群體時,要注意:
只有50%的Python用戶在同時使用R。
假設使用R語言的程序員都用R進行相關“科學和數字”研究??梢源_定無論程序員的水平如何,這種統(tǒng)計分布都是真實。
這里回到第二個問題,有哪些用戶群體。整個科學和數字社區(qū)包含幾個子群體,當中存在一些重疊。
使用Python或R語言的子群體:
· 深度學習
· 機器學習
· 高級分析
· 預測分析
· 統(tǒng)計
· 探索和數據分析
· 學術科研
· 大量計算研究領域
雖然每個領域幾乎都服務于特定群體,但在統(tǒng)計和探索等方面,使用R語言更為普遍。在不久之前進行數據探索時,比起Python,R語言花的時間更少,而且使用Python還需要花時間進行安裝。
這一切都被稱為Jupyter Notebooks和Anaconda的顛覆性技術所改變。
Jupyter Notebook:增加了在瀏覽器中編寫Python和R代碼的能力;
Anaconda:能夠輕松安裝和管理Python和R。
現在,你可以在友好的環(huán)境中啟動和運行Python或R,提供開箱即用的報告和分析,這兩項技術消除了完成任務和選擇喜歡語言間的障礙。Python現在能以獨立于平臺的方式打包,并且更快地提供快速簡單的分析。
社區(qū)中影響語言選擇的另一個因素是“開源”。不僅僅是開源的庫,還有協作社區(qū)對開源的影響。諷刺的是,Tensorflow和GNU Scientific Library等開源軟件(分別是Apache和GPL)都與Python和R綁定。雖然使用R語言的用戶很多,但使用Python的用戶中有很多純粹的Python支持者。另一方面,更多的企業(yè)使用R語言,特別是那些有統(tǒng)計學背景的。
最后,關于社區(qū)和協作,Github對Python的支持更多。如果看到最近熱門的Python包,會發(fā)現Tensorflow等項目有超過3.5萬的用戶收藏。但看到R的熱門軟件包,Shiny、Stan等的收藏量則低于2千。
性能
這方面不容易進行比較。
原因是需要測試的指標和情況太多。很難在任何一個特定硬件上測試。有些操作通過其中一種語言優(yōu)化,而不是另一種。
循環(huán)
在此之前讓我們想想,如何比較Python與R。你真的想在R語言寫很多循環(huán)嗎?畢竟這兩種語言的設計意圖不太相同。
{
"cells": [
{
"cell_type": "code",
"execution_count": 1,
"metadata": {},
"outputs": [],
"source": [
"import numpy as np\n",
"%load_ext rpy2.ipython"
]
},
{
"cell_type": "code",
"execution_count": 2,
"metadata": {},
"outputs": [],
"source": [
"def do_loop(u1):\n",
"\n",
" # Initialize `usq`\n",
" usq = {}\n",
"\n",
" for i in range(100):\n",
" # i-th element of `u1` squared into `i`-th position of `usq`\n",
" usq[i] = u1[i] * u1[i]\n"
]
},
{
"cell_type": "code",
"execution_count": 3,
"metadata": {},
"outputs": [],
"source": [
"%%R\n",
"do_loop <- function(u1) {\n",
" \n",
" # Initialize `usq`\n",
" usq <- 0\n",
"\n",
" for(i in 1:100) {\n",
" # i-th element of `u1` squared into `i`-th position of `usq`\n",
" usq[i] <- u1[i]*u1[i]\n",
" }\n",
"\n",
"}"
]
},
{
"cell_type": "code",
"execution_count": 4,
"metadata": {},
"outputs": [
{
"name": "stdout",
"output_type": "stream",
"text": [
"1.58 ms ± 42.8 μs per loop (mean ± std. dev. of 7 runs, 1000 loops each)\n"
]
}
],
"source": [
"%%timeit -n 1000\n",
"%%R\n",
"u1 <- rnorm(100)\n",
"do_loop(u1)"
]
},
{
"cell_type": "code",
"execution_count": 5,
"metadata": {},
"outputs": [
{
"name": "stdout",
"output_type": "stream",
"text": [
"36.9 μs ± 5.99 μs per loop (mean ± std. dev. of 7 runs, 1000 loops each)\n"
]
}
],
"source": [
"%%timeit -n 1000\n",
"u1 = np.random.randn(100)\n",
"do_loop(u1)"
]
}
],
"metadata": {
"kernelspec": {
"display_name": "Python 3",
"language": "python",
"name": "python3"
},
"language_info": {
"codemirror_mode": {
"name": "ipython",
"version": 3
},
"file_extension": ".py",
"mimetype": "text/x-python",
"name": "python",
"nbconvert_exporter": "python",
"pygments_lexer": "ipython3",
"version": "3.6.3"
}
},
"nbformat": 4,
"nbformat_minor": 2
}
Python為0.000037秒,R為0.00158秒
包括加載時間和在命令行上運行:R需要0.238秒,Python需要0.147秒。強調,這并不是科學嚴謹的測試。
測試證明,Python的運行速度明顯加快。通常這并沒有太大影響。
除了運行速度外,對于數據科學家而言哪種性能更重要?兩種語言之所以受歡迎是因為它們能被用作命令語言。例如,在使用Python時大多時候我們都很依賴Pandas。這涉及到每種語言中模塊和庫,以及其執(zhí)行方式。
第三方支持
Python有PyPI,R語言有CRAN,兩者都有Anaconda。
CRAN使用內置的install.packages命令。目前,CRAN上有大約1.2萬個包。其中超過1/2的包都能用于數據科學。
PyPi中包的數量超過前者的10倍,約有14.1萬個包。專門用于科學工程的有3700個。其中有些也可以用于科學,但沒有被標記。
在兩者中都有重復的情況。當搜索“隨機森林”時,PyPi中可以得到170個項目,但這些包并不相同。
盡管Python包的數量是R的10倍,但數據科學相關的包的數量大致相同。
運行速度
比較DataFrames和Pandas更有意義。
我們進行了一項實驗:比較針對復雜探索任務的執(zhí)行時間,結果如下:
在大多數任務中Python運行速度更快。
來源:
http://nbviewer.jupyter.org/gist/brianray/4ce15234e6ac2975b335c8d90a4b6882
可以看到,Python + Pandas比原生的R語言DataFrames更快。注意,這并不意味著Python運行更快,Pandas 是基于Numpy用C語言編寫的。
可視化
這里將ggplot2與matplotlib進行比較。
matplotlib是由John D. Hunter編寫的,他是我在Python社區(qū)中最敬重的人之一,他也是教會我使用Python的人。
Matplotlib雖然不易學習但能進行定制和擴展。ggplot難以進行定制,有些人認為它更難學。
如果你喜歡漂亮的圖表,而且無需自定義,那么R是不錯的選擇。如果你要做更多的事情,那么Matplotlib甚至交互式散景都不錯。同樣,R的ShinnyR能夠增加交互性。
是否能同時使用
可能你會問,為什么不能同時使用Python和R語言?
以下情況你可以同時使用這兩種語言:
· 公司或組織允許;
· 兩種都能在你的編程環(huán)境中輕松設置和維護;
· 你的代碼不需要進入另一個系統(tǒng);
· 不會給合作的人帶來麻煩和困擾。
一起使用兩種語言的方法是:
· Python提供給R的包:如rpy2、pyRserve、Rpython等;
· R也有相對的包:rPython、PythonInR、reticulate、rJython,SnakeCharmR、XRPython
· 使用Jupyter,同時使用兩者,例子如下:
之后可以傳遞pandas的數據框,接著通過rpy2自動轉換為R的數據框,并用“-i df”轉換:
來源:
http://nbviewer.jupyter.org/gist/brianray/734bd54f468d9a6db9171b2cfc98405a
預測
Kaggle上有人對開發(fā)者使用R還是Python寫了一個Kernel。他根據數據發(fā)現以下有趣的結果:
· 如果你打算明年轉向Linux,則更可能是Python用戶;
· 如果你研究統(tǒng)計數據,則更可能使用R;如果研究計算機科學,則更可能使用Python;
· 如果你還年輕(18-24歲),則更可能是Python用戶;
· 如果你參加編程比賽,則更可能是Python用戶;
· 如果你明年想使用Android,則更可能是Python用戶;
· 如果你想在明年學習SQL,則更可能是R用戶;
· 如果你使用MS office,則更可能是R用戶;
· 如果你想在明年使用Rasperry Pi,則更可能是Python用戶;
· 如果你是全日制學生,則更可能是Python用戶;
· 如果你使用的敏捷方法(Agile methodology),則更可能是Python用戶;
· 如果對待人工智能,比起興奮你更持擔心態(tài)度,則更可能是R用戶。
企業(yè)和個人偏好
當我與Googler和Stack Overflow的大神級人物Alex Martelli交流時,他向我解釋了為什么Google最開始只官方支持少數幾種語言。即使是在Google相對開發(fā)的環(huán)境中,也存在一些限制和偏好,其他企業(yè)也是如此。
除了企業(yè)偏好,企業(yè)中第一個使用某種語言的人也會起到決定性作用。第一個在德勤使用R的人他目前仍在公司工作,目前擔任首席數據科學家。我的建議是,選擇你喜歡的語言,熱愛你選擇的語言,起到領導作用,并熱愛你的事業(yè)。
當你在研究某些重要的內容時,犯錯是難以避免的。然而,每個精心設計的數據科學項目都為數據科學家留有一些空間,讓他們進行實驗和學習。重要的是保持開放的心態(tài),擁抱多樣性。
最后就我個人而言,我主要使用Python,之后我期待學習更多R的內容。
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
LSTM 模型輸入長度選擇技巧:提升序列建模效能的關鍵? 在循環(huán)神經網絡(RNN)家族中,長短期記憶網絡(LSTM)憑借其解決長序列 ...
2025-07-11CDA 數據分析師報考條件詳解與準備指南? ? 在數據驅動決策的時代浪潮下,CDA 數據分析師認證愈發(fā)受到矚目,成為眾多有志投身數 ...
2025-07-11數據透視表中兩列相乘合計的實用指南? 在數據分析的日常工作中,數據透視表憑借其強大的數據匯總和分析功能,成為了 Excel 用戶 ...
2025-07-11尊敬的考生: 您好! 我們誠摯通知您,CDA Level I和 Level II考試大綱將于 2025年7月25日 實施重大更新。 此次更新旨在確保認 ...
2025-07-10BI 大數據分析師:連接數據與業(yè)務的價值轉化者? ? 在大數據與商業(yè)智能(Business Intelligence,簡稱 BI)深度融合的時代,BI ...
2025-07-10SQL 在預測分析中的應用:從數據查詢到趨勢預判? ? 在數據驅動決策的時代,預測分析作為挖掘數據潛在價值的核心手段,正被廣泛 ...
2025-07-10數據查詢結束后:分析師的收尾工作與價值深化? ? 在數據分析的全流程中,“query end”(查詢結束)并非工作的終點,而是將數 ...
2025-07-10CDA 數據分析師考試:從報考到取證的全攻略? 在數字經濟蓬勃發(fā)展的今天,數據分析師已成為各行業(yè)爭搶的核心人才,而 CDA(Certi ...
2025-07-09【CDA干貨】單樣本趨勢性檢驗:捕捉數據背后的時間軌跡? 在數據分析的版圖中,單樣本趨勢性檢驗如同一位耐心的偵探,專注于從單 ...
2025-07-09year_month數據類型:時間維度的精準切片? ? 在數據的世界里,時間是最不可或缺的維度之一,而year_month數據類型就像一把精準 ...
2025-07-09CDA 備考干貨:Python 在數據分析中的核心應用與實戰(zhàn)技巧? ? 在 CDA 數據分析師認證考試中,Python 作為數據處理與分析的核心 ...
2025-07-08SPSS 中的 Mann-Kendall 檢驗:數據趨勢與突變分析的有力工具? ? ? 在數據分析的廣袤領域中,準確捕捉數據的趨勢變化以及識別 ...
2025-07-08備戰(zhàn) CDA 數據分析師考試:需要多久?如何規(guī)劃? CDA(Certified Data Analyst)數據分析師認證作為國內權威的數據分析能力認證 ...
2025-07-08LSTM 輸出不確定的成因、影響與應對策略? 長短期記憶網絡(LSTM)作為循環(huán)神經網絡(RNN)的一種變體,憑借獨特的門控機制,在 ...
2025-07-07統(tǒng)計學方法在市場調研數據中的深度應用? 市場調研是企業(yè)洞察市場動態(tài)、了解消費者需求的重要途徑,而統(tǒng)計學方法則是市場調研數 ...
2025-07-07CDA數據分析師證書考試全攻略? 在數字化浪潮席卷全球的當下,數據已成為企業(yè)決策、行業(yè)發(fā)展的核心驅動力,數據分析師也因此成為 ...
2025-07-07剖析 CDA 數據分析師考試題型:解鎖高效備考與答題策略? CDA(Certified Data Analyst)數據分析師考試作為衡量數據專業(yè)能力的 ...
2025-07-04SQL Server 字符串截取轉日期:解鎖數據處理的關鍵技能? 在數據處理與分析工作中,數據格式的規(guī)范性是保證后續(xù)分析準確性的基礎 ...
2025-07-04CDA 數據分析師視角:從數據迷霧中探尋商業(yè)真相? 在數字化浪潮席卷全球的今天,數據已成為企業(yè)決策的核心驅動力,CDA(Certifie ...
2025-07-04CDA 數據分析師:開啟數據職業(yè)發(fā)展新征程? ? 在數據成為核心生產要素的今天,數據分析師的職業(yè)價值愈發(fā)凸顯。CDA(Certified D ...
2025-07-03