2019-02-25
閱讀量:
1381
spark 中的driver的作用是什么?
spark 中的driver的作用是什么?
答:
Spark中的driver感覺其實(shí)和yarn中Application Master的功能相類似。
主要完成任務(wù)的調(diào)度以及和executor和cluster manager進(jìn)行協(xié)調(diào)。有client和cluster聯(lián)眾模式。
client模式:driver在任務(wù)提交的機(jī)器上運(yùn)行,
cluster模式:會隨機(jī)選擇機(jī)器中的一臺機(jī)器啟動(dòng)driver。
我們可以從spark官網(wǎng)截圖的一張圖可以大致了解driver的功能。







評論(0)


暫無數(shù)據(jù)
CDA考試動(dòng)態(tài)
CDA報(bào)考指南
推薦帖子
0條評論
1條評論
0條評論
0條評論