2019-01-20
閱讀量:
1047
spark中driver的作用?
spark中driver的作用是什么?
答:driver:
I.串聯(lián)各個(gè)算子操作:DAG:有向無環(huán)圖
II.拆分各個(gè)stage階段
III.部分功能相當(dāng)于yarn中的applicationmaster
dagscheduler:是driver中的一個(gè)組件,執(zhí)行II操作:拆分各個(gè)stage階段
taskscheduler:是driver中的一個(gè)組件,執(zhí)行III操作:部分功能相當(dāng)于applicationmaster






評(píng)論(0)


暫無數(shù)據(jù)
CDA考試動(dòng)態(tài)
CDA報(bào)考指南
推薦帖子
0條評(píng)論
1條評(píng)論
0條評(píng)論
0條評(píng)論