2019-01-25
閱讀量:
928
Shuffle過程是啥樣?
Shuffle過程是啥樣?
答:
從 Map 輸出到 Reduce 輸入的整個(gè)過程可以廣義地稱為 Shuffle。 Shuffle 橫跨 Map 端和 Reduce 端, 在 Map 端包括 Spill 過程, 在 Reduce 端包括 copy 和 sort 過程, 如圖所示:







評(píng)論(0)


暫無數(shù)據(jù)
CDA考試動(dòng)態(tài)
CDA報(bào)考指南
推薦帖子
0條評(píng)論
1條評(píng)論
0條評(píng)論
0條評(píng)論