2020-07-07
閱讀量:
1314
30臺(tái)機(jī)器,跑mr任務(wù)的時(shí)候發(fā)現(xiàn)5個(gè)map任務(wù)全都分配到了同一臺(tái)機(jī)器上
集群有30臺(tái)機(jī)器,跑mr任務(wù)的時(shí)候發(fā)現(xiàn)5個(gè)map任務(wù)全都分配到了同一臺(tái)機(jī)器上,這個(gè)可能是由于什么原因?qū)е碌膯幔?/p>
解決方案:yarn.scheduler.fair.assignmultiple 這個(gè)參數(shù) 默認(rèn)是開的,需要關(guān)掉。
將YARN配置中的yarn.scheduler.fair.assignmultiple參數(shù)設(shè)為false,或者手動(dòng)設(shè)定yarn.scheduler.fair.max.assign參數(shù)的值為一個(gè)較小的正數(shù)(如3或4)。






評論(0)


暫無數(shù)據(jù)
CDA考試動(dòng)態(tài)
CDA報(bào)考指南
推薦帖子
0條評論
1條評論
0條評論
0條評論