2019-02-25
閱讀量:
1115
spark 中的Application是啥?
spark 中的Application代表哪塊?
答:
application(應(yīng)用)其實(shí)就是用spark-submit提交的程序。比方說spark examples中的計(jì)算pi的SparkPi。
一個(gè)application通常包含三部分:
從數(shù)據(jù)源(比方說HDFS)取數(shù)據(jù)形成RDD;
通過RDD的transformation和action進(jìn)行計(jì)算;
將結(jié)果輸出到console或者外部存儲(chǔ)(比方說collect收集輸出到console)。






評(píng)論(0)


暫無數(shù)據(jù)
CDA考試動(dòng)態(tài)
CDA報(bào)考指南
推薦帖子
0條評(píng)論
1條評(píng)論
0條評(píng)論
0條評(píng)論