2019-01-31
閱讀量:
811
DataFrame轉(zhuǎn)Dataset
DataFrame如何轉(zhuǎn)Dataset?
答:方法如下在給出每一列的類型后,使用as方法,轉(zhuǎn)成Dataset,這在數(shù)據(jù)類型是DataFrame又需要針對各個字段處理時極為方便
import
spark.implicits._
case
class
Coltest(col1:String,col2:Int)extends
Serializable //定義字段名和類型
val
testDS =
testDF.as[Coltest]
注:一定要加上 import spark.implicits._ 不然toDF、toDS無法使用






評論(0)


暫無數(shù)據(jù)
推薦帖子
0條評論
1條評論
0條評論