SparkSql学习之:toDF方法的由来(源码)

源码

源码1

源码2

源码3

spark.implicits._ 中有隐式转换换: rdd[T] --> DatasetHolder, 而DatasetHolder中有toDF方法 所以,就可以在rdd[T].toDF toDF中调用的有是 sqlContext.createDataset(rdd[T])(encoder) 而SqlImplicits中有一大堆的encoder!(基本类型,seq,set,map,case class ,product,javabean,…)

发布了23 篇原创文章 · 获赞 27 · 访问量 2278

猜你喜欢

转载自blog.csdn.net/MyNameIsWangYi/article/details/102470463
今日推荐