原博文出自于： http://www.cnblogs.com/namhwik/p/5967910.html
RDD与DataFrame转换
1. 通过反射的方式来推断RDD元素中的元数据。因为RDD本身一条数据本身是没有元数据的，例如Person，而Person有name,id等，而record是不知道这些的，但是变成DataFrame背后一定知道，通过反射的方式就可以了解到背后这些元数据，进而转换成DataFrame。
如何反射？
Scala: 通过case class映射，在case class里面说我们这个RDD里面每个record的不同列的元数据是什么。(废弃)
当样本类不能提前确定时（例如，当记录的结构由字符串或文本数据集编码而成，它在解析时，字段将会对不同的用户有不同的投影结果），SchemaRDD 可以由以下三个步骤创建：
当JavaBean不能被预先定义的时候，编程创建DataFrame分为三步：
//1.利用反射来推断包含特定类型对象的RDD的schema。这种方法会简化代码并且在你已经知道schema的时候非常适用。
Original: https://www.cnblogs.com/zlslch/p/6040469.html
Author: 大数据和ai躺过的坑
Title: 转】RDD与DataFrame的转换
原创文章受到原创版权保护。转载请注明出处：https://www.johngo689.com/559867/
转载文章受原作者版权保护。转载请注明原作者出处！