Spark中文手册6：Spark-sql由入门到精通

wuzhenbao · 发表于 2017-3-24 08:30:10

学习了，多谢分享！

为梦狂野 · 发表于 2017-3-29 18:25:22

整理的比较全面，谢谢thanks a lot ,thanks for your share...

为梦狂野 · 发表于 2017-3-29 22:45:07

有问题，反射推断模式部分是引入import sqlContext.implicits._

为梦狂野 · 发表于 2017-3-30 09:20:17

Dataset and DataFrame API registerTempTable has been deprecated and replaced by createOrReplaceTempView,第一个反射模式的SparkSQL不建议注册成表，官网说的

为梦狂野 · 发表于 2017-3-30 09:23:18

哥哥呀，你少了个.toDF,否则注册不到表。这是1.6版本，在2.0版本后不建议注册成表，应该搞成视图。// Create an RDD of Person objects and register it as a table.
val people = sc.textFile("examples/src/main/resources/people.txt").map(_.split(",")).map(p => Person(p(0), p(1).trim.toInt)).toDF()
people.registerTempTable("people")

晃晃悠悠 · 发表于 2017-4-26 10:21:01

感谢分享

图文精华

Spark中文手册6：Spark-sql由入门到精通

浏览过的版块

推荐 /2