分享

想试下spark-sql 一直报错。应该下载哪个?一定要自己编译?

cckp 发表于 2016-8-11 14:08:44 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 2 6913
想试下spark-sql 一直报错。应该下载哪个?一定要自己编译?

装了spark后有个命令是 spark-sql ,但执行就报错:
Failed to load main class org.apache.spark.sql.hive.thriftserver.SparkSQLCLIDriver.
You need to build Spark with -Phive and -Phive-thriftserver.
好像是说要加什么参数重新编译。我是下载的no-hadoop那个,

应该下载哪个才能直接使用spark-sql ?
一定要自己下载源码带指定参数编译吗?

已有(2)人评论

跳转到指定楼层
nextuser 发表于 2016-8-11 15:58:27
自己编译下应该就好了
回复

使用道具 举报

cckp 发表于 2016-8-11 16:01:01
nextuser 发表于 2016-8-11 15:58
自己编译下应该就好了

我是听说自己搭环境编译hadoop 什么的很麻烦 据说一定要联网编译几个小时 有时还有可能被墙

hive on spark倒是可以直接使用的。

hive on spark 其实和 sparksql 差不多吧?

回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条