分享

spark集群启动错误

wangzhenqiang 发表于 2016-11-2 14:11:13 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 4 6874
我搭建spark集群时,在master上 ./start-all.sh,发现一个slave节点起不来,一个slave节点能起来;错误如下
Spark Command: /usr/java/jdk1.8.0_91/jre/bin/java -cp /usr/local/spark/conf/:/usr/local/spark/lib/spark-assembly-1.6.2-hadoop2.6.0.jar:/usr/local/spark/lib/datanucleus-api-jdo-3.2.6.jar:/usr/local/spark/lib/datanucleus-rdbms-3.2.9.jar:/usr/local/spark/lib/datanucleus-core-3.2.10.jar:/usr/hdp/2.3.0.0-2557/hadoop/etc/hadoop/ -Xms1g -Xmx1g org.apache.spark.deploy.worker.Worker --webui-port 8081 spark://master.secsmarts.com:7077
========================================
Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.augmentString(Ljava/lang/String;)Ljava/lang/String;
        at org.apache.spark.util.Utils$.<init>(Utils.scala:1718)
        at org.apache.spark.util.Utils$.<clinit>(Utils.scala)
        at org.apache.spark.Logging$.<init>(Logging.scala:161)
        at org.apache.spark.Logging$.<clinit>(Logging.scala)
        at org.apache.spark.Logging$class.initializeIfNecessary(Logging.scala:103)
        at org.apache.spark.Logging$class.log(Logging.scala:50)
        at org.apache.spark.deploy.worker.Worker$.log(Worker.scala:684)
        at org.apache.spark.deploy.worker.Worker$.main(Worker.scala:689)

        at org.apache.spark.deploy.worker.Worker.main(Worker.scala)

求助

已有(4)人评论

跳转到指定楼层
nextuser 发表于 2016-11-2 17:08:04
一个起来,一个没起来。说明配置没有问题,看看权限或则用户是否忘记修改了。导致访问不到。
回复

使用道具 举报

w517424787 发表于 2016-11-2 22:26:30
2个节点的scala版本都相同没?
回复

使用道具 举报

tatata000 发表于 2016-11-3 09:37:45
同楼上,看两台Scala环境是否装好,版本是否一致。看错误,像是Scala环境问题
回复

使用道具 举报

wangzhenqiang 发表于 2016-11-4 09:27:40
w517424787 发表于 2016-11-2 22:26
2个节点的scala版本都相同没?

scala版本是相同的
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条