分享

spark提交程序出错

UFO 发表于 2016-3-11 22:52:41 [显示全部楼层] 只看大图 回帖奖励 阅读模式 关闭右栏 1 7370
将程序提交到spark集群 总是出现这样的错误,请问是怎么回事
Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.ArrowAssoc(Ljava/lang/Object;)Ljava/lang/Object;
        at com.ufo.counter.VisualizationCount$.createContext(VisualizationCount.scala:41)
        at com.ufo.counter.VisualizationCount$$anonfun$3.apply(VisualizationCount.scala:85)
        at com.ufo.counter.VisualizationCount$$anonfun$3.apply(VisualizationCount.scala:84)
        at scala.Option.getOrElse(Option.scala:120)
        at org.apache.spark.streaming.StreamingContext$.getOrCreate(StreamingContext.scala:837)
        at com.ufo.counter.VisualizationCount$.main(VisualizationCount.scala:83)
        at com.ufo.counter.VisualizationCount.main(VisualizationCount.scala)
        at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
        at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
        at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
        at java.lang.reflect.Method.invoke(Method.java:606)
        at org.apache.spark.deploy.SparkSubmit$.org$apache$spark$deploy$SparkSubmit$$runMain(SparkSubmit.scala:672)
        at org.apache.spark.deploy.SparkSubmit$.doRunMain$1(SparkSubmit.scala:180)
        at org.apache.spark.deploy.SparkSubmit$.submit(SparkSubmit.scala:205)
        at org.apache.spark.deploy.SparkSubmit$.main(SparkSubmit.scala:120)
        at org.apache.spark.deploy.SparkSubmit.main(SparkSubmit.scala)



L(V(8(]KN@]0R)5%P6ZXO.png



已有(1)人评论

跳转到指定楼层
easthome001 发表于 2016-3-12 10:23:50
楼主先检测下版本是否有问题,比如版本不一致
然后是否使用了其它程序,版本是否兼容
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条