About云»专题 › 交流区 › 技术交流 › Spark › spark-shell yarn-client 出错java.io.FileNotFoundExce ...

spark-shell yarn-client 出错java.io.FileNotFoundException，求救

查看数: 26992 | 评论数: 2 | 收藏 0

关灯 | 提示：支持键盘翻页<-左右->

帖子模式

lielies

发布时间: 2015-9-6 23:49

正文摘要:

CDH5.4.5 [root@cdh122 conf.cloudera.spark_on_yarn]# spark-shell --master yarn-client SLF4J: Class path contains multiple SLF4J bindings. SLF4J: Found binding in [jar:file:/opt/cloudera/parcel ...

leo_1989 发表于 2015-9-7 15:26:28

下面楼主是怎么配置的
配置spark-defaults.conf 中jobhistory中的配置
spark.eventLog.dir=hdfs:///user/spark/applicationHistory

点评

lielies

你的回复，经过尝试。是可行的。 spark.eventLog.dir=hdfs:///user/spark/applicationHistory 我这的配置默认是spark.eventLog.dir=/user/spark/applicationHistory；按你说的问题就解决了。发表于 2015-9-8 08:45

图文精华

spark-shell yarn-client 出错java.io.FileNotFoundException，求救

正文摘要:

回复

点评

推荐 /2