About云-梭伦科技»专题 › 交流区 › 技术交流 › Spark › spark-shell报错Please check the values of 'yarn.sche ...

spark-shell报错Please check the values of 'yarn.scheduler.maximum-allocation-mb'

查看数: 23634 | 评论数: 1 | 收藏 0

关灯 | 提示：支持键盘翻页<-左右->

帖子模式

pandatyut

发布时间: 2016-6-2 21:13

正文摘要:

如图所示，根据CDH官方的介绍，运行spark-shell报错16/06/02 21:01:27 ERROR spark.SparkContext: Error initializing SparkContext.java.lang.IllegalArgumentException: Required executor memory (1024+384 MB) i ...

einhep 发表于 2016-6-3 13:57:16

内存有点小，把这个配置大一些
'yarn.scheduler.maximum-allocation-mb' and/or 'yarn.nodemanager.resource.memory-mb'.

新手帮助: 新手帮助：注册遇到问题，领取资源，加入铁粉群，不会使用搜索，如何获取积分等

查看 »

图文精华

spark-shell报错Please check the values of 'yarn.scheduler.maximum-allocation-mb'

正文摘要:

回复

推荐 /2