分享

hadoop中出现Java heap space

Janle 发表于 2016-5-20 13:49:22 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 5 11579
16/05/19 21:46:15 INFO mapreduce.Job:  map 0% reduce 0%
16/05/19 21:46:23 INFO mapreduce.Job: Task Id : attempt_1463665505632_0001_m_000000_0, Status : FAILED
Error: Java heap space
16/05/19 21:46:30 INFO mapreduce.Job: Task Id : attempt_1463665505632_0001_m_000000_1, Status : FAILED
Error: Java heap space
16/05/19 21:46:38 INFO mapreduce.Job: Task Id : attempt_1463665505632_0001_m_000000_2, Status : FAILED
Error: Java heap space
16/05/19 21:46:46 INFO mapreduce.Job:  map 100% reduce 100%
16/05/19 21:46:47 INFO mapreduce.Job: Job job_1463665505632_0001 failed with state FAILED due to: Task failed task_1463665505632_0001_m_000000
Job failed as tasks failed. failedMaps:1 failedReduces:0

已经设置了mapred.child.java.opts:为-Xxm1024但是换是Java heap space

已有(5)人评论

跳转到指定楼层
NEOGX 发表于 2016-5-20 16:23:30
mapreduce.map.memory.mb 这个参数如何配置的

更多相关内容:
mapred.map.child.java.opts和mapreduce.map.memory.mb有什么区别?
http://www.aboutyun.com/forum.php?mod=viewthread&tid=9981


hadoop有关内存控制的环境变量具体含义
http://www.aboutyun.com/forum.php?mod=viewthread&tid=16030






回复

使用道具 举报

langke93 发表于 2016-5-20 16:24:38
eclipse开发环境,还是集群环境
回复

使用道具 举报

Janle 发表于 2016-5-20 16:36:55
langke93 发表于 2016-5-20 16:24
eclipse开发环境,还是集群环境

集群环境
回复

使用道具 举报

Janle 发表于 2016-5-20 16:39:24
NEOGX 发表于 2016-5-20 16:23
mapreduce.map.memory.mb 这个参数如何配置的

更多相关内容:

<property>
<name>mapreduce.map.memory.mb</name>
<value>1024</value>

</property>

回复

使用道具 举报

nextuser 发表于 2016-5-22 15:18:06
还是看看日志,这些看不出什么问题。可以自己在代码里输出一些信息,或者自己调试下

回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条