分享

运行MR的时候 map运行到100%, reduce 67%卡主之后不再运行

蒲公英_gJM1Z 发表于 2015-3-31 22:23:20 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 5 58742
运行MR的时候 map运行到100%, reduce 67%卡主之后不再运行,查看运行的过程发现,出现了maptask: finished  spill 7,这该如何解决?

已有(5)人评论

跳转到指定楼层
fly2015 发表于 2015-3-31 23:58:39
如果没有其他明显错误,很可能是数据倾斜
回复

使用道具 举报

渔渚上 发表于 2015-7-30 16:25:44
楼主,你的问题解决了吗?我也是在reduce67%的时候卡住了,如果解决了,能分享一下解决方案吗?
回复

使用道具 举报

anday 发表于 2015-11-25 10:51:32
渔渚上 发表于 2015-7-30 16:25
楼主,你的问题解决了吗?我也是在reduce67%的时候卡住了,如果解决了,能分享一下解决方案吗?

我的也是卡在67不动了
回复

使用道具 举报

Imagination 发表于 2016-5-2 09:25:05
怎么解决的?
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条