分享

hadoop提交job卡住不动

jlon 发表于 2015-10-23 10:23:48 [显示全部楼层] 只看大图 回帖奖励 阅读模式 关闭右栏 16 32329
我重启了一下集群,现在往集群上体检job,能提交成功但是运行没有反应。任务的状态都是UNDEFINED。hive执行也是同样的现象。请问有人知道是什么情况吗?帮我分析下,我应该去哪里找问题。

_8]2`VH5)SQ`T~)T9G_1.png

已有(16)人评论

跳转到指定楼层
jlon 发表于 2015-10-23 10:49:34

RE: hadoop提交job卡住不动

这个是异常
45_BJX)L_6)_O%X1E}0KE{1.png
45_BJX)L_6)_O%X1E}0KE{1.png
回复

使用道具 举报

muyannian 发表于 2015-10-23 11:04:18

检查下面内容:端口的配置,特别是关于resource manager
第二看下 内存、jvm的配置
第三看看磁盘是否满了



回复

使用道具 举报

jlon 发表于 2015-10-23 11:08:04
muyannian 发表于 2015-10-23 11:04
检查下面内容:端口的配置,特别是关于resource manager
第二看下 内存、jvm的配置
第三看看磁盘是否满 ...

帮我看看,这是我的50070页面显示的结果,你看看有没有问题!
]%LKBZ[[J$M6P]]0B)TP.png


回复

使用道具 举报

arsenduan 发表于 2015-10-23 11:16:58
jlon 发表于 2015-10-23 11:08
帮我看看,这是我的50070页面显示的结果,你看看有没有问题!

你这是伪分布吧,磁盘空间不算太多,其它的配置看不出来。

先检测下各个进程是否正常,特别是yarn的进程。

推荐文章:
hadoop【2.7.1】【多节点】集群配置【必知配置知识2】
http://www.aboutyun.com/thread-15650-1-1.html


hadoop【2.7.1】【多节点】集群配置【必知配置知识1】
http://www.aboutyun.com/thread-15609-1-1.html

回复

使用道具 举报

levycui 发表于 2015-10-23 11:54:28
看看hdfs 现在状态 是否可以读写,尤其是写入
回复

使用道具 举报

jlon 发表于 2015-10-23 11:55:44
levycui 发表于 2015-10-23 11:54
看看hdfs 现在状态 是否可以读写,尤其是写入

怎么看??
回复

使用道具 举报

levycui 发表于 2015-10-23 12:45:09

hdfs dfs -touchz /tmp/123.txt

回复

使用道具 举报

Joker 发表于 2015-10-23 13:44:23
yarn是不是被你重启过?反正异常是没找到你的app_id!
回复

使用道具 举报

Joker 发表于 2015-10-23 13:45:17
又或者是yarn挂掉了,你不知道而已。你需要看下8088是否可以访问
回复

使用道具 举报

12下一页
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条