分享

Hive无法执行语句

alu1105 发表于 2016-6-1 22:08:36 [显示全部楼层] 只看大图 回帖奖励 阅读模式 关闭右栏 9 17676
只能执行select * from table 这样的语句,select A from table ;
select * from Table where id='1';
select count(*)  from table
等等都不行,在命令行和hue上执行结果如图
微信截图_20160601220705.png
微信截图_20160601220819.png
大神救命

已有(9)人评论

跳转到指定楼层
alu1105 发表于 2016-6-1 22:33:59
经查看,在yarn里面发现那些任务都是unassigned,但是集群的资源是绝对够的
回复

使用道具 举报

tntzbzc 发表于 2016-6-1 22:38:13
alu1105 发表于 2016-6-1 22:33
经查看,在yarn里面发现那些任务都是unassigned,但是集群的资源是绝对够的

select * from table不走mapreduce,带有条件的是走mapreduce的。
说明配置还有问题。
还需要提供详细信息。
还有一些路径注意权限,是否属于当前用户
回复

使用道具 举报

alu1105 发表于 2016-6-1 22:40:22
tntzbzc 发表于 2016-6-1 22:38
select * from table不走mapreduce,带有条件的是走mapreduce的。
说明配置还有问题。
还需要提供详细 ...

我用的是CDH5.0.1,这里面配置有什么可能的情况么
回复

使用道具 举报

tntzbzc 发表于 2016-6-1 22:57:24
alu1105 发表于 2016-6-1 22:40
我用的是CDH5.0.1,这里面配置有什么可能的情况么

首先看一下日志。是否有错误或则异常是否有提交的其它任务,如果没有其它任务,说明肯定会有错误的

如果没有错误和异常,就优化下调度器,在Hadoop中配置调度器

回复

使用道具 举报

alu1105 发表于 2016-6-2 10:12:33
tntzbzc 发表于 2016-6-1 22:57
首先看一下日志。是否有错误或则异常是否有提交的其它任务,如果没有其它任务,说明肯定会有错误的

如 ...

调了一下以后任务可以运行了,但是只是提交map并没有运行:
2016-06-02 10:03:58,828 INFO org.apache.hadoop.yarn.server.resourcemanager.RMAuditLogger: USER=hdfs        IP=211.71.76.73        OPERATION=Register App Master        TARGET=ApplicationMasterService        RESULT=SUCCESS        APPID=application_1464832971591_0001        APPATTEMPTID=appattempt_1464832971591_0001_0000012016-06-02 10:03:58,828 INFO org.apache.hadoop.yarn.server.resourcemanager.rmapp.attempt.RMAppAttemptImpl: appattempt_1464832971591_0001_000001 State change from LAUNCHED to RUNNING2016-06-02 10:03:58,829 INFO org.apache.hadoop.yarn.server.resourcemanager.rmapp.RMAppImpl: application_1464832971591_0001 State change from ACCEPTED to RUNNING2016-06-02 10:04:16,820 INFO org.apache.hadoop.yarn.server.webproxy.WebAppProxyServlet: dr.who is accessing unchecked http://master:46938/ which is the app master GUI of application_1464832971591_0001 owned by hdfs2016-06-02 10:04:18,332 INFO org.apache.hadoop.yarn.server.webproxy.WebAppProxyServlet: dr.who is accessing unchecked http://master:46938/static/yarn.css which is the app master GUI of application_1464832971591_0001 owned by hdfs2016-06-02 10:04:18,333 INFO org.apache.hadoop.yarn.server.webproxy.WebAppProxyServlet: dr.who is accessing unchecked http://master:46938/static/jquery/themes-1.9.1/base/jquery-ui.css which is the app master GUI of application_1464832971591_0001 owned by hdfs
回复

使用道具 举报

alu1105 发表于 2016-6-2 10:21:40
tntzbzc 发表于 2016-6-1 22:57
首先看一下日志。是否有错误或则异常是否有提交的其它任务,如果没有其它任务,说明肯定会有错误的

如 ...

调试了一下作业可以提交了,但是不进行map过程而是这样
捕获.PNG
回复

使用道具 举报

easthome001 发表于 2016-6-2 16:25:39
alu1105 发表于 2016-6-2 10:21
调试了一下作业可以提交了,但是不进行map过程而是这样

dr.who is accessing unchecked which is the app master gui of application owned by hdfs
1.是否还有其它错误
2.说是application 属于hdfs,是不是在说yarn不可以操作
回复

使用道具 举报

alu1105 发表于 2016-6-2 19:04:04
easthome001 发表于 2016-6-2 16:25
dr.who is accessing unchecked which is the app master gui of application owned by hdfs
1.是否还有 ...

最后在mapreduce的日志里查到说Failed to publish events
是不是说yarn已经接受了但是不能发布给其他节点?
回复

使用道具 举报

xw2016 发表于 2016-6-2 19:51:06
mapreduce有问题,看下resousemanager启动了没有
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条