分享

hive1.2.1 启动缓慢问题

lllucylll 发表于 2016-1-6 10:20:08 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 1 7449
用hive1.2.1搭建了2个环境,一个是hive+hadoop单机环境,另一个是hive+hadoop集群环境。
但是进入hive cli单机需要几秒而集群环境确需要十几分钟;
同样的,在进行SQL操作的时候,只要涉及到job的命令,集群环境消耗的时间都是单机环境的几十倍甚至百倍。
比如删除表的命令,下面是集群环境消耗的时间,而单机环境执行完该命令只花了5s。
hive> drop table t;
OK
Time taken: 775.381 seconds


初学hive阶段,希望能得到帮助O(∩_∩)O~

已有(1)人评论

跳转到指定楼层
atsky123 发表于 2016-1-7 14:30:59
本地很快是自然的。
最好对hive进行优化,这样会更快一些。

Hive distinct 和join on查询语句如何优化
http://www.aboutyun.com/thread-15209-1-1.html




深入浅出数据仓库中SQL性能优化之Hive篇
http://www.aboutyun.com/thread-11349-1-1.html


Hive 查询优化总结
http://www.aboutyun.com/thread-12363-1-1.html


hive优化以及执行原理
http://www.aboutyun.com/thread-13419-1-1.html



Hive中小表与大表关联(join)的性能分析
http://www.aboutyun.com/thread-7816-1-1.html


Hive数据倾斜(大表join大表)【优化】
http://www.aboutyun.com/thread-13077-1-1.html

回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条