分享

自己写的mapreduce还没有hive运行的快,请问这是为什么

hyj 发表于 2014-5-8 12:56:49 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 1 5940
本帖最后由 pig2 于 2014-5-8 12:58 编辑
我运行了hive和hadoop的mapreduce处理同一个数据集,统计出某 count(*),在处理过程中,我发现,hive用的时间别hadoop的mapreduce时间要短.我已经优化了,2G数据。
请问这怎么解释呢?


已有(1)人评论

跳转到指定楼层
pig2 发表于 2014-5-8 12:58:38
1、数据量小 误差大
2、本身写的还没有hive高效。
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条