分享

hbase 如何查询某个字段在一段时间内重复只显示一次的所有内容

邓立辉 发表于 2016-4-26 10:18:59 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 3 10613
各位大神求助,如何解决这个问题,最近做的一个功能数据量太大,导致查询速度很慢,只返回一个字段,里面有很多内容是重复的我只需要每样一条,听别人说hbase有这种查询方式,但是我自己找了好久也没有找到,所以请教大家有没有知道的,万分感谢!

已有(3)人评论

跳转到指定楼层
hyj 发表于 2016-4-26 13:04:03
hbase只适合rowkey,也只有rowkey快。其它的不太适合。当然另外方法就是hbase,hive整合。hive适合这些计算。
回复

使用道具 举报

hyj 发表于 2016-4-26 13:06:58
回复

使用道具 举报

邓立辉 发表于 2016-4-26 14:31:44
hyj 发表于 2016-4-26 13:04
hbase只适合rowkey,也只有rowkey快。其它的不太适合。当然另外方法就是hbase,hive整合。hive适合这些计算。

我这个就是用rowkey查询的,但是查询结果数据量太大,导致遍历很耗时,所以我想要减少查询结果的数据量来减少遍历时间。但是我这个需要速度,我看人家说hive延迟比较高,我的功能要求要达到秒级,好像不太合适。
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条