分享

关于storm吞吐量


storm  每秒消费kafka的数据 大概极限是多少条?


已有(1)人评论

跳转到指定楼层
Alkaloid0515 发表于 2015-6-30 15:08:01
10毫秒内消费了3百W
64G  4核24线程 一台  。

我有两台,kafka storm 还有zookeeper
全部装在里面

QQ图片20150630150052.png

断崖下降


1亿条数据,集群运行一段时间垮了。


因为我们写了一些非常牛逼的算法在里面

生成的数据太多

一亿条数据,里面有10w个用户对1w个商品的行为做推荐。


整理自qq群分享给大家

回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条