分享

Storm0.8.1的(mapreduce) Spout/Blot编程实例实例详解

hyj 发表于 2014-6-11 15:04:22 [显示全部楼层] 只看大图 回帖奖励 阅读模式 关闭右栏 11 79426
提示: 作者被禁止或删除 内容自动屏蔽

已有(11)人评论

跳转到指定楼层
junzi234 发表于 2014-6-11 16:01:03
好文档,收下了。
回复

使用道具 举报

hahaxixi 发表于 2014-11-12 16:34:08
非常好的文档,先收下,稍后在看!!
回复

使用道具 举报

尘世随缘 发表于 2015-3-28 21:33:48
正在学习storm,看了这个非常有收货。但是我不理解的是,你写了3个bolt,我感觉1个bolt也能实现此类的需求,为什么要3个呢?希望能答复。
回复

使用道具 举报

nettman 发表于 2015-3-28 21:48:05
提示: 作者被禁止或删除 内容自动屏蔽
回复

使用道具 举报

尘世随缘 发表于 2015-3-28 22:03:34
谢谢提醒,后面看了些介绍现在明白了。其实在一个bolt里面实现是没有问题的,但是就体现不出分布式的优势了,单节点处理效率有限(如CPU,内存都是有限的),多个bolt可以将这些硬件资源共享,以并行处理来提升整体处理性能。
回复

使用道具 举报

ainubis 发表于 2015-3-29 16:22:31
谢谢楼主分享。   
回复

使用道具 举报

fisherhe 发表于 2015-6-26 09:15:15
hadoop2client的代码能分享下吗
回复

使用道具 举报

hapjin 发表于 2015-7-30 13:04:43
请问下楼主,关于依赖jar包的问题:
------------------------------------------
例如上述相关的就有自己实现的HDFSClient、HTableClient以及他们相关的Hadoop、Hbase依赖包都打包到同一个stormdemo-1.0-SNAPSHOT-jar-with-dependencies.jar文件中。
-------------------------------------------
这个包含了Hadoop、HBase依赖包的 stormdemo-1.0-SNAPSHOT-jar-with-dependencies.jar 文件里面的内容全部都是编译好的 .class 文件?还是 既有 .class 文件(Spout、Bolt 编译得到),也有 .jar 文件( Hadoop依赖的 .jar)?


回复

使用道具 举报

hapjin 发表于 2015-7-30 13:06:21
可以把 Hadoop依赖.jar(Hadoop、HBase的依赖包) 文件直接放到 storm 安装目录下的 /lib 目录下吧???
回复

使用道具 举报

12下一页
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条