基于Flume的美团日志收集系统(二)改进和优化

提示: 作者被禁止或删除内容自动屏蔽

wzs379349094 · 发表于 2015-4-21 09:22:46

flume 学习研究中，O(∩_∩)O谢谢

quenlang · 发表于 2014-9-30 13:35:26

好贴技术贴，顶一下，感谢楼主的辛苦分享

chuyuan_zhou · 发表于 2014-12-1 15:21:54

Flume（日志收集工具）使用很广，支持一把！

想ai抽 · 发表于 2015-5-5 15:04:44

如果对于时间序列的数据，DualChannel不知道有么有相应处理

xurfera · 发表于 2015-5-12 15:20:12

好贴！！谢谢分享。

gudeyang · 发表于 2015-5-12 17:50:41

楼主，我在linux搭建flume+kafka+strom，都弄好了，现在有个问题，apache怎么已数据流的形式把日志给flume呢，我的配置是这样的
a1.sources.r1.type = exec
a1.sources.r1.bind = localhost
a1.sources.r1.port = 44444
a1.sources.r1.command = tail -F /etc/httpd/log/access_log
但是这样不太好，apache已经把日志写到日志了，产生了IO，能不能让apache直接把日志已数据流的形式直接给flume呢，求教，希望能回复一下，谢谢

Murphy · 发表于 2015-6-5 14:03:09

memorychannel中capacity是不是设置的越大越好呢？

小伙425 · 发表于 2015-9-25 15:58:14

yxynyss · 发表于 2015-11-2 15:17:58

美团的kafka好像很厉害

图文精华

基于Flume的美团日志收集系统(二)改进和优化

本帖被以下淘专辑推荐:

已有(17)人评论

推荐 /2