分享

如何实现SpoolSource对单一文件内容增长的实时监控?

hongqianli588 发表于 2015-5-29 11:31:16 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 2 23473
目前的 spoolSource 只能支持对文件个数的增长的监控,不能做到实时监控,就算按照分钟滚动文件也是最多准实时,使用exc Tail 又容易丢失数据,


请教如何实现对单一文件的实时增长的监控,又能保证数据的完整?我如果要实现这个功能是因为修改SpoolSource的源码还是自定义一个customer Source ,
哪一种比较好?

已有(2)人评论

跳转到指定楼层
bob007 发表于 2015-5-29 12:06:19
没有完美的,方式还是比较多的。
如果能力允许,自己能写一个更好
当然业务不复杂,还可以自己写shell。

回复

使用道具 举报

bob007 发表于 2015-5-29 12:09:59


这里有插件开发,楼主可以参考
flume 插件开发介绍
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条