分享

flume如何采集本地数据到kafka中? 遇到问题了

现在配置好了集群环境,zookeeper和kafka也启动了。具体的流程不太清楚。监控的是本地的目录。目录下上传了一个txt文件。然后怎么采集呢。

已有(3)人评论

跳转到指定楼层
starrycheng 发表于 2017-6-4 19:59:42
flume里面需要配置kafka的相关信息。其实也是整合。步骤:
1.先安装flume
2.然后配置flume,里面配置kafka sink。
3.然后kafka创建topic。
4.启动flume
5.创建kafka消费者。
这样就达到了目的

推荐参考:

about云日志分析项目准备9:Flume安装和使用
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20699




回复

使用道具 举报

yunge2016 发表于 2017-6-4 20:09:48
我也是按照这个流程做的。现在启动消费者就报错。
flume_error.png
回复

使用道具 举报

langke93 发表于 2017-6-4 21:18:53
yunge2016 发表于 2017-6-4 20:09
我也是按照这个流程做的。现在启动消费者就报错。

读取汉字可能会出错,可以尝试英文
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条