yunge2016 发表于 2017-6-4 19:22:01

flume如何采集本地数据到kafka中? 遇到问题了

现在配置好了集群环境,zookeeper和kafka也启动了。具体的流程不太清楚。监控的是本地的目录。目录下上传了一个txt文件。然后怎么采集呢。

starrycheng 发表于 2017-6-4 19:59:42

flume里面需要配置kafka的相关信息。其实也是整合。步骤:
1.先安装flume
2.然后配置flume,里面配置kafka sink。
3.然后kafka创建topic。
4.启动flume
5.创建kafka消费者。
这样就达到了目的

推荐参考:

about云日志分析项目准备9:Flume安装和使用
http://www.aboutyun.com/forum.php?mod=viewthread&tid=20699




yunge2016 发表于 2017-6-4 20:09:48

我也是按照这个流程做的。现在启动消费者就报错。

langke93 发表于 2017-6-4 21:18:53

yunge2016 发表于 2017-6-4 20:09
我也是按照这个流程做的。现在启动消费者就报错。

读取汉字可能会出错,可以尝试英文
页: [1]
查看完整版本: flume如何采集本地数据到kafka中? 遇到问题了