ggggying12
发表于 2017-3-28 20:03:39
单节点的安装好了。多谢群主啊
ggggying12
发表于 2017-3-28 20:04:51
开始安装flume多节点的
ggggying12
发表于 2017-3-28 20:43:23
多节点安装成功,太感谢群主了
ggggying12
发表于 2017-3-28 20:44:33
准备安装flume 和hdfs集成的。。。希望群主保佑
ggggying12
发表于 2017-3-28 21:11:14
成功了,多谢群主,今天 flume安装完成了
墨小黑
发表于 2017-5-3 22:41:55
我用的spoolSources、fileChannels、hdfsinks的agent来传输文件,但是在hdfs里面得到的文件所有文件名都带有.138948494593这样的时间戳的后缀。请问怎么去掉后缀的时间戳啊???
killsmagier
发表于 2017-6-2 11:54:48
我如果想重新启动flume或者停止flume我应该怎么办啊
einhep
发表于 2017-6-2 12:50:56
killsmagier 发表于 2017-6-2 11:54
我如果想重新启动flume或者停止flume我应该怎么办啊
好像没有这方面的命令
可以通过Linux命令kill,然后启动
sunbrillant
发表于 2017-8-28 17:39:26
正好要配flume,收藏起来
天上有et
发表于 2017-9-5 22:23:47
新人求教,没权限发帖,请见谅啊~~
我使用flume1.7,想实现将kafka中的数据传输到hdfs中,分别采用kafka source,file channal和hdfs sink。现在kafka中要求采用avro的文件格式,hdfs中要求为parquet文件格式。
我查阅了官方文档,有几点不明白:
1.我使用flume直接将avro格式的数据获取进来,应该不用再做特殊处理吧?
2.flume1.7中的hdfs文件格式支持 SequenceFile, DataStream 或 CompressedStream,我应该选择哪一种?需要二次开发转化成parquet格式吗?
谢谢啊!!