使用Flume将MySQL表数据实时抽取到hadoop

查看数: 22848 | 评论数: 6 | 收藏 4

关灯 | 提示：支持键盘翻页<-左右->

发布时间: 2017-6-26 19:02

本帖最后由 desehawk 于 2017-6-26 19:03 编辑问题导读 1.为什么要用到Flume? 2.如何实现使用Flume将MySQL表数据实时抽取到hadoop？ 3.方案有什么优点和缺点？一、为什么要用到Flume&n ...

liuyou2036 发表于 2020-7-16 14:34:21

收藏了

zhouyongheng 发表于 2020-5-26 13:24:00

我说我是来赚积分的。

superfish 发表于 2019-2-27 21:24:20

版主，我使用时碰到一个很无语的问题，就是抽取过来的时间字段的值会变动，mysql中的时间是当前时间，抽取到hdfs上时，时间变成了当前时间加14个小时，请教一下，是什么原因？我猜想可能是时区的设置问题，我找了flume的配置文件，里面都没有提到这个，两台服务器的时间是一致的

zj220223 发表于 2017-6-27 15:54:10

agent.sources.sql-source.type = org.keedio.flume.source.SQLSource 版主我运行报了这个错误说找不到这个类我对应得jar包也放到里面去了这个怎么解决？

美丽天空 发表于 2017-6-27 10:01:50

感谢分享

zxmit 发表于 2017-6-26 22:24:27

学习学习，最近一直没有接触什么新东西，感觉锈豆了

图文精华