让你快速认识flume及安装和使用flume1.5传输数据(日志)到hadoop2.2

我自己搭建了一下，有点问题想请教，谢谢。详情请移步我的日志http://www.aboutyun.com/blog-13274-1798.html

精华学习资料，值得收藏

问题导读：
1.什么是flume？
2.如何安装flume？
3.flume的配置文件与其它软件有什么不同？

安装flume 1.5失败      ./bin/flume-ng version  显示失败   信息表明为 ./flume-ng脚本有问题  为什么会这样？？请教

信息显示为这个

楼主你好，我想问下，爬虫一般都是用什么来写的啊？？？python？scala，或者用java来写方不方便啊，楼主可不可以给我们的社区加上一个爬虫的版块啊，感觉现在好多公司都需要用到爬虫来爬数据，可是我又不太怎么会写爬虫

386213066wc 发表于 2015-9-22 09:00
楼主你好，我想问下，爬虫一般都是用什么来写的啊？？？python？scala，或者用java来写方不方便啊，楼主可 ...

爬虫是这个板块
http://www.aboutyun.com/forum-174-1.html

Python 定向爬虫入门1:基本的正则表达式
http://www.aboutyun.com/thread-15783-1-1.html


Python 定向爬虫入门2:Python 单线程爬虫
http://www.aboutyun.com/thread-15784-1-1.html



Python 定向爬虫入门3:XPath 与多线程爬虫
http://www.aboutyun.com/thread-15785-1-1.html

求帮助啊 按照楼主做得 在监控目录中创建的文件test1，但是一上传 那边就显示这个：2015-11-19 15:58:30,439 (pool-4-thread-1) [INFO - org.apache.flume.source.SpoolDirectorySource$SpoolDirectoryRunnable.run(SpoolDirectorySource.java:254)] Spooling Directory Source runner has shutdown.
2015-11-19 15:58:30,940 (pool-4-thread-1) [INFO - org.apache.flume.source.SpoolDirectorySource$SpoolDirectoryRunnable.run(SpoolDirectorySource.java:254)] Spooling Directory Source runner has shutdown.
然后hdfs 上也找不到文件

一步成功，虽说不明白具体意思，但是结果是有的