linux crontab 配置定时mapreduce job

配置执行job shell，shell文件：exec_mr.sh

/home/hadoop/hadoop-1.0.4/bin/hadoop jar  /home/hadoop/dedup.jar /home/hadoop/input/* /home/hadoop/output/*
复制代码

配置crontab命令，mapreduce job 每天晚上01：00执行一次，配置文件：crontab_mr。

0 1 * * * bash /home/hadoop/exec_mr.sh
复制代码

添加使用crontab命令添加执行hadoop用户job

[hadoop@hadoop ~]$ sudo crontab -u hadoop /home/hadoop/crontab_mr
复制代码

重启crontab

[hadoop@hadoop ~]$ sudo /sbin/service crond restart
复制代码