分享

Hadoop之回收站

本帖最后由 旧收音机 于 2015-3-16 21:18 编辑

一、回收站简介:
    在HDFS里,删除文件时,不会真正的删除,其实是放入回收站/trash,回收站里的文件可以快速恢复。
    可以设置一个时间阀值,当回收站里文件的存放时间超过这个阀值或是回收站被清空时,文件才会被彻底删除,并且释放占用的数据块。
二、实例:
    Hadoop的回收站trash功能默认是关闭的,所以需要在core-site.xml中手动开启。
1、修改core-site.xml,增加:
  1. <property>
  2. <name>fs.trash.interval</name>
  3. <value>1440</value>
  4. <description>Number of minutes between trash checkpoints.
  5. If zero, the trash feature is disabled.
  6. </description>
  7. </property>
复制代码
默认是0,单位是分钟,这里设置为1天。
删除数据rm后,会将数据move到当前文件夹下的.Trash目录。
2、测试
1)、新建目录input
  1. hadoop/bin/hadoop fs -mkdir input
复制代码
2)、上传文件
  1. root@master:/data/soft# hadoop/bin/hadoop fs -copyFromLocal /data/soft/file0* input
复制代码
3)、删除目录input
  1. [root@master data]# hadoop fs -rmr input
  2. Moved to trash: hdfs://master:9000/user/root/input
复制代码
4)、查看当前目录
  1. [root@master data]# hadoop fs -ls
  2. Found 2 items
  3. drwxr-xr-x - root supergroup 0 2011-02-12 22:17 /user/root/.Trash
复制代码
发现input删除了,多了一个目录.Trash
5)、恢复刚刚删除的目录
  1. [root@master data]# hadoop fs -mv /user/root/.Trash/Current/user/root/input /user/root/input
复制代码
6)、查看恢复的数据
  1. [root@master data]# hadoop fs -ls input
  2. Found 2 items
  3. -rw-r--r-- 3 root supergroup 22 2011-02-12 17:40 /user/root/input/file01
  4. -rw-r--r-- 3 root supergroup 28 2011-02-12 17:40 /user/root/input/file02
复制代码
7)、删除.Trash目录(清理垃圾)1
  1. [root@master data]# hadoop fs -rmr .Trash
  2. Deleted hdfs://master:9000/user/root/.Trash
复制代码


已有(2)人评论

跳转到指定楼层
zhujun182104906 发表于 2015-3-16 17:36:14
挺好的小知识点
回复

使用道具 举报

落魂草 发表于 2015-3-16 19:52:58
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条