yaojiank 发表于 2013-10-25 10:42:10

求助关于HDFS

本人刚接触hadoop,前一阵子,hadoop启动有,于是就把一些配置文件删了,重新格式化,hadoop是启动起来了但hdfs中的文件找不到了,现在貌似那些文件还占着hdfs的空间,我想把这些文件恢复了或者删了。我应该怎么做啊吗?吗?吗?
再弱弱的问一句,存在hdfs中的文件,那些文件块存在集群中哪个文件夹里啊吗?吗?吗?

arsenduan 发表于 2013-10-25 10:42:10

额,一些配置文件删了吗?什么文件啊吗?
存放到hdfs中数据文件你是直接在硬盘找不到的,文件被分块了。
进入hadoop目录,输入bin/hadoop dfs -ls / 可以看到hdfs里的文件。
我们可以直接从硬盘看到的是在hadoop的文件存放位置(配置文件里配置),.../hdfs/datanode/current里面有很多blk_文件(meta不是),这些就是文件被分成块后我们能看到的东东~~~
若有理解错误的请大神指点~~~

qcbb001 发表于 2013-10-25 10:42:10

NameNode节点存储元数据的路径配置项为:dfs.name.dir和dfs.name.edits.dir,而默认的存储路径是/tmp/hadoop/dfs/name
DataNode节点存储数据块及其校验数据的路劲配置项为:dfs.data.dir

llike90 发表于 2013-10-25 10:42:10

都格式化了,哪里能恢复数据啊。
页: [1]
查看完整版本: 求助关于HDFS