分享

browse the fielsystem 后 出现的 data ,system,user三个目录的作用

skaterxu 发表于 2013-10-25 10:46:05 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 4 7005
browse the fielsystem 后 出现的 data ,system,user三个目录的作用是什么。其中存放的数据是什么呢吗?

已有(4)人评论

跳转到指定楼层
datong838 发表于 2013-10-25 10:46:05
进去看看就知道了。
/data:一般对应一个节点的/data目录下的本地文件,但好像只显示logs及hadoop/tmp文件;
/system:我这里是空的;
/user:第一层对应不同的user目录,第二层是各个user下对应的HDFS文件系统
回复

使用道具 举报

xukunddp 发表于 2013-10-25 10:46:05
dfs.data.dir: ${hadoop.tmp.dir}/dfs/data
Determines where on the local filesystem an DFS data node should store its blocks.  If this is a comma-delimited list of directories, then data will be stored in all named directories, typically on different devices. Directories that do not exist are ignored.
hadoop.tmp.dir: /tmp/hadoop-${user.name}
A base for other temporary directories.
mapred.system.dir: ${hadoop.tmp.dir}/mapred/local
The shared directory where MapReduce stores control files.
mapred.local.dir: ${hadoop.tmp.dir}/mapred/system
The local directory where MapReduce stores intermediate data files.  May be a comma-separated list of directories on different devices in order to spread disk i/o. Directories that do not exist are ignored.
回复

使用道具 举报

langke93 发表于 2013-10-25 10:46:05
回复 2# 若冰
   /user目录下的数据 和 /data下的数据 有什么样的联系吗吗?
回复

使用道具 举报

atsky123 发表于 2013-10-25 10:46:05
回复 3# eyjian
hadoop-site.xml中
  dfs.data.dir: ${hadoop.tmp.dir}/dfs/data
hive-site.xml中
  hive.metastore.warehouse.dir
  /user/hive/warehouse
  location of default database for the warehouse
那么 /data/下的数据 和 /user/hive/warehouse下数据有何关系吗?
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条