Riordon 发表于 2014-9-26 08:38:16

HDFS与一般文件系统的区别

本地文件系统和HDFS有何区别呢？本地文件系统是构架在本地磁盘上，那HDFS是构架在什么上呢，是特定主机上还是网络上呢？如本地上传文件到HDFS，文件到底存储在哪呢？

pig2 发表于 2014-9-26 12:19:25

HDFS是存储在磁盘上，看到下面配置即可，如果不认识下面配置，你可以自己搭建个集群，看看配置项说明。就会明白了。

core-site.xml
hdfs:配置的临时目录
<property>
               <name>hadoop.tmp.dir</name>
               <value>file:/home/aboutyun/tmp</value>
               <description>Abase for other temporary   directories.</description>
       </property>




hdfs-site.xml
hdfs目录：
<property>
            <name>dfs.datanode.data.dir</name>
            <value>file:/home/aboutyun/dfs/data</value>
       </property>



详细参考：

Hadoop1.x安装配置文件及参数说明



hadoop2.2完全分布式最新高可靠安装文档

pig2 发表于 2014-9-26 12:24:06

hdfs是架构在磁盘上，但是它是分布式分为master和slave，上传的话，使用hadoopshell，比如：
hadoop fs -put localfile /user/hadoop/hadoopfile

更多参考：
Hadoop Shell命令字典（可收藏）


刚开始建议参考下面三篇文章：

零基础学习hadoop到上手工作线路指导（初级篇）

零基础学习hadoop到上手工作线路指导（中级篇）

零基础学习hadoop到上手工作线路指导（编程篇）


Riordon 发表于 2014-9-26 12:51:56

推荐的文章也很受用，真心感谢...

sstutu 发表于 2014-9-27 01:24:12

下面内容也很经典，可以了解一下。


页: [1]
查看完整版本: HDFS与一般文件系统的区别