HDFS HA和Federation安装部署方法

1. HDFS 2.0 基本概念.........................................................................................................2
2. HDFS HA 配置部署.........................................................................................................2
      2.1    HDFS HA 架构.....................................................................................................2
      2.2    硬件选择及软件准备...........................................................................................3
      2.3    修改配置文件.......................................................................................................3
      2.4    启动服务...............................................................................................................7
      2.5    配置自动切换模式...............................................................................................8
3. HDFS Federation 配置部署...........................................................................................10
4. HDFS 1.0 升级到2.0 ..................................................................................................... 11
5. 升级过程中遇到问题..................................................................................................... 11

HDFS HA和Federation安装部署方法 v0.1.pdf (710.78 KB, 下载次数: 135)

skypeng · 发表于 2014-3-17 11:56:46

谢谢，学习学习~~~~

benson_liu · 发表于 2014-12-31 14:50:56

群主，有一个问题想向你请教一下：
/data/hadoop/current/sbin/hadoop-daemon.sh start datanode
为什么不是根据slaves 文件里面的要求启动 datanode 呢？

这个我是在配置hadoop-2.4.0 HA Federation 过程中碰到的问题

我目前只能在每一个datanode 服务器上启动才能启动成功

benson_liu · 发表于 2014-12-31 14:53:14

你有hadoop 2 的配置文件吗？我总感觉我配置哪里有点问题，但是找不出来
FATAL org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for block pool Block pool <registering> (Datanode Uuid unassigned)
java.io.IOException: Cluster IDs not matched: dn cid=c1 but ns cid=c2; bpid=BP-2135858189-192.168.3.118-1420007245898

这些提示我搜索过，但是好像没什么关系似的。