分享

关于hadoop-0.21.0 backup node的相关问题

shihailong123 发表于 2013-10-25 10:42:35 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 3 5230
根据老板的要求,将原先部署的hadoop-0.20.2的集群,升级到hadoop-0.21.0。(集群:1个Namenode;1个backup node;5个datanode。主要是想测试HA,都说0.21版本的backup node和checkpoint node功能比老版本的secondary namenode的性能更加优越,高效。backup node我是单独部署在一台服务器上,对于backup node的配置,在网上找了很多资料,鲜有比较清晰并测试正常的以供参考。hdfs-site.xml的配置见附件。配好后,在Namenode启动集群,执行hadoop namenode -back/checkpoint,backup node上并没有将namenode的数据同步过来。而且在namenode上会报错。
hdfs-site.xml配置:
  
     dfs.name.dir
     /usr/local/hadoop/hdfs/name
  
  
     dfs.data.dir
     /usr/local/hadoop/hdfs/data
  
  
     dfs.replication
     3
  
  
     dfs.checkpoint.dir
     /usr/local/hadoop/hadoop-0.21.0/namesecondary
  
  
  
     dfs.backup.address
     202.173.253.**:50100
  
  
     dfs.backup.http.address
     202.173.253.**:50105
  
  
      dfs.http.address
      202.173.253.**:50070
  
  
     fs.checkpoint.period
     1
  
  
     fs.checkpoint.size
     67108864
  
  
      dfs.http.address
      hdfs://202.173.253.**:50070
  

已有(3)人评论

跳转到指定楼层
goldtimes 发表于 2013-10-25 10:42:35
BN上面没有数据,因为它在从NN拿数据的时候出错了
它通过http://nn.xxxx.cn:50070/getimage?getimage=1 向NN拿数据,NN有个servlet会找到这个文件(即Image文件)返回数据。
你看看是不是“nn.xxxx.cn:5007”这个地址有,改成IP试试吗?
回复

使用道具 举报

starrycheng 发表于 2013-10-25 10:42:35
楼主,我在配置hadoop-1.0.3 配置backup node ,但是启动backup node : hadoop namenode - backup , 但是namenode 没有参数。 不知hadoop-1.0.3版backup的是如何配置的吗?
回复

使用道具 举报

RnD_Alex 发表于 2013-10-25 10:42:35
回复 3# dongj
   1.0.3没有backup这个机制
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条