搜索
搜 索
本版
文章
帖子
用户
图文精华
hadoop-2.6.0+zookeeper-3.4.6+hbase-1.0.0+hive-1.1.0完全分布 ...
首页
Portal
专题
BBS
面试
更多
登录
注册
用户组:游客
主题
帖子
云币
我的帖子
我的收藏
我的好友
我的勋章
设置
退出
导读
淘贴
博客
群组
社区VIP
APP下载
今日排行
本周排行
本周热帖
本月排行
本月热帖
会员排行
About云-梭伦科技
»
专题
›
交流区
›
技术交流
›
HDFS
›
关于hadoop-0.21.0 backup node的相关问题
0
3
0
分享
关于hadoop-0.21.0 backup node的相关问题
shihailong123
发表于 2013-10-25 10:42:35
[显示全部楼层]
阅读模式
关闭右栏
3
5230
根据老板的要求,将原先部署的hadoop-0.20.2的集群,升级到hadoop-0.21.0。(集群:1个Namenode;1个backup node;5个datanode。主要是想测试HA,都说0.21版本的backup node和checkpoint node功能比老版本的secondary namenode的性能更加优越,高效。backup node我是单独部署在一台服务器上,对于backup node的配置,在网上找了很多资料,鲜有比较清晰并测试正常的以供参考。hdfs-site.xml的配置见附件。配好后,在Namenode启动集群,执行hadoop namenode -back/checkpoint,backup node上并没有将namenode的数据同步过来。而且在namenode上会报错。
hdfs-site.xml配置:
dfs.name.dir
/usr/local/hadoop/hdfs/name
dfs.data.dir
/usr/local/hadoop/hdfs/data
dfs.replication
3
dfs.checkpoint.dir
/usr/local/hadoop/hadoop-0.21.0/namesecondary
dfs.backup.address
202.173.253.**:50100
dfs.backup.http.address
202.173.253.**:50105
dfs.http.address
202.173.253.**:50070
fs.checkpoint.period
1
fs.checkpoint.size
67108864
dfs.http.address
hdfs://202.173.253.**:50070
回复
使用道具
举报
提升卡
置顶卡
沉默卡
喧嚣卡
变色卡
千斤顶
显身卡
已有(3)人评论
电梯直达
正序浏览
goldtimes
发表于 2013-10-25 10:42:35
BN上面没有数据,因为它在从NN拿数据的时候出错了
它通过
http://nn.xxxx.cn:50070/getimage?getimage=1
向NN拿数据,NN有个servlet会找到这个文件(即Image文件)返回数据。
你看看是不是“nn.xxxx.cn:5007”这个地址有,改成IP试试吗?
回复
使用道具
举报
显身卡
starrycheng
发表于 2013-10-25 10:42:35
楼主,我在配置hadoop-1.0.3 配置backup node ,但是启动backup node : hadoop namenode - backup , 但是namenode 没有参数。 不知hadoop-1.0.3版backup的是如何配置的吗?
回复
使用道具
举报
显身卡
RnD_Alex
发表于 2013-10-25 10:42:35
回复
3#
dongj
1.0.3没有backup这个机制
回复
使用道具
举报
显身卡
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
|
立即注册
本版积分规则
发表回复
回帖后跳转到最后一页
发表新帖
shihailong123
中级会员
关注
80
主题
157
帖子
4
粉丝
TA的主题
云计算架构师必读11——健康端点监控模式
2014-11-29
云计算架构师必读10——守门员模式
2014-11-29
云计算架构师必读9——联合身份模式
2014-11-29
云计算架构师必读8——外部配置存储模式
2014-11-29
云计算架构师必读7——事件获取模式
2014-11-29
24小时热文
像高手一样发言:七种常见工作场景的说话之
幕后产品:打造突破式产品思维
副业警钟,新型法律碰瓷发财方式:批量诉讼
Spark机器学习
Spark机器学习算法、源码及实战详解
关闭
推荐
/2
中文版ChatGPT
1.无需魔法 2.提高编程效率 3.提高文档能力
查看 »
新手帮助
新手帮助:注册遇到问题,领取资源,加入铁粉群,不会使用搜索,如何获取积分等
查看 »
意见
反馈