立即注册 登录
About云-梭伦科技 返回首页

easthome001的个人空间 https://aboutyun.com/?1321 [收藏] [复制] [分享] [RSS]

日志

如何扩容DataNode及遇到问题总结

已有 1986 次阅读2018-1-4 20:09

一个集群节点进行扩容,然后修改了配置参数文件dfs.datanode.data.dir参数后面追加挂载的数据目录,

发现启动时正常,后面索性多修改几个节点发现集群后面修改的DataNode全部启动报错(日志记录在/var/log/hadoop/dfs/hadoop-hdfs-datanode-*.log):

Too many failed volumes - current valid volumes: 1, volumes configured: 4, volumes failed: 3, volume failures tolerated: 0

翻到前面发现存在如下告警:


原因:权限问题,查看正常启动的数据目录权限:

而后面生成的/data2/hadoop/hdfs/data目录权限都是root,修改所属用户和用户组即可(如果权限不一致,修改确保跟正常启动的数据目录权限保持一致),执行如下命令:

# chown -R hdfs:hadoop data


路过

雷人

握手

鲜花

鸡蛋

评论 (0 个评论)

facelist doodle 涂鸦板

您需要登录后才可以评论 登录 | 立即注册

关闭

推荐上一条 /2 下一条