韩克拉玛寒
发表于 2015-7-2 14:24:12
mjjian0 发表于 2015-4-7 11:21
问一下版主 像这样的配置在其他非ResourceManager节点需要配置吗?
这一块的配置,每个节点都是一 ...
对,每个节点的配置文件都一样,你只要配置好一份,其他机器上的scp过去就行
韩克拉玛寒
发表于 2015-7-2 14:30:44
超级肉丸 发表于 2015-7-1 15:20
基本上一模一样的配置了,试了n次了,DFSZKFailoverController就是无法启动,namenode永远是两个standby, ...
DFSZKFailoverController 进程是需要你在初始化hadoop时,对zookeeper进行format一下。你肯定哪里的步骤没有配置正确,或操作上有问题。最好贴一下异常日志出来看看。
韩克拉玛寒
发表于 2015-7-2 14:37:49
mjjian0 发表于 2015-4-7 13:30
我用start-all.sh启动hadoop集群提示:
我的resourcemanager是配置在其他非namenode节点的,start-all.s ...
嗯,resourcemanager这个进行在yarn-start.sh中,只能启动一个,另外一个是要单独启动。这是hadoop现在的缺陷吧。单独启动另外一个resourcemanager时,在节点上执行 yarn-daemon.sh startresourcemanager.就可以了,另外你也可以 执行http://Slave1:8088,查看你的这个resourcemanager的管理情况。正常情况下,会跳转到你的active的节点机器上。
long_ac
发表于 2015-7-9 15:33:18
给楼主提一点点建议
最好能再写一点模型流程图,
比如,hbase的输入是谁提供的,输出是直接去了hdf分布式文件系统,还是提供给了yarn自带的MapAM,
这样初学者能够更容易理解
{:soso_e113:}
shixw_usr
发表于 2015-8-22 16:38:26
问一个楼主 ,这个集群配置的时候 为什么没有配置SecondNameNode ,困惑了 好久了
韩克拉玛寒
发表于 2015-8-22 21:26:06
shixw_usr 发表于 2015-8-22 16:38
问一个楼主 ,这个集群配置的时候 为什么没有配置SecondNameNode ,困惑了 好久了
我这个是HA集群,SecondNameNode 这个节点已经变成了junolNode了。
shixw_usr
发表于 2015-8-22 21:55:53
韩克拉玛寒 发表于 2015-8-22 21:26
我这个是HA集群,SecondNameNode 这个节点已经变成了junolNode了。
谢谢明白了{:soso_e183:}
韩克拉玛寒
发表于 2015-8-22 21:57:53
shixw_usr 发表于 2015-8-22 21:55
谢谢明白了
采用QJM集群,与你说的那种区别比较大,你可以去了解下HA集群的方式。
zhanrox
发表于 2015-9-19 23:20:11
楼主,5.4步中讲在其它几点上起动zookeeper,是指在slave1、slave2、slave3上再配置zookeeper集群,然后启动么??
韩克拉玛寒
发表于 2015-9-21 09:58:43
zhanrox 发表于 2015-9-19 23:20
楼主,5.4步中讲在其它几点上起动zookeeper,是指在slave1、slave2、slave3上再配置zookeeper集群,然后启 ...
嗯,是的