Hadoop2 动态删除节点？配置了HA但是为什么只有在一个namenode上执行好使阿？

有两个问题：
1：hadoop2 动态删除datanode，是将节点写到excludes 这里，然后在namenode上执行hdfs dfsadmin -refreshNodes ？
不知道我说的对不对，不对请大家给我指正阿。我要问的是，我的hadoop配置了HA就是有两个namenode ，但是我执行hdfs dfsadmin -refreshNodes 这个只有在最原始的那个 namenode上好使。另一个即使切换到了HA 执行也不起作用？想知道为什么。

2：hadoop2 动态删除了一个节点，但是在standby的服务器上看，那个节点还在阿？即使切换到active状态一样，并且还不能删掉，第一个问题中已经说了。。。

s060403072 · 发表于 2015-2-2 19:09:40

是否在在master上修改tasktracker-deny.list，添加相应机器。
确保两个active和standby上都有相关配置

536528395 · 发表于 2015-2-2 22:21:56

s060403072 发表于 2015-2-2 19:09
是否在在master上修改tasktracker-deny.list，添加相应机器。
确保两个active和standby上都有相关配置

tasktracker-deny.list 这个是什么？配置文件么？我没有这个啊，不是直接<name>dfs.hosts.exclude</name>
<value>/etc/hadoop/conf/exclude</value>
在这里面添加要删除的就可以了么？
我在最初的那个 namenode上可以动态的删除掉，但是HA切换到另一个就不行。。。不懂啊

desehawk · 发表于 2015-2-2 22:59:00

536528395 发表于 2015-2-2 22:21
tasktracker-deny.list 这个是什么？配置文件么？我没有这个啊，不是直接dfs.hosts.exclude
/etc/hado ...

详细说说你是如何配置的，如何切换的。配置是否都一样。贴出具体内容

nextuser · 发表于 2015-2-2 23:06:02

楼主认为可能的原因是什么，这个跟环境有关系，比如HA是否有问题。
备用配置是否有问题

xiaobaiyang · 发表于 2015-2-2 23:29:55

直接kill -9 jobid 就行了

536528395 · 发表于 2015-2-3 09:57:44

desehawk 发表于 2015-2-2 22:59
详细说说你是如何配置的，如何切换的。配置是否都一样。贴出具体内容

<property>
            <name>dfs.nameservices</name>
            <value>test-hadoop-cluster</value>
      </property>
      <property>
            <name>dfs.ha.namenodes.test-hadoop-cluster</name>
            <value>nn1,nn2</value>
      </property>

      <property>
            <name>dfs.namenode.rpc-address.test-hadoop-cluster.nn1</name>
            <value>sh-b0-sv0375.sh.idc.yunyun.com:8020</value>
      </property>
      <property>
            <name>dfs.namenode.rpc-address.test-hadoop-cluster.nn2</name>
            <value>sh-b0-sv0376.sh.idc.yunyun.com:8020</value>
      </property>
      <property>
            <name>dfs.namenode.http-address.test-hadoop-cluster.nn1</name>
            <value>sh-b0-sv0375.sh.idc.yunyun.com:50070</value>
      </property>
      <property>
            <name>dfs.namenode.http-address.test-hadoop-cluster.nn2</name>
            <value>sh-b0-sv0376.sh.idc.yunyun.com:50070</value>
      </property>
      <property>
            <name>dfs.namenode.shared.edits.dir</name>
            <value>qjournal://sh-b0-sv0376.sh.idc.yunyun.com:8485;sh-b0-sv0372.sh.idc.yunyun.com:8485;sh-d0-sv0481.sh.idc.yunyun.com:8485/test-hadoop-cluster</value>
      </property>
      <property>
            <name>dfs.client.failover.proxy.provider.test-hadoop-cluster</name>
            <value>org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider</value>
      </property>
<property>             <name>dfs.ha.fencing.methods</name>             <value>sshfence</value>       </property>       <property>             <name>dfs.ha.fencing.ssh.private-key-files</name>             <value>/home/test-hadoop/.ssh/id_rsa</value>       </property>       <property>             <name>dfs.journalnode.edits.dir</name>             <value>/mnt/disk0/test-hadoop/data/journal/test-hadoop-cluster</value>       </property>              <property>             <name>dfs.ha.automatic-failover.enabled</name>             <value>true</value>       </property>       <property>             <name>ha.zookeeper.quorum</name>             <value>sh-b0-sv0376.sh.idc.yunyun.com:2182,sh-b0-sv0372.sh.idc.yunyun.com:2182,sh-d0-sv0481.sh.idc.yunyun.com:2182</value>       </property>        <property>             <name>dfs.namenode.name.dir</name>             <value>/mnt/disk0/test-hadoop/data/namenode/</value>       </property>       <property>             <name>dfs.namenode.handler.count</name>             <value>100</value>       </property>       <property>             <name>dfs.datanode.data.dir</name>             <value>/mnt/disk0/test-hadoop/data/datanode/</value>       </property>       <property>             <name>dfs.replication</name>             <value>2</value>       </property>       <property>             <name>dfs.hosts.exclude</name>             <value>${hadoop.distribution.config.path}/excludes</value>       </property>
这些是配置。
sh-b0-sv0375.sh.idc.yunyun.com （nn1）这个是最原始的namenode节点，只有在这个namenode上可以动态删除节点，
删除的时候，我是先将要删除的节点添加到${hadoop.distribution.config.path}/excludes这个文件中，然后在sh-b0-sv0375.sh.idc.yunyun.com这个上面执行
hdfs dfsadmin -refreshNodes 这个命令。这个是可以的。但是只有在这个namenode上看到那个节点退役了，但是在standby节点上看那个删除的节点还在。。。
hdfs haadmin -failover nn2 nn1  我是这么切换的 HA。（并且启动的时候默认nn2 是 active的，我想指定让nn1是active可以么？）
当sh-b0-sv0376.sh.idc.yunyun.com （nn2）是active的namenode的时候，在执行上面的动态删除节点不起作用。