各位老师,请问下有关data.dir的有关问题
dfs.data.dir/home/u/hdfs/data
各位老师请教一下,各个数据结点必须要有统一的硬件及目录文件系统吗吗?我datanode1有3块盘,datanode2有10块盘,各个结点都不相同的情况下,hdfs-core.xml该如何配置呢吗?谢谢 这个怎么没人帮忙解答啊!!高手们求助啊 ???????????????????没人啊!!!!!!!!!
images/smilies/default/cry.gif
回复 1# szx85307
最好要统一的,因为这个事情运维必须搞好统一目录,否则就是运维水平太烂。 目录结构要一样,但可以挂到不同的硬盘上。 回复 5# everist
是的,后来查了半天,可以把新硬盘挂载到目录下 回复 6# szx85307
你查的结果是,目录结构必须相同吗吗?
我看很多指导全分布式部署的文章都说,先在主节点上配置好hadoop(期中就包括conf/core-site.xml:conf/mapred-site.xml:conf/hdfs-site.xml这三个配置文件)。
再把这个hadoop的安装目录复制到其它结点上去,只是说复制到其它结点时要保证这个hadoop里面的配置要相对于他现在所在的结点来说是正确的。
所以我个人觉得,应该不需要所有结点完全一致吧! 回复 7# hipilee
没具体实验过,不知道,反正查的资料是现在你的目录结构都一样,然后需要加硬盘时,可以挂载到目录上去
页:
[1]