JobTracker会调用NameNode的方法吗？

最近在做Hadoop优化，其中涉及到JobTracker调用NameNode的方法
我也知道，这样做会破坏模块之间的独立性，但是还想问问大家，在Hadoop中，JobTracker有调用NameNode方法吗？

Namenode 管理者文件系统的Namespace。它维护着文件系统树(filesystem tree)以及文件树中所有的文件和文件夹的元数据(metadata)。

JobTracker用来管理任务及资源

这两个似乎没有什么交点

tntzbzc 发表于 2015-1-12 17:49
Namenode 管理者文件系统的Namespace。它维护着文件系统树(filesystem tree)以及文件树中所有的文件和文件 ...

自然方法上也没有发现。楼主是通过什么联想到他们会有关联的

tntzbzc 发表于 2015-1-12 17:51
自然方法上也没有发现。楼主是通过什么联想到他们会有关联的

是这样，我们要优化Hadoop底层存储和调度策略，所以需要JobTracker从NameNode获取block和DataNode的对应关系
但是这样的话就需要JobTracker来调用DataNode的方法，但这样就会破坏模块的独立性
所以想问问Hadoop原来有没有JobTracker调用NameNode的呢？

gwgyk 发表于 2015-1-12 19:05
是这样，我们要优化Hadoop底层存储和调度策略，所以需要JobTracker从NameNode获取block和DataNode的对应 ...

既然是改造那就没有关系了，直接拿过包来用就可以了。
可以用BlocksMap

BlocksMap是一个Block对象对BlockInfo对象的一个Map表
如图：

详细参考

深度了解namenode---其 内部关键数据结构原理简介