搜索
搜 索
本版
文章
帖子
用户
图文精华
hadoop-2.6.0+zookeeper-3.4.6+hbase-1.0.0+hive-1.1.0完全分布 ...
首页
Portal
专题
BBS
面试
更多
登录
注册
用户组:游客
主题
帖子
云币
我的帖子
我的收藏
我的好友
我的勋章
设置
退出
导读
淘贴
博客
群组
社区VIP
APP下载
今日排行
本周排行
本周热帖
本月排行
本月热帖
会员排行
About云-梭伦科技
»
专题
›
交流区
›
技术交流
›
MapReduce
›
MapReduce监控(跟踪)视图
0
5
0
分享
MapReduce监控(跟踪)视图
sq331335144
发表于 2013-10-26 15:16:22
[显示全部楼层]
阅读模式
关闭右栏
5
8751
本帖最后由 hadoopor 于 2009-12-1 10:00 编辑
JobTracker.JobInProcess
用于监控一个Job的调度情况。一个Job会被分解成N个Tasks,这些Tasks被分配到集群中的TaskTracer节点,由TaskTracer节点去运行这些Tasks。
JobTracker.TaskInProcess
当JobTracker分解Job为N个Tasks后,每个Tasks都运用一个JobTracker.TaskInProcess对象来跟踪。
JobTracker.JobInProcessListener
MapReduce同时可以接受多个Job,所有的Job都会存入到JobInProcessListener中,由它来管理所有的Job。
TaskTracker.TaskInProcess
当一个Task被分配到TaskTracker节点后,TaskTracker节点本身也需要跟踪这个Task的运行,TaskTracker.TaskInProcess对象就是用来干这个的。
[color=]请注意在上图中有两个TaskInProcess,但分别隶属于JobTracker和TaskTracker,两者是不同的,但都是用来跟踪Tasks的。
回复
使用道具
举报
提升卡
置顶卡
沉默卡
喧嚣卡
变色卡
千斤顶
显身卡
已有(5)人评论
电梯直达
正序浏览
top_gloria
发表于 2013-10-26 15:16:22
0.20.1版本开始是不是org.apache.hadoop.mapred包已经全部被org.apache.hadoop.mapreduce包替换掉了吗?
回复
使用道具
举报
显身卡
leo_1989
发表于 2013-10-26 15:16:22
在最新版本,mapred仍存在,短时间内难以废除,而且还要照顾0.20.x之前的兼容性。
回复
使用道具
举报
显身卡
oChengZi1234
发表于 2013-10-26 15:16:22
感觉新包旧包一起用有些混乱。。。
回复
使用道具
举报
显身卡
poptang4
发表于 2013-10-26 15:16:22
是很混乱,随着规模的膨胀,感觉Hadoop越来越乱了,估计是缺少整体上的规划和设计造成的,想到一点改一点,很敏捷。
回复
使用道具
举报
显身卡
mituan2008
发表于 2013-10-26 15:16:22
嗯,最近正在研究他,有时候乱的就不知道咋弄了。。。复杂呀!
回复
使用道具
举报
显身卡
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
|
立即注册
本版积分规则
发表回复
回帖后跳转到最后一页
发表新帖
sq331335144
中级会员
关注
52
主题
142
帖子
3
粉丝
TA的主题
SAE能安装XMPP/MQTT协议的应用吗问题
2013-12-17
裸体跪求高手:iphone版云窗调试器无法安装
2013-12-17
HTML5非成熟体:能否最终取代App(3)
2013-12-17
基于引擎开发HTML5游戏实战(三)---组织游戏元素
2013-12-15
MapReduce有什么优势和劣势
2013-10-26
24小时热文
Django实战:Python Web典型模块与项目开发
大数据面试题
求职,请给HR一点活路
找工作很难,为什么我一天三个机会
股票魔法师.Ⅲ,趋势交易圆桌访谈
关闭
推荐
/2
中文版ChatGPT
1.无需魔法 2.提高编程效率 3.提高文档能力
查看 »
新手帮助
新手帮助:注册遇到问题,领取资源,加入铁粉群,不会使用搜索,如何获取积分等
查看 »
意见
反馈