mapreduce编程模型

提示: 作者被禁止或删除内容自动屏蔽

nettman · 发表于 2014-3-2 20:03:51

提示: 作者被禁止或删除内容自动屏蔽

nettman · 发表于 2014-3-2 20:15:09

提示: 作者被禁止或删除内容自动屏蔽

tang · 发表于 2015-3-7 12:50:32

很好的解释，学习了

Minimumy · 发表于 2015-3-26 14:35:36

学习了！多谢！！！

狂奔啦蜗牛 · 发表于 2015-4-1 13:01:35

长知识了讲的不错

tang · 发表于 2015-4-3 19:30:11

军在桥 · 发表于 2015-8-12 14:12:48

nettman 发表于 2014-3-2 20:15
个人对上面的看法
1.reduce数量由谁来决定？
reduce数量有分区的数量来决定

上面说的是分区的数量由reduce来决定，那reduce的数量由什么来决定呢？

dingweichang · 发表于 2015-10-15 16:31:07

军在桥发表于 2015-8-12 14:12
上面说的是分区的数量由reduce来决定，那reduce的数量由什么来决定呢？

reducer最优个数与集群中可用的reducer任务槽数相关，由mapred.tasktracker.reduce.tasks.maximum 设置。

kril-x · 发表于 2015-12-14 16:22:17

分区的数量由reduce来决定，那reduce的数量与reducer最优个数与集群中可用的reducer任务槽数相关，由mapred.tasktracker.reduce.tasks.maximum 设置。

图文精华