分享

弱问,工作流的问题,是否存在这种工作流?

gefieder 发表于 2013-11-15 01:15:28 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 3 5180
弱问,不存在这种工作流把?map->reduce->redue
正常得是map->reduce->map->reduce
欢迎加入about云群371358502、39327136,云计算爱好者群,亦可关注about云腾讯认证空间||关注本站微信

已有(3)人评论

跳转到指定楼层
pig2 发表于 2013-11-15 01:16:40
都有,只不过第一种,一个mapreduce作业搞不定,这是mapreduce的缺点,第一种得2个job,map->reduce->map->reduce这里的第二个map有时候会冗余。工作只是将读取的内容原样输出
回复

使用道具 举报

gefieder 发表于 2013-11-15 01:17:31
map->reduce->map->reduce有没办法之间跳过第二个map?
回复

使用道具 举报

pig2 发表于 2013-11-15 01:19:33
gefieder 发表于 2013-11-15 01:17
map->reduce->map->reduce有没办法之间跳过第二个map?

spark或者其他计算框架
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条