分享

mapreduce压缩

如图,我对map输出进行了压缩,但是报了一个空指针异常,不知道怎么回事
(3II]1AMC]K9NKJU]$F}KNO.png
4Y7I3(7)KWV@}}`F4]})$~X.png

已有(2)人评论

跳转到指定楼层
muyannian 发表于 2015-11-7 18:23:27
改成下面形式:


conf.setBoolean("mapred.output.compress", true);

conf.setClass("mapred.map.output.compression.codec", GzipCodec.class, CompressionCodec.class);

回复

使用道具 举报

sonofwinds 发表于 2015-11-9 19:31:53

我是想压缩map输出的,并不是给reduce压缩
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条