mapreduce压缩

查看数: 9509 | 评论数: 2 | 收藏 1
关灯 | 提示:支持键盘翻页<-左 右->
    组图打开中,请稍候......
发布时间: 2015-11-7 17:18

正文摘要:

如图,我对map输出进行了压缩,但是报了一个空指针异常,不知道怎么回事

回复

sonofwinds 发表于 2015-11-9 19:31:53

我是想压缩map输出的,并不是给reduce压缩
muyannian 发表于 2015-11-7 18:23:27
改成下面形式:


conf.setBoolean("mapred.output.compress", true);

conf.setClass("mapred.map.output.compression.codec", GzipCodec.class, CompressionCodec.class);

关闭

推荐上一条 /2 下一条