分享

hadoop文件划分

犀湖初见 发表于 2016-5-8 14:55:19 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 1 6824
如何将一个M行样本数据的输入文件划分成任意大小的L块,每块包含任意K条数据样本

已有(1)人评论

跳转到指定楼层
xuanxufeng 发表于 2016-5-8 17:13:52
楼主可以自定义分割类Inputformat

更多参考
hadoop的mapreduce如何自定义分割文件【改变默认按行分割】
http://www.aboutyun.com/forum.php?mod=viewthread&tid=18325


回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条