应用shell脚本处理hadoop中FsImage小文件

查看数: 9825 | 评论数: 4 | 收藏 3

关灯 | 提示：支持键盘翻页<-左右->

发布时间: 2018-11-28 10:18

本帖最后由 levycui 于 2018-11-28 10:20 编辑问题导读： 1、Hadoop集群大量小文件对集群造成什么影响？ 2、如何使用hdfs oiv命令解析FsImage文件？ 3、如何使用FsImage分析脚本处理小文件？ 4、如何使用Sqoo ...

仙本是凡 发表于 2020-10-22 17:32:34

hdfs_meta_dirs hdfs_meta_files 这2个表结构是什么？

美丽天空 发表于 2018-12-1 01:02:05

感谢分享

jiangzi 发表于 2018-11-29 14:14:46

大量的小文件，即文件Size比HDFS的Block Size（默认128MB）小的多的文件。

jiewuzhe02 发表于 2018-11-29 10:30:48

谢分享！

图文精华