用户组:游客
RMContainer是一个什么作用的数据结构? 在NM看来,每个节点有几种种基本状态? INIT_CONTAINER代表什么? CONTAINER_RESOURC ...
1.YARN的资源管理器是什么? 2.处理哪6种类型的事件? 3.事件NODE_REMOVED表示什么含义? 4.事件NODE_ADDED表示什么含义? 5 ...
1.RMContainer的作用是什么? 2.RMContainer有几种基本状态? 3.RMContainerImpl的作用是什么? 4.RESERVED状态代表什么? 5 ...
本帖最后由 pig2 于 2014-4-4 23:42 编辑 mapreduce如何处理压缩文件? 当mapreduce的输出文件需要压缩时,该如何设置? 对m ...
本帖最后由 pig2 于 2014-4-4 23:27 编辑 1.CompressionCodec的作用是什么? 2.CompressionCodec用什么方法解压和压缩? 3.C ...
本帖最后由 pig2 于 2014-4-4 23:09 编辑 1.为什么进行文件压缩? 2.hadoop支持哪几种压缩格式? 3.快速压缩该如何表示? 4 ...
本帖最后由 pig2 于 2014-4-4 23:05 编辑 1.hadoop数据完整性是为了解决什么问题? 2.hadoop通过什么方式来来校验数据完成行 ...
1、在YARN中,ResourceManager是做什么的? 2、在YARN中,ResourceManager总体架构是怎样的? 3、在YARN中,ResourceManager包 ...
本帖最后由 pig2 于 2014-4-3 23:14 编辑 1、ApplictionMaster管理部分主要由那些服务构成? 2、这些服务是怎样运行的? ...
本帖最后由 pig2 于 2014-4-3 13:02 编辑 1、YARN分别针哪些用户提供了那些对外服务?
本帖最后由 hyj 于 2014-3-11 21:45 编辑 同样我们可以带着下面问题来阅读: hadoop为什么支持swift? java-cloudfiles是什 ...
本帖最后由 pig2 于 2014-3-28 18:08 编辑 简介 我们在hadoop深入研究:(一)——hdfs介绍里已讲过,hdfs并不擅长存储小文件, ...
如何在Hadoop2.2.0 实例测试 WordCount程序?
1.什么是LZO? 2.配置LZO需要修改那些配置文件及环境变量? 3.mapred-site中设置mapred.child.env的LD_LIBRARY_PATH很 ...
大部分公司使用hadoop1.x,有的hadoop 0.x,淘宝已经升级hadoop2.x,他们的一些经验可以借鉴: 1.淘宝升级yarn,集群有什么变化 ...
出现Incompatible clusterIDs可能的原因是什么? 如果只格式化了namenode,没有格式化此datanode,可能会出现什么情况?
不知道大家平时用什么工具来管理Hadoop
hadoop1.x升级到Yarn 1.从Hadoop 1.x升级到Yarn那些地方是一样的 2.直接使用‘sbin/start-dfs.sh’去启动hdfs,那么会失败 ...
本帖最后由 pig2 于 2014-3-6 01:36 编辑 阅读本文我们需要了解FUSE是什么?ant在挂载中的作用是什么?挂载中那些是需要注意的 ...
可以带着下面问题来阅读: 1.如果ssh hadoop或ssh hadoop1 出现错误: Host key verification failed 该如何解决? 2. core-s ...
本帖最后由 nettman 于 2014-5-25 19:43 编辑 Hadoop Streaming是Hadoop提供的多语言编程工具,通过该工具,用户可采用任何语 ...
阅读本文可以带着下面问题: 1.什么情况下会出现连接不上集群,包端口错误? 2.hdfs权限检测在哪里可以配置?如 ...
可以带着下面问题来阅读: 1.HDFS是以什么为单位读写block的? 2.packet由什么组成? 3.HDFS进行数据校验的基本单位是什么 ...
阅读本文可以带着下面问题: 1.对比下面两种操作HDFS文件的不同之处? 一、hadoop API 上传文件 Hadoop的API中的普通copy ...
可以下面问题来阅读: 1.为什么hadoop压缩文件能够提高部分计算效率? 2.reduce的数量设多少合适? 3.运行一段时间后hadoop不 ...
本文为安装指导,在安装过程中,我们可以注意一下问题: 1.当有多个HDFS集群同时工作时,用户如果不写集群名称,那么默认使用 ...
阅读本文需要具有hadoop 1.x的基础。 可以带着下面问题来阅读本文: 1.hadoop2中支持几个NameNode? 2.NameNode之间是什么关 ...
这一篇是在YARN的 Resource Manager的作用 基础上详细介绍 阅读本文可以带着下面问题1.ResourceManager为什么把对象封装?分别 ...
这一篇是在YARN的 Resource Manager的作用 基础上详细介绍 阅读本文可以带着下面问题: 1.如果某个作业死掉,该如何杀死一个 ...
1.理解分布式 HDFS我们都知道它是分布式存储系统,分布式系统和我们PC机的硬盘存储有什么不同。 多台电脑有多个硬盘,算不算分 ...
本版积分规则 发表帖子
查看 »