还是个新手，麻烦各位大佬解答下，谢谢！ 具体情况是：公司目前用的还是CDH4的版本 前两天hdfs集群其中一台datanode突然挂了 ...

lmydev 2022-11-4 4 1314

环境: Hadoop3.1.4 datanode*5 hbase2.2.6 regionserver*5 问题: hadoop中原来的备份数为2 将/hbase/data/default目录设置擦 ...

macWang 2021-3-16 0 2704

请问hadoop跨hdfs读写只能用distcp吗？

为了明天time 2017-11-14 2 5532

目前遇到一个问题： 我的集群中其他的小伙伴加了一个200G的机器A进来，这个机器A很快就90%+了，其他机器（30T）才2%， 机器A上 ...

仙本是凡 2020-7-15 1 2362

报警提示：如果hdfs中等待删除的块数超过了配置的warning和critical域，那么该service-level告警就会被触发。它通过检查NameNode ...

ditianxia 2020-1-1 1 2988

最近hdfs集群出现异常，出现 ： 此 DataNode 未连接到其一个或多个 NameNode。 报警 查看日志，也有找到一些错误信息，但还是没 ...

grinsky 2019-12-12 2 15238

错误日志：19/11/07 19:20:42 INFO ipc.Client: Retrying connect to server: hadoop05/192.168.0.111:8485. Already tried 9 ti ...

孤独的战神 2019-11-9 2 6817

注明：本文来自个人博客www.zhuyongpeng.cn 一、HDFS是一个一次写入，多次读写，分布式、目录树状结构 1）组成：Namenode ...

不可替代 2018-4-4 1 6273

Hadoop 2.7.7 上图是备用节点，绿色的柱状图，下图是主节点 怎么就是黑色的呢，且下面还增加了不少刻度，请问黑的、绿色都什么意 ...

evababy 2019-4-23 4 5109

alluxio monut hdfs后，用 hdfs fs -rmr xxx 删除文件后，alluxio文件仍然存在，此时访问此文件存在两种现象： 1、0%加载，报错 ...

evababy 2019-4-24 1 5032

一直提示有13个miss block ,但是列表里只显示4个 使用fsck 命令却检查不出来， delete 也找不到文件 何解啊？

myoo 2019-2-21 2 3401

我的CDH集群，由一个datanode无法正常启动，出现报错如下 Info FsDatasetImpl Adding replicas to map for block pool BP-11802 ...

仙本是凡 2019-1-22 4 10645

本人是初学者，第一次使用hadoop搭建伪分布就遇到一个解决了一周的问题，真心求助，已经解决了一周了。谢谢。 问题描述： 我使 ...

明雨轻弹 2017-12-2 7 11941

错误说明是这样的： 看起来好像是哪个配置文件配置了日志记录地址为/logs/userlogs/****，但是当想往里面写文件时发现这是个目 ...

heelo 2018-8-1 3 5669

报错信息具体描述：1.读写HDFS文件程序 public static void main(String[] args) throws Exception { final Configuration ...

枫枫飒飒 2018-7-17 4 33249

hadoop2.6.0,写数据用的是java的文件追加，就是所有的数据都写到一个文件里： IOUtils.copyBytes(in, fo, 4096, true); 读数据 ...

wanghiu 2018-6-4 10 12124

hdfs中的文件存储在哪呢 本地磁盘吗 吗？

cryst2l 2013-10-25 4 29244

开始我的Hadoop集群中什么文件都没放，后面上传了1000文件，如何查看上传前后namenode消耗的内存！然后看了一篇文章《An Improve ...

cuter 2018-4-22 7 8157

问题说明：在 Eclipse 中 Upload files to DFS ，上传成功后，在 eclipse 中打开文件，为空。运行 单词统计案例，就没有结果。 ...

Kevin517 2016-10-15 16 36609

在hadoop的真正的生产环境中，如果我们已经搭建了zookeeper集群，那么此时还需要配置secondary namenode吗？如果需要配置，那么 ...

javaanddonet 2018-4-1 5 8087

一、服役节点准备 修改ip、主机名、配置ssh、删除服役节点的原有数据 二、服役操作步骤（在namenode节点机器 ...

不可替代 2018-4-3 0 6362

cm+CDH搭建 作者：（鸟叔）见本人博客 环境准备 安装组件准备 ...

不可替代 2018-4-3 0 12510

H，各位大神，近期我们集群遇到一个棘手问题，hadoop集群namenode 总是互相切换，切换的原因是zkfc服务 在监听本机nam ...

hrsjw1 2018-2-27 18 14828

背景描述: 目前存在2个集群:配置分辨为: dfs.nameservices:myclouder1 , dfs.nameservices:myclouder2; 因为两个集群不在同 ...

ltz 2018-2-11 3 9899

Hadoop心跳监控源码分析 链接是到我的博客 Hadoop心跳监控

Joker 2018-2-2 0 4558

namenode启动的服务：10681 NameNode 11092 ResourceManager 11659 Jps 10983 DFSZKFailoverController 11455 HMaster da ...

qing_D7BWs 2017-12-31 5 5517

今天将NO-HA转移到HA的时候出现了数据丢失，本来是全部丢失。 后来将dfs备份的目录导入到了新生成的DN节点中dfs目录下了。找回 ...

qgjfsse 2017-8-21 3 30701

三台机器安装的hadoop HA集群，三台都是datanode，其中两台是namenode角色，现在要求开启kerberos认证授权，看了很多资料，全部 ...

fanghuaiming 2017-12-28 1 5212

这个端口号如何验证及配置，求高手指教

andres 2017-12-19 2 8133

下面是我搭建集群时写的步骤，参考了网上的一些信息，修改了一些地方，按照我写的方法现在我搭建的集群是1台Namenode和3台Datano ...

starrycheng 2013-10-25 7 9660