在hdfs中，有edits_inprogress这个文件，资料上说存储的是正在写的transactionId，那如果在hdfs重置之前，transactionId这个事务 ...

sinv2015 2017-5-30 1 6362

请问各位大神，我想把HDFS和ftp文件服务器二者做个上传和下载文件的速度比较，目前Hadoop集群也搭好了，在master上搭好了vsftp环 ...

笏乞篷 2017-5-20 1 7670

hadoop mkdir 时 Name node is in safe mode，但是我已经关闭了safe mode： hdfs dfsadmin -safemode leave

赵苏苏 2017-4-27 5 6297

请教各位高手：对于hadoop的HDFS文件系统，是不是可以通过socket容器（如tomcat）中的web程序（运用java api接口）进行访问吗？ ...

yuanqingyu0123 2013-10-25 21 46690

若一台主机从伪分布式模式转换为完全分布式模式下的master，那么HDFS会如何存储数据

笏乞篷 2017-4-12 3 8181

问题1：据网上资料说，mapreduce日志分为作业运行日志（又称历史作业日志）和任务运行日志 (Container 日志)，这里我们知道，作 ...

sinv2015 2017-4-10 7 10368

你好，请问我如下的理解对么：我的集群3个节点，一个namenode，两个datanode。我在HDFS里面创建了一个80MB的文本文件，在namenod ...

youngwenhao 2017-3-16 7 8438

在搭建Hadoop环境时，jps只有2344 Jps，32744 JobHistoryServer两个进程 hdfs dfsadmin -report查看 17/03/31 23:26:21 W ...

AceCC 2017-4-1 7 34617

如下图：DirectoryDiff.getChildren()方法会将目录的指定快照状态与当前状态间的所有ChildrenDiff合并是什么意思，尤其是指定快 ...

sinv2015 2017-3-26 1 5964

最近在看Hadoop2.x源码分析这本书，请问如题的区别

sinv2015 2017-3-16 8 15859

在写MR程序时，我们都会用到hadoop.fs.FileSystem来实现HDFS文件读写。但是这几天在看HADOOP2.X源码分析，发现Hadoop RPC接口的C ...

sinv2015 2017-3-6 6 10100

简介HDFS（Hadoop Distributed File System ）Hadoop分布式文件系统。是根据google发表的论文翻版的。论文为GFS（Google File Sy ...

ljlinux2012 2017-3-1 8 9113

最近在用cm给cdh配置kerberos认证，按照官网上的步骤进行配置（用的是cdh5.4.5），配置后在启动impala时，Impala Daemon出现问题 ...

yeshang 2015-9-2 5 26696

之前写了一个船舶视频在线处理的网站，内容主要是对船舶视频进行跟踪、检测。采用的c/s架构，算法程序是用matlab、c写的，我用ja ...

JLANDLU 2017-3-8 7 8128

大家看下，有没有遇到过 hive (test)> select * from table limit 10; FAILED: SemanticException Unable to determine if h ...

zhuqitian 2017-3-2 2 8885

DATANODE的堆大小为1G,DATANODE的数据缓存为4G,难道数据缓存不是从堆中分配的? NAMENODE应该分配多大的空间,总感觉4G不够用,N ...

巨波小学生 2017-2-23 4 4941

下面是slave的logs 2017-02-17 03:00:32,991 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: STARTUP_MSG: /******* ...

zaipingY 2017-2-17 2 7430

弱弱的咨询下 Hadoop客户端放置在哪里 namenode就在那机器吧

Wyy_Ck 2017-2-15 3 5520

使用hadoop fs -ls / 可以查看到DataNode的很多数据。我数据在DataNod配置的路径是/../../../data/current类似目录下，下面有很 ...

Wyy_Ck 2017-1-19 3 6989

1、fsimage [mw_shl_code=bash,true][hadoop@master current]$ hdfs oiv -i fsimage_0000000000000000000 -o fs.ls 16/12/29 1 ...

Wyy_Ck 2016-12-29 4 9261

请教各位兄弟，最近搭建hadoop-2.6.0之后，在Window8系统中，将hadoop-eclipse-plugin-2.6.0放在eclipse\plugins\目录 ...

韩克拉玛寒 2015-1-19 16 121875

hdfs文件系统空间为0 hadoop@ubuntu1:/soft/hadoop/logs$ hdfs dfsadmin -report Configured Capacity: 0 (0 B) Present Capa ...

一颗银杏树 2016-12-27 3 14305

hadoop分布式集群已经搭建好，没有项目，如何自学。从哪里入手 比较合适。。 大家帮忙给一点建议，信谢谢

Wyy_Ck 2016-12-21 1 7854

错误信息： root@Test:/usr/local/hadoop/bin# ./hadoop fs -cat /hello.txt 10/01/11 10:54:59 INFO hdfs.DFSClient: No node ...

atsky123 2013-10-25 2 28996

有没有大说下hadoop shell操作命令代码怎么看 其实结合源代码看命令更透彻

Wyy_Ck 2016-12-13 4 5124

如题： 小弟通过 eclipse写了一段代码来读取 自己的虚拟机上的伪分布的hadoop 集群的文件，不知为何一直报错请大神们看看 [mw ...

haisongen 2016-12-13 4 7560

报错信息如图： 日志信息：

hadoopmaster 2016-11-20 12 23744

请问老师cdh5.2 中的 hdfs 中的 namenode 启动不了，而且日志也不更新了，会是什么原因那，有没有什么好办法，或者思路。

hadoopmaster 2016-11-20 3 7382

之前使用NAT模式，后改成桥接模式，故地址发生变化，同步修改配置文件后，3个节点都启动了， 但是显示之前的节点地址超时， 请 ...

Alan-pan 2016-11-16 7 7725