hadoop上运行micolog是什么概念

lxs_huntingjob 2013-10-25 0 4533

1. 如果我在一个datanode节点的服务器下再挂载一个1T的硬盘，需要怎么配置才能让它与原来的硬盘的容量整合在一起吗？ 2. 我现在 ...

llike90 2013-10-25 5 5470

我在cygwin下运行hadoop可以运行，用命令./hadoop fs -ls /也能成功，建立目录也能成功，但就不能创建或向文件系统拷贝文件，创 ...

JavaShoote 2013-10-25 3 6270

2、副本的选择，为了降低整体的带宽消耗和读延时，HDFS会尽量让reader读最近的副本。如果在reader的同一个机架上有一个副本，那 ...

qz2003 2013-10-25 2 7290

大家好，我是新手 我用hadoop fs系列命令时，只有hadoop fs -mkdir能成功运行，而且运行时也会报错： hadoop-01:~# hadoop fs ...

shihailong123 2013-10-25 3 9684

请问一下，最近在跑m/r时 经常会抛出 一些block missing ，导致job failed的情况。 请问下 是block真正从HDFS中丢失了么吗？还 ...

kaif22 2013-10-25 7 9609

首先，HDFS文件系统的读写接口对用户隐藏了数据块的实际物理位置。但是，当我调用接口读取文件时，给出文件中需要读取的数据的偏 ...

louisthy 2013-10-25 2 4909

1、能否实现吗？ 2、客户端需要什么加锁操作吗吗？

qcbb001 2013-10-25 1 4641

本帖最后由 fiberlijun 于 2009-11-19 17:12 编辑 bolck备份 HDFS设计为大文件提供可靠存储。每个文件被分割为一系列的block ...

yaojiank 2013-10-25 2 5439

最近hadoop的应该刚刚接入原有的应用生态系统，并发现服务的硬盘很容易坏掉。由于目前hadoop的任务和处理的数据量暂时没有那么多 ...

jooli 2013-10-25 3 13005

我的HDFS 已经在虚拟机上运行成功了 一个 namenode 2个 datanode DN1和DN2 但是我现在想继续添加一个datanode DN3 结果 只有 ...

fylanyu 2013-10-25 8 8466

本帖最后由 fiberlijun 于 2009-11-19 17:12 编辑 主从结构 HDFS是一个 master/slave的架构。HDFS只有一个NameNode，即mast ...

shihailong123 2013-10-25 11 9235

我有一个疑问，在namenode的内存中记录了fsimage信息，但是内存中的fsimage元数据是在namemode启动时去合并本地的editlog和fsima ...

leo_1989 2013-10-25 1 6348

如果从client与datanode一段来描述的话，读数据是不是用inputstream（），实际上数据是从client一端到datanode一端是这样吗吗？ ...

einhep 2013-10-25 1 5173

请教一个：我用两台电脑配置了一个hadoop环境，并用eclipse做断点调试。调试简单的文件建立过程： 就是如下简单的代码： Confi ...

datong838 2013-10-25 0 4143

用http://namenodeHost:9000访问namenode，namenode显示的datanode的信息不正确，请问在哪里配置的吗？ 本人新手，希望大牛不吝 ...

top_gloria 2013-10-25 2 5399

请教下 如果客户端不装有Hadoop的话 怎么实现向集群中的HDFS系统上传下载呢吗？ 这个客户端该怎么实现呢吗？ 很急啊～～～麻烦 ...

starrycheng 2013-10-25 13 13649

由於研究需要，我需要開發hdfs原始碼，架的環境是在Ubuntu 9.04，IDE用Eclipse jave EE 1.3.1 我將hadoop官方網站的hadoop-0.20 ...

mexiang 2013-10-25 1 5295

刚开始接触Hadoop，也看了《Hadoop In Action》，有一个一直不是很明白，可能比较弱。 就是譬如我有一系列的log file，是存在本 ...

oChengZi1234 2013-10-25 4 5773

自从hadoop-0.21.0发布后，第二名称节点被一个相同功能的检查点取代（checkpoint node）。同时会有一个新的叫备份点（backup nod ...

shihailong123 2013-10-25 4 5748

我目前的情况是：已经成功搭建了Hadoop运行环境（CentOS 5.5+hadoop-0.20.2+JDK1.6），一共4台测试服务器，1台用作Namenode节点 ...

JavaShoote 2013-10-25 7 7370

搭建好了集群（1个Namenode节点+1个SecondaryNamenode节点+3个Datanode节点），数据节点服务器的总容量为860G左右，在浏览器里输 ...

qz2003 2013-10-25 0 4544

RT 目前公司需要有一个网盘的系统，开始的思路是使用FTP，但是渐渐觉得它有一定的制约性，考虑到扩展性和文件的控制性，是否可 ...

lxs_huntingjob 2013-10-25 2 7377

坛子里面有一位朋友提出过这个，详见贴 后面我也遇到了相同的，找了很多方法，都无法解决，最后和同事分析源代码才找到了的原因 ...

starrycheng 2013-10-25 2 6330

大家都知道hadoop的海量存储优势，但是我想问问。海量存储不是只要硬盘够大就OK了吗吗？ 乍一想，我只知道HDFS的容错备份存储 ...

sq331335144 2013-10-25 5 7377

本帖最后由 fiberlijun 于 2009-11-19 17:11 编辑 磁盘错误，心跳和重新备份 每个datanode周期性发送心跳信息给namenode。网 ...

datong838 2013-10-25 3 5974

2010-03-01 09:18:19,577 map = 0%, reduce =0% 10/03/01 09:18:19 INFO exec.ExecDriver: 2010-03-01 09:18:19,577 map = 0%, ...

mexiang 2013-10-25 5 4554

在linux（2台）部署了分布式hdfs，windows做客户端测试发现2个 1、org.apache.hadoop.hdfs.protocol.AlreadyBeingCreatedExcept ...

lovejunxia 2013-10-25 6 9834

我用5台服务器搭建了一个Hadoop集群，SecondaryNamenode是用一台服务器单独部署。想用SecondaryNamenode节点对Namenode节点的元 ...

langke93 2013-10-25 3 4611