用户组:游客
我现在在做通过web方式访问hadoop 的hdfs系统 在网上找了代码 运行的时候i总是找不到uri 连接超时 代码如下: public class A ...
如题:想要利用hadoop最后必须得打包成jar放在服务器上嘛吗?不要说什么eclipse插件什么的,那些都是为了调试的。我是说最终的程 ...
谁能给我一个hadoop下能运行的并行的代码呀
我使用的版本是 0.21.0 是怎么回事
dfs.replication 1 上面的关于备份的配置文件无论我是放在core-site.xml还是hdfs-site.xml文件中,我都可以搭建成功完全分布式 ...
我们使用的是全分布式,主节点和各个节点之间通信良好,可以通过主节点启动整个框架,但是为什么在主节点运行以下命令会出现错误 ...
HDFS如何连续读取一个大文件中的小文件 1,到底流数据是什么吗?与普通数据在存储和操作上有什么区别吗? 2,序列化的意义在哪 ...
RT,想知道 HDFS 文件系统是否保存文件的MD5值,如果保存的话MD5值存在哪里吗?如果不保存的话,客户端如何高效地得到文件的MD5 ...
如题,求交流。
这两天部署了Hadoop-0.21.0,因为此版本新增了Backup node及Checkpoint node功能,所以想测试一下。部署完成后,从Web页面(http ...
最全面最及时的云计算资料分享平台 http://www.cloudwhy.com/what/2011-0302-67.html
如题。。。。
打算用hdfs存储一些图片,数量很多,但是大小都一样,每张不到1M。该怎么存储,有没有实际的例子。还有存储以后怎么查询。根据我 ...
我用的是 Hadoop-0.21.0 ,暂时只想实现分布式存储,所以只修改了三个配置文件,在 conf/core-site.xml 中添加了 dfs.n ...
昨天作了个小实验,在看hadoop权威指南和hadoop实践时,都说过,[ol][*] public static FileSystem get(Configuration conf) thr ...
刚刚开始看HDFS,对客户端访问HDFS做了一个简单的并发测试,对测试结果比较疑惑,请各位帮忙看看; 测试环境描述:HDFS由一个 ...
项目进行到了末尾了,发现有个功能(用户信息更新)没有做,我们使用的都是文件来存储各种信息的,但是hdfs貌似只能在文件末尾ap ...
我做了一个简单的测试,配置情况如下: namenode: n1 datenode: n2~n5 测试程序hadoop-test-0.20.203.0.jar,测试选项TestDFS ...
比如说文件在1M-100M之间,供前端服务器获取并下发给终端用户,这类应用;典型的如苹果AppStore对应用与游戏的存储,大家觉得HDF ...
1namenode 7 datanode namenode所在的机器是32核 48g内存 其他七台是普通的pc机 双核2g内存 7200转的硬盘 100M网络 经过多次 ...
请问客户端与元数据如何同步吗?详细过程是什么吗?望高手不吝赐教!
回复 12# dapopo 我有点想和你请教下的,dfs的查询可以用HBASE,如果想要有SQL功能的,可以考虑使用HIVE,但是至于有没有 ...
如题,目前的应用是: hdfs系统由3台slave和1台master构成,replication设置为2. 由flume将日志上传至该hdfs系统中。 最近, ...
最近测试,发现一个: 1、往hdfs上写60M大小的文件,dfs.replication设置为1: 使用1个datanode,该1个datanode下有60M数据; ...
目前我们可以看到HDFS把文件存储在了各个节点的Data文件夹下面。那么本人的是,能不能直接把写入到各个节点的data文件下面的文件 ...
想通过冗余编码的方法对它的原本的副本策略进行改造。有没有这样的切入点。希望高手指点迷津。。
在hdfs的namenode中主要存储了namespace(命名空间)和blockinfo(块信息),那么两者占整个namenode的内存空间的比例分别是多少 ...
我在linux上使用hdfs过程中,cpu占用率很高,无论是namenode还是datanode。 在namenode上put文件和get文件,cpu都跑到接近100% ...
请问hdfs的冗余数据在什么时候写入吗?,冗余的写入、修改和非冗余的写入修改过程是怎样的吗?
本版积分规则 发表帖子
查看 »